4.3 эксперименттердин эки өлчөмдөрү: Лаборатория-талаа жана аналогдук-санариптик

Лабораториялык эксперименттер көзөмөл сунуш, тажрыйбалар реалдуулук менен сунуш жана санариптик тажрыйбалар масштабы боюнча көзөмөлдү жана реалдуулук менен айкалыштырган.

Эксперименттер ар кандай калыптарга жана өлчөмдөрдө келет. Мурда изилдөөчүлөр пайдалуу лабораториялык тажрыйбаларды жана талаа эксперимент ортосунда үзгүлтүксүз бирге тажрыйба уюштуруу байкашкан. Азыр болсо, изилдөөчүлөр аналогдук жана санариптик эксперименттер эксперименттердин ортосунда экинчи континуум бирге эксперименттерди уюштурушу керек. Бул эки өлчөмдүү дизайн мейкиндик, сиз аларды ар кандай ыкмаларды күчтүү жана алсыз жактарын түшүнүү жана зор мүмкүнчүлүк (сүрөт 4.1) жерлерин баса жардам берет.

Figure 4.1: эксперименттердин үчүн долбоорлоо мейкиндигин БУУнун. Мурда, эксперименттер лаборатория-талаа өлчөмү менен бирге ар түрдүү. Эми алар да аналогдук-санариптик өлчөмү боюнча ар түрдүү. Бул эки өлчөмдүү дизайн орун Мен бул бөлүмдө баяндалат төрт эксперименттери менен көрүүгө болот. Менин оюмча, улуу мүмкүнчүлүк аянты санариптик тажрыйбалар болуп саналат.

эксперименттер уюштурулат турган бирге бир өлчөм лаборатория-талаа өлчөм болуп саналат. Коомдук илимдер боюнча көптөгөн эксперимент студенттер сабак кредити боюнча лаборатория башка милдеттерди аткарат лабораториялык тажрыйбалар бар. Ал окумуштуулар так коомдук жүрүм-турум тууралуу өзгөчө теорияларды обочолонуп, сынаш үчүн жогорку көзөмөлгө орнотууларды жаратууга мүмкүндүк берет, анткени, психология боюнча эксперимент бул түрү изилдөө басымдуулук кылат. белгилүү бир көйгөйлөр үчүн, бирок, бир нерсе, мисалы, өзгөчө жагдайда, мисалы, өзгөчө милдеттерди аткарууда, мисалы, өзгөчө элдин адамдын жүрүм-туруму тууралуу күчтүү жыйынтыктарды жөнүндө бир аз кызыктай сезилет. Бул маселелер талаа эксперимент карата жылышы алып келген. Талаа эксперименттер көбүрөөк жаратылыш шарттарында дагы жалпы милдеттерди жүзөгө катышуучуларынын көбүрөөк өкүлчүлүктүү топтор менен колдонуусу клиникалык башкаруу эксперименттери күчтүү дизайнын бириктиребиз.

кээ бир адамдар лабораториялык жана талаа тажрыйбаларды ыкмаларын атаандаш деп эсептешсе да, ар кандай күчтүү жана алсыз жактарын менен, кошумча деп ойлойбуз жакшы. Мисалы, Correll, Benard, and Paik (2007) да, балалуу аялдарга караганда бир лабораториялык эксперимент жана Америка Кошмо Штаттарында "салам жаза." Булактарын табуу аракетинде бир талаа эксперимент, энелер аз акча табуу да колдонгон окшош жумуштарда иштеген окшош тажрыйбасы бар аялдар салыштыруу. Бул үлгү, иш берүүчүлөр болуп саналат, алардын ичинен бир энелерине каршы жан анткени көп болушу мүмкүн. (Кызыктуусу, карама-каршы, ата-бабаларынын да тиешелүү болот окшойт. Алар окшош бала эркектерге караганда көп табышат): Лабораторияда бири тармагында бири-энелер каршы мүмкүн болушунча жан баа берүү максатында, Коррелл жана кесиптештер эки эксперименттер чуркап.

Биринчиден, лабораториялык экспериментте бир компания, анын жаңы East Coast маркетинг бөлүмү менен алып бир адам үчүн жумуш издөөнү жүргүзүү деп, колледж, магистранттары катышуучулардын билдирди. студенттер компания жумушка алууда жардам келип жатканын айтышты, алар бир нече болуучу талапкерлердин резюмелерин карап чыгуу үчүн, ошондой эле алардын акыл, чын ыкластуулук жана иштөө үчүн милдет катары бир катар өлчөмдөрү боюнча талапкерлерди баа берилди. Андан сырткары, студенттер жана өтүнүүчүгө жана алар баштап эмгек акы катары сунуш кылат эмне Жумушка сунуш кылат суралды. студенттер үчүн кетип, бирок, резюме, атайын бир нерсе башка окшош болуп курулган: алардын айрымдары эне ишара (бир ата-энелер жана мугалимдер бирикмесинин катышууну тизмесине) жана кээ бир эмес. Коррелл жана кесиптештер студенттер энелерге жумушка сунуш аз деп табылган жана аларга төмөнкү баштапкы акы деген. Андан тышкары, рейтингдер жана ишке орноштуруу менен байланышкан чечимдерди да статистикалык талдоо жүргүзүү аркылуу, Коррелл жана кесиптештери энелердин кемчиликтери негизинен алар ыйгарым жана берилгендик көрсөтүү жагынан төмөн баа менен түшүндүрсө деп табылган. Ошентип, бул лабораториялык эксперимент себеп болгон таасирин аныктоо жана бул үчүн мүмкүн түшүндүрмө берүү Коррелл жана кесиптештерибизге жол берген.

Албетте, бүткүл АКШ эмгек, балким, толук убакыт жумушта иштечү эмес, бир нече жүз Магистранттардын чечиминин негизинде базар тууралуу жыйынтыктарды санашкан болушу мүмкүн, жол бир гана бирөөнү жалдаган. Ошондуктан, Коррелл жана кесиптештери да кошумча талаа эксперимент жүргүзүлгөн. Алар жасалма коштомо кат менен ачып берүү менен рекламалоого иш тешиктери жүздөгөн жооп берди. Магистранттардын көрсөтүлгөн материалдарды эле, кээ бир Резюме эне ишара жана кээ бир эмес. Коррелл жана кесиптештер энелер аз бирдей квалификациялуу балалуу аялдарга караганда маектешүү үчүн кайра чакырып алуу үчүн мүмкүн болгон эмес. Башка сөз менен айтканда, табигый жагдайда натыйжалардын негизинде чечимдерди кабыл алуу реалдуу иш берүүчүлөр көп Магистранттардын сыяктуу иш. Алар ошол себептен ушундай чечим кабыл алат беле? Тилекке каршы, биз билбейбиз. изилдөөчүлөр талапкерлерди баалап же чечимди түшүндүрүп берүү үчүн иш берүүчүлөрдү суроо бере алышкан жок.

эксперименттердин бул жуп жалпы лабораториялык жана талаа эксперименттери жөнүндө көп нерсени билүүгө болот. Лабораториялык эксперимент изилдөөчүлөрдүн катышуучулар чечим кабыл алган айлана-чөйрөгө жакын жалпы көзөмөл сунуш. Ошондуктан, мисалы, лабораториялык экспериментте, Коррелл жана кесиптештери бардык Резюме тынч шартта окуп жатканын камсыз кылууга жөндөмдүү болгон; талаа экспериментте, жандана баштаган кээ бир да окуп калышы мүмкүн. Андан тышкары, лабораториялык шартта катышуучулары, алар изилдеп жатканын билебиз, анткени изилдөөчүлөр көбүнчө катышуучулары, алардын туура чечим чыгарууга эмне жардам берет кошумча маалыматтарды чогулта алат. Мисалы, Коррелл жана кесиптештер ар кандай багыттары боюнча талапкерлерди баа лабораториялык экспериментте катышуучуларын сурады. Технологиялык маалыматтарды ушундай изилдөөчүлөр катышуучулары резюме кандай айырмачылыктарга артында механизмдерин түшүнүүгө жардам бере алган жок.

Башка жагынан алганда, мен артыкчылык деп аташкан бул так ушундай эле мүнөздөмөсү да, кээде терс жактары каралат. талаа эксперименттер артык Окумуштуулар алар изилденип жатканын билебиз, анткени лабораториялык тажрыйбаларды катышуучулары такыр башкача иш-аракет болушу мүмкүн деп ырасташат. Мисалы, лабораториялык экспериментте, катышуучулары изилдөө максат койгом жана жан пайда болгон эмес, ошондой эле, алардын жүрүм-турумун өзгөртүп мүмкүн. Андан тышкары, кабар айтуу эксперименттер ачып ошол кичинекей айырмачылыктарды деши мүмкүн артык изилдөөчүлөр гана өтө таза, тукумсуз лаборатория шарттарында туруштук бере алат, ошентип, лабораториялык эксперимент реалдуу ишке кабыл алынган чечимдер боюнча эне таасирин жетишсиз болот. Акыр-аягы, талаа тажрыйба көптөгөн жактоочулары, лабораториялык да экспериментти "таянуу кызыктай катышуучулардын сын: Батыш негизинен студенттер, илим-билимдүү, Өнөр, бай жана демократиялык өлкөлөрдүн (Henrich, Heine, and Norenzayan 2010a) . Коррелл жана кесиптештер менен тажрыйба (2007) лабораториялык-талаа континуум боюнча эки өтө жакшы мисал. Ушул эки чет нерсенин ортосунда мындай эмес студенттерге Лабораторияны салып алып, же талаага барып, бирок дагы эле бар катышуучулары өзгөчө тапшырманы аткарууга да, анын ичинде ыкмалар ар түрдүү, алп үлгүлөрү бар.

аналогдук-санариптик: Мурун бар лаборатория-талаа ченемине Мындан сырткары, санариптик жаш изилдөөчүлөр эми тажрыйба ар кандай мүмкүн болгон бирге экинчи ири өлчөм бар экенин билдирет. таза лабораториялык тажрыйбалар, таза тажрыйбалар жана алардын ортосундагы гибриддерди сорту бар эле, таза аналогдук эксперимент, таза санариптик эксперимент жана гибриддерди сорту бар. Бул өлчөм расмий аныктама сунуш татаал, бирок, бир пайдалуу иш аныктамасы, катышуучуларды тартуу randomize дарылоонун жеткирүү жана натыйжаларды өлчөө үчүн санариптик ички түзүмү толугу менен санариптик эксперименттер колдонуу эксперимент болуп саналат. Мисалы, Restivo жана де Rijt болгон (2012) бул кадамдардын төрт үчүн санариптик системасын колдонгон, анткени barnstars жана Wikipedia бир толугу менен санариптик эксперименти изилдөө. Ошо сыяктуу эле, толугу менен аналогдук эксперименттер бул төрт кандайдыр бир кадамдарды үчүн санариптик ички түзүмү менен колдоно албай келишет. психология боюнча классикалык эксперименттердин көбү толук аналогдук эксперименттер бар. Бул эки аша ортосунда, аналогдук жана санариптик системасынын биргелешип жарым-жартылай санариптик эксперименттер бар.

кээ бир адамдар санариптик тажрыйбаларды деп ойлойм, алар ошол замат онлайн эксперименттердин деп ойлойм. Бул жөн гана Интернет санариптик эксперимент эмес, аткаруу үчүн мүмкүнчүлүктөр, анткени абдан өкүнүчтүү. Окумуштуулар дарылоо жеткирүү же натыйжаларын өлчөө үчүн физикалык дүйнөдө санариптик аппараттарды колдонуу менен жарым-жартылай санариптик эксперименттер иштете аласыз. Мисалы, изилдөөчүлөр натыйжаларын өлчөө үчүн жасалган чөйрөдө дарылоо же датчиктер куткаруу үчүн уюлдук тийиши мүмкүн. Чынында эле, биз бул бөлүмдө Кийинчерээк биле турганыбыздай, изилдөөчүлөр буга чейин 8,5 миллион чарбаны бириктирген энергия керектөө жөнүндө эксперименттерде натыйжаларын өлчөө үчүн үй электр метр колдонгон (Allcott 2015) . санариптик аппараттар улам адамдардын өмүрүнө жана сезүүчү курулган чөйрөгө аралаша болуп бириктирилген, бул мүмкүнчүлүктөр физикалык дүйнөдө жарым-жартылай санариптик эксперименттерди жүргүзүү үчүн кескин жогорулайт. Башка сөз менен айтканда, санариптик эксперименттер эле онлайн эксперименттер эмес.

Digital системалар жерде лаборатория-талаа континуум катар эксперимент үчүн жаңы мүмкүнчүлүктөрдү түзөт. таза лабораториялык тажрыйбаларды, мисалы, изилдөөчүлөр катышуучуларынын жүрүм-кылдат өлчөө үчүн санариптик системалар менен колдоно аласыз; жакшыртылган өлчөө бул түрү бир мисал тигилип жерге так жана үзгүлтүксүз иш-чараларды камсыз көз-байкоо жабдуулары болуп саналат. санариптик жашы да онлайн лаборатория сыяктуу эксперименттер чуркап мүмкүнчүлүгүн түзөт. Мисалы, изилдөөчүлөр онлайн эксперимент (4.2-сүрөт) үчүн катышуучуларды тартуу үчүн тез Amazon механикалык турк (MTurk) кабыл алышкан. MTurk акча ошол милдеттерди аткарууну каалайбыз "жумуш", "жумушчу" менен аякташы керек милдеттерди да дал келет. салттуу эмгек рынокторунда айырмаланып, бирок, адатта, милдеттери аягына чейин чыгаруу үчүн бир нече мүнөт талап кылынат, ал эми иш берүүчү менен кызматкердин ортосундагы бардык өз ара онлайн. элди салттуу лабораториялык тажрыйбаларды-төлөөгө MTurk опокшош аспектилери, алар үчүн эмне кыла алмак эмес милдеттерди аткарууну Анткени эркин, ал табигый эксперименттердин айрым түрлөрү үчүн ылайыкташтырылып жаратылган. Чындыгында, MTurk катышуучулары-аскерге бир көлмө башкаруу жана эл-жана изилдөөчүлөр катышуучуларынын ар дайым жеткиликтүү көлмөгө таптап, ошол ички түзүмү кызыкчылыгыбызга колдонгон жокпуз төлөө үчүн объектилерди жараткан.

4.2-сүрөт: жыйнагы Amazon механикалык түрк (MTurk) маалыматтарын пайдалануу менен жарыяланган. MTurk жана башка онлайн эмгек рыноктору изилдөөчүлөрдүн тажрыйба үчүн катышуучуларды тартуу үчүн ыңгайлуу ыкмасы. Рубрикасына Bohannon (2016) .

Digital системалары кабар айтуу сыяктуу эксперименттердин да көбүрөөк мүмкүнчүлүктөрдү түзөт. Атап айтканда, алар лабораториялык эксперимент менен байланышкан ар түрдүү катышуучуларынын жана жаратылыш шарттарында менен лабораториялык тажрыйбаларды менен байланышкан бекем көзөмөл жана технологиялык маалыматтарды айкалыштырууга мүмкүндүк. Мындан сырткары, санариптик тажрыйбалар, ошондой эле аналогдук эксперименттерде татаал күйүп үч мүмкүнчүлүк беришет.

Биринчиден, аналогдук лаборатория жана тажрыйбалар катышуучуларынын жүздөгөн бар, ал эми санариптик тажрыйбалар катышуучуларынын миллиондогон болушу мүмкүн. масштабда Бул өзгөрүү санариптик эксперимент нөл өзгөрмө наркы боюнча маалыматтарды алып турууга мүмкүн эмес. Бул изилдөөчүлөр катышуучулардын саны, адатта, наркын көбөйтүү эмес, өсүп, эксперименталдык объектилерди түзгөн бир жолу болуп саналат. 100 же андан ашык бир таасирдин катышуучуларынын санын көбөйтүү бир сандык өзгөрүү эмес; Бул эксперименттердин ар кандай нерселерди билүү үчүн (мисалы, дарылоо таасирин эместигин) жана башка эксперименттик долбоорлорду (мисалы, чоң-топ эксперименттери) чуркап изилдөөчүлөр берет, анткени, сапаттык өзгөрүү болот. Бул жерде абдан маанилүү болгондуктан, мен санариптик эксперименттер түзүү тууралуу пикирин алып, бөлүмдүн аягында ал кайтып келет.

Экинчиден, ал эми көпчүлүк аналогдук лаборатория жана тажрыйбалар катышуучулардын десек алигиге чейин санариптик тажрыйбалар көп изилдөө долбоорлоо жана талдоо этаптары катышуучулары жөнүндө маалыматтарды колдонуу мамиле. Алар ар дайым боюнча өлчөө системалары (2-бөлүмүн карагыла) үстүнө жаткан, анткени бул негизги маалымат, алдын-ала дарылоо маалымат, көп учурда санариптик тажрыйба бар деп аталат. Мисалы, Facebook бир изилдөөчү бир университет изилдөөчү анын аналогдук талаа эксперимент адамдарга караганда өзүнүн санариптик талаа экспериментте адамдар тууралуу көп алдын-ала дарылоо маалыматтар бар. Бул алдын-ала дарылоо дагы бөгөт катары натыйжалуу тажрыйба сыяктуу долбоорлорду берет (Higgins, Sävje, and Sekhon 2016) жана максаттуу катышуучуларынын кызматка (Eckles, Kizilcec, and Bakshy 2016) , ошондой эле дагы кыраакы талдоо сыяктуу дарылоо таасирлер кошкондукту баалоо катары (Athey and Imbens 2016a) жакшыртылган тактык жана covariate жөнгө салуу (Bloniarz et al. 2016) .

Үчүнчүдөн, көптөгөн аналогдук лаборатория жана тажрыйбалар убакыттын салыштырмалуу кысылган өлчөмүндө дарылоонун жана чара натыйжаларын сактап, ал эми кээ бир санариптик тажрыйбалар үстүнөн көп убакыт мөөнөттөрдө кайрыла болот. Мисалы, Restivo жана де Rijt эксперименти жыйынтыгы 90 күн бою ченегенде, мен жөнүндө кийинки бөлүмдө сага айтам тажрыйбалардын бири болгон (Ferraro, Miranda, and Price 2011) , негизинен, үч жылдан бери жыйынтыктарын байкоо жок наркы. Бул үч мүмкүнчүлүктөр-өлчөмү, алдын алуу, маалымат жана узунунан кеткен дарылоо жана жалпы жыйынтык маалымат пайда болгондо, эксперименттер өлчөө дайыма боюнча системалардын үстүндө иштеп жаткан (өлчөө системалары боюнча ар дайым көбүрөөк 2-бөлүмүн карагыла).

санариптик тажрыйбалар көптөгөн мүмкүнчүлүктөрдү сунуш, ошол эле учурда окшош лабораторияга жана аналогдук талаа эксперименттер менен кээ бир алсыз бөлүшүү. Мисалы, эксперимент өткөндү изилдеп пайдаланылышы мүмкүн эмес жана алар гана башкара алат дарылоо таасирин баалоого болот. Мындан тышкары, эксперимент, албетте, саясат туура жолго салуу үчүн пайдалуу болсо да, так-нускоочу көрсөтмөнү, анткени алар, мисалы, курчап турган чөйрөнү коргоо боюнча көз карандылык катары тата- аз чектелген, сактоо көйгөйлөрү жана салмактуулук таасири сунуш кыла алат (Banerjee and Duflo 2009; Deaton 2010) . Digital тажрыйбалар, ошондой эле бул бөлүмдө жана 6-бөлүмдөн кийин кайрылса болот тажрыйбалар-тема боюнча түзүлгөн этикалык маселелерди коёт.