4.3 Żewġ dimensjonijiet ta 'esperimenti: laboratorju fil-post u Analog diġitali
Esperimenti Lab joffru kontroll, esperimenti qasam joffru realiżmu, u esperimenti qasam diġitali jikkombinaw kontroll u realiżmu fuq skala.
L-esperimenti jidħlu f'ħafna forom u daqsijiet differenti. Fil-passat, ir-riċerkaturi sabuha utli li torganizza esperimenti tul kontinwu bejn esperimenti tal-laboratorju u esperimenti fuq il - post . Issa, madankollu, ir-riċerkaturi għandhom ukoll jorganizzaw esperimenti tul it-tieni kontinwu bejn l -esperimenti analogi u l -esperimenti diġitali . Dan l-ispazju ta 'disinn bidimensjonali jgħinek tifhem il-qawwiet u n-nuqqasijiet ta' approċċi differenti u tenfasizza l-oqsma ta 'l-akbar opportunità (figura 4.1).
Figura 4.1: Skematika tal-ispazju tad-disinn għall-esperimenti. Fil-passat, l-esperimenti varjaw tul id-dimensjoni tal-lab-field. Issa, huma jvarjaw ukoll fuq id-dimensjoni Analog-diġitali. Dan l-ispazju tad-disinn bidimensjonali huwa illustrat b'erba 'esperimenti li niddeskrivi f'dan il-kapitolu. Fl-opinjoni tiegħi, iż-żona ta 'l-akbar opportunità hija l-esperimenti diġitali fuq il-post.
Dimensjoni waħda li fiha jistgħu jiġu organizzati esperimenti hija d-dimensjoni tal-kamp tal-laboratorju. Ħafna esperimenti fix-xjenzi soċjali huma esperimenti tal-laboratorju fejn studenti li għadhom ma ggradwawx iwettqu ħidmiet strambi f'laboratorju għal kreditu tal-kors. Dan it-tip ta 'esperiment jiddomina r-riċerka fil-psikoloġija għax jippermetti lir-riċerkaturi biex joħolqu settings ikkontrollati ħafna biex isolvu b'mod preċiż u jittestjaw teoriji speċifiċi dwar l-imġiba soċjali. Għal ċerti problemi, madankollu, xi ħaġa tħoss daqsxejn stramba dwar li tiġbed konklużjonijiet qawwija dwar l-imġieba tal-bniedem minn nies mhux tas-soltu bħal dawn li jwettqu kompiti mhux tas-soltu f'ambjent tant mhux tas-soltu. Dan it-tħassib wassal għal moviment lejn esperimenti fuq il-post . L-esperimenti fuq il-post jikkombinaw id-disinn qawwi ta 'esperimenti ta' kontroll randomised ma 'gruppi rappreżentattivi ta' parteċipanti li jwettqu aktar ħidmiet komuni f'ambjenti aktar naturali.
Għalkemm xi nies jaħsbu dwar l-esperimenti tal-laboratorju u fuq il-post bħala metodi kompetittivi, l-aħjar huwa li wieħed jaħseb bħala kumplimentari, b'livelli u dgħufijiet differenti. Pereżempju, Correll, Benard, and Paik (2007) użaw esperiment ta 'laboratorju u esperiment ta' kamp f'tentattiv biex isibu s-sorsi tal-penali tal-maternità. Fl-Istati Uniti, l-ommijiet jaqilgħu inqas flus minn nisa mingħajr tfal, anki meta tqabbil ta 'nisa b'ħiliet simili li jaħdmu f'impjiegi simili. Hemm ħafna spjegazzjonijiet possibbli għal dan il-mudell, li wieħed minnhom huwa li min iħaddem huwa preġudikat kontra l-ommijiet. (Interessanti, l-oppost jidher li hu veru għall-missirijiet: dawn għandhom it-tendenza li jaqilgħu aktar minn irġiel li mhumiex tfal komparabbli.) Sabiex tevalwa l-preġudizzju possibbli kontra l-ommijiet, Correll u kollegi kellhom żewġ esperimenti: wieħed fil-laboratorju u wieħed fil-qasam.
L-ewwel, f'esperiment tal-laboratorju qalu lill-parteċipanti, li kienu studenti universitarji li għadhom ma ggradwawx, li kumpanija kienet qed imexxi tfittxija għax-xogħol għal persuna biex tmexxi d-dipartiment il-ġdid tal-marketing tal-Lvant tagħha. L-istudenti ġew mgħarrfa li l-kumpanija riedu l-għajnuna tagħhom fil-proċess ta 'kiri, u ġew mitluba jirrevedu t-tkomplija ta' bosta kandidati potenzjali u jivvalutaw il-kandidati f'għadd ta 'dimensjonijiet, bħall-intelliġenza, sħana u impenn tagħhom għax-xogħol. Barra minn hekk, l-istudenti ġew mistoqsija jekk jirrakkomandaw li jikkuntrattaw l-applikant u liema huma jirrakkomandaw bħala salarju bażiku. Minkejja li l-istudenti ma kellhomx għarfien dwarhom, it-tkomplija tagħhom kienet mibnija speċifikament biex tkun simili ħlief għal ħaġa waħda: xi wħud minnhom wrew maternità (bl-involviment tal-lista f'assoċjazzjoni ġenitur-għalliem) u xi wħud ma kinux. Correll u l-kollegi sabu li l-istudenti kienu anqas probabbli li jirrakkomandaw il-kiri ta 'l-ommijiet u li huma offrewhom salarju inizjali iktar baxx. Barra minn hekk, permezz ta 'analiżi statistika kemm tal-klassifikazzjonijiet kif ukoll tad-deċiżjonijiet relatati ma' kiri, Correll u l-kollegi sabu li l-iżvantaġġi tal-ommijiet spjegaw fil-biċċa l-kbira tagħhom il-fatt li kienu kkalkulati inqas f'termini ta 'kompetenza u impenn. Għalhekk, dan l-esperiment tal-laboratorju ippermetta lil Correll u lill-kollegi jkejlu effett kawżali u jipprovdu spjegazzjoni possibbli għal dak l-effett.
Naturalment, wieħed jista 'jkun xettiku dwar kif joħroġ konklużjonijiet dwar is-suq tax-xogħol kollu ta' l-Istati Uniti bbażat fuq id-deċiżjonijiet ta 'ftit mijiet ta' studenti li għadhom ma ggradwawx li probabilment qatt ma kellhom impjieg full-time, aħseb u ara xi ħadd mikrijin. Għalhekk, Correll u l-kollegi wettqu esperiment ta 'qasam komplementari wkoll. Huma rrispondew għal mijiet ta 'ftuħ ta' impjiegi reklamati b'ittri fissi ta 'kopertura u jerġa' jibda. Simili għall-materjali murija lill-istudenti li għadhom ma ggradwawx, xi wħud jerġgħu jibdew maternità mmarkata u xi wħud ma kinux. Correll u l-kollegi sabu li l-ommijiet kienu anqas probabbli li jiġu msejħa lura għal intervisti minn nisa mingħajr tfal ikkwalifikati b'mod ugwali. Fi kliem ieħor, min iħaddem reali li jieħu deċiżjonijiet konsegwenzjali f'ambjent naturali ġab ruħu ħafna bħal dawk li għadhom ma ggradwawx. Għamlu deċiżjonijiet simili għall-istess raġuni? Sfortunatament, ma nafux. Ir-riċerkaturi ma setgħux jitolbu lil min iħaddem biex jikklassifika l-kandidati jew jispjega d-deċiżjonijiet tagħhom.
Dan il-par ta 'esperimenti juri ħafna dwar l-esperimenti tal-laboratorju u l-qasam b'mod ġenerali. L-esperimenti tal-laboratorju joffru riċerkaturi qrib il-kontroll totali tal-ambjent fejn il-parteċipanti qed jieħdu deċiżjonijiet. Allura, pereżempju, fl-esperiment tal-laboratorju, Correll u l-kollegi setgħu jiżguraw li l-fuljetti jerġgħu jinqraw f'ambjent kwiet; Fil-qasam esperiment, xi wħud mill-jerġgħu jibdew lanqas biss ikunu ġew jinqraw. Barra minn hekk, minħabba li l-parteċipanti fl-istabbiliment tal-laboratorju jafu li qed jiġu studjati, ir-riċerkaturi spiss jistgħu jiġbru dejta addizzjonali li tista 'tispjega għaliex il-parteċipanti qed jieħdu d-deċiżjonijiet tagħhom. Pereżempju, Correll u l-kollegi talbu lill-parteċipanti fl-esperiment tal-laboratorju biex jikklassifikaw il-kandidati fuq dimensjonijiet differenti. Dan it-tip ta ' dejta dwar il-proċess jista' jgħin lir-riċerkaturi biex jifhmu l-mekkaniżmi wara d-differenzi fil-mod kif il-parteċipanti jittrattaw jerġgħu jibdew
Min-naħa l-oħra, dawn l-istess karatteristiċi eżatti li għadni kif deskritti bħala vantaġġi huma kultant meqjusa bħala żvantaġġi. Ir-riċerkaturi li jippreferu esperimenti fuq il-post isostnu li l-parteċipanti f'esperimenti tal-laboratorju jistgħu jaġixxu b'mod differenti ħafna għax jafu li qed jiġu studjati. Pereżempju, fl-esperiment tal-laboratorju, il-parteċipanti setgħu qerdu l-għan tar-riċerka u bidlu l-imġieba tagħhom sabiex ma jidhrux preġudikati. Barra minn hekk, riċerkaturi li jippreferu esperimenti fuq il-post jistgħu jargumentaw li differenzi żgħar fit-tkomplija jistgħu jispikkaw biss f'ambjent tal-laboratorju nadif ħafna u sterili, u għalhekk l-esperiment tal-laboratorju jissuperah l-effett tal-maternità fuq deċiżjonijiet ta 'kiri reali. Fl-aħħarnett, ħafna proponenti ta 'esperimenti fuq il-post jikkritikaw id-dipendenza tal-esperimenti tal-laboratorju fuq parteċipanti ta' WEIRD: prinċipalment studenti minn pajjiżi tal-Punent, Edukati, Industrijalizzati, Rikki u Demokratiċi (Henrich, Heine, and Norenzayan 2010a) . L-esperimenti minn Correll u l-kollegi (2007) juru ż-żewġ estremi fuq il-kontinwu tal-laboratorju. F'dawn iż-żewġ estremi hemm ukoll varjetà ta 'disinni ibridi, inklużi approċċi bħal li jġib lin-non-studenti f'laboratorju jew li jmorru fil-qasam iżda li għad għandhom parteċipanti jagħmlu xogħol mhux tas-soltu.
Minbarra d-dimensjoni tal-lab-field li kienet teżisti fil-passat, l-era diġitali tfisser li r-riċerkaturi issa għandhom it-tieni dimensjoni ewlenija li fiha l-esperimenti jistgħu jvarjaw: Analog-diġitali. Hekk kif hemm esperimenti tal-laboratorju pur, esperimenti puri fuq kampi, u varjetà ta 'ibridi bejniethom, hemm esperimenti analogi puri, esperimenti puri diġitali u varjetà ta' ibridi. Huwa delikata li toffri definizzjoni formali ta 'din id-dimensjoni, iżda definizzjoni ta' ħidma utli hija li esperimenti kompletament diġitali huma esperimenti li jagħmlu użu minn infrastruttura diġitali biex jirreklutaw parteċipanti, randomised, iwasslu trattamenti, u jkejlu r-riżultati. Pereżempju, l-istudju ta 'Restivo u van de Rijt (2012) ta' barnstars u Wikipedia kien esperiment kompletament diġitali għax juża sistemi diġitali għall-erba 'minn dawn il-passi. Bl-istess mod, l -esperimenti b'analogu sħiħ ma jużawx l-infrastruttura diġitali għal kwalunkwe minn dawn l-erba 'passi. Ħafna mill-esperimenti klassiċi fil-psikoloġija huma kompletament analogi esperimenti. Bejn dawn iż-żewġ estremi, hemm esperimenti parzjalment diġitali li jużaw taħlita ta 'sistemi analogi u diġitali.
Meta xi nies jaħsbu dwar esperimenti diġitali, jaħsbu immedjatament ta 'esperimenti onlajn. Dan huwa ħasra għax l-opportunitajiet biex wieħed imexxi esperimenti diġitali mhumiex biss onlajn. Ir-riċerkaturi jistgħu jmexxu esperimenti parzjalment diġitali billi jużaw apparat diġitali fid-dinja fiżika sabiex iwasslu trattamenti jew ikejlu r-riżultati. Per eżempju, ir-riċerkaturi jistgħu jużaw smartphones biex iwasslu trattamenti jew sensers fl-ambjent mibni biex ikejlu r-riżultati. Fil-fatt, kif se naraw aktar tard f'dan il-kapitolu, ir-riċerkaturi diġà użaw meters tal-enerġija tad-dar biex ikejlu r-riżultati f'esperimenti dwar il-konsum tal-enerġija li jinvolvu 8.5 miljun dar (Allcott 2015) . Hekk kif l-apparati diġitali jsiru aktar integrati fil-ħajja tan-nies u s-sensuri jiġu integrati fl-ambjent mibni, dawn l-opportunitajiet biex imexxu esperimenti parzjalment diġitali fid-dinja fiżika se jiżdiedu b'mod drammatiku. Fi kliem ieħor, l-esperimenti diġitali mhumiex biss esperimenti onlajn.
Is-sistemi diġitali joħolqu possibbiltajiet ġodda għal esperimenti kullimkien tul il-kontinwu tal-laboratorju. F'esperimenti prattiċi tal-laboratorju, pereżempju, ir-riċerkaturi jistgħu jużaw sistemi diġitali għal kejl aktar fin ta 'l-imġiba tal-parteċipanti; Eżempju wieħed ta 'dan it-tip ta' kejl imtejjeb huwa t-tagħmir li jsegwi l-għajnejn li jipprovdi miżuri preċiżi u kontinwi tal-pożizzjoni tal-gaze. L-era diġitali toħloq ukoll il-possibbiltà li jsiru esperimenti simili fuq il-laboratorju online. Pereżempju, ir-riċerkaturi adottaw malajr Amazon Mechanical Turk (MTurk) biex jirreklutaw parteċipanti għal esperimenti onlajn (figura 4.2). MTurk jaqbel ma "dawk li jħaddmu" li għandhom ħidmiet li jeħtieġu li jitlestew bi "ħaddiema" li jixtiequ jlestu dawk il-ħidmiet għall-flus. B'differenza mis-swieq tax-xogħol tradizzjonali, madankollu, ix-xogħlijiet involuti ġeneralment jeħtieġu biss ftit minuti biex jitlestew, u l-interazzjoni sħiħa bejn min iħaddem u l-ħaddiem hija online. Minħabba li MTurk jimita aspetti ta 'esperimenti tal-laboratorju tradizzjonali - iħallas lin-nies biex iwettqu xogħlijiet li huma ma kinux se jagħmlu b'xejn - huwa adattat b'mod naturali għal ċerti tipi ta' esperimenti. Essenzjalment, MTurk ħoloq l-infrastruttura għall-ġestjoni ta 'grupp ta' parteċipanti - reklutaġġ u ħlas ta 'nies - u r-riċerkaturi ħadu vantaġġ minn dik l-infrastruttura biex tisfrutta ġabra dejjem disponibbli ta' parteċipanti.
Figura 4.2: Dokumenti ppubblikati bl-użu ta 'dejta minn Amazon Mechanical Turk (MTurk). MTurk u swieq oħra tax-xogħol onlajn joffru lir-riċerkaturi mod konvenjenti biex jirreklutaw parteċipanti għal esperimenti. Adattat minn Bohannon (2016) .
Is-sistemi diġitali joħolqu aktar possibiltajiet għal esperimenti simili. B'mod partikolari, jippermettu li r-riċerkaturi jikkombinaw id-data stretta ta 'kontroll u proċess li huma assoċjati ma' esperimenti tal-laboratorju ma 'parteċipanti aktar diversi u settings aktar naturali li huma assoċjati ma' esperimenti tal-laboratorju. Barra minn hekk, esperimenti diġitali fuq il-post joffru wkoll tliet opportunitajiet li kellhom diffikultà f'esperimenti analogi.
L-ewwelnett, filwaqt li l-biċċa l-kbira tal-laboratorji analogiċi u l-esperimenti fuq il-post għandhom mijiet ta 'parteċipanti, esperimenti diġitali fuq il-post jistgħu jkollhom miljun parteċipant. Din il-bidla fl-iskala hija minħabba li xi esperimenti diġitali jistgħu jipproduċu dejta b'inqas spejjeż varjabbli. Jiġifieri, ladarba r-riċerkaturi ħolqu infrastruttura sperimentali, iż-żieda fin-numru ta 'parteċipanti tipikament ma żżidx l-ispejjeż. Iż-żieda tan-numru ta 'parteċipanti b'fattur ta' 100 jew aktar mhix biss bidla kwantitattiva ; hija bidla kwalitattiva , minħabba li tippermetti li r-riċerkaturi jitgħallmu affarijiet differenti minn esperimenti (eż., eteroġeneità ta 'effetti ta' trattament) u biex imexxu disinji sperimentali għal kollox differenti (eż., esperimenti ta 'gruppi kbar). Dan il-punt huwa tant importanti, jien ser terġa 'lura għaliha lejn tmiem il-kapitolu meta nissuġġerixxi pariri dwar il-ħolqien ta' esperimenti diġitali.
It-tieni, filwaqt li l-biċċa l-kbira tal-esperti analogiċi tal-laboratorju u tal-kamp jittrattaw lill-parteċipanti bħala widgets indistingwibbli, esperimenti fuq kampi diġitali spiss jużaw informazzjoni ta 'sfond dwar parteċipanti fl-istadji tad-disinn u analiżi tar-riċerka. Din l-informazzjoni ta 'sfond, li tissejjaħ informazzjoni ta' qabel it-trattament , ħafna drabi hija disponibbli f'esperimenti diġitali għax huma mmexxija fuq sistemi ta 'kejl dejjem fuq (ara l-kapitolu 2). Pereżempju, riċerkatur fuq Facebook għandu ħafna aktar informazzjoni dwar it-trattament minn qabel dwar in-nies fl-esperiment ta 'qasam diġitali tagħha minn riċerkatur universitarju dwar in-nies fl-esperiment analogu tal-kamp tagħha. Dan it-trattament minn qabel jippermetti disinji sperimentali aktar effiċjenti - bħalma huma l-imblukkar (Higgins, Sävje, and Sekhon 2016) u r-reklutaġġ immirat tal-parteċipanti (Eckles, Kizilcec, and Bakshy 2016) u analiżi aktar (Eckles, Kizilcec, and Bakshy 2016) - bħalma hu stima tal-eteroġeneità tal- (Athey and Imbens 2016a) u aġġustament ta 'covariate għal preċiżjoni aħjar (Bloniarz et al. 2016) .
It-tielet, filwaqt li bosta analoġiċi tal-laboratorju u l-esperimenti fuq il-post iwasslu trattamenti u jkejlu r-riżultati f'ammont ta 'ħin relattivament ikkompressat, xi esperimenti diġitali fuq il-post jiġru f'ħinijiet ħafna itwal. Pereżempju, l-esperiment ta 'Restivo u van de Rijt kellu r-riżultat imkejjel kuljum għal 90 jum, u wieħed mill-esperimenti li ser ngħidilkom aktar tard fil-kapitolu (Ferraro, Miranda, and Price 2011) indirizzaw riżultati fuq tliet snin bażikament spiża. Dawn it-tliet opportunitajiet ta 'daqs, informazzjoni ta' trattament minn qabel, u trattament lonġitudinali u data ta 'riżultat jinqalgħu l-iktar meta l-esperimenti jitmexxew fuq sistemi ta' kejl dejjem fuq (ara kapitolu 2 għal aktar fuq sistemi ta 'kejl dejjem fuq).
Filwaqt li l-esperimenti diġitali fuq il-post joffru bosta possibbiltajiet, huma wkoll jaqsmu xi dgħjufijiet kemm mal-laboratorju Analog kif ukoll mal-esperimenti analogi fil-qasam. Pereżempju, l-esperimenti ma jistgħux jintużaw biex jistudjaw il-passat, u huma jistgħu jistmaw biss l-effetti tat-trattamenti li jistgħu jiġu manipulati. Ukoll, għalkemm l-esperimenti huma bla dubju utli biex jiggwidaw il-politika, il-gwida eżatta li jistgħu joffru hija pjuttost limitata minħabba kumplikazzjonijiet bħal dipendenza ambjentali, problemi ta 'konformità u effetti ta' ekwilibriju (Banerjee and Duflo 2009; Deaton 2010) . L-esperimenti fuq il-kamp diġitali jkabbru wkoll it-tħassib etiku maħluq mill-esperimenti fuq il-post - suġġett li ser nindirizza aktar tard f'dan il-kapitolu u fil-kapitolu 6.
