4.3 Żewġ dimensjonijiet ta 'esperimenti: laboratorju fil-post u Analog diġitali

Esperimenti Lab joffru kontroll, esperimenti qasam joffru realiżmu, u esperimenti qasam diġitali jikkombinaw kontroll u realiżmu fuq skala.

Esperimenti jaqgħu fil-forom u daqsijiet differenti ħafna. Iżda, minkejja dawn id-differenzi, ir-riċerkaturi sabu utli li jiġu organizzati esperimenti hija proċess kontinwu bejn esperimenti tal-laboratorju u l-esperimenti fuq il-post. Issa, madankollu, ir-riċerkaturi għandhom jorganizzaw ukoll esperimenti hija proċess kontinwu bejn esperimenti analoga u esperimenti diġitali. Dan l-ispazju tad-disinn ta 'żewġ dimensjonijiet ser jgħinek tifhem l-saħħiet u djufijiet ta' approċċi differenti u jissuġġerixxu oqsma bl-akbar opportunità (Figura 4.1).

Figura 4.1: Skematika ta 'spazju tad-disinn għall-esperimenti. Fil-passat, esperimenti varjat tul il-dimensjoni laboratorju-qasam. Issa, dawn ivarjaw ukoll fuq id-dimensjoni-Analog diġitali. Fl-opinjoni tiegħi, iż-żona tal-ikbar opportunità hija esperimenti qasam diġitali.

Fil-passat, il-mod prinċipali li r-riċerkaturi organizzata esperimenti kienet tul il-dimensjoni laboratorju-qasam. Il-maġġoranza ta 'esperimenti fix-xjenzi soċjali huma esperimenti tal-laboratorju fejn l-istudenti li għadhom ma ggradwawx jwettqu kompiti stramba fil-lab għall-kreditu kors. Dan it-tip ta 'esperiment jiddomina riċerka fil-psikoloġija għaliex tippermetti lir-riċerkaturi li joħolqu trattamenti speċifiċi ħafna mfasslin biex jittestjaw teoriji speċifiċi ħafna dwar l-imġiba soċjali. Għal ċerti problemi, madankollu, xi ħaġa tħoss daqsxejn stramba dwar tfassil konklużjonijiet stretti dwar l-imġiba tal-bniedem minn dawn in-nies mhux tas-soltu li jwettqu kompiti bħal dawn mhux tas-soltu fil tali iffissar mhux tas-soltu. Dan it-tħassib wasslu għal moviment lejn esperimenti qasam. esperimenti Qasam jikkombinaw it-tfassil qawwi ta 'esperimenti ta' kontroll randomised b'aktar gruppi rappreżentattivi ta 'parteċipanti, li jwettqu kompiti aktar komuni, f'ambjenti aktar naturali.

Għalkemm xi nies jaħsbu ta 'laboratorju u l-qasam esperimenti bħala metodi li jikkompetu, huwa aħjar li jaħsbu minnhom bħala metodi kumplimentari ma' saħħiet u dgħjufijiet differenti. Per eżempju, Correll, Benard, and Paik (2007) użat kemm esperiment laboratorju u esperiment qasam f'tentattiv biex isibu l-għejun ta 'l-"penali maternità." Fl-Istati Uniti, l-ommijiet jaqilgħu inqas flus milli nisa childless, anki meta jqabbel nisa b'ħiliet simili li jaħdmu f'impjiegi simili. Hemm spjegazzjonijiet possibbli ħafna għall dan il-mudell, u waħda hija li min iħaddem ikun preġudikata kontra l-ommijiet. (Interessanti, l-oppost jidher li jkun veru għall-missirijiet: dawn għandhom tendenza li jaqilgħu aktar mill-irġiel childless komparabbli). Sabiex jiġi evalwat xaqlib possibbli kontra l-ommijiet, Correll u l-kollegi dam żewġ esperimenti: wieħed fil-laboratorju u wieħed fil-qasam.

L-ewwel, f'esperiment laboratorju Correll u l-kollegi qal parteċipanti, li kienu għadhom ma ggradwawx kulleġġ, li kumpannija ta 'komunikazzjoni tal-bidu California bbażati fuq il-aħħar għamel tfittxija impjieg għal persuna li twassal dipartiment ġdid tagħha fis-suq East Coast. L-istudenti qalulhom li l-kumpanija riedet għajnuna tagħhom fil-proċess ta 'kiri u kienu mitluba biex tirrevedi jerġa' jibda 'diversi kandidati potenzjali u biex ir-rata l-kandidati fuq numru ta' dimensjonijiet bħal intelliġenza tagħhom, sħana, u l-impenn biex jaħdmu. Barra minn hekk, l-istudenti ġew mistoqsija jekk huma jirrakkomandaw l-ingaġġ tar-rikorrenti u dak li jirrakkomanda bħala salarju bażiku. Unbeknownst lill-istudenti, madankollu, il-jerġa 'jibda kienu speċifikament mibnija biex ikunu simili ħlief għal ħaġa waħda: xi wħud mill-terġa senjalat maternità (bl-elenkar involviment assoċjazzjoni ġenitur għalliem) u xi ma. Correll sabet li l-istudenti kienu anqas probabbli li jirrakkomandaw l-ingaġġar l-ommijiet u tahom aktar baxx salarju tal-bidu. Barra minn hekk, permezz ta 'analiżi statistika ta' kemm il-klassifikazzjonijiet u d-deċiżjonijiet relatati mal-kiri, Correll sabet li l-iżvantaġġi ommijiet kienu ġeneralment spjegata mill-fatt li l-ommijiet kienu ratat aktar baxx f'termini ta 'kompetenza u l-impenn. Fi kliem ieħor, Correll targumenta li dawn il-karatteristiċi huma l-mekkaniżmu li permezz tiegħu l-ommijiet huma żvantaġġati. Għalhekk, dan l-esperiment laboratorju permess Correll u l-kollegi biex jitkejjel effett kawżali u tipprovdi spjegazzjoni possibbli għal dak l-effett.

Naturalment, wieħed jista 'jkun skeptical dwar jisiltu konklużjonijiet dwar is-suq kollu tax-xogħol Istati Uniti bbażata fuq id-deċiżjonijiet ta' ftit mijiet ggradwawx li probabbilment qatt ma kellhom xogħol full-time, aħseb u ara mikrija nies. Għalhekk, Correll u l-kollegi wettaq ukoll esperiment qasam komplimentari. Ir-riċerkaturi wieġbet għal mijiet ta 'opportunitajiet tax-xogħol reklamati billi tibgħat ittri tkopri foloz u jerġa' jibda. Simili għall-materjali murija lill-ggradwawx, xi jerġa 'jibda senjalat maternità u xi ma. Correll u l-kollegi sabet li l-ommijiet kellhom inqas probabbli li jkollhom jissejjaħ lura għal intervisti minn nisa childless ugwalment kwalifikati. Fi kliem ieħor, dawk li jħaddmu reali teħid deċiżjonijiet konsegwenzjali fl-iffissar naturali ruħu ħafna bħall-ggradwawx. Did jagħmlu deċiżjonijiet simili għall-istess raġuni? Sfortunatament, ma nafux. Ir-riċerkaturi ma kinux f'pożizzjoni li titlob lill-impjegaturi biex ir-rata l-kandidati jew jispjega d-deċiżjonijiet tagħhom.

Dan il-par ta 'esperimenti turi ħafna dwar laboratorju u l-qasam esperimenti in ġenerali. esperimenti Lab joffru riċerkaturi qrib kontroll totali ta 'l-ambjent li fih il-parteċipanti qed jagħmlu deċiżjonijiet. Għalhekk, per eżempju, fl-esperiment laboratorju, Correll kienet kapaċi jiżgura li l-terġa kienu jinqraw fid-iffissar kwiet; fl-esperiment qasam, xi wħud mill-jerġa 'jibda jista' ma saħansitra ġew jinqara. Barra minn hekk, minħabba li l-parteċipanti fl-istabbiliment laboratorju jafu li qed jiġu studjati, ir-riċerkaturi ħafna drabi huma kapaċi li jiġbru dejta addizzjonali li jista 'jgħinhom jifhmu għaliex il-parteċipanti qed jagħmlu d-deċiżjonijiet tagħhom. Per eżempju, Correll talab parteċipanti fl-esperiment laboratorju li rata kandidati dwar dimensjonijiet differenti. Dan it-tip ta 'dejta proċess jista' jgħin riċerkaturi jifhmu l-mekkaniżmi wara differenzi fil-mod kif il-parteċipanti jittrattaw il-jerġa 'jibda.

Min-naħa l-oħra, dawn l-istess karatteristiċi eżatt li jien biss deskritti bħala benefiċċji huma wkoll kultant meqjusa żvantaġġi. Riċerkaturi li jippreferu esperimenti qasam jargumentaw li l-parteċipanti f'esperimenti lab jista 'jaġixxi b'mod differenti ħafna meta jkunu qed jiġu osservati mill-qrib. Per eżempju, fil-laboratorju parteċipanti esperiment jista 'jkollok guessed l-għan tar-riċerka u l mibdula imġieba tagħhom sabiex ma jidher preġudikata. Barra minn hekk, ir-riċerkaturi li jippreferu esperimenti qasam jista 'jargumenta li d-differenzi żgħar fuq jerġa' jibda 'biss jispikkaw f'ambjent nadif ħafna laboratorju sterili, u b'hekk l-esperiment laboratorju se over-stima tal-effett tal-maternità fuq deċiżjonijiet kiri reali. Fl-aħħarnett, ħafna proponenti ta 'esperimenti qasam jikkritika esperimenti tal-laboratorju dipendenza fuq il-parteċipanti stramb: prinċipalment studenti minn Punent, Edukati, industrijalizzati, Rich, u pajjiżi Demokratika (Henrich, Heine, and Norenzayan 2010) . L-esperimenti billi Correll u l-kollegi (2007) juru ż-żewġ estremitajiet fuq il-continuum laboratorju-qasam. Fil bejn dawn iż-żewġ estremi hemm varjetà ta 'disinji ibridi inklużi approċċi bħal ma huma jġibu non-istudenti fi laboratorju jew li jmorru fil-qasam imma xorta jkollhom il-parteċipanti jwettqu kompitu mhux tas-soltu.

Minbarra l-dimensjoni laboratorju-qasam li ilha teżisti fil-passat, l-era diġitali jfisser li r-riċerkaturi issa għandhom it-tieni dimensjoni ewlenija tul li esperimenti jistgħu jvarjaw:-Analog diġitali. Just kif hemm esperimenti pur laboratorju, esperimenti qasam pur, u varjetà ta 'ibridi bejn, hemm esperimenti pur Analog, esperimenti diġitali pur, u varjetà ta' ibridi. Huwa diffiċli li joffri definizzjoni formali ta 'din id-dimensjoni, iżda definizzjoni ta' ħidma utli hija li l-esperimenti kollha diġitali huma esperimenti li jagħmlu użu ta 'infrastruttura diġitali biex jirreklutaw parteċipanti, randomize, jagħti trattamenti, u kejjel ir-riżultati. Per eżempju, Restivo u van de Rijt tal (2012) studju ta barnstars u Wikipedija kien esperiment totalment diġitali għax użat sistemi diġitali għall-erba 'dawn il-passi. Bl-istess mod sħiħ esperimenti Analog huma esperimenti li ma jagħmlux użu tal-infrastruttura diġitali għal kwalunkwe minn dawn l-erba 'passi. Ħafna mill-esperimenti klassika fil-psikoloġija huma esperimenti Analog. Fil bejn dawn iż-żewġ estremi hemm parzjalment esperimenti diġitali li jużaw taħlita ta 'sistemi Analog u diġitali għall-erba' passi.

B'mod kritiku, l-opportunitajiet biex imexxu esperimenti diġitali huma mhux biss fuq l-internet. Riċerkaturi tista 'taħdem esperimenti parzjalment diġitali billi jużaw apparat diġitali fid-dinja fiżika sabiex twassal trattamenti jew miżura riżultati. Per eżempju, ir-riċerkaturi jistgħu jużaw smart phones li jagħti trattamenti jew sensuri fl-ambjent mibni biex tkejjel ir-riżultati. Fil-fatt, kif se naraw aktar tard f'dan il-kapitolu, ir-riċerkaturi diġà użaw miters ta 'enerġija dar biex ikejlu r-riżultati f'esperimenti dwar normi soċjali u l-konsum tal-enerġija li jinvolvu 8500000 tad-djar (Allcott 2015) . Kif apparati diġitali jintegraw ruħhom dejjem iktar fil-ħajja tan-nies u sensuri jintegraw ruħhom fl-ambjent mibni, dawn l-opportunitajiet biex imexxu esperimenti parzjali diġitali fid-dinja fiżika se jiżdied b'mod drammatiku. Fi kliem ieħor, esperimenti diġitali huma mhux biss esperimenti fuq l-internet.

sistemi diġitali joħolqu possibilitajiet ġodda għall-esperimenti kullimkien tul il-continuum laboratorju-qasam. F'esperimenti laboratorju pur, per eżempju, ir-riċerkaturi jistgħu jużaw sistemi diġitali għall-kejl ifjen tal-imġiba tal-parteċipanti; Eżempju wieħed ta 'dan it-tip ta' kejl imtejjeb huwa eye tracking apparat li jipprovdi miżuri preċiżi u kontinwi ta 'lokazzjoni gaze. L-era diġitali toħloq ukoll il-possibbiltà biex imexxu esperimenti-laboratorju simili fuq l-internet. Per eżempju, ir-riċerkaturi adottaw malajr Amażonja Turk mekkanika (MTurk) biex jirreklutaw parteċipanti għal esperimenti fuq l-internet (Figura 4.2). MTurk logħbiet "ta 'min iħaddem" li għandhom kompiti li jeħtieġ li jitlestew ma' "ħaddiema" li jixtiequ li dawk il-ħidmiet għall-flus. B'differenza swieq tax-xogħol tradizzjonali, madankollu, il-kompiti involuti normalment jeħtieġu biss ftit minuti biex jitlesta u l-interazzjoni kollu bejn minn iħaddem u l-ħaddiem ikun virtwali. Minħabba li aspetti jimita MTurk tal-laboratorju esperimenti li jħallsu tradizzjonali nies biex twettaq il-ħidmiet li ma kinux ser jagħmlu mingħajr ħlas 'dan huwa naturalment adatta għal ċerti tipi ta' esperimenti. Essenzjalment, MTurk ħolqot l-infrastruttura għall-ġestjoni ta 'grupp ta' parteċipanti 'reklutaġġ u ta' ħlas fuq il-persuni u r-riċerkaturi ħadu vantaġġ minn din l-infrastruttura biex jiġi sfruttat pool dejjem disponibbli tal-parteċipanti.

Figura 4.2: Dokumenti ippubblikat jużaw data mill-Amażonja Turk mekkanika (MTurk) (Bohannon 2016) . MTurk u swieq oħra tax-xogħol online joffru riċerkaturi mod konvenjenti biex jirreklutaw parteċipanti għal esperimenti.

esperimenti diġitali toħloq saħansitra aktar possibilitajiet għal esperimenti fil-post simili. esperimenti qasam diġitali jistgħu joffru dejta ta 'kontroll u l-proċess stretta biex jifhmu mekkaniżmi possibbli (bħal esperimenti tal-laboratorju) u parteċipanti aktar diversa teħid deċiżjonijiet reali f'ambjent naturali (bħal esperimenti qasam). B'żieda ma 'dan taħlita ta' karatteristiċi tajbin ta 'esperimenti preċedenti, esperimenti qasam diġitali toffri wkoll tliet opportunitajiet li kienu diffiċli laboratorju u l-qasam esperimenti Analog.

L-ewwel, billi ħafna mill-Analog laboratorju u l-qasam esperimenti jkollhom mijiet ta 'parteċipanti, esperimenti qasam diġitali jista' jkollhom miljuni ta 'parteċipanti. Din il-bidla fl-iskala huwa minħabba li xi esperimenti diġitali jistgħu jipproduċu d-data mingħajr spejjeż varjabbli. Dan huwa, ladarba r-riċerkaturi ħolqu infrastruttura sperimentali, jiżdied in-numru ta 'parteċipanti tipikament ma jżidu l-ispiża. Żieda fl-għadd ta 'parteċipanti b'fattur ta' 100 jew aktar mhux biss bidla kwantitattiva, din hija bidla kwalitattiva, għaliex tippermetti lir-riċerkaturi li jitgħallmu affarijiet differenti minn esperimenti (eż eteroġeneità tal-effetti tat-trattament) u mmexxija disinji sperimentali kompletament differenti ( eż, esperimenti grupp kbir). Dan il-punt huwa tant importanti, I ser jirritorna lejha lejn l-aħħar tal-kapitolu meta I joffru pariri dwar il-ħolqien esperimenti diġitali.

It-tieni nett, billi ħafna mill-Analog laboratorju u l-qasam esperimenti jittrattaw parteċipanti kif widgets indistingwibbli, esperimenti qasam diġitali spiss jużaw informazzjoni ta 'sfond dwar il-parteċipanti fl-istadji tad-disinn u analiżi tar-riċerka. Din l-informazzjoni ta 'sfond, li hija imsejħa informazzjoni pre-trattament, spiss huwa disponibbli fl-esperimenti diġitali għax iseħħu fl-ambjenti imkejla bis-sħiħ. Per eżempju, riċerkatur fl Facebook tkun aktar informazzjoni pre-trattament minn riċerkatur tfassil ta 'esperiment laboratorju standard ggradwawx. Din l-informazzjoni pre-trattament jippermetti lir-riċerkaturi li nimxu lil hinn trattament parteċipanti widgets bħala indistingwibbli. B'mod aktar speċifiku, l-informazzjoni pre-trattament jagħmilha possibbli għal disinji bħal aktar effiċjenti sperimentali li bħala imblukkar (Higgins, Sävje, and Sekhon 2016) u r-reklutaġġ immirat tal-parteċipanti (Eckles, Kizilcec, and Bakshy 2016) -u analiżi bħal aktar insightful huma istima tal eteroġeneità ta 'effetti tat-trattament (Athey and Imbens 2016a) u l-aġġustament ko-varjant ta' preċiżjoni mtejba (Bloniarz et al. 2016) .

It-tielet, billi ħafna laboratorju analoga u kamp esperimenti jagħti trattamenti u r-riżultati miżura fl-ammont relattivament kompressat ta 'żmien, xi esperimenti qasam diġitali tinvolvi trattamenti li jistgħu jitwettqu matul iż-żmien u l-effetti jistgħu wkoll jitkejlu matul iż-żmien. Per eżempju, Restivo u van de Rijt tal-esperiment għandu l-eżitu mkejla kuljum għal 90 jum, u wieħed mill-esperimenti jien ser jgħidlek dwar aktar tard fil-kapitolu (Ferraro, Miranda, and Price 2011) tracks riżultati fuq 3 snin fl bażikament l-ebda ispiża. Dawn it-tliet opportunitajiet ta 'daqs, informazzjoni qabel il-kura, u t-trattament lonġitudinali u eżitu tad-data' huma l-aktar komuni meta esperimenti huma mmexxija fuq quċċata ta 'dejjem fuq is-sistemi ta' kejl (ara l-Kapitolu 2 għal aktar fuq dejjem fuq sistemi ta 'kejl).

Filwaqt esperimenti qasam diġitali joffru bosta possibbiltajiet, huma wkoll jaqsmu xi nuqqasijiet kemm ma laboratorju analoga u esperimenti qasam. Per eżempju, esperimenti ma jistgħux jintużaw biex jistudjaw l-imgħoddi, u jistgħu biss stima tal-effetti ta 'trattamenti li jistgħu jiġu manipulati. Ukoll, għalkemm esperimenti huma bla dubju utli biex jiggwidaw il-politika, il-gwida eżatta jkunu jistgħu joffru huwa kemmxejn limitat minħabba kumplikazzjonijiet bħal dipendenza ambjentali, problemi ta 'konformità, u l-effetti ekwilibriju (Banerjee and Duflo 2009; Deaton 2010) . Fl-aħħarnett, l-esperimenti qasam diġitali tkabbar l-preokkupazzjonijiet etiċi maħluqa mill-esperimenti fuq il-post. Proponenti ta 'esperimenti qasam tromba kapaċità tagħhom li unobtrusively u saltwarjament jintervjeni fid-deċiżjonijiet konsegwenzjali li saru mill-miljuni ta' nies. Dawn il-karatteristiċi joffru ċerti vantaġġi xjentifiċi, iżda jistgħu wkoll jagħmlu esperimenti qasam etikament kumplessi (taħseb dwarha bħala riċerkaturi trattament nies bħal "firien lab" fuq skala kbira). Barra minn hekk, minbarra l-ħsara possibbli lill-parteċipanti, esperimenti qasam diġitali, minħabba l-iskala tagħhom, jistgħu wkoll iqajmu tħassib dwar it-tfixkil tas-sistemi soċjali tax-xogħol (eż tħassib dwar jħarbat is-sistema b'kumpens Wikipedija jekk Restivo u van der Rijt taw wisq barnstars) .