4.3 Two dimensi saka nyobi: Lab-lapangan lan analog-digital

Nyobi Lab kurban kontrol, nyobi lapangan kurban aliran realisme, lan nyobi lapangan digital gabungan kontrol lan aliran realisme ing ukuran.

Eksperimen teka ing macem-macem wujud lan ukuran. Ing sasi kepungkur, panaliti nemokake babagan mbiyantu nyusun eksperimen ing sadawane percobaan antarane percobaan laboratorium lan eksperimen lapangan . Saiki, para peneliti uga kudu nyusun eksperimen ing sadawane kontinum liya antarane eksperimen analog lan eksperimen digital . Papan desain rong dimensi iki bakal mbantu sampeyan mangerteni kekuwatan lan kelemahane pendekatan sing beda lan nyorot wilayah kesempatan sing paling gedhe (angka 4.1).

Gambar 4.1: Schematic of space design for experiments. Ing jaman sadurungé, eksperimen manéka variasi sajrone dimensi lab-field. Saiki, padha uga beda-beda ing ukuran analog-digital. Papan desain rong dimensi iki digambarake dening patang eksperimen sing aku tulisake ing bab iki. Miturut pendapat saya, area kesempatan paling gedhe yaiku eksperimen lapangan digital.

Salah sawijining dimensi ing ngendi eksperimen bisa diatur yaiku dimensi lab-lapangan. Akeh eksperimen ing ilmu sosial ana ing laboratorium laboratorium ing ngendi para mahasiswa sarjana nindakake tugas-tugas sing aneh ing laboratorium mesthi kredit. Jenis eksperimen iki ndominasi riset psikologi amarga mbisakake peneliti kanggo nggawe setelan sing dikontrol banget kanggo ngisolasi lan nguji teori tartamtu babagan prilaku sosial. Nanging, kanggo masalah-masalah tartamtu, soko bisa ngrasa aneh babagan ngenani kesimpulan sing kuat babagan prilaku manungsa saka wong sing ora biasa sing nindakake tugas-tugas sing ora biasa kasebut ing setelan sing ora biasa. Masalah kasebut nyebabake gerakan menyang eksperimen lapangan . Eksperimen lapangan gabungan desain kuat kontrol percobaan acak dengan kelompok peserta lebih banyak berperan dalam tugas yang lebih umum dalam pengaturan yang lebih alami.

Senajan sapérangan wong mikiraké lab lan lapangan minangka eksperimen minangka metode saingan, luwih apik kanggo mikir minangka pelengkap, kanthi kekuwatan lan kelemahan sing béda. Contone, Correll, Benard, and Paik (2007) migunakake loro eksperimen lab lan eksperimen lapangan ing upaya nggolek sumber "penalti keibuan." Ing Amerika Serikat, para ibu ora entuk dhuwit tinimbang wanita wadon, sanajan mbandhingake wanita kanthi skills sing padha makarya ing proyek sing padha. Ana akeh penjelasan kanggo pola iki, salah sijine yaiku para pengusaha bias nglawan ibu. (Menawa sampeyan bisa nemtokake bias sing bisa nglawan ibu, Correll lan kanca-kanca nyedhaki loro eksperimen: siji ing laboratorium lan siji ing lapangan.

Pisanan, ing eksperimen lab, dheweke ngandhani peserta, sing dadi mahasiswa kuliah, sing perusahaan ngupayakake panelusuran lapangan kanggo wong kanggo mimpin departemen pemasaran Pantai Timur anyar. Murid-murid diwastani sing perusahaan pengin bantuan ing proses hiring, lan padha dijaluk maneh resume saka calon-calon potensial lan kanggo menehi rating calon ing sawetara dimensi, kayata intelektual, anget, lan komitmen kanggo bisa. Luwih, murid-murid ditakoni yen bakal nyaranake nyewa pemohon lan apa sing bakal menehi rekomendasi minangka gaji wiwitan. Nanging, para mahasiswa durung diterusake, kajaba mung siji: sawetara sing menehi tandha-tandha dadi ibu (kanthi listing keterlibatan ing asosiasi ibu-guru) lan ora ana. Correll lan kanca-kanca nemokake yen para mahasiswa kurang seneng nyaranake ibu-ibu lan dheweke menehi gaji awal sing luwih murah. Luwih, liwat analisis statistik saka peringkat lan keputusan sing disengkuyung, Correll lan kanca-kanca nemokake yen kekurangan ibu-ibu akeh sing diterangake kanthi nyatane yen dheweke dirating luwih murah tinimbang kompetensi lan komitmen. Mangkono, eksperimen lab iki ngidini Correll lan kanca-kanca kanggo ngukur efek sing nyebabake lan nyedhiyakake penjelasan kanggo efek kasebut.

Mesthine, ora ana sing bisa mrantasi bab kesimpulan bab pasar tenaga kerja ing AS adhedhasar keputusan saka sawetara atus mahasiswa sing mbokmenawa ora tau duwe wektu lengkap, mung nyewakake wong. Mulane, Correll lan kolega uga nindakake eksperimen lapangan sing pelengkap. Wong-wong mau nanggepi ratusan bukaan proyek sing dianyari karo surat-surat lan palsu. Kaya karo bahan sing ditampilake ing sarjana, sawetara diterusake ibune lan sawetara durung. Correll lan kanca-kanca nemokake yen ibu-ibu kurang mungkin bisa ditelpon maneh kanggo wawancara tinimbang wanita sing ora duwe anak. Ing tembung liyane, pengusaha nyata sing nggawe keputusan sing konsisten ing lingkungan alam tindak kaya para mahasiswa. Apa padha nggawe keputusan sing padha kanggo alasan sing padha? Sayange, aku ora ngerti. Para panaliti ora bisa nyuwun marang para pengusaha kanggo menehi rating calon utawa njelasake keputusan.

Pasangan eksperimen iki ngungkapake akeh babagan eksperimen laboratorium lan lapangan sacara umum. Eksperimen laboratorium nyedhiyakake panaliti nemokake kontrol lingkungan sing bisa ditindakake para peserta. Supaya, contone, ing eksperimen lab, Correll lan kanca-kanca bisa njamin yen kabeh resume dibaca ing setelan sing tenang; ing eksperimen lapangan, sawetara resume uga ora bisa dibaca. Luwih, amarga peserta ing panyedhiya lab ngerti yen dheweke lagi sinau, peneliti sering bisa ngumpulake data tambahan sing bisa mbantu ngandharake apa peserta nggawe keputusan. Contone, Correll lan kanca-kanca nyuwun peserta ing eksprimen laboratorium kanggo menehi rating calon ing dimensi sing beda. Data proses kaya iki bisa mbantu para panaliti mangerteni mekanisme konco-koncone beda-beda ing cara peserta nambani resume.

Saliyane, karakteristik sing padha karo aku sing diterangake minangka kaluwihan uga kadhangkala dianggep cacat. Para panaliti sing seneng nyinaoni lapangan argue yen peserta ing eksperimen lab bisa tumindak banget beda amarga padha ngerti sing lagi sinau. Contone, ing eksperimen lab, para peserta bisa uga nemokake tujuan riset lan ngrubah prilaku supaya ora katon bias. Luwih, peneliti sing seneng percobaan lapangan bisa argue yen beda cilik ing resume mung bisa metu ing lingkungan lab sing resik, sing steril, lan kanthi mangkono, percobaan laboratorium bakal ngalahake efek ibu ing pengambilan keputusan nyata. Akhire, akeh panyedhiya lapangan ngritik percobaan laboratorium percobaan ing peserta WEIRD: utamane mahasiswa saka negara-negara Kulon, Educated, Industrialized, Rich, and Democratic (Henrich, Heine, and Norenzayan 2010a) . Eksperimen-eksperimen oleh Correll lan kolega (2007) nggambarake loro ekstrem kasebut ing kontras lapangan lab. Ing antarane rong ekstrem iki ana uga macem-macem desain hibrida, kalebu pendekatan kaya nggawa non-mahasiswa menyang laboratorium utawa arep menyang lapangan nanging isih nduweni peserta nindakake tugas sing ora biasa.

Saliyane dimensi lab-field sing wis ana ing jaman sadurungé, umur digital tegese peneliti saiki duwe ukuran utama kapindho ing sadawane eksperimen sing bisa beda-beda: analog-digital. Kaya eksperimen laboratorium murni, eksperimen lapangan murni, lan macem-macem hibrida antarane, ana eksperimen analog murni, eksperimen digital murni, lan macem-macem hibrida. Nyedhiyakake definisi formal babagan dimensi iki, nanging definisi kerja sing migunani yaiku yen eksperimen kanthi digital minangka eksperimen sing nggunakake infrastruktur digital kanggo nganakake panitia, ngramal, ngirim pangobatan, lan ngukur hasil. Contone, Restivo lan van de Rijt (2012) nyinaoni barnstar lan Wikipedia minangka eksperimen kanthi digital amarga nggunakake sistem digital kanggo kabeh papat langkah kasebut. Kajaba kuwi, eksperimen analog banget ora nggunakake infrastruktur digital kanggo samubarang langkah iki. Kathah eksperimen klasik ing psikologi minangka eksperimen analog. Ing antarane loro ekstrem iki, ana eksperimen digital sing nggunakake gabungan sistem analog lan digital.

Nalika sawetara wong mikirake eksperimen digital, dheweke langsung mikir babagan eksperimen online. Iki kakehan amarga kesempatan kanggo nglakokake eksperimen digital ora mung online. Para panaliti bisa nglakokake eksperimen digital kanthi nggunakake piranti digital ing donya fisik kanggo ngirim pangobatan utawa ngukur hasil. Contone, peneliti bisa nggunakake smartphone kanggo ngirim perawatan utawa sensor ing lingkungan sing dibangun kanggo ngukur kasil. Ing kasunyatan, kaya sing bakal kita deleng ing bab iki, peneliti wis nggunakake meter daya ngarep kanggo ngukur kasile ing eksperimen babagan konsumsi energi sing nglibatake 8,5 yuta rumah tangga (Allcott 2015) . Minangka piranti digital dadi luwih terintegrasi menyang urip wong lan sensor dadi terintegrasi ing lingkungan sing dibangun, kesempatan iki kanggo nglakoni eksperimen partial digital ing donya fisik bakal nambah sacara dramatis. Ing tembung liya, percobaan digital ora mung eksperimen online.

Sistem digital nggawe kemungkinan anyar kanggo eksperimen nang endi wae ing konteks lab-lapangan. Ing eksperimen laboratorium murni, contone, peneliti bisa nggunakake sistem digital kanggo ngukur luwih becik saka perilaku peserta; Salah sijine jenis pangukuran sing luwih apik iki yaiku peralatan panelusur mata sing nyedhiyakake ukuran sing tepat lan terus-terusan kanggo ndeleng lokasi. Umur digital uga nggawe kemungkinan nglakokake eksperimen lab-kaya online. Contone, panaliti kanthi cepet diadopsi Amazon Mechanical Turk (MTurk) kanggo nganakake panalitiyan peserta eksperimen online (gambar 4.2). MTurk cocog karo "pengusaha" sing duwe tugas sing kudu rampung karo "buruh" sing pengin ngrampungake tugas-tugas kasebut nganggo dhuwit. Nanging, ora kaya pasar tenaga kerja tradisional, tugas-tugas sing ditrapake biasane mung mbutuhake sawetara menit kanggo rampung, lan kabeh interaksi antarane pengusaha lan pekerja online. Amarga MTurk ngenali aspek laboratorium-laboratorium khusus kanggo wong sing mbayar tugas kanggo ngrampungake tugas-tugas sing ora bakal dilakoni gratis-iku mesthi cocog kanggo jinis eksperimen tartamtu. Intine, MTurk wis nggawe infrastruktur kanggo ngatur klompok peserta-merekrut lan mbayar wong-wong-wong lan para peneliti wis ngupayakake prasarana kasebut kanggo ngetrapake peserta sing tansah ana.

Gambar 4.2: Makalah diterbitake nggunakake data saka Amazon Mechanical Turk (MTurk). MTurk lan pasar tenaga kerja online sing saiki menehi para peneliti cara sing trep kanggo nganakake panalitiyan peserta kanggo eksperimen. Diadaptasi saka Bohannon (2016) .

Sistem digital nggawe kemungkinan luwih akeh kanggo eksperimen kaya lapangan. Utamané, para peneliti bisa nggabungake kontrol sing ketat lan ngolah data sing digandhengake karo eksperimen lab karo peserta liyane sing beda-beda lan setelan alam liyane sing digandhengake karo eksperimen lab. Kajaba iku, eksperimen lapangan digital uga nawakake telung kesempatan sing cenderung angel nyinaoni eksperimen analog.

Pisanan, nalika eksperimen lab lan medan analog sing paling akeh nduweni atusan peserta, eksperimen lapangan digital bisa nduweni jutaan peserta. Iki owah-owahan ing skala amarga sawetara eksperimen digital bisa ngasilake data ing biaya variabel nol. Sing, nalika peneliti wis nggawe infrastruktur eksperimen, nambah jumlah peserta biasane ora ningkatake biaya. Nambah nomer peserta kanthi faktor 100 utawa luwih ora mung owah-owahan kuantitatif ; Iki minangka owah-owahan kualitatif , amarga bisa ndadekake para panaliti nemokake pranyata beda-beda saka eksperimen (kayata, heterogeneity efek perawatan) lan ngolah desain eksperimen sing beda-beda (contone, eksperimen kelompok gedhe). Titik iki penting, aku bakal bali menyang endi bab nalika aku menehi saran babagan nggawe eksperimen digital.

Kapindho, manawa eksperimen lab sing paling umum lan lapangan ngobati peserta minangka widget sing ora bisa dibedakake, eksperimen lapangan digital kerep nggunakake informasi latar mburi babagan peserta ing tahap desain lan analisis riset. Informasi latar mburi kasebut, sing diarani informasi pra-perawatan , asring kasedhiya ing eksperimen digital amarga padha mlaku ing ndhuwur sistem pangukuran tansah (ing bab bab 2). Contone, panaliti ing Facebook nduweni luwih akeh pre-treatment informasi babagan wong-wong sing ana ing eksperimen medan digital tinimbang peneliti universitas babagan wong ing eksperimen medan analog. Pre-perawatan iki mbisakake desain eksperimen sing luwih efisien-kayata (Higgins, Sävje, and Sekhon 2016) lan target perekrutan para peserta (Eckles, Kizilcec, and Bakshy 2016) analisis luwih akeh-kayata estimasi heterogenitas efek perawatan (Athey and Imbens 2016a) lan penyesuaian kovariate kanggo perbaikan (Bloniarz et al. 2016) .

Katelu, déné akèh laboratorium analog lan eksperimen lapangan ngirim pangobatan lan ngukur kasil sajrone wektu sing relatif dikuwataké, sawetara eksperimen medan digital kedadeyan luwih cepet. Contone, Restivo lan eksperimen van de Rijt nduweni hasil ngukur saben dina kanggo 90 dina, lan salah siji saka eksperimen sing bakal dakwartakake bab sampeyan ing bab kasebut (Ferraro, Miranda, and Price 2011) dilacak kanthi teliti ing telung taun kanthi ora ana biaya. Iki telung kesempatan ukuran, informasi pra-perawatan, lan data perawatan lan hasil mbujur sing paling umum nalika eksperimen diluncurake ing ndhuwur sistem pangukuran tansah (ing bab bab 2 kanggo luwih akeh sistem pangukuran tansah).

Nalika eksperimen lapangan digital nawakake akeh kemungkinan, padha uga nuduhake sawetara kelemahane karo loro laboratorium analog lan eksperimen lapangan analog. Contone, eksperimen ora bisa digunakake kanggo nyinaoni masa lalu, lan mung bisa ngira efek saka pangobatan sing bisa dimanipulasi. Uga, senadyan eksperimen pancen migunani kanggo mimpin kebijakan, panuntun dhasar kasebut bisa diwatesi amarga komplikasi kayata ketergantungan lingkungan, masalah kepatuhan, lan efek keseimbangan (Banerjee and Duflo 2009; Deaton 2010) . Eksperimen medan digital uga nggedhekake keprihatinan etika sing digawe dening eksperimen lapangan-topik sing bakal diterusake ing bab iki lan ing bab 6.