4.3 Mbili vipimo ya majaribio: maabara-shamba na Analog-digital

Majaribio Lab kutoa kudhibiti, majaribio uwanja kutoa realism, na digital uwanja majaribio kuchanganya udhibiti na uhalisia kwa upana zaidi.

Majaribio kuja katika maumbo mbalimbali na ukubwa. Lakini, licha ya tofauti hizo, watafiti wamegundua kuwa na manufaa kwa kuandaa majaribio pamoja mwendelezo kati ya majaribio ya maabara na majaribio uwanja. Sasa, hata hivyo, watafiti lazima pia kuandaa majaribio pamoja mwendelezo kati ya majaribio Analog na majaribio digital. Hii pande mbili kubuni nafasi itasaidia kuelewa uwezo na udhaifu wa mbinu mbalimbali na kupendekeza maeneo ya nafasi kubwa (Kielelezo 4.1).

Kielelezo 4.1: kimpango ya kubuni nafasi kwa ajili ya majaribio. Katika siku za nyuma, majaribio mbalimbali pamoja mwelekeo maabara-shamba. Sasa, wao pia kutofautiana juu ya mwelekeo Analog-digital. Kwa maoni yangu, eneo la nafasi kubwa ni digital uwanja majaribio.

Katika siku za nyuma, njia kuu ambayo watafiti kupangwa majaribio alikuwa pamoja mwelekeo maabara-shamba. Wengi wa majaribio katika sayansi ya jamii ni majaribio ya maabara ambapo wanafunzi wa shahada kufanya kazi ya ajabu katika maabara kwa ajili ya kozi ya mikopo. Aina hii ya jaribio hutawala utafiti katika saikolojia kwa sababu itawezesha watafiti wa kujenga matibabu maalum sana iliyoundwa na mtihani nadharia maalum sana kuhusu tabia za kijamii. Kwa matatizo fulani, hata hivyo, kitu anahisi kidogo ajabu kuhusu kuchora hitimisho kali kuhusu tabia ya binadamu kutoka kwa watu kama kawaida kutekeleza majukumu kama kawaida katika mazingira haya ya kawaida. Matatizo haya yamesababisha harakati kuelekea majaribio uwanja. Uwanja majaribio kuchanganya kubuni nguvu ya majaribio randomized kudhibiti na makundi zaidi mwakilishi wa washiriki, kutekeleza majukumu zaidi ya kawaida, katika mazingira ya zaidi ya asili.

Ingawa baadhi ya watu wanadhani ya maabara na shamba majaribio kama mashindano mbinu, ni bora kufikiri wao kama mbinu za nyongeza na nguvu mbalimbali na udhaifu. Kwa mfano, Correll, Benard, and Paik (2007) kutumika wote majaribio ya maabara na majaribio uwanja katika jaribio la kupata vyanzo vya "adhabu akina mama." Nchini Marekani, akina mama kupata fedha chini ya wanawake kufiwa na watoto, hata wakati kulinganisha wanawake na ujuzi sawa kufanya kazi katika ajira sawa. Kuna wengi maelezo inawezekana kwa muundo huu, na mmoja ni kwamba waajiri ni upendeleo dhidi ya akina mama. (Cha kushangaza, kinyume inaonekana kuwa ni kweli kwa baba: wao huwa na kulipwa zaidi ya kufiwa na watoto wao wanaume kulinganishwa). Ili kutathmini uwezekano upendeleo dhidi ya akina mama, Correll na wenzake mbio majaribio mawili: moja katika maabara na moja katika shamba.

Kwanza, katika majaribio ya maabara Correll na wenzake aliwaambia washiriki, ambao walikuwa wanafunzi wa vyuo vikuu chuo, kwamba California makao kuanza-up kampuni ya mawasiliano alipokuwa akiongoza search ajira kwa mtu kuongoza yake mpya East Coast masoko idara. Wanafunzi waliambiwa kwamba kampuni alitaka msaada wao katika mchakato kukodisha na waliulizwa upya wasifu wa wagombea kadhaa uwezo na kiwango wagombea juu ya idadi kubwa ya mitazamo kama vile akili zao, joto, na kujitolea kufanya kazi. Zaidi ya hayo, wanafunzi waliulizwa kama wangeweza kupendekeza kukodisha mwombaji na kile wangeweza kupendekeza kama mshahara kuanzia. Unbeknownst wanafunzi, hata hivyo, wasifu walikuwa hasa yalijengwa kuwa sawa isipokuwa kwa jambo moja: baadhi ya wasifu ilionyesha akina mama (kwa kuorodhesha kuhusika katika mzazi na mwalimu chama) na baadhi hakufanya hivyo. Correll iligundua kuwa wanafunzi walikuwa chini ya uwezekano wa kupendekeza kukodisha akina mama na wakapewa chini kuanzia mshahara. Zaidi ya hayo, kupitia uchambuzi wa takwimu za ratings zote mbili na maamuzi kukodisha-kuhusiana, Correll iligundua kuwa akina mama 'hasara kwa kiasi kikubwa kuelezwa na ukweli kwamba akina mama walikuwa lilipimwa chini katika suala la uwezo na dhamira. Kwa maneno mengine, Correll anasema kuwa sifa hizi ni utaratibu ambapo mama ni wasiojiweza. Hivyo, jaribio hili maabara kuruhusiwa Correll na wenzake kupima causal athari na kutoa maelezo inawezekana kwa athari hiyo.

Bila shaka, mtu anaweza kuwa na wasiwasi juu ya kuchora hitimisho kuhusu soko nzima ya Marekani kazi kulingana na maamuzi ya wanafunzi wa vyuo vikuu mia wachache ambao pengine kamwe alikuwa muda kamili kazi, achilia walioajiriwa watu. Kwa hivyo, Correll na wenzake pia uliofanywa nyongeza uwanja majaribio. watafiti alijibu kwa mamia ya fursa kazi kutangazwa kwa kupeleka barua bandia cover na wasifu. Sawa na vifaa umeonyesha wanafunzi wa vyuo vikuu, baadhi wasifu ilionyesha akina mama na baadhi hakufanya hivyo. Correll na wenzake iligundua kuwa akina mama walikuwa chini ya uwezekano wa kupata kuitwa nyuma kwa ajili ya mahojiano ya wanawake kwa usawa waliohitimu na mtoto. Kwa maneno mengine, waajiri halisi kufanya maamuzi consequential katika mazingira ya asili tulipokuwa kiasi kama wanafunzi wa vyuo vikuu. Je, wao kufanya maamuzi sawa kwa sababu hiyo hiyo? Kwa bahati mbaya, hatujui. watafiti hawakuwa na uwezo wa kuuliza waajiri kiwango wagombea au kueleza maamuzi yao.

Hii jozi ya majaribio inaonyesha mengi kuhusu maabara na shamba majaribio kwa ujumla. majaribio Lab kutoa watafiti karibu udhibiti wa jumla wa mazingira ambamo washiriki ni kufanya maamuzi. Hivyo, kwa mfano, katika majaribio ya maabara, Correll alikuwa na uwezo wa kuhakikisha kwamba wasifu wote walikuwa kusoma katika mazingira ya utulivu; katika majaribio uwanja, baadhi ya wasifu wanaweza kuwa hata imekuwa kusoma. Zaidi ya hayo, kwa sababu washiriki katika mazingira ya maabara kujua kwamba wao ni kuwa alisoma, watafiti ni mara nyingi na uwezo wa kukusanya data ya ziada ambayo inaweza kuwasaidia kuelewa kwa nini washiriki ni kufanya maamuzi yao. Kwa mfano, Correll aliuliza washiriki katika majaribio ya maabara kiwango wagombea juu ya vipimo mbalimbali. Aina hii ya data mchakato inaweza kusaidia watafiti kuelewa mifumo nyuma tofauti katika jinsi washiriki kutibu wasifu.

Kwa upande mwingine, hizi halisi tabia hiyo kwamba mimi tu kama faida ilivyoelezwa pia wakati mwingine kuchukuliwa hasara. Watafiti ambao wanapendelea majaribio uwanja wanasema kuwa washiriki katika majaribio ya maabara inaweza wanatenda tofauti sana wanapokuwa wanapewa karibu aliona. Kwa mfano, katika maabara ya majaribio washiriki kuwa guessed lengo la utafiti na ilibadilika tabia zao ili kama si kwa kuonekana upendeleo. Zaidi ya hayo, watafiti ambao wanapendelea majaribio uwanja wanaweza kusema kwamba tofauti ndogo juu ya wasifu inaweza tu kusimama nje katika safi sana, kuzaa mazingira ya maabara, na hivyo majaribio ya maabara itakuwa juu-kukadiria athari za akina mama juu ya maamuzi halisi ya ajira. Hatimaye, watetezi wengi wa majaribio uwanja kukosoa majaribio ya maabara kujitegemea juu ya washiriki weird: hasa wanafunzi kutoka Magharibi, walioelimika, viwanda vingi, Rich, na nchi ya Kidemokrasia (Henrich, Heine, and Norenzayan 2010) . Majaribio na Correll na wenzake (2007) kuonyesha extremes mbili juu ya utoaji maabara-shamba. Katika kati ya pande hizi mbili kuna aina ya miundo mseto ikiwa ni pamoja na mbinu kama vile kuleta zisizo wanafunzi katika maabara au kwenda katika shamba lakini bado kuwa washiriki kufanya kazi ya kawaida.

Mbali na mwelekeo maabara-shamba ambayo ina kuwepo katika siku za nyuma, umri digital ina maana kwamba watafiti sasa wana pili kubwa mwelekeo pamoja ambayo majaribio wanaweza kutofautiana: Analog-digital. Tu kama kuna safi majaribio ya maabara, majaribio safi shamba, na aina ya mahuluti katika kati, kuna safi Analog majaribio, safi majaribio digital, na aina ya mahuluti. Ni suala gumu kwa kutoa ufafanuzi rasmi wa mwelekeo huu, lakini muhimu kufanya kazi kwa ufafanuzi ni kwamba majaribio kikamilifu digital ni majaribio kwamba kufanya matumizi ya miundombinu digital kuajiri washiriki, randomize, kutoa matibabu, na kupima matokeo. Kwa mfano, Restivo na van de Rijt ya (2012) Utafiti wa barnstars na Wikipedia alikuwa majaribio kikamilifu digital kwa sababu kutumika mifumo ya digital kwa zote nne za hatua hizi. Kadhalika kikamilifu majaribio Analog ni majaribio kwamba hatuwezi kufanya matumizi ya miundombinu digital kwa yoyote ya hatua hizi nne. Wengi wa majaribio classic katika saikolojia ni Analog majaribio. Katika kati ya pande hizi mbili kuna watu sehemu digital majaribio kwamba kutumia mchanganyiko wa mifumo Analog na digital kwa hatua nne.

Kwa kina, fursa ya kuendesha majaribio digital si tu online. Watafiti wanaweza kukimbia majaribio sehemu digital kwa kutumia vifaa digital katika ulimwengu wa kimwili ili kutoa matibabu au kupima matokeo. Kwa mfano, watafiti wanaweza kutumia za smart na kutoa matibabu au sensorer katika mazingira yaliyopo kupima matokeo. Kwa kweli, kama tutakavyoona baadaye katika sura hii, watafiti tayari kutumika mita nyumbani uwezo wa kupima matokeo katika majaribio kuhusu kanuni za kijamii na matumizi ya nishati kuwashirikisha milioni 8.5 ya kaya (Allcott 2015) . Kama vifaa digital kuzidi jumuishi katika maisha ya watu na sensorer wanapata jumuishi katika mazingira yaliyopo, fursa hizi kuendesha majaribio sehemu digital katika ulimwengu wa kimwili itaongeza kasi. Kwa maneno mengine, majaribio digital si tu online majaribio.

mifumo Digital kujenga uwezekano mpya kwa ajili ya majaribio kila mahali pamoja mwendelezo maabara-shamba. Katika majaribio safi maabara, kwa mfano, watafiti wanaweza kutumia mifumo ya digital kwa finer kipimo cha tabia ya washiriki; mfano mmoja wa aina hii ya kuboresha kipimo ni jicho-kufuatilia vifaa ambayo inatoa hatua sahihi na endelevu ya macho eneo. umri digital pia inajenga uwezekano wa kukimbia majaribio maabara-kama online. Kwa mfano, watafiti na haraka iliyopitishwa Amazon Mitambo Turk (MTurk) kuajiri washiriki kwa ajili ya majaribio online (Kielelezo 4.2). MTurk mechi "waajiri" ambao wana kazi ambayo yanahitaji kukamilika kwa "wafanyakazi" ambao wanataka kukamilisha kazi hizo kwa ajili ya fedha. Tofauti na masoko ya jadi kazi, hata hivyo, kazi wanaohusika kawaida zinahitaji tu dakika chache kukamilisha na mwingiliano nzima kati ya mwajiri na mfanyakazi ni virtual. Kwa sababu MTurk mimics masuala ya majaribio-kulipa jadi maabara watu kukamilisha kazi kwamba wasingeweza kufanya kwa ajili ya bure-ni kawaida inafaa kwa ajili ya aina fulani ya majaribio. Kimsingi, MTurk imeunda miundombinu kwa ajili ya kusimamia pool ya washiriki-kuajiri na kulipa watu-na watafiti wamechukua faida ya miundombinu ambayo bomba katika pool daima inapatikana wa washiriki.

Kielelezo 4.2: Papers kuchapishwa kwa kutumia data kutoka Amazon Mitambo Turk (MTurk) (Bohannon 2016) . MTurk na nyingine masoko online kazi kutoa watafiti kwa njia rahisi kuwaajiri washiriki kwa ajili ya majaribio.

Digital majaribio kuunda uwezekano hata zaidi kwa ajili ya majaribio shamba-kama. Digital uwanja majaribio anaweza kutoa tight udhibiti na mchakato data kuelewa iwezekanavyo taratibu (kama majaribio ya maabara) na washiriki zaidi tofauti kufanya maamuzi halisi katika mazingira ya asili (kama majaribio shamba). Mbali na hii mchanganyiko wa sifa nzuri ya majaribio ya awali, digital uwanja majaribio pia kutoa fursa matatu ambayo yalikuwa magumu katika Analog maabara na shamba majaribio.

Kwanza, ambapo wengi Analog maabara na shamba majaribio na mamia ya washiriki, digital uwanja majaribio inaweza na mamilioni ya washiriki. Hii mabadiliko katika wadogo ni kwa sababu baadhi ya majaribio digital inaweza kuzalisha data katika sifuri gharama kutofautiana. Hiyo ni, mara moja watafiti tumemuumba miundombinu ya majaribio, kuongeza idadi ya washiriki kawaida haina kuongeza gharama. Kuongeza idadi ya washiriki kwa sababu ya 100 au zaidi sio tu mabadiliko ya upimaji, ni mabadiliko ya ubora, kwa sababu itawezesha watafiti kujifunza mambo mbalimbali kutoka majaribio (kwa mfano, heterogeneity ya madhara ya matibabu) na kukimbia miundo tofauti kabisa majaribio ( kwa mfano, kundi kubwa majaribio). hatua hii ni muhimu sana, mimi itabidi kurudi kuelekea mwisho wa sura wakati mimi kutoa ushauri juu ya kuunda majaribio digital.

Pili, ambapo wengi Analog maabara na shamba majaribio kutibu washiriki kama kutofautishwa vilivyoandikwa, digital uwanja majaribio mara nyingi kutumia taarifa za msingi kuhusu washiriki katika kubuni na uchambuzi hatua ya utafiti. Habari hii background, iitwayo maelezo kabla ya matibabu, ni mara nyingi inapatikana katika majaribio digital kwa sababu wao kuchukua nafasi katika mazingira kikamilifu kipimo. Kwa mfano, mtafiti katika Facebook ina mengi zaidi kabla ya matibabu habari kuliko mtafiti kubuni kiwango maabara majaribio na wanafunzi wa vyuo vikuu. Hii habari kabla ya matibabu itawezesha watafiti kwa hoja zaidi ya kutibu washiriki vilivyoandikwa kama kutofautishwa. Zaidi hasa, kabla ya matibabu habari itawezesha ufanisi zaidi majaribio miundo-kama vile kuzuia (Higgins, Sävje, and Sekhon 2016) na walengwa ajira ya washiriki (Eckles, Kizilcec, and Bakshy 2016) -na uchambuzi-kama zaidi na kugusa hisia kama hesabu ya heterogeneity ya madhara ya matibabu (Athey and Imbens 2016a) na covariate marekebisho kwa ajili ya kuboresha usahihi (Bloniarz et al. 2016) .

Tatu, ambapo wengi Analog maabara na shamba majaribio kutoa matibabu na matokeo ya kipimo katika kiasi kiasi Komprimerade ya muda, baadhi digital uwanja majaribio kuhusisha matibabu ambayo inaweza kutolewa juu ya muda na madhara pia inaweza kipimo baada ya muda. Kwa mfano, Restivo na van de Rijt ya majaribio ina matokeo kipimo kila siku kwa siku 90, na moja ya majaribio Nitakuambia kuhusu baadaye katika sura (Ferraro, Miranda, and Price 2011) inafuatilia matokeo zaidi ya miaka 3 katika kimsingi hakuna gharama. Hawa watatu fursa-kawaida, maelezo kabla ya matibabu, na matibabu longitudinal na matokeo data-ni ya kawaida wakati wa majaribio zinaendeshwa juu ya daima-on vipimo mifumo (tazama Sura ya 2 kwa zaidi juu ya daima-juu ya mifumo ya kipimo).

Wakati digital uwanja majaribio kutoa uwezekano wengi, wao pia kushiriki baadhi ya udhaifu na wote maabara Analog na majaribio uwanja. Kwa mfano, majaribio haiwezi kutumika kujifunza siku za nyuma, na wanaweza tu kukadiria athari za matibabu ambayo inaweza kuwa manipulated. Pia, ingawa majaribio bila shaka ni muhimu kuongoza sera, uongozi halisi waweze kutoa ni kitu kidogo kwa sababu ya matatizo kama vile utegemezi wa mazingira, matatizo ya kufuata, na madhara usawa (Banerjee and Duflo 2009; Deaton 2010) . Hatimaye, digital uwanja majaribio ukuu wasiwasi kimaadili kuundwa kwa majaribio uwanja. Wapinzani wa majaribio uwanja tarumbeta uwezo wao wa unobtrusively na nasibu kuingilia katika maamuzi consequential yaliyotolewa na mamilioni ya watu. Makala haya kutoa faida fulani za kisayansi, lakini wao pia wanaweza kufanya majaribio uwanja kimaadili tata (kufikiri juu yake kama watafiti kutibu watu kama "panya maabara" kwa kiasi kikubwa). Zaidi ya hayo, katika Mbali na madhara inawezekana washiriki, digital uwanja majaribio, kwa sababu ya wadogo zao, unaweza pia kuongeza wasiwasi kuhusu usumbufu wa kufanya kazi mifumo ya kijamii (kwa mfano, wasiwasi juu ya kuvuruga malipo mfumo Wikipedia kama Restivo na van der Rijt alitoa barnstars wengi mno) .