4.3 Duha ka LAMAS sa eksperimento: lab-uma ug Analog-digital

Lab eksperimento sa paghalad sa kontrol, eksperimento sa paghalad sa realismo, ug digital eksperimento combine control ug realismo sa scale.

Eksperimento moabut sa daghang mga nagkalain-laing mga porma ug gidak-on. Apan, bisan pa niini nga mga kalainan, ang mga tigdukiduki nakakaplag nga kini makatabang sa pag-organisar eksperimento sa daplin sa usa ka padayon sa taliwala sa mga eksperimento lab ug sa uma eksperimento. Karon, bisan pa niana, ang mga tigdukiduki kinahanglan usab organisar eksperimento sa daplin sa usa ka padayon tali sa Analog eksperimento ug digital eksperimento. Kini duha ka-dimensional design luna motabang kanimo nga makasabut sa mga kalig-on ug mga kahuyang sa lain-laing mga pamaagi ug mosugyot sa mga dapit sa labing dako nga oportunidad (Figure 4.1).

Figure 4.1: kombensiyonal nga sa design luna alang sa mga eksperimento. Sa nangagi, ang mga eksperimento magkalahi sa daplin sa lab-uma nga kabahin. Karon, sila usab lainlain sa Analog-digital nga kabahin. Sa akong opinyon, ang dapit sa labing dako nga oportunidad mao ang digital eksperimento.

Sa nangagi, ang mga nag-unang paagi nga tigdukiduki organisar eksperimento mao ubay sa lab-uma nga kabahin. Ang kadaghanan sa mga eksperimento sa sosyal nga siyensiya mao ang mga lab eksperimento diin mga estudyante sa pagbuhat sa lain nga mga buluhaton sa usa ka lab alang sa kurso credit. Kini nga matang sa eksperimento nga nagsakit research sa psychology tungod kay kini makahimo sa mga tigdukiduki sa paghimo kaayo sa piho nga mga paagi sa pagtambal nga gidisenyo sa pagsulay kaayo sa piho nga mga teoriya bahin sa sosyal nga kinaiya. Alang sa pipila ka mga problema, Apan, usa ka butang nga gibati sa usa ka gamay sa lain nga bahin sa drawing lig-on nga mga konklusyon mahitungod sa tawhanong kinaiya gikan sa maong talagsaon nga mga tawo nga sa pagbuhat sa maong mga talagsaon nga mga buluhaton sa maong usa ka talagsaon nga kahimtang. Kini nga mga kabalaka nga gipangulohan sa usa ka kalihukan sa eksperimento. Field eksperimento combine sa lig-on nga plano sa sinalagma sa pagkontrolar eksperimento uban sa dugang nga mga grupo representante sa mga partisipante, sa pagbuhat sa mas komon nga mga buluhaton, sa mas natural nga mga kahimtang.

Bisan tuod ang pipila ka mga tawo naghunahuna sa lab ug sa uma eksperimento ingon indig mga pamaagi, kini mao ang labing maayo sa paghunahuna kanila ingon nga complementary mga pamaagi uban sa lain-laing mga kalig-on ug mga kahuyang. Kay sa panig-ingnan, Correll, Benard, and Paik (2007) nga gigamit ang duha sa usa ka lab eksperimento ug usa ka uma eksperimento sa usa ka pagsulay sa pagpangita sa mga tinubdan sa "pagkainahan silot." Sa Estados Unidos, ang mga inahan angkon ubos sa salapi kay sa walay anak nga mga babaye, bisan pa sa diha nga pagtandi sa mga babaye uban sa susama nga mga kahanas nga nagtrabaho sa susama nga mga trabaho. Adunay daghan nga mga posible nga mga katin-awan alang sa sumbanan, ug ang usa mao nga ang mga employers nga biased batok sa mga inahan. (Makaiikag, ang kaatbang daw nga tinuod alang sa mga amahan: sila tambong sa pag-angkon sa labaw pa kay sa ikatandi nga walay anak sa mga tawo). Aron sa pagtimbang-timbang sa posible nga pagpihig batok sa mga inahan, Correll ug kaubanan midagan ang duha ka mga eksperimento: usa sa lab ug usa sa mga uma.

Una, diha sa usa ka eksperimento lab Correll ug kaubanan misulti partisipante, nga mga kolehiyo undergraduates, nga ang usa ka California-based nga pagsugod-up sa komunikasyon nga kompanya nagpahigayon sa usa ka search trabaho alang sa usa ka tawo sa paggiya sa iyang mga bag-o nga East Coast sa marketing departamento. Estudyante gisultihan nga ang kompaniya gusto sa ilang tabang diha sa proseso sa pagkuha ug sila gihangyo sa pagribyu mibalik sa pipila potensyal nga mga kandidato ug sa grado sa mga kandidato sa usa ka gidaghanon sa mga LAMAS sama sa ilang salabutan, kainit, ug pasalig sa pagbuhat. Dugang pa, ang mga estudyante gipangutana kon sila rekomend hire sa mga aplikante ug sa unsa ang ilang rekomend ingon nga usa ka sugod suweldo. Wala mahibalo ang mga estudyante, bisan pa niana, ang mga mibalik nga ilabi gitukod nga sama gawas sa usa ka butang: ang uban sa mga mibalik gikamay pagkainahan (pinaagi sa paglista pagkalambigit sa usa ka asosasyon sa mga ginikanan-magtutudlo) ug ang uban wala. Correll nga makita nga ang mga estudyante dili kaayo lagmit sa pagrekomendar paghatag trabaho sa mga inahan ug naghalad sila sa ubos nga pagsugod sa sweldo. Dugang pa, pinaagi sa usa ka statistical analysis sa mga grado ug sa paghatag trabaho-related nga mga desisyon, Correll nga makita nga ang mga inahan 'mga disadvantages sa mga kadaghanan gipatin-aw sa kamatuoran nga ang mga inahan nga rated ubos nga sa mga termino sa katakus ug pasalig. Sa laing mga pulong, Correll lantugi nga kini nga mga kinaiya mao ang mga mekanismo nga pinaagi niini mga inahan naalaot. Busa, kini nga lab eksperimento gitugotan Correll ug mga kauban sa pagsukod sa usa ka causal epekto ug mohatag og usa ka posible nga katin-awan sa epekto.

Siyempre, ang usa tingali nga nagduhaduha mahitungod konklusion sa kon sa tibuok merkado sa US labor base sa desisyon sa usa ka pipila ka mga ka gatus ka undergraduates nga tingali wala sa usa ka bug-os nga panahon nga trabaho, ang mag-inusara gisuholan sa mga tawo. Busa, Correll ug kauban usab sa gihimo sa usa ka complementary uma eksperimento. Ang mga tigdukiduki mitubag sa gatusan ka mga advertised job openings pinaagi sa pagpadala sa peke nga tabon sa mga sulat ug mga mibalik. Susama sa sa mga materyal sa gipakita sa mga undergraduates, ang pipila mibalik gikamay pagkainahan ug ang uban wala. Correll ug kaubanan nga makita nga ang mga inahan sa mga dili kaayo lagmit sa pag-gitawag balik alang sa mga interbyu kay parehong kwalipikado nga walay anak nga mga babaye. Sa laing mga pulong, ang tinuod nga mga amo sa paghimo consequential mga desisyon sa usa ka natural nga kahimtang nagagawi nga sama sa mga undergraduates. Ba sila makahimo og susama nga desisyon alang sa mao gihapon nga rason? Ikasubo, wala kita masayud. Ang mga tigdukiduki wala makahimo sa pagpangayo sa mga employers sa grado sa mga kandidato o sa pagpasabut sa ilang mga desisyon.

Kini nga parisan sa mga eksperimento nagpadayag sa usa ka daghan mahitungod sa lab ug sa uma mga eksperimento sa kinatibuk-. Lab eksperimento sa paghalad sa mga tigdukiduki duol sa kinatibuk-kontrol sa mga palibot nga mga partisipante sa paghimo og mga desisyon. Busa, alang sa panig-ingnan, sa eksperimento lab, Correll nakahimo sa pagsiguro nga ang tanan nga ang mga mibalik gibasa sa usa ka hilom nga dapit; sa eksperimento uma, ang pipila sa mga mibalik dili pa gani sa pagbasa. Dugang pa, tungod kay ang mga partisipante sa sa kahimtang lab nasayud nga sila gitun-an, ang mga tigdukiduki mao ang sagad nga makahimo sa pagkolekta og dugang nga mga data nga makatabang kanila nga makasabut ngano nga partisipante sa paghimo sa ilang mga desisyon. Kay sa panig-ingnan, Correll nangutana sa mga partisipante sa eksperimento lab sa grado sa mga kandidato sa lain-laing mga sukod. Kini nga matang sa data proseso makatabang tigdukiduki nga makasabut sa mga mekanismo sa luyo kalainan sa kon sa unsang paagi ang mga partisipante pagtratar sa mga mibalik.

Sa laing bahin, niining maong mga kinaiya nga ako lang gihulagway nga bentaha usab usahay giisip disbentaha. Tigdukiduki nga mas gusto eksperimento makiglalis nga mga partisipante sa mga eksperimento lab makahimo kaayo sa lahi nga paagi sa diha nga sila nga pag-ayo-obserbahan. Pananglitan, diha sa lab eksperimento partisipante unta makatag-an sa tumong sa panukiduki ug miusab sa ilang mga kinaiya aron dili makita biased. Dugang pa, ang mga tigdukiduki nga mas gusto eksperimento aron makiglalis nga gagmay nga mga kalainan sa mga mibalik lamang mobarug nga sa usa ka kaayo nga mahinlo, sterile nga palibot lab, ug sa ingon ang lab eksperimento nga sa-Gibanabana sa sa epekto sa pagkainahan sa desisyon tinuod nga hiring. Sa katapusan, sa daghan nga mga proponents sa uma eksperimento pagsaway lab eksperimento pagsalig sa weird partisipante: nag-una nga mga estudyante gikan sa Western, Edukado, industriyalisadong, Rich, ug Democratic mga nasud (Henrich, Heine, and Norenzayan 2010) . Ang mga eksperimento sa Correll ug kaubanan (2007) ilustrar sa duha ka extremes sa lab-uma putol. Sa taliwala sa mga duha ka mga extremes adunay usa ka matang sa hybrid nga mga desinyo lakip na pamaagi sama sa pagdala sa dili-mga estudyante ngadto sa usa ka lab o moadto sa kapatagan apan sa gihapon may mga partisipante sa pagbuhat sa usa ka talagsaon nga buluhaton.

Dugang pa sa mga lab-uma nga kabahin nga naglungtad sa nangagi, sa digital edad nagpasabot nga tigdukiduki karon sa usa ka ikaduha nga mayor nga kabahin sa nga eksperimento mahimo vary: Analog-digital. Ingon nga adunay putli nga eksperimento lab, lunsay nga eksperimento, ug usa ka matang sa mga hybrids sa taliwala sa, adunay putli nga Analog eksperimento, putli digital eksperimento, ug usa ka matang sa mga hybrids. Kini mao ang tricky sa paghalad sa usa ka pormal nga kahulogan sa kabahin niini, apan sa usa ka mapuslanon nga pagbuhat kahulugan mao nga bug-os nga digital eksperimento mao ang mga eksperimento nga paggamit sa digital nga imprastruktura sa pag-recruit sa mga partisipante, randomize, luwasa pagtambal, ug pagsukod sa resulta. Kay sa panig-ingnan, Restivo ug van de Rijt ni (2012) pagtuon sa barnstars ug Wikipedya usa ka bug-os nga digital eksperimento tungod kay kini gigamit sa digital nga mga sistema alang sa tanan nga upat ka sa niini nga mga lakang. Ingon man usab sa bug-os Analog mga eksperimento sa mga eksperimento nga dili sa paghimo sa paggamit sa digital nga imprastruktura alang sa bisan unsa niini nga mga upat ka mga lakang. Daghan sa mga classic eksperimento sa psychology mga Analog eksperimento. Sa taliwala sa mga duha ka mga extremes adunay mga partially digital eksperimento nga paggamit sa usa ka kombinasyon sa Analog ug digital nga mga sistema alang sa upat ka mga lakang.

Kritikal, sa mga kahigayonan sa pagdagan sa digital eksperimento dili lang sa internet. Tigdukiduki mahimong modagan partially digital eksperimento pinaagi sa paggamit sa digital nga mga himan diha sa mga pisikal nga kalibutan aron sa pagluwas sa mga tambal o pagsukod sa resulta. Kay sa panig-ingnan, ang mga tigdukiduki magamit Smart phone sa pagluwas sa mga tambal o mga sensor sa gitukod palibot sa pagsukod sa resulta. Sa pagkatinuod, ingon sa atong makita sa ulahi sa niini nga kapitulo, ang mga tigdukiduki na nga gigamit sa panimalay sa gahum metros sa pagsukod sa resulta sa mga eksperimento bahin sa sosyal nga mga latid ug sa konsumo sa enerhiya nga naglambigit sa 8.5 milyones sa mga panimalay (Allcott 2015) . Ingon sa digital nga mga himan mahimong mas integrated ngadto sa kinabuhi sa mga tawo ug mga sensor mahimong integrated ngadto sa gitukod nga palibot, kini nga mga mga oportunidad sa pagdagan partially digital eksperimento sa pisikal nga kalibutan sa pagdugang sa mahinuklugong. Sa laing mga pulong, digital mga eksperimento dili lang sa online eksperimento.

Digital sistema sa paghimo sa bag-ong mga posibilidad alang sa mga eksperimento sa tanang dapit sa daplin sa lab-uma putol. Sa putli nga eksperimento lab, alang sa panig-ingnan, tigdukiduki mahimong mogamit digital nga mga sistema alang sa mas maayo nga sukod sa mga partisipante 'kinaiya; usa ka panig-ingnan sa niini nga matang sa mas maayong sukod mao ang mata-tracking mga ekipo nga naghatag og tukma ug padayon nga mga lakang sa mga panan-aw nga dapit. Ang digital edad usab nagmugna sa posibilidad sa pagdagan lab-sama sa mga eksperimento sa internet. Kay sa panig-ingnan, ang mga tigdukiduki paspas gisagop Amazon Mechanical Turk (MTurk) sa pag-recruit sa mga partisipante alang sa online eksperimento (Figure 4.2). MTurk matches "mga amo" nga may mga buluhaton nga kinahanglan nga mahuman sa "mga trabahante" nga buot sa paghuman sa mga buluhaton alang sa salapi. Dili sama sa tradisyonal nga mga merkado sa labor, Apan, ang mga buluhaton nga nalambigit kasagaran lamang nagkinahanglan sa usa ka pipila ka mga minuto sa paghuman ug sa bug-os nga interaction tali sa employer ug sa trabahante mao ang virtual. Tungod kay MTurk kaamgid bahin sa tradisyonal nga lab eksperimento-pagbayad sa mga tawo sa pagkompleto sa buluhaton nga dili nila buhaton alang sa free-kini natural nga haum alang sa pipila ka matang sa eksperimento. Esensya, MTurk nga gibuhat sa mga infrastructure alang sa pagdumala sa usa ka linaw sa mga partisipante-pagdani ug pagbayad sa mga tawo-ug tigdukiduki gikuha pagpahimulos sa sa imprastruktura nga sa Sun.Star ngadto sa usa ka kanunay nga anaa linaw sa mga partisipante.

Figure 4.2: Sinulat nga gipatik sa paggamit sa data gikan sa Amazon Mechanical Turk (MTurk) (Bohannon 2016) . MTurk ug uban pang mga online nga trabaho merkado sa paghalad sa mga tigdukiduki sa usa ka sayon ​​nga paagi sa pag-recruit sa mga partisipante alang sa mga eksperimento.

Digital eksperimento paghimo sa dugang pa posibilidad alang sa uma-sama sa mga eksperimento. Digital eksperimento makahatag hugot nga kontrol ug proseso sa data sa pagsabot sa posible nga mga mekanismo (sama sa mga eksperimento lab) ug mas lain-laing mga partisipante sa paghimo sa tinuod nga mga desisyon sa usa ka natural nga palibot (sama sa eksperimento). Dugang pa niini nga kombinasyon sa mga maayong kinaiya sa sayo pa eksperimento, digital eksperimento sa paghalad usab sa tulo ka mga oportunidad nga lisud sa Analog lab ug sa uma eksperimento.

Una, samtang kadaghanan sa Analog lab ug sa uma eksperimento adunay gatusan ka mga partisipante, digital eksperimento makabaton minilyon sa mga partisipante. Kini nga kausaban sa scale tungod kay sa pipila ka digital eksperimento makapatungha sa data sa zero baryable gasto. Kana mao, sa makausa tigdukiduki gibuhat sa usa ka eksperimento sa imprastraktura, sa pagdugang sa gidaghanon sa mga partisipante sa kasagaran dili sa pagdugang sa gasto. Sa pagdugang sa gidaghanon sa mga partisipante pinaagi sa usa ka butang sa 100 o labaw pa dili lang sa usa ka quantitative kausaban, kini mao ang usa ka qualitative kausaban, tungod kay kini makahimo sa mga tigdukiduki sa pagkat-on sa lain-laing mga butang gikan sa mga eksperimento (pananglitan, heterogeneity sa mga epekto sa pagtambal) ug modagan lahi eksperimento mga laraw ( pananglitan, dako nga grupo eksperimento). niini nga punto mao ang importante kaayo, ako mobalik sa niini ngadto sa katapusan sa kapitulo sa diha nga ako sa paghalad sa tambag mahitungod sa pagmugna sa digital eksperimento.

Ikaduha, samtang kadaghanan sa Analog lab ug sa uma eksperimento pagtratar sa mga partisipante ingon nga mailhan widget, digital eksperimento sa kasagaran sa paggamit sa impormasyon mahitungod sa mga partisipante sa sa disenyo ug pagtuki hugna sa sa research. Kini nga impormasyon, nga mao ang gitawag nga impormasyon pre-pagtambal, mao ang sagad nga anaa sa digital eksperimento tungod kay sila sa pagkuha sa dapit sa bug-os nga gisukod palibot. Pananglitan, ang usa ka researcher sa Facebook adunay mas labaw pa nga impormasyon pre-pagtambal kay sa usa ka tigdukiduki pagdesinyo sa usa ka sumbanan nga eksperimento lab uban sa undergraduates. Kini nga impormasyon pre-pagtambal makahimo sa mga tigdukiduki sa pagbalhin sa unahan sa pagtagad sa mga partisipante ingon nga mailhan Widgets. Mas espesipiko, pre-pagtambal nga impormasyon makahimo sa mas hapsay nga eksperimento mga laraw-sama sa ali (Higgins, Sävje, and Sekhon 2016) ug target recruitment sa mga partisipante (Eckles, Kizilcec, and Bakshy 2016) -ug nga mas makahuluganong pagtuki-sama sa pagbana-bana sa heterogeneity sa mga epekto sa pagtambal (Athey and Imbens 2016a) ug covariate kausaban alang sa naugmad nga katukma (Bloniarz et al. 2016) .

Ikatulo, samtang daghan nga Analog lab ug sa uma mga eksperimento sa pagluwas sa pagtambal ug sukod resulta sa usa ka medyo tampoy kantidad sa panahon, ang pipila digital eksperimento naglakip sa mga paagi sa pagtambal nga mahimong gitugyan sa panahon ug ang mga epekto mahimo usab nga misukod sa panahon. Kay sa panig-ingnan, Restivo ug van de Rijt ni eksperimento adunay sangpotanan gisukod sa adlaw-adlaw alang sa 90 ka adlaw, ug ang usa sa mga eksperimento ko pagsulti kaninyo mahitungod sa ulahi sa kapitulo (Ferraro, Miranda, and Price 2011) tracks resulta sa ibabaw sa 3 ka tuig sa batakan nga walay gasto. Kini nga mga tulo ka mga mga oportunidad-gidak-on, pre-pagtambal impormasyon, ug longhitudinal pagtambal ug resulta sa data-labing komon nga sa diha eksperimento sa mga modagan sa ibabaw sa kanunay-sa sistema sa mga sukod (tan-awa sa Kapitulo 2 alang sa dugang sa kanunay-sa sistema sa pagsukod).

Samtang digital eksperimento sa paghalad sa daghan nga mga posibilidad, sila usab sa pagpakigbahin sa pipila ka mga kahuyang sa sa duha Analog lab ug eksperimento. Kay sa panig-ingnan, ang mga eksperimento dili mahimong gamiton sa pagtuon sa nangagi, ug mahimo lamang sila Gibanabana sa mga epekto sa mga pagtambal nga mahimong gi-kontrol. Usab, bisan tuod mga eksperimento sa mga walay duhaduha mapuslanon sa paggiya palisiya, ang eksaktong giya sila makahimo sa paghalad sa mao ang medyo limitado tungod sa mga komplikasyon sama sa sa kalikopan pagsalig, mga problema sa pagsunod, ug normal nga mga buluhaton epekto (Banerjee and Duflo 2009; Deaton 2010) . Sa kataposan, digital eksperimento sa pagpalambo sa mga ethical kabalaka gibuhat sa uma eksperimento. Proponents sa uma eksperimento trompeta sa ilang abilidad sa kaligdong ug sa sinalagma mangilabot sa consequential desisyon sa minilyon-milyon nga mga tawo. Kini nga mga bahin sa paghalad sa pipila ka siyentipikanhong mga bentaha, apan mahimo usab nga sila sa paghimo sa eksperimento sa moral komplikado (hunahuna mahitungod niini nga ang mga tigsiksik sa pagtagad sa mga tawo sama sa "lab ilaga" sa usa ka kaylap nga scale). Dugang pa, dugang pa sa posible nga nagdulot og dakong kadaot sa mga partisipante, digital eksperimento, tungod sa ilang scale, mahimo usab nga pagpataas sa mga kabalaka mahitungod sa pagkabalda sa pagtrabaho sosyal nga mga sistema (pananglitan, mga kabalaka mahitungod sa makabalda nga ganti nga sistema ni Wikipedia kon Restivo ug van der Rijt mihatag usab sa daghan nga barnstars) .