4.3 tajribalar ikki bosqichga: laboratoriya-dala va analog-raqamli

Laboratoriya tajribalari dala tajribalari realizm taklif va raqamli dala tajribalari miqyosda nazorat va realizm birlashtirish, nazorat taklif etamiz.

Tajribalar ko'p turli shakl va darajada bo'ladi. Lekin, bu farqlarga qaramay, tadqiqotchilar bu foydali laboratoriya tajribalari va dala tajribalari orasida bir umrlik birga tajribalar tashkil qilish topdik. Biroq, endi, tadqiqotchilar, shuningdek, analog va raqamli tajribalar tajribalar orasida bir umrlik birga tajribalar tashkil kerak. Bu ikki o'lchovli dizayn kosmik siz buyuk imkoniyat joylari (rasm 4.1) kuchli va turli yondashuvlar zaif tomonlarini tushunish va taklif yordam beradi.

Shakl 4.1: tajribalar uchun dizayn makon sxematik. Ilgari, tajribalar laboratoriya-dala o'lchov bo'ylab turlicha. Endi, ular ham analog-raqamli hajmi o'zgaradi. Menimcha, eng buyuk imkoniyat maydoni raqamli dala tajribalari hisoblanadi.

Ilgari, tadqiqotchilar tajribalar tashkil asosiy yo'li laboratoriya-dala o'lchov birga edi. Ijtimoiy fanlar tajribalar ko'pchilik bakalavr talabalar kurs kredit uchun laboratoriyada g'alati vazifalarni bajarish laboratoriya tajribalari bor. ijtimoiy xulq haqida juda aniq nazariyalarini sinov qilish uchun mo'ljallangan juda ko'p maxsus muolajalar yaratish tadqiqotchilar beradi, chunki eksperiment bu turi psixologiya tadqiqot o`sadi. muayyan muammolar uchun, Ammo, bir narsa bunday g'ayrioddiy muhitda bunday g'ayrioddiy vazifalarni amalga bunday g'ayrioddiy odamlardan inson xatti haqida kuchli xulosa haqida bir oz g'alati his. Bu xavotirlar dala tajribalari tomon bir harakati olib keldi. Field tajribalar ko'proq tabiiy sozlash, tez-tez vazifalarni amalga, ishtirokchilar ko'proq vakili guruhlar bilan randomize nazorat tajribalari kuchli dizayn birlashtirish.

ba'zi odamlar usullari raqobat kabi laboratoriya va dala tajribalari, deb o'ylayman-da, u turli kuchli va ojiz tomonlari bilan qo'shimcha usullar sifatida ularning o'ylab eng yaxshisidir. Misol uchun, Correll, Benard, and Paik (2007) bir laboratoriya tajriba va manbalarini "onalik jazo." Qo'shma Shtatlarda topish uchun bir urinish, bir maydon tajriba ham foydalanish, onalar, hatto befarzand ayollarning kam pul shunga o'xshash ishlarda ishlayotgan o'xshash ko'nikmalar bilan taqqoslab, ayollar. Bu naqsh uchun ko'p imkon tushuntirishlar bor, va bir ish beruvchilar onalar qarshi xulosa, deb hisoblanadi. (Qizig'i shundaki, qarama-qarshi otalar uchun haq ko'rinadi: Ular teng befarzand erkaklarga qaraganda ko'proq daromad moyil). laboratoriyada bir maydonda bir-: onalar qarshi imkon noto'g'ri baholash uchun, Correll va hamkasblari ikki tajribalar yugurdi.

Birinchidan, laboratoriya tajribada Correll va hamkasblari bilan Kaliforniyada joylashgan start-up aloqa kompaniyasi o'zining yangi East Coast marketing bo'limiga olib bir kishi uchun bir ish qidirish o'tkazish edi, kollej talaba bo'ldi, aytgan. Talabalar Firma ijaraga jarayonida o'z yordam so'radim va ular bir necha potentsial nomzodlar rezyume ko'rib chiqish va bunday ishlashni o'z razvedka, harorat va majburiyat sifatida yo'nalishlari bir qator nomzodlarni baholash uchun berildi, deb aytgan edi. Ular arizachi va nima ular bir boshlang'ich ish haqi sifatida tavsiya qilaman ishga tavsiya qilaman, agar Bundan tashqari, talabalar berildi. talabalar farkettirmeden Biroq, nomzodlarni, ayniqsa, bir narsa tashqari shunga o'xshash bo'lishi qurildi: rezyume ba'zi (a ota-o'qituvchi assotsiatsiyasi jalb ro'yxati bilan) onalik ishora va ba'zi qilmadi. Correll talabalar onalar ishga tavsiya kamroq edi va ularga quyi boshlang'ich ish haqi taqdim qildi. Bundan tashqari, Baho va ishga yollanishining bog'liq qarorlar ham bir statistik tahlil qilish orqali, Correll onalaringiz kamchiliklari asosan onalar vakolatiga va majburiyat jihatidan kam ovoz olgan edi, deb aslida bilan izohlanadi, deb topildi. Boshqa so'zlar bilan aytganda, Correll bu xususiyatlari onalar noqulay orqali mexanizmi, deb bahs yuritadi. Shunday qilib, bu laboratoriya tajriba nedensel ta'sirini o'lchash va ta'siri mumkin bo'lgan tushuntirish berish uchun Correll va hamkasblarini berdi.

Albatta, bir ehtimol u yoqda tursin, bir to'liq ish bor odamlarni ishga hech qachon bir necha yuz magistrantlari qarorlari asosida butun AQSh mehnat bozorida haqida xulosa haqida shubha bo'lishi mumkin. Shuning uchun, Correll va hamkasblari, shuningdek, bir-birini to'ldiruvchi dala tajriba o'tkazildi. tadqiqotchilar soxta qopqoqni harflar va rezyume yilda yuborib reklama ish o'rinlari yuzlab javob. magistrantlari uchun ko'rsatilgan materiallar o'xshash, ba'zi davom onalik ishora va ba'zi qilmadi. Correll va hamkasblari onalar teng malakali befarzand ayollarga nisbatan uchun suhbatga orqaga chaqirdi uchun kamroq edi, deb topildi. Boshqa so'zlar bilan aytganda, tabiiy muhitda muhim qarorlar qabul qilish real ish beruvchilar ko'p magistrantlari kabi yo'l. Ular bir xil sabablarga ko'ra o'xshash qarorlar qabul qilish edi? Afsuski, biz bilmaymiz. tadqiqotchilar nomzodlarni baholash yoki ularning qarorlarini tushuntirish uchun ish beruvchilar so'rash ega emas edilar.

tajribalar bu juftlik umuman laboratoriya va dala tajribalari haqida ko'p oshkor. Laboratoriya tajribalari ishtirokchilari qarorlar qabul qilish bo'lgan atrof-muhit umumiy nazorat yaqin tadqiqotchilar taklif etamiz. Shuning uchun, masalan, laboratoriya tajribada, Correll barcha nomzodlarni jim muhitda o'qib, deb ta'minlashga qodir edi; dala tajribasida rezyume ba'zi hatto o'qib bo'lishi mumkin. laboratoriya mo'ljallangan ishtirokchilari ular o'rganilmoqda, deb bilaman, chunki Bundan tashqari, tadqiqotchilar, ko'pincha ishtirokchilari o'z qarorlar qabul qilish nima uchun ularni tushunishga yordam mumkin qo'shimcha ma'lumotlarni to'plash ega bo'ladi. Misol uchun, Correll turli yo'nalishlari bo'yicha nomzodlarni baholash uchun laboratoriya tajribada ishtirokchilari so'radi. Jarayon ma'lumotlar Bunday tadqiqotchilar ishtirokchilari rezyume davolash qanday farqlar ortida mexanizmlarini tushunishga yordam berishi mumkin.

Boshqa tomondan, men faqat afzalliklari sifatida tasvirlangan bu bir xil xususiyatlari, shuningdek, ba'zan kamchiliklari hisoblanadi. dala tajribalari afzal tadqiqotchilar ular yaqindan kuzatilmoqda bo'lsa laboratoriya tajribalarida ishtirokchilari juda boshqacha harakat mumkin, deb da'vo. Misol uchun, laboratoriyada tajriba ishtirokchilari tadqiqot maqsadini bildi va xulosa paydo bermaslik uchun ularning xatti o'zgargan bo'lishi mumkin. Bundan tashqari, rezyume o'sha kichik farqlarni bahslasha mumkin dala tajribalari afzal tadqiqotchilar faqat juda toza, steril laborotoriya muhitida amalga turish mumkin, va shu laboratoriya tajriba real ishga yollanishining qarorlari ustidan onalik ta'sirini ustidan-taxmin qiladi. Sanoati ta'lim olgan G'arb, boy, asosan, talabalar va demokratik davlatlar: Nihoyat, dala tajribalari ko'p tarafdorlar WEIRD ishtirokchilariga laboratoriya tajribalari ishonish tanqid (Henrich, Heine, and Norenzayan 2010) . Correll va hamkasblari tomonidan tajribalar (2007) laboratoriya-dala uzluksiz ustida ikki-uch misol. Bu ikki nuqta o'rtasidagi bunday laboratoriya ichiga bo'lmagan talabalar olib yoki sohada ketadi, lekin hali ham ishtirokchilar g'ayrioddiy vazifani amalga oshirish deb yondashuvlar, shu jumladan, gibrid dizaynlashtirilgan turli bor.

analog-raqamli: o'tmishda mavjud laboratoriya-dala o'lchov tashqari, raqamli yoshi tadqiqotchilar hozir tajribalar farq qilishi mumkin bo'ylab ikkinchi yirik hajm ega, degan ma'noni anglatadi. sof laboratoriya tajribalari, sof faoliyat tajribalari va o'rtasida duragaylar turli bor kabi, sof analog tajribalar, sof raqamli tajribalar va duragaylar turli bor. Bu o'lchov rasmiy ta'rifini taklif qilish qiyin, lekin foydali ish ta'rifi to'liq raqamli tajribalar, ishtirokchilarni jalb tasodifiy, muolajalar etkazib, va natijalarini o'lchash uchun raqamli infratuzilmasini foydalanish tajribalar, deb hisoblanadi. Misol uchun, Restivo va van de Rijt ning (2012) , bu qadamning barcha to'rt raqamli tizimlari ishlatiladi, chunki barnstars o'rganish va Vikipediya to'liq raqamli tajriba bo'ldi. Xuddi shu tarzda to'liq analog tajribalar bu to'rt qadamning har qanday uchun raqamli infratuzilmasini foydalanishni qilmang tajribalar bor. psixologiya klassik tajribalar ko'plab analog tajribalar bor. Bu ikki nuqta o'rtasidagi qisman to'rt qadamlar uchun analog va raqamli tizimlar birlashmasidan foydalanish raqamli tajribalar bor.

Tanqidiy, imkoniyatlar faqat onlayn raqamli tajribalar emas ishlatish uchun. Tadqiqotchilar muolajalar etkazib yoki natijalarini o'lchash uchun jismoniy dunyoda raqamli qurilmalar orqali qisman raqamli tajribalar ishlating. Misol uchun, tadqiqotchilar natijalarini o'lchash uchun qurilgan muhitda muolajalar yoki Sensor yetkazib berish aqlli telefonlar foydalanishingiz mumkin. Biz ushbu bobda keyinchalik ko'rasiz, deb aslida, tadqiqotchilar allaqachon ijtimoiy normalar va uy 8,5 million jalb energiya iste'moli haqida tajribalarida natijalarini o'lchash uchun uy elektr metr foydalangan (Allcott 2015) . raqamli qurilmalar tobora xalq hayotida integratsiya bo'lish va datchiklar-muhitga singdirilishi bo'lib sifatida, bu imkoniyatlar keskin ortadi jismoniy dunyoda qisman raqamli tajribalar ishlatish uchun. Boshqa so'zlar bilan aytganda, raqamli tajribalar faqat onlayn tajribalar emas.

Raqamli tizimlari joyda laboratoriya-dala uzluksiz birga tajribalar uchun yangi imkoniyatlar yaratish. sof laboratoriya tajribalarida, masalan, tadqiqotchilar ishtirokchilar xulq nozik o'lchov uchun raqamli tizimlari foydalanishingiz mumkin; takomillashtirilgan o'lchov Ushbu turdagi bir misol nigohidagi joyning aniq va doimiy chora-tadbirlar beradi ko'z-kuzatish texnikasi hisoblanadi. raqamli yoshi ham onlayn laboratoriya kabi tajribalar ishlatish imkonini yaratadi. Misol uchun, tadqiqotchilar tez onlayn tajribalar uchun ishtirokchilarini (rasm 4.2) yollashga Amazon mexanik turk (MTurk) qabul qilgan. MTurk pul uchun shu vazifalarni bajarish uchun tilayman "ishchilar" bilan yakunlandi kerak vazifalarni ega "ish beruvchilar" pas. an'anaviy mehnat bozorlari farqli o'laroq, ammo, odatda, ishtirok vazifalarni faqat yakunlash uchun bir necha daqiqa talab va ish beruvchi va ishchi o'rtasidagi butun o'zaro virtual bo'ladi. an'anaviy laboratoriya tajribalarida maoshli odamlar MTurk taqlid jihatlari ular uchun nima yo'q edi vazifalarni bajarish uchun, chunki erkin tabiiy tajribalar ayrim turlari uchun javob beradi. Asosan, MTurk ishtirokchilari-tanlashning bir hovuz boshqarish va xalq-va tadqiqotchilar ishtirokchilarining bir, har doim mavjud hovuzga-ga teging, deb infratuzilmasini foyda olgan to'lash uchun infratuzilmani yaratdi.

Rasm 4.2: Maqolalar Amazon mexanik turk (MTurk) ma'lumotlarni foydalanib chop (Bohannon 2016) . MTurk va boshqa onlayn mehnat bozorlari araştımacılara tajribalar uchun ishtirokchilarni jalb qilish uchun qulay yo'l taqdim etamiz.

Raqamli tajribalar dala-kabi tajribalar uchun ham ko'proq imkoniyatlar yaratish. Raqamli dala tajribalari (dala tajribalari kabi) bir tabiiy muhitda real qaror qabul (laboratoriya tajribalari kabi) mumkin mexanizmlari va yana turli ishtirokchilari tushunish qattiq nazorat va jarayon ma'lumotlarni taqdim etishi mumkin. Avval tajribalar yaxshi xususiyatlaridan bu birikmasiga Bundan tashqari, raqamli dala tajribalari, shuningdek, analog laboratoriya va dala tajribalari qiyin edi, uch imkoniyatlar taklif etamiz.

eng analog laboratoriya va dala tajribalari ishtirokchilari yuzlab bor esa Birinchidan, raqamli dala tajribalari ishtirokchilari millionlab bo'lishi mumkin. Ba'zi raqamli tajribalar nol o'zgaruvchan xarajat ma'lumotlarni ishlab chiqarish mumkin, chunki miqyosda bu o'zgarish bo'ladi. tadqiqotchilar odatda xarajatlarni oshirish emas ishtirokchilari sonini oshirish, eksperimental infratuzilmasini yaratgan bir marta, deb hisoblanadi. 100 yoki undan ortiq bir omil tomonidan ishtirokchilar sonini oshirish faqat miqdoriy o'zgarish emas u tajribalar (masalan, davolash ta'siri turlilik) va (butunlay boshqacha tajriba dizaynidan ishlaydigan turli narsalarni o'rganish uchun tadqiqotchilar beradi, chunki, u sifatli o'zgarish, deb masalan, katta guruh tajribalar). Men raqamli tajribalar yaratish haqida maslahat taklif, bu nuqta juda muhim, men bobning oxirida unga qaytib olaman.

eng analog laboratoriya va dala tajribalari ishtirokchilari davolash esa ikkinchi, deb ko'rinmas vidjet, raqamli dala tajribalari tez-tez tadqiqotlar dizayn va tahlil bosqichlarida ishtirokchilari haqida ma'lumot foydalaning. Ular to'liq o'lchanadigan muhitda bo'lib o'tadi, chunki oldindan davolash axborot deb ataladi, bu fon axborot, raqamli tajribalar ko'pincha mavjud. Masalan, Facebook da bir tadqiqotchi magistrantlari bilan standart laboratoriya tajriba loyihalashtirish tadqiqotchi ko'ra ko'proq oldindan davolash haqida ma'lumot oladi. Bu oldindan davolash axborot ishtirokchilari ko'rinmas vidjetlarni davolash orqasida ko'chib o'tishga tadqiqotchilari beradi. Batafsil ravishda, oldindan davolash axborot to'sib sifatida yanada samarali tajriba bunday dizaynlashtirilgan-beradi (Higgins, Sävje, and Sekhon 2016) va ishtirokchilar maqsadli ishga qabul qilish (Eckles, Kizilcec, and Bakshy 2016) oradan yana ziyrakligi tahlil-bunday heterojenliğinin baholash sifatida davolash ta'siri (Athey and Imbens 2016a) va yaxshilandi aniqlik uchun Öndeğişken tuzatish (Bloniarz et al. 2016) .

ko'p analog laboratoriya va dala tajribalari vaqt nisbatan siqilgan miqdorda muolajalar va o'lchov natijalarini yetkazib esa uchinchi, ba'zi raqamli dala tajribalari vaqt davomida etkazib berilishi mumkin va ta'siri, shuningdek, vaqt o'tishi bilan o'lchanishi mumkin muolajalar o'z ichiga oladi. Misol uchun, Restivo va van de Rijt ning tajriba 90 kun davomida har kuni o'lchanadi natija bor, va tajribalar biri men keyinchalik bobda sizga aytaman (Ferraro, Miranda, and Price 2011) hech asosan 3 yil mobaynida natijalarini kuzatib qiymati. Bu uch imkoniyatlar-hajmi, oldindan davolash axborot va bo'ylama davolash va natija tajribalar ustida paytida eng keng tarqalgan ma'lumotlar har doim-kuni o'lchovlar tizimlari (har doim-kuni o'lchash tizimlari haqida ko'proq 2-bobga qarang).

raqamli dala tajribalari ko'p imkoniyatlarni taklif etsalar, ular ham analog laboratoriya va dala tajribalari ham ba'zi kamchiliklardan baham. Misol uchun, tajribalar o'tmishini o'rganish uchun foydalanish mumkin emas va ular faqat qayta ishlanishi mumkin davolash ta'sirini kiritish mumkin. Tajribalar, hech shubhasiz, siyosatini hidoyat uchun foydali bo'lsa-da, shuningdek, ular taklif mumkin aniq hidoyat, chunki bunday ekologik qaramlik, muvofiqligi muammolari va muvozanat ta'siri sifatida asoratlarni bir oz cheklangan (Banerjee and Duflo 2009; Deaton 2010) . Nihoyat, raqamli dala tajribalari dala tajribalari tomonidan yaratilgan axloqiy tashvishlari ulug'laymiz. dala tajribalari tarafdorlari ko'zga çarpmayacak va tasodifiy millionlab odamlar tomonidan amalga muhim qarorlar aralashishga o'z qobiliyatini burg'u. Bu xususiyatlari, ba'zi ilmiy foyda taklif, lekin ular ham (tadqiqotchilar katta miqyosda "laboratoriya kalamush" kabi odamlarni davolash sifatida o'ylab) dala tajribalari axloqiy murakkab mumkin. Bundan tashqari, ishtirokchilar mumkin tsivilizatsiyaga tashqari, raqamli dala tajribalari, chunki ularning ko'lamini, shuningdek, ijtimoiy tizimlar ish uzilishi xavotir oshirish mumkin (masalan, Restivo va van der Rijt juda ko'p barnstars berdi agar Vikipediyaning mukofot tizimini buzib haqida xavotirlar) .