4.3 tajribalar ikki bosqichga: laboratoriya-dala va analog-raqamli

Laboratoriya tajribalari dala tajribalari realizm taklif va raqamli dala tajribalari miqyosda nazorat va realizm birlashtirish, nazorat taklif etamiz.

Tajribalar turli shakllarda va o'lchovlarda bo'ladi. O'tmishda tadqiqotchilar laboratoriya tajribalari va yarim tajribalar o'rtasidagi doimiylikda eksperimentlarni tashkil qilishda foydali bo'lishdi. Ammo, hozirgi vaqtda tadqiqotchilar tajriba va raqamli eksperimentlar o'rtasida ikkinchi bir konkmer bo'yicha eksperimentlarni tashkil qilishlari kerak. Ushbu ikki o'lchovli dizayn maydoni turli xil yondashuvlarning kuchli va zaif tomonlarini tushunishingizga yordam beradi va katta imkoniyatlarni belgilab beradi (4.1-rasm).

Shakl 4.1: Tajribalar uchun dizayn maydonlarining chizig'i. O'tmishda tajriba laboratoriya maydoni o'lchovi bo'ylab farqlanadi. Endi ular analog-raqamli o'lchamda ham farqlanadi. Ushbu ikki o'lchamli dizayn maydoni bu bobda tasvirlab bergan to'rtta tajriba bilan tasvirlangan. Menimcha, eng katta fursat maydoni raqamli tajriba.

Eksperimentlar o'tkazilishi mumkin bo'lgan bir o'lchov laboratoriya maydoni o'lchovidir. Ijtimoiy fanlar bo'yicha ko'plab tajribalar laboratoriya tajribasi bo'lib , bakalavr talabalari dars kreditida laboratoriyada g'alati vazifalarni bajarishadi. Ushbu turdagi tajriba psixologiyada tadqiqotlarni boshqaradi, chunki tadqiqotchilarga ijtimoiy xulq-atvor haqida muayyan nazariyani aniq ajratish va sinab ko'rish uchun yuqori darajada nazorat qilinadigan parametrlarni yaratish imkonini beradi. Biroq ba'zi muammolar uchun bunday odatiy bo'lmagan sharoitda bunday g'ayrioddiy vazifalarni bajaradigan g'ayritabiiy odamlardan odamlarning xulq-atvoriga oid kuchli xulosalar chiqarish haqida biroz g'alati tuyg'u paydo bo'ladi. Bu xavotirlar dala tajribalaridagi harakatga olib keldi. Dala eksperimentlari randomizatsiyalangan nazorat tajribalarining kuchli dizaynini birlashtirib, tabiiy muhitda yanada kengroq vazifalarni bajaradigan ishtirokchilarning ko'proq vakil guruhlari bilan ishlaydi.

Ba'zi odamlar laboratoriya va dala tajribalarini raqobat usullari deb o'ylashsa-da, ularni turli kuchlar va zaif tomonlari bilan bir-birini to'ldirishni o'ylash yaxshidir. Masalan, Correll, Benard, and Paik (2007) "onalik jazosi" manbalarini topish uchun ikkala laboratoriya eksperimenti va maydon tajribasini qo'llagan. Qo'shma Shtatlarda onalar bolalari bo'lmagan ayollardan kamroq pul topishadi. Shu kabi ishlarda ishlaydigan ayollarga o'xshash ko'nikmalar bilan taqqoslash. Ushbu naqsh uchun juda ko'p tushuntirishlar mavjud, ulardan biri ish beruvchilarning onalarga qarshi qaratilganligi. (Qizig'i shundaki, otalar uchun to'g'risi to'g'ri ko'rinadi: solishtiradigan bolasiz kishilarga qaraganda ko'proq pul ishlashga moyil bo'ladi.) Onalarga qarshi ehtimol tutashliklarni baholash uchun Correll va uning hamkasblari ikkita eksperimentni o'tkazdilar: biri laboratoriya va bitta dalada.

Birinchidan, laboratoriya tajribasida ular kollej bitiruvchilari bo'lgan ishtirokchilarga yangi kompaniyaga yangi East Coast marketing departamentini boshqarish uchun ish izlab topishganini aytishdi. Talabalarga aytilganidek, kompaniya ishga qabul qilish jarayonida yordam so'radilar va ulardan bir nechta potentsial nomzodlarning rezyumelarini ko'rib chiqish va nomzodlarga o'zlarining aql-zakovati, harorati va ish bilan shug'ullanishi kabi bir qator o'lchamlarni baholash talab qilindi. Bundan tashqari, o'quvchilarga ariza beruvchini ishga olishni taklif qilishlarini va boshlang'ich ish haqi sifatida tavsiya etishlarini taklif qilishlarini so'rashdi. Talabalardan xabardor bo'lmasa-da, rezyumelarlarning birortasi bundan mustasno bo'lib qurilgan edi: ulardan ba'zilari onalikni ko'rsatdi (ota-onalar o'qituvchilari uyushmasida ishtirok etishlari mumkin edi) va ba'zilari bunday qilmadi. Correll va uning hamkasblari o'quvchilarga onalar ijaraga berishni tavsiya eta olmasliklari va ularga boshlang'ich boshlang'ich badalini taklif qilishlari mumkinligini aniqladilar. Bundan tashqari, reytinglar va ishga qabul qilish bilan bog'liq qarorlar statistik tahlil qilish orqali Correll va uning hamkasblari onalar kamchiligini ularning vakolati va majburiyatlari jihatidan kamroq baholanganligi bilan izohlashdi. Shunday qilib, ushbu laboratoriya tajribasi Correll va uning hamkasblariga natija ta'sirini o'lchash imkonini berdi va bu ta'sirni tushuntirish mumkin edi.

Albatta, AQShning butun mehnat bozori haqida xulosalar chiqarishga shubha bilan qarash mumkin, ehtimol, hech qachon to'la vaqtli ish bo'lmagan va birovni ishga yollanmagan bir necha yuz nafar magistrlarning qarorlari asosida. Shuning uchun Correll va uning hamkasblari qo'shimcha tajriba o'tkazishdi. Ular soxta qopqoq maktublari va rezyumelarlari bilan yuzlab reklama ishlarini bajarishga javob berishdi. Magistrantlarga ko'rsatiladigan materiallarga o'xshab, ba'zilari onalik signalini davom ettirmoqda, ba'zilari esa yo'q. Correll va uning hamkasblari shuni aniqladilarki, onalar ham intervyularga qayta chaqirishlari ehtimoldan holi emas, chunki ular tengsiz malakasiz ayollardir. Boshqa so'z bilan aytganda, haqiqiy ish beruvchilar tabiiy sharoitda qaror qabul qiladigan talabalar ham bakalavrlarga o'xshab qolishdi. Xuddi shunday sabablarga ko'ra xuddi shunday qarorlar qabul qildilarmi? Afsuski, biz bilmaymiz. Tadqiqotchilar ish beruvchilarga nomzodlarni baholash yoki ularning qarorlarini tushuntirishlarini so'rasholmadi.

Bu tajriba juftligi umuman laboratoriya va dala eksperimentlari haqida ko'p narsani ochib beradi. Laboratoriya tajribalari tadqiqotchilarga atrof-muhitning umumiy nazoratini taqdim etadi, unda ishtirokchilar qaror qabul qiladi. Misol uchun, laboratoriya tajribasida Korrell va uning hamkasblari barcha rezyumelarlarning sokin muhitda o'qishlarini ta'minlashga muvaffaq bo'lishdi; daladagi eksperimentda ba'zi rezyumelar hatto o'qilmasdi. Bundan tashqari, laboratoriya sharoitidagi ishtirokchilar tadqiqot olib borilayotganini bilishganligi sababli, tadqiqotchilar ko'pincha ishtirokchilar nima uchun qaror qabul qilishayotganini tushuntirishga yordam beradigan qo'shimcha ma'lumotlarni to'play olishadi. Masalan, Correll va uning hamkasblari laboratoriya tajribasidagi ishtirokchilarga turli o'lchamdagi nomzodlarni baholash uchun so'radi. Jurnal ma'lumotlarining bunday turlari tadqiqotchilarga ishtirokchilarning rezyumelarga qanday munosabatda bo'lishidan farq qiluvchi mexanizmlarni tushunishiga yordam berishi mumkin.

Boshqa tomondan, men hozirda afzalliklarga ega bo'lgan shu kabi xususiyatlar, ba'zida kamchiliklar deb hisoblaymiz. Dala eksperimentlarini afzal ko'rgan tadqiqotchilar laboratoriya tajribasi ishtirokchilarining ular o'rganilayotganini bilishgani uchun juda boshqacha harakat qilishlari mumkinligini ta'kidlaydilar. Misol uchun, laboratoriya tajribasida ishtirokchilar tadqiqotning maqsadini taxmin qilishgan va o'zlarining xatti-harakatlarini o'zgartirmasliklari mumkin edi. Bundan tashqari, tajriba o'tkazishni afzal ko'rgan tadqiqotchilar, rezyume- larning kichik farqlari faqat juda toza, steril laboratoriya muhitida turishi mumkinligi va shuning uchun laboratoriya tajribasi onalikni haqiqiy ijara qarorlari ustidan ta'sirini yuqori baholaydi. Va nihoyat, ko'plab tajriba sohalari bo'yicha mutaxassislar, WEIRD ishtirokchilariga, xususan, G'arb, o'qimishli, sanoatlashgan, boy va demokratik mamlakatlar (Henrich, Heine, and Norenzayan 2010a) . Correll va uning hamkasblari tomonidan o'tkazilgan tajribalar (2007) laboratoriya koni continumidagi ikkita chegara tasvirlangan. Ushbu ikkita chegara oralig'ida turli xil gibrid dizaynlar mavjud, jumladan, o'quvchilarni laboratoriyaga olib borish yoki dalaga chiqish kabi yondashuvlar, ammo ishtirokchilarning o'zgacha vazifalari bor.

Ilgari mavjud bo'lgan laboratoriya maydonining o'lchamidan tashqari, raqamli yosh, tadqiqotchilar hozirgi vaqtda ikkinchi katta o'lchamga ega bo'lgan degan ma'noni anglatadi, bu tajribalar turli xil bo'lishi mumkin: analog-raqamli. Sof lab laboratoriya tajribalari, sof dalalardagi tajribalar va turli xil duragaylar mavjud bo'lgani kabi, sof analog tajribalar, sof raqamli tajribalar va har xil duragaylar bor. Bu o'lchamning rasmiy tavsifini taklif qilish qiyin emas, ammo foydali ish ta'rifi raqamli eksperimentlar raqamli infratuzilmani ishtirokchilarni jalb qilish, rassomlash, davolash va natijalarni o'lchash uchun ishlatadigan eksperimentlardir. Misol uchun, Restivo va van de Rijt (2012) barnstars va Vikipediyani o'rganish to'liq raqamli tajriba bo'lgan, chunki bu to'rtta qadam uchun raqamli tizimlardan foydalanilgan. Xuddi shu tarzda, to'liq analog tajribalar bu to'rt bosqichning har qanday biri uchun raqamli infratuzilmadan foydalanmaydi. Psixologiyadagi klassik tajribalarning aksariyati butunlay o'xshash tajribalardir. Bu ikki faza o'rtasida analog va raqamli tizimlarning kombinatsiyasidan foydalanadigan qisman raqamli tajribalar mavjud.

Ba'zi odamlar raqamli tajribalar haqida o'ylashganda, darhol onlayn tajribalar haqida o'ylashadi. Bu befoyda, chunki raqamli eksperimentlarni o'tkazish imkoniyati faqat onlayn emas. Tadqiqotchilar jismoniy dunyoda raqamli qurilmalardan foydalanib, davolanish yoki natijalarni o'lchash uchun qisman raqamli eksperimentlar o'tkazishlari mumkin. Masalan, tadqiqotchilar natijalarni o'lchash uchun qurilgan muhitda davolash yoki sensorlarni etkazib berish uchun smartfonlardan foydalanishlari mumkin. Darhaqiqat, ushbu bobning oxirida ko'rib chiqilgandek, tadqiqotchilar 8,5 million uylarni o'z ichiga olgan energiya iste'moli bo'yicha tajribalar natijalarini o'lchash uchun uy-joy o'lchagichlarini ishlatgan (Allcott 2015) . Raqamli qurilmalar odamlarning hayotiga tobora integratsiyalashib borayotgani va sensorlarning qurilgan muhitga integratsiyalashuvi natijasida jismoniy dunyoda qisman raqamli eksperimentlarni o'tkazish imkoniyati keskin oshadi. Boshqacha aytganda, raqamli eksperimentlar onlayn tajribalar emas.

Raqamli tizimlar laboratoriya sharoitida har bir joyda eksperimentlar uchun yangi imkoniyatlar yaratadi. Sof lab laboratoriya tajribalarida, masalan, tadqiqotchilar ishtirokchilarning xatti-harakatlarini yaxshiroq o'lchash uchun raqamli tizimlardan foydalanishlari mumkin; Ushbu turdagi takomillashtirilgan o'lchashning bir misolidan ko'zni kuzatish uskunasi aniq va uzluksiz ko'rish joylarini beradi. Raqamli yosh ham laborotoriya kabi tajribalar onlayn ishlash imkoniyatini yaratadi. Masalan, tadqiqotchilar tezda Amazon Mechanical Turk (MTurk) ni onlayn tajribalar uchun qatnashchilarni jalb qilishdi (4.2-rasm). MTurk bu ishlarni pulga to'ldirishni istagan "ishchilar" bilan tugatilishi kerak bo'lgan vazifalarni bajaradigan "ish beruvchilar" bilan uylanadi. An'anaviy mehnat bozorlaridan farqli o'laroq, bu vazifalar, odatda, bajarilishi kerak bo'lgan bir necha daqiqani talab qiladi va ish beruvchi va ishchi o'rtasidagi barcha shovqin onlayndir. MTurk, an'anaviy laboratoriya tajribalari tomonlarini taqlid qilmoqda, chunki odamlar erkinlik bilan ishlamaydigan topshiriqlarni bajarish uchun to'lovlarni amalga oshirishadi - tabiiy ravishda, muayyan turdagi tajribalar uchun mos keladi. MTurk, ishtirokchilar havzasini boshqarish uchun infratuzilmani yaratdi - odamlarni jalb qilish va to'lash - tadqiqotchilar bu infratuzilmadan foydalandilar, bu esa ishtirokchilarning har doim mavjud bo'lgan havuziga kirishga imkon berdi.

Shakl 4.2: Amazon Mechanical Turkiyadan (MTurk) olingan ma'lumotlar yordamida chop etilgan maqolalar. MTurk va boshqa onlayn mehnat bozorlari tadqiqotchilarga eksperimentlar o'tkazish uchun ishtirokchilarni jalb qilishning qulay usulini taklif qiladi. Bohannon (2016) dan moslangan.

Raqamli tizimlar maydonga o'xshash tajribalar uchun ko'proq imkoniyatlarni yaratadi. Xususan, tadqiqotchilar laboratoriya eksperimentlari bilan bog'liq bo'lgan qattiq nazorat va jarayon ma'lumotlarini turli ishtirokchilar va laboratoriya tajribalari bilan bog'liq bo'lgan tabiiy sharoitlarni birlashtirishga imkon beradi. Bundan tashqari, raqamli yarim himoyachi tajribalari ham uchta imkoniyatni taklif etadi.

Birinchidan, ko'plab analog laboratoriya va yarim tajribalar yuzlab ishtirokchilarga ega bo'lsa-da, raqamli yarim tajriba millionlab ishtirokchilarga ega bo'lishi mumkin. Raqamli tajribalar nolinchi o'zgaruvchan narxlarda ma'lumotlarni ishlab chiqishi mumkinligi sababli o'lchovdagi bu o'zgarishdir. Ya'ni, tadqiqotchilar eksperimental infratuzilmani yaratganlaridan so'ng, ishtirokchilar sonini ko'paytirish odatda xarajatlarni ko'paytirmaydi. Ishtirokchilar sonini 100 va undan ortiq faktor bilan oshirish - bu faqat miqdoriy o'zgarish emas; bu sifatli o'zgarishdir, chunki tadqiqotchilar turli narsalarni eksperimentlardan o'rganishga (masalan, davolash effektlarining heterojenitesiga) va butunlay boshqacha eksperimental dizaynlarni (masalan, katta guruhli tajribalar) ishlashiga imkon beradi. Bu nuqta juda muhim, men raqamli eksperimentlarni yaratish haqida maslahat berayotib, bo'limning oxiriga qaytaman.

Ikkinchidan, analog laboratoriya va yarim himoyachi tajribalari ishtirokchilarni ajralib turuvchi vidjetlar deb hisoblasa-da, raqamli yarim tajribalar ko'pincha ishtirokchilarning tadqiqot va tahlil bosqichlarida asosiy ma'lumotlardan foydalanadi. Oldindan davolash ma'lumoti deb ataladigan ushbu ma'lumot , ko'pincha raqamli eksperimentlarda mavjud bo'ladi, chunki ular har doim o'lchash tizimlarining ustida ishlaydi (2-bobni ko'ring). Misol uchun, Facebookdagi tadqiqotchi, uning raqamli tajriba sohasidagi odamlarga nisbatan ancha oldindan davolash ma'lumotlarini olishi, universitet tadqiqotchisi o'zining analogiy tajriba sohasidagi odamlarga nisbatan ko'proq ma'lumotga ega. Ushbu oldingi davolanish (Higgins, Sävje, and Sekhon 2016) blokirovkalash va ishtirokchilarni (Eckles, Kizilcec, and Bakshy 2016) blokirovkalash kabi yanada samarali tajriba-konstruktsiyalarni ishlab (Higgins, Sävje, and Sekhon 2016) imkon beradi - va batafsilroq tahlil qilish, masalan, davolash effektlarining heterojenligini baholash (Athey and Imbens 2016a) va takomillashtiruvchi aniqlik (Bloniarz et al. 2016) uchun kovaryant moslashuv.

Uchinchidan, ko'plab analog laboratoriya va tajriba tajribalari, nisbatan siqilgan miqdordagi davolanish va natijalarni o'lchash imkonini beradi, biroq ba'zi raqamli yarim tajribalar ancha ko'p vaqtni tashkil qiladi. Misol uchun, Restivo va van de Rijt eksperimenti kuniga 90 kun davomida o'lchangan natijaga erishdi va men sizni keyinroq (Ferraro, Miranda, and Price 2011) bobida aytib o'tadigan tajribalaridan biri uch yil mobaynida natijalarni kuzatdi, asosan, yo'q xarajat. Ushbu uchta imkoniyat o'lchovi, oldindan davolash ma'lumoti va uzunlamasına davolash va natija ma'lumotlari odatda tajriba har doim o'lchov tizimlarida amalga oshirilganda ko'pincha paydo bo'ladi (har doim o'lchov tizimlarida ko'proq ma'lumot olish uchun 2 qismni ko'ring).

Raqamli tajriba ko'plab imkoniyatlarni taqdim etsa-da, ular analog laboratoriya va analog maydon tajribalari bilan ba'zi zaif tomonlarni ham almashishadi. Masalan, tajribalarni o'tmishni o'rganish uchun ishlatish mumkin emas va ular faqatgina manipulyatsiya qilinadigan muolajalarning oqibatlarini taxmin qilishlari mumkin. Bundan tashqari, eksperimentlar siyosatga rahbarlik qilishda shubhasiz bo'lsa-da, ular taqdim eta oladigan aniq ko'rsatmalar atrof-muhitga bog'liqlik, muvofiqlik muammolari va muvozanat oqibatlari kabi qiyinchiliklar tufayli cheklangan (Banerjee and Duflo 2009; Deaton 2010) . Raqamli yarim himoyachi tajribalari, shuningdek, yarim tajribalardagi axloqiy tashvishlarni ham kuchaytiradi - men ushbu bobning oxirida va 6-bobda muhokama qiladigan mavzu.