4.3 təcrübələr iki ölçüləri: laboratoriya sahəsində və analoq
Lab təcrübələr sahəsində təcrübələr realizm təklif və digital sahəsində təcrübələr miqyasda nəzarət və realizm birləşdirir, nəzarət təklif edirik.
Denemeler çox müxtəlif formalı və ölçülü olur. Lakin, bu fərqlərə baxmayaraq, tədqiqatçılar faydalı laboratoriya təcrübələr və sahə təcrübələr arasında davamlı boyunca eksperimentlər təşkil tapmışdır. İndi isə tədqiqatçılar da analog təcrübələr və rəqəmsal təcrübələr arasında davamlı boyunca eksperimentlər təşkil etməlidir. Bu iki ölçülü dizayn kosmik ən böyük imkan sahələri (Şəkil 4.1) güclü və müxtəlif yanaşmalar zəif tərəflərini anlamaq və gəlir kömək edəcək.
Şəkil 4.1: eksperimentlər üçün dizayn yer sxematik. Keçmişdə, təcrübələr laboratoriya sahə ölçüsü boyunca müxtəlif. İndi onlar da analoq ölçüsü dəyişir. Mənim fikrimcə, ən böyük fürsət sahəsi digital sahəsində eksperimentlər edir.
Keçmişdə, tədqiqatçılar eksperimentlər təşkil ki, əsas yol laboratoriya sahəsində ölçüsü boyunca idi. Sosial elmlər təcrübələr əksəriyyəti bakalavr tələbələr kurs kredit üçün laboratoriya qəribə vəzifələri yerinə yetirmək laboratoriya təcrübələr var. sosial davranış haqqında çox xüsusi nəzəriyyə test üçün nəzərdə çox xüsusi müalicə yaratmaq üçün tədqiqatçılar imkan verir, çünki təcrübə bu növü psixologiya tədqiqat hökm sürür. müəyyən problemlər üçün, lakin, bir şey belə bir qeyri-adi qəbulu bu cür qeyri-adi vəzifələri həyata belə qeyri-adi insanlar insan davranışı haqqında güclü nəticələr rəsm haqqında bir az qəribə hiss edir. Bu narahatlıqlar sahəsində təcrübələr doğru hərəkət gətirib çıxarmışdır. Field təcrübələr daha təbii ayarları, daha çox vəzifələri həyata iştirakçıları daha nümayəndəsi qrupları ilə randomizə nəzarət eksperimentlər güclü dizayn birləşdirir.
bəzi insanlar üsulları rəqabət kimi laboratoriya və sahə təcrübələr hesab baxmayaraq, müxtəlif güclü və zəif cəhətləri ilə tamamlayıcı üsul olaraq onlara düşünmək üçün ən yaxşı. Məsələn, Correll, Benard, and Paik (2007) bir laboratoriya sınaq və mənbələri "analıq cəza". ABŞ-da tapmaq cəhdi sahəsində təcrübə, həm də istifadə analar, hətta sonsuz qadınlar daha az pul qazanmaq oxşar işlərdə çalışan bənzər bacarıqları ilə müqayisə qadın. Bu model üçün bir çox mümkün şərhlər və bir işəgötürənlər anaların qarşı qərəzli olunur. (Maraqlıdır ki, qarşı ataları üçün doğru görünür: onlar müqayisə uşaqsız kişilərin daha çox qazanmaq edirlər). laboratoriya bir sahədə bir: anaların qarşı mümkün qərəzli qiymətləndirmək üçün, Correll və həmkarları iki təcrübələr qaçdı.
Birincisi, bir laboratoriya sınaq Correll və həmkarları bir California-based start-up rabitə şirkəti yeni East Coast marketinq şöbəsi səbəb bir şəxs üçün əmək axtarış aparılması edilmişdir ki, college magistr idi iştirakçıları bildirib. Şagirdlər şirkəti işəgötürmə prosesində öz yardım istəyirdi və onlar bir neçə potensial namizədlərin yenidən nəzərdən keçirmək və işləmək üçün onların kəşfiyyat, istilik və öhdəlik kimi ölçüləri bir sıra namizədlərin dərəcəsi xahiş bildirilib. onlar ərizəçini və nə onlar bir başlanğıc əmək haqqı tövsiyə edirəm işə məsləhətdir, əgər Bundan əlavə, tələbələr istəndi. şagirdlərə unbeknownst, lakin CV xüsusi bir şey istisna olmaqla, oxşar inşa edilmişdir: yenidən bəzi (bir valideyn-müəllim birlikdə iştirakını siyahısı ilə) analıq işarə və bəzi olmadı. Correll tələbələr anaların işə gəlir az idi və onlara aşağı əmək haqqı təklif etdi. Bundan əlavə, ratings və işə bağlı qərarlar həm də statistik təhlili, Correll analarınızın mənfi cəhətləri əsasən ana səlahiyyətləri və öhdəlik baxımından aşağı qiymətləndirilib ki, onunla izah edildi ki, tapılmadı. Başqa sözlə, Correll bu əlamətlərin analar zərər çəkmiş olan vasitəsilə mexanizm olduğunu müdafiə edir. Belə ki, bu laboratoriya təcrübə səbəbli təsiri ölçmək ki, təsir üçün mümkün izahat təmin etmək Correll və həmkarları verdi.
Əlbəttə ki, yəqin ki, Dursun, bir tam iş idi nəfər muzdlu heç vaxt bir neçə yüz tələbələrin qərarları əsasında bütün ABŞ-ın əmək bazarı haqqında nəticələr rəsm qoymadı ola bilər. Buna görə də, Correll və həmkarları da tamamlayıcı eksperiment aparmışdır. Tədqiqatçılar saxta əhatə məktublar və bərpa göndərməklə reklam iş açılış yüzlərlə cavab verdi. magistrant göstərilən materiallar kimi, bəzi CV analıq işarə və bəzi olmadı. Correll və həmkarları ana bərabər ixtisaslı sonsuz qadınlar daha müsahibələr geri çağırdı almaq üçün az ehtimal idi ki, tapılmadı. Başqa sözlə, təbii qəbulu ardıcıl qərarlar qəbul real işəgötürənlər çox magistrant kimi davranırdı. Eyni səbəbdən bənzər qərarlar qəbul etmək mi? Təəssüf ki, biz bilmirik. tədqiqatçılar namizədlər dərəcəsi və ya öz qərarlarını izah işəgötürənlər xahiş bilmədilər.
təcrübələr Bu cüt ümumi laboratoriya və sahə təcrübələr haqqında çox göstərir. Lab təcrübələr iştirakçılar qərarlar qəbul edən ətraf mühitin ümumi nəzarət yaxınlığında tədqiqatçılar təklif edirik. Belə ki, məsələn, laboratoriya təcrübə, Correll bütün CV sakit qəbulu oxumaq ki, təmin edə idi sahəsində təcrübə, yenidən bəzi hətta oxumaq ola bilər. laboratoriya qəbulu iştirakçılar tədqiq olunur ki, bilirik, çünki Bundan əlavə, tədqiqatçılar, tez-tez iştirakçıları qərarlar qəbul niyə onları anlamaq kömək edə bilər əlavə məlumat toplamaq edə bilərlər. Məsələn, Correll müxtəlif ölçüləri namizədləri dizaynını laboratoriya təcrübə iştirakçıları istədi. Proses məlumatların bu cür tədqiqatçılar iştirakçıları yenidən müalicə necə fərqlər arxasında mexanizmləri anlamaq kömək edə bilər.
Digər tərəfdən, mən yalnız üstünlükləri kimi təsvir bu eyni xüsusiyyətləri də bəzən mənfi cəhətləri hesab olunur. sahəsində təcrübələr üstünlük Tədqiqatçılar onlar yaxından müşahidə olunur zaman laboratoriya təcrübələr iştirakçıları çox fərqli hərəkət edə bilər ki, mübahisə. Məsələn, laboratoriya təcrübə iştirakçıları tədqiqat məqsədi guessed və qərəzli görünür deyil, belə ki, onların davranış dəyişdirilə bilər. Bundan əlavə, yenidən ki, kiçik fərqlər iddia edə bilər sahədə təcrübələr üstünlük tədqiqatçılar bir çox təmiz, steril laboratoriya mühitində həyata durmaq bilər, və beləliklə laboratoriya təcrübə real işə qərarlarına analıq təsiri həddindən artıq qiymətləndirmək olacaq. Sənayeləşmiş Təhsilli Qərb, Zəngin əsasən tələbələr və demokratik ölkələrdə: Nəhayət, sahəsində təcrübələr çox tərəfdarları Qəribə iştirakçıları laboratoriya eksperimentlər inam tənqid (Henrich, Heine, and Norenzayan 2010) . Correll və həmkarları ilə təcrübələr (2007) laboratoriya sahə davamlı iki ifrata göstərir. Bu iki ifrata arasında belə bir laboratoriya qeyri-tələbə gətirilməsi və ya sahəsində gedən lakin hələ də iştirakçılar qeyri-adi tapşırıq yerinə yetirmək olan kimi yanaşmalar, o cümlədən hibrid dizayn bir sıra var.
analoq: keçmişdə mövcud laboratoriya sahədə ölçüsü əlavə, digital yaş tədqiqatçılar indi təcrübələr fərqli ola bilər ki, birlikdə ikinci böyük ölçü deməkdir. təmiz laboratoriya təcrübələr, saf sahəsində təcrübələr və arasında hibridləri bir sıra var kimi, təmiz analog təcrübələr, təmiz digital təcrübələr və hibridləri bir sıra var. Bu ölçüsü bir formal tərifi təklif çətin, lakin faydalı iş müəyyən tam digital təcrübələr, iştirakçıları cəlb randomize, müalicə çatdırmaq və nəticələri ölçmək üçün digital infrastrukturunun istifadə etmək təcrübələr ki. Məsələn, Restivo və van de Rijt nin (2012) bu addımlar bütün dörd digital sistemlər istifadə çünki barnstars öyrənilməsi və Wikipedia tam digital təcrübə idi. Eyni zamanda tam analog təcrübələr bu dörd addımlar hər hansı bir rəqəmsal infrastrukturunun istifadə etməyən təcrübələr var. psixologiya klassik təcrübələr çox analog təcrübələr var. Bu iki ifrata arasında qismən dörd addımlar analoq və digital sistemlərinin bir arada istifadə digital təcrübələr var.
Tənqidi, imkanlar yalnız online digital təcrübələr deyil çalıştırmak üçün. Tədqiqatçılar müalicə çatdırmaq və ya nəticələri ölçmək üçün fiziki dünyada digital cihazlar istifadə edərək qismən digital təcrübələr çalıştırabilirsiniz. Məsələn, tədqiqatçılar nəticələri ölçmək üçün inşa mühitdə müalicə və ya sensorlar çatdırmaq üçün smart telefonlar istifadə edə bilər. Bu fəsildə sonra görəcəksiniz kimi Əslində, tədqiqatçılar artıq sosial norma və ev təsərrüfatlarının 8,5 milyon cəlb enerji istehlakı haqqında təcrübələr nəticələri ölçmək üçün ev güc metr istifadə (Allcott 2015) . digital cihazlar getdikcə insanların həyatına inteqrasiya olmaq və sensorlar daxili mühitə inteqrasiya olmaq kimi, bu imkanlar dramatik artacaq fiziki dünyada qismən digital təcrübələr run. Başqa sözlə, digital təcrübələr yalnız online təcrübələr deyil.
Digital sistemləri hər yerdə laboratoriya sahəsində davamlı birlikdə eksperimentlər üçün yeni imkanlar yaradır. təmiz laboratoriya təcrübələr, məsələn, tədqiqatçılar iştirakçıların davranış finer ölçülməsi üçün digital sistemi istifadə edə bilərsiniz; təkmilləşdirilmiş ölçü bu cür bir misal baxışları yeri dəqiq və davamlı tədbirlər təmin göz izleme avadanlıq. digital yaş də online laboratoriya kimi eksperimentlər çalıştırmak üçün imkan yaradır. Məsələn, tədqiqatçılar sürətlə online eksperimentlər üçün iştirakçıları (Şəkil 4.2) cəlb Amazon Mechanical Türk (MTurk) qəbul etmişdir. MTurk pul o vəzifələri başa çatdırmaq üçün arzulayıram "işçi" ilə başa lazımdır vəzifələri var "işəgötürənlər" gəlir. Ənənəvi əmək bazarlarının fərqli olaraq, lakin, adətən cəlb vəzifələri yalnız başa çatdırmaq üçün bir neçə dəqiqə tələb edir və işəgötürən və işçi arasında bütün qarşılıqlı virtual deyil. ənənəvi laboratoriya eksperimentlər ödəyən adam bir MTurk mimics aspektləri onlar üçün nə deyil ki, vəzifələri başa çatdırmaq üçün, çünki sərbəst təbii təcrübələr müəyyən növləri üçün idealdır. Əsasən, MTurk iştirakçıları-işə bir hovuz idarə edilməsi və insan və tədqiqatçılar iştirakçıların həmişə mövcud hovuz daxil kran ki, infrastruktur istifadə etmişlər ödənilməsi üçün infrastruktur yaradıb.
Şəkil 4.2: Papers Amazon Mechanical Türk (MTurk) veri istifadə edərək nəşr (Bohannon 2016) . MTurk və digər online əmək bazarları tədqiqatçılar eksperimentlər üçün iştirakçıları cəlb üçün rahat bir yol təqdim edir.
Digital təcrübələr sahəsində kimi təcrübələr üçün daha çox imkanlar yaradır. Digital sahəsində təcrübələr (sahəsində təcrübələr kimi) təbii mühitdə real qərarlar qəbul (laboratoriya təcrübələr kimi) mümkün mexanizmləri və daha çox müxtəlif iştirakçıları anlamaq üçün sıx nəzarət və proses data təklif edə bilər. əvvəlki təcrübələr yaxşı xüsusiyyətləri bu birləşməsi ilə yanaşı, digital sahəsində təcrübələr də analog laboratoriya və sahə təcrübələr çətin idi üç imkanlar təklif edirik.
ən analog laboratoriya və sahə təcrübələr iştirakçıları yüzlərlə var, halbuki Birincisi, digital sahəsində təcrübələr iştirakçılarının milyonlarla ola bilər. bir digital təcrübələr sıfır dəyişən dəyəri data istehsal edə bilər, çünki miqyasda bu dəyişiklikdir. Tədqiqatçılar adətən dəyəri artırmaq deyil iştirakçıların sayının artırılması, eksperimental infrastruktur yaratdıq dəfə ki, edir. 100 və ya daha çox bir amil iştirakçıların sayı artır yalnız kəmiyyət dəyişiklik deyil bu təcrübələr (məsələn, müalicə təsiri heterogenliyi) və (tamamilə müxtəlif eksperimental dizayn run fərqli şeylər öyrənmək üçün tədqiqatçılar imkan verir, çünki, bu, keyfiyyətli dəyişiklik edir məsələn, böyük qrup təcrübələr). Mən digital eksperimentlər yaradılması haqqında məsləhətlər təklif Bu nöqtə qədər əhəmiyyətli, mən fəslin sonuna doğru bu qayıtmaq lazımdır.
ən analog laboratoriya və sahə təcrübələr iştirakçıları müalicə isə İkinci olaraq fərqedilməz widgets, digital sahəsində eksperimentlər tez-tez tədqiqat dizayn və analiz mərhələdə iştirakçılar haqqında geniş məlumat istifadə edin. Onlar tam qiymətləndirilir mühitlərdə keçiriləcək çünki pre-müalicə məlumat adlanan Bu background məlumat, digital təcrübələr tez-tez mövcuddur. Məsələn, Facebook bir tədqiqatçı magistrant ilə standart laboratoriya sınaq dizayn araşdırmaçı daha çox pre-müalicə məlumat var. Bu pre-müalicə məlumat iştirakçıları fərqedilməz widgets müalicə kənarda hərəkət etmək tədqiqatçılar imkan verir. Daha konkret desək, pre-müalicə məlumat blok daha səmərəli təcrübə belə dizayn-imkan verir (Higgins, Sävje, and Sekhon 2016) və iştirakçıların hədəf işə (Eckles, Kizilcec, and Bakshy 2016) Və daha çox dərin təhlili cür heterogen qiymətləndirilməsi kimi müalicə təsiri (Athey and Imbens 2016a) və təkmilləşdirilmiş dəqiq covariate tənzimlənməsi (Bloniarz et al. 2016) .
çox analog laboratoriya və sahə təcrübələr vaxt nisbətən sıxılmış məbləğində müalicə və tədbir nəticələri çatdırmaq isə Üçüncüsü, bəzi digital sahəsində eksperimentlər zamanla təqdim edilə bilər və təsiri də zamanla ölçülə bilər müalicə daxildir. Məsələn, Restivo və van de Rijt eksperimenti 90 gün üçün gündəlik qiymətləndirilir nəticəsi var və təcrübələr bir Mən sonra fəsildə sizə deyim (Ferraro, Miranda, and Price 2011) heç bir əsasən 3 il ərzində nəticələri izler dəyəri. Bu üç imkanları ölçülü, pre-müalicə informasiya və uzununa müalicə və nəticəsi təcrübələr üst run zaman ən ümumi data-həmişə-on ölçmə sistemləri (həmişə-on ölçü sistemləri daha Chapter 2 bax).
digital sahəsində təcrübələr çox imkanlar təklif baxmayaraq, onlar da analog laboratoriya və sahə təcrübələr, həm də bəzi zəif cəhətləri bölüşürlər. Məsələn, təcrübələr keçmiş öyrənmək üçün istifadə edilə bilməz və yalnız manipulyasiya edilə bilər müalicə təsiri qiymətləndirmək olar. Təcrübələr şübhəsiz siyasəti doğru yola üçün faydalı olmasına baxmayaraq Həmçinin, onlar təklif edə bilər dəqiq rəhbərlik çünki ekoloji asılılıq, uyğunluq problemləri, və tarazlıq təsiri kimi ağırlaşmalar qədər məhduddur (Banerjee and Duflo 2009; Deaton 2010) . Nəhayət, digital sahəsində təcrübələr sahəsində təcrübələr yaratdığı etik narahatlıq böyütmək. sahəsində təcrübələr tərəfdarları unobtrusively və təsadüfi milyonlarla insan tərəfindən ardıcıl qərarlar müdaxilə qabiliyyətini truba. Bu xüsusiyyətlər müəyyən elmi üstünlükləri təklif, lakin onlar da (tədqiqatçılar böyük miqyasda "laboratoriya siçovulların" kimi insanları müalicə kimi bu barədə düşünmək) sahəsində təcrübələr etik mürəkkəb edə bilərsiniz. Bundan əlavə, iştirakçılara mümkün zərər əlavə, digital sahəsində təcrübələr, çünki onların miqyaslı, həmçinin sosial sistemlərinin iş pozulması haqqında narahatlıqlarını bilər (məsələn, Restivo və van der Rijt çox barnstars verdi Wikipedia mükafat sistemi pozmaq haqqında narahatlıq) .
