4.3 təcrübələr iki ölçüləri: laboratoriya sahəsində və analoq

Lab təcrübələr sahəsində təcrübələr realizm təklif və digital sahəsində təcrübələr miqyasda nəzarət və realizm birləşdirir, nəzarət təklif edirik.

Denemeler bir çox farklı şekillerde ve boyutlarda olur. Keçmişdə, tədqiqatçılar laboratoriya təcrübələri və sahə təcrübələri arasındakı bir mühitdə eksperimentlər təşkil etməyi faydalı tapdılar. İndi tədqiqatçılar eyni zamanda analoq təcrübələr və rəqəmsal eksperimentlər arasında ikinci bir davamlılıq dövründə də təcrübələr təşkil etməlidirlər. Bu iki ölçülü dizayn sahəsi fərqli yanaşmaların güclü və zəif tərəflərini anlamaqda və ən böyük fürsət sahələrini qeyd etməyə kömək edəcəkdir (şəkil 4.1).

Şəkil 4.1: Təcrübə üçün dizayn yerinin şeması. Keçmişdə, təcrübə laboratoriya sahəsində ölçüsü boyunca dəyişdi. İndi də onlar analog-rəqəmsal ölçüdə dəyişirlər. Bu iki ölçülü dizayn sahəsi mən bu fəsildə təsvir etdiyim dörd təcrübədən təsvir olunur. Mənim fikrimcə, ən böyük fürsət sahəsi rəqəmsal sahədə təcrübədir.

Eksperimentlərin təşkil ediləcəyi bir ölçülü laboratoriya sahəsi ölçüsüdür. Sosial elmlərdə bir çox təcrübə laboratoriya laboratoriyasında lisenziya tələbələrinin kurs krediti üçün qəribə vəzifələri yerinə yetirdiyi laboratoriya təcrübələridir . Bu cür təcrübə psixologiyada tədqiqata üstünlük verir, çünki tədqiqatçılar sosial davranışla bağlı xüsusi nəzəriyyələri dəqiq izah etmək və test etmək üçün yüksək səviyyədə nəzarət edilən parametrlər yaratmağa imkan verir. Ancaq bəzi problemlər üçün belə bir qeyri-adi şəraitdə belə qeyri-adi vəzifələri yerinə yetirən qeyri-adi insanlardan insan davranışı ilə bağlı qəti nəticələr çıxarmaqdan bir şey qəribədir. Bu narahatlıqlar sahə təcrübələrinə doğru bir hərəkətə gətirib çıxardı. Sahə təcrübələri, daha təbii hallarda daha çox ümumi tapşırıqları yerinə yetirən iştirakçıların daha çox nümayəndələri ilə təsadüfi nəzarət sınaqlarının güclü dizaynını birləşdirir.

Bəzi insanlar laboratoriya və sahə təcrübələrini rəqabət üsulları kimi düşünsələr də, onları müxtəlif güclü və zəif cəhətləri ilə tamamlayıcı hesab edirlər. Məsələn, Correll, Benard, and Paik (2007) "analıq cəzasının" mənbələrini tapmaq üçün həm laboratoriya təcrübəsi, həm də sahə təcrübəsini istifadə edirdi. ABŞ-da, analar uşaqlar üçün daha az pul qazanırlar. Bənzər işlərdə çalışan qadınları oxşar bacarıqlarla müqayisə etmək. Bu nümunə üçün bir çox mümkün şərhlər var, bunlardan biri işəgötürənlərin analara qarşı qərəzli olmasıdır. (Maraqlıdır ki, əksinə atalar üçün doğrudur: onlar müqayisəsiz uşaqlıqsız kişilərdən daha çox gəlir əldə edirlər.) Analara qarşı mümkün təxribatları qiymətləndirmək üçün Correll və həmkarları iki təcrübəni - laboratoriya və bir sahədə - birinə keçirdi.

Birincisi, laboratoriya təcrübəsində kollec tələbələri olan bir iştirakçıya bir şirkətin yeni Şərq Sahilinin marketinq şöbəsinə rəhbərlik etmək üçün bir adamın məşğulluq axtarışı aparıldığını söylədilər. Tələbələrə şirkətin işəgötürmə prosesində yardım istədikləri və bir neçə potensial namizədin təzyiqlərini nəzərdən keçirmək və namizədlərin bir sıra ölçüləri, məsələn, istihbari, istilik və işə borcları kimi qiymətləndirmək tələb olunduqları bildirildi. Bundan əlavə, tələbələrə ərizəçini işə götürməyi və başlanğıc əmək haqqı kimi təklif edəcəyini tövsiyə edəcəklərini soruşdular. Şagirdlərdən xəbərsiz olduqları halda, rezyume xüsusilə bir şey istisna olmaqla qurulmuşdur: bəziləri analıq (bir valideyn-müəllim birliyinə daxil olma siyahılarına görə) və bəziləri olmadı. Correll və həmkarları tələbələrin anaların işə götürülməsini tövsiyə etmə ehtimalı az olduqlarını və daha aşağı başlanğıc əmək haqqı təklif etdiklərini təsbit etdilər. Bundan əlavə, həm reytinq və həm də işəgötürənlərlə bağlı qərarların statistik təhlili sayəsində Correll və həmkarları anaların narahatçılığının əsasən onların bacarıq və öhdəlik baxımından daha aşağı dərəcədə qiymətləndirildikləri ilə izah etdilər. Beləliklə, bu laboratoriya təcrübəsi Correll və həmkarlarına nəyə əsaslanan təsirini ölçməyə və bu təsir üçün mümkün bir izahat verməyə icazə verdi.

Əlbəttə ki, ABŞ-ın bütün əmək bazarı ilə bağlı yekun nəticələr verməkdən şübhə yarada bilər. Yəqin ki, tam zamanlı bir iş görməmiş bir neçə yüz tələbə qərarına əsasən, işə götürülməmişdir. Buna görə də, Correll və həmkarları da tamamlayıcı bir sahə təcrübəsi etdi. Onlar saxta əhatə məktubları və rezyume ilə yüzlərlə reklam verilmiş iş yerləri cavab verdi. Tələbələrə göstərilən materiallara bənzər kimi, bəziləri də anonimliyə siqnal verir, bəziləri isə bilmirlər. Correll və iş yoldaşları, analara bərabər keyfiyyətsiz uşaqsız qadınlara nisbətən müsahibə üçün geri çağırılma ehtimalı az olduğunu təsbit etdi. Başqa sözlə, real işəgötürənlər təbii şəraitdə son dərəcə qərəzli qərarlar qəbul edənlər kimi çox bacardılar. Eyni səbəblərlə eyni qərarlar verdilər mi? Təəssüf ki, biz bilmirik. Tədqiqatçılar işəgötürənlərdən namizədləri qiymətləndirməyə və ya qərarlarını izah etməyə imkan vermədilər.

Bu cüt təcrübələr ümumiyyətlə laboratoriya və sahə təcrübələri haqqında çox şey ortaya çıxır. Lab təcrübələri tədqiqatçılara ətraf mühitin ümumi nəzarəti ilə iştirakçıların qərar qəbul etdiyini təklif edir. Beləliklə, məsələn, laboratoriya təcrübəsində Correll və həmkarları bütün rezyumelərin səssiz bir şəraitdə oxumasını təmin edə bildi; sahə təcrübəsində, bəzi rezyumelər belə oxunmamış ola bilərdi. Bununla yanaşı, laboratoriya şəraitində iştirak edənlər araşdırıldıqlarını bilirdilər, çünki tədqiqatçılar tez-tez iştirakçıların qərar qəbul etdiyini izah etməyə kömək edə biləcək əlavə məlumatlar toplaya bilirlər. Məsələn, Correll və həmkarları laboratoriya təcrübəsində iştirakçıları fərqli ölçülərdə namizədləri qiymətləndirmək istədi. Bu proses məlumatları tədqiqatçıların iştirakçıların rezyume ilə necə davranması ilə bağlı fərqlərin arxasında olan mexanizmləri anlamaqda kömək edə bilər.

Digər tərəfdən, mən də üstünlük kimi təsvir etdiyim bu dəqiq xüsusiyyətlər də bəzən mənfi cəhətlər hesab olunur. Sahə təcrübələrini üstün edən tədqiqatçılar, laboratoriya təcrübələrindəki iştirakçıların çox fərqli hərəkət edə biləcəyini iddia edirlər, çünki onlar öyrənildiklərini bilirlər. Məsələn, laboratoriya təcrübəsində iştirakçılar tədqiqatın məqsədini təxmin edə bilər və yanlış görünməmək üçün davranışlarını dəyişdirmiş ola bilərlər. Bundan əlavə, sahə təcrübələrini üstün edən tədqiqatçılar rezyumelərdə kiçik fərqlər yalnız çox təmiz, steril bir laboratoriya mühitində fərqlənə bilər və beləliklə laboratoriya təcrübəsi analıqın real işəgötürən qərarlarına təsirini yüksək qiymətləndirəcəkdir. Nəhayət, sahə təcrübələrinin bir çox müdafiəçiləri laboratoriya təcrübələrini WEIRD iştirakçılarına güvənirlər: əsasən Qərb, təhsilli, sənayeləşmiş, zəngin və demokratik ölkələrdən olan tələbələr (Henrich, Heine, and Norenzayan 2010a) . Correll və həmkarları tərəfindən edilən təcrübələr (2007) laboratoriya sahəsində davamlılığa dair iki həddən uzaqlıqları göstərir. Bu iki aşırma arasında bir sıra hibrid dizaynlar da mövcuddur, o cümlədən tələbələrə laboratoriyaya daxil olmaq və ya sahəyə daxil olmaq kimi yanaşmalar daxildir, lakin hələ də iştirakçılar qeyri-adi bir vəzifə yerinə yetirirlər.

Keçmişdə mövcud olan laboratoriya sahəsi ölçüsündən başqa rəqəmsal yaş tədqiqatçıların artıq ikinci bir əsas ölçüyə malik olduğunu və bununla birlikdə təcrübələrin dəyişə biləcəyini ifadə edir: analog-rəqəmsal. Təmiz laboratoriya təcrübələri, təmiz sahə təcrübələri və müxtəlif hibridlər arasında olduğu kimi, saf analoq təcrübələr, saf rəqəmsal eksperimentlər və müxtəlif hibridlər var. Bu ölçülü rəsmi bir tərif təsvir etmək çətindir, lakin faydalı bir iş tərifi tamamilə rəqəmsal eksperimentlər , iştirakçıları cəlb etmək, rastgele etmək, müalicə etmək və nəticələri qiymətləndirmək üçün rəqəmsal infrastrukturdan istifadə edən eksperimentlərdir. Məsələn, Restivo və van de Rijt (2012) Barnstars və Vikipediyanı öyrənmək tamamilə rəqəmsal bir sınaq idi, çünki bu dörd addım üçün rəqəmsal sistemlərdən istifadə edilmişdir. Eyni şəkildə, tamamilə analoji təcrübələr bu dörd addımın hər hansı birində rəqəmsal infrastrukturdan istifadə etmir. Psixologiyada klassik təcrübələrin əksəriyyəti tamamilə analoq təcrübədir. Bu iki aşırma arasında, analog və rəqəmsal sistemlərin birləşməsini istifadə edən qismən rəqəmsal eksperimentlər var.

Bəzi insanlar rəqəmsal təcrübələri düşündüyündə, dərhal onlayn təcrübələri düşünürlər. Bu uğursuzdur, çünki rəqəmsal eksperimentlərin aparılması imkanları yalnız onlayn deyil. Tədqiqatçılar müalicə və ya nəticəni ölçmək üçün fiziki dünyada rəqəmli qurğulardan istifadə edərək qismən rəqəmsal eksperimentlər apara bilərlər. Məsələn, tədqiqatçılar nəticələrini ölçmək üçün qurulmuş mühitdə müalicə və ya sensorları çatdırmaq üçün smartfonlardan istifadə edə bilərlər. Əslində, bu fəsildə daha sonra görəcəyik ki, tədqiqatçılar artıq 8,5 milyon ev təsərrüfatını (Allcott 2015) əhatə edən enerji istehlakı ilə bağlı eksperimentlərdə nəticələrin ölçülməsi üçün ev elektrik sayğaclarını istifadə etmişlər. Rəqəmsal cihazların insanların həyatına getdikcə inteqrasiya edildiyi və sensorlar inşa edilən ətraf mühitə inteqrasiya olunduğu üçün fiziki dünyada qismən rəqəmsal eksperimentlər aparmaq üçün bu imkanlar dramatik şəkildə artacaqdır. Başqa sözlə, rəqəmsal eksperimentlər yalnız onlayn təcrübələr deyildir.

Rəqəmsal sistemlər laboratoriya sahəsində davamlılıq boyunca hər yerdə təcrübələr üçün yeni imkanlar yaradır. Təmiz laboratoriya təcrübələrində, məsələn, tədqiqatçılar iştirakçıların davranışlarını dəqiq ölçmək üçün rəqəmli sistemlərdən istifadə edə bilərlər; bu tip təkmilləşdirilmiş ölçmə nümunəsidir ki, baxışın dəqiq və davamlı tədbirlərini təmin edən göz-izləmə avadanlığıdır. Rəqəmsal yaş da laboratoriya kimi təcrübələrin onlayn rejimində işləməsini təmin edir. Məsələn, tədqiqatçılar sürətlə Amazon Mechanical Turk (MTurk) 'yı online sınaqlara iştirakçıları cəlb etmək üçün qəbul etdilər (şəkil 4.2). MTurk, bu vəzifələri pulla tamamlamaq istəyən "işçilər" ilə tamamlanması lazım olan vəzifələri olan "işəgötürənlər" ilə qarşılaşır. Ancaq ənənəvi əmək bazarlarından fərqli olaraq, işlədilən tapşırıqlar, adətən, tamamlanması üçün bir neçə dəqiqə tələb edir və işəgötürən və işçi arasındakı bütün qarşılıqlı əlaqə onlayndır. MTurk, ənənəvi laboratoriya təcrübələrinin aspektlərini təqlid etdiyindən, insanları azadlığa buraxmayacaqları vəzifələri yerinə yetirmək üçün ödəyir - təbii olaraq müəyyən növ təcrübələrə uyğun gəlir. MTurk, əsasən iştirakçıların hovuzunu idarə etmək üçün infrastruktur yaradıb və insanları işə götürür və tədqiqatçılar həmin infrastrukturdan faydalanaraq həmişə iştirakçıların hovuzuna daxil olmaq üçün istifadə edirdilər.

Şəkil 4.2: Amazon Mechanical Turk (MTurk) -dan məlumatlar dərc olunmuş məqalələr. MTurk və digər onlayn əmək bazarları tədqiqatçılara eksperimentlər üçün iştirakçıları cəlb etmək üçün əlverişli bir yol təqdim edirlər. Bohannon (2016) uyarlanmıştır.

Rəqəmsal sistemlər sahə kimi təcrübələr üçün daha çox imkanlar yaradır. Xüsusilə, tədqiqatçılar laboratoriya təcrübələri ilə əlaqəli sıx nəzarət və proses məlumatlarını daha fərqli iştirakçılar və laboratoriya təcrübələri ilə əlaqəli olan daha təbii parametrləri birləşdirməyə imkan verir. Bundan əlavə, rəqəmsal sahə təcrübələri də analoji təcrübələrdə çətinləşən üç imkan təqdim edir.

Birincisi, ən analoq laboratoriya və sahə təcrübələrində yüzlərlə iştirakçı var, dijital sahə təcrübələrində milyonlarla iştirakçı ola bilər. Ölçüsündeki bu dəyişiklik, bəzi rəqəmsal eksperimentlər, məlumatların sıfır dəyişən xərclərlə verə biləcəyi səbəbidir. Yəni tədqiqatçılar bir dəfə eksperimental infrastruktur yaradıb, iştirakçıların sayını artırmaq adətən xərcləri artırmır. 100 və daha çox faktorla iştirakçıların sayının artması yalnız kəmiyyət dəyişiklik deyil; tədqiqatçıların fərqli şeyləri eksperimentlərdən (məsələn, müalicə effektlərinin heterojenliyi) öyrənməsi və tamamilə fərqli eksperimental dizaynları (məsələn, böyük qrup təcrübələri) işlətməsinə imkan verdiyinə görə keyfiyyətcə dəyişiklikdir. Bu nöqtə çox vacibdir, rəqəmsal eksperimentlər yaratmaq üçün məsləhət təklif edəndə fəslin sonuna doğru dönəcəyəm.

İkincisi, ən çox analoq laboratoriya və sahə təcrübələrində iştirakçıları fərqlənməyən widgets kimi qiymətləndirərkən, rəqəmsal sahə təcrübələri, iştirakçıların plan və analiz mərhələlərində iştirakçıları haqqında məlumatları istifadə edirlər. Əvvəlcədən müalicə məlumatları adlanan bu məlumatlar tez-tez rəqəmsal eksperimentlərdə mövcuddur, çünki onlar həmişə ölçmə sistemlərinin üzərində işləyirlər (baxın, 2-ci fəsil). Məsələn, Facebook-da bir tədqiqatçı, bir universitet tədqiqatçısının öz analoq sahəsindəki təcrübəsi olan insanlara nisbətən rəqəmsal sahə təcrübəsində olan insanlar haqqında daha çox müalicə məlumatına malikdir. Bu əvvəlcədən müalicə (Higgins, Sävje, and Sekhon 2016) iştirakçıları hədəf alan (Eckles, Kizilcec, and Bakshy 2016) bloklama kimi daha səmərəli eksperimental dizaynlara və daha dərin analizlərə - məsələn, müalicə effektlərinin heterojenliyinin qiymətləndirilməsinə imkan verir (Athey and Imbens 2016a) və təkmilləşdirilmiş həssaslıq üçün covariate tənzimləmə (Bloniarz et al. 2016) .

Üçüncüsü, bir çox analoq laboratoriya və sahə təcrübəsi nisbətən sıxılmış miqdarda müalicə və nəticələrin ölçülməsi ilə nəticələnsə də, bəzi rəqəmsal sahə təcrübələri daha uzun müddətlərdə baş verir. Məsələn, Restivo və van de Rijtin sınaqları gündə 90 gündə ölçülmüşdür və nəticədə sizə (Ferraro, Miranda, and Price 2011) bölməsində (Ferraro, Miranda, and Price 2011) haqqında məlumat verəcəyəm ki, təcrübələrdən biri üç il ərzində nəticələrin izlənilməsində əsasən yox qiyməti. Bu üç imkanlar ölçüsü, əvvəlcədən müalicə məlumatı və uzununa müalicə və nəticə məlumatları, təcrübələri hər zaman ölçmə sistemlərinin üstündə tətbiq edildiyi zaman ən çox ortaya çıxır (həmişə ölçmə sistemləri haqqında daha ətraflı məlumat üçün baxın).

Rəqəmsal sahədə təcrübə bir çox imkanlar təqdim edərkən, həm də analog laboratoriya və analoq sahə təcrübələrində bəzi zəiflikləri paylaşır. Məsələn, təcrübələr keçmişi öyrənmək üçün istifadə edilə bilməz və onlar yalnız manipulyasiya edilə bilən müalicələrin təsirlərini qiymətləndirə bilərlər. Həm də, təcrübə siyasəti istiqamətləndirmək şübhəsiz faydalı olsa da, ətraf mühitə asılılıq, uyğunluq problemləri və balans təsirləri (Banerjee and Duflo 2009; Deaton 2010) kimi çətinliklərdən ötəri təklif edə biləcək dəqiq təlimat bir qədər məhduddur. Rəqəmsal sahə təcrübələri də sahə təcrübələrində yaradılmış etik problemləri - bu fəsildə və fəsil 6-da müzakirə edəcəyəm bir mövzunu da artırır.