Осы кітабында қарастырылған тәсілдерде (2-тарау) және сұрақтарды қою (3 тарау) - зерттеушілер деректерді әдейі және жүйелі түрде әлемді өзгертпестен жинайды. Осы тарауда айтылған тәсіл - жұмыс істеп тұрған эксперименттер - бұл түбегейлі ерекшеленеді. Зерттеушілер эксперименттер жасағанда, олар себеп-салдар қатынастары туралы сұрақтарға жауап беру үшін өте қолайлы деректерді жасау үшін жүйеге араласады.
Әлеуметтік зерттеулерде себеп-салдарлық мәселелер өте жиі кездеседі және мысалдарға мыналар жатады: Мұғалімнің жалақысын көбейту оқушылардың білімін арттырады ма? Жұмыспен қамту деңгейіне ең төменгі жалақының әсері қандай? Жұмыс іздеуші үміткер жұмысқа орналасу мүмкіндігіне қалай әсер етеді? Кейбір себеп-салдар сұрақтарына қосымша кейде себеп-салдарлық сұрақтар кейбір өнімділік метрикасын максимизациялау туралы жалпы сұрақтарға қатысты. Мысалы, «ҮЕҰ-ның веб-сайтында қайырымдылық түймесі қандай түсті болуы керек?» Деген сұрақ шын мәнінде қайырымдылықтағы әр түрлі түймелердің әсері туралы көптеген сұрақтар.
Себептерге жауап берудің бір жолы - деректердегі үлгілерді іздеу. Мысалы, мұғалімнің жалақысын студенттердің оқуына әсері туралы сұраққа қайтып оралсақ, сіз мұғалімдердің жоғары жалақыларын ұсынатын мектептерде оқушылардың көп нәрсені үйренуін есептей аласыз. Бірақ, бұл корреляция жоғары жалақы студенттердің көбірек білуіне себеп бола ма? Әрине жоқ. Мұғалімдер көп жұмыс істейтін мектептер көптеген жолдармен ерекшеленуі мүмкін. Мысалға, мұғалімдердің жалақысы жоғары мектептердегі оқушылар бай отбасылардан болуы мүмкін. Осылайша, мұғалімдердің әсері әртүрлі студенттерді салыстырудан пайда болуы мүмкін. Студенттер арасындағы бұл өлшенбестен айырмашылықтар шатастырушылар деп аталады және тұтастай алғанда, зерттеушілердің қолданыстағы деректерде үлгілерді іздеп, себеп-салдарлық сұрақтарға жауап беру қабілетін бұзады.
Шатастырушылар мәселесінің бірі - топтар арасында бақыланатын айырмашылықтарды реттеу арқылы әділ салыстыруды жүргізу. Мысалға, мемлекеттік салықтық деректерді бірнеше үкіметтік веб-сайттардан жүктей аласыз. Содан кейін үйдегі бағалар ұқсас болғандықтан, мұғалімдердің жалақысы әртүрлі болған мектептердегі оқушылардың үлгерімін салыстыруға болады, алайда мұғалімдердің жоғары ақы төлейтін мектептерде оқушылардың көп нәрсені үйренуі мүмкін. Бірақ әлі де көп ықтимал шатастырушылар бар. Бұл студенттердің ата-аналары білім деңгейінде әртүрлі болуы мүмкін. Немесе мектептер қоғамдық кітапханалармен тығыз қарым-қатынаста болуы мүмкін. Немесе жоғары мұғаліммен жұмыс істейтін мектептерде ақысыз ақы төленеді, ал мұғалімдерге төленетін ақы емес, негізгі ақы төленеді. Сіз осы факторларды өлшеуге және реттеуге тырысыңыз, бірақ ықтимал шатастырушылар тізімі шексіз болып табылады. Көптеген жағдайларда сіз барлық ықтимал шатастырушыларға өлшеп, реттей алмайсыз. Бұл қиындыққа жауап ретінде зерттеушілер эксперименттік емес деректерден себеп-сандық бағалауды жасаудың бірнеше әдісін әзірледі - олардың кейбірін 2-тарауда талқыладым, бірақ кейбір сұрақтар бойынша бұл әдістер шектеулі және тәжірибелер болашағы зор балама.
Эксперименттер зерттеушілерге белгілі бір себеп-салдарлық сұрақтарға сенімді түрде жауап беру үшін табиғи түрде кездесетін деректердегі корреляциядан тыс шығуға мүмкіндік береді. Аналогтық кезеңде эксперименттер жиі логистикалық қиын және қымбат болды. Енді сандық дәуірде логистикалық шектеулер бірте-бірте жойылып кетеді. Өткен тәжірибе сияқты тәжірибе жасау оңайырақ емес, қазір тәжірибенің жаңа түрлерін іске қосуға болады.
Мен әлі күнге дейін өзімнің тілімде аздап босатылып жазғанымда, екі нәрсені ажырата білу маңызды: тәжірибелер мен рандомизацияланған бақыланатын эксперименттер. Эксперимент барысында зерттеуші әлемге араласады, содан кейін нәтижені өлшейді. Мен бұл әдісті «абыржып, бақылап отыр» деп сипаттадым. Рандомизирленген бақыланатын экспериментте зерттеуші басқа адамдарға емес, кейбір адамдарға араласады, және зерттеуші адамдарға қандай араласуды рандомизация арқылы алуға болады (мысалы, монеталарды айналдыру). Рандомизирленген бақыланатын эксперименттер екі топ арасында әділ салыстыруды жасайды: біреуі араласып, біреуі жоқ. Басқаша айтқанда, рандомизацияланған бақыланатын эксперименттер - шатастырушылардың проблемаларын шешу. Алайда, эксперименттерді Perturb-мен байқаңыз, араласуды алған бір ғана топты қамтиды, сондықтан зерттеу нәтижелері зерттеушілерді дұрыс емес қорытындыға әкелуі мүмкін. Тәжірибелер мен рандомизацияланған бақыланатын эксперименттер арасындағы маңызды айырмашылықтарға қарамастан, әлеуметтік зерттеушілер жиі осы терминдерді өзара ауыстырады. Мен осы конвенцияны ұстанамын, бірақ, белгілі бір жағдайларда, рандомизациясыз және бақылау тобынсыз эксперименттер бойынша рандомизацияланған бақыланатын эксперименттердің мәнін белгілеу үшін конвенцияны бұзамын.
Рандомизирленген бақыланатын эксперименттер әлеуметтік әлем туралы білуге арналған қуатты әдіс ретінде дәлелденді және осы тарауда оларды зерттеуге қалай қолдануға болатынын көрсетемін. 4.2 бөлімінде эксперименттің негізгі логикасын Википедиядағы эксперимент мысалымен түсіндіріп беремін. Содан кейін 4.3 бөлімінде зертханалық эксперименттер мен далалық эксперименттер мен аналогтық эксперименттер мен цифрлық эксперименттер арасындағы айырмашылықтарды суреттеймін. Сонымен қатар, цифрлық далалық эксперименттер аналогтық зертханалық эксперименттердің (тығыз басқару) және аналогтық далалық эксперименттердің (реализмнің) ең жақсы мүмкіндіктерін ұсына алады, бұған дейін мүмкін емес шкала бойынша. Содан кейін, 4.4 бөлімде мен бай тәжірибелерді жобалау үшін өте маңызды үш тұжырымдаманы - жарамдылықты, емдеу эффекттерінің біртектілігін және механизмдерді сипаттаймын. Осыған байланысты мен сандық эксперименттер жүргізу үшін екі негізгі стратегиялармен айналысатын сауда-саттықты сипаттайтын боламын: өзіңіз жасай аласыз немесе қуатты адамдармен серіктес боласыз. Ақыр соңында, сандық эксперименттердің шынайы күшін қалай пайдалануға болатынын түсіндіріп, осы күшіне келетін жауапкершіліктің кейбірін сипаттаңыз (4.6.2 бөлім).