Eksperimenti mjeriti ono što se dogodilo. Mehanizmi objasniti zašto i kako se to dogodilo.
Treća ključna ideja za prelazak van jednostavnih eksperimenata su mehanizmi . Mehanizmi nam govore zašto ili kako tretman prouzrokuje efekat. Proces traženja mehanizama se ponekad naziva i traženjem internih varijabli ili posredovanjem varijabli . Iako su eksperimenti dobri za procjenu uzročnih efekata, oni često nisu dizajnirani da otkrivaju mehanizme. Digitalni eksperimenti mogu da nam pomognu da identifikujemo mehanizme na dva načina: (1) omogućavaju nam da sakupimo više podataka o procesu i (2) omogućavaju nam testiranje mnogih povezanih tretmana.
Budući da su mehanizmi čudni da se formalno definišu (Hedström and Ylikoski 2010) , (Hedström and Ylikoski 2010) sa jednostavnim primjerom: limes and cirrus (Gerber and Green 2012) . U osamnaestom veku, doktori su imali prilično dobar osjećaj da kada su jedriličari jeli limes, nisu imali skorvata. Skurvy je strašna bolest, pa je to bila moćna informacija. Ali ovi ljekari nisu znali zašto je limuzina sprečila skorbu. Tek 1932. godine, gotovo 200 godina kasnije, naučnici su pouzdano pokazali da je vitamin C razlog što je kreč sprečio skorbu (Carpenter 1988, 191) . U ovom slučaju, vitamin C je mehanizam pomoću koga limes sprečava skorbu (slika 4.10). Naravno, identifikovanje mehanizma je takođe veoma važno naučno - mnogo nauke govori o tome zašto se stvari događaju. Mehanizmi identifikacije su takođe veoma važni praktično. Jednom kada shvatimo zašto lečenje funkcioniše, potencijalno možemo razviti nove tretmane koji rade još bolje.
Nažalost, izolacioni mehanizmi su veoma teški. Za razliku od limesa i skorba, u mnogim društvenim okolnostima, tretmani verovatno rade kroz mnoge međusobno povezane puteve. Međutim, u slučaju društvenih normi i upotrebe energije, istraživači su pokušali izolovati mehanizme sakupljanjem podataka o procesu i tretmanima vezanim za testiranje.
Jedan od načina za testiranje mogućih mehanizama je sakupljanje podataka o procesu kako je tretman uticao na moguće mehanizme. Na primjer, podsjetimo da je Allcott (2011) pokazao da su izvještaji o Allcott (2011) energijama prouzrokovali smanjenje potrošnje električne energije. Ali kako su ovi izveštaji smanjili potrošnju električne energije? Koji su bili mehanizmi? U Allcott and Rogers (2014) studiji, Allcott and Rogers (2014) udružili sa energetskom kompanijom koja je kroz program popusta dobila informacije o tome koje su potrošače nadogradile svoje uređaje sa energetski efikasnijim modelima. Allcott and Rogers (2014) otkrili da je malo više ljudi koji su primili Home Energy Reports nadograđivali svoje uređaje. Ali ova razlika je bila toliko mala da bi ona mogla predstavljati samo 2% smanjenja potrošnje energije u tretiranim domaćinstvima. Drugim rečima, nadogradnje aparata nisu dominantan mehanizam kroz koji je Izvještaj o kućnoj energiji smanjio potrošnju električne energije.
Drugi način za proučavanje mehanizama je pokretanje eksperimenata sa malo različite verzije tretmana. Na primjer, u eksperimentu Schultz et al. (2007) i sve naredne eksperimente za Home Energy Report, učesnicima je obezbeđen tretman koji je imao dva glavna dela (1) savjete o uštedama energije i (2) informacije o njihovoj upotrebi energije u odnosu na njihove vršnjake (slika 4.6). Stoga je moguće da su saveti o uštedama energije izazvali promenu, a ne informacije o vršnjacima. Da bi procenili mogućnost da su sami saveti bili dovoljni, Ferraro, Miranda, and Price (2011) udružili sa kompanijom za vodu u blizini Atlante, Džordžija, i vodili srodni eksperiment o očuvanju vode oko 100.000 domaćinstava. Postojalo je četiri uslova:
Istraživači su otkrili da lečenje lečenjem nije imalo efekta na korišćenje vode u kratkom (jednu godinu), srednjem (dve godine) i dugom (tri godine) terminu. Saveti i žalbeni tretman su uzrokovali učesnike da smanjuju upotrebu vode, ali samo u kratkom roku. Na kraju, saveti i apel plus plus tretman sa kolegama doveli su do smanjene upotrebe na kraćem, srednjem i dugoročnom nivou (slika 4.11). Ovakve eksperimente sa razdvojenim tretmanima su dobar način da saznate koji deo tretmana - ili koji delovi zajedno - one koji uzrokuju efekat (Gerber and Green 2012, sec. 10.6) . Na primjer, eksperiment Ferraroa i kolega pokazuje nam da savjeti za uštedu vode nisu dovoljni da se smanji korištenje vode.
Idealno bi bilo da se krećemo izvan slojeva komponenti (savjeti, saveti i apel, savjeti i apel plus plus informacije) do potpunog faktičkog dizajna - koji se ponekad naziva i faktorijskim dizajnom \(2^k\) - gdje svaka moguća kombinacija testirana su tri elementa (tabela 4.1). Ispitivanjem svake moguće kombinacije komponenti, istraživači mogu u potpunosti procijeniti efekat svake komponente u izolaciji iu kombinaciji. Na primjer, eksperiment Ferraroa i kolega ne otkriva da li bi upoređivanje vršnjaka bilo dovoljno da dovede do dugoročnih promjena ponašanja. U prošlosti, ovi puni faktorijski dizajni su bili teški za pokretanje jer zahtijevaju veliki broj učesnika i zahtijevaju od istraživača da budu u mogućnosti precizno kontrolirati i pružiti veliki broj tretmana. Ali, u nekim situacijama, digitalno doba uklanja ove logističke ograničenja.
Tretman | Karakteristike |
---|---|
1 | Kontrola |
2 | Savjeti |
3 | Žalba |
4 | Informacije o vršnjacima |
5 | Saveti + žalba |
6 | Savjeti + informacije o kolegi |
7 | Žalba + informacije o vršnjacima |
8 | Savjeti + žalbe + informacije o kolegi |
Ukratko, mehanizmi - putevi kroz koje tretman ima efekat - su izuzetno važni. Eksperimenti digitalnog doba mogu pomoći istraživačima da saznaju o mehanizmima (1) prikupljanjem podataka o procesu i (2) omogućavanjem potpunog faktičkog dizajna. Mehanizmi koji su predloženi ovim pristupima mogu se direktno testirati eksperimentima koji su posebno dizajnirani za testiranje mehanizama (Ludwig, Kling, and Mullainathan 2011; Imai, Tingley, and Yamamoto 2013; Pirlott and MacKinnon 2016) .
Ukupno, ova tri koncepta - validnost, heterogenost efekata tretmana i mehanizmi - pružaju moćan skup ideja za dizajniranje i tumačenje eksperimenata. Ovi koncepti pomažu istraživačima da izađu izvan jednostavnih eksperimenata o tome šta "radi" bogatijim eksperimentima koji imaju strožiju vezu sa teorijom, koji otkrivaju gdje i zašto rade tretmani, a koji čak mogu pomoći istraživačima da dizajniraju efikasnije tretmane. S obzirom na ovu konceptualnu pozadinu o eksperimentima, sada ću se okrenuti tome kako možete zapravo učiniti svoje eksperimente.