4.2 Kas ir eksperimenti?

Randomizēti kontrolēti eksperimenti ir četras galvenās sastāvdaļas: atlases dalībnieku, randomizācijas ārstēšanas, ārstniecību, un mērīšana rezultātu.

Randomizēti kontrolēti eksperimenti var notikt dažādos veidos, un to var izmantot, lai pētītu dažāda veida uzvedību. Bet, to pamatā, randomizēti kontrolēti eksperimenti ir četras galvenās sastāvdaļas: atlases dalībnieku, randomizācijas ārstēšanas, ārstniecību, un mērīšana rezultātu. Digitālais laikmets nemaina pamata būtību eksperimentu, bet tas padara viņus vieglāk loģistiski. Piemēram, agrāk tas varētu būt grūti novērtēt uzvedību miljoniem cilvēku, bet kas tagad regulāri notiek daudzās digitālo sistēmu. Pētnieki, kas var izdomāt, kā izmantot šīs jaunās iespējas, būs iespēja veikt eksperimentus, kas bija iespējams iepriekš.

Lai tas viss mazliet konkrētākas-gan to, kas palika tāds pats, un to, kas ir mainījies, pieņemsim apsvērt Michael Restivo un Arnout van de Rijt s (2012) . Pētnieki vēlējās izprast ietekmi neformālo vienādranga atlīdzības par redaktoru iemaksām Wikipedia. Proti, viņi pētīja ietekmi barnstars, kādu balvu, ka jebkurš Wikipedian var sniegt jebkuru citu Wikipedian atzīt smago darbu un pienācīgu rūpību. Restivo un van de Rijt deva barnstars 100 pelnījusi Wikipedians. Tad Restivo un van de Rijt kāpurķēžu adresātu turpmākos ieguldījumu Vikipēdijā nākamo 90 dienu laikā. Daudz viņu pārsteigums, ka cilvēki, kuriem tie piešķirti barnstars tendence padarīt mazāk labojumus saņemot vienu. Citiem vārdiem sakot, barnstars šķita atturēt nevis sekmējot ieguldījumu.

Par laimi, Restivo un van de Rijt netika darbojas "uzbudināt un vērot" eksperiments; tie darbojas randomizētos kontrolētos eksperimentu. Tātad, papildus izvēloties 100 top ieguldītājiem saņemt barnstar, viņi arī izvēlējās 100 top ieguldītāji, kam tie nedeva barnstar. Tie simti kalpoja kā kontroles grupā, un kurš ieguva barnstar un kurš nav noteica nejauši. Kad Restivo un van de Rijt paskatījās kontroles grupā viņi konstatēja, ka tas bija strauju kritumu iemaksu too. Visbeidzot, kad pētnieki salīdzināja cilvēkus terapijas grupā (ti, saņēma barnstars) un cilvēkiem ar kontroles grupu, viņi konstatēja, ka barnstar izraisīja redaktori sniegt ieguldījumu aptuveni 60% vairāk. Bet, šis pieaugums ieguldījums bija notiek kā daļa no kopējā krituma abās grupās.

Tā kā šis pētījums parāda, kontroles grupa eksperimentos ir kritiska tādā veidā, kas ir nedaudz paradoksāli. Lai precīzi izmērītu efektu barnstars, Restivo un van der Rijt nepieciešams novērot cilvēkus, kas nesaņēma barnstars. Daudzas reizes pētnieki, kuri nav pazīstami ar eksperimentiem nespēj novērtēt neticami vērtību kontroles grupā. Ja Restivo un van de Rijt nebija kontroles grupa, viņi ir izdarījuši tieši nepareizu secinājumu. Kontroles grupas ir tik svarīgi, ka izpilddirektors lielu kazino kompānija ir teicis, ka ir tikai trīs veidi, kā darbinieki var karsēt no viņa kompānijas: zādzību, seksuāla uzmākšanās, un darbojas eksperimentu bez kontroles grupā (Schrage 2011) .

Restivo un van de Rijt studiju ilustrē četras galvenās sastāvdaļas eksperiments: vervēšanu, randomizācijas, iejaukšanās, un rezultātus. Kopā šīs četras sastāvdaļas ļauj zinātniekiem, lai pārvietotos tālāk korelāciju un izmērīt cēloņsakarību efektu ārstēšanu. Konkrēti, randomizācijas nozīmē, ka tad, kad jūs salīdzināt rezultātus par apstrādes un kontroles grupās jums tāmi cēlonisko ietekmi šīs intervences šā kopuma dalībnieku. Citiem vārdiem sakot, ar Randomizētā kontrolētā eksperimentā, jūs varat būt pārliecināti, ka visas atšķirības iznākumu izraisa iejaukšanās nevis confounder, prasību, ka es veicu precīzi saskaņā ar tehniskā papildinājuma izmantojot potenciālos rezultātus sistēmu.

Papildus tam, ka jauka ilustrācija mehānika eksperimentiem, Restivo un van de Rijt pētījums arī liecina, ka loģistika digitālo eksperimentu var būt pilnīgi atšķirīga no analogās eksperimentiem. In Restivo un van de Rijt eksperiments, tas bija viegli dot barnstar ikvienam visā pasaulē, un tas bija viegli izsekot iznākumu skaitu, edits, ilgākā laika periodā (jo rediģēt vēsture tiek automātiski ierakstīts ar Wikipedia). Šī spēja piegādāt ārstēšanu un izmērīt rezultātus bez maksas ir kvalitatīvi atšķirībā eksperimentiem pagātnē. Lai gan šis eksperiments iesaistīti 200 cilvēku, to varēja darboties ar 2000 vai 20000 cilvēku. Galvenais novērst pētniekus no augšupvērsti savu eksperimentu ar koeficientu 100 nav izmaksas, tas bija ētika. Ti, Restivo un van de Rijt negribēja dot barnstars uz necienīgs redaktoriem un viņi negribēja viņu eksperiments izjaukt Wikipedia kopienu (Restivo and Rijt 2012; Restivo and Rijt 2014) . Tātad, lai gan eksperiments Restivo un van de Rijt ir samērā vienkāršs, tas skaidri parāda, ka dažas lietas par eksperimentiem ir palikuši tādi paši, un daži ir mainījušies. Jo īpaši, pamata loģika eksperimentu ir tas pats, bet loģistika ir mainījušies. Tālāk, lai skaidrāk izolēt iespējas, ko rada šīs izmaiņas, es ņemšu salīdzināt eksperimentus pētniekiem darīt tagad ar eksperimentiem veidiem, kas tika darīts agrāk.