4.2 Kaj so poskusi?

Randomizirani nadzorovani poskusi imajo štiri glavne sestavine: zaposlovanje udeležencev, popačenosti zdravljenja, zagotavljanje zdravljenja in merjenje izidov.

Randomizirani nadzorovani poskusi lahko različne oblike in se lahko uporablja za študij veliko vrst vedenja. Ampak, v svojem bistvu, randomizirani nadzorovani poskusi imajo štiri glavne sestavine: zaposlovanje udeležencev, popačenosti zdravljenja, zagotavljanje zdravljenja in merjenje izidov. Digitalni dobi ne spremeni temeljne narave eksperimentiranja, vendar pa se jih je lažje logistično. Na primer, v preteklosti, bi lahko bilo težko izmeriti obnašanje milijonov ljudi, vendar se zdaj redno dogaja v mnogih digitalnih sistemov. Raziskovalci, ki lahko ugotovimo, kako izkoristiti te nove priložnosti bodo mogli izvajati poskuse, ki so bile nemogoče prej.

Da bi vse to malo bolj konkretna, tako tisto, kar je ostalo nespremenjeno in kaj se je spremenilo, kaj menijo, Michael Restivo in Arnout van de Rijt je (2012) . Raziskovalci so želeli razumeti vpliv neformalnih strokovnih nagrad na uredniške prispevke k Wikipediji. Zlasti so preučevali učinke barnstars, priznanje, da lahko vsak Wikipedian dati kateri koli drugi Wikipedian priznati trdo delo in skrbnosti. Restivo in van de Rijt je barnstars do 100 zaslužnim Wikipedians. Nato Restivo in van de Rijt bager nadaljnje prispevke prejemnikov na Wikipediji v naslednjih 90 dneh. Veliko se na njihovo presenečenje, ljudje, ki so jim dodeljene barnstars težila k manj uredite po prejemu enega. Z drugimi besedami, zdelo se barnstars se odvrača namesto spodbujanja prispevek.

Na srečo, Restivo in van de Rijt niso teče "motijo ​​in opazovati" poskusa; so bili teče randomizirano kontrolirano eksperiment. Torej, poleg izbire 100 top prispevajo prejeti barnstar, so izbrali tudi 100 najboljših sodelavcev, ki jim niso dajejo barnstar. To sto je služila kot kontrolna skupina, in ki je dobil barnstar in ki je ni določena naključno. Ko Restivo in van de Rijt pogledal v kontrolni skupini so ugotovili, da je imel strm padec prispevkov preveč. Nazadnje, ko so raziskovalci primerjali ljudi v terapevtski skupini (tj prejeta barnstars) in ljudi v kontrolni skupini, so ugotovili, da je barnstar povzročil uredniki, da prispeva približno 60% več. Ampak, to povečanje prispevka je potekal kot del splošnega upada v obeh skupinah.

Kot je ta raziskava kaže, kontrolna skupina v poskusih je ključnega pomena na način, ki je nekoliko paradoksalno. Da bi natančno izmerili učinek barnstars, Restivo in van der Rijt potrebno opazovati ljudi, ki niso prejeli barnstars. Veliko krat raziskovalci, ki niso seznanjeni s poskusi ne cenijo neverjetno vrednost v kontrolni skupini. Če Restivo in van de Rijt ni imel kontrolno skupino, bi se natančno narisali napačen sklep. Kontrolne skupine so tako pomembna, da se je direktor velikega igralniškega podjetja, je dejal, da obstajajo le trije načini, da se zaposleni lahko odpustili iz njegovega podjetja: kraji, spolno nadlegovanje in izvajanjem preizkusa, brez kontrolne skupine (Schrage 2011) .

Restivo in Van de Rijt študijski prikazuje štiri glavne sestavine eksperiment: zaposlovanje, naključnost, intervencije in izide. Skupaj te štiri sestavine omogočajo znanstvenikom preseči korelacije in merjenje vzročni učinek zdravljenja. Natančneje, popačenja pomeni, da ko primerjajo rezultate za skupine zdravljenja in nadzora dobiš oceno vzročne učinek te intervencije za to naborom udeležencev. Z drugimi besedami, s randomizirani nadzorovani poskus, ste lahko prepričani, da so razlike v rezultatih s posredovanjem in ni povzročil confounder, trditev, da sem bi natančno opredeljeno v Tehnični prilogi uporabo okvira možnih rezultatov.

Poleg tega, da je nazoren prikaz mehaniko poskusov, Restivo in Van de Rijt je Študija tudi kaže, da so lahko logistika digitalnih poskusov povsem drugačen od analognih poskusov. V Restivo in van de Rijt je eksperiment, je bilo težko dati barnstar nikomur na svetu in je bilo enostavno slediti sklepni-število urejanj, v daljšem časovnem obdobju (zaradi zgodovine urejanja samodejno zabeleži s Wikipedia). Ta sposobnost za zagotavljanje zdravljenja in merjenje rezultatov brez stroškov je kvalitativno razliko od poskusov v preteklosti. Čeprav je ta poskus vključenih 200 ljudi, bi bilo teči z 2.000 in 20.000 ljudi. Glavna stvar preprečevanje raziskovalci povečanje njihovega poskus s faktorjem 100 ni bila stali, da je etika. To pomeni, Restivo in van de Rijt ni hotel dati barnstars na nevredni uredniki in niso želeli njihov poskus, da bo motila Wikipedia skupnosti (Restivo and Rijt 2012; Restivo and Rijt 2014) . Torej, čeprav je poskus Restivo in van de Rijt razmeroma preprosto, jasno kaže, da so nekatere stvari o poskusih ostala enaka, in nekateri so se spremenile. Zlasti osnovna logika eksperimentiranja je enaka, vendar logistike spremenile. Dalje, da bi bolj jasno izločiti možnosti, ustvarjenih s to spremembo, bom primerjati poskuse, da lahko raziskovalci storiti sedaj vrste poskusov, ki so jih storili v preteklosti.