Aileto dari adanwo ni mẹrin akọkọ eroja: rikurumenti ti awọn alabaṣepọ, randomization ti awọn itọju, oba ti itoju, ati awọn wiwọn ti awọn iyọrisi.
Aileto dari adanwo le ya awọn ọpọlọpọ awọn fọọmu ati ki o le ṣee lo lati iwadi ọpọlọpọ awọn orisi ti ihuwasi. Sugbon, ni won mojuto, ti aileto dari adanwo ni mẹrin akọkọ eroja: rikurumenti ti awọn alabaṣepọ, randomization ti awọn itọju, oba ti itoju, ati awọn wiwọn ti awọn iyọrisi. Awọn oni ori ko ni yi awọn yeke iseda ti experimentation, ṣugbọn o se ṣe wọn rọrùn logistically. Fun apẹẹrẹ, ninu awọn ti o ti kọja ti o le ti ti soro lati wiwọn awọn ihuwasi ti milionu awon eniyan, sugbon ti o wa ni bayi sáábà ṣẹlẹ ni ọpọlọpọ awọn oni awọn ọna šiše. Oluwadi ti o le ro ero jade bi lati ijanu wọnyi titun anfani yoo ni anfani lati ṣiṣe adanwo ti o wà soro tẹlẹ.
Lati ṣe yi gbogbo a bit nja-mejeji ohun ti duro kanna ati ohun ti ti yi pada-jẹ ki ká ro Michael Restivo ati Arnout van de Rijt ká (2012) . Awọn oluwadi fe lati ni oye awọn ipa ti informal ẹlẹgbẹ ere lori Olootu àfikún sí Wikipedia. Ni pato, ti won iwadi awọn ipa ti barnstars, ohun eye ti eyikeyi Wikipedian le fun si eyikeyi miiran Wikipedian to jẹwọ lile ise ati nitori tokantokan. Restivo ati van de Rijt fi barnstars to 100 deserving Wikipedians. Nigbana ni, Restivo ati van de Rijt tọpinpin awọn olugba 'ọwọ oníṣe to Wikipedia lori tókàn 90 ọjọ. Elo si wọn iyalenu, awọn enia si ẹniti nwọn un barnstars ti nifẹ lati ṣe díẹ àtúnṣe lẹhin gbigba ọkan. Ni gbolohun miran, awọn barnstars dabi enipe lati wa ni discouraging dipo ju iwuri ilowosi.
Da, Restivo ati van de Rijt won ko nṣiṣẹ a "perturb ki o si ma kiyesi" ṣàdánwò; won ni won nṣiṣẹ a ti aileto dari ṣàdánwò. Nítorí, ni afikun si yan 100 oke olùkópa lati gba a barnstar, won tun ti gbe 100 oke olùkópa to tí wọn kò fi a barnstar. Awọn wọnyi ni ọgọrun yoo wa bi a iṣakoso ẹgbẹ, ati awọn ti o ni a barnstar ati awọn ti o kò ti a pinnu laileto. Nigba ti Restivo ati van de Rijt wò ni iṣakoso ẹgbẹ ti won ri wipe o ní a ga ju ni àfikún ju. Níkẹyìn, nigbati awọn oluwadi akawe eniyan ni awọn itọju ẹgbẹ (ie, gba barnstars) ati awon eniyan ni awọn iṣakoso ẹgbẹ, nwọn si ri pe awọn barnstar ṣẹlẹ olootu lati tiwon nipa 60% siwaju sii. Sugbon, yi ilosoke ninu ilowosi ti a mu ibi bi ara ti ẹya-ìwò idinku ninu mejeji awọn ẹgbẹ.
Bi iwadi yi sapejuwe, awọn iṣakoso ẹgbẹ ninu adanwo jẹ lominu ni ni ona kan ti ni itumo paradoxical. Ni ibere lati gbọgán wiwọn awọn ipa ti barnstars, Restivo ati van der Rijt nilo lati mo daju awon eniyan ti ko gba barnstars. Ọpọlọpọ awọn igba oluwadi ti o wa ni ko faramọ pẹlu adanwo ba kuna lati riri awọn alaragbayida iye ti awọn iṣakoso ẹgbẹ. Ti o ba ti Restivo ati van de Rijt ko ni a iṣakoso ẹgbẹ, nwọn iba ti fà gangan ti ko tọ si ipari. Iṣakoso awọn ẹgbẹ ni o wa ki pataki ki awọn CEO ti a pataki itatẹtẹ ile ti so wipe nibẹ ni o wa nikan meta ona ti abáni le wa ni kuro lenu ise lati rẹ ile: ole, ibalopo ni tipatipa, ati ki o nṣiṣẹ ohun ṣàdánwò lai a iṣakoso ẹgbẹ (Schrage 2011) .
Restivo ati van de Rijt ká iwadi sapejuwe mẹrin akọkọ eroja ti ohun ṣàdánwò: rikurumenti, randomization, intervention, ati awọn iyọrisi. Papo, awon nkan merin eroja gba sayensi lati gbe kọja ibatan ki o si wiwọn awọn ifẹsẹmulẹ ipa ti awọn itọju. Pataki, randomization tumo si wipe nigba ti o ba afiwe awọn iyọrisi fun awọn itọju ati iṣakoso awọn ẹgbẹ ti o gba ohun ti siro ti awọn ifẹsẹmulẹ ipa ti ti intervention fun awọn ti o ti ṣeto ti awọn alabaṣepọ. Ninu awọn ọrọ miiran, pẹlu kan ti aileto dari ṣàdánwò o le jẹ daju wipe eyikeyi orisirisi ba wa ni awọn iyọrisi ti wa ni ṣẹlẹ nipasẹ awọn intervention ati ki o ko a confounder, a nipe ti mo ti ṣe kongẹ ninu awọn imọ-Àfikún lilo awọn ti o pọju awọn iyọrisi ilana.
Ni afikun si jije kan dara àkàwé ti awọn isiseero ti adanwo, Restivo ati van de Rijt ká iwadi tun fihan wipe awọn eekaderi ti oni adanwo le jẹ patapata ti o yatọ lati afọwọṣe adanwo. Ni Restivo ati van de Rijt ká ṣàdánwò, o je rorun lati fi fun awọn barnstar fun ẹnikẹni ni aye ati ti o je rorun lati orin awọn abajade-nọmba ti àtúnṣe-lori ohun o gbooro sii akoko ti akoko (nitori satunkọ awọn itan ti wa ni laifọwọyi ti o ti gbasilẹ nipasẹ Wikipedia). Eleyi agbara lati fi awọn itọju ati ki o wiwọn awọn iyọrisi ni ko si iye owo jẹ qualitatively ko adanwo ninu awọn ti o ti kọja. Biotilejepe yi ṣàdánwò lowo 200 eniyan, o le ti a ti ṣiṣe pẹlu 2,000 tabi 20,000 eniyan. Akọkọ ohun ti dena awọn oluwadi lati igbelosoke wọn soke ṣàdánwò nipa kan ifosiwewe ti 100 ti a ko na, o je ethics. Ti o ni, Restivo ati van de Rijt kò fẹ lati fun barnstars to undeserving olootu ati won ko fe won ṣàdánwò lati disrupt awọn Wikipedia awujo (Restivo and Rijt 2012; Restivo and Rijt 2014) . Nítorí náà, biotilejepe awọn ṣàdánwò ti Restivo ati van de Rijt jẹ jo o rọrun, ti o kedere fihan wipe diẹ ninu awọn ohun nipa adanwo ti ibẹ kanna ati diẹ ninu awọn ti yi pada. Ni pato, awọn ipilẹ kannaa ti experimentation jẹ kanna, ṣugbọn awọn eekaderi ti yi pada. Next, ni ibere lati diẹ kedere sọtọ awọn anfani da nipa yi ayipada, Mo ti yoo afiwe awọn adanwo ti awọn oluwadi le se bayi si awọn iru ti adanwo ti a ti ṣe ni ti o ti kọja.