4.2 Ki ni adanwo?

Aileto dari adanwo ni mẹrin akọkọ eroja: rikurumenti ti awọn alabaṣepọ, randomization ti awọn itọju, oba ti itoju, ati awọn wiwọn ti awọn iyọrisi.

Awọn adanwo iṣakoso ti o ni idaniloju ni awọn eroja mẹrin mẹrin: idaniloju ti awọn alabaṣepọ, iṣeduro ti itọju, ifijiṣẹ itọju, ati wiwọn awọn esi. Ọjọ ori oni-ọjọ ko yi iyipada ti o ṣe pataki fun igbadun, ṣugbọn o ṣe ki o rọrun sii lodo. Fun apẹẹrẹ, ni akoko ti o ti kọja, o le ti nira lati wiwọn ihuwasi ti milionu eniyan, ṣugbọn ti o nwaye nisisiyi ni ọpọlọpọ awọn ọna ṣiṣe oni-nọmba. Awọn oniwadi ti o le ṣawari bi o ṣe le ṣaṣe awọn anfani tuntun wọnyi yoo ni anfani lati ṣiṣe awọn idanwo ti ko le ṣeeṣe tẹlẹ.

Lati ṣe eyi ni gbogbo nkan ti o rọrun diẹ-mejeeji ohun ti o duro kanna ati ohun ti o yipada-jẹ ki a ṣe ayẹwo idanwo nipasẹ Michael Restivo ati Arnout van de Rijt (2012) . Nwọn fẹ lati ni oye ipa ti awọn ẹda ti awọn ọmọ ẹgbẹ ti ko ni imọran lori awọn igbesilẹ ti o ṣe atunṣe si Wikipedia. Ni pato, wọn kẹkọọ awọn ipa ti barnstars , aami ti eyikeyi Wikipedian le fun si Wikipedian miiran lati jẹwọ iṣẹ-ṣiṣe lile ati aifọwọyi. Restivo ati van de Rijt fi awọn barnstars si 100 Wikipedians ti o yẹ. Lẹhinna, wọn tọpinpin awọn oluranlọwọ ti awọn olugba naa si Wikipedia ni ọjọ 90 ti o wa. Ọpọlọpọ si ohun iyanu wọn, awọn eniyan ti wọn funni ni barnstars fẹrẹ ṣe awọn atunṣe diẹ diẹ lẹhin ti wọn gba ọkan. Ni awọn ọrọ miiran, awọn barnstars dabi ẹnipe irẹwẹsi ju idaniloju igbadun.

O ṣeun, Restivo ati van de Rijt ko ni ṣiṣe idanwo "idamu ati abo"; wọn nṣiṣẹ idanwo ti o ni idaniloju. Nitorina, ni afikun si yan 100 awọn olutọju oke lati gba barnstar, wọn tun mu 100 awọn olutọpa oke ti wọn ko fi fun ọkan. Awọn wọnyi 100 ṣiṣẹ bi ẹgbẹ iṣakoso. Ati pe, ẹni ti o wa ninu ẹgbẹ itọju naa ati ẹniti o wa ninu ẹgbẹ iṣakoso ni a pinnu laileto.

Nigbati Restivo ati van de Rijt wo awọn ihuwasi ti awọn eniyan ninu ẹgbẹ iṣakoso, wọn ri pe awọn ẹbun wọn n dinku paapaa. Siwaju sii, nigbati Restivo ati van de Rijt ṣe afiwe awọn eniyan ninu ẹgbẹ iṣoogun (ie, gba awọn barnstars) si awọn eniyan ni ẹgbẹ iṣakoso, wọn ri pe awọn eniyan ti o wa ninu ẹgbẹ itọju naa ṣe ipinnu nipa 60% siwaju sii. Ni gbolohun miran, awọn ẹbun ti awọn ẹgbẹ mejeeji ṣe oludaduro, ṣugbọn awọn ti iṣakoso iṣakoso n ṣe kiakia.

Gẹgẹbi iwadi yii ṣe apejuwe, ẹgbẹ iṣakoso ni awọn igbidanwo jẹ pataki ni ọna ti o ni itumo paradoxical. Lati le ṣe idiyele gangan ni ipa ti barnstars, Restivo ati van de Rijt nilo lati ṣe akiyesi awọn eniyan ti ko gba awọn barnstars. Ni ọpọlọpọ igba, awọn awadi ti ko mọ pẹlu awọn idanwo kuna lati ni imọran iye ti o ṣe pataki ti ẹgbẹ iṣakoso naa. Ti Restivo ati van de Rijt ko ni ẹgbẹ iṣakoso kan, wọn yoo ti fa pato ipari ti ko tọ. Awọn ẹgbẹ iṣakoso jẹ pataki gan-an pe CEO ti ile-iṣẹ alakoso pataki kan ti sọ pe awọn ọna mẹta nikan ni a le fa awọn abáni kuro lati inu ile-iṣẹ rẹ: fun sisun, fun ifilora pẹlu ibalopo, tabi fun ṣiṣe idanwo kan laisi ẹgbẹ iṣakoso (Schrage 2011) .

Iwadii Restivo ati van de Rijt ṣe apejuwe awọn eroja mẹrin mẹrin ti iṣafihan kan: idaniloju, iṣowo, abojuto, ati awọn esi. Papọ, awọn eroja mẹrin wọnyi jẹ ki awọn onimo ijinle sayensi lọ lati kọja awọn atunṣe ati wiwọn ipa ipa ti awọn itọju. Ni pato, iṣeduro tumọ si pe awọn eniyan ni awọn itọju ati awọn ẹgbẹ iṣakoso yoo jẹ iru. Eyi jẹ pataki nitori pe o tumọ si pe iyato ninu awọn abajade laarin awọn ẹgbẹ meji le wa ni itọju naa ki o si ṣe oluṣe.

Ni afikun si jijẹ apejuwe ti o dara julọ fun awọn iṣeduro ti awọn igbadun, iwadi Restivo ati van de Rijt fihan tun pe awọn apadii ti awọn iṣeduro ti aṣa le jẹ patapata yatọ si awọn igbeyewo analog. Ni idaniloju Restivo ati van de Rijt, o rọrun lati fun barnstar si ẹnikẹni, o si rọrun lati tẹle abajade-nọmba awọn atunṣe-lori igba akoko ti o gbooro sii (nitori igbasilẹ itan jẹ igbasilẹ nipasẹ Wikipedia). Igbara yii lati gba awọn itọju ati awọn abajade iṣiro laisi iye owo jẹ qualitatively ko awọn igbadun ni igba atijọ. Biotilẹjẹpe idanwo yii ṣe pẹlu awọn eniyan 200, o le ti ṣiṣe pẹlu 2,000 tabi paapa 20,000 eniyan. Ohun pataki ti o dẹkun awọn oluwadi lati ṣaṣewo idaduro wọn nipasẹ idiyele ti 100 ko ni iye; o jẹ iṣe ilana. Eyi ni pe, Restivo ati van de Rijt ko fẹ lati fi awọn barnstars si awọn olootu ti ko tọ, wọn ko fẹ ki wọn jẹ idaduro lati ṣubu si agbegbe Wikipedia (Restivo and Rijt 2012, 2014) . Emi yoo pada si diẹ ninu awọn ibeere ti o ṣe pataki ti a gbe dide nipasẹ awọn igbeyewo nigbamii ni ori yii ati ni ori 6.

Ni ipari, idaduro ti Restivo ati van de Rijt fihan kedere pe lakoko ti iṣalaye ipilẹṣẹ ti ko ni iyipada, awọn iṣeduro ti awọn igbadun ori-ọjọ ori le jẹ ti o yatọ pupọ. Nigbamii ti, lati le ṣe idaniloju diẹ awọn anfani ti awọn ayipada wọnyi ṣe, Emi yoo ṣe afiwe awọn adanwo ti awọn oluwadi le ṣe bayi pẹlu awọn iru awọn adanwo ti a ti ṣe ni igba atijọ.