4.2 Hvað eru tilraunir?

Slembuðum tilraunir hafa fjögur helstu innihaldsefni: Ráðningar þátttakenda, slembival meðferð, afhendingu meðferð, og mat á niðurstöðum.

Randomized stjórnað tilraunir hafa fjórum meginatriðum: rekja þátttakendur, slembiraðað meðferð, afhendingu meðferðar og mælingar á niðurstöðum. Stafrænn aldur breytir ekki grundvallaratriðum tilraunarinnar, en það gerir það auðveldara með skipulagi. Til dæmis hefur það áður verið erfitt að mæla hegðun milljóna manna, en það er nú venja að gerast í mörgum stafrænum kerfum. Vísindamenn sem geta fundið út hvernig hægt er að nýta þessar nýju tækifærin geti rekið tilraunir sem voru ómögulegar áður.

Til að gera þetta allt betra, bæði hvað hefur verið það sama og það sem hefur breyst, skulum við líta á tilraun með Michael Restivo og Arnout van de Rijt (2012) . Þeir vildu skilja skilning óformlegra verðlaunamanna á ritstjórnargögnum til Wikipedia. Einkum rannsakað þau áhrif barnstars , verðlaun sem Wikipedian getur gefið öðrum Wikipedíu til að viðurkenna vinnu og áreiðanleikakönnun. Restivo og van de Rijt gaf barnstars til 100 skilið Wikipedians. Síðan fylgdu þeir eftirfylgni viðtakenda til Wikipedia á næstu 90 dögum. Mikið til óvart þeirra, fólkið sem þeir fengu barnstars tilhneigingu til að gera færri breytingar eftir að hafa fengið eitt. Með öðrum orðum virtist barnstars vera hugfallandi frekar en að hvetja til framlags.

Til allrar hamingju, Restivo og van de Rijt voru ekki að keyra "tilraun og athuga" tilraun; Þeir voru að keyra slembiraðað, stýrð tilraun. Svo, auk þess að velja 100 efstu þátttakendur til að fá barnstar, valdu þeir einnig 100 efstu þátttakendur sem þeir ekki gefa. Þessir 100 þjónuðu sem stjórnhópur. Og gagnrýninn, hver var í meðferðarhópnum og sá sem var í samanburðarhópnum var ákvarðað af handahófi.

Þegar Restivo og van de Rijt horfðu á hegðun fólks í stjórnhópnum komu þeir að því að framlög þeirra voru einnig að minnka. Ennfremur, þegar Restivo og van de Rijt samanborið fólk í meðferðarhópnum (þ.e. fengið börnum) hjá fólki í samanburðarhópnum, komu þeir að því að fólk í meðferðarliðinu þótti um 60% meira. Með öðrum orðum voru framlög beggja hópa deceasing, en þeir í stjórnhópnum voru að gera svo miklu hraðar.

Eins og þessi rannsókn sýnir, er stjórnhópurinn í tilraunum mikilvægt á þann hátt sem er nokkuð óvæntur. Til að meta áhrif barnstars nákvæmlega þarf Restivo og van de Rijt að fylgjast með fólki sem fékk ekki barnstars. Margir sinnum hafa vísindamenn sem ekki þekkja tilraunir ekki metið ótrúlegt gildi eftirlitshópsins. Ef Restivo og van de Rijt höfðu ekki haft stjórnhóp hefði þeir dregið nákvæmlega ranga niðurstöðu. Stjórnhópar eru svo mikilvægar að forstjóri stórt spilavíti hefur sagt að einungis þrír leiðir séu til þess að starfsmenn geti rekinn frá fyrirtækinu sínu: fyrir þjófnað, kynferðisleg áreitni eða til að keyra tilraun án (Schrage 2011) .

Rannsókn Restivo og van de Rijt sýnir fjögur helstu innihaldsefni tilraunar: ráðningar, slembival, íhlutun og niðurstöður. Saman þessara fjóra innihaldsefna leyfa vísindamenn að fara út fyrir fylgni og mæla orsakatengsl meðferða. Sérstaklega veldur slembivalun að fólk í meðferð og eftirlitshópum verði svipað. Þetta er mikilvægt vegna þess að það þýðir að allir munur á niðurstöðum á milli tveggja hópa má rekja til meðferðarinnar og ekki árekstrar.

Auk þess að vera góð mynd af verkfærum tilrauna, sýnir rannsóknir Restivo og van de Rijt einnig að flutningur stafrænnar tilraunir geti verið mjög frábrugðnar hliðstæðum tilraunum. Í tilraun Restivo og van de Rijt var auðvelt að gefa barnstjarnanum einhverjum og það var auðvelt að fylgjast með niðurstöðum-fjöldi breytinga-í lengri tíma (vegna þess að breyta sagan er sjálfkrafa skráð af Wikipedia). Þessi hæfni til að bera meðferðir og mæla árangur án endurgjalds er eðlilegt ólíkt tilraunum í fortíðinni. Þó að þessi tilraun hafi átt sér stað 200 manns gæti það verið rekið með 2.000 eða jafnvel 20.000 manns. Aðalatriðið sem kemur í veg fyrir að vísindamennirnir stigi tilraun sína með stuðlinum 100 var ekki kostnaður; það var siðfræði. Það er að segja, Restivo og van de Rijt vildu ekki gefa barnstars til undeserving ritstjóra, og þeir vildu ekki tilraun sína til að trufla Wikipedia samfélagið (Restivo and Rijt 2012, 2014) . Ég mun snúa aftur til nokkurra siðferðilegra þátta sem gerðar voru af tilraunum seinna í þessum kafla og í kafla 6.

Að lokum sýnir tilraunir Restivo og van de Rijt að á meðan grundvallar rökfræði tilraunanna hefur ekki breyst, getur flutningur stafrænna aldurs tilraunanna verið mjög mismunandi. Næst, til þess að einangra þau tækifæri sem skapast af þessum breytingum mun ég bera saman tilraunirnar sem vísindamenn geta gert núna með þær tegundir tilrauna sem hafa verið gerðar í fortíðinni.