Owaza eksperyans kontwole gen kat engredyan prensipal: rekritman nan patisipan yo, Metòd chans nan tretman an, livrezon nan tretman, ak mezi nan rezilta yo.
Eksperyans kontwole kontwole gen kat engredyan prensipal: rekritman nan patisipan yo, o aza de tretman, livrezon tretman, ak mezi rezilta. Laj la dijital pa chanje nati a fondamantal nan eksperimantasyon, men li fè li pi fasil lojistikman. Pa egzanp, nan tan lontan, li ta ka difisil pou mezire konpòtman dè milyon de moun, men kounye a se nan anpil sistèm dijital. Chèchè ki moun ki ka konnen ki jan yo antèn sa yo nouvo opòtinite yo pral kapab kouri eksperyans ki te enposib deja.
Pou fè sa a tout yon ti jan pi plis konkrè-tou de sa ki te rete menm bagay la tou ak sa ki te chanje-kite yo konsidere yon eksperyans pa Michael Restivo ak Arnout van de Rijt (2012) . Yo te vle konprann efè a nan rekonpans enfòmèl kanmarad sou kontribisyon editoryal nan Wikipedia. An patikilye, yo etidye efè barnstars , yon prim ke nenpòt Wikipedyen ka bay nenpòt Wikipedyen lòt rekonèt travay di ak dilijans. Restivo ak Van de Rijt te bay barnstars a 100 Wikipédia Wikipédia. Lè sa a, yo Suivi kontribisyon ki vin apre benefisyè yo nan Wikipedia sou 90 jou kap vini yo. Anpil nan sipriz yo, moun yo ki moun yo bay barnstars tandans fè mwens edits apre li fin resevwa yon sèl. Nan lòt mo, barnstars yo te sanble yo dekouraje olye ke ankouraje kontribisyon.
Erezman, Restivo ak van de Rijt pa t 'kouri yon "kòlè ak obsève" eksperyans; yo te kouri yon eksperyans kontwole owaza. Se konsa, nan adisyon a chwazi 100 kontribitè tèt yo resevwa yon barnstar, yo menm tou yo te chwazi 100 kontribitè tèt yo ki moun yo pa t 'bay yon sèl. 100 sa yo te sèvi kòm yon gwoup kontwòl. Epi, kritik, ki moun ki te nan gwoup la tretman ak ki moun ki te nan gwoup la kontwòl detèmine owaza.
Lè Restivo ak van de Rijt gade konpòtman moun nan gwoup kontwòl la, yo te jwenn ke kontribisyon yo te diminye tou. Pli lwen, lè Restivo ak van de Rijt konpare moun nan gwoup tretman an (sa vle di, te resevwa barnstars) bay moun ki nan gwoup kontwòl la, yo te jwenn ke moun nan gwoup tretman an kontribye sou 60% plis. Nan lòt mo, kontribisyon yo nan tou de gwoup yo te mouri, men sa yo ki nan gwoup la kontwòl yo te fè anpil pi vit.
Kòm etid sa a montre, gwoup la kontwòl nan eksperyans se kritik nan yon fason ki yon ti jan paradoks. Yo nan lòd yo jisteman mezire efè a nan barnstars, Restivo ak van de Rijt bezwen yo obsève moun ki pa t 'resevwa barnstars. Anpil fwa, chèchè ki pa abitye avèk eksperyans yo pa apresye valè enkwayab nan gwoup kontwòl la. Si Restivo ak van de Rijt pa t 'gen yon gwoup kontwòl, yo ta trase egzakteman konklizyon an mal. Gwoup kontwòl yo tèlman enpòtan ke CEO nan yon konpayi kazino pi gwo te di ke gen sèlman twa fason ke anplwaye yo ka revoke nan konpayi li: pou vòl, pou asèlman seksyèl, oswa pou kouri yon eksperyans san yo pa yon gwoup kontwòl (Schrage 2011) .
Restivo ak van de Rijt etid la montre kat engredyan prensipal yo nan yon eksperyans: rekritman, randomization, entèvansyon, ak rezilta yo. Ansanm, sa yo engredyan kat pèmèt syantis yo deplase pi lwen pase korelasyon ak mezire efè a kozatif nan tretman. Espesyalman, o aza vle di ke moun ki nan gwoup tretman yo ak kontwòl yo pral menm jan an. Sa a enpòtan paske li vle di ke nenpòt diferans nan rezilta ant de gwoup yo ka dwe atribiye nan tretman an epi yo pa yon konfonnè.
Anplis de sa yo te yon bèl ilistrasyon nan mekanik yo nan eksperyans, etid Restivo ak van de Rijt a tou montre ke lojistik yo nan eksperyans dijital ka konplètman diferan de sa yo ki nan eksperyans analòg. Nan eksperyans ak eksperyans van Rijt a, li te fasil pou bay barnstar a nenpòt moun, epi li te fasil pou swiv rezilta-kantite edits-sou yon peryòd tan ki pi long (paske edit istwa se otomatikman anrejistre pa Wikipedya). Kapasite sa a pou delivre tretman ak mezi rezilta san peye se kalitatif kontrèman ak eksperyans nan tan lontan an. Malgre ke eksperyans sa a enplike 200 moun, li te kapab te kouri ak 2,000 oswa menm 20,000 moun. Bagay prensipal la anpeche chèchè yo soti nan dekale moute eksperyans yo pa yon faktè de 100 pa t 'koute; li te etik. Sa se, Restivo ak van de Rijt pa t 'vle bay Barnstars editè endepandan, epi yo pa t' vle eksperyans yo nan deranje kominote a Wikipedia (Restivo and Rijt 2012, 2014) . Mwen pral retounen nan kèk nan konsiderasyon etik yo leve soti vivan nan eksperyans pita nan chapit sa a ak nan chapit 6.
An konklizyon, eksperyans nan Restivo ak van de Rijt montre klèman ke pandan ke lojik debaz la nan eksperimantasyon pa te chanje, lojistik yo nan eksperyans dijital ki gen laj ka dramatikman diferan. Apre sa, nan lòd pou pi byen klè izole opòtinite ki te kreye pa chanjman sa yo, mwen pral konpare eksperyans yo ki chèchè ka fè kounye a ak kalite eksperyans nan ki te fè nan tan lontan an.