Owaza eksperyans kontwole gen kat engredyan prensipal: rekritman nan patisipan yo, Metòd chans nan tretman an, livrezon nan tretman, ak mezi nan rezilta yo.
Owaza eksperyans kontwole ka pran plizyè fòm epi yo ka itilize yo etidye anpil kalite konpòtman. Men, nan nwayo yo, owaza eksperyans kontwole gen kat engredyan prensipal: rekritman nan patisipan yo, Metòd chans nan tretman an, livrezon nan tretman, ak mezi nan rezilta yo. Gen laj la dijital pa chanje nati a fondamantal nan eksperimantasyon, men li fè sa fè yo pi fasil logistics. Pou egzanp, nan tan lontan an li ta ka yo te difisil a mezire konpòtman an nan dè milyon de moun, men sa se kounye a regilyèman vini nan anpil sistèm dijital. Chèchè ki moun ki ka figi konnen kouman ou hanache sa yo nouvo opòtinite yo pral kapab kouri eksperyans ki te enposib deja.
Pou fè sa a tout yon ti jan pi plis konkrè-tou de sa ki te rete menm bagay la ak kisa ki chanje-se pou yo konsidere Michael Restivo ak Arnout van de Rijt a (2012) . Chèchè yo te te vle konprann efè a nan rekonpans kanmarad enfòmèl sou kontribisyon editoryal Wikipedya. An patikilye, yo etidye efè yo nan barnstars, yon prim ke nenpòt Wikipedian ka bay nan nenpòt lòt Wikipedian rekonèt travay di ak dilijans garanti dwa moun. Restivo ak van de Rijt te bay barnstars a 100 Wikipedians merite. Lè sa a, Restivo ak van de Rijt Suivi kontribisyon ki vin apre moun ki resevwa yo 'yo, vin Wikipedya plis pase 90 jou kap vini yo. Anpil sipriz yo, moun yo ki moun yo bay barnstars tandans fè mwens edits apre li fin resevwa yon sèl. Nan lòt mo, barnstars yo te sanble yo dwe dekouraje olye ke ankouraje kontribisyon an.
Erezman, Restivo ak van de Rijt pa te kouri yon "ajite epi obsève" eksperyans; yo te kouri yon owaza kontwole eksperyans. Se konsa, nan adisyon a chwazi 100 kontribye anwo jouk resevwa yon barnstar, yo menm tou pran 100 kontribye tèt ki moun yo pa t 'bay yon barnstar. Sa yo san te sèvi kòm yon gwoup kontwòl, epi ki te resevwa yon barnstar ak ki pa t 'te detèmine owaza. Lè Restivo ak van de Rijt gade gwoup kontwòl la yo te jwenn ke li te gen yon gout apik nan kontribisyon tou. Finalman, lè chèchè yo konpare moun nan gwoup la tretman (sa vle di, te resevwa barnstars) ak moun ki nan gwoup kontwòl la, yo te jwenn ke barnstar a ki te koze editè kontribye sou 60% plis. Men, sa a ogmantasyon nan kontribisyon te pran plas kòm yon pati nan yon bès jeneral nan tou de gwoup.
Kòm etid sa a montre, gwoup la kontwòl nan eksperyans se kritik nan yon fason ki se yon ti jan paradoks. Yo nan lòd yo jisteman mezire efè a nan barnstars, Restivo ak van der Rijt bezwen yo obsève moun ki pa t 'resevwa barnstars. Anpil fwa chèchè yo ki te pa abitye avèk eksperyans fail apresye valè a enkwayab nan gwoup kontwòl la. Si Restivo ak van de Rijt pa t 'gen yon gwoup kontwòl, yo ta toujou trase egzakteman konklizyon an mal. Gwoup kontwòl yo, se pou enpòtan ki te CEO nan yon konpayi kazino pi gwo te di ke te gen sèlman twa fason ke anplwaye ka revoke ki soti nan konpayi li yo: vòl, asèlman seksyèl, yo tout kouri yon eksperyans san yo pa yon gwoup kontwòl (Schrage 2011) .
etid Restivo ak van de Rijt a montre kat engredyan prensipal yo nan yon eksperyans: rekritman, Metòd chans, entèvansyon, ak rezilta yo. Ansanm, kat engredyan sa yo pèmèt syantis pou avanse pou pi pi lwen pase korlasyon ak mezire efè a kozatif nan tretman. Espesyalman, Metòd chans vle di ke lè ou konpare rezilta pou gwoup yo tretman ak kontwòl ou jwenn yon estimasyon de efè a kozatif nan ki entèvansyon pou sa seri patisipan yo. Nan lòt mo, ak yon eksperyans owaza kontwole ou kapab asire w ke nenpòt ki diferans ki genyen nan rezilta yo ki te koze pa entèvansyon an epi yo pa yon confounder, yon reklamasyon ke mwen fè egzak nan nan apendis la teknik lè l sèvi avèk fondasyon an rezilta potansyèl yo.
Anplis de sa nan ke yo te yon ilistrasyon bèl nan mekanik yo nan eksperyans, etid Restivo ak van de Rijt a tou montre ke lojistik yo nan eksperyans dijital kapab konplètman diferan de eksperyans analòg. Nan Restivo ak eksperyans van de Rijt a, li te fasil bay barnstar la yo ba nenpòt moun nan mond lan ak li te fasil yo swiv rezilta-ki kantite edits-sou yon peryòd pwolonje nan tan (paske modifye istwa se otomatikman anrejistre pa Wikipedya). Kapasite sa a rive delivre tretman ak mezire rezilta a pa koute se kalitatif kontrèman ak eksperyans nan tan lontan an. Malgre ke eksperyans sa a patisipe 200 moun, li te kapab yo te kouri ak 2,000 oswa 20,000 moun. Bagay pwensipal lan anpeche chèchè yo soti nan dekale moute eksperyans yo pa yon faktè de 100 pa te koute, li te etik. Ki se, se Restivo ak van de Rijt pa t 'vle bay barnstars editè undeserving epi yo pa t' vle eksperyans yo nan deranje kominote a Wikipedya (Restivo and Rijt 2012; Restivo and Rijt 2014) . Se konsa, byenke eksperyans la nan Restivo ak van de Rijt se relativman senp, li montre klèman ke kèk bagay sou eksperyans te rete menm bagay la ak kèk nan yo te chanje. An patikilye, lojik la de baz yo eksperimantasyon se menm bagay la, men lojistik yo te chanje. Apre sa, yo nan lòd yo pi klè izole opòtinite yo kreye pa chanjman sa a, mwen pral konpare eksperyans yo ke chèchè kapab fè kounye a kalite ki nan eksperyans sa yo ki te te fèt nan tan lontan an.