Рандомізірованный кантраляваныя эксперыменты маюць чатыры асноўных кампанента: набор удзельнікаў, рандомизации лячэння, прадастаўлення лячэння, і вымярэнне вынікаў.
Рандомізірованный кантраляваныя эксперыменты могуць прымаць розныя формы і могуць быць выкарыстаны для вывучэння многіх тыпаў паводзін. Але, па сутнасці сваёй, рандомізірованный кантраляваныя эксперыменты маюць чатыры асноўных кампанента: набор удзельнікаў, рандомизации лячэння, прадастаўлення лячэння, і вымярэнне вынікаў. Лічбавы век не мяняе фундаментальны характар эксперыментавання, але ён робіць іх лягчэй лагістычных. Напрыклад, у мінулым гэта, магчыма, было цяжка вымераць паводзіны мільёнаў людзей, але якія ў цяперашні час звычайна адбываецца ў многіх лічбавых сістэмах. Даследчыкі, якія могуць зразумець, як выкарыстоўваць гэтыя новыя магчымасці будуць мець магчымасць праводзіць эксперыменты, якія былі немагчымыя раней.
Для таго, каб усё гэта трохі больш канкрэтна-як тое , што засталося ранейшым і што змянілася-давайце разгледзім Майкла Restivo і Arnout ван дэ Rijt - х (2012) . Даследчыкі хацелі зразумець ўплыў нефармальных аднагодкаў ўзнагароджання па рэдакцыйным узносаў у Вікіпедыі. У прыватнасці, яны вывучалі эфекты barnstars, ўзнагароду , што любы Wikipedian можа даць любому іншаму Wikipedian прызнаць цяжкую працу і належнай абачлівасці. Restivo і ван дэ Rijt даў barnstars да 100 годных Wikipedians. Затым Restivo і ван дэ Rijt адсочвацца наступныя ўзносы атрымальнікаў у Вікіпедыі на працягу наступных 90 дзён. Да іх здзіўлення, людзі , да якіх яны ўзнагароджаны barnstars , як правіла, робяць менш зменаў пасля прыёму аднаго. Іншымі словамі, barnstars здаваўся бянтэжаць, а не заахвочвання ўкладу.
На шчасце, Restivo і ван дэ Rijt не працуе эксперымент "абураюць і назіраць"; яны працавалі рандомізірованное кантраляванае эксперымент. Такім чынам, у дадатак да выбару 100 лепшых ўкладчыкаў атрымаць barnstar, яны таксама абралі 100 лепшых ўкладчыкаў, якіх яны не давалі barnstar. Гэтыя сто служылі ў якасці кантрольнай групы, і хто атрымаў barnstar і які не быў вызначаны выпадковым чынам. Калі Restivo і ван дэ Rijt паглядзеў на кантрольнай групе яны выявілі, што ў яе рэзкае зніжэнне узносаў таксама. Нарэшце, калі даследчыкі параўналі людзей у групе лячэння (гэта значыць, атрымалі barnstars) і людзей у кантрольнай групе, яны выявілі, што barnstar выклікалі рэдактары ўнесці каля 60% больш. Але гэта павелічэнне ўкладу адбывалася ў рамках агульнага зніжэння ў абедзвюх групах.
Як гэта даследаванне паказвае, кантрольная група ў эксперыментах мае вырашальнае значэнне ў шляху, які з'яўляецца некалькі парадаксальным. Для таго, каб дакладна вымераць эфект barnstars, Restivo і ван-дэр-Rijt трэба было назіраць за людзьмі, якія не атрымлівалі barnstars. Шмат разоў даследчыкі, якія не знаёмыя з эксперыментамі, не ў стане ацаніць неверагодную каштоўнасць кантрольнай групы. Калі Restivo і ван дэ Rijt не было кантрольнай групы, то яны бы сапраўды звернута памылковая выснова. Кантрольныя групы настолькі важныя , што генеральны дырэктар буйной кампаніі казіно сказаў , што ёсць толькі тры спосабу , якімі супрацоўнікі могуць быць звольнены з сваёй кампаніі: крадзеж, сэксуальныя дамаганні, і правядзенні эксперыменту без кантрольнай групы (Schrage 2011) .
Даследаванне Restivo і ван дэ Rijt ілюструе чатыры асноўных кампанента эксперыменту: набор, рандомизации, ўмяшання і зыходы. Разам гэтыя чатыры кампанента дазваляюць навукоўцам выйсці за межы карэляцыі і вымераць прычынна-выніковую сувязь працэдур. У прыватнасці, рандомизация азначае, што калі вы параўнайце вынікі для лячэння і кантрольнай груп вы атрымліваеце ацэнку прычыннай эфект гэтага ўмяшання для гэтага набору ўдзельнікаў. Іншымі словамі, з дапамогай рандомізірованного кантраляванага эксперыменту вы можаце быць упэўнены , што любыя адрозненні ў выніках выкліканыя умяшаннем , а не confounder, патрабаванне , што я раблю дакладным у тэхнічным дадатку з выкарыстаннем структуры патэнцыйных вынікаў.
Акрамя таго, што добрая ілюстрацыя механікі эксперыментаў, даследаванні Restivo і ван дэ Rijt таксама паказвае, што матэрыяльна-тэхнічнае забеспячэнне лічбавых эксперыментаў можа быць цалкам адрозніваецца ад аналагавых эксперыментаў. У Restivo і эксперымент ван дэ Rijt, гэта было лёгка даць barnstar нікому ў свеце, і гэта было лёгка адсочваць вынікі-лік правак-на працягу доўгага перыяду часу (таму што гісторыя рэдагавання аўтаматычна запісваюцца Wikipedia). Гэтая здольнасць даставіць лячэння і ацэнкі вынікаў без якіх - небудзь выдаткаў якасна у адрозненне ад эксперыментаў у мінулым. Хоць гэты эксперымент уключаў 200 чалавек, гэта можна было працаваць з 2000 ці 20000 чалавек. Галоўнае, прадухіляючы даследчыкаў пашыраць іх эксперымент у 100 разоў не варта, гэта этыка. Гэта значыць, Restivo і ван дэ Rijt не хацеў даваць barnstars ў недастойных рэдактараў , і яны не хочуць , каб іх эксперымент , каб разбурыць супольнасць Вікіпедыі (Restivo and Rijt 2012; Restivo and Rijt 2014) . Такім чынам, хоць эксперымент Restivo і ван дэ Rijt з'яўляецца адносна простым, гэта ясна паказвае, што некаторыя рэчы, пра досведах засталіся ранейшымі, а некаторыя з іх змяніліся. У прыватнасці, асноўная логіка эксперыментаў тое ж самае, але лагістыкі змяніліся. Далей, для таго, каб больш выразна вылучыць магчымасці, ствараемыя гэтым змяненнем, я буду параўноўваць эксперыменты, якія даследчыкі могуць зрабіць цяпер да відаў эксперыментаў, якія былі зробленыя ў мінулым.