4.2 Якія эксперыменты?

Рандомізірованный кантраляваныя эксперыменты маюць чатыры асноўных кампанента: набор удзельнікаў, рандомизации лячэння, прадастаўлення лячэння, і вымярэнне вынікаў.

Рандомізірованный кантраляваныя эксперыменты маюць чатыры асноўных інгрэдыентаў: набор удзельнікаў, рандомизация лячэння, дастаўкі лячэння, і вымярэнне вынікаў. Лічбавы век не мяняе фундаментальны характар ​​эксперыментавання, але гэта робіць яго лягчэй лагістычных. Напрыклад, у мінулым, магчыма, было цяжка вымераць паводзіны мільёнаў людзей, але цяпер звычайна адбываецца ў многіх лічбавых сістэмах. Даследчыкі, якія могуць зразумець, як выкарыстоўваць гэтыя новыя магчымасці будуць мець магчымасць праводзіць эксперыменты, якія былі немагчымыя раней.

Для таго, каб зрабіць усё гэта трохі больш канкрэтна-як тое , што засталося ранейшым і што змянілася-давайце разгледзім эксперымент Майкла Restivo і Арнаутаў ван дэ Rijt (2012) . Яны хацелі, каб зразумець ўплыў нефармальных аднарангавыя узнагарод на рэдакцыйным ўклад у Вікіпедыю. У прыватнасці, яны вывучалі эфекты barnstars, ўзнагароду , што любы Wikipedian можа даць любому іншаму Wikipedian прызнаць цяжкую працу і належнай абачлівасці. Restivo і ван дэ Rijt даў barnstars да 100 заслужаных Wikipedians. Затым яны адсочвалі наступныя ўзносы атрымальнікаў у Вікіпедыі на працягу наступных 90 дзён. Да іх здзіўлення, людзі, якім яны ўзнагароджаны barnstars , як правіла, робяць менш зменаў пасля прыёму аднаго. Іншымі словамі, barnstars, здавалася, перашкаджаючы, а не заахвочвання ўкладу.

На шчасце, Restivo і ван дэ Rijt не працуе эксперымент «абураюць і назіраць»; яны працавалі рандомізірованное кантраляванае эксперымент. Такім чынам, у дадатак да выбару 100 лепшых ўкладчыкаў атрымаць barnstar, яны таксама абралі 100 лепшых памочнікаў, якіх яны не давалі адзін. Гэтыя 100 служылі ў якасці кантрольнай групы. І, крытычна, які быў у групе лячэння і хто быў у кантрольнай групе вызначаецца выпадковым чынам.

Калі Restivo і ван дэ Rijt глядзеў на паводзіны людзей у кантрольнай групе, яны выявілі, што іх уклады памяншаліся таксама. Акрамя таго, калі Restivo і ван дэ Rijt у параўнанні людзі ў групе лячэння (г.зн. атрымаў barnstars) для людзей у кантрольнай групе, яны выявілі, што людзі ў групе лячэння ўнеслі каля 60% больш. Іншымі словамі, ўклад абедзвюх груп былі deceasing, але ў кантрольнай групы рабілі гэта значна хутчэй.

Як гэта даследаванне паказвае, кантрольная група ў эксперыментах мае вырашальнае значэнне такім чынам, што некалькі парадаксальна. Для таго, каб дакладна вымераць эфект barnstars, Restivo і ван дэ Rijt неабходна назіраць за людзьмі, якія не атрымалі barnstars. Шмат разоў, даследчыкі, якія не знаёмыя з эксперыментамі, не ў стане ацаніць неверагодную каштоўнасць кантрольнай групы. Калі Restivo і ван дэ Rijt не было кантрольнай групы, яны распрацавалі менавіта няправільны выснову. Кантрольныя групы настолькі важныя , што генеральны дырэктар буйной кампаніі казіно сказаў , што ёсць толькі тры спосабу , якімі супрацоўнікі могуць быць звольнены з сваёй кампаніі: за крадзеж, за сэксуальныя дамаганні, або для правядзення эксперыменту без кантрольнай групы (Schrage 2011) ,

Даследаванне Restivo ван дэ Rijt ілюструе чатыры асноўных кампанента эксперыменту: набор, рандомизации, ўмяшання і зыходы. Разам гэтыя чатыры кампаненты дазваляе навукоўцам выйсці за межамі карэляцыі і вымераць прычынны эфект лячэння. У прыватнасці, рандомизации азначае, што людзі ў доследнай і кантрольнай групах будуць аналагічнымі. Гэта важна, таму што гэта азначае, што нейкая розніца ў выніках паміж двума групамі можна аднесці да лячэння і не confounder.

Акрамя таго, што добрая ілюстрацыя механікі эксперыментаў, даследаванні Restivo ван дэ Rijt таксама паказвае, што лагістыка лічбавых эксперыментаў могуць быць цалкам адрозніваюцца ад аналагавых эксперыментаў. У Restivo і эксперымент ван дэ Rijt, гэта было лёгка даць barnstar каму-небудзь, і гэта было лёгка адсочваць вынікі-колькасць правак, на працягу доўгага перыяду часу (таму што гісторыя рэдагавання аўтаматычна запісаную Вікіпедыі). Гэта здольнасць паставіць лячэння і ацэнкі вынікаў без якіх - небудзь выдаткаў якасна у адрозненне ад эксперыментаў у мінулым. Хоць гэты эксперымент уключаў 200 чалавек, ён мог бы працаваць з 2000 ці нават 20 000 чалавек. Галоўнае, што перашкаджае даследчыкам ад маштабаў іх эксперымент у 100 разоў не кошт; гэта этыка. Гэта значыць, Restivo і ван дэ Rijt не жадалі даваць barnstars для недастойных рэдактараў, і яны не хочуць , каб іх вопыт , каб разбурыць супольнасць Вікіпедыі (Restivo and Rijt 2012, 2014) . Я вярнуся да некаторых з этычных меркаванняў, выкладаліся эксперыментамі далей у гэтым раздзеле і ў главе 6.

У заключэнне адзначым, што эксперымент Restivo і ван дэ Rijt ясна паказвае, што ў той час як асноўная логіка эксперыменту не змянілася, матэрыяльна-тэхнічнага забеспячэння лічбавага ўзросту эксперыментаў могуць быць істотна розныя. Далей, для таго, каб больш выразна вылучыць магчымасці, ствараемыя гэтымі зменамі, я буду параўноўваць эксперыменты, даследчыкі могуць цяпер рабіць з відамі эксперыментаў, якія былі праведзены ў мінулым.