4.2 Ano ang mga eksperimento?

Randomized kinokontrol eksperimento ay may apat na pangunahing sangkap: recruitment ng mga kalahok, randomization ng paggamot, ang paghahatid ng paggamot, at pagsukat ng kinalabasan.

Randomized kinokontrol eksperimento ay maaaring tumagal ng maraming mga form at maaaring magamit upang pag-aralan ang maraming uri ng pag-uugali. Ngunit, sa kanilang core, randomized kinokontrol eksperimento ay may apat na pangunahing sangkap: recruitment ng mga kalahok, randomization ng paggamot, ang paghahatid ng paggamot, at pagsukat ng kinalabasan. Ang mga digital na edad ay hindi nagbabago ang pangunahing mga katangian ng e-eksperimento, ngunit ito ay gumawa ng mga ito mas madali logistically. Halimbawa, sa nakalipas na ito ay maaaring may been mahirap na masukat ang pag-uugali ng mga milyon-milyong ng mga tao, ngunit na ngayon ay routinely nangyayari sa maraming mga digital na mga sistema. Mga mananaliksik na malaman kung paano upang pakinabangan ang mga bagong pagkakataon ay maaaring magpatakbo ng mga eksperimento na imposible dati.

Upang gawin ang lahat ng kaunti mas kongkreto-pareho kung ano ay may nagtutulog ang parehong at isaalang-alang Michael Restivo at Arnout van de Rijt ni kung ano ang nagbago-let (2012) . Ang mga mananaliksik nais upang maunawaan ang mga epekto ng impormal na peer premyo sa editorial kontribusyon sa Wikipedia. Sa partikular, ang mga ito pinag-aralan ang mga epekto ng barnstars, ng award na ang anumang mga Wikipedian ay maaaring magbigay sa anumang iba pang mga Wikipedian kilalanin hirap sa trabaho at angkop na kasipagan. Restivo at van de Rijt nagbigay barnstars sa 100 kalait Wikipedians. Pagkatapos, Restivo at van de Rijt sinusubaybayan ang mga tatanggap 'kasunod na mga kontribusyon sa Wikipedia sa loob ng susunod na 90 araw. Laking gulat nila, ang mga tao kung kanino sila ay iginawad sa barnstars tended upang gumawa ng mas kaunting mga pag-edit pagkatapos matanggap ng isa. Sa ibang salita, ang barnstars tila ay nakapanghihina ng loob sa halip na naghihikayat sa contribution.

Sa kabutihang palad, Restivo at van de Rijt ay hindi tumatakbo ang isang "matigatig at obserbahan" eksperimento; sila ay nagpapatakbo ng isang randomized kinokontrol na eksperimento. Kaya, bilang karagdagan sa pagpili ng 100 top kontribyutor upang makatanggap ng isang barnstar, sila din kinuha 100 top kontribyutor sa kanino sila ay hindi magbigay ng isang barnstar. Ang mga daang nagsilbi bilang isang control group, at kung sino got ang isang barnstar at kung sino ay hindi ay tinutukoy nang sapalaran. Kapag Restivo at van de Rijt ay tumingin sa ang control group sila ay natagpuan na ito ay nagkaroon rin ng matarik na drop sa mga kontribusyon. Panghuli, kapag ang mga mananaliksik kung ihahambing tao sa grupo ng paggamot (ibig sabihin, natanggap barnstars) at mga tao sa control group, sila natagpuan na ang barnstar sanhi editor upang mag-ambag tungkol sa 60% higit pa. Ngunit, ito pagtaas sa kontribusyon ay nagaganap bilang bahagi ng isang pangkalahatang tanggihan sa parehong grupo.

Bilang pag-aaral na ito ay naglalarawan, ang control group sa mga eksperimento ay kritikal sa isang paraan na ay medyo makabalighuan. Upang tiyak na masukat ang epekto ng barnstars, Restivo at van der Rijt kinakailangan upang obserbahan ang mga tao na hindi nakatanggap barnstars. Maraming mga beses mga mananaliksik na ay hindi pamilyar sa mga eksperimento mabibigo sa pinasasalamatan ang hindi kapani-paniwala na halaga ng control group. Kung Restivo at van de Rijt ay hindi magkaroon ng isang control group, ang mga ito ay may inilabas nang eksakto sa maling konklusyon. Control grupo ay kaya mahalaga na ang CEO ng isang malaking kumpanya casino ay sinabi na may mga lamang tatlong mga paraan na ang mga empleyado ay maaaring fired mula sa kanyang kumpanya: pagnanakaw, sexual harassment, at pagpapatakbo ng isang eksperimento nang walang isang control group (Schrage 2011) .

Restivo at van de Rijt ni pag-aaral ay naglalarawan ng apat na pangunahing sangkap ng isang eksperimento: recruitment, randomization, interbensyon, at kinalabasan. Magkasama, ang mga apat na mga sangkap magpapahintulot sa mga siyentipiko upang ilipat sa kabila correlations at sukatin ang pananahilan epekto ng paggamot. Sa partikular, randomization ay nangangahulugan na kapag ihambing mo kinalabasan para sa paggamot at kontrol grupo kang makakuha ng isang pagtatantya ng pananahilan epekto ng interbensyon na para sa na hanay ng mga kalahok. Sa ibang salita, na may isang randomized kinokontrol na eksperimento maaari mong siguraduhin na ang anumang mga pagkakaiba sa mga kinalabasan ay sanhi sa pamamagitan ng interbensyon at hindi isang confounder, isang claim na gumawa ako tiyak sa ang Technical Appendix gamit ang mga potensyal na kinalabasan framework.

Bilang karagdagan sa pagiging isang magaling na paglalarawan ng ang mga mekanika ng mga eksperimento, ay nagpapakita rin Restivo at van de Rijt ni pag-aaral na ang mga Logistics ng digital eksperimento ay maaaring maging ganap na naiibang mula sa analog mga eksperimento. Sa Restivo at van de Rijt ni eksperimento, ito ay madaling upang bigyan ang barnstar sa sinuman sa mundo at ito ay madali upang subaybayan ang kinalabasan-bilang ng mga pag-edit-over sa isang pinalawig na tagal ng panahon (dahil edit kasaysayan ay awtomatikong naitala sa pamamagitan ng Wikipedia). Ito kakayahan upang makapaghatid ng paggamot at sukatin kinalabasan nang walang gastos ay kalitatibong hindi katulad eksperimento sa nakaraan. Kahit na ito eksperimento kasangkot 200 mga tao, maaaring ito ay tumakbo kasama ang 2,000 o 20,000 tao. Ang pangunahing bagay na pumipigil sa mga mananaliksik mula sa scaling up ng kanilang eksperimento sa pamamagitan ng isang kadahilanan ng 100 ay hindi gastos, ito ay etika. Iyon ay, Restivo at van de Rijt ay hindi nais na magbigay barnstars na hindi karapat-dapat editor at hindi nila gusto ang kanilang mga eksperimento upang maputol ang komunidad Wikipedia (Restivo and Rijt 2012; Restivo and Rijt 2014) . Kaya, kahit na ang eksperimento ng Restivo at van de Rijt ay medyo simple, ito ay malinaw na nagpapakita na ang ilang mga bagay tungkol sa mga eksperimento ay may nagtutulog ang parehong at ang ilan ay nagbago. Sa partikular, ang mga pangunahing lohika ng experimentation ay ang parehong, ngunit ang Logistics ay nagbago. Susunod, upang mas malinaw na ihiwalay ang mga pagkakataon na nilikha ng pagbabagong ito, makikita ko bang ihambing ang mga eksperimento na ang mga mananaliksik ay maaaring gawin ngayon upang ang mga uri ng mga eksperimento na ang nagawa sa nakaraan.