Randomized kinokontrol eksperimento ay may apat na pangunahing sangkap: recruitment ng mga kalahok, randomization ng paggamot, ang paghahatid ng paggamot, at pagsukat ng kinalabasan.
Ang mga random na kinokontrol na eksperimento ay may apat na pangunahing sangkap: pangangalap ng mga kalahok, randomization ng paggamot, paghahatid ng paggamot, at pagsukat ng mga kinalabasan. Ang digital age ay hindi nagbabago sa pangunahing katangian ng pag-eeksperimento, ngunit ginagawa itong mas madali sa logistically. Halimbawa, sa nakaraan, maaaring mahirap na masukat ang pag-uugali ng milyun-milyong tao, ngunit ngayon ay madalas na nangyayari sa maraming mga digital na sistema. Ang mga mananaliksik na maaaring malaman kung paano gamitin ang mga bagong pagkakataon ay maaaring magpatakbo ng mga eksperimento na imposible dati.
Upang gawing mas konkreto ang lahat ng ito - kapwa ang nanatiling pareho at kung ano ang nagbago-isaalang-alang natin ang eksperimento ni Michael Restivo at Arnout van de Rijt (2012) . Nais nilang maunawaan ang epekto ng mga impormal na gantimpala ng peer sa kontribusyon sa editoryal sa Wikipedia. Sa partikular, pinag-aralan nila ang mga epekto ng mga barnstar , isang award na maaaring ibigay ng anumang Wikipedian sa anumang iba pang Wikipedyan upang kilalanin ang pagsusumikap at angkop na pagsusumikap. Ang Restivo at van de Rijt ay nagbigay ng barnstars sa 100 marapat na mga Wikipedya. Pagkatapos, sinusubaybayan nila ang mga kasunod na kontribusyon ng mga tatanggap sa Wikipedia sa susunod na 90 araw. Karamihan sa kanilang sorpresa, ang mga taong kanilang iginawad sa mga barnstar ay tended upang gumawa ng mas kaunting pag- edit pagkatapos matanggap ang isa. Sa madaling salita, ang mga barnstar ay tila nakapanghihina ng loob kaysa sa naghihikayat sa kontribusyon.
Sa kabutihang palad, ang Restivo at van de Rijt ay hindi nagpapatakbo ng "pag-usig at pag-obserba" ng eksperimento; nagpapatakbo sila ng isang randomized na kinokontrol na eksperimento. Kaya, bilang karagdagan sa pagpili ng 100 nangungunang mga kontribyutor upang makatanggap ng isang barnstar, pumili din sila ng 100 nangungunang mga kontribyutor na hindi nila ibinigay. Ang mga 100 ay nagsilbi bilang isang grupo ng kontrol. At, critically, na sa grupo ng paggamot at na sa control group ay tinutukoy random.
Nang makita ng Restivo at van de Rijt ang pag-uugali ng mga tao sa grupo ng kontrol, natagpuan nila na ang kanilang mga kontribusyon ay bumababa rin. Bukod dito, nang ihambing ng Restivo at van de Rijt ang mga tao sa grupo ng paggamot (ibig sabihin, nakatanggap ng barnstars) sa mga tao sa grupo ng kontrol, natagpuan nila na ang mga tao sa grupo ng paggamot ay nag-ambag ng higit sa 60%. Sa ibang salita, ang mga kontribusyon ng parehong grupo ay nalilinlang, ngunit ang mga grupo ng kontrol ay mas mabilis nang nagagawa.
Tulad ng inilalarawan ng pag-aaral na ito, ang control group sa mga eksperimento ay kritikal sa isang paraan na medyo makabalighuan. Upang tumpak na masukat ang epekto ng mga barnstar, kailangan ng Restivo at van de Rijt na obserbahan ang mga taong hindi tumanggap ng mga barnstar. Maraming mga beses, ang mga mananaliksik na hindi pamilyar sa mga eksperimento ay hindi pinahalagahan ang hindi kapani-paniwala na halaga ng grupo ng kontrol. Kung ang Restivo at van de Rijt ay hindi nagkaroon ng grupo ng kontrol, nais nilang iguguhit ang eksaktong maling konklusyon. Ang mga grupo ng kontrol ay napakahalaga na sinabi ng CEO ng isang pangunahing kumpanya ng casino na mayroong tatlong paraan lamang na maaaring masaksihan ang mga empleyado mula sa kanyang kumpanya: para sa pagnanakaw, para sa sekswal na panliligalig, o para sa pagpapatakbo ng isang eksperimento na walang grupo ng kontrol (Schrage 2011) .
Ang pag-aaral ng Restivo at van de Rijt ay naglalarawan ng apat na pangunahing sangkap ng isang eksperimento: pangangalap, randomization, interbensyon, at kinalabasan. Magkasama, ang apat na sangkap na ito ay nagpapahintulot sa mga siyentipiko na lumipat nang higit sa mga ugnayan at sukatin ang salungat na epekto ng paggamot. Sa partikular, ang randomization ay nangangahulugan na ang mga tao sa mga grupo ng paggamot at kontrol ay magkatulad. Mahalaga ito dahil nangangahulugan ito na ang anumang pagkakaiba sa mga kinalabasan sa pagitan ng dalawang grupo ay maaaring maiugnay sa paggamot at hindi isang pandaraya.
Bilang karagdagan sa pagiging isang magandang ilustrasyon ng mekanika ng mga eksperimento, nagpapakita rin ang pag-aaral ng Restivo at van de Rijt na ang logistik ng mga digital na eksperimento ay maaaring maging ganap na naiiba mula sa mga analog eksperimento. Sa eksperimento ng Restivo at van de Rijt, madaling magbigay ng barnstar sa sinuman, at madaling subaybayan ang bilang ng mga resulta ng pag-edit-sa isang pinalawig na tagal ng panahon (dahil awtomatikong naitala ang kasaysayan ng pag-edit sa Wikipedia). Ito kakayahan upang makapaghatid ng paggamot at masukat ang kinalabasan nang walang gastos ay dapat sundin ng hindi tulad ng mga eksperimento sa nakaraan. Kahit na ang eksperimento na ito ay kasangkot sa 200 tao, maaaring tumakbo ito nang may 2,000 o kahit 20,000 katao. Ang pangunahing bagay na pumipigil sa mga mananaliksik mula sa pagsukat ng kanilang eksperimento sa pamamagitan ng isang kadahilanan ng 100 ay hindi nagkakahalaga; ito ay etika. Iyon ay, hindi nais ni Restivo at van de Rijt na magbigay ng mga barnstar sa mga hindi karapat-dapat na mga editor, at ayaw nila ang kanilang eksperimento na makagambala sa komunidad ng Wikipedia (Restivo and Rijt 2012, 2014) . Babalik ako sa ilan sa mga etikal na pagsasaalang-alang na itinaas ng mga eksperimento mamaya sa kabanatang ito at sa kabanata 6.
Sa wakas, ang eksperimento ng Restivo at van de Rijt ay malinaw na nagpapakita na habang ang pangunahing lohika ng pag-eksperimento ay hindi nagbago, ang logistik ng mga eksperimento sa digital-edad ay maaaring kapansin-pansing naiiba. Susunod, upang mas malinaw na ihiwalay ang mga pagkakataon na nilikha ng mga pagbabagong ito, ihahambing ko ang mga eksperimento na maaaring gawin ng mga mananaliksik ngayon sa mga uri ng mga eksperimento na nagawa noon.