Randomized nyobi kontrol duwe papat úa utama: recruitment peserta, randomization saka perawatan, layang saka perawatan, lan ukuran kasil.
Eksperimen kontrol acak duwe papat èlmiah utama: perekrutan peserta, randomisasi perawatan, pangobatan, lan pangukuran kwalitas. Umur digital ora ngganti sipat dhasar saka eksperimen, nanging ora gampang kanthi logis. Contone, ing jaman kepungkur, bisa uga angel kanggo ngukur prilaku jutaan wong, nanging saiki wis kedadeyan ing akeh sistem digital. Peneliti sing bisa nemokake cara nggarap kesempatan anyar iki bakal bisa nglakokake eksperimen sing ora bisa ditrapake sadurunge.
Kanggo nggawe kabeh iki luwih konkrit-kedaden apa sing isih padha lan apa sing wis diganti-ngelingake eksperimen dening Michael Restivo lan Arnout van de Rijt (2012) . Wong-wong mau pengin ngerti pengaruh ganjaran pegawe informal marang kontribusi editor marang Wikipedia. Khususipun, dheweke sinau akibat barnstar , penghargaan sing bakal dianakake panganggo Wikipedia menyang Wikipedia liyane kanggo ngakoni buruh lan ketuntasan kanthi wajar. Restivo lan van de Rijt mènèhi barnstar kanggo 100 panganggo Wikipedia. Banjur, padha nglacak kontribusine panganggo ing Wikipedia sakwéné 90 dina. Kathah kaget, wong-wong sing padha dianakake barnstars cenderung kanggo nggawe suntingan sithik sawise nampa siji. Ing tembung liyane, barnstars katon ora nyenengake tinimbang nyengkuyung kontribusi.
Untunge, Restivo lan van de Rijt ora nglakoni eksperimen "perturb lan mirsani"; padha mlaku ing eksperimen sing dikontrol kanthi acak. Dadi, ing saliyane milih 100 kontributor utama kanggo nampa barnstar, dheweke uga milih 100 penyumbang utama sing ora menehi hadiah. Iki 100 dadi kelompok kontrol. Lan, kritis, sing ana ing grup pengobatan lan sing ana ing grup kontrol ditemtokake kanthi acak.
Nalika Restivo lan van de Rijt nyawang prilaku wong ing grup kontrol, dheweke nemokake yen sumbangan uga mudhun. Luwih, nalika Restivo lan van de Rijt mbandhingake wong ing grup perawatan (ie, nampa barnstars) kanggo wong-wong ing grup kontrol, padha nemokake yen wong ing grup perawatan nyumbang luwih saka 60%. Ing tembung liya, sumbangan saka rong kelompok iki ngapusi, nanging sing saka grup kontrol padha nindakake luwih cepet.
Minangka panliten iki nggambarake, klompok kontrol ing eksperimen kritis kanthi cara sing rada paradoks. Supaya bisa ngukur efek saka barnstars, Restivo lan van de Rijt perlu kanggo mirsani wong sing ora nampa barnstars. Kaping pirang-pirang, panaliti sing ora kenal karo eksperimen gagal nemoni nilai luar biasa saka grup kontrol. Yen Restivo lan van de Rijt ora nduweni klompok kontrol, mesthine bakal ditarik persis sing salah. Grup kontrol kasebut penting banget supaya CEO saka perusahaan kasino utama ngandhakake yen ana mung tiga cara sing bisa dipecat karyawan saka perusahaan: kanggo nyolong, pelecehan seksual, utawa kanggo nglakokake eksperimen tanpa klompok kontrol (Schrage 2011) .
Sinau Restivo lan van de Rijt nggambarake papat èlmiah utama: perekrutan, acak, intervensi, lan asil. Bebarengan karo papat iki ngidini para ilmuwan pindhah ngluwihi korélasi lan ngukur pengaruh akibat saka pangobatan. Secara khusus, randomisasi tegese wong ing kelompok perawatan lan kontrol bakal padha. Iki penting amarga iku tegese manawa prabédan ing asil antarane rong kelompok kasebut bisa dianggep minangka perawatan lan ora dadi pitutur.
Saliyane dadi ilustrasi becik saka mekanika eksperimen, studi Restivo lan van de Rijt uga nuduhake yen logistik eksperimen digital bisa beda banget saka eksperimen analog. Ing Restivo lan eksperimen van de Rijt, iku gampang kanggo menehi barnstar marang sapa waé, lan gampang kanggo ngetutna jumlah suntingan asil-sajrone wektu sing luwih dawa (amarga riwayat suntingan otomatis direkam déning Wikipedia). Kemampuan iki kanggo ngirim pangobatan lan ngukur hasil tanpa biaya iku ora sah kayadene percobaan ing jaman kepungkur. Senajan eksperimen iki melu 200 wong, bisa uga ana 2.000 utawa 20.000 wong. Masalah utama sing nyegah peneliti saka ngukur eksperimen kanthi faktor 100 ora ana biaya; punika etika. Restivo lan van de Rijt ora pengin menehi barnstars kanggo editor sing ora pantes, lan padha ora pengin eksperimen kanggo ngganggu komunitas Wikipedia (Restivo and Rijt 2012, 2014) . Aku bakal bali menyang sawetara prakara etis sing diwetokake dening eksperimen ing pungkasan bab iki lan ing bab 6.
Saklajengipun, eksprimen Restivo lan van de Rijt cetha nedahaken bilih manawa logika dhasar eksperimen sampun gantos, logistik percobaan digital-umur saged beda-beda. Sabanjure, supaya luwih cetha ngisolasi kesempatan sing digawe dening owah-owahan iki, Aku bakal mbandhingake eksperimen sing bisa ditindakake panaliti saiki karo jinis eksperimen sing wis rampung ing sasi kepungkur.