4.2 Naon nu percobaan?

Randomized percobaan dikawasa geus opat bahan utama: rekrutmen pamilon, randomization perlakuan, kiriman perlakuan, jeung ukuran tina hasil.

Randomized percobaan dikawasa gaduh opat bahan utama: rekrutmen pamilon, randomization perlakuan, pangiriman perlakuan, jeung ukur tina hasil. Umur digital henteu ngarobah sipat dasar tina experimentation tapi hancana nyieun gampang logistically. Contona, nu geus kaliwat, éta bisa geus hésé ngukur paripolah jutaan jalma, tapi anu ayeuna rutin lumangsung di loba sistem digital. Peneliti anu bisa angka kaluar kumaha carana abah ieu kasempetan anyar bakal tiasa ngajalankeun percobaan nu éta mungkin saméméhna.

Sangkan ieu sadayana bit leuwih kongkrit-duanana kumaha geus ari sami jeung naon geus robah-hayu urang nganggap hiji percobaan ku Michael Restivo na Arnout van de Rijt (2012) . Aranjeunna hayang ngarti pangaruh ganjaran peer informal on kontribusi redaksi jeung Wikipedia. Dina sababaraha hal, aranjeunna diulik efek tina barnstars, panghargaan eta sagala Wikipedian tiasa masihan ka sagala Wikipedian sejenna mun ngaku gawé teuas sarta karajinan alatan. Restivo na van de Rijt masihan barnstars ka 100 Wikipedians deserving. Lajeng, aranjeunna dilacak kontribusi saterusna panarima 'pikeun Wikipedia leuwih 90 poé salajengna. Jauh ka reuwas maranéhanana, dina urang keur saha aranjeunna dileler barnstars biasana nyieun pangsaeutikna éditan sanggeus narima salah. Kalayan kecap séjén, dina barnstars seemed bisa ngalemahkeun tinimbang encouraging kontribusi.

Untungna, Restivo na van de Rijt teu ngajalankeun hiji "perturb sarta nitenan" percobaan; maranéhanana ngajalankeun hiji percobaan dikawasa randomized. Ku kituna, salian milih 100 kontributor luhur pikeun nampa barnstar a, maranéhna ogé ngangkat 100 kontributor luhur ka saha aranjeunna henteu masihan salah. 100 ieu dilayanan salaku grup kontrol. Na, kritis, anu éta dina grup pengobatan sarta anu di kelompok kontrol ieu ditangtukeun sacara acak.

Nalika Restivo na van de Rijt melong paripolah jalma di kelompok kontrol, maranéhna manggihan yén kontribusi maranéhanana anu turunna teuing. Salajengna, mun Restivo na van de Rijt urang dibandingkeun dina grup perlakuan (ie, barnstars narima) pikeun jalma di kelompok kontrol, maranéhna manggihan yén jalma di group perlakuan nyumbang kira 60% langkung. Kalayan kecap séjén, dina kontribusi ti duanana grup anu deceasing, tapi pamadegan kelompok kontrol anu lakukeun sangkan leuwih gancang.

Salaku ulikan ieu illustrates, kelompok kontrol dina percobaan nyaeta kritis dina cara nu geus rada paradoxical. Dina raraga persis ngukur pangaruh barnstars, Restivo na van de Rijt diperlukeun pikeun niténan jalma anu teu nampi barnstars. Sababaraha kali, peneliti anu teu wawuh jeung percobaan kalah ka ngahargaan nilai luar biasa ti grup kontrol. Mun Restivo na van de Rijt geus teu miboga grup kontrol, maranéhna bakal geus digambar persis kacindekan salah. Grup kontrol kacida pentingna yén CEO pausahaan kasino utama geus ngomong yén aya ukur tilu cara nu karyawan bisa dipecat tina pausahaan: keur maling, pikeun pelecehan seksual, atanapi pikeun ngajalankeun hiji percobaan tanpa grup kontrol (Schrage 2011) .

Ulikan Restivo na van de Rijt urang illustrates opat bahan utama hiji percobaan: rekrutmen, randomization, campur, jeung hasil. Kalawan babarengan, opat bahan ieu ngidinan élmuwan pikeun mindahkeun saluareun correlations sarta ngukur pangaruh kausal tina perlakuan. Husus, randomization hartina jalma dina pengobatan sarta control Grup bakal sarupa. Ieu penting sabab hartina sagala bédana dina hasil antara dua grup bisa attributed kana perlakuan teu confounder a.

Salian keur hiji ilustrasi nice tina mékanika percobaan, ulikan Restivo na van de Rijt urang ogé nunjukeun yen logistik percobaan digital tiasa lengkep beda ti maranéhanana percobaan analog. Dina Restivo jeung percobaan van de Rijt urang, ieu gampang mikeun barnstar ka saha, jeung ieu gampang lagu hasil-Jumlah éditan-leuwih hiji jaman nambahan waktu (sabab jujutan éditan anu otomatis dirékam ku Wikipédia). Pangabisa ieu nganteurkeun perlakuan jeung ngukur hasil dina euweuh biaya nya qualitatively kawas percobaan nu geus kaliwat. Sanajan percobaan ieu aub 200 jalma, éta bisa geus ngajalankeun kalawan 2.000 atanapi malah 20.000 urang. Hal utama nyegah peneliti ti skala nepi percobaan maranéhna ku faktor 100 Teu ongkos; ieu étika. Maksudna, Restivo na van de Rijt teu hoyong masihan barnstars ka rai undeserving, sarta maranéhna teu hayang percobaan maranéhna pikeun ngaruksak di komunitas Wikipédia (Restivo and Rijt 2012, 2014) . Kuring gé balik deui ka sababaraha pertimbangan etika diangkat ku percobaan engké dina bagean ieu sarta dina bab 6.

Dina kacindekan, anu percobaan tina Restivo na van de Rijt jelas nunjukeun yen bari logika dasar experimentation teu robah, logistik percobaan-umur digital tiasa nyirorot béda. Hareup, dina raraga leuwih jelas ngasingkeun kasempetan dijieun ku parobahan ieu, abdi gé ngabandingkeun percobaan nu peneliti tiasa ngalakukeun ayeuna jeung rupa percobaan nu geus dipigawé dina jaman baheula.