Katılımcıların işe alım, tedavi randomizasyon, tedavi teslimat ve sonuçların ölçülmesi: randomize kontrollü deneyler dört ana maddeler var.
Randomize kontrollü deneyler çeşitli biçimler alabilir ve davranış birçok çeşit incelemek için kullanılabilir. Katılımcıların işe alım, tedavi randomizasyon, tedavi teslimat ve sonuçların ölçülmesi: Ama, onların özünde, randomize kontrollü deneyler dört ana maddeler var. Dijital çağ deney temel doğasını değiştirmez, ama daha kolay lojistik bunları yapmak yok. Örneğin, geçmişte milyonlarca insanın davranışını ölçmek için zor olabilir, ama bu artık rutin olarak birçok dijital sistemlerde oluyor. Bu yeni fırsatlar koşum nasıl anlamaya Araştırmacılar, daha önce imkansız olan deneyler çalıştırmak mümkün olacak.
Bu tüm biraz daha somut-her ikisi de aynı kaldı ve ne Michael Restivo ve Arnout van de Rijt en dikkate değişti-let ne yapmak (2012) . Araştırmacılar Wikipedia editör katkıları gayri akran ödülleri etkisini anlamak istedim. Özellikle, herhangi bir Wikipedian sıkı çalışma ve özeni kabul etmek başka bir Wikipedian verebileceğiniz bir ödül barnstars etkilerini inceledi. Restivo ve van de Rijt 100 hak Vikipedistler için barnstars verdi. Sonra, Restivo ve van de Rijt önümüzdeki 90 gün içinde Wikipedia alıcıların sonraki katkıları izlenir. Onların sürpriz, onlar barnstars layık kime insanlar bir aldıktan sonra daha az düzenlemeleri yapmak eğiliminde. Diğer bir deyişle, barnstars caydırıcı yerine katkı teşvik gibiydi.
Neyse ki, Restivo ve van de Rijt bir "perturb ve gözlemlemek" deney çalışan değil; Onlar bir randomize kontrollü deney çalışmakta. Yani, bir Barnstar almak için 100 üst katkıda seçiminde ek olarak, onlar da bir Barnstar vermediler kime 100 üst katkıda aldı. Bu yüz kontrol grubu olarak görev yaptı ve kim bir Barnstar var ve kim rastgele belirlendi vermedi. Restivo ve van de Rijt kontrol grubuna bakıldığında onlar çok katkıları bir dik düşüş olduğunu bulmuşlardır. Araştırmacılar, kontrol grubunda tedavi grubunda kişi (örneğin, barnstars alınan) ve insanlar karşılaştırıldığında, son olarak, bu Barnstar editörler yaklaşık% 60 daha fazla katkıda bulunmak neden olduğu bulunmuştur. Ama, katkı bu artışın her iki grupta da genel bir düşüş parçası olarak yer alıyordu.
Bu çalışma de gösterildiği gibi, deneylerde kontrol grubu ile paradoks bir şekilde önemlidir. tam barnstars etkisini ölçmek amacıyla Restivo ve van der Rijt barnstars almayan insanları gözlemlemek için gerekli. Deneylerde aşina olmayan Birçok kez araştırmacı, kontrol grubunda inanılmaz değerini takdir başarısız. Restivo ve van de Rijt bir kontrol grubu yoktu, onlar tam olarak yanlış sonuç çizilmiş olurdu. Hırsızlık, cinsel taciz ve bir deney çalıştıran bir kontrol grubu olmadan: kontrol grupları büyük bir kumarhane şirketin CEO'su çalışanları onun şirketten ateş olabilir sadece üç yolu vardır söyledi o kadar önemlidir (Schrage 2011) .
işe alım, randomizasyon, müdahale ve sonuçları: Restivo ve van de Rijt çalışması dört ana bir deney malzemeleri göstermektedir. Hep birlikte, bu dört maddeler bilim adamları korelasyon ötesine taşımak ve tedavilerin nedensel etkisini ölçmek için izin verir. Özellikle, randomizasyon size tedavi ve kontrol grupları için sonuçları karşılaştırmak zaman katılımcıların bu seti için bu müdahalenin nedensel etkisinin tahmin almak anlamına gelir. Başka bir deyişle, bir randomize kontrollü deney ile size sonuçlarında herhangi bir fark müdahale ve bir karıştırıcı, ben potansiyel sonuçları framework kullanarak Teknik Ek'te kesin hale bir iddia neden emin olabilirsiniz.
Deneylerin mekaniğinin güzel bir örnek olmanın yanı sıra, Restivo ve van de Rijt çalışması aynı zamanda dijital deneylerin lojistik, analog deneylerden tamamen farklı olabileceğini göstermektedir. Restivo ve van de Rijt deneyinde, dünyadaki herkes için Barnstar vermek kolay oldu ve üzerinde düzenlemeler uzun bir süre (düzenleme geçmişi otomatik olarak Wikipedia tarafından kaydedilen çünkü) sonucu-dizi izlemek için kolay oldu. Hiçbir ücret ödemeden sonuçları tedavileri sunmak ve ölçmek için bu yeteneği niteliksel geçmişte deneyleri benzemez. Bu deney, 200 kişinin karıştığı rağmen, 2000 ya da 20.000 kişi çalıştırmak olabilirdi. maliyet değildi 100 faktörüyle kendi deneyini ölçeklendirme araştırmacılar engelleyen en önemli şey, bu etik oldu. Yani, Restivo ve van de Rijt hak etmeyen editörler barnstars vermek istemedi ve onların deney Vikipedi topluluğu bozmak istemedi (Restivo and Rijt 2012; Restivo and Rijt 2014) . Restivo ve van de Rijt deneyi oldukça basit olmasına rağmen Yani, açıkça deneyler hakkında bazı şeyler aynı kalmış ve bazı değiştiğini göstermektedir. Özellikle, deney temel mantığı aynıdır, ancak lojistik değişti. Bu değişikliğin yarattığı fırsatları daha net izole etmek amacıyla Sonra, ben araştırmacılar geçmişte yapılmış deneylerin türlü şimdi yapabilirsiniz deneyler karşılaştırmak gerekir.