4.2什麼是實驗？

隨機對照實驗中有四個主要成分：招募參加者，治療的隨機化，交付處理和結果的測量。

隨機對照實驗有四個主要成分：參與者的招募，治療的隨機化，治療的提供和結果的測量。數字時代並沒有改變實驗的基本性質，但它確實使後勤更容易。例如，在過去，可能很難衡量數百萬人的行為，但現在許多數字系統中經常發生這種情況。能夠弄清楚如何利用這些新機會的研究人員將能夠進行以前無法實現的實驗。

為了使這一切更加具體 - 保持不變和改變的地方 - 讓我們考慮Michael Restivo和Arnout van de Rijt (2012) 。他們希望了解非正式同伴獎勵對維基百科編輯貢獻的影響。特別是，他們研究了barnstars的影響，這是任何維基百科都可以給予任何其他維基人的獎勵，以表彰他們的辛勤工作和盡職調查。 Restivo和van de Rijt向100名值得維繫的人提供了barnstars。然後，他們跟踪接收者在接下來的90天內對維基百科的後續貢獻。令他們驚訝的是，他們獲得barnstars的人往往會在收到編輯後做出更少的編輯。換句話說，巴恩斯坦似乎是令人沮喪而不是鼓勵貢獻。

幸運的是，Restivo和van de Rijt沒有進行“擾動和觀察”實驗;他們正在進行隨機對照實驗。因此，除了選擇100名頂級貢獻者獲得一個穀倉之星外，他們還挑選了100名他們沒有給出的最佳貢獻者。這100個作為對照組。而且，關鍵的是，誰在治療組和誰在對照組是隨機確定的。

當Restivo和van de Rijt觀察對照組中人們的行為時，他們發現他們的貢獻也在下降。此外，當Restivo和van de Rijt將治療組中的人（即接受過的barnstars）與對照組的人進行比較時，他們發現治療組中的人貢獻了大約60％。換句話說，兩組的貢獻都在減少，但對照組的貢獻卻快得多。

正如本研究所示，實驗中的對照組在某種程度上是至關重要的。為了精確測量巴恩斯塔的影響，Restivo和van de Rijt需要觀察那些沒有接受過巴恩斯塔的人。很多時候，不熟悉實驗的研究人員無法理解對照組令人難以置信的價值。如果Restivo和van de Rijt沒有控制組，他們就會得出錯誤的結論。控制組非常重要，一家大型賭場公司的首席執行官表示，只有三種方式可以解僱員工：盜竊，性騷擾，或沒有控制組的實驗(Schrage 2011) 。

Restivo和van de Rijt的研究說明了實驗的四個主要成分：招募，隨機化，干預和結果。這四種成分共同使科學家能夠超越相關性並測量治療的因果效應。具體而言，隨機化意味著治療組和對照組中的人將是相似的。這很重要，因為這意味著兩組之間的結果差異可歸因於治療，而不是混淆。

除了作為實驗力學的一個很好的例證，Restivo和van de Rijt的研究還表明，數字實驗的物流可以與模擬實驗完全不同。在Restivo和van de Rijt的實驗中，很容易將barnstar給予任何人，並且很容易在很長一段時間內跟踪結果 - 編輯數量（因為編輯歷史由維基百科自動記錄）。與過去的實驗不同，這種免費提供治療和測量結果的能力是定性的。雖然這個實驗涉及200人，但它本可以運行2000人甚至20,000人。阻止研究人員將實驗擴大100倍的主要因素不是成本;這是道德規範。也就是說，Restivo和van de Rijt不想讓barnstars給不值得編輯，他們不希望他們的實驗破壞維基百科社區(Restivo and Rijt 2012, 2014) 。我將回到本章後面和第6章中通過實驗提出的一些道德考慮。

總之，Restivo和van de Rijt的實驗清楚地表明，雖然實驗的基本邏輯沒有改變，但數字時代實驗的物流可能會有很大的不同。接下來，為了更清楚地隔離這些變化帶來的機會，我將比較研究人員現在可以做的實驗和過去已經完成的實驗。