4.6忠告

無論您是自己做事還是與合作夥伴合作,我都想提供四條建議,我發現這些建議對我自己的工作特別有幫助。前兩條建議適用於任何實驗,而後兩條則更適用於數字時代實驗。

在您進行實驗時,我的第一條建議是,您應該在收集任何數據之前盡可能多地考慮。對於習慣於運行實驗的研究人員來說,這似乎是顯而易見的,但對於那些習慣於使用大數據源的人來說這非常重要(見第2章)。有了這樣的資源,大部分工作都是你獲得數據之後完成的,但實驗恰恰相反:大部分工作都應該你收集數據之前完成。在收集數據之前強迫自己仔細思考的最佳方法之一是為您的實驗創建並註冊預分析計劃,其中您基本上描述了您將要進行的分析(Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011; Lin and Green 2016)

我的第二條一般建議是,沒有一個實驗是完美的,因此,你應該考慮設計一系列相互加強的實驗。我聽說這被描述為無敵戰略 ;你應該建造許多具有互補優勢的小型船隻,而不是試圖建造一艘龐大的戰艦。這些多實驗研究在心理學中是常規的,但在其他地方很少見。幸運的是,一些數字實驗的低成本使得多實驗研究更容易。

鑑於一般背景,我現在想提供兩個更具體的設計數字時代實驗的建議:創建零可變成本數據(第4.6.1節)並在您的設計中建立道德(第4.6.2節)。