建立自己的實驗可能是昂貴的,但它將使你創建你想要的實驗。
除了在現有環境之上疊加實驗外,您還可以構建自己的實驗。這種方法的主要優點是控制;如果您正在構建實驗,則可以創建所需的環境和治療。這些定制的實驗環境可以創造機會來測試在自然環境中無法測試的理論。構建自己的實驗的主要缺點是它可能很昂貴,並且您能夠創建的環境可能不具有自然發生的系統的真實性。建立自己的實驗的研究人員也必須有招募參與者的策略。在現有系統中工作時,研究人員基本上將實驗帶給他們的參與者。但是,當研究人員建立自己的實驗時,他們需要讓參與者參與其中。幸運的是,Amazon Mechanical Turk(MTurk)等服務可以為研究人員提供一種方便的方式讓參與者參與他們的實驗。
一個例子說明了測試抽象理論的定制環境的優點,是Gregory Huber,Seth Hill和Gabriel Lenz (2012)的數字實驗室實驗。該實驗探討了民主治理運作可能存在的實際局限性。早期對實際選舉的非實驗性研究表明,選民無法準確評估現任政治家的表現。特別是,選民似乎遭受三種偏見:(1)他們關注的是近期而非累積的表現; (2)他們可以通過修辭,框架和營銷來操縱; (3)他們可能受到與現有表現無關的事件的影響,例如當地運動隊的成功和天氣。然而,在這些早期的研究中,很難將這些因素中的任何一個與真實,混亂的選舉中發生的所有其他因素隔離開來。因此,Huber及其同事創建了一個高度簡化的投票環境,以便分離,然後通過實驗研究這三種可能的偏差。
正如我在下面描述的實驗設置,它聽起來非常人為,但請記住,現實主義不是實驗室式實驗的目標。相反,我們的目標是明確地隔離您正在嘗試研究的過程,而這種緊密隔離有時在更現實的研究中是不可能的(Falk and Heckman 2009) 。此外,在這種特殊情況下,研究人員認為,如果選民無法在這種高度簡化的環境中有效地評估表現,那麼他們就無法在更現實,更複雜的環境中做到這一點。
Huber及其同事使用MTurk招募參與者。一旦參與者提供了知情同意並通過了一個簡短的測試,她被告知她正在參加一個32輪比賽,以賺取可以轉換成真錢的代幣。在遊戲開始時,每個參與者都被告知她已經被分配了一個“分配器”,每輪都會給她免費的代幣,而且有些分配器比其他分配器更慷慨。此外,每個參與者還被告知她有機會在16輪比賽后保留她的分配器或被分配新的分配器。鑑於您對Huber及其同事的研究目標的了解,您可以看到分配器代表一個政府,這個選擇代表一個選舉,但參與者並不了解該研究的總體目標。總的來說,Huber及其同事招募了大約4,000名參與者,他們花了大約1.25美元完成了大約8分鐘的任務。
回想一下,早期研究的一個發現是選民獎勵和懲罰明顯無法控制的結果,例如當地運動隊的成功和天氣。為了評估參與者的投票決策是否會受到其環境中純隨機事件的影響,Huber及其同事在他們的實驗系統中添加了一個樂透。在第8輪或第16輪(即,在更換分配器的機會之前),參與者被隨機地放置在樂透中,其中一些贏得5,000分,一些贏得0分,一些丟失5,000分。這個彩票旨在模仿獨立於政治家表現的好消息或壞消息。儘管參與者被明確告知彩票與其分配者的表現無關,但彩票的結果仍然影響了參與者的決定。從彩票中受益的參與者更有可能保留他們的分配器,並且當更換決定之前的第16輪彩票發生時,這種效果更強 - 比第8輪發生時(圖4.15)。這些結果以及論文中其他幾個實驗的結果使Huber及其同事得出結論,即使在簡化的環境中,選民也很難做出明智的決定,這一結果影響了未來關於選民決策的研究(Healy and Malhotra 2013) 。 Huber及其同事的實驗表明,MTurk可用於招募參與者進行實驗室式實驗,以精確測試非常具體的理論。它還顯示了構建自己的實驗環境的價值:很難想像這些相同的過程如何在任何其他環境中如此乾淨地隔離。
除了建立類似實驗室的實驗外,研究人員還可以構建更像田野的實驗。例如, Centola (2010)建立了一個數字現場實驗來研究社會網絡結構對行為傳播的影響。他的研究問題要求他觀察同樣的行為,這些行為在具有不同社交網絡結構的人群中傳播,但在其他方面難以區分。唯一的方法是使用定制的定制實驗。在這種情況下,Centola建立了一個基於網絡的健康社區。
Centola通過健康網站上的廣告招募了大約1,500名參與者。當參與者到達在線社區 - 被稱為健康生活方式網絡 - 他們提供了知情同意,然後被分配了“健康夥伴”。由於Centola分配這些健康夥伴的方式,他能夠將不同的社交網絡結構編織在一起不同的群體。一些組構建為具有隨機網絡(其中每個人都可能連接),而其他組則構建為具有群集網絡(其中連接更加局部密集)。然後,Centola在每個網絡中引入了一種新行為:有機會註冊一個包含額外健康信息的新網站。每當有人註冊這個新網站時,她所有的健康夥伴都會收到一封電子郵件,宣布這種行為。 Centola發現這種註冊新網站的行為 - 在群集網絡中的傳播速度比在隨機網絡中傳播得更快更快,這一發現與現有的一些理論相悖。
總的來說,建立自己的實驗可以讓您獲得更多控制權;它使您能夠構建最佳環境,以隔離您想要學習的內容。很難想像我剛剛描述的兩個實驗是如何在已有的環境中進行的。此外,構建您自己的系統會減少在現有系統中進行實驗的道德問題。但是,當您構建自己的實驗時,會遇到實驗室實驗中遇到的許多問題:招募參與者和對現實主義的擔憂。最後的缺點是建立自己的實驗可能既昂貴又耗時,但正如這些例子所示,實驗的範圍可以從相對簡單的環境(如Huber, Hill, and Lenz (2012)的投票研究Huber, Hill, and Lenz (2012) )開始。相對複雜的環境(如Centola (2010)的網絡和傳染研究Centola (2010) )。