4.6 Consigli

Sia che tu stia facendo qualcosa tu stesso o lavori con un partner, vorrei offrire quattro consigli che ho trovato particolarmente utili nel mio lavoro. I primi due consigli si applicano a qualsiasi esperimento, mentre i secondi due sono molto più specifici per gli esperimenti sull'era digitale.

Il mio primo consiglio per quando stai facendo un esperimento è che dovresti pensare il più possibile prima che i dati siano stati raccolti. Questo probabilmente sembra ovvio per i ricercatori abituati a eseguire esperimenti, ma è molto importante per chi è abituato a lavorare con grandi fonti di dati (vedere il capitolo 2). Con tali fonti la maggior parte del lavoro viene eseguita dopo aver ricevuto i dati, ma gli esperimenti sono l'opposto: la maggior parte del lavoro dovrebbe essere fatto prima di raccogliere i dati. Uno dei modi migliori per costringersi a riflettere attentamente prima di raccogliere i dati è quello di creare e registrare un piano di pre-analisi per il proprio esperimento in cui si descrive sostanzialmente l'analisi che si condurrà (Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011; Lin and Green 2016) .

Il mio secondo consiglio generale è che nessun singolo esperimento sarà perfetto e, per questo motivo, dovresti prendere in considerazione la progettazione di una serie di esperimenti che si rafforzano a vicenda. Ho sentito questo descritto come la strategia di armata ; piuttosto che cercare di costruire una massiccia corazzata, dovresti costruire molte navi più piccole con punti di forza complementari. Questi tipi di studi multi-esperimento sono di routine in psicologia, ma sono rari altrove. Fortunatamente, il basso costo di alcuni esperimenti digitali facilita gli studi multi-esperimento.

Dato questo background generale, vorrei ora offrire due consigli che sono più specifici per progettare esperimenti sull'era digitale: creare zero dati sui costi variabili (sezione 4.6.1) e costruire l'etica nella progettazione (sezione 4.6.2).