4.6 Saran

Apakah Anda melakukan hal-hal sendiri atau bekerja dengan pasangan, saya ingin menawarkan empat saran yang menurut saya sangat membantu dalam pekerjaan saya sendiri. Dua saran pertama berlaku untuk eksperimen apa pun, sedangkan dua yang kedua jauh lebih spesifik untuk eksperimen era digital.

Saran pertama saya ketika Anda melakukan eksperimen adalah Anda harus berpikir sebanyak mungkin sebelum data dikumpulkan. Ini mungkin tampak jelas bagi para peneliti yang terbiasa menjalankan eksperimen, tetapi sangat penting bagi mereka yang terbiasa bekerja dengan sumber data besar (lihat bab 2). Dengan sumber-sumber seperti itu sebagian besar pekerjaan dilakukan setelah Anda memiliki data, tetapi eksperimen adalah kebalikannya: sebagian besar pekerjaan harus dilakukan sebelum Anda mengumpulkan data. Salah satu cara terbaik untuk memaksa diri Anda untuk berpikir dengan hati-hati sebelum mengumpulkan data adalah dengan membuat dan mendaftarkan rencana pra-analisis untuk eksperimen Anda di mana pada dasarnya Anda menggambarkan analisis yang akan Anda lakukan (Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011; Lin and Green 2016) .

Saran umum saya yang kedua adalah bahwa tidak ada satu eksperimen pun yang akan sempurna, dan karena itu, Anda harus mempertimbangkan untuk merancang serangkaian eksperimen yang saling menguatkan. Saya pernah mendengar ini digambarkan sebagai strategi armada ; daripada mencoba membangun satu kapal perang besar, Anda harus membangun banyak kapal yang lebih kecil dengan kekuatan yang saling melengkapi. Jenis-jenis studi multi-eksperimen ini rutin dalam psikologi, tetapi jarang terjadi di tempat lain. Untungnya, biaya rendah dari beberapa eksperimen digital membuat penelitian multi-eksperimen menjadi lebih mudah.

Dengan latar belakang umum, saya sekarang ingin menawarkan dua saran yang lebih spesifik untuk merancang eksperimen usia digital: membuat data biaya variabel nol (bagian 4.6.1) dan membangun etika ke dalam desain Anda (bagian 4.6.2).