4.6 Nasihat

Sama ada anda melakukan sendiri atau bekerja dengan rakan kongsi, saya ingin menawarkan dua keping nasihat yang saya dapati amat membantu dalam kerja-kerja saya sendiri. Pertama, berfikir sebanyak mungkin sebelum apa-apa data telah dikumpulkan. Nasihat ini mungkin kelihatan jelas kepada penyelidik biasa dengan menjalankan eksperimen, tetapi ia adalah sangat penting bagi penyelidik biasa dengan menggunakan sumber data yang besar (lihat Bab 2). Dengan sumber data yang besar kebanyakan kerja yang berlaku selepas anda mempunyai data, tetapi eksperimen yang satu lagi; kebanyakan kerja harus berlaku sebelum anda mengumpul data. Salah satu cara yang terbaik untuk memaksa diri untuk berfikir dengan teliti tentang reka bentuk dan analisis anda adalah untuk mewujudkan dan mendaftar pelan analisis untuk percubaan. Mujurlah, banyak amalan terbaik untuk analisis data eksperimen telah dirasmikan ke dalam garis panduan pelaporan, dan garis panduan ini adalah tempat yang hebat untuk bermula apabila mewujudkan pelan analisis anda (Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011) .

Sekeping kedua nasihat adalah bahawa tidak ada satu eksperimen akan menjadi sempurna, dan kerana itu, anda perlu cuba untuk mereka bentuk satu siri eksperimen yang mengukuhkan antara satu sama lain. Saya pernah mendengar ini digambarkan sebagai strategi armada; daripada cuba untuk membina satu kapal perang besar-besaran, anda mungkin banyak bangunan yang lebih baik dari kapal lebih kecil dengan kekuatan yang saling melengkapi. Ini jenis kajian pelbagai eksperimen adalah rutin dalam bidang psikologi, tetapi mereka jarang berlaku di tempat lain. Nasib baik, kos yang rendah beberapa eksperimen digital menjadikan jenis ini pelbagai eksperimen mengkaji lebih mudah.

Juga, saya ingin menawarkan dua keping nasihat yang kurang biasa sekarang tetapi adalah sangat penting untuk mereka bentuk eksperimen era digital: buat sifar data kos marginal dan membina etika ke dalam reka bentuk anda.