4.6 Рекомендації

Незалежно від того, чи ви робите це самостійно або працюєте з партнером, я хотів би запропонувати чотири поради, які я виявив особливо корисним у своїй роботі. Перші два поради стосуються будь-якого експерименту, а другий - набагато більш специфічним для експериментів у цифровому віці.

Моя перша порада, коли ви робите експеримент, полягає в тому, що ви повинні думати якомога більше перед тим, як збирати будь-які дані. Це, мабуть, очевидно для дослідників, звичних до експериментів, але це дуже важливо для тих, хто звик працювати з великими джерелами даних (див. Главу 2). За таких джерел більша частина роботи виконується після того, як у вас є дані, але експерименти - навпаки: більша частина роботи повинна бути зроблена, перш ніж збирати дані. Один із найкращих способів змусити вас уважно задуматися, перш ніж збирати дані, - створити та зареєструвати план попереднього аналізу для вашого експерименту, в якому ви в основному опишете аналіз, який ви будете проводити (Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011; Lin and Green 2016) .

Другий розділ загальної поради полягає в тому, що жоден експеримент не буде досконалим, і тому вам слід розглянути можливість розробки серії експериментів, які підсилюють один одного. Я чув, що це описано як стратегія армади ; замість того, щоб намагатися побудувати один масивний броненосець, ви повинні побудувати багато невеликих кораблів з додатковими сильними сторонами. Ці різновиди багатоексперсних досліджень є звичайними в психології, але вони рідкісні в інших місцях. На щастя, низька вартість деяких цифрових експериментів полегшує проведення експериментів на декількох етапах.

З огляду на загальний підтекст, тепер я хотів би запропонувати дві поради, які більш специфічні для розробки експериментів у цифрову епоху: створювати нульові дані про вартість змін (розділ 4.6.1) та побудувати етику у вашому проекті (розділ 4.6.2).