4.6 Doradztwo

Niezależnie od tego, czy robisz to samemu, czy współpracujesz z partnerem, chciałbym zaoferować cztery rady, które uznałem za szczególnie pomocne w mojej pracy. Pierwsze dwa porady odnoszą się do każdego eksperymentu, podczas gdy dwa pozostałe są bardziej specyficzne dla eksperymentów w wieku cyfrowym.

Moja pierwsza porada dotycząca eksperymentu polega na tym, że powinieneś pomyśleć jak najwięcej, zanim jakiekolwiek dane zostaną zebrane. Prawdopodobnie wydaje się to oczywiste dla naukowców przyzwyczajonych do przeprowadzania eksperymentów, ale jest to bardzo ważne dla osób przyzwyczajonych do pracy z dużymi źródłami danych (patrz rozdział 2). W przypadku takich źródeł większość prac jest wykonywana po uzyskaniu danych, ale eksperymenty są odwrotne: większość prac powinna zostać wykonana przed zbieraniem danych. Jednym z najlepszych sposobów, aby zmusić się do starannego przemyślenia przed zbieraniem danych, jest utworzenie i zarejestrowanie planu analizy wstępnej do eksperymentu, w którym zasadniczo opisujesz analizę, którą będziesz przeprowadzać (Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011; Lin and Green 2016) .

Drugą generalną radą jest to, że żaden pojedynczy eksperyment nie będzie doskonały, i dlatego należy rozważyć zaprojektowanie serii eksperymentów, które wzajemnie się wzmacniają. Słyszałem, że to opisana strategia armady ; zamiast próbować zbudować jeden ogromny okręt wojenny, powinieneś budować wiele mniejszych statków o dodatkowych mocach. Tego typu badania z wieloma eksperymentami są rutynowe w psychologii, ale są rzadkie gdzie indziej. Na szczęście niskie koszty niektórych cyfrowych eksperymentów ułatwiają przeprowadzanie wielu eksperymentów.

Biorąc pod uwagę to ogólne tło, chciałbym teraz zaoferować dwie porady, które są bardziej specyficzne dla projektowania eksperymentów związanych z wiekiem cyfrowym: tworzenie zerowych danych o zmiennych kosztach (rozdział 4.6.1) i budowanie etyki w swoim projekcie (sekcja 4.6.2).