4.6 Poradenství

Ať už děláte věci sami nebo pracujete s partnerem, rád bych vám nabídl čtyři rady, které jsem našel v mé vlastní práci zvlášť užitečné. První dva rady se vztahují k jakémukoli experimentu, zatímco druhé dva jsou mnohem specifičtější pro experimenty digitálního věku.

Moje první rada, když děláte experiment, je, že byste měli myslet co nejvíce, než se shromáždí nějaká data. To se pravděpodobně zdá být zřejmé pro výzkumné pracovníky zvyklé na běh experimentů, ale je velmi důležité pro ty, kteří jsou zvyklí pracovat s velkými datovými zdroji (viz kapitola 2). S těmito zdroji je většina práce provedena poté, co máte data, ale experimenty jsou opačné: většina práce by měla být provedena před shromažďováním dat. Jedním z nejlepších způsobů, jak přinutit sami sebe pečlivě myslet před shromažďováním údajů, je vytvořit a zaregistrovat plán předběžného rozboru experimentu, ve kterém v podstatě popíšeme analýzu, kterou provedeme (Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011; Lin and Green 2016) .

Moje druhá obecná rada je, že žádný jediný experiment nebude dokonalý a proto byste měli zvážit navržení série experimentů, které se navzájem posilují. Slyšela jsem to jako strategii armády ; spíše než se snažit vybudovat jednu masivní bitevní loď, měli byste stavět mnoho menších lodí s komplementárními silnými stránkami. Tyto druhy multi-experimentálních studií jsou rutinní v psychologii, ale jsou zřídka jinde. Naštěstí nízké náklady na některé digitální experimenty usnadňují studium více experimentů.

Vzhledem k obecnému základu bych nyní rád nabídl dvě rady, které jsou specifické pro navrhování experimentů v oblasti digitálního věku: vytvoření nulových dat o variabilních nákladech (oddíl 4.6.1) a budování etiky ve vašem návrhu (oddíl 4.6.2).