4.6 Rådgivning

Uanset om du selv gør ting eller arbejder med en partner, vil jeg gerne byde på fire råd, som jeg har fundet særligt nyttige i mit eget arbejde. De to første råd er gældende for ethvert eksperiment, mens de andet to er meget mere specifikke for digitale alderseksperimenter.

Mit første råd til, at når du laver et eksperiment, er det at du bør tænke så meget som muligt, før data er indsamlet. Det synes nok at være indlysende for forskere vant til at køre eksperimenter, men det er meget vigtigt for dem, der er vant til at arbejde med store datakilder (se kapitel 2). Med sådanne kilder sker det meste af arbejdet, efter at du har dataene, men eksperimenter er det modsatte: Det meste af arbejdet skal udføres, før du indsamler data. En af de bedste måder at tvinge dig til at tænke grundigt på, før du indsamler data, er at oprette og registrere en foranalyseplan for dit eksperiment, hvor du grundlæggende beskriver den analyse, du vil udføre (Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011; Lin and Green 2016) .

Mit andet stykke generelle råd er, at intet enkelt eksperiment skal være perfekt, og derfor bør du overveje at designe en række eksperimenter, der forstærker hinanden. Jeg har hørt dette beskrevet som armada-strategien ; snarere end at forsøge at bygge et massivt slagskib, bør du bygge mange mindre skibe med komplementære styrker. Disse slags multi-eksperiment studier er rutine i psykologi, men de er sjældne andre steder. Heldigvis gør de lave omkostninger ved nogle digitale eksperimenter lettere forsøg med flere eksperimenter.

I lyset af den generelle baggrund vil jeg nu gerne byde på to råd, der er mere specifikke for at designe digitale alderseksperimenter: lav nul variable data (afsnit 4.6.1) og bygg etik i dit design (afsnit 4.6.2).