4.6 Råd

Enten du gjør ting selv eller jobber med en partner, vil jeg gjerne tilby fire stykker råd som jeg har funnet spesielt nyttig i mitt eget arbeid. De to første rådene gjelder for ethvert eksperiment, mens de andre to er mye mer spesifikke for digitale alderseksperimenter.

Mitt første råd for når du gjør et eksperiment er at du bør tenke så mye som mulig før data er samlet inn. Dette virker tilsynelatende åpenbart for forskere vant til å kjøre eksperimenter, men det er svært viktig for de som er vant til å jobbe med store datakilder (se kapittel 2). Med slike kilder blir det meste av arbeidet gjort etter at du har dataene, men eksperimenter er motsatt: det meste av arbeidet skal gjøres før du samler inn data. En av de beste måtene å tvinge deg til å tenke nøye på før du samler inn data, er å opprette og registrere en forhåndsanalyseplan for eksperimentet der du i utgangspunktet beskriver analysen du vil gjennomføre (Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011; Lin and Green 2016) .

Mitt andre generelle råd er at ingen enkelteksperiment skal være perfekt, og derfor bør du vurdere å designe en rekke eksperimenter som forsterker hverandre. Jeg har hørt dette beskrevet som armada-strategien ; i stedet for å prøve å bygge en massiv slagskip, bør du bygge mange mindre skip med komplementære styrker. Disse typer multi-eksperimentstudier er rutinemessige i psykologi, men de er sjeldne andre steder. Heldigvis gjør lavprisen til noen digitale eksperimenter enklere eksperimenter.

På grunn av den generelle bakgrunnen vil jeg nå tilby to råd som er mer spesifikke for å designe digitale alderseksperimenter: opprett null variabelkostnadsdata (avsnitt 4.6.1) og bygge etikk inn i designet (avsnitt 4.6.2).