4.6 Advies

Of je nu zelf dingen aan het doen bent of met een partner werkt, ik wil vier adviesadviezen bieden die ik bijzonder nuttig heb gevonden in mijn eigen werk. De eerste twee adviezen gelden voor elk experiment, terwijl de tweede twee veel specifieker zijn voor experimenten met digitale leeftijden.

Mijn eerste advies voor wanneer u een experiment uitvoert, is dat u zoveel mogelijk moet nadenken voordat er gegevens worden verzameld. Dit lijkt waarschijnlijk voor de hand te liggen voor onderzoekers die gewend zijn aan experimenten, maar het is erg belangrijk voor diegenen die gewend zijn om met big data-bronnen te werken (zie hoofdstuk 2). Met dergelijke bronnen wordt het meeste werk gedaan nadat je de gegevens hebt, maar experimenten zijn het tegenovergestelde: het grootste deel van het werk moet worden gedaan voordat je gegevens verzamelt. Een van de beste manieren om jezelf te dwingen goed na te denken voordat je gegevens verzamelt, is door een analyseplan voor je experiment te maken en te registreren waarin je in principe de analyse beschrijft die je gaat uitvoeren (Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011; Lin and Green 2016) .

Mijn tweede algemene advies is dat geen enkel experiment perfect zal zijn, en daarom zou je moeten overwegen om een ​​reeks experimenten te ontwerpen die elkaar versterken. Ik heb dit beschreven als de armadastrategie ; in plaats van te proberen een enorm slagschip te bouwen, zou je veel kleinere schepen moeten bouwen met complementaire sterktes. Dit soort multi-experimentstudies zijn routine in de psychologie, maar ze zijn elders zeldzaam. Gelukkig maken de lage kosten van sommige digitale experimenten multi-experimentstudies eenvoudiger.

Gezien deze algemene achtergrond, wil ik nu twee adviesadviezen aanbieden die meer specifiek zijn voor het ontwerpen van experimenten met digitale leeftijden: creëer nul variabele kostengegevens (paragraaf 4.6.1) en bouw ethiek op in uw ontwerp (paragraaf 4.6.2).