4.6 Savjeti

Bilo da radite stvari sami ili radite s partnerom, želio bih vam ponuditi četiri savjeta koji sam osobno pomogao u svom radu. Prva dva dijela savjeta primjenjuju se na svaki eksperiment, dok su druga dva mnogo specifičnija za eksperimente u digitalnom dobu.

Moj prvi savjet za kada radite eksperiment je da trebate misliti što je više moguće prije prikupljanja podataka. To se vjerojatno čini očiglednim istraživačima naviknutima na vođenje eksperimenata, ali je vrlo važno za one koji su navikli na rad s velikim izvorima podataka (vidi poglavlje 2). S takvim izvorima većina se posla obavlja nakon što dobijete podatke, ali eksperimenti su suprotni: većina posla treba obaviti prije sakupljanja podataka. Jedan od najboljih načina da se prisili da pažljivo razmislite prije nego što prikupite podatke jest stvoriti i registrirati plan pred-analize za svoj eksperiment u kojemu u osnovi opisujete analizu koju provodite (Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011; Lin and Green 2016) .

Moj drugi opći savjet je da niti jedan eksperiment neće biti savršen, a zbog toga biste trebali razmotriti izradu niza eksperimenata koji se međusobno učvršćuju. Čuo sam da je to opisano kao strategija armade ; Umjesto da pokušavate izgraditi masivno jedrenje, trebali biste izgraditi mnogo manjih brodova s ​​komplementarnim snagama. Ove vrste studija s više eksperimenata su rutinske u psihologiji, ali su rijetke negdje drugdje. Srećom, niske cijene nekih digitalnih eksperimenata olakšavaju studije s više eksperimenata.

S obzirom na opću pozadinu, sada bih želio ponuditi dva savjeta koji su specifičniji za dizajniranje eksperimenata digitalnog doba: izraditi nula varijabilnih podataka o troškovima (odjeljak 4.6.1) i izgraditi etiku u svoj dizajn (odjeljak 4.6.2).