4.6 Savjeti

Bilo da radite stvari sami ili radite sa partnerom, želeo bih da ponudim četiri saveta koje sam pronašao naročito korisne u svom radu. Prva dva saveta odnose se na bilo koji eksperiment, dok su druge dve mnogo specifičnije za eksperimente digitalnog doba.

Moj prvi savet za vreme eksperimenta je da trebate razmišljati koliko god je moguće prije nego što su prikupljeni podaci. Ovo se verovatno čini očiglednim istraživačima koji su navikli da pokreću eksperimente, ali je veoma važno za one koji su navikli da rade sa velikim izvorima podataka (vidi poglavlje 2). Sa takvim izvorima većina posla se obavlja nakon što imate podatke, ali eksperimenti su suprotni: većina posla treba uraditi pre nego što prikupite podatke. Jedan od najboljih načina da se prisilite da pažljivo razmislite pre nego što prikupite podatke je da kreirate i registrujete plan za pred-analizu vašeg eksperimenta u kojem u osnovi opisujete analizu koju ćete voditi (Schulz et al. 2010; Gerber et al. 2014; Simmons, Nelson, and Simonsohn 2011; Lin and Green 2016) .

Moj drugi komad opšteg saveta je da nijedan eksperiment neće biti savršen i zbog toga treba razmišljati o dizajniranju serije eksperimenata koji se međusobno podupiru. Čuo sam ovo opisano kao strategija Armada ; umesto da pokušavate izgraditi jedan veliki bojni brod, trebalo bi da izgradite mnogo manjih brodova sa komplementarnim snagama. Ovakve studije sa više eksperimenata su rutine u psihologiji, ali su retke na drugim mestima. Srećom, niski troškovi nekih digitalnih eksperimenata olakšavaju studije sa više eksperimenata.

S obzirom na to uopšteno, sada bih želeo da ponudim dva saveta koji su specifičniji za dizajn eksperimenata digitalnog doba: kreirajte nulte podatke o varijabilnim troškovima (odeljak 4.6.1) i napravite etiku u vašem dizajnu (odeljak 4.6.2).