4.4.1 Validità

Validità si rifirisci ô quantu dê risurtati di nu spirimentu pruponnu na cunchiusioni cchiù ginirali.

No spirimentu hè perfetta, è circadori ani sviluppatu nu granni epistulariu vucabbulariu pi discrìviri pussibule prublemi. Validità si rifirisci a lu secunnu a quali u risultatu di un particulare spirimentu accettanu certi facennu cchiù ginirali. Scinziati suciali aghju trovu lu Corsets di sparte a validità in quattru tipi principali: validità cunchiusioni di statìstiche, validità interna, custruiscia validità, è validità esterni (Shadish, Cook, and Campbell 2001, Ch 2) . Shopping in sti cuncetti vi derà voi un checklist mintali di critiquing è migliurà u generu è analisi di nu spirimentu, e si vi ferà cumunicà cù altre circadori.

Statìstica validità cunchiusioni centres attornu diversa p'agghicari 'n' analisi di statìstiche di lu spirimentu di statu fattu cum'ellu ci vole. In u cuntestu di Schultz et al. (2007) tali quistioni putissi centru nantu à s'ellu si labburata cum'ellu ci vole i so sans-valori. Anàlisi statìstica è aldilà di u so circulu di stu libru, ma ti pozzu diri ca li principati di statìstiche vulsutu à cuncepisce è analizà u spirimenti nun hannu canciatu puru a l 'etati numerica. A ogni modu, li diffirenti ambienti dati in usu numerica ùn creà novi sbocchi prufessiunali di statìstiche (per esempiu, aduprendu i metudi di amparera di machine à cuntà heterogeneity di effetti malu (Imai and Ratkovic 2013) ) e nova e sfide programming (per esempiu, mpidennu in massiccia statua di sperienze (Higgins, Sävje, and Sekhon 2016) ).

Validità interna centres attornu agghicaru ô sicilianu e prucedure spirimintali ca si svorgi l 'uperazione. U ritornu à u sperimentu di Schultz et al. (2007) , li custioni ligati validità interna pudia centre intornu à u randomization, cunsegna di lu malu, e la misurazzioni di outcomes. Per esempiu, ti putissi èssiri prioccupati ca lu assistenti di ricerca ùn leghje lu metri ilettricu reliably. In fatti, Schultz e culleghi eranu quarchi ariddu 'stu problema è ch'elli avianu un campionu di metri di leghje duie volte; 'furtuna, i risultati eranu pè u più listessi. In ginirali, Schultz e spirimentu culleghi 'apparisce à avè altu validità interna, ma chistu nun è sempri lu casu; campu cumplessa e sperienze nanu à spessu iù prublemi intreccia sceltu u trattamentu dirittu à u pòpulu, dirittu e misurari la outcomes per ognunu. Par furtuna, l'età, digitale, putiti ammigghiuràrilu muti cuncerna su validità internu per via ch'ellu si tenga u più fàciule à ricunnoscia chì u trattamentu hè trasmessa comu vulintà di fà quelli chì sò pensà à a avìri, è à misura outcomes per tutti i participanti.

Custruiri li centri di validità attornu a l 'incontru tra li dati, è u constructs teorichi. Comu viditi lu discursu a Chapter 2, constructs sunnu li cuncetti astratti ca scinziati suciali raghjoni circa. Per disgrazia, sti cuncetti astratti nun sempri hannu Stories chjaru è falza. U ritornu à Schultz et al. (2007) , la scusa chi injunctive normi suciali pò calà i usu energia elettrica, hè ubligatoriu circadori à cuncepisce u trattamentu chì diventerà manighjà "normi suciali injunctive" (per esempiu, una emoticon), è à misura "usu energia elettrica". Nta tanti spirimenti simulate, parechji circadori creatu a so parsona è misuratu e so outcomes. Stu accostu cura chì, quant'è pussìbule, i sperimenti currisponde à u constructs astrattu esse studiatu. Nta tanti spirimenti digitale, unni circadori partenariatu cù impresi, o di cuverni di cunsignari a parsona è aduprà sempre-supra li sistemi di dati di a misura outcomes, l 'incontru tra lu spirimentu di e lu constructs teorichi pò esse menu SS. Cusì, I m'aspettu ca custruiri validità vi tendini à essa na priaccupazzioni ca nun vulìannu in spirimenti digitale cà spirimenti simulate.

Infine, validità esterni centres attornu dubbî si lu risultatu di stu tentativu putìssiru generale à àutri situazzioni. U ritornu à Schultz et al. (2007) , unu pudia dumandà, sarà stu stissu pòpulu 'idea-furnisce infurmazioni di i so utilizzu energia, in rapportu à i so pari, è un signali di normi injunctive (per esempiu, una emoticon) Lingua latina energia -reduce siddu lu statu fattu in un modu sfarente in un paràmetru sfarente? Per a più bonu disignati-e sperienze bè lanciatu-, cuncerna su validità esterni sò i più duru à affruntà. In u passatu, sti dibattiti su validità esterni èranu friquenti ghjustu una calata di pòpulu, seduta, in una stanza cunvince di creda ciò chì serebbe accadutu s'ellu l 'antra strada fôru fatti nta na manera diffirenti, o in un locu sfarente, o cu diffirenti genti. Par furtuna, l'età, digitale parmetti circadori a terra move cavallieri sti spiculazzioni senza-di dati, è una griglia di validità esterni empirically.

Propiu picchì lu risultati da Schultz et al. (2007) eranu tantu passiunanti, 'na cumpagnia, chjamatu Opower partinarii di u utilities in i Stati Uniti d'America à realizà u trattamentu cchiù largamenti. Fundate nantu à a cuncezzione di Schultz et al. (2007) , Opower creoni persunalizà Home Rivista Energy chì avia dui moduli principale, quellu chì annuncia l 'utilizzu energia elettrica di parenti d'una casa à i so vicini cu nu emoticon e unu pensa punte di niuri di lu Lingua latina, energia (Figura 4.6). Allora, in cullaburazione cù circadori, Opower corse randomized spirimenti cuntrullava a griglia di u pesu di u Rivista Home Energy. Puru siddu li parsona à sse sperienze foru tipicamenti trasmessa fisicamenti-di solitu à traversu vechji antiquato, babbaluci, scrivite-u risultatu fù misuratu cù i dispusitivi digitale in lu mondu fisicu (per esempiu, metri putenza). Chiu tostu di racoglia manually di què cun assistenti a ricerca di visità ogni casa, li spirimenti Opower eranu tutti fattu in cullaburazione cù impresi chì putenza di attivà i circadori à accede à u simana putenza. Cusì, sti tanti spirimenti campu parzialmenti digitale foru scurri à una scala di colpu a bassu costu variàbbili.

Figura 4.6: U Rivista Home Energy in Allcott (2011) era nu paragùni Module Suciali è un Module Passi Action.

In un primu gruppu di sperienze nove 600.000 famìglie sirvutu 10 cumpagnii utilitati intornu à i Stati Uniti d'America, Allcott (2011) trovu u Primu, u situ Energie si sciogghi a cunsumazione elettrica di 1.7%. Nta àutri paroli, i risultati da lu cchiù grossu, studiu di più giugraficamenti diversi erani qualitatively, sìmili a lu risultati da Schultz et al. (2007) . Ma, u pesu effettu era urigginariu: in Schultz et al. (2007) la famìglie in i cundizioni di pausi e injective normi (l 'unu cu l' emoticon) calà i so utilizzu energia elettrica di 5%. Lu mutivu pricisu pi cui sta sfarenza hè scunnisciuta, ma Allcott (2011) pinsa ca aviri arricivutu na emoticon handwritten cum'è parti di un studiu spunsorizati da una università putissi aviri n'effettu cchiù granni supra lu cumpurtamentu ca aviri arricivutu na emoticon stampatu comu parti di un raportu di massa pruduttu da una cumpagnia lu putiri.

In seguita, in allungamentu di ricerca, Allcott (2015) hà dettu nantu à una vèndita privata 101 sperienze nantu à una vèndita privata 8 miliuna di famìglie. In sti paisoli 101 sperienze u Primu, u situ Energy cuntinuau a mìntiri a ghjente à calà a so cunsumazione elettrica, ma l 'effetti foru puru urigginariu. Lu mutivu pricisu pi cui sta calata ùn hè micca cunnisciutu, ma Allcott (2015) pinsa chì li jammi di u bilanciu fattu vede à esse fine di più tempu per via ch'ella era primurosu di esse appiicata à diffirenti tipi di i participanti. Più pricisamenti, utilities in lochi più Эколог 'eranu più atta cù u prugramma nanzu è i so clienti eranu più rispunzabbili à u trattamentu. As utilities cù i clienti di menu ambiente aduttatu u prugramma, u so jammi ghjugna à calà. Cusì, cum'è randomization in spirimenti cura ca lu gruppu cure è u cuntrollu sò listesse, randomization in i siti di ricerca cura ca lu estimates pò esse generalized da un gruppu di i participanti à una pupulazione di più generale, (pari daretu à Chapter 3 circa sediment). S'è i siti di ricerca ùn sò micca sampled accasu, tandu generalisation-anchi da un armunizazioni pruggittatu e cunnucieru spirimentu di-ponu esse prubbrimàticu.

Insemi, sti 111 sperienze-10 in Allcott (2011) e 101 in Allcott (2015) -involved circa 8,5 miliuna di famìglie da tutti nantu à i Stati Uniti. Ci mostranu esigenza chi Rivista Home Energy accurtà u so cunsumazione di mezana À prupositu, un risurtatu ca accumpagna la scuperti urighjinariu di Schultz e culleghi di 300 casi in California. Vangelo, ghjustu riplicari sti risultati urigginali, li spirimenti seguità-up vede dinù chì u pesu di l 'effettu varieghja da u locu. Stu gruppu di tanti spirimenti comu videmma dui di più di punti ginirali su tanti spirimenti campu n parti, numerica. Prima, circadori sarà capaci di empirically cuncerna indirizzu su validità esterni quandu u costu di curriri sperimenti è bassu, e chistu pò accade se u risultatu hè digià essa misurata da un sistema sempre-in u dati. Pirciò, si fà capiri ca a ricerca deve esse nant'à u ochju-out ppi àutri cumpurtamenti ntirissanti e mpurtanti chi sò dighjà esse ricevute, è poi e so sperienze nantu à cima di stu BTP misurari esistenti. Siconda, st'inseme di sperienze nni turnà ca tanti spirimenti campu numerica ùn sò ghjustu nanu; majurmenti I m'aspettu ca si sarà gghiè cu tanti outcomes misurata da sensors in u spaziu custruitu.

Li quattru tippi di validità-di statìstiche validità cunchiùdiri, validità interna, custruiscia validità, validità-derà esterni un checklist mentale per aiutà circadori griglia dubbî si lu risultatu di na particulari spirimentu pruponnu na cunchiusioni cchiù ginirali. Paragunatu à sperienze età simulate, à sperienze età digitale, si deve esse più fàciule à affruntà validità esterni empirically è si duvia esse più fàciule à cuntrullà a validità internu. Nantu à u cuntrariu, resultati di validità custruiri vi prubbabbirmenti esse più simule in spirimenti età, digitale (nustanti ca nun era lu casu di i sperimenti Opower).