4.4.1 Baliotasuna
Baliozkotasuna zenbat esperimentu baten emaitzak ondorio orokorrago bat onartzen aipatzen.
Ez esperimentu perfektua da, eta ikertzaile lexiko zabal bat garatu dute daitezkeen arazoak deskribatzeko. Baliozkotasuna neurri zein esperimentu zehatz baten emaitzen ondorio orokorrago batzuk onartzen aipatzen. Gizarte zientzialariek aurkitu dute baliotasun lagungarria zatitu lau mota nagusitan: estatistika-ondorio baliotasuna, barne baliotasuna, eraikitzeko baliotasuna eta kanpo baliotasuna (Shadish, Cook, and Campbell 2001, Ch 2) . kontzeptu horiek menderatzea eskaintzen dizu critiquing eta diseinua eta analisia esperimentu baten hobetzeko checklist mental bat, eta komunikatzeko beste ikertzaile batzuekin laguntzen dizu.
Estatistika Ondorio baliozkotasuna esperimentua azterketa estatistikoa bezala egiten ote zen inguruan. Testuinguruan Schultz et al. (2007) , besteak beste, galdera hauen p-balioak behar bezala kalkulatu ezin ote duten zentroan. Analisi estatistikoa liburu honen esparrutik kanpo dago, baina esan dezaket diseinatzeko eta esperimentuak aztertzeko beharrezko den estatistika-printzipioak ez dute aro digitalean aldatu. Hala ere, esperimentu digital desberdinak datuak ingurumena aukerak estatistika berriak sortu duela (adibidez, makina ikaskuntza metodoak erabiliz tratamendu ondorioak heterogeneotasuna balioesteko (Imai and Ratkovic 2013) ) eta konputazional erronka berriak (adibidez, esperimentu masiboa ere blokeatuz (Higgins, Sävje, and Sekhon 2016) ).
Barne baliotasuna prozedura esperimentalak bezala egin ziren ala ez da inguruan. Esperimentua itzuliz Schultz et al. (2007) , barneko baliotasun buruzko galdera Ausazkotzea du ekimenean zitekeen, tratamenduaren entrega, eta neurketa emaitza. Adibidez, kezkatuta ikerketa laguntzaileak ez du metro elektrikoa irakurri fidagarritasunez izatea. Izan ere, Schultz eta lankideek arazo hau kezkatzen ziren eta birritan irakurri metro lagin bat izan zuten; zorionez, emaitzak funtsean berdinak ziren. Oro har, Schultz eta lankideek 'esperimentu agertzen barneko baliotasun handia dute, baina hau ez da beti horrela; eremu konplexu eta online esperimentuak askotan arazo benetan tratamendu eskubidea eskuineko jendea entregatu eta emaitzak neurtzeko guztiontzat sartu exekutatu. Zorionez, aro digitalaren barneko baliotasun kezka murrizteko lagun dezake errazagoa tratamendu hori entregatu direnek jasotzeko eta parte-hartzaile guztien emaitzak neurtzeko ustezko horiek diseinatuta gisa bermatzeko egiten delako.
Eraiki baliozkotasuna zentroen datuak eta eraikuntzen teoriko arteko partidaren inguruan. 2. atalean adierazten den bezala, eraikuntzen kontzeptu abstraktuak gizarte zientzialariek arrazoia buruz dira. Zoritxarrez, kontzeptu abstraktu horiek ez dute beti argi definizioak eta neurketa dute. Itzulera Schultz et al. (2007) , gizarte-arauak elektrizitatearen erabilera jaistea injunctive erreklamazioa ikertzaileek eskatzen tratamendu hori manipulatzen litzateke "injunctive arau sozialak" (adibidez, aurpegiera bat) eta "elektrizitatearen erabilera" neurtzeko diseinatzeko. esperimentuak analogikoa, ikertzaile askok beren tratamendu propioa diseinatu eta horien emaitzak propioak neurtuta. Planteamendu honek bermatzen du, ahalik eta gehien, esperimentuak dator eraikuntzen abstraktuak aztertzen ari. esperimentuak digital non ikertzaileek enpresa edo gobernuek bazkide tratamenduak emateko eta erabili beti-on datuak sistemak emaitza neurtzeko esperientziak eta eraikuntzen teoriko arteko partida gutxiago estuak izan daiteke. Horrela, eraikuntza baliozkotasuna duten esperimentuak analogikoa baino esperimentuak digitalean kezka handiagoa izateko joera izango espero dut.
Azkenik, kanpoko baliotasuna inguruan esperimentu honen emaitzak beste egoera orokortu litzateke ala zentroak. Itzulera Schultz et al. (2007) , eskatu zitekeen, borondate hori bera ideia-jendearentzako bere energia beren kideekin harreman erabilera eta injunctive arauak (adibidez, aurpegiera bat) -reduce energia-erabilera modu ezberdin batean egiten zen bada ere seinalea buruzko informazioa ezberdin bat? Gehienentzat ondo diseinatutako eta txukunak esperimentuak, kanpoko baliotasuna kezka gogorrena jorratuko dira. Iraganean, kanpoko baliotasuna buruzko eztabaidak horiek ziren maiz jendeak zer gertatuko litzatekeen prozedurak modu ezberdin batean egingo balira, edo beste leku bat, edo pertsona desberdinekin imajinatu nahian gela batean eserita mordo bat besterik ez. Zorionez, aro digitalean esker, ikertzaile den datu-free espekulazio horiek gainditu eta kanpoko baliozkotasuna ebaluatu enpirikoki.
Emaitzekin delako Schultz et al. (2007) izan ziren, beraz, zirraragarria, Opower izeneko enpresa bat Estatu Batuetan utilitateak partnered tratamendua zabalduena zabaldu. Oinarritutako diseinuan Schultz et al. (2007) , Opower sortu pertsonalizatu Home Energy Txostenak duten bi modulu nagusi, inork etxeko bat elektrizitatearen erabilera bere bizilagunak erlatiboa aurpegiera bat erakutsiz eta inork energiaren erabilera murrizten aholkuak ematen izan (4.6 irudia). Ondoren, ikertzaileek elkarlanean, Opower ran ausazko kontrolatua esperimentuak Home Energy Txostenak inpaktua ebaluatzeko. Esperimentu horietan tratamenduak ziren normalean entregatu fisikoki-ohi Nahiz zaharkituta caracol mail bidez-emaitza mundu fisikoan gailu digital (adibidez, power metro) erabiliz neurtu zen. Baizik eta etxe bakoitzean bisitatzen ikerketa laguntzaileak Informazio hau eskuz biltzeko asmoz, Opower esperimentu guztien elkartean egiten ziren botere enpresa ikertzaileek power irakurketak sartzeko ahalbidetzen. Horrela, eremu partzialki digital esperimentu horiek ziren masiboki exekutatu kostu baxuko aldakorreko.
4.6 irudia: jakinarazi Home Energy in Txostenak Allcott (2011) a Social konparazioa modulua eta Ekintza Urratsak modulua bat izan.
Esperimentuak 600.000 etxeen zerbitzatzen 10 erabilgarritasun United States inguruan enpresek parte hartuko dute lehen multzo batean, Allcott (2011) topatu du Home Energy Report apaldu elektrizitate kontsumoa% 1,7. Beste era batera esanda, askoz handiagoa, azterketa gehiago geografikoki desberdinetan emaitzak kualitatiboki emoitzak antzekoak izan ziren Schultz et al. (2007) . Baina, efektua tamaina txikiagoa izan zen: in Schultz et al. (2007) deskriptibo eta injektiboa arauak baldintza (emoticon duena) etxeen murriztu bere elektrizitate kontsumoak% 5 gehiago. Desberdintasun horren arrazoia zehatza ezezaguna da, baina Allcott (2011) especulado unibertsitate batek babestutako ikerketa baten zati gisa eskuz idatzitako emoticon bat jasotzen duten inprimatutako emoticon bat masa ekoiztutako bat txosten baten zati gisa hartzea baino portaeran eragin handiagoa izan liteke konpainia.
Aurrerago, ondorengo ikerketetan, Allcott (2015) gehigarri bat 101 esperimentu bat gehiago 8 milioi familia inplikatuz du. horiek hurrengo 101 esperimentuetan Home Energy Report jarraitu pertsonek euren elektrizitate kontsumoa jaistea eragin, baina ondorioak are txikiagoak ziren. Beherakada horren arrazoia zehatza ez da ezagutzen, baina Allcott (2015) especulado txostena eraginkortasuna agertu denboran zehar izango da gainbeheran zen benetan ari Parte-hartzaile mota desberdinak aplikatuko baita. Zehatzago, ekologista arlo gehiagotan utilitateak gehiago litekeena programa lehenago hartzea eta euren bezero gehiago tratamendua sentikorrena ziren. ingurumen bezeroek gutxiago dituzten utilitateak programa onartu bezala, bere eraginkortasuna agertu zen gainbehera. Horrela, esperimentuak Ausazkotzea bermatzen bezain tratamendu eta kontrol taldearen antzeko dira, ikerketa guneetan Ausazkotzea bermatzen kalkuluen dela bat parte-hartzaileen talde bat orokortu ahal biztanleria orokorrago bat (uste 3. kapitulua laginketa buruzko atzera). Bada ikerketa guneak ez dira ausaz laginak, ondoren orokortzearen-are from a primeran diseinatu eta esperimentu-ahal problematikoa izan.
Guztion artean, 111 esperimentu-10 horiek Allcott (2011) eta 101 in Allcott (2015) -involved etxeen 8,5 milioi inguru guztiak United States osoko. koherentziaz erakusten dute Home Energy Txostenak duten batez besteko elektrizitate-kontsumoa, jatorrizko Schultz aurkikuntzak eta lankideek Kalifornian 300 etxeetatik onartzen duen emaitza bat murrizteko. besterik original emaitza horiek replicating Beyond, jarraitu-up esperimentuak ere erakusten efektuaren tamaina duten tokiaren arabera aldatzen da. esperimentu multzo honek eremu partzialki digital esperimentuak buruzko bi puntu gehiago general ere ilustratzen. Lehenik eta behin, ikertzaileek kanpoko baliotasuna buruz helbidea kezkak enpirikoki denean esperimentuak martxan kostua txikia da gai izango da, eta honen emaitza dagoeneko, beti-on datuak sistema baten arabera neurtzen bada gerta daiteke. Hori dela eta, ikerketa hori beste jokabideak interesgarri eta garrantzitsua dela, jada ari dira miatzen izan behar du, eta, ondoren, diseinatzeko esperimentuak honek existitzen den neurketa azpiegitura gainean iradokitzen du. Bigarren, esperimentu multzo honek gogorarazten digu eremu digital esperimentuak ez dira online; Gero eta nonahi izango dituzten sentsoreak arabera neurtuta eraikitako ingurunean emaitza asko espero dut.
lau baliotasun-estatistiko Ondorio baliozkotasuna, barneko baliotasun motak, eraikitzeko baliozkotasuna, kanpoko baliotasun-ematea mental checklist bat ikertzaileek esperimentu jakin batetik emaitzen ondorio orokorrago bat onartu ala ez ebaluatzeko laguntzeko. analogikoa adin esperimentuak alderatuta, adin digital esperimentuak errazagoa izan beharko luke kanpoko baliotasuna helbidera enpirikoki eta errazagoa izan beharko luke barne baliotasuna bermatzeko. Bestalde, eraikuntza baliotasunaren gai seguruenik izango da adin digital esperimentuak erronka (ez zena, nahiz Opower esperimentuak duen kasuan).
