4.4.1 Baliotasuna
Baliozkotasuna zenbat esperimentu baten emaitzak ondorio orokorrago bat onartzen aipatzen.
Esperimentua ez da perfektua, eta ikertzaileek arazo handiak deskribatzeko hiztegi zabala garatu dute. Baliozkotasuna esperimentu partikular baten emaitzak onartzen duen neurrian datza. Gizarte zientzialariek lau mota nagusitan baliozkotasuna aurkitu dute: estatistikaren ondoriozko baliozkotasuna, barneko baliozkotasuna, eraikuntza baliozkotasuna eta kanpoko baliozkotasuna (Shadish, Cook, and Campbell 2001, chap. 2) . Kontzeptu horiek masterizatzeko esperimentuaren diseinua eta azterketa kritikatzeko eta hobetzeko esperimentazio mentala emango dizu eta beste ikertzaile batzuekin komunikatuko zaitu.
Ekonomiaren baliozkotasun estatistikoa esperimentuaren estatistika azterketa egin den ala ez. Schultz et al. (2007) Testuinguruan Schultz et al. (2007) , baliteke galdera hori bere \(p\) balioak ondo kalkulatzea. Estatistika-printzipioak liburu honen esparrutik kanpo dauden esperimentuak diseinatu eta aztertu behar dituzte, baina ez dute bereziki digitalak izan. Aldaketak, ordea, esperimentu digitalen datu-inguruak aukera berriak sortu ditu, hala nola, makina ikasketen metodoak erabiliz tratamenduaren ondorioak heterogeneotasuna kalkulatzeko (Imai and Ratkovic 2013) .
Prozedura esperimentalak behar bezala burutzen diren barneko baliozkotze zentroak. Schultz et al. (2007) Esperimentura itzultzeko Schultz et al. (2007) , barneko baliagarritasunari buruzko galderei esker, ausentzia, tratamendua eta emaitza neurtzeko gai izan litezke. Esate baterako, ikerketa-laguntzaileek ez zuten metro elektrikorik irakurtzen. Izan ere, Schultzek eta lankideek arazo honi buruz kezkatuta zeuden, eta bi metroko irakurketa lagina zuten; Zorionez, emaitzak funtsean berdinak ziren. Oro har, Schultzek eta lankideen esperimentuak barneko balio handia dute, baina hori ez da beti gertatzen: eremu konplexua eta lineako esperimentuak sarritan arazo egokiak ematen dizkie pertsona egokiei tratamendu egokia emateko eta guztiontzat emaitzak neurtzeko. Zorionez, adin digitalak barneko baliagarritasunari buruzko kezkak murrizten laguntzen du, errazagoa baita tratamendua jasotzea espero dutenei eta parte-hartzaile guztiei zuzendutako emaitzak neurtzeko.
Datuen eta eraikuntza teorikoen arteko loturaren inguruko baliozkotasun zentroak eraiki. 2. kapituluan eztabaidatu bezala, eraikuntzak kontzeptu abstraktuak dira zientzialariek zergatik duten. Zoritxarrez, kontzeptu abstraktu horiek ez dute beti definizio eta neurri argirik. Itzuli Schultz et al. (2007) , gizartearen normalizazio arauek elektrizitatearen erabilera murriztu dezaketen erreklamazioa eskatzen duten ikertzaileak "normalizazio arau judizialak" (adibidez, aurpegiera bat) eta "elektrizitatearen erabilera" neurtzeko tratamendua diseinatzea eskatzen du. Esperimentu analogikoetan, ikertzaile askok beren tratamenduak diseinatu eta beren emaitzak neurtu zituzten. Hurbilketa honek ziurtatzen du, ahal den neurrian, esperimentuak bat datozen eraikuntza abstraktuak bat datozela. Esperimentazio digitaletan, ikertzaileek enpresekin edo gobernuekin elkarlanean dihardute tratamenduak emateko eta beti emaitza onak neurtzeko datuak erabiltzen dituzten sistemetan, esperimentuaren eta eraikuntza teorikoen arteko bateragarritasuna gutxiago estua izan daiteke. Horrela, espero dut konstrukzioaren baliozkotasuna esperientzia digitalean esperimentu digitaletan baino handiagoa dela.
Azkenik, kanpoko baliozkotasuna esperimentu honen emaitzak beste egoeretara orokortzera bideratzen diren. Itzuli Schultz et al. (2007) , ideia bera izan liteke galdetzea ideia bera ematen duten pertsonei beren energia-erabilerari buruzko informazioa euren kideekin harremana dutenean eta normalizazio aginduen seinale bat (adibidez, aurpegiera), energia-erabilera murriztuko lukete beste era batera egin ezean ezarpen desberdinetan. Benetan diseinaturiko eta ondo zuzendutako esperimentuen kasuan kanpoko baliozkotasunari buruzko kezkak zailak dira. Iraganean kanpoko baliozkotasunari buruzko eztabaidak maiz jendea biltzen zen gela batean eserita, zer gertatuko zen iruditu zitzaien gertatu zen beste prozeduren bat egin zen edo beste leku batean edo parte hartzaile desberdinekin egin bazen ere . Zorionez, adin digitalak aukera ematen die ikertzaileei datu-doako espekulazio horiek gainditzeko eta kanpoko baliozkotasuna ebaluatzeko enpirikoki.
Schultz et al. (2007) Emaitzak Schultz et al. (2007) zirraragarria izan zen, Estatu Batuetako utilitateekin partekatutako Opower izeneko konpainia bat tratamendua zabalduago hedatzeko. Schultz et al. (2007) diseinuaren arabera Schultz et al. (2007) , Opower-ek bi modulu nagusi zituen etxeko energia-txostenak sortu zituen: etxetresna elektrikoaren erabilera bizilagunak aurpegiera batekin eta energiaren erabilera murrizteko aholkuak emanez (4.6 irudia). Orduan, ikertzaileekin lankidetzan, Opower-ek kontrolatutako esperimentu aleatorioak egin zituen, Energia Elektronikoen Txostenen eragina ebaluatzeko. Nahiz eta esperimentu horien tratamenduak fisikoki normalean entregatu ohi diren karramarroen bide zaharren bidez, emaitza gailu digitalen bidez neurtu zen mundu fisikoan (adibidez, potentzia-metroak). Gainera, informazio hori eskuz biltzeaz gain, etxe bakoitzean bisitatzen duten ikerketa-laguntzaileek baino ez zuten egin, Opower-en esperimentuak energia elektrikoekin lankidetzan aritu ziren. Horrela, eremu partzialki digitaleko esperimentuak eskala masibo batean egin ziren aldagai kostu baxuetan.
4.6 irudia: Hasiera Energia Txostenak Gizarte Konparazio Modulua eta Ekintza Steps Modulua izan dituzte. Allcott (2011) baimenarekin erreproduzituta, 1 eta 2. zenbakiak.
10 gune desberdinetatik 600.000 etxebizitzarako esperimentuen lehen multzoan, Allcott (2011) Energia Elektrikoaren Txostenak elektrizitatearen kontsumoa murriztu zuen. Beste era batera esanda, ikerketa askoz ere handiagoa eta geografikoki anitzagoak diren emaitzak kualitatiboki Schultz et al. (2007) . Horrez gain, 101 gune desberdinetatik zortzi mila etxe gehiago biltzen dituen ikerketa batean, Allcott (2015) berriro aurkitu du Etxeko Energia Txostenak koherentziaz elektrizitatearen kontsumoa murriztu duela. Esperimentu multzoa askoz ere esperimentu bakarrean ikusgai ez zen beste eredu berri bat ere agerrarazi zen: efektuaren tamaina geroago egindako esperimentuetan (4.7 irudia) murriztu zen. Allcott (2015) espezifikatu zuen beherakada hori gertatu zela, denborarekin, tratamendua parte-hartzaile mota desberdinetara aplikatzen ari zela. Hain zuzen ere, ingurumenarekiko bideratutako bezero gehiago dituzten zerbitzuak gehiago litekeena da programa lehenbailehen hartzea, eta bezeroek tratamenduarekiko sentikorrak izan ziren. Ingurumenerako bideratuta dauden bezeroek gutxiago dituzten zerbitzuen bidez, programak bere eraginkortasuna azaltzen du. Horrela, esperimentazioetan aleazioek tratamendua eta kontrol-taldea antzekoak direla bermatzen dute, ikerketa-guneetan ausazko aukeraketak bermatzen du estimazioak parte-hartzaile talde batetik orokorragoa izan daitekeela (laginaren 3. kapituluari buruz pentsatu). Ikerketa guneak ez bada ausaz aukeratzen, orduan orokortzea, nahiz eta ezin hobeki diseinatutako eta zuzendutako esperimentu bat izan, arazo larria izan daiteke.
4.7 irudia: 111 elektrizitate-kontsumoaren Etxeko Energia Memoriak eragindako 111 esperimentuen emaitzak. Programa beranduago hartutako guneetan, efektu txikiagoak izan ohi zituzten. Allcott (2015) argudiatzen du patroi honen iturri nagusiak ingurune ingurune gehiago duten bezeroentzako guneak gehiago liratekeela programa lehenago hartzea. Allcott (2015) egokitua, 3. irudia.
Elkarrekin, 111 herrialdetako Allcott (2011) eta 101-eko Allcott (2015) esperimentuak -beste Estatu Batuetako 8,5 milioi inguru inguru zeuden. Energia elektrikoen txostenak energia elektrikoaren batez besteko kontsumoa murrizten du, ondorioz, Schultzen eta lankideen jatorrizko aurkikuntzak, 300 etxebizitzetan Kalifornian. Jatorrizko emaitza horiek errepikatuz gero, jarraipen-esperimentuak ere erakusten dute efektuaren tamaina kokapenaren arabera aldatzen dela. Esperimentu-multzoa ere arlo partzialki digitalean esperimentuen inguruko bi puntu orokor gehiago erakusten ditu. Lehenik eta behin, ikertzaileek kanpoko baliozkotzari buruzko kezkak aurreikusi ahal izango dituzte esperimentuak martxan jartzeko kostua baxua denean eta emaitza hori dagoeneko sistemaren datuen arabera neurtzen bada. Hori dela eta, iradokitzen du ikertzaileek dagoeneko grabatzen ari diren jokabide interesgarria eta garrantzitsuak begiratzen dituztela eta, ondoren, neurketa azpiegitura horren gainean egindako esperimentuak diseinatu. Bigarrenik, esperimentu multzoa gogorarazten digu eremu digitaleko esperimentuak ez direla linean soilik; gero eta gehiago, sentsoreek ingurune egokian neurtzen dituzten emaitza askorekin nonahi izango direla espero dut.
Baliokidetasunaren baliozkotasun estatistiko lau baliozkotasun motak, barneko baliozkotasuna, eraikuntzaren baliozkotasuna eta kanpoko baliozkotasuna ematen zaizkie. Ikertzaileek ebaluatzen laguntzen dute ebaluazio esperimental baten emaitza orokorragoa lortzeko. Analogikoa den esperimentuekin alderatuta, adin digitaleko esperimentuetan kanpoko baliozkotasuna aurreikustea izan beharko luke enpirikoki, eta barneko baliozkotasuna bermatu beharra dago. Bestalde, eraikuntzaren baliozkotasunaren gaiak erronka gehiago izango dira adin digitaleko esperimentuetan, batez ere, esperimentazio digitaleko esperimentuak, enpresekin lankidetzak izan ditzaten.
