Tulaga aloaia e faatatau i le tele o le lagolago o le taunuuga o se suesuega se faaiuga sili atu ona lautele.
E leai se faataitaiga o le atoatoa, ma atiina ae suesue se upu e tele e faamatala faafitauli e mafai ai. Tulaga aloaia e faasino i le tulaga lea e lagolago ai le taunuuga o se suesuega faapitoa nisi faaiuga aoao. Maua saienitisi Social fesoasoani tele ai le vaeluaina aloaia i ituaiga autu e fa: aloaia faaiuga faafuainumera, aloaia i totonu, fausia le tulaga aloaia, ma tulaga aloaia fafo (Shadish, Cook, and Campbell 2001, Ch 2) . Pulea o nei mataupu o le a tuuina atu ia te oe se lisi o le mafaufau mo critiquing ma le faaleleia atili ai le mamanu ma le auiliiliina o se suesuega, ma o le a fesoasoani ia te oe fesootai faatasi ma isi suesue.
Aloaia faaiuga Faafuainumera faaautu siomia ai pe o le iloiloga faafuainumera o le faataitaiga na faia saʻo. I le tulaga o Schultz et al. (2007) fesili e mafai ona taulai i le pe latou fuafuaina latou p-faatauaina saʻo. auiliiliga Faafuainumera o tua atu o le tulaga lautele o lenei tusi, ae e mafai ona ou faapea atu o le mataupu faavae o fuainumera faamaumauina manaomia i le fuafuaina ma le iloiloina o suesuega e lei suia i le tausaga faafuainumera. Ae peitai, o le siosiomaga eseese o faamatalaga i le suesuega faafuainumera e fatuina ni avanoa faafuainumera fou (eg, e faaaoga ai masini auala e aoao ai e fuafua heterogeneity o aafiaga togafitiga (Imai and Ratkovic 2013) ) ma le fou luitau computational (eg, polokaina i suesuega tetele (Higgins, Sävje, and Sekhon 2016) ).
Faaautu aloaia Internal siomia ai pe o le taualumaga faataitai na faia saʻo. Toe foi atu i le faataitaiga o Schultz et al. (2007) , fesili e uiga i le tulaga aloaia i totonu e mafai ona taulai i le randomization, faaooina atu o le togafitiga, ma fua o taunuuga. Mo se faataitaiga, e mafai ona e popole e le o faitau faalagolago le mita eletise le fesoasoani suesuega. O le mea moni, sa popole Schultz ma uo e uiga i lenei faafitauli ma sa ia i latou o se faataitaiga o le mita faitau faalua; mea e lelei ai, o le taunuuga o le mea moni e tutusa. I se tulaga lautele, Schultz ma paaga 'suesuega e foliga mai e maua le tulaga aloaia i totonu sili, ae e le o taimi uma i le tulaga; masani ona taufetuli lavelave fanua ma suesuega i le initoneti i faafitauli moni o le tuuina atu o le togafitiga aia tatau i le tagata saʻo ma le fuaina le taunuuga mo tagata uma. Mea e lelei ai, o le e mafai ona fesoasoani matua faafuainumera faaitiitia atugaluga e uiga i le tulaga aloaia i totonu aua e faigofie ai ona mautinoa e faapea ua tuuina atu le togafitiga e pei ona fuafuaina ia i latou oe ua tatau ona maua i ai ma e fua ai taunuuga mo tagata uma e auai.
Fausia aloaia nofoaga i le fetaui le va o le faamatalaga ma le ao taumafaiga tau o ni faaupuga. E pei ona talanoaina i le Mataupu e 2, ao taumafaiga e manatu faavae lavelave lena mafuaaga saienitisi lautele e uiga i. Ae paga lea, e le manino ai pea lava pea o nei manatu faavae lavelave faamatalaga ma fua. Toe foi atu i Schultz et al. (2007) , o le talosaga e injunctive faiga masani faasosaiete mafai ona tuutuu ifo i lalo le eletise faaaogaina manaomia suesue i le fuafuaina o se togafitiga o le a pulea "faiga masani faasosaiete injunctive" (eg, o se emoticon) ma e fua "faaaogaina le eletise." I suesuega analog, o le toatele suesue fuafuaina latou lava togafitiga ma fuaina latou lava taunuuga. O lenei faiga e mautinoa ai, i le tele e mafai ai, o le suesuega o fetaui le faamatalaga otooto ao taumafaiga loo suesueina. I suesuega faafuainumera lea paaga suesue ma le kamupani po o malo e tuuina atu togafitiga ma faaaogaina i taimi uma-i luga o faamatalaga o faiga e fua ai taunuuga, e mafai ona itiiti ifo fufusi le fetaui le va o le faataitaiga ma le ao taumafaiga tau o ni faaupuga. O lea, ou te faamoemoe o le a iu lava ina avea aloaia fausia se popolega tele i suesuega faafuainumera nai lo o suesuega analog.
Mulimuli ane, faaautu aloaia mai fafo o loo siomia ai pe o le taunuuga o lenei suesuega o le a generalize i isi tulaga. Toe foi atu i Schultz et al. (2007) , o se tasi e mafai ona e fesili atu, o le a lenei faamatalaga tagata manatu-le tuuina lava lea e tasi e uiga i lo latou faaaogaina o le malosi i le sootaga i lo latou tupulaga ma se faailoga o faiga masani injunctive (eg, o se emoticon) faaaogaina malosi -reduce pe afai sa faia i se auala e ese mai i se nofoaga eseese? Mo sili ona lelei-sa mamanuina ma suesuega lelei taufetuli, atugaluga e uiga i le tulaga aloaia i fafo e sili ona faigata ona talanoa. I aso ua mavae, o nei felafolafoaiga e uiga i le tulaga aloaia i fafo sa masani na o se vaega o tagata o nofo i se potu e taumafai e vaai faalemafaufau i mea o le a tupu pe afai na faia e le taualumaga i se auala e ese mai, po oi se nofoaga eseese, po o tagata eseese. Mea e lelei ai, o le tausaga faafuainumera e mafai ai ona suesue e agai i tua atu o nei faamatalaga-saoloto taumatematega ma iloilo le tulaga aloaia fafo empirically.
Talu ai o le taunuuga mai Schultz et al. (2007) sa matua fiafia, o se kamupani e igoa Opower faapaaga ma aogā i le Iunaite Setete i le tala o le togafitiga sili lautele. Faavae i le mamanu o Schultz et al. (2007) , na foafoaina patino Opower Aiga Lipoti Malosiaga na lua modules autu, o se tasi faaalia a aiga faaaogaina le eletise a le aiga i lona tuaoi i se emoticon ma se tasi tuuina atu fautuaga mo le tuuina i lalo faaaogaina le malosi (Ata 4.6). Ona, i se faiga faapaaga ma suesue, tamoe randomized Opower suesuega pulea e iloilo le aafiaga o le Aiga Lipoti Malosiaga. E ui lava o le togafitiga i nei suesuega sa masani tuuina faaletino-e masani lava e ala i le sisi fausia tuai meli-o le na ona fua taunuuga faaaogaina o masini komepiuta i le lalolagi faaletino (eg, mita mana). Nai lo le aoina manually lenei faamatalaga ma fesoasoani asiasi suesuega fale taitasi, o le na faia mea uma o suesuega Opower i faiga faapaaga ma le mana kamupani mafai ai e le suesue i maua le faitauga mana. O lea, na taufetuli nei vaega o suesuega o fanua faafuainumera i se fua tetele i tau ma liuliuina maualalo.
I se seti muamua o suesuega e aofia ai le 600,000 aiga e auauna atu i le 10 aoga kamupani i le Iunaite Setete, Allcott (2011) maua tuutuu ifo Report le Aiga Malosiaga eletise taumafaina e 1.7%. I se isi faaupuga, o le taunuuga mai le tele tele, suesue atili eseese faafanua sa qualitatively tutusa i le taunuuga mai Schultz et al. (2007) . Ae, sa laiti le tele aafiaga: i Schultz et al. (2007) o le aiga i le faiga masani e faamatalaina ma injective tulaga (o le tasi ma le emoticon) faaitiitia latou eletise faaaogaina e 5%. O le mafuaaga tonu mo lenei eseesega o le iloa, ae Allcott (2011) speculated o le mauaina o a emoticon tusilima o se vaega o se suesuega lagolagoina e a maua le iunivesite i ai se aafiaga i amioga e tele atu nai lo le mauaina o se lomia emoticon o se vaega o se vaega tele e gaosia e lipoti mai a kamupani mana.
Gata i lea, i le sailiga o mulimuli ane ai, Allcott (2015) lipotia i luga o se suesuega 101 faaopoopo e aofia ai se faaopoopo 8 miliona aiga. I nei sosoo suesuega 101 le faaauau pea Aiga Malosiaga Report e mafua ai tagata i lalo o latou taumafaina le eletise, ae sa oo lava laiti le aafiaga. E le o iloa le mafuaaga tonu mo lenei faaitiitia, ae Allcott (2015) speculated na faaali e faaitiitia ai le aoga o le lipoti i le taimi ona sa moni ua faatatau i ituaiga eseese o tagata e auai. Sili atu faapitoa, aogā i le tele o isi eria environmentalist sa sili ono faaaogaina le polokalama muamua ma sa vave ona tali o latou tagata e faaaogāina auaunaga i le togafitiga. A o aogā e itiiti tagata e faaaogāina auaunaga siosiomaga faaaogaina le polokalama, na faaali atu teena lona aoga. O lea la, e pei lava ona randomization i suesuega e faamautinoaina o le togafitiga ma le pulea vaega tutusa, randomization i nofoaga faamautinoa suesuega e faapea o le tala faatatau o tupe e mafai ona generalized mai se tasi vaega o tagata e auai i se faitau aofai o tagata e masani ai (toe mafaufau i le mataupu e 3 e uiga i le faataitaiga). Afai suesuega nofoaga e le sampled faafuasei, ona generalization-mai lava a atoatoa fuafuaina ma faia faataitaiga-e mafai ona avea problematic.
Faatasi, o suesuega o le 10 o nei 111 i Allcott (2011) ma le 101 i Allcott (2015) -involved e uiga i 8.5 miliona aiga mai uma i le Iunaite Setete. Latou pea faaalia faaitiitia Lipoti Aiga Malosiaga taumafaina eletise averesi, o se taunuuga e lagolagoina ai le sailiiliga uluai o Schultz ma paaga mai le 300 aiga i Kalefonia. I tua atu o le na o replicating nei taunuuga uluai, o le faaalia foi tulitatao suesuega e faapea o le tele o le aafiaga eseese lava nofoaga. O lenei seti o suesuega foi faaalia vaega e lua e sili aoao e uiga i vaega faafuainumera suesuega fanua. Muamua, o le a mafai ona suesue e empirically popolega lauga e uiga i le tulaga aloaia i fafo pe afai o le tau o le tamoe o suesuega o le maualalo, ma e mafai ona tupu lenei mea pe afai ua uma ona fuaina le taunuuga e se i taimi uma-i luga o faamatalaga faiga. O le mea lea, e fautuaina e tatau ona avea o suesuega i luga o le vaaiga-mo isi amioga manaia ma le taua ua uma ona le tusia, ma le fuafuaina o suesuega i luga o lenei atinae eseese o fua o lo oi ai. Lona lua, o lenei seti o suesuega faamanatu mai ai ia suesuega faafuainumera fanua ua le na o luga o le initoneti; faateleina ou faamoemoe o le a latou i soo se mea ma le tele o taunuuga fuaina e sensors i le siosiomaga fausia.
O le ituaiga e fa o le aloaia faaiuga aloaia-faafuainumera, aloaia i totonu, fausia le tulaga aloaia, tulaga aloaia-tuuina mai fafo se lisi o le mafaufau e fesoasoani suesue iloilo pe o le taunuuga mai se faataitaiga faapitoa lagolago se faaiuga sili atu ona lautele. Faatusatusa i analog o suesuega o tausaga, i le komepiuta o suesuega o tausaga e tatau ona faigofie e faailoa aloaia mai fafo empirically ma e tatau ona faigofie ina ia mautinoa le tulaga aloaia i totonu. I le isi itu, o mataupu o le fausia atonu o le a sili atu ona faigata le tulaga aloaia i suesuega tausaga faafuainumera (e ui lava e le o le tulaga i le suesuega Opower).