He aha ki te korero i muri mai
- Whakataki (waahanga 4.1)
Ko nga take e pa ana ki nga mahi a te hapori he maha tonu nga ahuatanga me nga mea whakahirahira. Mo te huarahi whakaari mo te whakawhitinga i runga i nga kauwhata whaitake, tirohia te Pearl (2009) , me te huarahi mo te waahanga i runga i nga hua ka puta, kite Imbens and Rubin (2015) . Hei whakataurite i waenganui i enei huarahi e rua, tirohia te Morgan and Winship (2014) . Mo te huarahi paerewa ki te tautuhi i te kaitautoko, tirohia VanderWeele and Shpitser (2013) .
I roto i tenei pene, kua hanga e au he mea ahua hei rarangi marama i waenganui i to maatau ki te hanga i nga whakatau kaute mai i nga raraunga whakamatautau me te kore whakamatautau. Heoi, e whakaaro ana ahau, i roto i te meka, he nui ake te raruraru. Hei tauira, e whakaae ana te katoa ko te paowa e pa ana ki te mate pukupuku, ahakoa kaore i whakahaerehia he whakamatautau i te waarangi i nga iwi ki te paowa. Mo nga maimoatanga roa-roa mo te hanga i nga whakatau kaute mai i nga raraunga kore-whakamatautau ka kite Rosenbaum (2002) , ( ??? ) , Shadish, Cook, and Campbell (2001) me Dunning (2012) .
Ko nga upoko 1 me te 2 o Freedman, Pisani, and Purves (2007) e whakaatu ana i nga korero rereke i waenganui i nga whakamatautau, i nga whakahaerenga whakahaere, me nga whakamatautau kua tohatohahia.
Manzi (2012) whakarato ana i te whakamataku me te whakaari i te whakauru ki nga kaupapa matauranga me nga tatauranga o nga whakamatautau kua tohatohahia. Kei te whakarato hoki i nga tauira tino pai o te ao o te kaha o te whakamatautau i nga mahi pakihi. Issenberg (2012) he korero whakatairanga ki te whakamahinga o nga whakamatautauranga i roto i nga kaupapa taiao.
- He aha nga whakamatau? (wāhanga 4.2)
Box, Hunter, and Hunter (2005) , @ casella_statistical_2008, me Athey and Imbens (2016b) whakarato ana i nga whakaurutanga pai ki nga Athey and Imbens (2016b) tatauranga o te hoahoa whakamatau me te t tari. I tua atu, i reira he maimoatanga pai o te whakamahi o ngā i roto i te maha mara rerekē: economics (Bardsley et al. 2009) , Pāpori (Willer and Walker 2007; Jackson and Cox 2013) , hinengaro (Aronson et al. 1989) , Pūtaiao tōrangapū (Morton and Williams 2010) , me te kaupapa here hapori (Glennerster and Takavarasha 2013) .
Ko te hiranga o te mahi whakauru (hei tauira, te tauira) kei te nuinga o te waa-i roto i nga mahi rangahau. Engari, ki te whai hua te hua o te maimoatanga i roto i te taupori, he mea tino nui te tangohanga. Longford (1999) tenei e whakaatu ana i tana wawao mo nga kairangahau e whakaaro ana ki nga whakamatautau ka rite ki te rangahau taupori me te whakamahinga o te tohu.
- E rua nga waahanga o nga waahanga: te papa-papa me te analog-mamati (waahanga 4.3)
Kua whakaarohia e ahau he rererangi i waenganui i nga mahi me te whakamatautau i nga mara, me etahi atu kairangahau kua tautuhi i nga tikanga maha, i roto i nga mea e wehewehe ana i nga ahuatanga o nga whakamātautau whenua (Harrison and List 2004; Charness, Gneezy, and Kuhn 2013) .
He maha o nga pepa kua whakataurite i nga mahi me te whakamatautau i te waahanga (Falk and Heckman 2009; Cialdini 2009) me nga hua o nga waahanga o te rangahau hauora (Coppock and Green 2015) , te ahurea (Levitt and List 2007a, 2007b; Camerer 2011; Al-Ubaydli and List 2013) , me te hinengaro hinengaro (Mitchell 2012) . Jerit, Barabas, and Clifford (2013) whakarato ana i tetahi hoahoa rangahau pai hei whakataurite i nga hua mai i nga waahanga me nga whakamatautau whenua. Parigi, Santana, and Cook (2017) whakaatu ana i te waahi ka taea e nga whakaaturanga o te ipurangi te whakauru i etahi o nga ahuatanga o te whakamau me te whakamātautau.
Ko nga raruraru mo te hunga e whakarereke ana i ta ratou whanonga, no te mea e mohio ana ratou kei te tino arotahihia ko etahi waahanga e kii ana i nga waahanga , me te ako i roto i te hinengaro (Orne 1962) me te ahumahi (Zizzo 2010) . Ahakoa ko te nuinga o nga mea e whai ana ki nga whakamauranga taraiwa, ka taea e enei raruraru te whakararu raruraru mo nga whakamatautau whenua. Ko te tikanga, ko nga hua tono ka kiia he ingoa Hawthorne i etahi wa, ko te wa e hua ana i nga whakaaturanga whakamarama rongonui i timata i te tau 1924 i te Hawthorne Works o te Western Electric Company (Adair 1984; Levitt and List 2011) . Ko nga paanga o nga tono me nga paanga o Hawthorne e tata ana ki te whakaaro o te whakautu urupare i whakahuatia i te upoko 2 (tirohia hoki Webb et al. (1966) ).
Ko nga whakamātautau a te mara he roa te hitori o te ao (Levitt and List 2009) , te pūtaiao tōrangapū (Green and Gerber 2003; Druckman et al. 2006; Druckman and Lupia 2012) , psychology (Shadish 2002) , me te kaupapa here a te iwi (Shadish and Cook 2009) . Ko tetahi o nga waahi o te waiao i kitea ai te waahanga nui o nga waahi ki te whanaketanga o te ao. Mo te arotake pai o taua mahi i roto i te ahumahi, tirohia te Banerjee and Duflo (2009) , a mo te aromatawai nui, tirohia te Deaton (2010) . Mo te arotake o tenei mahi i roto i te tirohanga hauora ka kite Humphreys and Weinstein (2009) . I te mutunga, ko nga raruraru taiao i puta mai i nga mahi (Humphreys 2015; Desposato 2016b) whenua kua torotorohia i roto i te horopaki o te pütaiao (Humphreys 2015; Desposato 2016b) me te whanaketanga whanaketanga (Baele 2013) .
I roto i tenei waahanga, i whakaaro ahau kia whakamahia nga korero o mua i te maimoatanga ki te whakapai ake i te tika o nga paanga o te maimoatanga, engari he tautohetohe mo tenei huarahi; tirohia te Freedman (2008) , W. Lin (2013) , Berk et al. (2013) , me Bloniarz et al. (2016) mo etahi atu korero.
Hei whakamutunga, e rua atu nga momo whakamatautau e mahia ana e nga kaimori-a-iwi e kore e pai ki te waahanga mahi-rangahau: nga rangahau rangahau me nga whakamatautauranga hapori. Ko nga whakamātautau rangahau he whakamātautau mā te whakamahi i te hanganga o nga rangahau kei roto tonu, me te whakataurite i nga urupare ki nga putanga rereke o nga paahitanga ano (ko etahi whakaaturanga rangahau e whakaatuhia ana i te Rarangi 3); mo etahi atu korero mo te rangahau kite Mutz (2011) . Ko nga whakamatautau hapori kei nga waahi ko te maimoatanga ko etahi kaupapa here hapori ka taea anake te whakatinana e te kawanatanga. He hononga tata ki te aromatawai hōtaka. Mo etahi atu korero mo nga kaupapa here, tirohia Heckman and Smith (1995) , Orr (1998) me @ glennerster_running_2013.
- Te neke atu i nga waahanga poto (waahanga 4.4)
Kua whiriwhiria e ahau ki te arotahi ki nga kaupapa e toru: te whaimana, te huinga o nga paanga maimoatanga, me nga tikanga. He ingoa rerekë enei i roto i nga waahi rereke. Hei tauira, ko nga kaimätai hinengaro e neke atu ana i nga whakamatau ngawari ma te arotahi ki nga kaiwawao me nga kaitono (Baron and Kenny 1986) . Ko te whakaaro o nga kaiwawao ka mauhia e nga mea e karangahia ana e au, me te whakaaro o nga kaitohutohu i te mea e karangahia ana e ahau he mana motuhake (hei tauira, he rereke nga hua o te whakamatautau ki te rere i roto i nga rereketanga rereke) me te heterogene o nga paanga maimoatanga ( hei tauira, he nui ake te painga mo etahi atu mo etahi atu).
Ko te whakamatau a Schultz et al. (2007) whakaatu pehea e taea ai te whakamahi i nga arii hapori hei hoahoa i nga waahanga whai hua. Mo te tautohetohe whānui atu mo te mahi o te ariā i roto i te whakarite hoahoa whai hua, tirohia a Walton (2014) .
- Te whaimana (waa 4.4.1)
Ko nga ariä o te whaimana o roto me waho o mua i whakauruhia e Campbell (1957) . Tirohia te Shadish, Cook, and Campbell (2001) mo te hītori taipitopito, me te āta whakamaori i te whakatau o te tatauranga tatauranga, te tika o te taiao, te hanganga i te whaimana, me te mana motuhake.
Mo te tirohanga whānui o nga take e pa ana ki te whakatau Imbens and Rubin (2015) whaimana i roto i nga waahanga titiro ki a Gerber and Green (2012) (mai i te tirohanga hauora hapori) me Imbens and Rubin (2015) (mai i te tirohanga Imbens and Rubin (2015) ). Ko etahi o nga waahanga o te (Bakshy and Eckles 2013) waahanga o te waahanga (Bakshy and Eckles 2013) waahanga o te ipurangi me nga take penei ko nga tikanga pai mo te hanga i nga waahanga haumaru me nga raraunga whakawhirinaki (Bakshy and Eckles 2013) .
Ko te tika o roto e taea te uaua ki te whakarite i roto i nga waahanga matatini. Tirohia, hei tauira, ko Gerber and Green (2000) , Imai (2005) , me Gerber and Green (2005) mo te tautohetohe mo te whakatinanatanga o te whakamatautau matatau mo te pooti. Kohavi et al. (2012) me Kohavi et al. (2013) whakaratohia he whakauru ki nga wero o te waahi o te waahanga i roto i nga waahanga ipurangi.
Ko tetahi whakawehi nui ki te whaimana o roto ko te kaha o te taurangi kore. Ko tetahi o nga huarahi e kitea ai nga raruraru me te porangirangi ka whakatauritehia nga maimoatanga me nga rōpū whakahaere i runga i nga ahuatanga e kitea ana. Ko te ahuatanga o tenei whakatau ka kiia ko te haki toenga . Tirohia te Hansen and Bowers (2008) mo te aro Mutz and Pemantle (2015) hei whakatau i nga arowhai me Mutz and Pemantle (2015) mo nga raruraru e pa ana ki nga arowhai. Hei tauira, i te whakamahi i te haki toenga, ka kitea e Allcott (2011) etahi taunakitanga kaore i whakatinanahia i te toru o nga whakamatau a Opower (tirohia te tepu 2; nga pae 2, 6, me te 8). Mo etahi atu huarahi, tirohia te pene 21 o Imbens and Rubin (2015) .
Ko etahi atu raruraru nui e pa ana ki te whaimana o roto: (1) te kore o te hunga katoa i roto i te rōpū maimoatanga i whiwhi i te maimoatanga, (2) nga whakapae rua, kaore hoki te hunga katoa i te rōpū maimoatanga e whiwhi i te maimoatanga me etahi atu ka whakawhiwhia e te rōpū whakahaere te maimoatanga, (3) te utu, kaore i te whanaketia nga hua mo etahi kaitautoko, me te (4) awangawanga, kei hea te maimoatanga e puta mai i nga tāngata i roto i te ahua maimoatanga ki nga tangata i roto i te mana whakahaere. Tirohia nga upoko 5, 6, 7, me te 8 o Gerber and Green (2012) mo etahi atu korero mo ia take.
Mo etahi atu mea mo te tika o te hanganga, tirohia a Westen and Rosenthal (2003) , me etahi atu mea mo te hanganga i nga waahanga nui raraunga, Lazer (2015) me te upoko 2 o tenei pukapuka.
Ko tetahi o nga waahanga o te whaimana o waho ko te tautuhinga e whakamatauhia ana he waahi. Allcott (2015) whakarato ana i nga mahi whakamaharatanga me te whakamahara o te waahanga o te pae tukutuku. Ko Deaton (2010) ano hoki te korero mo tenei take. Ko tetahi atu waahanga o te whaimana o waho ko nga mahi whakahaere rereke o taua urupare ka whai paanga rite. I tenei take, he whakataurite i waenganui i Schultz et al. (2007) me Allcott (2011) whakaatu ana ko nga wheako o Opower he iti ake te whakamahinga o te whakamahinga o te whaimana i te whakamahinga taketake a Schultz me ona hoa (1.7% me te 5%). Allcott (2011) whakaaro he iti ake te awe o nga mahi whai muri mai na te mea i rereke te maimoatanga: he emoticon ringaringa hei waahanga o te ako i awhinahia e te whare wānanga, i whakaritea ki te emoticon kua tuhia hei waahanga o te papatipu pūrongo mai i te kamupene mana.
- Te ahurea o nga paanga maimoatanga (wāhanga 4.4.2)
Mo te tirohanga tino pai o te huinga o nga mahi maimoatanga i nga whakamatautau whenua, tirohia te upoko 12 o Gerber and Green (2012) . Mo te whakauru ki te heterogeneity o nga paanga maimoatanga i nga whakamatautau hauora, tirohia Kent and Hayward (2007) , Longford (1999) , me Kravitz, Duan, and Braslow (2004) . Ko nga whakaaro o te heterogeneity o nga maimoatanga o te maimoatanga e arotahi ana ki nga rereketanga i runga i nga maimoatanga o mua i te maimoatanga. Mena kei te hiahia koe ki te whakapapa i runga i nga putanga o muri-maimoatanga, ka hiahiatia nga waahanga nui ake, penei i te waahi matua (Frangakis and Rubin 2002) ; tirohia te Page et al. (2015) mo te arotake.
He maha nga kairangahau e whakatau ana i te huinga o nga maimoatanga o te maimoatanga e whakamahi ana i te whakahekenga raupapa, engari ko nga tikanga hou ka whakawhirinaki ki nga akoranga miihini; tirohia, hei tauira, Green and Kern (2012) , Imai and Ratkovic (2013) , Taddy et al. (2016) , a Athey and Imbens (2016a) .
He maha nga whakaaro mo nga kitenga o te heterogeneity o nga paanga na te mea he maha o nga raruraru whakataurite me te "hī ika." He maha nga huarahi taatai e taea ai te whakatikatika i nga paanga e pā ana ki te whakataurite maha (Fink, McConnell, and Vollmer 2014; List, Shaikh, and Xu 2016) . Ko te taha ki nga paanga e pā ana ki te "hī ika" ko te rēhita tuatahi, kei te piki tonu i roto i te hinengaro (Nosek and Lakens 2014) , te pūtaiao tōrangapū (Humphreys, Sierra, and Windt 2013; Monogan 2013; Anderson 2013; Gelman 2013; Laitin 2013) , me te ahurea (Olken 2015) .
I roto i te ako a Costa and Kahn (2013) anake te haurua o nga whare i roto i te whakamatauranga ki te hono ki nga korero mo te taupori. Ko nga kaipānui e hiahia ana ki enei taipitopito, me tuhi ki te pepa taketake.
- Ngā Mahi (wāhanga 4.4.3)
He mea tino nui nga mahi, engari he mea tino uaua ki te ako. Ko te rangahau e pā ana ki nga kaupapa e hono ana ki te ako o nga kaiwawao i roto i te hinengaro hinengaro (engari tirohia hoki a VanderWeele (2009) mo te whakataurite i waenganui i nga whakaaro e rua). Ko nga huarahi tohu mo te rapu tikanga, penei i te huarahi i whakawhanakehia i Baron and Kenny (1986) , he mea tino noa. Engari, ka puta mai ko nga tikanga whakahaere i runga i etahi whakaaro kaha (Bullock, Green, and Ha 2010) me te mamae i te mea kei te maha nga kaupapa, kia tumanakohia e te tangata i nga wa maha (Imai and Yamamoto 2013; VanderWeele and Vansteelandt 2014) . Imai et al. (2011) me Imai and Yamamoto (2013) etahi tikanga pai ake. I tua atu, ka whakarato a VanderWeele (2015) i te mahinga pukapuka-roa me te maha o nga hua nui, tae atu ki te huarahi whānui ki te tohatoha whakaaro.
Ko te huarahi motuhake e arotahi ana ki nga whakamatautau e ngana ana ki te whakamahi i te tikanga tika (hei tauira, te hoatu i te huaora C). Engari, i roto i te maha o nga taiao pūtaiao, he maha nga kaupapa me te mea uaua ki te hoahoa i nga maimoatanga e whakarereke ana i tetahi me te kore e whakarereke i era atu. Ko etahi o nga huarahi ki te whakarereke i nga kaupapa hangarau e whakaatuhia ana e Imai, Tingley, and Yamamoto (2013) , Ludwig, Kling, and Mullainathan (2011) , a Pirlott and MacKinnon (2016) .
Ko nga kairangahau e whakahaere ana i nga whakamohiotanga o te waahanga katoa ka hiahia kia raruraru mo te whakamatautau maha o te whakapae; tirohia te Fink, McConnell, and Vollmer (2014) me te List, Shaikh, and Xu (2016) mo etahi atu korero.
Hei whakamutunga, he mahinga roa nga tikanga i roto i te kaupapa o te pütaiao e whakaaturia ana e Hedström and Ylikoski (2010) .
- Te whakamahi i nga taiao e noho ana (waahanga 4.5.1)
Mo etahi atu korero mo te whakamahi i nga tuhinga tuhituhi me nga rangahau mo te arotakenga, tirohia te Pager (2007) .
- Hangahia to ake ake whakamātautau (wāhanga 4.5.2)
Ko te huarahi tino nui ki te whakauru i nga kaiuru ki nga whakaaturanga e hanga ana e koe ko Amazon Mechanical Turk (MTurk). No te mea ka whakamahia e te MTurk nga waahanga o nga mahi tuku iho-ka utua nga tangata ki te whakaoti i nga mahi e kore e mahia e ratou-he maha nga kairangahau kua timata ki te whakamahi i nga Turkers (nga kaimahi i runga i MTurk) hei kaiwhiwhi whakamatautau, ka nui ake te kohinga raraunga kaore e taea te whakatutuki i roto i nga whakamātautau taiwhanga (Paolacci, Chandler, and Ipeirotis 2010; Horton, Rand, and Zeckhauser 2011; Mason and Suri 2012; Rand 2012; Berinsky, Huber, and Lenz 2012) -taiao (Paolacci, Chandler, and Ipeirotis 2010; Horton, Rand, and Zeckhauser 2011; Mason and Suri 2012; Rand 2012; Berinsky, Huber, and Lenz 2012) .
Ko te tikanga, ko nga painga nui o te whakamahi i nga kaiuru mai i MTurk he waitohu. I te mea ka taea e nga taiwhanga taiwhanga te tango wiki ki te whakahaere, ka taea te tango i nga marama ki te whakarite i nga marama, ka taea te whakahaere i nga waahanga me nga kaiuru mai i MTurk i nga ra. Hei tauira, ko Berinsky, Huber, and Lenz (2012) i taea te ako 400 nga kaupapa i te ra kotahi hei uru atu ki te whakamatautau 8 meneti. I tua atu, ka taea e nga kaihauturu te kohikohi mo nga take katoa (tae atu ki nga rangahau me te mahi tahi, pera me nga korero i nga upoko 3 me te 5). Ko tenei ahuatanga o te kimiranga ko te tikanga ka taea e nga kairangahau te whakahaere i nga waahanga o nga whakaaturanga e whai ana i roto i te waahanga tere.
I mua i te whakanui i nga kaiuru mai i te MTurk mo o raatau whakaaturanga, e wha nga mea nui e hiahia ana koe ki te mohio. Tuatahi, he maha nga kairangahau e kore e whai whakaaro nui ki nga whakamatautau mo nga mahi a Turkers. No te mea ehara tenei i te whakaaro nui, he uaua ki te whakawhiti me te taunakitanga. Engari, i muri i nga tau maha o nga korero e whakamahi ana i nga Turkers, ka taea e tatou te whakaoti i tenei waa kaore i tino tika. He maha nga tauira e whakataurite ana i nga ahuatanga o nga Turkers me era atu o te taupori me te maha o nga tauira e whakataurite ana i nga hua o nga whakamatautau ki nga Turkers me era atu o te taupori. Ki a au mo tenei mahi katoa, Whakaaro ahau ko te huarahi pai mo te whakaaro ki a koe ko te Turkers he tauira whaitake whaitake, he rite ki nga akonga engari iti noa atu (Berinsky, Huber, and Lenz 2012) . Koinei, ka rite ki nga akonga he iwi whaitake mo etahi, engari ehara i te katoa, rangahau, ko te nuinga o nga kainoho o Turkers mo etahi, engari ehara i te katoa, rangahau. Mena ka mahi tahi koe ki a Turkers, he pai te korero i te maha o enei tauira whakaari me te mohio ki o raatau.
Tuarua, kua whakawhanaketia e nga kairangahau nga mahi pai hei whakanui ake i te mana o roto o nga whakamatau a MTurk, me ako koe me te whai i enei mahi pai (Horton, Rand, and Zeckhauser 2011; Mason and Suri 2012) . Hei tauira, ka akiakihia nga kairangahau e whakamahi ana i nga Turkers ki te whakamahi i nga mata hei tango i nga kaitautoko o te hunga kaore e whai whakaaro ana (Berinsky, Margolis, and Sances 2014, 2016) (engari kite ano hoki a DJ Hauser and Schwarz (2015b) me DJ Hauser and Schwarz (2015a) ). Mena kaore koe e tango i nga kaitautoko o te waahi, ka taea te horoi i tetahi hua o te maimoatanga e te ngangau e whakatairanga ana, a, i te mahi, ka nui te tokomaha o nga kaitautoko kore e aroturuki. I roto i te whakamatautau a Huber me nga hoa (2012) , e 30% o nga kaihauturu i takaware i nga kaititiro arotahi. Ko etahi atu raruraru ka puta ake i te wa e whakamahia ana a Turkers ko nga kaitautoko-kore-kore (Chandler et al. 2015) (Zhou and Fishbach 2016) .
Tuatoru, mo etahi atu momo whakamatautau mamati, kaore e taea e nga whakamatau a MTurk te hanganga; Stewart et al. (2015) whakaaro i tetahi wa ka tohua he 7,000 nga tangata kei runga i te MTurk.
Hei whakamutunga, kia mohio koe ko MTurk he hapori me ona ake ture me nga tikanga (Mason and Suri 2012) . I te wa ano ka whakamatau koe ki te rapu i te ahurea o tetahi whenua e whakahaere ana koe i au whakaaturanga, me whakamatau koe ki te rapu atu i nga tikanga me nga tikanga o Turkers (Salehi et al. 2015) . Kia mohio ano koe ka korero nga Turkers mo to whakamatautau ki te mahi koe i tetahi mea e kore e tika, e kore e tika (Gray et al. 2016) .
Ko te ara o te MTurk he huarahi tino maere ki te whakauru i nga kaiuru ki o raatau wheako, ahakoa he rite nga mahi a te Tari, a Huber, Hill, and Lenz (2012) , he nui atu ranei nga whenua, penei i te Mason and Watts (2009) , Goldstein, McAfee, and Suri (2013) , Goldstein et al. (2014) , Horton and Zeckhauser (2016) , me Mao et al. (2016) .
- Hangahia to hua ake (wāhanga 4.5.3)
Mena kei te whakaaro koe ki te ngana ki te hanga i to hua ake, ka tūtohu au kia kite koe i te tohutohu e whakaratohia ana e te kapa MovieLens i Harper and Konstan (2015) . Ko tetahi whakaaro matua mai i to ratau wheako ko te mea mo nga kaupapa angitu katoa he maha, he maha nga reanga. Hei tauira, ka whakarewahia e te rōpū MovieLens ētahi atu hua, pēnei i te GopherAnswers, i hinga katoa (Harper and Konstan 2015) . Ko tetahi atu tauira o te kairangahau kaore i te ngana ki te hanga i tetahi hua ko te kaupapa a Edward Castronova ki te hanga i tetahi kēmu ipurangi e karangatia ana ko Arden. Ahakoa $ 250,000 te moni, ko te kaupapa he pikinga (Baker 2008) . Ko nga kaupapa e rite ana ki te GopherAnswers me te Arden he nui rawa atu i nga kaupapa rite MovieLens.
- Te hoa mahi me te kaha (waahanga 4.5.4)
Kua rongo ahau ki te whakaaro a Pasteur's Quadrant i korero pinepinehia ki nga kamupene hangarau, a ka awhina i te mahi rangahau rangahau ki Google (Spector, Norvig, and Petrov 2012) .
Ko te mahi a te hoa me te hoa mahi (2012) ka ngana hoki ki te kite i te painga o enei maimoatanga ki nga hoa o te hunga i riro ia ratou. Na te hoahoa o te whakamatautau, he uaua ki te kite i nga waahanga nei; Me kite nga kaipānui whai whakaaro ki a Bond et al. (2012) hei whakawhitiwhitinga korero. I whakahaerehia e Jones me nga hoa mahi (2017) tetahi whakaaturanga tino rite i te tau 2012. Ko enei waahanga he waahanga o te waahanga roa o nga whakamatautau i roto i nga mahi hauora i nga mahi ki te whakatenatena i te pooti (Green and Gerber 2015) . He maha nga whakamatautauranga--------------------------------------------------------------------------------------------------------------------- Koinei, he tokomaha nga tangata e hihiri ana ki te whakanui i te pooti me te pooti hei whanonga pai ki te whakamatautau i nga arii nui ake mo te huringa whanonga me te awe a te hapori.
Mo te tohutohu mo nga whakamatau a nga marau me nga whakahaere pakihi pērā i nga rōpū tōrangapū, NGO, me nga pakihi, kite Loewen, Rubenson, and Wantchekon (2010) , JA List (2011) , me Gueron (2002) . Mo nga whakaaro e pa ana ki te hononga tahi me nga whakahaere ki te whakatairanga i nga hoahoa rangahau, tirohia te King et al. (2007) me Green, Calfano, and Aronow (2014) . Ka taea hoki e te hoahonui te arahi ki nga paatairanga tikanga, pera i nga korero a Humphreys (2015) me Nickerson and Hyde (2016) .
- He tohutohu hoahoa (waahanga 4.6)
Mena kei te mahi koe i tetahi mahere tiri i mua i to whakahaere i to whakamatautau, ka whakaaro ahau kia timata koe ma te panui i nga aratohu ripoata. I whakawhanakehia nga aratohu mo nga korero rangahau (Mayo-Wilson et al. 2013) (Schulz et al. 2010) me te whakarereke mo te rangahau hapori (Mayo-Wilson et al. 2013) . Kua whakawhanakehia etahi raupapa aratohu e nga kaiwhakaputa o te Journal of Experimental Political Science (Gerber et al. 2014) (tirohia hoki Mutz and Pemantle (2015) me Gerber et al. (2015) ). I te mutunga, kua whakawhanakehia nga aratohu Simmons, Nelson, and Simonsohn (2011) i te hinengaro hinengaro (APA Working Group 2008) , me te kite hoki ia Simmons, Nelson, and Simonsohn (2011) .
Mena ka waihangahia e koe tetahi mahere t tari, me whakaaro koe i mua i te rēhita mai na te mea ka nui ake te ti'aturi o etahi atu i roto i to hua. I tua atu, ki te mahi koe me tetahi hoa, ka whakawhitia te kaha o to hoa ki te huri i te t tari i muri i te kitenga i nga hua. Kei te piki tonu te (Nosek and Lakens 2014) i roto i te hinengaro hinengaro (Nosek and Lakens 2014) , te pūtaiao tōrangapū (Humphreys, Sierra, and Windt 2013; Monogan 2013; Anderson 2013; Gelman 2013; Laitin 2013) , me te economics (Olken 2015) .
Ko nga tohutohu hoahoa mo nga waahanga ipurangi kei te aroaro o Konstan and Chen (2007) me Chen and Konstan (2015) .
He aha taku i karanga ai ko te rautaki armada i etahi wa ka karangahia he rangahau kaupapa ; tirohia Wilson, Aronson, and Carlsmith (2010) .
- Waihangahia he raraunga utu taurangi kore (waahanga 4.6.1)
Mo nga korero mo nga whakaaturanga MusicLab, tirohia Salganik, Dodds, and Watts (2006) , Salganik and Watts (2008) , Salganik and Watts (2009b) , Salganik and Watts (2009a) , me Salganik (2007) . Mo nga korero mo nga hokohoko-toa, kite Frank and Cook (1996) . Mo te maha ake o nga waimarie me nga pukenga i nga wa katoa, tirohia te Mauboussin (2012) , Watts (2012) , me Frank (2016) .
He ara ke atu ki te whakakore i nga utu a te hunga whai hua ka whakamahia e nga kairangahau me te tupato: te tuku. I roto i te maha o nga waahi ipurangi ka whakauruhia nga kaiuru ki nga waahanga kaore ano kia utua. Ko nga tauira o tenei huarahi ko te Whakaako a Restivo me van de Rijt (2012) mo nga utu i roto i te Wikipedia me te Bond me te hoa mahi (2012) mo te akiaki i nga tangata ki te pooti. Kaore he utu rereke o enei whakamatautau-engari, he utu rereke ki nga kairangahau . I roto i nga whakamatautauranga, ahakoa he iti rawa te utu ki ia mema, ka nui rawa te utu. Ko nga kairangahau e mahi ana i nga whakaaturanga nui o te ipurangi ka whakaatu i te hiranga o te iti o te maimoatanga o te maimoatanga mo te maimoatanga me te mea ka taea e enei paanga iti te mea nui ki te nuinga o nga tangata. Ko te whakaaro kotahi rite ki nga utu e kii ana nga kairangahau ki nga kaiuru. Mena ka whakamatautau to whakamatautau i te kotahi miriona o nga tangata ki te whakamutu i te meneti kotahi, kaore te whakamatautau i te kino ki tetahi tangata, engari i te kohinga kua ngaro kua tata ki te rua tau.
Ko tetahi atu huarahi ki te hanga i te kore utu utu rerekē ki nga kaiwhakauru ko te whakamahi i te rota, he huarahi kua whakamahia hoki i roto i te rangahau rangahau (Halpern et al. 2011) . Mo te korero mo nga wheako kaiwhakamahi ahuareka, tirohia te Toomim et al. (2011) . Mo te korero mo te whakamahi i nga potae ki te waihanga i nga waahanga utu rererangi kaore e kite ( ??? ) .
- Whakakapi, Whakarite, me Whakaiti (waahanga 4.6.2)
Ko nga R toru e rite ana ki a Russell and Burch (1959) e whai ake nei:
"Tikanga Whakakapinga te whakakapi mo te mohio kararehe ora teitei o te rauemi insentient. Whakaiti tikanga whakaiti i roto i te tau o te kararehe whakamahia ki te whiwhi mōhiohio o te moni i homai, me te pū. Whakamahine tikanga tetahi hekenga i roto i te pā pakeke o ngā tukanga ati tono ki aua kararehe e tonu i ki te whakamahi ranei. "
Ko nga Ranga e toru e whakaarohia nei e au, kaua e whakakorea nga tikanga tautuhi e whakaahuatia ana i te pene 6. Engari, he waahanga noa ake tetahi o aua kaupapa-te painga-i roto i te waahanga o nga mahi a te tangata.
I roto i nga korero mo te R tuatahi ("whakakapinga"), te whakataurite i te whakamatautau a te rerenga hinengaro (Kramer, Guillory, and Hancock 2014) , me te whakamatautau taiao-a-hinengaro (Lorenzo Coviello et al. 2014) whakarato ana i etahi akoranga nui mo nga kaihokohoko i te neke atu i nga whakamatau ki nga whakamatautau taiao (me etahi atu huarahi e rite ana ki te whakamatautau ki te whakatata i nga whakamatautau i nga raraunga kore-whakamatautau; tirohia te upoko 2). I tua atu i nga painga o te mahi, ko te whakarereketanga mai i te whakamatautau ki nga mahi kore-whakamatautau ka taea e nga kairangahau te tirotiro i nga maimoatanga e kore e taea e ratou te whakauru. Ka puta mai enei painga me te waitohu i te utu, ahakoa. Ma nga whakamātautau taiao ka iti ake te whakahaere a nga kairangahau i nga mea e rite ana ki te whakauru i nga kaipuri, i te waatea, i te ahua o te maimoatanga. Hei tauira, ko te whakawhitinga o te ua ka rite ki te maimoatanga ko te whakapiki ake i te pai me te whakaheke i te taiao. I roto i te akoranga whakamatautau, Heoi, ka taea e Kramer me nga hoa mahi te whakatika i te rereketanga me te taiao takitahi. Ko te huarahi i whakamahia e Lorenzo Coviello et al. (2014) i whakamaramatia e L. Coviello, Fowler, and Franceschetti (2014) . Mo te whakauru ki nga taurangi Lorenzo Coviello et al. (2014) , ko te huarahi i whakamahia e Lorenzo Coviello et al. (2014) , tirohia te Angrist and Pischke (2009) (iti iho te tikanga), Angrist, Imbens, and Rubin (1996) (he ahua ake ano). Mo te aro nui o te arohaehae o nga Deaton (2010) a-ringa, tirohia te Deaton (2010) , me te whakauru ki nga rererangi whaihua me nga mea ngoikore (he uaua te ua), tirohia Murray (2006) . More te tikanga, homai he whakataki pai ki ngā taiao e Dunning (2012) , ia Rosenbaum (2002) , ( ??? ) , ko Shadish, Cook, and Campbell (2001) whakahere whakaaro pai e pā ana ki whakatau tata ngā pānga causal kahore ngā.
I te tikanga tuarua o te R ("whakahou"), he reanga ngaio me te waitohu i te wa e whakaaro ana ki te whakarereke i te hoahoa o te Contagion Whakaaro mai i te whakakore i nga pou ki te whakairi i nga pou. Hei tauira, pea pea ko te whakamahinga hangarau o te News Feed ka tino pai ake te mahi i tetahi whakamatautau ka tohua ai nga pou kaore i te kotahi e whakanuihia ana e ratou (tuhi ka taea te whakatinana i te whakamatautau mo te whakakore i nga pou hei papanga i runga ake o te Pūnaha Whāngai Pūrongo me te kore he hiahia mo te whakarereketanga o te pūnaha whakapapa). Heoi, ko te tikanga o te ariā e korerohia ana e te whakamatautau kihai i tino whakaatu tetahi hoahoa ki tetahi atu. Engari, kaore au i te mohio ki nga rangahau o mua i nga tikanga whanaungatanga o te whakakore me te whakanui i nga korero i roto i te News Feed. Waihoki, kaore au i kite i te rangahau nui mo te whakamahinga o nga maimoatanga kia kore ai e kino; Ko tetahi o nga take ko B. Jones and Feamster (2015) , e whakaarohia ana te take o te whakaoti i te whiwhinga Ipurangi (he kaupapa e korerohia ana e ahau i te upoko 6 mo te hononga ki te (Burnett and Feamster 2015; Narayanan and Zevenbergen 2015) ).
I roto i te tikanga o te R toru ("whakaiti"), ka hoatu e Cohen (1988) (pukapuka) me Cohen (1992) (tuhinga), he whakamatautau pai ki te whakamahinga mana tuku iho, a, ko Gelman and Carlin (2014) he tirohanga rereke. Ka taea te whakauru i nga waahi o mua i te maimoatanga i roto i te waahanga hoahoa me te waitohu o nga whakamatau; Ko te upoko 4 o Gerber and Green (2012) whakarato ana i te whakatairanga pai ki nga huarahi e rua, me Casella (2008) whakarato ana i te maimoatanga hohonu atu. Ko nga hangarau e whakamahi ana i nga korero o mua i te maimoatanga i roto i te matapōkereke e kiia ana ko nga mahinga whakamatautau i whakamutua ranei, ko nga hoahoa whakamātautau whaimana (kaore e whakamahia nga kupu i nga wa katoa ki nga hapori); he hononga tata enei tikanga ki nga whakamahinga tauira whakatairanga i whakahuahia i te upoko 3. Tirohia nga Higgins, Sävje, and Sekhon (2016) mo te whakamahi i enei hoahoa i roto i nga waahanga nui. Ka taea hoki te whakauru i nga waahi o mua-maimoatanga i roto i te waahanga tiri. McKenzie (2012) tirotiro i nga rereketanga-rereke-rereke ki te whakahāngai i nga whakamātautau ā-parae i roto i te taipitopito. Tirohia te Carneiro, Lee, and Wilhelm (2016) mo etahi atu korero mo nga hokohoko i waenganui i nga huarahi rereke hei whakanui ake i te tika i roto i nga whakaaro mo nga maimoatanga. Hei whakamutunga, ka whakatau ko te whakamatautau ki te whakauru i nga whakawhitinga o mua-maimoatanga i te hoahoa hoahoa ranei (e rua ranei), he maha nga take hei whakaaro. I te waahi e hiahia ana nga kairangahau ki te whakaatu ehara i te "hī ika" (Humphreys, Sierra, and Windt 2013) , ka taea te āwhina (Higgins, Sävje, and Sekhon 2016) . I nga waahi ka tae mai nga akonga, me nga whakaaturanga o te mararangi ipurangi, ma te whakamahi i nga korero o mua i te maimoatanga i te waahanga hoahoa he uaua ki te takiuru; tirohia, hei tauira, Xie and Aurisset (2016) .
He mea pai te whakauru i te ahua o te matauranga ki te aha ka rere ke atu te rereke-rere-rereke i te rereke-i-te tikanga kotahi. He maha nga putanga ipurangi he tino rereketanga (tirohia te RA Lewis and Rao (2015) me te Lamb et al. (2015) ), me te noho pai i te wa. I tenei wa, ka nui ake te rereke o te kaute huringa, ka piki ake te kaha o te whakamatautauranga tatauranga. Ko tetahi take kaore i te whakamahia i tenei waahanga ko te mea i mua atu i te tau mamati, kaore he mea noa ki te whai i nga hua o mua i te maimoatanga. Ko te huarahi tino pai ki te whakaaro mo tenei ko te whakaaroaro i te whakamatautau ki te whakarite mehemea he mahinga taumaha motuhake te pauna taimaha. Mena ka whakaaetia e koe he huarahi rereke-a-te-huarahi, ka puta he rereketanga o to whakatau ka puta mai i te rereketanga o nga pauna o te taupori. Ki te mahi koe i te rereke-rereke-rereke, engari, ka nekehia te rereketanga rereke i nga pauna, a ka taea e koe te kitea i te ahuatanga rereke i te maimoatanga.
I te mutunga, i whakaaro ahau ki te whakauru i te wha R: "repurpose". Koinei, ki te kimihia e nga kairangahau etahi raraunga whakamatautau kaore e hiahiatia ana e ratou ki te whakatutuki i ta ratou uiui rangahau taketake, me whakahoki ano nga raraunga hei uiui i nga patai hou. Hei tauira, whakaarohia kua whakamahia e Kramer me nga hoa mahi he rereketanga-i roto i te rereketanga rereketanga me te nui ake o nga raraunga i hiahiatia hei whakatutuki i ta raatau uiui rangahau. Engari i te kore e whakamahi i nga raraunga ki te waahanga nui, kua taea e ratou te ako i te rahi o te painga hei mahi mo te whakamaramatanga o te hinengaro i mua i te maimoatanga. Ka rite ki a Schultz et al. (2007) kitea he rereke te hua o te maimoatanga mo nga kaiwhakamahi marama me te taimaha, pea he rereke nga hua o te Whutupaoro News mo te hunga kua aro ki te tuku i nga karere koa (pouri ranei). Ka taea e te urupare ki te "hī ika" (Humphreys, Sierra, and Windt 2013) me te "p-hacking" (Simmons, Nelson, and Simonsohn 2011) , engari ko enei ko te nuinga o nga korero kaore e taea te korero (Simmons, Nelson, and Simonsohn 2011) , i mua i te rēhitatanga (Humphreys, Sierra, and Windt 2013) , me nga tikanga ako miihini e ngana ana ki te karo i te kore e pai.
