Faataua:
[ , ] Berinsky ma paaga (2012) i iloilo masini Turk vaega e replicating suesuega masani e tolu. Faaluaina le faataitaiga framing faamaʻi Asia masani e Tversky and Kahneman (1981) . Fai lau taunuuga afitusi a Tversky ma Kahneman? Fai lau taunuuga fetaui Berinsky ma uo? O le a-pe afai soo se mea-e aoaoina i tatou lenei e uiga i le faaaogaina o masini Turk mo suesuega suesuega?
[ , ] I se teisi laulaufaiva-i-alafau pepa faaautuina "Tatou e gauia i Luga," o le le mafaufau lautele Robert Cialdini, o se tasi o tusitala o Schultz et al. (2007) , na tusia e faapea sa ia litaea vave mai lana galuega o se polofesa, i le vaega ona o le luitau sa feagai le faia o suesuega o fanua i se aoaiga (mataupu tau le mafaufau) e mafua faatautaia suesuega lab (Cialdini 2009) . Faitau le pepa a Cialdini, ma tusi ia te ia se imeli uunaia o ia ina ia toe iloilo lona malologa-aʻe i le malamalama o le avanoa o suesuega faafuainumera. Faaaoga faataitaiga patino o suesuega e faailoa lona popolega.
[ ] Ina ia mafai ona iloa ai pe manuia uluai laiti loka-i totonu po mou ese, van de Rijt ma ma paaga (2014) faalavelave i faiga eseese e fa faaeeina atu o le manuia i le auai filifilia faafuasei, ona fuaina le aafiaga umi o lenei manuia soʻona faia. E mafai ona e mafaufau i nisi faiga lea e mafai ona e taufetuli suesuega faapena? Iloilo nei faiga i le tulaga o mataupu o le faasaienisi taua, confounding algorithmic (tagai i le Mataupu 2), ma amio taualoa.
[ , ] O le taunuuga o se suesuega e mafai ona faalagolago i luga o le auai. Fai se suesuega ma taufetuli i luga o le Amasone masini Turk (MTurk) faaaoga ia le fuafuaga e lua tofiga eseese. Taumafai e piki le fuafuaga faataitai ma faafaigaluegaina ina ia le taunuuga o le a avea e pei eseese e mafai ai. Mo se faataitaiga, e mafai ona avea i lau fuafuaga faafaigaluegaina faafaigaluegaina tagata auai i le taeao ma le afiafi po o le tauia tagata e auai i le totogi maualuga ma le maualalo. O nei ituaiga o eseesega i faafaigaluegaina fuafuaga e mafai ona taitai atu ai i lepa eseese o tagata auai ma taunuuga faataitai eseese. E faapefea ona eseese na liliu mai o outou taunuuga? O le a e faaali mai e uiga i tamoe suesuega i MTurk?
[ , , , ] Mafaufau faapea o loo e fuafuaina o le suesuega Faalelagona Contagion (Kramer, Guillory, and Hancock 2014) . Faaaoga le taunuuga mai se suesuega observational muamua e Kramer (2012) e filifili ai le aofai o tagata auai i tulaga taitasi. O nei suesuega e lua e le tutusa lelei ina ia mautinoa e lisi manino manatu uma e te faia:
[ , , , ] Tali le fesili i luga, ae nai lo le faaaogaina o suesuega observational muamua e Kramer (2012) faaaoga le taunuuga mai le tofotofo faalenatura muamua e Coviello et al. (2014) .
[ ] Uma Rijt et al. (2014) ma Margetts et al. (2011) faatino uma o suesuega e suesue i le faagasologa o le tagata le sainia o se talosaga. Faatusatusa ma faatusatusa le mamanu ma le mauaina o nei suesuega.
[ ] Dwyer, Maki, and Rothman (2015) faatautaia o suesuega lua fanua i le sootaga i le va o faiga masani faasosaiete ma amioga proenvironmental. O iinei le faamatalaga otooto o latou pepa:
"E mafai faapefea ona faaaogaina le faasaienisi mafaufau e uunaia ai amioga proenvironmental? I le lua suesuega, faauilavea faamoemoe i le uunaia o le malosi o amioga le faasaoina i bathrooms lautele suesueina le aafiaga o faiga masani e faamatalaina ma o le tiutetauave faaletagata. I le Suesuega 1, o le tulaga o le malamalama (ie, i luga po o ese) sa faaseseina i luma o ulu o se tasi se faletaele lautele unoccupied, signaling le faiga masani faamatalaina mo lena tulaga. sa matuai sili atu tagata e auai atonu e liliu ese moli afai latou ese pe a latou ulufale atu. I le Suesuega 2, na aofia ai se tuutuuga faaopoopo i ai le faiga masani o le liliu ese na faaalia ai le malamalama i seʻau, ae sa le i latou lava e nafa ma tagata o le vasega mo le liliu i ai. tiutetauave patino moderated le uunaiga a faiga masani faasosaiete i amioga; pe a na lē nafa sui auai o le liliu atu i le malamalama, na faaitiitia le aafiaga o le puleaina lelei. O nei taunuuga faailoa mai pe faapefea ona faamatalaina faiga masani ma o le tiutetauave faaletagata e mafai ona faatonutonu ai le tulaga o faauilavea proenvironmental. "
Faitau a latou pepa ma fuafuaina a replication o suesuega 1.
[ , ] Fausia i luga o le fesili muamua, lea ua tauaveina lou mamanu.
[ ] Sa i ai finauga tele e uiga i le suesuega e faaaoga auai faafaigaluegaina mai Amasone masini Turk. I le tutusa, o le ai foi finauga tele i ai e uiga i le suesuega e faaaoga auai faafaigaluegaina mai malaga le faitau aofai o le vasega. Tusi se puupuu e lua itulau faatusatusa ma eseese le Turkers ma undergraduates pei suesue auai. Lou faatusatusaga tatau ona aofia ai se talanoaga o mataupu uma faasaienisi ma logistical.
[ ] Tusi a Jim Manzi pulea (2012) o se faatomuaga matagofie i le mana o experimentation i pisinisi. I le tusi sa ia relayed lenei tala:
"Sa ou faatasi i se fonotaga ma se atamai moni pisinisi, a billionaire faia e le tagata lava ia o le na a loloto, understating tupu fua o le mana o le suesuega. faaaluina punaoa taua taumafai Lona kamupani e fatu faaaliga faamalama o le faleoloa tele o le a tosina mai tagata faatau ma faateleina le faatauina, o le poto e masani faapea ona tatau ai. Tagata tomai faapitoa faaeteete tofotofoina mamanu ina ua uma ona mamanu, ma i sauniga iloiloga suega tagata i se vaitaimi o le tausaga faaalia pea leai se taua aafiaga causal o mamanu faaaliga fou taitasi i luga o le faatauina. executives Sinia maketiina ma le faatauina feiloai ma le Ofisa Sili o Pulega e iloilo nei taunuuga o le suega i le talafaasolopito i le toto. Ina ua mavae le tuuina atu o le faamatalaga faataitai uma, latou faaiuina faapea, o le poto e masani sese-o le faamalama faaaliga te le aveina le faatauina. Latou gaoioiga fautuaina sa e faaitiitia ai tau ma taumafaiga i lenei eria. O lenei faaalia manino ai le tomai o experimentation e saʻe poto e masani ai. Sa faigofie le tali a le Ofisa Sili o Pulega: 'Loʻu faaiuga e faapea e le o lelei tele lau mamanu.' O lona fofo e faateleina taumafaiga i le faleoloa faaaliga fuafuaga, ma e maua ai tagata fou e fai ai. " (Manzi 2012, 158–9)
O le fea ituaiga o le aloaia o le popolega o le Ofisa Sili o Pulega?
[ ] Fausia i luga o le fesili muamua, mafaufau e te i ai i le fonotaga lea na talanoaina ai le taunuuga o le suesuega. A fa fesili e mafai ona e fesili atu, o le tasi mo le ituaiga o le aloaia taitasi (faafuainumera, fausia, le lotoifale, ma i fafo)?
[ ] Bernedo, Ferraro, and Price (2014) suesue le fitu tausaga aafiaga o le fesoasoaniga faaola vai faamatalaina i Ferraro, Miranda, and Price (2011) (tagai i le Ata 4.10). I lenei pepa, Bernedo ma paaga saili foi e malamalama ai i le auala i tua o le aafiaga, o le faatusatusaina o le amio o aiga o loo i ai ma aua le masiʻi ese ina ua uma ona tuuina atu le togafitiga. O lona uiga, pe tusa lea, sa latou taumafai e vaai pe o le togafitiga aafia ai le aiga po o le homeowner.
[ ] I se tulitatao e Schultz et al. (2007) , faia Schultz ma paaga se faasologa o suesuega e tolu i luga o le aafiaga o faiga masani e faamatalaina ma injunctive i se amioga o le siosiomaga eseese (solo toe faʻaaogā) i totonu lava e lua (a faletalimalo ma a condominium timeshare) (Schultz, Khazian, and Zaleski 2008) .
[ ] I le tali atu Schultz et al. (2007) , Canfield, Bruin, and Wong-Parodi (2016) tamoe se faasologa o lab-e pei o suesuega e suesue le mamanu o pili eletise. O le auala lenei latou faamatala i le faamatalaga otooto:
"I se suesuega faale-suesuega, sa vaai tagata auai taitoatasi se pili eletise hypothetical mo se aiga ma matua faaaogaina le eletise maualuga, e aofia ai faamatalaga e uiga i le (a) faaaogāina talafaasolopito, (b) faatusatusaga e tuaoi, ma le (c) le faaaogāina talafaasolopito ma malepelepe mea e alu. Auai vaai ituaiga faamatalaga uma i se tasi o le tolu mamanu e aofia ai le (a) laulau, (b) paraka- pa, ma le (c) paraka- faailoga. Tatou lipoti i le tolu sailiiliga autu. Muamua, o tagata faatau malamalama i ituaiga taitasi o faamatalaga eletise le faaaogaina sili ona le taimi na tuuina atu i se laulau, atonu ona laulau faafaigofie faitau tulaga faigofie. Lona lua, e fiafia ma faanaunauga e laveai le eletise sa le malosi mo faamatalaga i le faaaogaina o talafaasolopito, tutoatasi o le faatulagaga. Lona tolu, o tagata taitoatasi ma tusitusi malosi maualalo malamalama faamatalaga uma itiiti. "
E le pei o isi tulitatao suesuega, o le taunuuga autu o aia i Canfield, Bruin, and Wong-Parodi (2016) ua lipotia le amioga moni amioga. O a ni malosiaga ma vaivaiga o lenei ituaiga o suesuega i totonu o se polokalama o suesuega lautele le uunaia o tupe teu malosi?
[ , ] Smith and Pell (2003) o se satirical meta-auiliiliga o suesuega faatino ai le aoga o palasuti. Latou faaiu:
"A o le tele o aafiaga o faamoemoe e puipuia ai le soifua maloloina maʻi, o le aoga o palasuti e le i noatia i iloiloga faigata i le faaaogaina randomized tofotofoga pulea. ua faitioina e lagolagoina o faamatalaga molimau vailaau e faavae i le vaetamaina o faauilavea iloiloina e ala i le faaaogaina o na faamatalaga observational. Tatou te manatu e ono aoga ia tagata uma pe afai o le sili ona māeʻa protagonists o faamatalaga molimau vailaau faavae faatulagaina ma auai i se tauaso lua, randomized, placebo pulea, tofotofoga crossover o le parasiute. "
Tusi se op-ed talafeagai mo se nusipepa readership aoao, e pei o le Times Niu Ioka, finau e faasaga i le fetishization o faamatalaga molimau faataitai. Tuuina patino, faataitaiga sima. Faaiteite: Tagai foi, Bothwell et al. (2016) ma Deaton (2010)
[ , , ] Eseesega-i-eseesega e mafai ona sili tonu estimators o se aafiaga togafitiga nai lo eseesega-i-le uiga estimators. Tusi a puupuu i se enisinia i moliaga o le A / B suʻega i se amataga-ae kamupani ala o faasalalauga faaleagafesootai e faamatala ai le taua o le eseesega-i-eseesega o auala mo le faafoeina se suesuega i le initoneti. O le puupuu e tatau ona aofia ai se faamatalaga o le faafitauli, o nisi o le lagona e uiga i le tulaga i lalo o le eseesega-i-eseesega estimator a outperform le eseesega-i-le uiga estimator, ma se suesuega faigofie faatupu.
[ , ] Gary Loveman o se polofesa i le Aoga Faapisinisi a Harvard ao leʻi avea le Ofisa Sili o Pulega o le Harrah, o se tasi o le kamupani kasino aupito sili ona tele i le lalolagi. Ina ua siitia atu o le Harrah, suia Loveman le kamupani i se polokalama o le faamaoni flier-e pei o soo o le aoina aofaiga tele o faamatalaga e uiga i amioga tagata e faaaogāina auaunaga. I le pito i luga o lenei i taimi uma-i luga o faiga fua, sa amata ona tamoe le kamupani o suesuega. Mo se faataitaiga, atonu latou te taufetuli le tofotofo e iloilo le aafiaga o le a coupon mo se po faletalimalo saoloto mo tagata e faaaogāina auaunaga i se mamanu taaloga faitupe patino. O le auala lenei o loo faamatalaina le Loveman taua o experimentation i faiga pisinisi i aso taitasi a le Harrah:
"E pei e te le lutia o tamaitai, e te le gaoi, ma ua e maua i ai o se vaega pulea. O le tasi lenei o mea e mafai ona e maua lau galuega mo le i Harrah's-e tamoe a vaega pulea. " (Manzi 2012, 146)
Tusi se imeli i se tagata faigaluega fou e faamatala pe aisea ua manatu Loveman ai e taua tele le i ai o se vaega pulea. E tatau ona e taumafai e aofia ai se faataitaiga-pe moni po o faia aʻe-e faailoa atu lou manatu.
[ , ] O se faataitaiga fou faamoemoe e faatatau i le aafiaga o le mauaina o faamanatu savali mau i uptake tui. 150 ofisa, taitasi i le 600 gasegase agavaa, naunau e auai. E i ai se faatulagaina tau o le 100 tala Amerika mo falemaʻi taitasi e te manao e galulue faatasi, ma aveesea ai 1 tala mo savali mau taitasi e te manao e auina atu. Gata i lea, o so o se ofisa o loo galulue faatasi ma le a fuaina le taunuuga (pe maua se a tui) mo saoloto. Faapea ai se tala o le tupe o le 1000 tala.
[ , ] O se faafitauli tele i le vasega i le initoneti o attrition; le tele o tamaiti o le vasega amata vasega iu pau atu. Seʻi faapea o loo e galue i se tulaga e aoao ai i le initoneti, ma a mamanuina i ua foafoaina o le tulaga a pa alualu i luma vaaia e ia manatu o le a fesoasoani taofia ai tamaiti aoga mai le pau atu o le ala. E te manao e tofotofo le aafiaga o le alualu i luma pa i tamaiti o le vasega i se ala saienisi lautele tele computational. Ina ua uma ona lauga atu o so o se mataupu o le tauleleia e ono tulai mai i le faataitaiga, o oe ma maua popole lou aumea e faapea o le ala e mafai ona le lava le vasega e iloa faalagolago le aafiaga o le taofia le alualu i luma. I le fuafuaga o loo i lalo e mafai ona e manatu faapea o le afa o tamaiti o le vasega o le a mauaina le alualu i luma pa ma le afa le. Gata i lea, e mafai ona e manatu e leai se faalavelave. I se isi faaupuga, e mafai ona e manatu e faapea ua na o aafia ai tagata o le vasega e tusa lava pe ua latou maua le togafitiga po o le pulea; e le o aloaia i latou e pe isi tagata maua le togafitiga po o pulea (mo a sili atu le faamatalaga aloaia, tagai Gerber and Green (2012) , Ch. 8). Faamolemole siaki o so o se manatu faaopoopo e te faia.
[ , ] I se pepa matagofie, Lewis and Rao (2015) manino faaalia ai se tapulaa faafuainumera faavae o lava suesuega maoae. O le pepa-lea na mafua mai i le igoa faʻatupu "I le latalata-faigata na Fuaina o le toe faafoi e Faasalalauina" -shows le faigata o le fua o le toe foi i luga o tupe teu faafaigaluega o faasalalauga i le initoneti, e oo lava i suesuega faafuainumera e aafia ai le faitau miliona o tagata e faaaogāina auaunaga. Sili masani, o loo faaalia manino ai le pepa e faapea e faigata ona fuafua laiti aafiaga togafitiga lotolotoi faamatalaga pisapisao taunuuga. Pe taua diffently, o loo faaalia i le pepa o le a ua fuafuaina aafiaga togafitiga vaitaimi mautinoa tele pe a le aafiaga i lea tulaga-le faatafa ese (\ (\ frac {\ Delta \ pa {y}} {\ sigma} \)) Fua Faatusatusa o laiti. O le lesona aoao o taua mai i lenei pepa, o le taunuuga mai suesuega ma laiti aafiaga-e-tulaga faatonuina-palasi Fua Faatusatusa (eg, ROI o faatosinaga TA) o le a le faamalieina. o le a avea i Lou luitau tusi a puupuu i se tasi i le matagaluega o le maketiina o lou kamupani evaluting se suesuega fuafuaina e fua ai le ROI o se tauiviga le ta. E tatau ona lagolagoina lou puupuu ma le paraka- o le taunuuga o simulations komepiuta.
O le faamatalaga o nisi faamatalaga e te ono manaomia. O nei tulaga faatauaina o fuainumera uma e masani ai o le suesuega moni lipotia i Lewis and Rao (2015) :
ROI, se nati ki mo faatosinaga initoneti TA, ua faamatalaina e avea ma tupe faasili mai le tauiviga (atoa tupe mama mai tauiviga tau o tauiviga minus) vaevaeina e le tau o le tauiviga. Mo se faataitaiga a tauiviga e leai se aafiaga i luga o le faatauina o le a maua se ROI o -100% ma se tauiviga lea sa tutusa tupe mama faatupulaia e tau o le a maua se ROI o 0.
le faatauina uiga i le tagata e faaaogāina auaunaga e $ 7 i se palasi tulaga o le $ 75.
E faamoemoe i le taumafaiga e faateleina ai le faatauina atu i le $ 0,35 i le tagata e faaaogāina auaunaga e tutusa ma se faateleina o le tupe mama o le $ 0,175 i le tagata e faaaogāina auaunaga. I se isi faaupuga, o le tapulaa atoa o le 50%.
o le 200,000 tagata o le fuafuaina tele o le suesuega, o le afa i le vaega o togafitiga ma le afa i le vaega pulea.
le tau o le tauiviga e $ 0,14 i le tagata auai.
Tusi a puupuu evaluting lenei faataitaiga. Pe e te fautuaina le tuuvaa lenei faataitaiga e pei ona fuafuaina? Afai o lea, aisea? Afai e leai, o le a suiga e te fautuaina?
o le a saunoa A puupuu lelei lenei tulaga patino; a generalize a puupuu sili atu mai lenei tulaga i se auala se tasi (eg, faaalia ai le suiga faaiuga o se galuega tauave a le aafiaga i lea tulaga-le faatafa ese le fua faatusatusa); ma o le a tuuina atu se taunuuga atoatoa generalized puupuu tele.
[ , ] Pe le lava lea e tasi e pei o le fesili muamua, ae nai lo le faatupu e tatau ona e faaaogaina taunuuga analytic.
[ , , ] Pe le lava lea e tasi e pei o le fesili muamua, ae faaaoga taunuuga uma faatupu ma analytic.
[ , , ] Seʻi faapea ua e tusia le puupuu faamatalaina i luga-e faaaoga pe faatupu manatu, taunuuga analytic, po o faasalaga uma e lua-ma o se tasi mai le matagaluega o le maketiina pepa faataga e faaaoga ai se eseesega-i-eseesega estimator nai lo se eseesega i auala estimator (tagai i le fuaiupu 4.6.2) . Tusi a puupuu puupuu fou faamatala pe faapefea ona a 0.4 faamaopoopoga i le va o le faatauina atu i luma o le faataitaiga ma le faatauina tuanai ai o le suesuega o le a suia lau faaiuga.
[ , ] Ina ia iloiloina le aoga o se auaunaga galuega faale-web fou, faia o se ofisa o auaunaga galuega iunivesite a faamasinoga pulea randomized i le 10,000 tamaiti aoga le ulufale atu i lo latou tausaga mulimuli o le aoga. A saofaga saoloto ma laau-i le tulaga ese o faamatalaga na auina mai e ala i se valaaulia imeli faapitoa i le 5,000 o tamaiti aoga filifilia soo, ao le isi i le 5,000 tamaiti ua i ai i le pulea vaega ma e leai se saofaga. Toasefululua masina mulimuli ane, o se suesuega tulitatao (e leai se lē tali) o loo faaalia e le gata i le togafitiga ma le vaega e pulea, 70% o tamaiti o le vasega ua maua se galuega faamisiona i latou filifilia fanua (Pusa 4.5). O lea la, e foliga mai e leai se aafiaga o le auaunaga faale-web.
Ae peitai, o se saienitisi faamatalaga poto i le iunivesite tilotilo i le faamatalaga a si sili atu ona vavalalata ma iloa ai e na o le 20% o tamaiti aoga i le vaega o togafitiga lava logged i le tala ina ua mavae le mauaina o le imeli. Gata i lea, ma teisi mea e ofo ai, ia i latou oe ua logged i le website na o le 60% na maua se galuega faamisiona i lo latou fanua filifilia, lea e maualalo ifo nai lo le fua faatatau mo tagata e leʻi tusi faʻamau i ma maualalo ifo nai lo le fua faatatau mo tagata i le tulaga pulea (Pusa 4.6).
Faaiteite: O lenei fesili e alu i tua atu o le mea o loo i totonu o lenei mataupu, ae lauga mataupu taatele i suesuega. O lenei ituaiga o mamanu faataitai ua taʻua i nisi taimi se mamanu faamalosiauga ona e fautuaina tagata o le vasega e auai i le togafitiga. O lenei faafitauli o se faataitaiga o mea ua taʻua o le lē tausisia o le tasi itu-(tagai Gerber and Green (2012) , Ch 5.)
[ ] Ina ua mavae le isi suesuega, o le liliu atu sa sili atu ona faigata le faataitaiga o loo faamatalaina i le fesili muamua. E liliu atu o le 10% o le tagata i le vaega o pulea e totogi mo le avanoa i le auaunaga, ma latou iu i se fua faatatau o galuega o le 65% (Pusa 4.7).
Faaiteite: O lenei fesili e alu i tua atu o le mea o loo i totonu o lenei mataupu, ae lauga mataupu taatele i suesuega. O lenei faafitauli o se faataitaiga o mea ua taʻua o le lē usitaia e itu-lua (tagai Gerber and Green (2012) , Ch 6.)
vasega | fua | fua faatatau galuega |
---|---|---|
Tuuina atu le avanoa i website | 5,000 | 70% |
E tuuina atu le avanoa i website | 5,000 | 70% |
vasega | fua | fua faatatau galuega |
---|---|---|
Tuuina atu le avanoa i website ma logged i | 1,000 | 60% |
Tuuina atu le avanoa i website ma lava logged i | 4,000 | 85% |
E tuuina atu le avanoa i website | 5,000 | 70% |
vasega | fua | fua faatatau galuega |
---|---|---|
Tuuina atu le avanoa i website ma logged i | 1,000 | 60% |
Tuuina atu le avanoa i website ma lava logged i | 4,000 | 72,5% |
E tuuina atu le avanoa i website ma totogi ai | 500 | 65% |
E tuuina atu le avanoa i website ma e leʻi totogiina | 4,500 | 70,56% |