2.4.3 eksperyans apwoksimativman

Nou ka apwoksimatif eksperyans ke nou pa gen oswa pa ka fè. De apwòch ki espesyalman benefisye de sous done gwo yo se eksperyans natirèl ak matche.

Kèk enpòtan syantifik ak politik kesyon yo se kozatif. Pou egzanp, ki efè yon pwogram fòmasyon travay sou salè? Yon chèchè eseye reponn kesyon sa a ta ka konpare salè yo nan moun ki te siyen pou fòmasyon bay moun ki pa t '. Men, ki jan anpil nan nenpòt diferans nan salè ant gwoup sa yo se paske nan fòmasyon an ak konbyen se paske nan diferans ki genyen ant diferan moun ki enskri ak moun ki pa fè sa? Sa a se yon kesyon difisil, epi li se youn ki pa otomatikman ale ak plis done. Nan lòt mo, enkyetid la sou diferans ki genyen ant diferan posib rive pa gen pwoblèm konbyen travayè yo nan done ou.

Nan anpil sitiyasyon, fason ki pi fò pou estime efè a kozatif nan kèk tretman, tankou fòmasyon travay, se kouri yon eksperyans kontwole owaza kote yon chèchè odyo delivre tretman an nan kèk moun epi yo pa lòt moun. Mwen pral konsakre tout chapit 4 nan eksperyans, se konsa isit la mwen pral konsantre sou de estrateji ki ka itilize ak done ki pa eksperimantal. Estrateji an premye depann sou kap chèche yon bagay k ap pase nan mond lan ki owaza (oswa prèske owaza) asiyen tretman an nan kèk moun epi yo pa lòt moun. Dezyèm estrateji a depann de estatistik ajiste done ki pa eksperimantal nan yon tantativ pou kont li pou diferans ki genyen ant antik ki te fè ak pa t 'resevwa tretman an.

Yon dout ta ka reklame ke yo ta dwe evite tou de nan estrateji sa yo paske yo bezwen sipozisyon fò, sipozisyon ki difisil pou evalye e ke, an pratik, yo souvan vyole. Pandan ke mwen se senpatik sa a reklamasyon, mwen panse ke li ale yon ti jan twò lwen. Li se sètènman vrè ke li difisil a fiable fè estimasyon kozatif soti nan done ki pa eksperimantal, men mwen pa panse ke sa vle di ke nou pa ta dwe janm eseye. An patikilye, apwòch ki pa eksperimantal ka itil si kontrent lojistik anpeche ou fè yon eksperyans oswa si kontrent etik vle di ke ou pa vle kouri yon eksperyans. Pli lwen, apwòch ki pa eksperimantal ka itil si ou vle pran avantaj de done ki deja egziste nan lòd yo desine yon eksperyans kontwole owaza.

Anvan pwosedi, li se tou vo anyen ki fè estimasyon kozatif se youn nan sijè ki pi konplèks nan rechèch sosyal, ak yon sèl ki ka mennen nan deba entans ak emosyonèl. Nan sa ki swiv, mwen pral bay yon deskripsyon optimis nan chak apwòch yo nan lòd yo bati entwisyon sou li, Lè sa a, mwen pral dekri kèk nan defi yo ki leve lè w ap itilize apwòch sa a. Plis detay sou chak apwòch disponib nan materyèl yo nan fen chapit sa a. Si ou planifye pou itilize swa nan apwòch sa yo nan rechèch pwòp ou a, mwen trè rekòmande pou li youn nan liv yo anpil ekselan sou enferans kozatif (Imbens and Rubin 2015; Pearl 2009; Morgan and Winship 2014) .

Yon apwòch pou fè estimasyon kozatif soti nan done ki pa eksperimantal se gade pou yon evènman ki te owaza asiyen yon tretman nan kèk moun epi yo pa bay lòt moun. Sitiyasyon sa yo rele eksperyans natirèl . Youn nan egzanp ki klè nan yon eksperyans natirèl soti nan rechèch la nan Joshua Angrist (1990) mezire efè a nan sèvis militè sou salè. Pandan lagè a nan Vyetnam, Etazini ogmante gwosè fòs ame li yo nan yon bouyon. Yo nan lòd yo deside ki sitwayen yo ta dwe rele nan sèvis, gouvènman ameriken an te fè yon lotri. Chak dat nesans te ekri sou yon moso papye, epi, jan yo montre nan figi 2.7, yo te chwazi moso papye sa yo nan yon moman pou detèmine lòd la kote jèn yo ta dwe rele pou sèvi (jèn fanm yo pa te sijè nan bouyon an). Ki baze sou rezilta yo, gason ki te fèt sou 14 septanm yo te rele premye, gason ki te fèt sou 24 avril yo te rele dezyèm, ak sou sa. Finalman, nan lotri sa a, gason ki te fèt sou 195 jou diferan yo te tire, pandan y ap moun ki fèt sou 171 jou yo pa t '.

Figi 2.7: Kongrèman Alexander Pirnie (R-NY) desen kapsil premye pou Sèvis Sèvis Selektif la nan dat 1ye desanm 1969. Joshua Angrist (1990) konbine lotri bouyon an avèk done salè nan Administrasyon Sekirite Sosyal pou estime efè sèvis militè sou salè. Sa a se yon egzanp nan rechèch lè l sèvi avèk yon eksperyans natirèl. Sous: US Sistèm Sèvis Selektif (1969) / Wikimedia Commons .

Malgre ke li pa ta ka imedyatman aparan, yon lotri bouyon gen yon resanblans kritik nan yon eksperyans kontwole owaza: nan tou de sitiyasyon, patisipan yo owaza asiyen yo resevwa yon tretman. Pou etidye efè tretman o aza, Angrist te pran avantaj de yon gwo sistèm done toujou: US Administrasyon Sekirite Sosyal, ki kolekte enfòmasyon sou nòmalman tout salè Ameriken an nan travay. Lè yo konbine enfòmasyon sou ki moun ki te chwazi owaza nan lotri bouyon an ak done salè ki te ranmase nan dosye administratif gouvènman an, Angrist konkli ke salè veteran yo te apeprè 15% mwens pase salè ki pa veteran ki konparab.

Kòm egzanp sa a montre, pafwa sosyal, politik oswa fòs natirèl bay tretman nan yon fason ki ka exploiter pa chèchè, epi pafwa efè tretman sa yo yo te kaptire nan toujou-sou sous done gwo. Estrateji rechèch sa a ka rezime jan sa a: \[\text{random (or as if random) variation} + \text{always-on data} = \text{natural experiment}\]

Pou ilistre estrateji sa a nan laj dijital la, ann konsidere yon etid pa Alexandre Mas ak Enrico Moretti (2009) ki te eseye estime efè a nan travay ak kòlèg pwodiktif sou pwodiktivite travayè a. Anvan yo wè rezilta yo, li vo montre ke gen konfli ap atann ke ou ta ka genyen. Sou yon bò, ou ta ka atann ke travay ak kòlèg pwodiktif ta mennen yon travayè ogmante pwodiktivite li paske yo te presyon kanmarad. Oswa, nan lòt men an, ou ta ka atann ke gen kanmarad difisil-ap travay ka mennen yon travayè kanson nan, paske travay la pral fè pa kamarad klas li de tout fason. Fason ki pi klè pou etidye efè kanmarad yo sou pwodiktivite ta dwe yon eksperyans kontwole owaza kote travayè yo asiyen nan orè ak travayè nan nivo pwodiktivite diferan epi lè sa a pwodiktivite ki lakòz yo mezire pou tout moun. Chèchè, sepandan, pa kontwole orè a nan travayè yo nan nenpòt ki biznis reyèl, e konsa Mas ak Moretti te dwe konte sou yon eksperyans natirèl ki enplike Kesye nan yon makèt.

Nan sa a makèt an patikilye, paske nan fason ki orè te fè ak fason ki orè sipèpoze, chak kesye te diferan ko-travayè nan diferan moman nan jounen an. Pli lwen, nan sa a makèt an patikilye, plasman nan Kesye te gen rapò ak pwodiktivite nan kamarad klas yo oswa ki jan okipe magazen an te. Nan lòt mo, menm si orè a nan kesye pa te detèmine pa yon lotri, li te tankou si travayè yo te pafwa owaza asiyen nan travay ak segondè (oswa ki ba) kamarad pwodiktivite. Erezman, sa a makèt tou te gen yon sistèm kesye dijital-laj ki swiv atik yo ke chak kesye te optik nan tout fwa. Soti nan done sa a boutèy kesye, Mas ak Moretti yo te kapab kreye yon egzak, endividyèl, ak toujou-sou mezi pwodiktivite: nimewo a nan atik tcheke pou chak dezyèm fwa. Konbine de bagay sa yo-varyasyon nan natirèlman nan pwodiktivite kanmarad ak mezi a toujou-sou pwodiktivite-Mas ak Moretti estime ke si yo te yon kesye asiyen ko-travayè ki te 10% pi pwodiktif pase mwayèn, pwodiktivite li ta ogmante pa 1.5% . Anplis de sa, yo te itilize gwosè a ak richès nan done yo nan eksplore de pwoblèm enpòtan: eterogeneite a nan efè sa a (Pou ki kalite travayè se efè a pi gwo?) Ak mekanis yo dèyè efè a (Poukisa gen kamarad segondè-pwodiktivite mennen nan pi wo pwodiktivite?). Nou pral retounen nan de pwoblèm sa yo enpòtan-eterozite nan efè tretman ak mekanism-nan chapit 4 lè nou diskite eksperyans nan plis detay.

Jeneralize nan de etid sa yo, tablo 2.3 rezime lòt etid ki gen menm estrikti sa a: lè l sèvi avèk yon sous-toujou sou done ki mezire efè kèk varyasyon o aza. Nan pratik, chèchè yo itilize de estrateji diferan pou jwenn eksperyans natirèl, tou de nan yo ki ka fè anpil pitit. Gen kèk chèchè kòmanse ak yon sous toujou-sou done epi gade pou evènman o aza nan mond lan; lòt moun kòmanse yon evènman o aza nan mond lan epi gade pou sous enfòmasyon ki kaptire enpak li yo.

Nan diskisyon an byen lwen tèlman sou eksperyans natirèl, mwen te kite yon pwen enpòtan: ale nan sa ki nati te bay sa ou vle ka pafwa gen byen difisil. Ann retounen nan egzanp lan bouyon Vyetnam. Nan ka sa a, Angrist te enterese nan estime efè a nan sèvis militè sou salè. Malerezman, sèvis militè pa te asiyen owaza; Olye ke li te ke yo te tire ke yo te owaza asiyen. Sepandan, se pa tout moun ki te ekri te sèvi (te gen yon varyete de egzanpsyon), epi se pa tout moun ki te sèvi te tire (moun te kapab sèvi kòm volontè sèvi). Paske ke yo te ekri te owaza asiyen, yon chèchè ka estime efè a pou yo te tire pou tout moun nan bouyon an. Men, Angrist pa t 'vle konnen efè a pou yo te tire; li te vle konnen efè a nan sèvi nan militè an. Pou fè estimasyon sa a, sepandan, sipozisyon adisyonèl ak konplikasyon yo nesesè. Premyèman, chèchè yo bezwen asime ke wout la sèlman ke yo te ekri salè afekte se nan sèvis militè yo, yon sipozisyon ki rele restriksyon an esklizyon . Sipozisyon sa a ta ka mal si, pou egzanp, gason ki te ekri te rete nan lekòl ki pi long nan lòd pou fè pou evite sèvi oswa si patwon yo te gen mwens chans anboche moun ki te tire. An jeneral, restriksyon nan esklizyon se yon sipozisyon kritik, epi li se anjeneral difisil yo verifye. Menm si restriksyon nan esklizyon ki kòrèk, li toujou enposib estimasyon efè a nan sèvis sou tout moun. Olye de sa, li vire soti ke chèchè ka sèlman estime efè a sou yon subset espesifik nan moun yo rele konpliman (gason ki ta sèvi lè ekri, men pa ta sèvi lè yo pa ekri) (Angrist, Imbens, and Rubin 1996) . Konplè, sepandan, pa t 'popilasyon orijinal la nan enterè yo. Remake ke pwoblèm sa yo rive menm nan ka a relativman pwòp nan lotri a bouyon. Yon lòt seri konplikasyon ki rive lè tretman an pa asiyen pa yon lotri fizik. Pou egzanp, nan etid Mas ak Moretti nan kesye, kesyon anplis rive sou sipozisyon an ki plasman nan kamarad se esansyèlman o aza. Si sa a sipozisyon te fòtman vyole, li ta ka patipri estime yo. Pou konklizyon, eksperyans natirèl kapab yon estrateji pwisan pou fè estimasyon kozatif nan done ki pa eksperimantal, ak gwo done sous ogmante kapasite nou yo kapitalize sou eksperyans natirèl yo lè yo rive. Sepandan, li pwal pwobableman mande gwo swen-epi pafwa fò sipozisyon-yo ale nan sa ki nati te bay estimasyon an ke ou vle.

Dezyèm estrateji mwen ta renmen di ou sou pou fè estimasyon kozatif soti nan done ki pa eksperimantal depann sou statistikman ajiste done ki pa eksperimantal nan yon tantativ pou kont pou diferans ki genyen ant diferan ki moun ki te fè epi yo pa t 'resevwa tretman an. Gen anpil apwòch ajisteman sa yo, men mwen pral konsantre sou yon sèl ki rele matche . Nan matche, chèchè a sanble nan done ki pa eksperimantal yo kreye pè moun ki sanble san ke yon sèl te resevwa tretman an ak yon sèl pa gen. Nan pwosesis la nan matche, chèchè yo aktyèlman tou koupe ; se sa ki, jete ka kote pa gen okenn matche ak evidan. Se konsa, metòd sa a ta gen plis presizyon rele matche-ak-koupe, men mwen pral bwa ak tèm nan tradisyonèl: matche.

Yon egzanp pouvwa a nan matche estrateji ak sous masiv ki pa eksperimantal sous soti nan rechèch sou konpòtman konsomatè pa Liran Einav ak kòlèg li (2015) . Yo te enterese nan rancher ap pran plas sou be, ak nan ki dekri travay yo, mwen pral konsantre sou efè a nan pri vann piblik kòmanse sou rezilta vann piblik, tankou pri vant lan oswa pwobabilite pou yon sale.

Fason ki pi nayif yo estime efè a nan kòmanse pri sou pri vant ta dwe tou senpleman kalkile pri final la pou launcher ak diferan pri kòmanse. Apwòch sa a ta bon si ou te vle predi pri vant lan bay pri a kòmanse. Men, si kesyon ou konsène efè a nan pri a kòmanse, Lè sa a, apwòch sa a pa pral travay paske li pa baze sou konparezon ki jis; rancher yo ak pi ba pri kòmanse ta ka byen diferan de moun ki gen pi wo kòmanse pri (egzanp, yo ta ka pou diferan kalite machandiz oswa gen ladan diferan kalite vandè).

Si ou deja okouran de pwoblèm yo ki ka rive lè yo fè estimasyon kozatif nan done ki pa eksperimantal, ou ta ka sote apwòch la nayif epi konsidere kouri yon eksperyans jaden kote ou ta vann yon atik espesifik-di, yon klib gòlf-ak yon fiks mete nan vann piblik paramèt-di, gratis anbakman ak vann piblik ouvè pou de semèn-men ak owaza asiyen pri kòmanse. Pa konpare rezilta mache yo ki te lakòz, eksperyans sa a jaden ta ofri yon mezi trè klè nan efè a nan kòmanse pri sou pri vant. Men, mezi sa a ta sèlman aplike nan yon sèl pwodwi patikilye ak mete nan paramèt vann piblik. Rezilta yo ta ka diferan, pou egzanp, pou diferan kalite pwodwi. San yo pa yon teyori fò, li difisil pou ekstrapolan de eksperyans sa a sèl nan seri a plen nan eksperyans posib ki te kapab kouri. Pli lwen, eksperyans jaden yo ase chè ke li ta enfasibl nan kouri tout varyasyon ke ou ta ka vle eseye.

Nan contrast ak apwòch yo nayif ak eksperimantal, Einav ak kòlèg li yo te pran yon apwòch twazyèm: matche. Trick prensipal la nan estrateji yo se dekouvri bagay ki sanble ak eksperyans jaden ki te deja rive sou be. Pou egzanp, figi 2.8 montre kèk nan 31 lis yo pou egzakteman klib la gòlf menm-yon Taylormade Burner 09 chofè-yo te vann pa egzakteman menm vandè- "bidjègolfer la." Sepandan, 31 lis sa yo gen karakteristik diferan yon ti kras, tankou diferan kòmanse pri, dat fen, ak frè anbake. Nan lòt mo, li se tankou si "budgetgolfer" ap kouri eksperyans pou chèchè yo.

Lis sa yo nan Taylormade Burner 09 chofè a yo te vann pa "bidjègolfer" se yon egzanp nan yon seri matche nan lis, kote yo egzak menm bagay la yo te vann pa vandè egzak la menm, men chak fwa ak karakteristik yon ti kras diferan. Nan mòso bwa yo masiv nan eBay gen literalman dè santèn de milye de ansanm matche ki enplike dè milyon de lis. Se konsa, olye ke konpare pri final la pou tout rancher ak yon pri yo te kòmanse, Einav ak kòlèg li konpare nan matche matche. Yo nan lòd yo konbine rezilta ki soti nan konparezon yo nan sa yo dè santèn de milye de ansanm matche, Einav ak kòlèg li re-eksprime pri a kòmanse ak pri final an tèm de valè referans nan chak atik (egzanp, pri mwayèn sale li yo). Pa egzanp, si Taylormade Burner 09 chofè a te gen yon valè referans nan $ 100 (ki baze sou lavant li yo), Lè sa a, yon pri kòmanse $ 10 ta dwe eksprime kòm 0.1 ak yon pri final de $ 120 kòm 1.2.

Figi 2.8: Yon egzanp yon seri matche. Sa a se egzak menm klib gòlf la (yon Taylormade Burner 09 chofè) yo te vann pa egzak menm moun nan ("budgetgolfer"), men kèk nan sa yo lavant yo te fè anba kondisyon diferan (egzanp, diferan kòmanse pri). Repwodui pa pèmisyon soti nan Einav et al. (2015) , figi 1b.

Sonje byen, Einav ak kòlèg li te enterese nan efè a nan pri kòmanse sou rezilta vann piblik. Premyèman, yo itilize lineyè regression pou estime ke pi wo pri kòmanse diminye pwobabilite yon vant, e ke pi wo pri kòmanse ogmante pri vant lan final (kondisyonèl sou yon sale ki rive). Pa tèt yo, sa yo estime-ki dekri yon relasyon lineyè ak yo mwayenn sou tout pwodwi-yo pa tout sa ki enteresan. Lè sa a, Einav ak kòlèg yo te itilize gwosè a masif nan done yo yo kreye yon varyete de plis estimasyon sibtil. Pou egzanp, pa estimasyon efè a separeman pou yon varyete de diferan pri kòmanse, yo te jwenn ke relasyon ki genyen ant kòmanse pri ak pri sale se nonlinear (figi 2.9). An patikilye, pou kòmanse pri ant 0.05 ak 0.85, pri a kòmanse gen anpil ti enpak sou pri sale, yon konklizyon ki te konplètman rate pa analiz premye yo. Pli lwen, olye ke moyenne sou tout bagay, Einav ak kòlèg yo estime enpak la nan kòmanse pri pou 23 kategori diferan nan atik (egzanp, founiti bèt kay, elektwonik, ak espò souvni) (figi 2.10). Estimasyon sa yo montre ke pou plis diferan atik-tankou pri memorabili-kòmanse gen yon efè ki pi piti sou pwobabilite yon sale ak yon efè pi gwo sou pri vant lan final la. Pli lwen, pou plis bagay komodifye-tankou DVD-pri a kòmanse gen prèske pa gen okenn enpak sou pri final la. Nan lòt mo, yon mwayèn ki konbine rezilta ki soti nan 23 kategori diferan nan atik kache diferans enpòtan ant bagay sa yo.

Figi 2.9: Relasyon ant pri vant vann piblik ak pwobabilite yon sale (a) ak pri vant (b). Gen apeprè yon relasyon lineyè ant kòmanse pri ak pwobabilite nan vant, men yon relasyon ki pa liy ant pri kòmanse ak pri vant; pou kòmanse pri ant 0.05 ak 0.85, pri a kòmanse gen anpil ti enpak sou pri vant. Nan de ka, relasyon yo se fondamantalman endepandan de valè atik. Adapte soti nan Einav et al. (2015) , figi 4a ak 4b.

Figi 2.10: Estimasyon ki soti nan chak kategori atik; Dot la solid se estimasyon an pou tout kategori pisin ansanm (Einav et al. 2015) . Sa yo estime montre ke pou plis diferan atik - tankou memorabili-pri a kòmanse gen yon efè ki pi piti sou pwobabilite yon sale ( \(x\) -aks) ak yon efè pi gwo sou pri vant lan final ( \(y\) -aksi). Adapte soti nan Einav et al. (2015) , figi 8.

Menm si ou pa patikilyèman enterese nan launcher sou eBay, ou gen admire wout la ki figi 2.9 ak figi 2.10 ofri yon konpreyansyon pi rich nan eBay pase estimasyon senp ki dekri yon relasyon lineyè ak konbine anpil kategori diferan nan atik yo. Pli lwen, byenke li ta syantifikman posib jenere estimasyon sa yo plis sibtil ak eksperyans jaden, pri a ta fè eksperyans sa yo esansyèlman enposib.

Menm jan ak eksperyans natirèl, gen yon kantite fason ki matche ka mennen nan estime move. Mwen panse ke enkyetid nan pi gwo ak matche estime se yo ke yo ka partial pa bagay ki pa yo te itilize nan matche la. Pou egzanp, nan rezilta prensipal yo, Einav ak kòlèg yo te egzak matche sou kat karakteristik: nimewo ID vandè, kategori atik, tit atik, ak subtitles. Si atik yo te diferan nan fason ki pa te itilize pou matche, Lè sa a, sa a te kapab kreye yon konparezon malonèt. Pou egzanp, si "budgetgolfer" bese pri pou Taylormade Burner 09 chofè a nan sezon fredi a (lè klib gòlf yo mwens popilè), Lè sa a, li te kapab parèt ke pi ba pri kòmanse mennen nan pi ba pri final, lè an reyalite sa a ta dwe yon asosye nan varyasyon sezonye nan demann. Yon apwòch pou adrese enkyetid sa a ap eseye anpil diferan kalite matche. Pou egzanp, Einav ak kòlèg li yo te repete analiz yo pandan y ap varye fenèt tan ki te itilize pou matche (ansanm matche enkli atik sou vant nan yon ane, nan yon mwa, ak kontanporèman). Erezman, yo jwenn rezilta menm jan an pou tout fenèt tan. Yon lòt enkyetid ak matche rive soti nan entèpretasyon. Estimasyon soti nan matche sèlman aplike nan matche done; yo pa aplike nan ka yo ki pa ka matche. Pou egzanp, pa limite rechèch yo nan atik ki te gen plizyè lis, Einav ak kòlèg yo konsantre sou vandè pwofesyonèl ak semi-pwofesyonèl. Se konsa, lè entèprete sa yo konparezon nou dwe sonje ke yo sèlman aplike nan sa a subset nan be.

Matche se yon estrateji pwisan pou jwenn konparezon ki jis nan done ki pa eksperimantal. Anpil syantis sosyal, matche santi l dezyèm pi bon eksperyans, men sa se yon kwayans ki ka revize, yon ti kras. Matche nan done masiv ta ka pi bon pase yon ti kantite eksperyans jaden lè (1) eterogènite nan efè enpòtan e (2) varyab yo enpòtan pou matche yo te mezire. Tablo 2.4 bay kèk lòt egzanp sou kouman matche ka itilize avèk gwo done ki genyen.

An konklizyon, estimasyon efè kozatif soti nan done ki pa eksperimantal se difisil, men apwòch tankou eksperyans natirèl ak ajisteman estatistik (egzanp, matche) ka itilize. Nan kèk sitiyasyon, apwòch sa yo ka ale mal anpil, men lè deplwaye ak anpil atansyon, apwòch sa yo ka yon konpleman itil nan apwòch la eksperimantal ke mwen dekri nan chapit 4. Pli lwen, de apwòch sa yo sanble espesyalman benefisye de kwasans lan nan toujou- sou, sistèm done gwo.