4.3 Du dimensioj de eksperimentoj: laboratorio-kampo kaj analoga-cifereca
Laboratorio eksperimentoj proponi kontrolo, kampo eksperimentoj proponi realismo, kaj cifereca kampo eksperimentoj kombini kontrolo kaj realismo en skalo.
Eksperimentoj venas en multaj malsamaj formoj kaj grandecoj. Sed, malgraŭ tiuj diferencoj, esploristoj trovis ĝin utila por organizi eksperimentojn laŭ kontinuumo inter laboratorio eksperimentoj kaj kampo eksperimentoj. Nun, tamen, esploristoj devas ankaŭ organizi eksperimentojn laŭ kontinuumo inter analogaj eksperimentoj kaj cifereca eksperimentoj. Tiu dudimensia dezajno spaco helpos vin kompreni la fortojn kaj malfortojn de malsamaj enfokusigas kaj sugesti areojn de plej granda ŝanco (Figuro 4.1).
Figuro 4.1: Skema de dezajno spaco por eksperimentoj. En la pasinteco, eksperimentoj variis laŭ la laboratorio-kampo dimensio. Nun, ili ankaŭ varias sur la analoga-cifereca dimensio. Miaopinie, la areo de plej granda ŝanco estas diĝita kampo eksperimentoj.
En la pasinteco, la ĉefa vojo ke esploristoj organizita eksperimentoj estis kune la laboratorio-kampo dimensio. La plimulto de eksperimentoj en la sociaj sciencoj estas laboratorio eksperimentoj kie studentaj studentoj elfaras strangaj taskoj en laboratorio por Kompreneble kredito. Ĉi tiu tipo de eksperimento regas esploroj en psikologio ĉar ĝi ebligas esploristoj krei tre specifaj traktadoj dizajnita por testi tre specifaj teorioj pri socia konduto. Por iuj problemoj, tamen, ion sentas iom stranga pri desegnado fortaj konkludoj pri homa konduto de tiaj nekutimaj personoj elfarante tiajn nekutimajn taskoj en tia nekutima opcio. Tiuj konzernoj kondukis al movado al kampo eksperimentoj. Kampo eksperimentoj kombinas la fortan dezajnon de hazardigitaj kontrolo eksperimentoj kun pli reprezentaj grupoj de partoprenantoj, elfarante pli komunaj taskoj, en pli natura agordojn.
Kvankam kelkaj homoj pensas de laboratorio kaj kampo eksperimentoj kiel konkurantaj metodoj, ĝi estas bona por elpensi ilin kiel plaj metodoj kun malsamaj fortoj kaj malfortoj. Ekzemple, Correll, Benard, and Paik (2007) uzis ambaŭ laboratorio eksperimento kaj kampo eksperimento en provo trovi la fontoj de la "patrineco punon." En Usono, patrinoj gajni malpli monon ol seninfana virinoj, eĉ kiam komparante virinoj kun similaj kapabloj laboras en similaj taskoj. Estas multaj eblaj klarigoj por tiu skemo, la unu estas, ke dungantoj estas emata kontraŭ patrinoj. (Interese, la malo ŝajnas vera por patroj emas gajni pli ol komparebla seninfana viroj). Por taksi eblajn deklivo kontraŭ patrinoj, Correll kaj kolegoj kuris du eksperimentojn: unu en la laboratorio kaj en la kampo.
Unue, en laboratorio eksperimento Correll kaj kolegoj diris partoprenantoj, kiuj estis kolegio studentoj, ke Kalifornio-bazita noventrepreno konektoj kompanio efektivigis postenon serĉado persono gvidi lian novan Marbordo merkatiko fako. Studentoj estis rakontitaj ke la kompanio volis ilia helpo en la contratación procezo kaj ili demandis revizii rekomencas de pluraj eblaj kandidatoj kaj taksas la kandidatoj sur nombro de dimensioj kiel ilia intelekto, varmeco, kaj devontigon labori. Plui, la studentoj estis demanditaj ĉu ili rekomendas kontrakti la kandidato kaj kion ili rekomendus kiel startanta salajro. Nekonata al la studentoj, tamen, la rekomencas estis specife konstruita por esti simila krom unu afero: kelkaj el la rekomencas signalis patrineco (de enlistiganta implikiĝo en gepatro-instruisto asocio) kaj kelkaj ne. Correll trovis ke studentoj estis malpli verŝajna rekomendi kontrakti la patrinoj kaj proponis ilin pli malalta komenca salajro. Plui, tra statistika analizo de kaj la rangigoj kaj la contratación-rilataj decidoj, Correll trovis ke patrinoj malavantaĝoj estis plejparte klarigita per la fakto ke patrinoj taksitaj malaltaj en terminoj de kapablo kaj engaĝiĝo. Alivorte, Correll argumentas ke tiuj trajtoj estas la mekanismo tra kiu patrinoj estas malfavorataj. Tiel, tiu laboratorio eksperimento permesis Correll kaj kolegoj mezuri kaŭza efiko kaj havigi ebla ekspliko por tio.
Kompreneble, oni povus esti skeptika pri desegnado konkludojn pri la tuta usona labormerkato bazita sur la decidoj de kelkcent studentoj kiuj probable neniam havis plentempe laboron, des malpli dungita personoj. Sekve, Correll kaj kolegoj ankaŭ realigis plaj kampo eksperimento. La esploristoj respondis al centoj de anoncita laboron malfermoj sendante en falsa kovrilo leteroj kaj resumoj. Simila al la materialoj montris al la studentoj, iuj currículums signalis patrineco kaj iuj ne. Correll kaj kolegoj trovis ke patrinoj estis malpli verŝajna al get nomita reen por intervjuoj ol egale kvalifikita seninfana virinoj. Alivorte, vera dungantoj fari _consequential_ decidoj en natura fikso kondutis tre kiel la studentoj. Ĉu ili faras similajn decidojn por la sama kialo? Bedaŭrinde, ni ne scias. La esploristoj ne povis demandi la dungantoj taksas la kandidatoj aŭ klarigi iliajn decidojn.
Tiun paron de eksperimentoj rivelas multon pri laboratorio kaj kampo eksperimentoj ĝenerale. Laboratorio eksperimentoj proponi esploristoj proksime totala kontrolo de la medio en kiu la partoprenantoj faras decidojn. Do, ekzemple, en la laboratorio eksperimento, Correll povis certigi ke ĉiuj currículums legis en kvieta medio; en la kampo eksperimenton, iuj de la currículums eble ne eĉ estis legita. Krom tio, ke la partoprenantoj en la laboratorio fikso scias ke ili estas studitaj, esploristoj estas ofte povis kolekti aldonan informon kiu povas helpi ilin kompreni kial partoprenantoj faras siajn decidojn. Ekzemple, Correll demandis partoprenantoj en la laboratorio eksperimento taksas la kandidatoj sur malsamaj dimensioj. Tiu speco de procezo de datumoj povus helpi esploristoj kompreni la mekanismojn malantaŭ diferencoj en kiel partoprenantoj trakti la resumoj.
Aliflanke, tiuj ĝusta sama karakterizaĵoj kiujn mi ĵus priskribis kiel avantaĝojn estas foje konsiderata malavantaĝojn. Esploristoj kiuj preferas kampon eksperimentoj argumentas ke partoprenantoj en laboratorio eksperimentoj povus agi tre malsame kiam ili estas proksime observitaj. Ekzemple, en la laboratorio eksperimento partoprenantoj eble divenis la celo de la esploro kaj ŝanĝis sian konduton, por ne aperi emata. Plui, esploristoj kiuj preferas kampon eksperimentoj povus argumenti ke malgrandaj diferencoj sur currículums nur elstaras en tre pura, sterila laboratorio medio, kaj tiel la laboratorio eksperimento estos super-taksi la efikon de patrineco sur reala contratación decidoj. Fine, multaj propagandantoj de kampo eksperimentoj kritiki laboratorio eksperimentoj dependeco sur Weird partoprenantoj: ĉefe studentoj de Okcidenta, Edukita, industriigita, Riĉa kaj Demokratia landoj (Henrich, Heine, and Norenzayan 2010) . La eksperimentoj de Correll kaj kolegoj (2007) ilustras la du ekstremaj de la laboratorio-kampo kontinuaĵo. Intere tiuj du ekstremoj estas vario de hibridaj dezajnoj inkluzive alproksimiĝojn kiel alportante ne-studentoj en laboratorio aŭ iranta en la kampo sed ankoraŭ havi partoprenantojn elfari nekutima tasko.
Krom la laboratorio-kampo dimensio kiu ekzistis en la pasinteco, la cifereca erao signifas ke esploristoj nun havas duan gravan dimension kune kiun eksperimentoj povas varii: analoga-cifereca. Tiel kiel estas pura laboratorio eksperimentoj, pura kampo eksperimentoj, kaj vario de hibridoj inter ekzistas puraj analogaj eksperimentoj, pura diĝita eksperimentoj, kaj vario de hibridoj. Estas malfacila oferti formalan difinon de tiu dimensio, sed utila laborista difino estas ke plene ciferecan eksperimentoj eksperimentoj kiuj uzas ciferecan infrastrukturon varbi partoprenantojn, randomize, liberigu traktadoj, kaj mezuru rezultoj. Ekzemple, Restivo kaj van de Rijt la (2012) studo de barnstars kaj Vikipedio estis plene ciferecan eksperimento ĉar ĝi uzis ciferecajn sistemojn por ĉiuj kvar el tiuj paŝoj. Same plene analoga eksperimentoj eksperimentoj kiuj ne uzas ciferecan infrastrukturon por iu el tiuj kvar ŝtupoj. Multaj el la klasikaj eksperimentoj en psikologio estas analoga eksperimentoj. Intere tiuj du ekstremoj estas parte diĝita eksperimentoj kiuj uzas kombinaĵon de analogaj kaj ciferecaj sistemoj por la kvar paŝoj.
Kritike, la ŝancoj por kuri ciferecan eksperimentoj ne nur rete. Esploristoj povas kuri parte diĝita eksperimentojn uzante ciferecaj mekanismoj en la fizika mondo por liveri traktadoj aŭ mezuri rezultoj. Ekzemple, esploristoj povis uzi inteligentajn telefonojn liveri traktadoj aŭ sensores en la konstruita medio mezuri rezultoj. Fakte, kiel ni vidos poste en ĉi tiu ĉapitro, esploristoj jam uzataj hejme potenco metroj mezuri rezultoj en eksperimentoj pri sociaj normoj kaj energikonsumon implikanta 8.5 milionojn de hejmoj (Allcott 2015) . Kiel ciferecaj mekanismoj fariĝis ĉiam pli integritaj en popolaj vivoj kaj sensores fariĝis integrita en la konstruita medio, tiuj ŝancoj kuri parte diĝita eksperimentoj en la fizika mondo pliigos draste. Alivorte, cifereca eksperimentoj ne nur rete eksperimentoj.
Ciferecajn sistemojn krei novajn eblecojn por eksperimentoj ĉie laŭ la laboratorio-kampo kontinuaĵo. En pura laboratorio eksperimentoj, ekzemple, esploristoj povas uzi ciferecajn sistemojn por fajna mezurado de partoprenantoj konduto; ekzemplo de ĉi tiu tipo de pliboniĝo mezurado estas okulo-spurado teamo kiu provizas precizan kaj kontinuan mezuroj de rigardo loko. La diĝita aĝo ankaŭ kreas la eblecon kuri laboratorio-similaj eksperimentoj rete. Ekzemple, esploristoj rapide adoptita Amazon Mechanical Turk (MTurk) varbi partoprenantojn por enreta eksperimentoj (Figuro 4.2). MTurk alumetoj "labordonantoj", kiuj havas taskojn kiuj devas esti kompletigitaj kun "laboristoj" kiuj deziras kompletigi tiujn taskojn por mono. Kontraste tradicia labormerkatoj tamen la taskoj implikita kutime nur bezonas kelkajn minutojn por kompletigi kaj la tuta interago inter dunganto kaj laboristo estas virtuala. Ĉar MTurk imitas aspektojn de tradiciaj laboratorio eksperimentoj pagata personoj kompletigi taskojn kiujn ili ne farus por libera estas nature taŭgas por iuj tipoj de eksperimentoj. Esence, MTurk kreis la infrastrukturon por administri lago da partoprenantoj-varbado kaj paganta personoj-kaj esploristoj utiligita ke infrastrukturo frapeti enen ĉiam disponebla akvejo de partoprenantoj.
Figuro 4.2: Paperoj publikigita uzante datumoj de Amazon Mechanical Turk (MTurk) (Bohannon 2016) . MTurk kaj aliaj rete labormerkatoj proponi esploristoj oportuna maniero por varbi partoprenantojn por eksperimentoj.
Cifereca eksperimentojn krei eĉ pli da ebloj por kampo-similaj eksperimentoj. Cifereca kampo eksperimentoj povas proponi striktan regon kaj procezo datumoj kompreni eblaj mekanismoj (kiel laboratorio eksperimentoj) kaj pli diversaj partoprenantoj farante reala decidoj en natura medio (kiel kampo eksperimentoj). Krom tiu kombino de bonaj karakterizaĵoj de fruaj eksperimentoj, cifereca kampo eksperimentoj ankaŭ proponas tri eblojn kiuj estis malfacilaj en analoga laboratorio kaj kampo eksperimentoj.
Unua, dum plej analoga laboratorio kaj kampo eksperimentoj havi centojn da partoprenantoj, cifereca kampo eksperimentoj povas havi milionojn da partoprenantoj. Tiu ŝanĝo en skalo estas ĉar iuj ciferecaj eksperimentoj povas produkti datumojn ĉe nul variablo kosto. Tio estas, fojo esploristoj kreis eksperimentan infrastrukturo, pliigante la nombron de partoprenantoj tipe ne pliigas la koston. Pliigante la nombron de partoprenantoj je faktoro de 100 aŭ pli ne estas nur kvanta ŝanĝo, ĝi estas kvalita ŝanĝo, ĉar ĝi ebligas esploristoj lerni malsamajn aferojn de eksperimentoj (ekz, heterogeneco de traktado efikoj) kaj kuras tute malsamaj eksperimentaj dezajnoj ( ekz, granda grupo eksperimentoj). Tiu punkto estas tiom grava, mi revenos al ĝi direkte al la fino de la ĉapitro kiam Mi proponas konsilon pri kreado diĝita eksperimentoj.
Dua, dum plej analoga laboratorio kaj kampo eksperimentoj trakti partoprenantoj kiel nedistingeblaj fenestraĵoj, cifereca kampo eksperimentoj ofte uzas fonajn informojn pri partoprenantoj en la dezajno kaj analizo etapoj de la esploro. Ĉi fono informon, nomata antaŭ-traktado informo, estas ofte havebla en diĝita eksperimentoj ĉar ili okazas en plene mezurita medioj. Ekzemple, esploristo ĉe Facebook havas multe pli antaŭ-traktado informo ol esploristo desegnante normo laboratorio eksperimento kun studentoj. Ĉi antaŭ-traktado informo ebligas esploristoj moviĝi preter traktante partoprenantojn kiel nedistingeblaj fenestraĵoj. Pli specife, antaŭ- traktado informo ebligas pli efikan eksperimentaj dezajnoj -kiel blokado (Higgins, Sävje, and Sekhon 2016) kaj laŭcela rekrutado de partoprenantoj (Eckles, Kizilcec, and Bakshy 2016) -kaj pli komprenema analizo -kiel taksado de heterogeneco de traktado efektoj (Athey and Imbens 2016a) kaj covariate ĝustigu por plibonigi precizecon (Bloniarz et al. 2016) .
Tria, dum kiu multaj analogaj laboratorio kaj kampo eksperimentoj transdonos traktadoj kaj mezuro rezultoj en relative kunpremita kvanto de tempo, iuj ciferecaj kampo eksperimentoj impliki traktadoj kiuj povas naski tempo kaj la efektoj povas esti mezurita super tempo. Ekzemple, Restivo kaj van de Rijt eksperimento havas la rezulton mezuris ĉiutaga por 90 tagoj, kaj unu el la eksperimentoj mi diros al vi pri poste en la ĉapitro (Ferraro, Miranda, and Price 2011) spuras rezultoj super 3 jaroj ĉe resume neniu kosto. Tiuj tri ŝancoj-grandeco, antaŭ- traktado informo kaj longitudinales traktado kaj rezulto datumoj estas plej komuna kiam eksperimentoj kuras sur supro de ĉiam-sur mezuradojn sistemoj (vidu Ĉapitro 2 por pli sur ĉiam-sur mezurado sistemoj).
Dum diĝita kampo eksperimentoj proponas multajn eblojn, ili ankaŭ dividas kelkajn malfortojn kun ambaŭ analogaj laboratorio kaj kampo eksperimentoj. Ekzemple, eksperimentoj ne povas esti uzita por studi la estinteco, kaj ili povas nur taksi la efikojn de traktadoj kiuj povas esti manipulitaj. Ankaŭ, kvankam eksperimentoj estas sendube utilaj por gvidi politikon, la ĝusta gvido ili povas proponi estas iom limigita pro komplikaĵoj kiel ekzemple media dependeco, plenumo problemoj kaj ekvilibro efektoj (Banerjee and Duflo 2009; Deaton 2010) . Fine, cifereca kampo eksperimentoj altigas la etikaj konzernoj kreita de kampo eksperimentoj. Propagandantoj de kampo eksperimentoj trumpeti sian kapablon diskrete kaj hazarde interveni en _consequential_ decidoj faritaj de milionoj de personoj. Tiuj trajtoj proponi iuj sciencaj avantaĝoj, sed ili povas ankaŭ fari kampo eksperimentoj etike komplekso (pensu pri ĝi kiel esploristoj trakti homojn kiel "laboratorio ratoj" sur masiva skalo). Plui, krom ebla nocas al partoprenantoj, cifereca kampo eksperimentoj, pro ilia skalo, povas ankaŭ levi zorgojn pri la ĉesigo de laboro sociaj sistemoj (ekz zorgojn pri disrompi Vikipedio rekompencon sistemo se Restivo kaj kamioneto der Rijt donis tro multajn barnstars) .
