4.3 Zwee Dimensioune vun Experiment: Labo-Terrain an Analog-digital

Labo Experimenter Offer Kontroll, Terrain Experimenter Offer Realismus, an digital Terrain Experimenter kombinéieren Kontroll a Realismus um Skala.

Experimenter si vill a verschiddene Formen a Gréissten. An der Vergaangenheet hunn d'Fuerscher et nëtzlech fir Experimente längs engem Kontinuum tëscht Laborgerichten an Feldversécherungen ze organiséieren . Elo musse d'Fuerscher och Experimenter lancéieren an eng zweet Kontinuitéit tëscht analog Versuchs an digitaler Experimenter . Dëse zweedimensionalen Designraum hëlleft Iech d'Stäerkten an Schwächten vu verschiddenen Approche verstoen an d'Gebidder mat gréisserer Geleeënheet opzeginn (Bild 4.1).

Bild 4.1: Schematiséierter Designraum fir Experiment. An der Vergaangenheet hunn d'Experimenter variéiert d'Labo-Dimensioun. Elo variéieren se och vun der analog digitaler Dimensioun. Dësen zweedimensionalen Designraum gëtt illustréiert vu véier Experimenter déi ech an dësem Kapitel beschreiwen. A menger Meenung no ass de Gebitt vun gréisstméiglecher Opfaassong digitaler Feldexperimenter.

Eng Dimensioun entstinn déi Experimenter organiséiert kënne sinn d'Labo-Dimensioun. Vill Experimenter an de Sozialwëssenschaften sinn Laborgerungen, wou Bachelorstudenten seltseg Aufgaben an engem Labor fir Kreditriséierung maachen. Dës Zort vun Experiment dominéiert d'Fuerschung an der Psychologie, well et et erméiglecht, Forscher ze héich kontrolléiert Parameteren ze kreéieren fir genau d'Theorien op sozialem Verhalen ze isoléieren an ze testen. Fir verschidde Problemer ass et awer e bëssen seltsst am léifsten Schluss iwwert d'mënschlech Verhalen vu sougenannten ongewéinleche Leit ze weisen vun esou ongewéinlech Aufgaben an esou enger ongewéinlecher Plaz. Dës Bedenken hunn eng Bewegung fir Feldexperimenter gemaach . Feldexperimente verbannen d'streng Konstruktioun vu randomiséierte Kontroll Experimenter mat méi repräsentative Gruppen vun den Participanten déi méi üblech Aufgaben an méi natierlech Natiounen hunn.

Obwuel e puer Leit iwwer Labo an Feld Experimenter als konkurenz Methoden denken, ass et am beschten datt se als komplementär, mat ënnerschiddlech Stärken a Schwieregkeeten denken. Zum Beispill Correll, Benard, and Paik (2007) hunn e Labo experimentéiert an e Feldexperiment fir eng Versammlung fir d'Quell vun der "Muttererkierchfeier" ze fannen. In den USA kritt de Mammen manner wéi Suen, Vergläicht Frae mat ähnlechen Fäegkeeten déi an ähnlechen Aarbechtsplazen schaffen. Et gi vill Erklärunge fir dës Muster, eent vun deem ass datt d'Patrone géint Mammen virgestallt ginn. (Interessant fënnt de Géigende richteg fir Väter: si tendéieren méi wéi vergläichbar Kanner ouni ze verdéngen.) Fir méiglech Moossnamen géint Mammen ze beurteilen, goufe Correll a Kollegen zwee Experimente lafen: een am Labo an een am Feld.

Éischtens, an engem Laborgesuch hunn si matgedeelt, datt d'Studenten an der Schoul waren, datt e Betrib eng Aarbechtplaz fir eng Persoun huet fir säi neien East Coast Marketing Department ze féieren. D'Studenten hu gesot, datt d'Firma hir Hëllef beim Employement wollte wollten, an si goufen opgefuerdert, Récklagen vu verschiddene potenziell Kandidaten ze iwwerpréiwen an d'Kandidaten op verschiddene Moossnamen wéi d'Intelligenz, d'Wärterheet an d'Engagement fir d'Aarbecht ze bewerten. D'Studenten goufen och gefrot, ob se hir Bewerber hir Recommandatioun hunn a wat se recommandéieren wäerten als Startgesetz. Onbekannter un d'Studente sinn d'Resuméiren spezifesch fir eng ähnlech konstruéiert fir eng Saach: e puer vun hinnen bezeechent d'Mutterschaft (duerch d'Bäitrëtt vun der Beteiligung an engem Elterendeel-Associatioun) an e puer net. De Correll a Kollegen hunn festgestallt, datt d'Schüler manner Chancen hunn d'Mammen ze recommandéieren an datt se en méi nidderegst Startgewaard huet. Ausserdeem duerch eng statistesch Analyse vun de Bewäertungen an de méiglechen Décisiounen, hu Correll a Kollegen fest fonnt datt d'Nodeeler vun de Mammen meeschtens duerch d'Tatsaach erklärt hunn datt se net méi wéi Kompetenz an Engagement waren. Dofir huet dëse Labo Experiment de Correll a Kollegen erméiglecht eng kausal Effekt ze mellen an eng méiglech Erklärung fir dësen Effekt ze kréien.

Natierlech kann et skeptesch sinn datt d'Schluss iwwert den ganzen US-Arbechtsmarkt baséiert op d'Decisioune vun e puer honnert Studenten, déi wahrscheinlech ni eng Vollzäitaarbecht fonnt hunn, seet een eleng. Duerfir hunn Correll a Kollegen och en ergänzen Feldmat experimentéiert. Si hu sech op honnerte vu beschlagnahmten Aarbechtsplazen opgefouert mat falschen Deckelbréiwer a widderhuelen. Ähnlech wéi mat de Mataarbechter, déi mat de Studierenden ugewisen hunn, hunn e wéineg iwwerrascht Mutterschaft an e puer net. Correll a Kollegen fonnt hunn, datt Mammen manner Wahrscheinlech fir Interviewen zréckgeruff ginn als gläich qualifizéiert kierperlech Frae. An anere Wierder, echte Patronen, déi konsequent Entscheedungen an enger natierlecher Ëmstellung maachen, hunn esou wéi déi Undergraduéierte gehandelt. Hutt si fir ähnlech Entscheedunge verständlech gemaach? Leider wësse mer net. D'Fuerscher konnten d'Patronen net froen fir d'Kandidaten ze bewerten oder se ze erklären.

Dëst Paar vun Experimenten weist vill iwwer Labo- an Feldexperimenter am Allgemengen. Laborauer Experimenter ubidden d'Fuerscher ganz no der Kontroll vun der Ëmwelt, wou d'Participanten décidéieren. Also, zum Beispill, am Laborgesekretär, hunn Correll a Kollegen d'Méiglechkeet ze suergen, datt all déi Rezessiounen an enger roueger Astellung geliest goufen; am Feld Experiment, e puer vun de Wiederkonditiounen hätten net souguer gelies. Weideren, well d'Participanten am Laborräich wësse wëssen datt se studéiert ginn, kënnen d'Fuerscher oft Daten ergänzen, déi erkläert kënne firwat d'Participanten hiren Décisiounen huelen. Zum Beispill Correll a Kollegen hunn d'Participanten am Labo experimentéiert, fir d'Kandidaten op verschiddenen Dimensioune ze bewerten. Dës Zort vun Prozessprozeduren kënnen d'Fuerscher verstoen d'Mechanismen hannert Ënnerscheeder wéi d'Participanten d'Resume behandelen.

Déi aner genau dës selwecht Charakteristiken déi ech just als Virdeeler beschriwwen hunn, ginn och heiansdo als Nodeeler. Fuerscher, déi Feld Experimenten léiwer soen, datt d'Participanten an Labo Experimenter ganz ënnerschiddlech kënne wierken, well se wëssen datt si studéiert ginn. Zum Beispill, am Laboursexperimente konnten d'Participanten d'Ziel vun der Fuerschung erfonnt hunn an hir Verhalensmänner geännert hunn, sou datt se net virgestallt sinn. Fuerscher déi favorabel Feldexperimenter vläicht soen, datt kleng Ënnerscheeder am Beruffsliewen nëmmen an engem ganz sauberen, sterile Labo-Ëmfeld stoen kënnen an sou datt de Laboexperimente den Effekt vun der Mammesprooch iwwer Realbedingunge entscheet. Schlussendlech kritiséiere vill Opmierksamkeet vun Feldexperimente Labyrinthsexperimenten op d'WIRD-Participanten: virun allem Studenten aus Western, Educated, Industrialiséierter, Rich a Demokratesch Länner (Henrich, Heine, and Norenzayan 2010a) . D'Experimenter vu Correll a Kollegen (2007) illustréieren déi zwee Extremer am Labo-Field Continuum. Zwëschen deenen zwou Extremen besteet och e puer Hybrid-Designs, dorënner Approche wéi zB Net-Studenten an e Labo oder eem an d'Feld goen, awer nach ëmmer Mataarbechter maachen eng ongewéinlech Aufgab.

Zousätzlech zu der Labo-Dimensioun Dimensioun, déi an der Vergaangenheet existéiert, heescht d'digitale Alter datt d'Fuerscher elo eng zweetgréisste Dimensioun hunn, an där Experimenter kënne variéieren: analog-digital. Genau wéi et do reng Laborexperimente sinn, reinen Feldexperimenter a verschiddene Hybriden tëschent deels sinn et reinen analog Experimenten, reinen Digital Experimenter a verschiddene Hybriden. Et ass komplizéiert datt eng formell Definitioun vun dëser Dimensioun ugebuede gëtt, awer eng noutwenneg Wierderfinanzéierung ass dat komplett digital Experimenter sinn Experimenter déi d'digitale Infrastrukturen benotze fir d'Participanten anzebezéien, auszetommen, behandelen a liwweren. Zum Beispill, Restivo an van de Rijt (2012) Studium vu Barnstars a Wikipedia war e komplett digital Experiment, well si digitaler System fir all véier vun dësen Schrëtt benotzt gouf. Egal wéi voll analoge Experimenter benotzt keng digitale Infrastruktur fir eng vun dësen véier Schrëtt. Vill vun de klassesche Experimenter an der Psychologie sinn voll analoge Experimenter. Zwëschen deenen zwee Extremer ginn et deelweis Digital Experimenter déi eng Kombinatioun vun analogeschen a digitalen Systemen benotzen.

Wann e puer Leit iwwer digitale Experimenter denken, denkt Dir un online Experimenter. Dat ass onglécklech, well d'Opportunitéiten digitaler Experimenter sinn net nëmmen online. D'Fuerscher kënnen deelweis digital Experimente benotzen andeems Dir digitale Geräter an der Physescher Welt benotzt, fir Behandlungen oder Moossnamen ze maachen. Zum Beispill kënnen d'Fuerscher Smartphones benotzen fir Behandlungen oder Sensoren an der Gebaierméiglechkeet ze maache fir Resultater ze méisseieren. Tatsächlech, wéi mir spéider an dësem Kapitel se gesinn, hunn d'Fuerscher schonns Heemkraaftmeter benotzt fir Mesure vun Experimenten iwwer Energieverbrauch mat 8,5 Milliounen Haushalte (Allcott 2015) . Als digitale Geräter sinn zunehmend an d'Liewe vun de Leit integréiert ginn an d'Sensoren am Buedem integréiert sinn, ginn dës Opportunitéiten deelweis digitaler Experimenter an der physescher Welt dramatesch erop. An anere Wierder, Digital Experimenter sinn net nëmmen Online Experimenter.

Digital Systeme kreéieren nei Méiglechkeete fir Experimenter iwwerall am Labo-Feld Kontinuum. Bei richtege Laborexperimenter, zum Beispill, d'Fuerscher kënnen digitale Systeme fir méi feinere Mesure vun de Verzerrunge vun de Participanten benotzen; Ee Beispill vun dëser Zuel vu verbesserte Messung ass Eye-tracking-Ausrüstung déi präzis an kontinuéierlech Moossnamen vu Standpunkter gëtt. De digitale Alter erlaabt d'Méiglechkeet vu Labo-Experimenten online ze laafen. Zum Beispill hunn d'Fuerscher schnell an Amazon Mechanical Turk (MTurk) ugeholl fir d'Participanten fir Online Experimente rekrutéieren (4,2). MTur Match mat "Employeuren", déi Aufgaben hunn, déi mat "Aarbechter" fäerdeg sinn, déi déi Aufgaben fir Suen fäerdeg wëlle maachen. Am Géigesaz zu den traditionellen Aarbechtsmäert sinn awer d'Aufgaben déi normalerweis involvéiert nëmme just e puer Minuten ze kompletéieren, an d'ganz Interaktioun tëscht Employeur an Aarbechter online ass. Well MTurk mëttelt Aspekter vun traditionnelle Labo Experimenter ze bezuele fir Leit ze kompletéieren déi se net gratis maachen - et ass natierlech fir verschidde Versuchsmethoden. Essentiell huet MTURK d'Infrastruktur fir d'Verwaltung vun e Pool vun den Participanten geschaf an d'Leit bezuelt - an d'Fuerscher hunn d'Infrastruktur vun engem Infrastruktuer genotzt fir an engem ëmmer verfügbaren Pool vun de Participanten ze gewinnen.

Figure 4.2: Verëffentleche publizéiert Daten aus Amazon Mechanical Turk (MTurk). MTurk an aner Online-Aarbechtsmäert vermëttelen Forscher eng praktesch Manéier fir d'Participanten fir Experimenten ze rekrutéieren. Ofgesat vun Bohannon (2016) .

Digital Systeme kreéiert méi Méiglechkeeten fir Feld-ähnlech Experimenter. Insbesondere si erméiglecht d'Fuerscher déi enge Kontroll a verännert Daten kombinéiere, déi mat Laborexperimente mat de méi diverse Participanten ass a méi natierlech natierend Astellungen kombinéiert ginn, déi mat Laborgerichten verbonne sinn. Zudem bieten digitale Feldversécherungen och dräi Méiglechkeeten, déi an analog Experimenten schwiereg sinn.

Éischtens, an deene meeschten analogen Laboratoiren an Feldversuchen honnerte vun den Participanten hunn digitale Feldversécherungen Millioune vu Participanten hunn. Dës Ännerung an der Skala ass datt verschidden digitale Experimenter Daten mat Null Variabel Käschten produzéieren. Dat ass, wann d'Fuerscher en experimentelle Infrastruktur geschaf hunn, wat d'Zuel vun de Participanten erhéijen, déi normalerweis net d'Käschte erhéicht. D'Zuel vun den Participanten vun engem Faktor vun 100 oder méi ass net nëmme quantitativer Changement; Et ass eng qualitative Changement, well et et erméiglecht, Forscher erméiglecht verschidde Saachen aus Experimenten ze léieren (zB Heterogenitéit vun Behandlungsofwier) a ganz ville verschidden experimentelle Konstruktiounen (zB groen Experimenter). Dëse Punkt ass sou wichteg, ech wäert et bis an d'Enn vum Kapitel zeréckkucken wann ech Berodung iwwer d'Erstellung digitaler Experimenter ubidden.

Zweetens, an deene meeschten analogen Laboratoiren an Feldversuchen behandelen d'Participanten als onbestëmmeg Widgets. D'digitale Feldversécherung benotzt oft Informatiounen iwwer d'Participanten an der Entworf an Analysephasen vun der Recherche. Dës Hannergrondin, déi genannt Pre-Behandlungsinformatioun , ass oft an Digitale Experimenter ze kréien, well se op all Moment u Mesure sinn (kuckt Kapitel 2). Zum Beispill, e Fuerscher op Facebook huet vill Prä-Behandlungsinformatiounen iwwer d'Leit an hirem digitalem Feldexperimental wéi en Universitéitsforscher iwwer d'Leit an hirem Analogfeld experimentéiert. Dës Virbehandlung léisst méi effizient Experimentalentwécklung - wéi zB Sperrung (Higgins, Sävje, and Sekhon 2016) an gezielte Recrutement vu Participanten (Eckles, Kizilcec, and Bakshy 2016) - eng méi insightful Analyse - wéi d'Schätzung vun der Heterogenitéit vun den Behandlungsplazen (Athey and Imbens 2016a) a kovariéiert Upassung fir eng besser Präzisioun (Bloniarz et al. 2016) .

Drëttens, a ville analog Labo- an Feldversécherungen erlaben Behandlungen a méiglechen Resultater an enger relativ kompriméiert Zuel vun Zäit, e puer digitale Feldexperimenter passe méi laang Zäitzeechen. Zum Beispill, Restivo a van de Rijt huet d'Resultat all Dag fir 90 Deeg gemooss, an ee vun den Experimenten ech soen Iech spéider am Kapitel (Ferraro, Miranda, and Price 2011) verfolgt Resultater iwwer dräi Joer am Prinzip keng kascht. Dës dräi Méiglechkeete-Gréisst, Virbehandlungsinformatioun a Längsbehandlung a Resultatendaten entstoen am meeschten üblech, wann Experimenter op all méigleche Messsystemen lafen (kuckt Kapitel 2 fir méi op méigleche Messsystemer).

Während digitale Feldversécherungen vill Méiglechkeeten ubidden, hunn se och e puer Schwächten mat hirem Analog-Labor an analog Feld-Experimenten. Zum Beispill kënnen Experimenter net benotzt ginn fir d'Vergaangenheet ze léieren, a si kënnen nëmmen d'Effekter vun Behandlungen schätzen, déi manipuléiert kënne ginn. Och wann Experimenter si zweiflech nëtzlech sinn fir Politik ze guidéieren, ass déi exakt Leedung déi se ubidden kann e bësse begrenzt sinn duerch Komplikatiounen wéi Ëmweltvirhänge-, Konformitätsproblemer a Gläichberechtegung (Banerjee and Duflo 2009; Deaton 2010) . Digitale Feldexperimente gräifen och déi ethesch Bedenken, déi duerch Feldexperimenter geschaf ginn - e Thema deen ech spéider an dësem Kapitel an am Kapitel 6 ze liesen.