4.5.1.1 Gebruik bestaande omgewings

Jy kan eksperimente uit te voer binne bestaande omgewings, dikwels sonder enige kodering of vennootskap.

Logisties, die maklikste manier om digitale eksperimente te doen is om jou eksperiment trek op die top van 'n bestaande omgewing, sodat jy 'n digitale veld eksperiment uit te voer. Hierdie eksperimente kan uitgevoer word op 'n redelike groot skaal en moenie vennootskap met 'n maatskappy of 'n uitgebreide ontwikkeling van sagteware vereis nie.

Byvoorbeeld, Jennifer Doleac en Lukas Stein (2013) het die voordeel van 'n aanlyn mark (bv craigslist) om 'n eksperiment wat rassediskriminasie gemeet hardloop. Doleac en Stein geadverteer duisende iPods, en deur stelselmatig wisselende die eienskappe van die verkoper, was hulle in staat om die effek van ras op ekonomiese transaksies te bestudeer. Verder Doleac en Stein gebruik die skaal van hul eksperiment om te skat wanneer die effek is groter (heterogeniteit van behandeling effekte) en bied 'n paar idees oor hoekom die effek mag voorkom (meganismes).

Voor die studie van Doleac en Stein, daar was twee hoof benaderings tot eksperimenteel meet diskriminasie. In korrespondensie studies navorsers skep hervat van fiktiewe mense van verskillende rasse en gebruik hierdie hervat om, byvoorbeeld, aansoek te doen vir verskillende bane. Bertrand en Mullainathan se (2004) papier met die onvergeetlike titel "Is Emily en Greg Meer indiensneembaar As Lakisha en Jamal? A Field eksperimenteer op Arbeid Market Diskriminasie "is 'n wonderlike voorbeeld van 'n korrespondensie studie. Korrespondensie studies het relatief lae koste per waarneming, wat 'n enkele navorser in staat stel om duisende van waarnemings in te samel in 'n tipiese studie. Maar, het korrespondensie studies van rassediskriminasie is bevraagteken omdat name potensieel baie dinge sein bykomend tot die ras van die aansoeker. Dit is, name soos Greg, Emily, Lakisha, en Jamal kan sosiale klas sein bykomend tot ras. Dus, kan 'n verskil in behandeling vir CV's van Greg se en Jamal se toegeskryf word aan meer as vermoed ras verskille van die aansoekers. Oudit studies, aan die ander kant, behels die huur van akteurs van verskillende rasse om aansoek te doen in die persoon vir werk. Selfs al oudit studies 'n duidelike sein van aansoeker ras, hulle is baie duur per waarneming, wat beteken dat hulle gewoonlik net honderde waarnemings het.

In hul digitale veld eksperiment, Doleac en Stein was in staat om 'n aantreklike baster skep. Hulle was in staat om data te versamel teen relatief lae koste per waarneming-lei tot duisende waarnemings (soos in 'n korrespondensie studie) -en hulle in staat was om ras sein met behulp van foto's-lei tot 'n duidelike uncounfounded sein van ras (soos in 'n oudit studie ). So, die aanlyn-omgewing in staat stel om soms navorsers om nuwe behandelings wat eienskappe wat moeilik om anders op te rig is nie te skep.

Die iPod advertensies van Doleac en Stein gewissel saam drie dimensies. In die eerste plek het gewissel hulle die eienskappe van die verkoper, wat te kenne gegee deur die hand laat afneem het met die iPod [wit, swart, wit met tattoo] (Figuur 4.12). In die tweede plek het gewissel hulle die vraprys [$ 90, $ 110, $ 130]. Derde, het gewissel hulle die gehalte van die advertensie teks [hoë gehalte en 'n lae-gehalte (bv, hoofletters foute en spelin foute)]. So, die skrywers het 'n 3 x 3 x 2 ontwerp wat oor meer as 300 plaaslike markte wissel van dorpe (bv Kokomo, IN en North Platte, NE) om mega-stede (bv, New York en Los Angeles) ontplooi.

Figuur 4.12: Hande in die eksperiment gebruik van Doleac and Stein (2013) . iPods verkoop deur verkopers met verskillende eienskappe om diskriminasie in 'n aanlyn mark te meet.

Gemiddeld oor alle toestande, die uitkomste is beter vir die wit verkoper as die swart verkoper, met die getatoeëerde verkoper met intermediêre resultate. Byvoorbeeld, ontvang wit verkopers meer bied en het hoër finale verkoop pryse. Beyond hierdie gemiddelde effekte, Doleac en Stein beraam dat die heterogeniteit van effekte. Byvoorbeeld, een voorspelling van vroeër teorie is dat diskriminasie minder in markte wat meer mededingend is sou wees. Die gebruik van die aantal aanbiedings ontvang as 'n plaasvervanger vir die mark kompetisie, die skrywers gevind dat swart verkopers wel erger bied in markte ontvang met 'n lae graad van kompetisie. Verdere, deur dit te vergelyk uitkomste vir die advertensies met 'n hoë-gehalte en 'n lae-gehalte teks, Doleac en Stein het bevind dat die advertensie kwaliteit nie 'n impak die nadeel in die gesig gestaar deur swart en getatoeëer verkopers. Ten slotte, met behulp van die feit dat advertensies in meer as 300 markte geplaas, die skrywers vind dat swart verkopers is meer benadeelde in stede met 'n hoë pryse misdaad en hoë residensiële segregasie. Nie een van hierdie resultate gee ons 'n akkurate begrip van presies die rede waarom swart verkopers het erger uitkomste, maar wanneer dit gekombineer met die resultate van ander studies, kan hulle begin om teorieë in te lig oor die oorsake van rassediskriminasie in verskillende tipes ekonomiese transaksies.

Nog 'n voorbeeld wat die vermoë van navorsers om digitale veld eksperimente uit te voer in bestaande stelsels toon is die navorsing deur Arnout van die Rijt en kollegas (2014) op die sleutels tot sukses. In baie aspekte van die lewe, skynbaar soortgelyke mense beland met 'n baie verskillende uitkomste. Een moontlike verklaring hiervoor patroon is dat klein-en wese ewekansige-voordele kan uitsluiting in en groei met verloop van tyd, 'n proses wat navorsers noem kumulatiewe voordeel. Ten einde vas te stel of klein aanvanklike suksesse uitsluiting of verdwyn, van die Rijt en kollegas (2014) ingegryp in vier verskillende stelsels skenk sukses op lukraak gekies deelnemers, en dan gemeet die langtermyn impak van hierdie arbitrêre sukses.

Meer spesifiek, van die Rijt en kollegas 1) belowe geld om lukraak gekies projekte op kickstarter.com , 'n crowdfunding webwerf; 2) 'n positiewe gradering lukraak gekies resensies op die webwerf Epinions ; 3) het toekennings aan lukraak gekies bydraers tot Wikipedia ; en 4) onderteken lukraak gekies petisies op change.org . Die navorsers het bevind baie soortgelyke resultate in al vier stelsels: in elke geval, die deelnemers wat lukraak 'n paar vroeë sukses gegee het om meer daaropvolgende sukses as hul anders heeltemal ononderskeibaar eweknieë (Figuur 4.13) het. Die feit dat dieselfde patroon verskyn in baie stelsels verhoog die eksterne geldigheid van hierdie resultate, want dit is die kans dat hierdie patroon is 'n juweel van 'n bepaalde stelsel verminder.

Figuur 4.13: effekte van lukraak geskenk sukses Langtermyn in vier verskillende sosiale stelsels. Arnout van die Rijt en kollegas (2014) 1) belowe geld om lukraak gekies projekte op kickstarter.com , 'n crowdfunding webwerf; 2) 'n positiewe gradering lukraak gekies resensies op die webwerf Epinions ; 3) het toekennings aan lukraak gekies bydraers tot Wikipedia ; en 4) onderteken lukraak gekies petisies op change.org .

Saam, hierdie twee voorbeelde wys dat navorsers digitale veldeksperimente kan voer sonder die behoefte om saam met maatskappye of die behoefte om komplekse digitale stelsels te bou. Verdere, Table 4.2 bied selfs meer voorbeelde wat die omvang van wat moontlik is wanneer navorsers gebruik die infrastruktuur van bestaande stelsels op behandeling en / of maatstaf uitkomste lewer wys. Hierdie eksperimente is relatief goedkoop vir navorsers en hulle bied 'n hoë mate van realisme. Maar, hierdie eksperimente bied navorsers beperkte beheer oor die deelnemers, behandelings en uitkomste gemeet word. Verdere, vir eksperimente wat in net een stelsel, navorsers moet bekommerd te wees dat die gevolge kan gedryf word deur stelsel-spesifieke dinamika (bv, die manier waarop Kickstarter geledere projekte of die manier waarop change.org geledere petisies; vir meer inligting, sien die bespreking oor algoritmiese confounding in Hoofstuk 2). Ten slotte, wanneer navorsers in te gryp in 'n werkende stelsels, moeilike etiese vrae na vore oor moontlike skade aan deelnemers, nie-deelnemers, en stelsels. Ons sal kyk na hierdie etiese kwessie in meer besonderhede in Hoofstuk 6, en daar is 'n uitstekende bespreking van hulle in die bylaag van Van de Rijt (2014) . Die trade-offs wat kom met die werk in 'n bestaande stelsel is nie ideaal vir elke projek, en vir daardie rede 'n paar navorsers bou hul eie eksperimentele stelsel, die onderwerp van die volgende afdeling.