4.5.1.1 Korištenje postojećih okruženja

Možete izvoditi eksperimente unutar postojećih okruženja, često bez kodiranja ili partnerstva.

Logistički, najlakši način da to učinite digitalne pokusa je da se oblože eksperiment na vrhu postojećem okruženju, omogućujući vam da pokrenete digitalni eksperiment na terenu. Ovi eksperimenti se mogu izvoditi na razumno velikih razmjera i ne zahtijevaju partnerstvo s tvrtkom ili opsežnog razvoj softvera.

Na primjer, Jennifer Doleac a Luke Stein (2013) je iskoristio na online tržištu (npr, Craigslist) pokrenuti eksperiment koji izmjerenu rasne diskriminacije. Doleac Stein reklamiraju tisuće iPoda, te sustavno mijenjanje karakteristike prodavatelj, oni su mogli proučavati učinak utrku na gospodarskom poslovanju. Nadalje, Doleac Stein koristi skalu njihovog eksperimenta procijeniti kada je učinak veći (heterogenost učinaka liječenja), te ponuditi neke ideje o tome zašto je učinak se može dogoditi (mehanizme).

Prije proučavanja Doleac i Stein, tu su dva glavna pristupa za eksperimentalno mjerenje diskriminacije. U korespondenciji studije istraživači su stvorili biografije izmišljenih ljudi različitih rasa i koristiti ove biografije, primjerice, primijeniti za različite poslove. Bertrand i Mullainathan-a (2004) Rad s nezaboravnom naslovom "su Emily i Greg više upotrebljiv nego Lakisha i Jamal? Terenski eksperiment na tržištu rada diskriminacije "je prekrasna ilustracija dopisnog studija. Dopisni studij imaju relativno niske cijene po promatranju, koja omogućuje jedan istraživač prikupiti tisuće promatranja u tipičnom studija. No, dopisivanje studije rasne diskriminacije su ispitani zbog imena potencijalno signal mnoge stvari osim utrci podnositelja zahtjeva. To je, imena kao što su Greg, Emily, Lakisha i Jamal može biti znak društvene klase osim na rasu. Dakle, bilo razlika u tretmanu za životopise od Greg-a i Jamal-a može biti zbog više od pretpostavljenih utrke razlika kandidata. Studije za reviziju, s druge strane, uključuje iznajmljivanje glumce iz različitih rasa primijeniti u osobu za posao. Iako revizije studije pružaju jasan signal podnositelja rase, oni su vrlo skupo po promatranju, što znači da oni obično imaju samo stotine opažanja.

U svom digitalnom polju eksperimentu Doleac Stein bili u stanju stvoriti atraktivan hibrid. Oni su bili u mogućnosti prikupiti podatke po relativno niskoj cijeni po promatranja što rezultira tisuća opažanja (kao u dopisni studij) -i oni su mogli utrku signala pomoću fotografije što rezultira jasnim uncounfounded signala rase (kao u revizijskom istraživanju ). Dakle, on-line okruženju ponekad omogućuje istraživačima stvoriti nove metode liječenja koje imaju svojstva koja su teško izgraditi neki drugi način.

IPod reklame Doleac i Stein mijenjati uz tri glavne dimenzije. Prvo, oni su varirale obilježja prodavatelja, koja se signalizira rukom fotografirana držeći iPod [bijela, crna, bijela s tetovažom] (slika 4.12). Drugo, oni mijenjati početne cijene [$ 90, $ 110, $ 130]. Treće, oni mijenjati kvalitetu teksta oglasa [kvalitetnom i niske kvalitete (npr kapitalizacije pogreške i spelin pogreške)]. Dakle, autori imali 3 x 3 x 2 dizajn koji je bio angažiran na više od 300 lokalnih tržišta u rasponu od gradova (npr Kokomo, IN i North Platte, NE) na mega-gradova (npr, New York i Los Angeles).

Slika 4,12: Ruke se koriste u pokusima Doleac and Stein (2013) . iPod je prodan od strane prodavača s različitim karakteristikama za mjerenje diskriminacije u online tržištu.

Prosječne ocjene svih uvjeta, rezultati su bili bolji za bijela prodavatelja od crnog prodavatelja, a prodavatelj tetovirane imaju srednji rezultate. Na primjer, bijeli prodavači primio više ponuda i imao veće konačne prodajne cijene. Osim tih prosječnih efekata, Doleac Stein procjenjuje na heterogenost učinaka. Na primjer, jedan predviđanje iz ranijih teorija je da je diskriminacija će biti manje na tržištima koja su konkurentniji. Korištenje broj pristiglih ponuda kao zamjena za tržišno natjecanje, autori su otkrili da crno prodavači uistinu ne dobivaju lošije ponude na tržištima s niskim stupnjem konkurencije. Nadalje, uspoređujući rezultate za oglase s visoke kvalitete i niske kvalitete teksta, Doleac Stein otkrili da je kvaliteta oglasa ne utječe na nedostatak s kojima se suočavaju crno-tetoviranih prodavača. Konačno, iskoristivši činjenicu da su reklame postavljene na više od 300 tržišta, autori smatraju da crni prodavači su u nepovoljnom položaju u gradovima s visokim stopama kriminala i visoke stambene segregacije. Niti jedan od tih rezultata daju nam precizno razumijevanje točno zašto crni prodavači imali lošije rezultate, ali, kada je u kombinaciji s rezultatima drugih istraživanja, oni mogu početi informirati teorije o uzrocima rasne diskriminacije u različitim vrstama gospodarskih transakcija.

Još jedan primjer koji pokazuje sposobnost istraživača za obavljanje pokusa na digitalnom polju u postojećim sustavima je istraživanje Arnout van de Rijtkroz i suradnici (2014) o ključeva uspjeha. U mnogim aspektima života, naizgled slični ljudi završiti s vrlo različitim rezultatima. Jedno od mogućih objašnjenja za ovaj uzorak je da mali i bitno slučajni prednosti može lock-u i rastu tijekom vremena, što je proces koji znanstvenici nazivaju kumulativni prednost. Kako bi se utvrdilo je li mali početni uspjesi lock-in ili nestaju, van de Rijt i suradnici (2014) intervenirala u četiri različite sustave daruju uspjeh na nasumično odabranih sudionika, a zatim izmjeri dugoročne učinke ove proizvoljne uspjeha.

Točnije, van de Rijt i kolege 1) založiti novaca da slučajno odabranih projekata na kickstarter.com , web stranica grupno financiranje; 2) pozitivno ocijenio slučajnim odabirom recenzije na web epinions ; 3) daje nagrade za nasumično odabranih suradnika na Wikipediji ; i 4) potpisali su slučajno odabrani predstavke na change.org . Istraživači su otkrili vrlo slične rezultate u sva četiri sustava: u svakom slučaju, sudionici koji su nasumično dati neki rani uspjeh je otišao na to imaju više naknadne uspjeha od svojih inače potpuno neprimjetan vršnjaka (Slika 4.13). Činjenica da je isti obrazac pojavio se u mnogim sustavima povećava vanjsku valjanost ovih rezultata, jer to smanjuje šanse da je ovaj uzorak je artefakt od bilo kojeg sustava.

Slika 4.13: dugoročne učinke slučajno podario uspjeh u četiri različite društvene sustave. Arnout van de Rijt i suradnici (2014) 1) obećala novac nasumično odabrane projekte kickstarter.com , web stranica grupno financiranje; 2) pozitivno ocijenio slučajnim odabirom recenzije na web epinions ; 3) daje nagrade za nasumično odabranih suradnika na Wikipediji ; i 4) potpisali su slučajno odabrani predstavke na change.org .

Zajedno, ova dva primjera pokazuju da znanstvenici mogu provoditi eksperimente digitalne terenu, bez potrebe da partner s tvrtkama ili potrebe za izgradnju složenih digitalnih sustava. Nadalje, Tablica 4.2 daje još više primjera koji pokazuju raspon onoga što je moguće kada se istraživači koriste infrastrukturu postojećih sustava za isporuku liječenja i / ili mjerenje rezultata. Ovi eksperimenti su relativno jeftini za istraživače te imaju visok stupanj realizma. No, ti eksperimenti nude istraživačima ograničenu kontrolu nad sudionicima, tretmani, i ishoda koji se mjere. Nadalje, za eksperimente koje se odvijaju samo u jednom sustavu, istraživači trebaju biti zabrinuti da učinci mogu biti vođeni dinamike sustava specifične (npr, način na koji Kickstarter rangira projekte ili na način na koji change.org redova peticije, za više informacija vidi raspravu o algoritamske zbrka u poglavlju 2). Na kraju, kada su istraživači intervenirati u radnim sustavima, lukav etička pitanja javljaju o mogućoj štete za sudionike, a ne sudionika i sustava. Mi ćemo razmotriti ove etičko pitanje detaljnije u poglavlju 6, a tu je izvrsna rasprava o njima u prilogu van de Rijtkroz (2014) . Ustupke koji dolaze s radom u postojećem sustavu nisu idealni za svaki projekt, i iz tog razloga neki znanstvenici izgraditi vlastiti eksperimentalni sustav, na temu sljedećem poglavlju.