4.5.1.1 Použiť existujúci prostredie

Môžete vykonávať experimenty vnútri existujúcich prostredí, často bez kódovania alebo partnerstva.

Logisticky, najjednoduchší spôsob, ako robiť digitálne experimenty je prekryť svoj experiment na vrchole existujúceho prostredia, čo vám umožní spustiť digitálne terénne experiment. Tieto pokusy možno spustiť v primerane veľkom meradle a nevyžadujú partnerstva so spoločnosťou alebo rozsiahle vývoj softvéru.

Napríklad Jennifer Doleac a Luke Stein (2013) využil on-line trhovisko (napr Craigslist) spustiť experiment, ktorý meranú rasovú diskrimináciu. Doleac a Stein inzeroval tisíce iPod a systematickým menením charakteristiky predávajúceho, boli schopní študovať vplyv závodu na ekonomických transakcií. Ďalej Doleac a Stein používa meradlo ich experimentu odhadnúť, kedy sa účinok je väčší (heterogenita účinkov liečby) a ponúkajú niektoré predstavy o tom, prečo je efekt môže nastať (mechanizmov).

Pred štúdiom Doleac a Stein, tam boli dva hlavné prístupy k experimentálne meraním diskrimináciu. V korešpondencii štúdie vedci vytvoriť životopisy fiktívnych ľudí rôznych rás a používať tieto životopisy, aby sa napríklad žiadať o rôzne úlohy. Bertrand a Mullainathan je (2004) papier s pamätným názvom "Are Emily a Greg lepšie zamestnateľnosť než Lakisha a Jamal? Poľné pokus o uplatnenie na trhu práce diskriminácie "je nádherné ilustrácie korešpondencia štúdie. Korešpondenčná štúdie majú relatívne nízke náklady na pozorovanie, čo umožňuje, aby jeden výskumník zhromaždiť tisíce pozorovanie v typickej štúdii. Ale boli spochybňovaná korešpondencie štúdie rasovej diskriminácie pretože názvy potenciálne signál mnoho vecí okrem závode žiadateľa. To znamená, že mená ako Greg, Emily, Lakisha a Jamal môže signalizovať spoločenskú triedu navyše na rasu. Preto akýkoľvek rozdiel v zaobchádzaní pre resumé z Greg a Jamal to mohlo byť spôsobené viac ako predpokladaných rasa rozdielov žiadateľov. Štúdia audit, na druhú stranu, zahŕňať najímanie aktérmi rôznych rás žiadať osobne o zamestnanie. Aj keď štúdie kontrolné poskytujú jasný signál žiadajúci rasy, ktoré sú veľmi drahé na pozorovaní, čo znamená, že majú zvyčajne len stovky pozorovaní.

Vo svojom digitálnom poľným pokusu, Doleac a Stein boli schopní vytvoriť atraktívne hybrid. Boli schopní zbierať dáta pri relatívne nízke náklady na sledovanie, čo v tisícoch pozorovaní (ako je uvedené v porovnávacej štúdii) -a boli schopní signalizovať závod použitie fotografií-za vzniku číreho uncounfounded signál rasy (ako v štúdii auditu ). To znamená, že on-line prostredie niekedy umožní výskumníkom vytvárať nové spôsoby liečby, ktoré majú vlastnosti, ktoré sú ťažko postaviť inak.

IPod inzeráty Doleac a Stein meniť vychádza z troch základných rozmerov. Po prvé, meniť vlastnosti predávajúceho, ktorý bol naznačený ruky držiacej fotografovaného iPod [biela, čierna, biela s tetovaním] (obrázok 4.12). Po druhé, meniť požadovanú cenu [$ 90, $ 110, $ 130]. Po tretie, oni meniť kvalitu reklamného textu [vysoko kvalitného a nekvalitného (napr kapitalizácie a chýb Špelina)]. To znamená, že autori mali návrh 3 x 3 x 2, ktorý bol nasadený na viac ako 300 miestnych trhoch od miest (napr Kokomo, IN a North Platte, NE) do veľkomiest (napr New Yorku a Los Angeles).

Obrázok 4.12: Ruky použité v experimente Doleac and Stein (2013) . iPody boli predávané predajcami s rôznymi vlastnosťami na mieru diskriminácie v on-line trhu.

V priemere naprieč všetkými podmienkami, výsledky boli lepšie pre biele predajcu než čierneho predajcu s tým, že predávajúci má tetovaný priebežné výsledky. Napríklad biele predajcovia dostala viac ponúk a mali vyššie konečnej predajnej ceny. Okrem týchto priemerných efekty, Doleac a Stein odhaduje rôznorodosť efektov. Napríklad jeden predikcie z predchádzajúcich teórií je, že diskriminácia by bol menej na trhoch, ktoré sú konkurencieschopnejšie. Použitie Počet prijatých ponúk ako proxy pre konkurenciu na trhu, autori zistili, že čierne predajcovia skutočne dostávať ponuky horšie trhoch s nízkym stupňom hospodárskej súťaže. Ďalej, na základe porovnania výsledkov za reklamy s vysoko kvalitným a nekvalitným textom, Doleac a Stein zistil, že kvalita reklám nemá vplyv na znevýhodnenia európskych čiernych a vytetované predajcov. Napokon, s využitím skutočnosti, že reklamy boli umiestnené na viac ako 300 trhoch, autori zistili, že čierne predajcovia sú viac znevýhodnený v mestách s vysokou mierou kriminality a vysokú segregácie v oblasti bývania. Žiadny z týchto výsledkov nám dávajú presné pochopenie presne to, prečo čierni predajcovia mali horšie výsledky, ale v kombinácii s výsledkami iných štúdií, môžu začať informovať teórie o príčinách rasovej diskriminácie v rôznych typoch ekonomických transakcií.

Ďalší príklad, ktorý ukazuje schopnosť výskumníkov vykonávať experimenty digitálneho poľa v existujúcich systémov je výskum Arnout van de Rijt a jeho kolegovia (2014) na kľúčov k úspechu. V mnohých aspektoch života, zdanlivo podobné ľudí skončí s veľmi odlišnými výsledkami. Jedným z možných vysvetlení tohto modelu je, že malé a v podstate náhodnými výhody možno uzamknúť-in a rast v priebehu času, čo je proces, ktorý vedci nazývajú kumulatívne výhodu. Za účelom zistenia, či malé počiatočné úspechy lock-in alebo zmiznúť, van de Rijt a jeho kolegovia (2014) zasiahol do štyroch rôznych systémov prepožičiava úspech na náhodne vybraných účastníkov, a potom meria dlhodobé vplyvy tohto nežiaduceho úspechu.

Presnejšie povedané, van de Rijt a jeho kolegovia 1) zastavenej peniaze na náhodne vybrané projekty na kickstarter.com , webové stránky crowdfunding; 2) pozitívne hodnotili náhodne vybraných názory na webových stránkach Epinions ; 3) dala ocenenie na náhodne vybraných prispievateľom do Wikipédie ; a 4), ​​podpísané náhodne vybrané petície na change.org . Vedci zistili, veľmi podobné výsledky naprieč všetkými štyrmi systémami: v každom prípade, že účastníci boli náhodne uvedené nejaký skorý úspech pokračoval mať väčší úspech než následné ich inak úplne nerozoznateľné rovesníkmi (obr 4.13). Skutočnosť, že rovnaký vzor sa objavil v mnohých systémoch zvyšuje vonkajšiu platnosť týchto výsledkov, pretože to znižuje možnosť, že tento vzorec je artefakt konkrétneho systému.

Obrázok 4.13: Dlhodobá účinky náhodne udelil úspech v štyroch rôznych spoločenských systémov. Arnout van de Rijt a jeho kolegovia (2014) 1) sľúbil peniaze na náhodne vybrané projekty na kickstarter.com , webové stránky crowdfunding; 2) pozitívne hodnotili náhodne vybraných názory na webových stránkach Epinions ; 3) dala ocenenie na náhodne vybraných prispievateľom do Wikipédie ; a 4), ​​podpísané náhodne vybrané petície na change.org .

Spoločne tieto dva príklady ukazujú, že vedci môžu vykonávať experimenty digitálne terénne aby bolo nutné, aby partner s firmami, alebo potrebe vytvárať zložité digitálne systémy. Ďalej Tabuľka 4.2 poskytuje ešte viac príkladov, ktoré ukazujú rozsah toho, čo je možné, keď výskumníci používajú infraštruktúru existujúcich systémov doručiť liečby a / alebo merať výsledky. Tieto experimenty sú relatívne lacné pre výskumných pracovníkov a ponúkajú vysokú mieru realizmu. Ale tieto experimenty ponúkajú výskumníkom obmedzenú kontrolu nad účastníkmi ošetrenie a výsledky sa budú hodnotiť. Ďalej, pre experimenty, ktoré sa konajú v jedinom systéme, výskumní pracovníci musia byť znepokojený tým, že účinky by mohli byť poháňané dynamiky špecifickej pre daný systém (napríklad tak, že Kickstarter patrí projekty alebo spôsob, akým change.org radí petície, pre viac informácií, vidieť diskusiu o algoritmického mätúcich v kapitole 2). Nakoniec, keď výskumníci zasahovať do pracovných systémoch, zákerné etické otázky sa objaví o možnom poškodení účastníkov, ktoré nie sú účastníkmi a systémov. Budeme uvažovať tieto etickú otázku podrobnejšie v kapitole 6, a tam je vynikajúce pojednanie o nich v prílohe van de Rijt (2014) . Kompromisy, ktoré prichádzajú s prácou v existujúcom systéme nie sú ideálne pre každý projekt, a preto niektorí vedci budovať svoje vlastné experimentálne systém, na tému ďalšej časti.