Galite paleisti eksperimentus esamomis aplinkoje, dažnai be jokio kodavimo ar partnerystę.
Logistiniu požiūriu lengviausias būdas atlikti skaitmeninį eksperimentą - perduoti savo eksperimentą esamos aplinkos viršuje. Tokie eksperimentai gali būti vykdomi pakankamai dideliu mastu ir nereikalauja partnerystės su bendrove arba dideliu programinės įrangos kūrimu.
Pavyzdžiui, Jennifer Doleac ir Luke Stein (2013) Pasinaudojo internetine rinką, panašią į "Craigslist", kad galėtų atlikti eksperimentą, kurio metu buvo išmatuota rasinė diskriminacija. Jie reklamavo tūkstančius iPod, sistemingai keisdami pardavėjo charakteristikas, jie galėjo ištirti lenktynių poveikį ekonominiams sandoriams. Be to, jie naudojo savo eksperimento mastą, kad nustatytų, kada poveikis buvo didesnis (gydymo poveikis yra nevienodas) ir pateikti keletą idėjų apie tai, kodėl poveikis gali atsirasti (mechanizmai).
"Doleac" ir "Stein" "iPod" skelbimai skiriasi pagal tris pagrindinius aspektus. Pirma, tyrėjai keitė pardavėjo charakteristikas, apie kurį pranešė fotografuota ranka, turinti iPod [balta, juoda, balta su tatuiruotėmis] (4.13 pav.). Antra, jie pakeitė prašomą kainą [$ 90, $ 110, $ 130]. Trečia, jie keitė skelbimo teksto kokybę [aukštos kokybės ir žemos kokybės (pvz., "Kapitalizacijos klaidos" ir "spelin" klaidos)]. Taigi, autoriai turėjo 3 \(\times\) 3 \(\times\) 2 dizainą, kuris buvo dislokuotas daugiau nei 300 vietinių rinkų, nuo miestų (pvz., Kokomo, Indianos ir North Platte, Nebraskos) iki mega- miestuose (pvz., Niujorke ir Los Andžele).
Vidutiniškai visomis sąlygomis, baltųjų pardavėjų rezultatai buvo geresni nei juodieji pardavėjai, o tatuiruočių pardavėjai turėjo tarpinių rezultatų. Pavyzdžiui, baltieji pardavėjai gavo daugiau pasiūlymų ir turėjo didesnes galutines pardavimo kainas. Be šio vidutinio poveikio, Doleacas ir Steinas įvertino poveikio nevienalytumą. Pavyzdžiui, viena iš ankstesnės teorijos prognozių yra ta, kad diskriminacija būtų mažesnė tose rinkose, kuriose tarp pirkėjų yra didesnė konkurencija. Naudodami pasiūlymų skaičių šioje rinkoje kaip pirkėjų konkurencijos dydį, mokslininkai nustatė, kad juodieji pardavėjai iš tiesų gauna blogesnius pasiūlymus mažos konkurencijos rinkose. Be to, palyginus aukščiausios kokybės ir žemos kokybės teksto skelbimų rezultatus, Doleac ir Stein nustatė, kad skelbimo kokybė neturėjo įtakos nepalankioms sąlygoms, su kuriomis susiduria juodieji ir tatuiruotę pardavėjai. Galiausiai, pasinaudodama tuo, kad skelbimai buvo pateikti daugiau nei 300 rinkų, autoriai nustatė, kad juodieji pardavėjai buvo labiau nuskriausti miestuose, kuriuose buvo aukštas nusikalstamumo lygis ir didelė segregacija gyvenamosiose patalpose. Nė vienas iš šių rezultatų neleidžia tiksliai suvokti, kodėl juodųjų pardavėjų rezultatai buvo blogesni, bet kartu su kitų tyrimų rezultatais jie gali pradėti teorijas informuoti apie rasinės diskriminacijos priežastis skirtingų rūšių ekonominėse operacijose.
Kitas pavyzdys, rodantis tyrėjų gebėjimą atlikti skaitmeninius eksperimentus esamose sistemose, yra Arnout van de Rijt ir jo kolegų (2014) Tyrimas dėl sėkmės raktų. Daugeliu gyvenimo aspektų, atrodo, panašūs žmonės susiduria su labai skirtingais rezultatais. Vienas iš galimų šio modelio paaiškinimų yra tai, kad mažos ir iš esmės atsitiktinės pranašumai gali užrakinti ir išaugti laikui bėgant, procesas, kurį mokslininkai vadina kumuliaciniu pranašumu . Deja, van de Rijt ir jo kolegos (2014) Įsitraukė į keturias skirtingas sistemas, suteikiančias sėkmę atsitiktinai atrinktiems dalyviams, ir tada išmatavo vėlesnį šios savavališkos sėkmės poveikį.
Konkrečiau tariant, van de Rijt ir jo kolegos (1) įkeitė pinigus į atsitiktinai atrinktus projektus "Kickstarter", žiniatinklio svetainės, kuriai skiriama daug pinigų; (2) teigiamai įvertino atsitiktinai pasirinktas apžvalgas "Epinions", produkcijos peržiūros svetainėje; (3) davė apdovanojimus atsitiktinai parinktiems Wikipedia autoriaus dalyviams; ir (4) pasirašė atsitiktine tvarka atrinktus "change.org" peticijas. Jie randa labai panašių rezultatų visose keturiose sistemose: kiekvienu atveju dalyviai, kurie atsitiktine tvarka pasirinko ankstyvą sėkmę, toliau sėkmingiau sekėsi nei kitaip visiškai nesiskiriantys vieniši (4.14 pav.). Tai, kad tas pats modelis pasirodė daugelyje sistemų, padidina šių rezultatų išorinį pagrįstumą, nes tai sumažina tikimybę, kad šis modelis yra bet kurios konkrečios sistemos artefaktas.
Kartu šie du pavyzdžiai rodo, kad mokslininkai gali atlikti skaitmeninius eksperimentus be partnerių su įmonėmis arba kurti sudėtingas skaitmenines sistemas. Be to, 4.2 lentelėje pateikiami dar daugiau pavyzdžių, kurie rodo, kiek įmanoma, kai mokslininkai naudoja esamų sistemų infrastruktūrą, kad galėtų atlikti gydymą ir (arba) įvertinti rezultatus. Šie eksperimentai yra palyginti pigūs mokslininkams ir jie yra labai realistiški. Tačiau jie suteikia mokslininkams ribotą dalyvių kontrolę, gydymo būdus ir išmatuojamus rezultatus. Be to, eksperimentams, vykstantiems tik vienoje sistemoje, mokslininkams reikia susirūpinti, kad poveikį galėtų lemti konkrečiai sistemai būdinga dinamika (pvz., Kickstarteras prilygsta projektams arba tai, kaip "change.org" pateikia peticijas; norint gauti daugiau informacijos, žr. 2 skyriuje aptariamą algoritminės klaidos problemą). Galiausiai, kai mokslininkai įsikiša į darbo sistemas, kyla sudėtingų etikos klausimų apie galimą žalą dalyviams, dalyviams ir sistemoms. Šį etikos klausimą mes išsamiau aptarsime 6 skyriuje ir puikiai aptariame juos van de Rijt ir kt. Prieduose. (2014) . Komponentai, kurie dirba esamoje sistemoje, nėra idealūs kiekvienam projektui, todėl kai kurie tyrinėtojai kuria savo eksperimentinę sistemą, kaip toliau parodysiu.
Tema | Nuorodos |
---|---|
"Barnstars" įtaka Wikipedia | Restivo and Rijt (2012) ; Restivo and Rijt (2014) ; Rijt et al. (2014) |
Veiksmas pranešimo apie priekabiavimą apie rasistinius tweets | Munger (2016) |
Aukciono metodo įtaka pardavimo kainai | Lucking-Reiley (1999) |
Reputacijos įtaka internetinių aukcionų kainai | Resnick et al. (2006) |
Parduodami beisbolo korteles eBay pardavėjo rase | Ayres, Banaji, and Jolls (2015) |
Pardavimų lenktynių poveikis iPod | Doleac and Stein (2013) |
Svečio varžybų poveikis Airbnb nuomos mokesčiams | Edelman, Luca, and Svirsky (2016) |
Aukojimo poveikis Kickstarter projektų sėkmei | Rijt et al. (2014) |
Rizikos ir etninės kilmės poveikis būsto nuomai | Hogan and Berry (2011) |
Teigiamo įvertinimo įtaka ateities reitingams "Epinions" | Rijt et al. (2014) |
Parašų įtaka peticijų sėkmei | Vaillant et al. (2015) ; Rijt et al. (2014) ; Rijt et al. (2016) |