4.5.1 Gumamit ng mga umiiral na kapaligiran

Maaari kang magpatakbo ng mga eksperimento sa loob umiiral na kapaligiran, madalas nang walang anumang coding o partnership.

Logistically, ang pinakamadaling paraan upang makagawa ng isang digital na eksperimento ay upang mapalabas ang iyong eksperimento sa ibabaw ng isang umiiral na kapaligiran. Ang ganitong mga eksperimento ay maaaring tumakbo sa isang makatwirang malaking sukat at hindi nangangailangan ng pakikipagsosyo sa isang kumpanya o malawak na pag-unlad ng software.

Halimbawa, sinamantala ng Jennifer Doleac at Lucas Stein (2013) isang online na merkado na katulad ng Craigslist upang magpatakbo ng isang eksperimento na sumusukat sa diskriminasyon sa lahi. Nag-advertise sila ng libu-libong mga iPod, at sa pamamagitan ng sistematikong pag-iibayo sa mga katangian ng nagbebenta, natutunan nila ang epekto ng lahi sa mga transaksyong pang-ekonomiya. Dagdag dito, ginamit nila ang laki ng kanilang eksperimento upang matantya kung ang epekto ay mas malaki (heterogeneity ng mga epekto sa paggamot) at upang mag-alok ng ilang mga ideya kung bakit maaaring maganap ang epekto (mekanismo).

Ang mga advertisement ng Doleac at iPod ng Stein ay iba-iba sa tatlong pangunahing sukat. Una, iba-iba ang mga mananaliksik sa mga katangian ng nagbebenta, na sinenyasan ng photographed ng kamay na may hawak na iPod [puti, itim, puti na may tattoo] (tayahin 4.13). Pangalawa, iba-iba ang presyo ng pagtatanong [$ 90, $ 110, $ 130]. Ikatlo, naiiba nila ang kalidad ng teksto ng ad [mataas ang kalidad at mababang kalidad (hal., Mga pagkakamali ng cApitalization at mga pagkakamali ng spelin)]. Kaya, ang mga may-akda ay may isang 3 \(\times\) 3 \(\times\) 2 disenyo na kung saan ay deployed sa higit sa 300 mga lokal na mga merkado, mula sa bayan (eg, Kokomo, Indiana at North Platte, Nebraska) upang mega- mga lungsod (eg, New York at Los Angeles).

Figure 4.13: Mga kamay na ginamit sa eksperimento ng Doleac and Stein (2013) . Ang mga iPod ay ibinebenta ng mga nagbebenta na may iba't ibang mga katangian upang masukat ang diskriminasyon sa isang online na pamilihan. Doleac and Stein (2013) ng pahintulot mula sa Doleac and Stein (2013) , tayahin 1.

Na-average sa lahat ng mga kondisyon, ang mga resulta ay mas mainam para sa mga white seller kaysa sa mga black seller, kasama ang tattooed seller na mayroong intermediate results. Halimbawa, ang mga puti na nagbebenta ay nakatanggap ng higit pang mga alok at mayroong mas mataas na pangwakas na mga presyo sa pagbebenta. Higit pa sa mga karaniwang epekto, tinatantya ng Doleac at Stein ang heterogeneity ng mga epekto. Halimbawa, ang isang hula mula sa naunang teorya ay na ang diskriminasyon ay mas mababa sa mga pamilihan kung saan mayroong higit na kumpetisyon sa pagitan ng mga mamimili. Gamit ang bilang ng mga alok sa merkado na bilang isang sukatan ng halaga ng kumpetisyon ng mamimili, nalaman ng mga mananaliksik na ang mga black seller ay talagang tumatanggap ng mas masahol na alok sa mga merkado na may mababang antas ng kompetisyon. Dagdag pa, sa pamamagitan ng paghahambing ng mga kinalabasan para sa mga ad na may mataas na kalidad at mababang kalidad na teksto, natuklasan ng Doleac at Stein na ang kalidad ng ad ay hindi nakakaapekto sa kawalan na nahaharap sa mga itim at tattooed na mga nagbebenta. Sa wakas, sinasamantala ang katotohanan na ang mga patalastas ay inilagay sa higit sa 300 mga merkado, nalaman ng mga may-akda na ang mga black seller ay mas masama sa mga lungsod na may mataas na mga antas ng krimen at mataas na segregasyon ng tirahan. Wala sa mga resultang ito ang nagbibigay sa amin ng tumpak na pag-unawa sa eksaktong dahilan kung bakit mas masahol na resulta ang mga black seller, ngunit, kapag isinama sa mga resulta ng iba pang mga pag-aaral, maaari nilang simulan upang ipaalam ang mga teorya tungkol sa mga sanhi ng diskriminasyon sa lahi sa iba't ibang uri ng transaksyong pang-ekonomiya.

Ang isa pang halimbawa na nagpapakita ng kakayahan ng mga mananaliksik na magsagawa ng mga eksperimentong digital na patlang sa mga umiiral na sistema ay ang pananaliksik ni Arnout van de Rijt at mga kasamahan (2014) sa mga susi sa tagumpay. Sa maraming mga aspeto ng buhay, tila katulad na mga tao ay napupunta sa magkakaibang mga kinalabasan. Ang isang posibleng paliwanag para sa pattern na ito ay ang maliit na-at mahalagang mga random na pakinabang ay maaaring i-lock at palaguin sa paglipas ng panahon, isang proseso na tinatawag ng mga mananaliksik na pinagsama-samang kalamangan . Upang matukoy kung ang mga maliliit na paunang tagumpay ay nakakandado o naglaho, ang van de Rijt at mga kasamahan (2014) nagsalo sa apat na magkakaibang mga sistema na nagtatagumpay sa mga piling napiling mga kalahok, at pagkatapos ay sinukat ang kasunod na mga epekto ng arbitraryong tagumpay na ito.

Higit na partikular, ang van de Rijt at mga kasamahan (1) ay nagpangako ng pera sa mga piling napiling mga proyekto sa Kickstarter, isang website ng crowdfunding; (2) positibong inirerekomenda ang mga napiling random na mga review sa Epinions, isang website ng pagsusuri ng gumawa; (3) nagbigay ng mga parangal sa mga random na piniling mga taga-ambag sa Wikipedia; at (4) pinirmahan ang mga napiling random na petisyon sa change.org. Nakakita sila ng katulad na mga resulta sa lahat ng apat na sistema: sa bawat kaso, ang mga kalahok na random na binigyan ng ilang maagang tagumpay ay nagpunta upang magkaroon ng higit pang kasunod na tagumpay kaysa sa kanilang kung hindi man ganap na hindi makilala ang mga kapantay (figure 4.14). Ang katotohanan na ang parehong pattern lumitaw sa maraming mga sistema ay nagdaragdag ang panlabas na bisa ng mga resulta dahil ito binabawasan ang pagkakataon na ang pattern na ito ay isang artepakto ng anumang partikular na sistema.

Figure 4.14: Ang mga pangmatagalang epekto ng random na pagbigay ng tagumpay sa apat na iba't ibang mga social system. Ang Arnout van de Rijt at mga kasamahan (2014) (1) ay nag-pledge ng pera sa sapalarang napiling mga proyekto sa Kickstarter, isang website ng crowdfunding; (2) positibong inirerekomenda ang mga napiling random na mga review sa Epinions, isang website ng pagsusuri ng gumawa; (3) nagbigay ng mga parangal sa mga random na piniling mga taga-ambag sa Wikipedia; at (4) pinirmahan ang mga napiling random na petisyon sa change.org. Inangkop mula sa Rijt et al. (2014) , tayahin 2.

Magkasama, ang dalawang halimbawa na ito ay nagpapakita na ang mga mananaliksik ay maaaring magsagawa ng mga digital na eksperimento sa field nang hindi nangangailangan ng kasosyo sa mga kumpanya o bumuo ng kumplikadong mga digital na sistema. Dagdag pa, ang talahanayan 4.2 ay nagbibigay ng higit pang mga halimbawa na nagpapakita ng saklaw ng kung ano ang posible kapag ginagamit ng mga mananaliksik ang imprastraktura ng mga umiiral na sistema upang maghatid ng paggamot at / o sukatin ang mga kinalabasan. Ang mga eksperimento ay medyo mura para sa mga mananaliksik at nag-aalok sila ng mataas na antas ng pagiging totoo. Ngunit nag-aalok ang mga ito ng mga mananaliksik na limitado ang kontrol sa mga kalahok, paggamot, at mga resulta upang masukat. Bukod pa rito, para sa mga eksperimento na nagaganap sa isang sistema lamang, ang mga mananaliksik ay kailangang mag-alala na ang mga epekto ay maaaring mapadali ng mga dynamics na partikular sa system (hal., Ang paraan na ang hanay ng Kickstarter ay mga proyekto o ang paraan na ang change.org ay nagraranggo ng mga petisyon; para sa karagdagang impormasyon, tingnan ang talakayan tungkol sa algorithmic confounding sa kabanata 2). Sa wakas, kapag pumasok ang mga mananaliksik sa mga sistemang nagtatrabaho, ang mga nakakaintriga na etikal na tanong ay lumabas tungkol sa posibleng pinsala sa mga kalahok, di-kalahok, at mga sistema. Isipin natin ang mga etikal na tanong na ito nang mas detalyado sa kabanata 6, at may mahusay na talakayan sa mga ito sa apendiks ng van de Rijt et al. (2014) . Ang mga trade-off na nanggagaling sa pagtatrabaho sa isang umiiral na sistema ay hindi perpekto para sa bawat proyekto, at para sa kadahilanang iyon ang ilang mga mananaliksik ay nagtatayo ng kanilang sariling pang-eksperimentong sistema, tulad ng ilalarawan ko sa susunod.