4.5.1.1 persekitaran Penggunaan sedia ada

Anda boleh menjalankan eksperimen di dalam persekitaran yang sedia ada, sering tanpa sebarang kod atau perkongsian.

Logistik, cara yang paling mudah untuk melakukan eksperimen digital adalah untuk menindih percubaan anda di atas persekitaran yang sedia ada, membolehkan anda untuk menjalankan bidang eksperimen digital. Eksperimen ini boleh dijalankan pada skala yang agak besar dan tidak memerlukan perkongsian dengan syarikat atau pembangunan perisian luas.

Sebagai contoh, Jennifer Doleac dan Lukas Stein (2013) mengambil kesempatan daripada pasaran dalam talian (contohnya, Craigslist) untuk menjalankan percubaan yang diukur diskriminasi kaum. Doleac dan Stein diiklankan ribuan iPod, dan secara sistematik yang berbeza-beza ciri-ciri penjual, mereka dapat mengkaji kesan bangsa dalam transaksi ekonomi. Selanjutnya, Doleac dan Stein digunakan skala eksperimen mereka untuk menganggarkan apabila kesannya adalah lebih besar (kepelbagaian kesan rawatan) dan menawarkan beberapa idea tentang mengapa kesan yang mungkin berlaku (mekanisme).

Sebelum kajian Doleac dan Stein, telah terdapat dua pendekatan utama untuk uji kaji mengukur diskriminasi. Dalam surat-menyurat kajian penyelidik mencipta resume orang fiksyen yang berlainan kaum dan menggunakan resume ini untuk, sebagai contoh, memohon pekerjaan yang berbeza. Bertrand dan Mullainathan ini (2004) laporan dengan judul yang dilupakan "Adakah Emily dan Greg mendapat kerja Than Lakisha dan Jamal? A Eksperimen Field di Pasaran Buruh Diskriminasi "adalah satu contoh yang indah kajian surat-menyurat. kajian menyurat mempunyai kos yang agak rendah bagi setiap pemerhatian, yang membolehkan seorang penyelidik tunggal untuk mengumpul beribu-ribu pemerhatian dalam kajian biasa. Tetapi, kajian menyurat diskriminasi kaum telah dipersoalkan kerana nama berpotensi isyarat banyak perkara tambahan kepada perlumbaan pemohon. Iaitu, nama-nama seperti Greg, Emily, Lakisha dan Jamal mungkin isyarat kelas sosial di samping berlumba. Oleh itu, apa-apa perbezaan dalam rawatan untuk resume daripada Greg dan Jamal mungkin disebabkan oleh lebih daripada perbezaan bangsa dianggap pemohon. Kajian Audit, di sisi lain, melibatkan pengambilan pelakon berbilang kaum untuk memohon sendiri untuk pekerjaan. Walaupun kajian audit menyediakan isyarat jelas perlumbaan pemohon, mereka adalah sangat mahal setiap pemerhatian, yang bermaksud bahawa mereka biasanya hanya mempunyai beratus-ratus pemerhatian.

Dalam bidang eksperimen digital mereka, Doleac dan Stein dapat mewujudkan hibrid menarik. Mereka dapat mengumpul data pada kos yang agak rendah bagi setiap pemerhatian yang mengakibatkan beribu-ribu pemerhatian (seperti dalam kajian surat-menyurat) -dan mereka mampu untuk memberi isyarat perlumbaan menggunakan gambar-menyebabkan isyarat uncounfounded yang jelas bangsa (seperti dalam kajian audit ). Oleh itu, persekitaran dalam talian kadang-kadang membolehkan penyelidik untuk membuat rawatan baru yang mempunyai ciri-ciri yang sukar untuk membina sebaliknya.

Iklan iPod daripada Doleac dan Stein diubah kepada tiga dimensi utama. Pertama, mereka diubah ciri-ciri penjual, yang telah memberi isyarat dengan tangan gambar memegang iPod [putih, hitam, putih dengan tatu] (Rajah 4.12). Kedua, mereka diubah harga yang meminta [$ 90, $ 110, $ 130]. Ketiga, mereka diubah kualiti teks iklan [berkualiti tinggi dan berkualiti rendah (contohnya, kesilapan permodalan dan kesilapan spelin)]. Oleh itu, penulis mempunyai reka bentuk 3 X 3 X 2 yang telah digunakan di lebih daripada 300 pasaran tempatan terdiri daripada bandar-bandar (contohnya, Kokomo, IN dan North Platte, NE) ke bandar-bandar mega (contohnya, New York dan Los Angeles).

Rajah 4.12: Tangan yang digunakan di dalam eksperimen Doleac and Stein (2013) . iPod telah dijual oleh penjual dengan ciri-ciri yang berbeza untuk mengukur diskriminasi dalam pasaran dalam talian.

Purata dari semua keadaan, hasil adalah lebih baik bagi penjual putih daripada penjual hitam, dengan penjual tatu mempunyai keputusan yang pertengahan. Sebagai contoh, penjual putih menerima lebih banyak tawaran dan mempunyai harga jualan akhir yang lebih tinggi. Beyond kesan purata, Doleac dan Stein menganggarkan kepelbagaian kesan. Sebagai contoh, satu ramalan dari teori awal adalah bahawa diskriminasi akan kurang dalam pasaran yang lebih berdaya saing. Menggunakan bilangan tawaran yang diterima sebagai proksi untuk persaingan pasaran, penulis mendapati bahawa penjual hitam memang menerima tawaran lebih teruk dalam pasaran dengan tahap yang rendah persaingan. Selanjutnya, dengan membandingkan hasil untuk iklan dengan berkualiti tinggi dan teks yang berkualiti rendah, Doleac dan Stein mendapati kualiti iklan tidak memberi kesan kelemahan yang dihadapi oleh penjual hitam dan tatu. Akhirnya, mengambil kesempatan daripada fakta bahawa iklan yang ditempatkan di lebih 300 pasaran, penulis mendapati bahawa penjual hitam lebih kurang bernasib baik di bandar-bandar dengan kadar jenayah yang tinggi dan pengasingan kediaman tinggi. Tiada keputusan ini memberikan kita pemahaman yang tepat tepat mengapa penjual hitam mempunyai hasil yang lebih teruk, tetapi, apabila digabungkan dengan hasil kajian yang lain, mereka boleh mula untuk memberitahu teori tentang punca-punca diskriminasi kaum dalam pelbagai jenis transaksi ekonomi.

Satu lagi contoh yang menunjukkan keupayaan penyelidik untuk menjalankan uji kaji lapangan digital dalam sistem yang sedia ada adalah penyelidikan oleh Arnout van de Rijt dan rakan-rakan (2014) di kunci kepada kejayaan. Dalam banyak aspek kehidupan, orang yang seolah-olah sama berakhir dengan hasil yang sangat berbeza. Satu penjelasan yang mungkin untuk corak ini adalah bahawa kecil dan dasarnya rawak kelebihan boleh mengunci masuk dan berkembang dari masa ke masa, satu proses yang penyelidik memanggil kelebihan terkumpul. Dalam usaha untuk menentukan sama ada kejayaan permulaan yang kecil mengunci masuk atau hilang, van de Rijt dan rakan-rakan (2014) campur tangan ke dalam empat sistem yang berbeza mengurniakan kejayaan kepada peserta dipilih secara rawak, dan kemudian mengukur kesan jangka panjang kejayaan sewenang-wenangnya ini.

Lebih khusus lagi, van de Rijt dan rakan-1) yang disandarkan wang untuk dipilih projek secara rawak kickstarter.com , sebuah laman web crowdfunding; 2) diberi nilai positif ulasan dipilih secara rawak di laman web Epinions ; 3) memberi anugerah kepada yang dipilih secara rawak untuk penyumbang Wikipedia ; dan 4) ditandatangani dipilih secara rawak petisyen di change.org . Para penyelidik mendapati keputusan yang hampir sama di semua empat sistem: dalam setiap kes, peserta yang telah diberikan secara rawak beberapa kejayaan awal seterusnya mempunyai lebih banyak kejayaan berikutnya daripada rakan-rakan jika tidak benar-benar tidak dapat dibezakan mereka (Rajah 4.13). Hakikat bahawa corak yang sama muncul dalam banyak sistem meningkatkan kesahan luaran keputusan ini kerana ia mengurangkan peluang bahawa corak ini adalah artifak mana-mana sistem tertentu.

Rajah 4.13: Kesan jangka panjang kejayaan dikurniakan secara rawak dalam empat sistem sosial yang berbeza. Arnout van de Rijt dan rakan-rakan (2014) 1) yang disandarkan wang untuk dipilih projek secara rawak kickstarter.com , sebuah laman web crowdfunding; 2) diberi nilai positif ulasan dipilih secara rawak di laman web Epinions ; 3) memberi anugerah kepada yang dipilih secara rawak untuk penyumbang Wikipedia ; dan 4) ditandatangani dipilih secara rawak petisyen di change.org .

Bersama-sama, kedua-dua contoh menunjukkan bahawa penyelidik boleh menjalankan uji kaji lapangan digital tanpa perlu bekerjasama dengan syarikat atau keperluan untuk membina sistem digital kompleks. Selanjutnya, Jadual 4.2 menyediakan lebih contoh-contoh yang menunjukkan pelbagai apa yang boleh dilakukan apabila penyelidik menggunakan infrastruktur sistem sedia ada untuk menyampaikan hasil rawatan dan / atau langkah. Ini percubaan yang agak murah untuk penyelidik dan mereka menawarkan tahap yang tinggi realisme. Tetapi, eksperimen ini menawarkan penyelidik kawalan terhad ke atas peserta, rawatan, dan hasil yang hendak diukur. Selanjutnya, untuk eksperimen yang berlaku dalam satu sistem, penyelidik perlu mengambil berat bahawa kesan boleh dipacu oleh sistem dinamik khusus (contohnya, cara yang Kickstarter pangkat projek atau cara yang change.org pangkat petisyen; untuk maklumat lanjut, lihat perbincangan mengenai membaurkan algoritma dalam Bab 2). Akhir sekali, apabila penyelidik campur tangan dalam sistem bekerja, persoalan etika rumit muncul mengenai kemungkinan bahaya kepada peserta, bukan peserta, dan sistem. Kami akan mempertimbangkan soalan etika dengan lebih terperinci dalam Bab 6, dan terdapat perbincangan yang sangat baik daripada mereka dalam lampiran van de Rijt (2014) . The keseimbangan yang datang dengan bekerja dalam sistem yang sedia ada tidak sesuai untuk setiap projek, dan oleh itu beberapa penyelidik membina sistem eksperimen mereka sendiri, topik bahagian seterusnya.