4.5.1.1 สภาพแวดล้อมการใช้งานที่มีอยู่

คุณสามารถเรียกใช้การทดลองภายในสภาพแวดล้อมที่มีอยู่มักจะไม่มีการเข้ารหัสหรือห้างหุ้นส่วนใด ๆ

logistically วิธีที่ง่ายที่สุดที่จะทำทดลองดิจิตอลคือการซ้อนทับทดสอบของคุณอยู่ด้านบนของสภาพแวดล้อมที่มีอยู่ช่วยให้คุณสามารถเรียกใช้การทดสอบข้อมูลดิจิตอล การทดลองเหล่านี้สามารถทำงานได้ที่ขนาดใหญ่พอสมควรและไม่จำเป็นต้องร่วมมือกับ บริษัท หรือการพัฒนาซอฟต์แวร์ที่กว้างขวาง

ยกตัวอย่างเช่นเจนนิเฟอร์ Doleac และลุคสไตน์ (2013) ใช้ประโยชน์จากตลาดออนไลน์ (เช่น Craigslist) เพื่อเรียกใช้การทดสอบที่วัดเหยียดผิว Doleac และสไตน์โฆษณาหลายพัน iPods และระบบที่แตกต่างกันในลักษณะของผู้ขายที่พวกเขาก็สามารถที่จะศึกษาผลกระทบของการแข่งขันในการทำธุรกรรมทางเศรษฐกิจ นอกจาก Doleac และสไตน์ใช้ขนาดของการทดลองของพวกเขาในการประมาณการเมื่อผลที่มีขนาดใหญ่ (ความแตกต่างของผลการรักษา) และนำเสนอความคิดบางอย่างเกี่ยวกับสาเหตุที่ผลกระทบที่อาจเกิดขึ้น (กลไก)

ก่อนที่จะมีการศึกษาและ Doleac สไตน์มีการได้รับสองแนวทางหลักในการทดลองการวัดการเลือกปฏิบัติ ในการศึกษานักวิจัยสร้างจดหมายสมัครงานของคนที่สวมของการแข่งขันที่แตกต่างกันและใช้การดำเนินการต่อเหล่านี้เพื่อยกตัวอย่างเช่นการสมัครงานที่แตกต่างกัน เบอร์ทรานด์และ Mullainathan ของ (2004) กระดาษที่มีชื่อที่น่าจดจำ "อยู่ที่เอมิลี่และเกร็กอื่น ๆ กว่าจ้าง Lakisha และออสการ์? การทดลองภาคสนามในตลาดแรงงานการเลือกปฏิบัติ "เป็นภาพที่ยอดเยี่ยมของการศึกษาการติดต่อ การศึกษาการติดต่อมีค่าใช้จ่ายค่อนข้างต่ำต่อการสังเกตซึ่งจะช่วยให้นักวิจัยเดียวในการเก็บรวบรวมหลายพันข้อสังเกตในการศึกษาทั่วไป แต่การศึกษาความสอดคล้องของการเลือกปฏิบัติทางเชื้อชาติได้รับการสอบสวนเพราะชื่อที่อาจส่งสัญญาณหลายสิ่งหลายอย่างที่นอกเหนือไปจากการแข่งขันของผู้สมัคร นั่นคือชื่อเช่นเกร็กเอมิลี่ Lakisha และออสการ์อาจส่งสัญญาณระดับชั้นทางสังคมนอกเหนือจากการแข่ง ดังนั้นความแตกต่างใด ๆ ในการรักษาสำหรับการดำเนินการต่อของเกร็กและออสการ์อาจจะเป็นเพราะความแตกต่างมากขึ้นกว่าการแข่งขันสันนิษฐานของผู้สมัคร. การศึกษาตรวจสอบบนมืออื่น ๆ ที่เกี่ยวข้องกับการจ้างงานนักแสดงของการแข่งขันที่แตกต่างกันเพื่อนำไปใช้ในคนหางาน แม้ว่าการศึกษาตรวจสอบให้สัญญาณที่ชัดเจนของการแข่งขันสมัครพวกเขามีราคาแพงมากต่อการสังเกตซึ่งหมายความว่าพวกเขามักจะมีเพียงร้อยของการสังเกต

ในการทดสอบข้อมูลดิจิตอลของพวกเขา, Doleac และสไตน์มีความสามารถในการสร้างไฮบริดที่น่าสนใจ พวกเขามีความสามารถในการเก็บรวบรวมข้อมูลค่าใช้จ่ายที่ค่อนข้างต่ำต่อการสังเกตผลในพันของการสังเกต (ในขณะที่การศึกษาการติดต่อ) และพวกเขาก็สามารถที่จะส่งสัญญาณการแข่งขันโดยการใช้รูป-ส่งผลให้สัญญาณ uncounfounded ที่ชัดเจนของการแข่งขัน (ในขณะที่การศึกษาการตรวจสอบ ) ดังนั้นสภาพแวดล้อมออนไลน์บางครั้งทำให้นักวิจัยสามารถสร้างการรักษาใหม่ที่มีคุณสมบัติที่ยากที่จะสร้างเป็นอย่างอื่น

โฆษณา iPod ของ Doleac และสไตน์ที่แตกต่างกันไปตามหลักสามมิติ ก่อนที่พวกเขาแตกต่างกันลักษณะของผู้ขายซึ่งได้รับการส่งสัญญาณด้วยมือถือถ่ายภาพ iPod [สีขาว, สีดำ, สีขาวมีรอยสัก] (รูปที่ 4.12) เดอะ ประการที่สองพวกเขาแตกต่างกันราคาขอ [$ 90, $ 110, $ 130] สามพวกเขาแตกต่างกันคุณภาพของข้อความโฆษณา [ที่มีคุณภาพสูงและมีคุณภาพต่ำ (เช่นข้อผิดพลาดและข้อผิดพลาดเป็นทุน spelin)] ที่ ดังนั้นผู้เขียนมีการออกแบบ 3 x 3 x 2 ซึ่งถูกนำไปใช้ในตลาดท้องถิ่นกว่า 300 ตั้งแต่เมือง (เช่น Kokomo ทั้งในและนอร์ทแพลตต์, เนบราสก้า) ไปเมืองใหญ่ (เช่นนิวยอร์กและลอสแอนเจลิ)

รูปที่ 4.12: Hands ใช้ในการทดลองของ Doleac and Stein (2013) iPods ถูกขายโดยผู้ขายที่มีลักษณะที่แตกต่างกันในการวัดการเลือกปฏิบัติในตลาดออนไลน์

เฉลี่ยทั่วทุกสภาวะผลดีสำหรับผู้ขายสีขาวกว่าสีดำผู้ขายกับผู้ขายที่มีรอยสักที่มีผลกลาง ตัวอย่างเช่นผู้ขายสีขาวได้รับข้อเสนอมากขึ้นและมีราคาขายที่สูงขึ้นเป็นครั้งสุดท้าย นอกเหนือจากผลกระทบเฉลี่ยเหล่านี้ Doleac และสไตน์ประมาณความแตกต่างของผลกระทบ ตัวอย่างเช่นหนึ่งในการทำนายจากทฤษฎีก่อนหน้านี้ก็คือการเลือกปฏิบัติจะน้อยในตลาดที่มีการแข่งขันมากขึ้น โดยใช้จำนวนของข้อเสนอที่ได้รับเป็นพร็อกซีสำหรับการแข่งขันในตลาดที่ผู้เขียนพบว่าผู้ขายสีดำทำแน่นอนได้รับข้อเสนอที่เลวร้ายยิ่งในตลาดที่มีระดับต่ำของการแข่งขัน นอกจากนี้โดยการเปรียบเทียบผลลัพธ์สำหรับโฆษณาที่มีคุณภาพสูงและมีข้อความที่มีคุณภาพต่ำ Doleac และสไตน์พบว่าคุณภาพของโฆษณาไม่ได้ส่งผลกระทบต่อข้อเสียที่ต้องเผชิญกับผู้ขายสีดำและรอยสัก ในที่สุดการใช้ประโยชน์จากความจริงที่ว่ามีการโฆษณาอยู่ในกว่า 300 ตลาดผู้เขียนพบว่าผู้ขายสีดำเป็นผู้ด้อยโอกาสมากขึ้นในเมืองที่มีอัตราการเกิดอาชญากรรมสูงและที่อยู่อาศัยแยกสูง ไม่มีผลการค้นหาเหล​​่านี้ทำให้เรามีความเข้าใจที่ถูกต้องของผู้ขายว่าทำไมสีดำมีผลลัพธ์ที่เลวร้าย แต่เมื่อรวมกับผลการศึกษาอื่น ๆ ที่พวกเขาสามารถเริ่มต้นที่จะแจ้งให้ทฤษฎีเกี่ยวกับสาเหตุของการเหยียดผิวในประเภทที่แตกต่างกันของการทำธุรกรรมทางเศรษฐกิจ

ตัวอย่างที่แสดงให้เห็นความสามารถของนักวิจัยที่จะดำเนินการทดลองดิจิตอลในระบบที่มีอยู่ก็คือการวิจัยโดย Arnout แวนเดอ Rijt และเพื่อนร่วมงาน (2014) ในกุญแจสู่ความสำเร็จ ในหลายแง่มุมของชีวิตคนที่คล้ายกันดูเหมือนจะจบลงด้วยผลลัพธ์ที่แตกต่างกันมาก หนึ่งคำอธิบายที่เป็นไปได้สำหรับรูปแบบนี้คือการที่ขนาดเล็กและเป็นหลักสุ่มข้อดีสามารถล็อคอินและเติบโตในช่วงเวลากระบวนการที่นักวิจัยเรียกประโยชน์สะสม เพื่อที่จะตรวจสอบว่าประสบความสำเร็จเริ่มต้นเล็ก ๆ ล็อคอินหรือจางหายไป, แวนเดอ Rijt และเพื่อนร่วมงาน (2014) เข้าแทรกแซงเป็นสี่ระบบที่แตกต่างให้รางวัลความสำเร็จในผู้เข้าร่วมการสุ่มเลือกและจากนั้นวัดผลกระทบในระยะยาวของความสำเร็จนี้โดยพลการ

โดยเฉพาะอย่างยิ่งแวนเดอ Rijt และเพื่อนร่วมงาน 1) ให้คำมั่นสัญญาเงินให้กับโครงการในการสุ่มเลือก kickstarter.com เว็บไซต์ crowdfunding นั้น 2) จัดอันดับความคิดเห็นในเชิงบวกสุ่มเลือกบนเว็บไซต์ Epinions ; 3) ให้รางวัลที่ได้รับการสุ่มเลือกผู้ให้ วิกิพีเดีย ; และ 4) ได้ลงนามในคำอุทธรณ์สุ่มเลือก change.org นักวิจัยพบว่าผลที่คล้ายกันมากในทุกสี่ระบบ: ในแต่ละกรณีผู้เข้าร่วมที่ได้รับการคัดสรรบางประสบความสำเร็จเร็วไปในการประสบความสำเร็จที่ตามมามากกว่าเพื่อนร่วมงานเป็นอย่างอื่นไม่สามารถแยกได้อย่างสมบูรณ์ของพวกเขา (รูปที่ 4.13) ความจริงที่ว่ารูปแบบเดียวกันปรากฏอยู่ในหลายระบบเพิ่มความถูกต้องของผลภายนอกเหล่านี้เพราะจะช่วยลดโอกาสที่รูปแบบนี้เป็นสิ่งประดิษฐ์ของระบบใด ๆ

รูปที่ 4.13: ผลกระทบระยะยาวของความสำเร็จให้แก่สุ่มสี่ในระบบสังคมที่แตกต่างกัน Arnout แวนเดอ Rijt และเพื่อนร่วมงาน (2014) 1) ให้คำมั่นสัญญาเงินให้กับโครงการในการสุ่มเลือก kickstarter.com เว็บไซต์ crowdfunding นั้น 2) จัดอันดับความคิดเห็นในเชิงบวกสุ่มเลือกบนเว็บไซต์ Epinions ; 3) ให้รางวัลที่ได้รับการสุ่มเลือกผู้ให้ วิกิพีเดีย ; และ 4) ได้ลงนามในคำอุทธรณ์สุ่มเลือก change.org

ร่วมกันทั้งสองตัวอย่างที่แสดงให้เห็นว่านักวิจัยสามารถดำเนินการทดลองดิจิตอลโดยไม่จำเป็นต้องเป็นพันธมิตรกับ บริษัท หรือจำเป็นที่จะต้องสร้างระบบดิจิตอลที่ซับซ้อน นอกจากนี้ตารางที่ 4.2 แสดงตัวอย่างมากยิ่งขึ้นที่แสดงช่วงของสิ่งที่เป็นไปได้เมื่อนักวิจัยใช้โครงสร้างพื้นฐานของระบบที่มีอยู่ในการส่งมอบผลการรักษาและ / หรือมาตรการ การทดลองนี้จะค่อนข้างถูกสำหรับนักวิจัยและพวกเขามีระดับสูงของความสมจริง แต่การทดลองเหล่านี้มีนักวิจัยการควบคุม จำ​​กัด มากกว่าผู้เข้าร่วมการรักษาและผลที่จะวัด นอกจากนี้สำหรับการทดลองที่เกิดขึ้นในระบบเดียวนักวิจัยจะต้องกังวลว่าผลกระทบที่อาจจะได้แรงหนุนจากการเปลี่ยนแปลงเฉพาะระบบ (เช่นวิธีการที่ Kickstarter อันดับโครงการหรือวิธีการที่ change.org อันดับอุทธรณ์สำหรับข้อมูลเพิ่มเติม ดูการอภิปรายเกี่ยวกับการรบกวนอัลกอริทึมในบทที่ 2) สุดท้ายเมื่อนักวิจัยแทรกแซงในระบบการทำงานคำถามจริยธรรมหากินโผล่ออกมาเกี่ยวกับอันตรายที่เป็นไปได้ให้ผู้เข้าร่วมเข้าร่วมไม่ใช่และระบบ เราจะพิจารณาคำถามจริยธรรมเหล่านี้ในรายละเอียดเพิ่มเติมในบทที่ 6 และมีการสนทนาที่ดีของพวกเขาในภาคผนวกของแวนเดอ Rijt (2014) การค้าไม่ชอบที่มาพร้อมกับการทำงานในระบบที่มีอยู่ไม่ได้เหมาะสำหรับทุกโครงการและสำหรับเหตุผลที่นักวิจัยบางคนสร้างระบบการทดลองของตัวเองเรื่องของส่วนถัดไป