আপনি বিদ্যমান পরিবেশের ভিতরে পরীক্ষানিরীক্ষা চালাতে পারেন, প্রায়ই কোন কোডিং বা অংশীদারিত্ব ছাড়া.
Logistically, ডিজিটাল পরীক্ষায় সবচেয়ে সহজ পদ্ধিতি হল উপায় একটি বিদ্যমান পরিবেশের উপরে আপনার পরীক্ষা আস্তরণ, একটি ডিজিটাল ক্ষেত্র পরীক্ষা চালানোর জন্য আপনি সক্রিয় হয়. এই পরীক্ষায় একটি যুক্তিসঙ্গতভাবে বড় স্কেল চালানো যেতে পারে এবং একটি কোম্পানী বা ব্যাপক সফটওয়্যার উন্নয়ন সঙ্গে অংশীদারিত্ব প্রয়োজন হয় না.
উদাহরণস্বরূপ, জেনিফার Doleac ও লুক স্টেইন (2013) সুবিধা একটি অনলাইন মার্কেটপ্লেস এর (যেমন, Craigslist) একটি পরীক্ষা যে বর্ণ বৈষম্যের মাপা চালানোর নেন. Doleac এবং Stein আইপডের হাজার বিজ্ঞাপনে, এবং ধারাক্রমে বিক্রেতা বৈশিষ্ট্য তারতম্য দ্বারা, তারা অর্থনৈতিক লেনদেনের উপর জাতি প্রভাব অধ্যয়ন করতে সক্ষম হয়েছি. উপরন্তু, Doleac এবং Stein অনুমান করার জন্য যখন প্রভাব বড় (চিকিত্সার প্রভাব বিষমসত্ত্বতা) এবং কেন প্রভাব ঘটতে পারে (মেকানিজম) সম্পর্কে কিছু ধারনা দিতে তাদের পরীক্ষার স্কেল ব্যবহৃত.
Doleac এবং Stein এর গবেষণায় এর আগে, সেখানে দুটি প্রধান পন্থা পরীক্ষামূলকভাবে বৈষম্য পরিমাপের যেতাম. সাদৃশ্য ইন গবেষণায় গবেষকরা বিভিন্ন ঘোড়দৌড় কাল্পনিক মানুষ জীবনবৃত্তান্ত তৈরি এবং এই জীবনবৃত্তান্তে ব্যবহার করতে, উদাহরণস্বরূপ, বিভিন্ন চাকরির জন্য আবেদন করতে হবে. বার্ট্রান্ড ও Mullainathan এর (2004) স্মরণীয় শিরোনাম "এমিলি ও গ্রেগ Lakisha এবং জামাল চেয়ে আরো নিয়োগের য়োগ্য সঙ্গে কাগজ? শ্রম বাজার বৈষম্য "একটি ক্ষেত্র পরীক্ষা একটি চিঠিপত্রের অধ্যয়নের একটি বিস্ময়কর চিত্রণ. চিঠিপত্রের স্টাডিজ পর্যবেক্ষণ প্রতি অপেক্ষাকৃত কম খরচে, যা একটি টিপিক্যাল গবেষণায় পর্যবেক্ষণের হাজারের সংগ্রহের জন্য একটি একক গবেষক সক্ষম আছে. কিন্তু, জাতিগত বৈষম্যের চিঠিপত্রের গবেষণায় কারণ নাম সম্ভাব্য আবেদনকারী জাতি ছাড়াও অনেক কিছু সংকেত জিজ্ঞাসাবাদ করা হয়েছে. যে, এই ধরনের গ্রেগ, এমিলি, Lakisha, এবং জামাল যেমন নাম জাতি ছাড়াও সামাজিক শ্রেণী সংকেত হতে পারে হয়. সুতরাং, গ্রেগ এবং জামালের এর জীবনবৃত্তান্ত জন্য চিকিৎসায় কোনো পার্থক্য আবেদনকারীদের ধারণা জাতি চেয়ে আরও বেশি কারণে হতে পারে. অডিট স্টাডিজ, অপরপক্ষে, চাকরির জন্য ব্যক্তির মধ্যে আবেদন করার বিভিন্ন ঘোড়দৌড় অভিনেতা নিয়োগের জড়িত. যদিও অডিট স্টাডিজ আবেদনকারী জাতি একটি সুস্পষ্ট সংকেত প্রদান তারা পর্যবেক্ষণ প্রতি অত্যন্ত ব্যয়বহুল, যার মানে হল যে তারা সাধারণত শুধুমাত্র পর্যবেক্ষণ শত শত আছে.
তাদের ডিজিটাল ক্ষেত্র পরীক্ষা ইন, Doleac এবং Stein একটি আকর্ষণীয় সংকর তৈরি করতে সক্ষম হয়েছি. তারা (একটি চিঠিপত্রের গবেষণায় যেমন) পর্যবেক্ষণের হাজারের ইন ফলে পর্যবেক্ষণ প্রতি অপেক্ষাকৃত কম খরচে তথ্য সংগ্রহ করতে সক্ষম হয়েছি -এবং তারা ফটোগ্রাফ-ফলে জাতি একটি স্পষ্ট uncounfounded সংকেত ব্যবহারের জাতি সংকেত করতে সক্ষম হয়েছি (একটি নিরীক্ষা গবেষণায় যেমন ). সুতরাং, অনলাইন পরিবেশ কখনও কখনও আছে বৈশিষ্ট্য যে অন্যথায় নির্মাণে কঠিন নতুন চিকিত্সা তৈরি করতে গবেষকরা সম্ভব.
Doleac এবং Stein এর আইপড বিজ্ঞাপন তিনটি প্রধান মাত্রা বরাবর বৈচিত্রময়. প্রথমত, তারা বিক্রেতা, যা হাত আইপড [সাদা, কালো, উলকি সঙ্গে সাদা] (চিত্র 4.12) অধিষ্ঠিত photographed দ্বারা signaled হয় বৈশিষ্ট্য ভিন্নতা. দ্বিতীয়ত, তারা জিজ্ঞাসা দাম [$ 90, $ 110, $ 130] ভিন্নতা. তৃতীয়ত, তারা বিজ্ঞাপন লেখা [উচ্চ মানের এবং নিম্ন মানের (যেমন, ক্যাপিটালাইজেশন ত্রুটি এবং spelin ত্রুটি)] মান ভিন্নতা. সুতরাং, লেখক একটি 3 এক্স 3 এক্স 2 নকশা যা অধিক 300 স্থানীয় শহরগুলোতে (যেমন, Kokomo, এবং উত্তর প্লেট, NE) মেগা শহর (যেমন, নিউ ইয়র্ক এবং লস এঞ্জেলেস) ছোটো থেকে বাজার জুড়ে মোতায়েন করা ছিল.
সব শর্ত জুড়ে গড় ফলাফলের কালো বিক্রেতার চেয়ে সাদা বিক্রেতার জন্য মঙ্গলকর হতো, উলকি বিক্রেতা অন্তর্বর্তী ফলাফল হচ্ছে. উদাহরণস্বরূপ, সাদা বিক্রেতাদের আরো অফার পেয়েছি এবং উচ্চতর চূড়ান্ত বিক্রয় মূল্য ছিল. এই গড় প্রভাব বিয়ন্ড, Doleac এবং Stein প্রভাব বিষমসত্ত্বতা আনুমানিক. উদাহরণস্বরূপ, আগের তত্ত্ব থেকে এক ভবিষ্যদ্বাণী যে বৈষম্য বাজারের যে আরো প্রতিযোগিতামূলক হয় কম হবে. বাজারে প্রতিযোগিতার জন্য একটি প্রক্সি হিসাবে গৃহীত প্রস্তাবনার সংখ্যা ব্যবহার করে, লেখক পাওয়া যে কালো বিক্রেতাদের প্রকৃতপক্ষে প্রতিযোগিতার একটি কম ডিগ্রী সঙ্গে বাজারে খারাপ অফার লাভ করি. উপরন্তু, উচ্চ মানের এবং নিম্ন মানের পাঠ্য সঙ্গে বিজ্ঞাপনের জন্য ফলাফল তুলনা করে, Doleac এবং Stein যে বিজ্ঞাপন মানের অসুবিধা কালো এবং উলকি বিক্রেতাদের দ্বারা সম্মুখীন প্রভাবিত করে না পাওয়া. পরিশেষে, যে বিজ্ঞাপন 300 টিরও বেশি বাজারে স্থাপন করা হয় এর সুবিধা গ্রহণ, লেখক যে এটি কালো বিক্রেতাদের উচ্চ অপরাধের হার এবং উচ্চ আবাসিক পৃথকীকরণ সঙ্গে শহরে আরো অনগ্রসর. এই ফলাফলে কেউই এর ঠিক কেন কালো বিক্রেতাদের খারাপ ফলাফল ছিল একটি সুনির্দিষ্ট বুঝতে দিতে, কিন্তু, যখন অন্যান্য গবেষণার ফলাফল সঙ্গে মিলিত, তারা অর্থনৈতিক লেনদেনের বিভিন্ন ধরনের জাতিগত বৈষম্যের কারণ সম্পর্কে তত্ত্ব অবহিত করা শুরু করতে পারবেন.
আরেকটি উদাহরণ যে বিদ্যমান সিস্টেমের মধ্যে ডিজিটাল ক্ষেত্র পরীক্ষা-নিরীক্ষা করার জন্য গবেষকদের ক্ষমতা দেখায় Arnout ভ্যান ডি Rijt দ্বারা গবেষণা এবং সহকর্মীদের হয় (2014) সাফল্যের চাবি উপর. জীবনের অনেক দিক, আপাতদৃষ্টিতে অনুরূপ মানুষ খুব বিভিন্ন ফলাফলের সঙ্গে শেষ পর্যন্ত. এই প্যাটার্ন এর একটি সম্ভাব্য ব্যাখ্যা যে ছোট-ও মূলত র্যান্ডম-সুবিধার লক-ইন করতে পারবেন এবং সময়ের হত্তয়া, একটি প্রক্রিয়া যে গবেষকরা ক্রমসঞ্চিত সুবিধা কল. অর্ডার ছোট প্রাথমিক সাফল্যের লক-ইন বা দূরে বিবর্ণ কিনা তা নির্ধারণ করার জন্য, ভ্যান ডি Rijt এবং সহকর্মীদের (2014) এলোমেলোভাবে নির্বাচিত অংশগ্রহণকারীদের উপর বিজয় দান চার বিভিন্ন সিস্টেমের মধ্যে হস্তক্ষেপ করে, এবং তারপর মাপা এই অবাধ সাফল্য দীর্ঘমেয়াদী প্রভাব.
আরো নির্দিষ্টভাবে, ভ্যান ডি Rijt এবং সহকর্মীদের 1) টাকা প্রতিশ্রুত এলোমেলোভাবে উপর প্রকল্প নির্বাচিত kickstarter.com , একটি ক্রাউডফান্ডিং ওয়েবসাইট; 2) ইতিবাচক ওয়েবসাইটে এলোমেলোভাবে নির্বাচিত রিভিউ রেট epinions ; 3) দিয়েছেন পুরষ্কার এলোমেলোভাবে থেকে অবদানকারী মনোনীত করার উইকিপিডিয়া ; এবং 4) এলোমেলোভাবে উপর পিটিশন নির্বাচিত স্বাক্ষর change.org . গবেষকরা সব চার সিস্টেম জুড়ে খুব অনুরূপ ফলাফল পাওয়া যায়নি: প্রতিটি ক্ষেত্রে, অংশগ্রহণকারীদের এলোমেলোভাবে কিছু প্রাথমিক সাফল্য দেওয়া হয়েছিল গিয়েছিলাম তাদের অন্যথায় পুরোপুরি আলাদা করে চেনা মিত্রগণ (চিত্র 4.13) চেয়ে বেশি পরবর্তী সাফল্য আছে. সত্য যে একই প্যাটার্ন অনেক সিস্টেম হাজির এই ফলাফল বাহ্যিক বৈধতা বাড়ায় কারণ এটি সুযোগ যে এই প্যাটার্ন কোনো নির্দিষ্ট সিস্টেমের একটি হস্তনির্মিত বস্তু হয় হ্রাস করা হয়.
একসঙ্গে এই দুটি উদাহরণ দেন গবেষকরা কোম্পানীর সঙ্গে অংশীদার বা জটিল ডিজিটাল সিস্টেম নির্মাণ করা প্রয়োজন প্রয়োজন ছাড়া ডিজিটাল ক্ষেত্র পরীক্ষা-নিরীক্ষা করতে পারেন. উপরন্তু, ছক 4.2 আরও উদাহরণ যে কি সম্ভব যখন গবেষকরা বিদ্যমান ব্যবস্থার পরিকাঠামো ব্যবহার চিকিত্সা এবং / অথবা পরিমাপ ফলাফল প্রদান করার জন্য পরিসীমা দেন উপলব্ধ. এই পরীক্ষায় গবেষকরা জন্য অপেক্ষাকৃত সস্তা এবং তারা বাস্তববাদ উচ্চ ডিগ্রী প্রস্তাব. কিন্তু, এই পরীক্ষায় গবেষকরা ওভার অংশগ্রহণকারীদের, চিকিত্সা, এবং ফলাফল পরিমাপ করা সীমিত নিয়ন্ত্রণ প্রস্তাব. উপরন্তু, শুধুমাত্র একটি সিস্টেমের মধ্যে স্থান গ্রহণ পরীক্ষার জন্য গবেষকরা উদ্বিগ্ন হতে যে প্রভাব (সিস্টেম-ভিত্তিক গতিবিদ্যা দ্বারা চালিত হতে পারে প্রয়োজন যেমন, পথ যে Kickstarter প্রকল্প বা উপায় যে change.org পিটিশন নিম্ন স্তরে গণ্য হবে নিম্ন স্তরে গণ্য হবে; আরও তথ্যের জন্য, অধ্যায় 2 আলগোরিদিমিক বিভ্রান্তি সম্পর্কে আলোচনা দেখুন). অবশেষে, যখন গবেষক কাজ সিস্টেম হস্তক্ষেপ, চতুর নৈতিক প্রশ্নের সিস্টেম অংশগ্রহণকারীদের সম্ভব ক্ষতি, অ অংশগ্রহণকারী এবং সম্পর্কে উত্থান. আমরা 6 অধ্যায়ে আরো বিস্তারিতভাবে এই নৈতিক প্রশ্ন বিবেচনা করা হবে, এবং সেখানে ভ্যান ডি Rijt পরিশিষ্ট তাদের একটি চমৎকার আলোচনা হয় (2014) . বিনিময় প্রথা যে একটি বিদ্যমান ব্যবস্থায় কাজ সঙ্গে আসা প্রতিটি প্রকল্পের জন্য আদর্শ নয়, এবং যে কারণে কিছু গবেষক তাদের নিজস্ব পরীক্ষামূলক সিস্টেম, পরের অধ্যায় বিষয় তৈরী.
বিষয় | তলব |
---|---|
উইকিপিডিয়ায় অবদান উপর barnstars প্রভাব | Restivo and Rijt (2012) ; Restivo and Rijt (2014) ; Rijt et al. (2014) |
বর্ণবাদী টুইট বিরোধী হয়রানি বার্তা প্রভাব | Munger (2016) |
বিক্রয় মূল্য নিলামের পদ্ধতি প্রভাব | Lucking-Reiley (1999) |
অনলাইন নিলাম মূল্য উপর খ্যাতি প্রভাব | Resnick et al. (2006) |
ইবে উপর বেসবল কার্ড বিক্রির উপর বিক্রেতার জাতি প্রভাব | Ayres, Banaji, and Jolls (2015) |
আইপডের বিক্রি বিক্রেতা জাতি প্রভাব | Doleac and Stein (2013) |
Airbnb এর রেন্টাল অতিথি এর জাতি প্রভাব | Edelman, Luca, and Svirsky (2016) |
Kickstarter নেভিগেশন প্রকল্পের সাফল্যের উপর অনুদান প্রভাব | Rijt et al. (2014) |
জাতি এর প্রভাব এবং হাউজিং রেন্টাল উপর জাতিভুক্ত | Hogan and Berry (2011) |
epinions উপর ভবিষ্যতের রেটিং ইতিবাচক রেটিং প্রভাব | Rijt et al. (2014) |
পিটিশনের সাফল্য স্বাক্ষর প্রভাব | Vaillant et al. (2015) ; Rijt et al. (2014) |