আপনি বিদ্যমান পরিবেশের ভিতরে পরীক্ষানিরীক্ষা চালাতে পারেন, প্রায়ই কোন কোডিং বা অংশীদারিত্ব ছাড়া.
Logistically, একটি ডিজিটাল পরীক্ষা করার সবচেয়ে সহজ উপায় একটি বিদ্যমান পরিবেশের উপরে আপনার পরীক্ষা overlay হয়। এই ধরনের পরীক্ষাগুলি যথেষ্ট পরিমাণে চালানো যেতে পারে এবং একটি কোম্পানী বা ব্যাপক সফ্টওয়্যার ডেভেলপমেন্টের সাথে অংশীদারিত্বের প্রয়োজন হয় না।
উদাহরণস্বরূপ, জেনিফার ডলাইক এবং লুক স্টিন (2013) জাতিগত বৈষম্যের পরিমাপের একটি পরীক্ষা চালানোর জন্য Craigslist এর অনুরূপ অনলাইন বাজারে সুবিধা গ্রহণ করে। তারা হাজার হাজার আইপড বিজ্ঞাপন দিয়েছেন, এবং বিক্রেতার বৈশিষ্ট্যগুলি নিয়ন্ত্রিতভাবে পরিবর্তিত করে, তারা অর্থনৈতিক লেনদেনের উপর জাতিগত প্রভাবের প্রভাব পড়তে সক্ষম ছিল। তদুপরি, তারা তাদের পরীক্ষার স্কেলটি ব্যবহার করার জন্য অনুমান করে যখন প্রভাবটি বড় ছিল (চিকিত্সা প্রভাবের বৈষম্য) এবং প্রভাবটি কীভাবে ঘটতে পারে (প্রক্রিয়া) সম্পর্কে কিছু ধারণা দিতে।
ডেলেক এবং স্টিনের আইপড বিজ্ঞাপনগুলি তিনটি প্রধান মাত্রার পাশাপাশি ভিন্ন। প্রথমত, গবেষকরা বিক্রেতার বৈশিষ্ট্যগুলির মধ্যে পার্থক্যসূচক ছিলেন, যা হাতে হাতে ছবিটি আইপড (সাদা, কালো, উল্কি দিয়ে সাদা) ধারণ করে (চিত্র 4.13)। দ্বিতীয়, তারা জিজ্ঞাসা মূল্য [$ 90, $ 110, $ 130] বৈচিত্র্যপূর্ণ। তৃতীয়ত, তারা বিজ্ঞাপন টেক্সট মানের উচ্চতর (উচ্চ মানের এবং নিম্ন মানের (যেমন, cApitalization ত্রুটি এবং spelin ত্রুটি)]। এইভাবে, লেখকেরা 3 টি \(\times\) 3 টি \(\times\) 3 টি \(\times\) \(\times\) 2 টি ডিজাইন করেছেন যা 300 টিরও বেশি স্থানীয় বাজারে স্থাপন করা হয়েছিল, যা শহরগুলি থেকে (যেমন, কোকোমো, ইন্ডিয়ানা এবং নর্থ প্লাট্ট, নেব্রাস্কা) মেগা- শহরগুলি (যেমন, নিউ ইয়র্ক এবং লস এঞ্জেলেস)।
সব শর্ত জুড়ে গড়, কালো বিক্রয়কারীদের তুলনায় সাদা বিক্রেতাদের জন্য ফলাফলগুলি ভাল ছিল, মধ্যম ফলাফলের ফলে উল্কিত বিক্রেতার সাথে। উদাহরণস্বরূপ, সাদা বিক্রেতারা আরও অফার পেয়েছে এবং উচ্চতর বিক্রয় বিক্রয় মূল্য ছিল। এই গড় প্রভাব ছাড়িয়ে, Doleac এবং স্টিন প্রভাব এর বৈপরীত্য অনুমান। উদাহরণস্বরূপ, পূর্ববর্তী তত্ত্ব থেকে একটি পূর্বাভাস হল যে বাজারে বৈষম্য কম হবে যেখানে ক্রেতাদের মধ্যে আরও বেশি প্রতিযোগিতা থাকবে। যে বাজারে ক্রেতা প্রতিযোগিতার পরিমাণের পরিমাণ হিসাবে অফারের সংখ্যা ব্যবহার করে, গবেষকরা দেখিয়েছেন যে কালো বিক্রেতারা কম দামের প্রতিযোগিতায় বাজারে আরও বেশি অফার পেয়েছে। অধিকন্তু, উচ্চ মানের এবং নিম্ন-মানের পাঠ্য সহ বিজ্ঞাপনগুলির তুলনা করে, ডলোকে এবং স্টিনে পাওয়া যায় যে বিজ্ঞাপন মানের কালো এবং উল্কিত বিক্রেতাদের সম্মুখীন অসুবিধাটি প্রভাবিত করে না। অবশেষে, যেসব বিজ্ঞাপন 300 টিরও বেশি বাজারে স্থাপন করা হয়েছিল সেগুলির সুবিধা গ্রহণ করে, লেখকরা দেখেছেন যে, কালো বিক্রেতারা উচ্চতর অপরাধের হার এবং উচ্চতর আবাসিক বিচ্ছিন্নতার সাথে শহরগুলিতে আরো অপব্যবহার করেছে। এই ফলাফলগুলির মধ্যে কোনটিই আমাদের সঠিক সুস্পষ্ট বিকাশ দেয় না কেন কেন কালো বিক্রেতাদের খারাপ ফলাফল হয়, তবে অন্যান্য গবেষণার ফলাফলের সাথে মিলিত হলে তারা বিভিন্ন ধরনের অর্থনৈতিক লেনদেনের ক্ষেত্রে জাতিগত বৈষম্যের কারণ সম্পর্কে তত্ত্বগুলি জানাতে শুরু করতে পারে।
আরেকটি উদাহরণ যা গবেষকরা বর্তমান সিস্টেমে ডিজিটাল ফিল্ডের পরীক্ষা চালানোর ক্ষমতা প্রদর্শন করে, এটি হল সাফল্যের চাবিকাঠিগুলির উপর গবেষণা করা হয় Arnout van de Rijt এবং সহকর্মীরা (2014) । জীবনের বেশিরভাগ ক্ষেত্রে, আপাতদৃষ্টিতে অনুরূপ মানুষ খুব ভিন্ন ফলাফলের সাথে শেষ হয়। এই প্যাটার্নের জন্য একটি সম্ভাব্য ব্যাখ্যা হল যে ছোট এবং মূলত র্যান্ডম-সুবিধাগুলির মধ্যে সময়ের মধ্যে বৃদ্ধি এবং বৃদ্ধি হতে পারে, একটি প্রক্রিয়া যা সংক্ষেপে সুবিধার কথা বলে । প্রাথমিক প্রাথমিক সাফল্যের লক বা ফেইড হওয়া কিনা তা নির্ধারণ করার জন্য, ভ্যান ডি রিজট এবং সহকর্মীরা (2014) চারটি ভিন্ন পদ্ধতিতে হস্তক্ষেপ করেন যা এলোমেলোভাবে নির্বাচিত অংশগ্রহণকারীদের সাফল্য অর্জন করে, এবং তারপর এই নির্বিচারে সাফল্যের পরের প্রভাবগুলি মাপা যায় কিনা।
আরো বিশেষভাবে, ভ্যান ডি রিজট এবং সহকর্মীরা (1) কংক্রাস্টার, একটি ভিওআইপি ফান্ডিং ওয়েবসাইটের এলোমেলোভাবে নির্বাচিত প্রকল্পগুলিতে অর্থ জারি করেছে; (2) ইতিবাচকভাবে এলোমেলোভাবে এলোমেলোভাবে নির্বাচিত পর্বগুলি, একটি উত্পাদনের পর্যালোচনা ওয়েবসাইট; (3) উইকিপিডিয়াতে এলোমেলোভাবে নির্বাচিত অবদানকারীদের পুরষ্কার প্রদান করে; এবং (4) change.org- এ স্বতন্ত্রভাবে নির্বাচিত পিটিশন স্বাক্ষরিত। তারা চারটি সিস্টেমের মধ্যে খুব অনুরূপ ফলাফল পাওয়া যায়: প্রতিটি ক্ষেত্রে, র্যান্ডমভাবে কিছু প্রাথমিক সাফল্য দেওয়া যারা তাদের অন্যথায় সম্পূর্ণরূপে স্বতন্ত্র পার্শ্ব (চিত্র 4.14) চেয়ে আরও পরবর্তী সাফল্যের জন্য গিয়েছিলাম। অনেক সিস্টেমের মধ্যে একই প্যাটার্ন আবির্ভাব ঘটেছে এই ফলাফলের বাহ্যিক বৈধতা বৃদ্ধি করে, কারণ এটি এমন সুযোগকে হ্রাস করে যে এই প্যাটার্নটি কোন নির্দিষ্ট সিস্টেমের একটি হস্তনির্ধারণ।
একসঙ্গে, এই দুটো উদাহরণ দেখায় যে গবেষকরা কোম্পানিগুলির সাথে অংশীদারি বা জটিল ডিজিটাল সিস্টেম তৈরির প্রয়োজন ছাড়াই ডিজিটাল ক্ষেত্রের পরীক্ষাগুলি পরিচালনা করতে পারে। উপরন্তু, টেবিল 4.2 আরও বেশি উদাহরণ প্রদান করে যা গবেষকরা বর্তমান সিস্টেমের অবকাঠামোকে চিকিত্সা এবং / বা পরিমাপের ফলাফলগুলি সরবরাহ করার সময় কী কী সম্ভব তা দেখায়। এই গবেষকরা গবেষকদের জন্য অপেক্ষাকৃত সস্তা এবং তারা একটি উচ্চ ডিগ্রী বাস্তবতা প্রদান। কিন্তু তারা গবেষকরা সীমিত নিয়ন্ত্রণ প্রস্তাব অংশগ্রহণকারীদের, চিকিত্সা, এবং ফলাফল পরিমাপ করা হবে। অধিকন্তু, কেবলমাত্র এক সিস্টেমে পরীক্ষার জন্য, গবেষকরা এটিকে সংশ্লিষ্ট সিস্টেম-নির্দিষ্ট ডাইনামিক্স (যেমন, কিক্স্টাস্টারের কর্মসূচীগুলিকে রেন্ডার করে বা যেভাবে পরিবর্তন করা যায় এমন পিটিশনগুলিকে শ্রদ্ধা করে দেয়) অধ্যায়ের মধ্যে আলগোরিদিম confounding সম্পর্কে আলোচনা দেখুন 2)। পরিশেষে, যখন গবেষকরা কাজ করার ব্যবস্থায় হস্তক্ষেপ করে, তখন জটিল নৈতিক প্রশ্নগুলি অংশগ্রহণকারীদের, অ অংশগ্রহণকারী এবং সিস্টেমগুলির সম্ভাব্য ক্ষতির বিষয়ে উত্থাপন করে। আমরা 6 নং অধ্যায় আরও বিশদভাবে এই নৈতিক প্রশ্ন বিবেচনা করবো এবং ভ্যান ডি রিজট এট আল এর পরিশিষ্টে তাদের একটি চমৎকার আলোচনা আছে। (2014) । বর্তমান প্রজন্মের সাথে কাজ করা ট্রেড-অফগুলি প্রতিটি প্রকল্পের জন্য আদর্শ নয়, এবং সেই কারণেই কিছু গবেষকরা তাদের নিজস্ব পরীক্ষামূলক সিস্টেম তৈরি করে, যেমনটা আমি পরবর্তীতে ব্যাখ্যা করব।
বিষয় | তথ্যসূত্র |
---|---|
উইকিপিডিয়া অবদান নেভিগেশন barnstars প্রভাব | Restivo and Rijt (2012) ; Restivo and Rijt (2014) ; Rijt et al. (2014) |
বর্ণবাদী টুইটগুলিতে বিরোধী-হয়রানির বার্তাটির প্রভাব | Munger (2016) |
বিক্রয় দাম উপর নিলাম পদ্ধতির প্রভাব | Lucking-Reiley (1999) |
অনলাইন নিলামে মূল্যের খ্যাতি প্রভাব | Resnick et al. (2006) |
EBay এ বেসবল কার্ড বিক্রয়ের উপর বিক্রেতা এর জাতি প্রভাব | Ayres, Banaji, and Jolls (2015) |
আইপডের বিক্রেতার উপর বিক্রেতার রেসের প্রভাব | Doleac and Stein (2013) |
এয়ারব্যাঙ্ক ভাড়াটে অতিথিদের রেসের প্রভাব | Edelman, Luca, and Svirsky (2016) |
Kickstarter নেভিগেশন প্রকল্পের সাফল্যের উপর দান প্রভাব | Rijt et al. (2014) |
আবাসন ভাড়া নেভিগেশন জাতি এবং জাতিগত প্রভাব | Hogan and Berry (2011) |
Epinions নেভিগেশন ভবিষ্যতের রেটিং নেভিগেশন ইতিবাচক রেটিং প্রভাব | Rijt et al. (2014) |
আবেদনপত্রের সাফল্যে স্বাক্ষরগুলির প্রভাব | Vaillant et al. (2015) ; Rijt et al. (2014) ; Rijt et al. (2016) |