რანდომიზებული კონტროლირებადი ექსპერიმენტი აქვს ოთხი ძირითადი ინგრედიენტები: რეკრუტირება მონაწილეთა რანდომიზაციისთვის მკურნალობა, მიწოდების მკურნალობა და გაზომვა შედეგებს.
რანდომიზებული კონტროლირებადი ექსპერიმენტი შეუძლია მრავალი ფორმები და შეიძლება გამოყენებულ იქნას სასწავლებლად მრავალი სახის ქცევა. თუმცა, მათი ძირითადი, რანდომიზებული კონტროლირებადი ექსპერიმენტი აქვს ოთხი ძირითადი ინგრედიენტები: რეკრუტირება მონაწილეთა რანდომიზაციისთვის მკურნალობა, მიწოდების მკურნალობა და გაზომვა შედეგებს. ციფრული ასაკი არ იცვლება ფუნდამენტურ ხასიათს ექსპერიმენტი, მაგრამ ეს იმას რათა მათ უფრო ლოჯისტიკური თვალსაზრისით. მაგალითად, წარსულში ეს შეიძლება ყოფილიყო რთული გავზომოთ ქცევის მილიონობით ადამიანი, მაგრამ ეს ახლა გამუდმებით ხდება ბევრი ციფრული სისტემები. მკვლევარებმა, რომლებიც ვერ გაერკვნენ, თუ როგორ უნდა აღკაზმულობა ახალი შესაძლებლობები შეძლებს აწარმოებს ექსპერიმენტი, რომელიც შეუძლებელი იყო ადრე.
იმისათვის, რომ ეს ყველაფერი ცოტა უფრო კონკრეტული, ორივე რა იგივე დარჩა და რა შეიცვალა-განვიხილოთ Michael Restivo და Arnout van de Rijt ის (2012) . მკვლევარებმა სურდათ, რომ გავიგოთ ეფექტი არაფორმალური თანხმობა ჯილდოები სარედაქციო წვლილი ვიკიპედიაში. კერძოდ, მათ შეისწავლეს ეფექტი barnstars, ჯილდო, რომ ნებისმიერი ვიკიპედიელი შეუძლია ნებისმიერ სხვა ვიკიპედიელი ვაღიარო, შრომისა და გულდასმით. Restivo და van de Rijt მისცა barnstars 100 ღირსეულ ვიკიპედიელები. ამის შემდეგ, Restivo და van de Rijt დააფიქსირა მიმღები "შემდგომი წვლილი Wikipedia მომდევნო 90 დღის განმავლობაში. ბევრი მათი გაოცება, ადამიანები, რომლებსაც ისინი დააჯილდოვა barnstars იმას ცდილობს, რათა ნაკლები რედაქტირების მიღების შემდეგ ერთი. სხვა სიტყვებით რომ ვთქვათ, barnstars, როგორც ჩანს, ახდენდა, ვიდრე ხელს უწყობს წვლილი.
საბედნიეროდ, Restivo და van de Rijt არ იყო გაშვებული "perturb და დაიცვან" ექსპერიმენტი; ისინი გაშვებული რანდომიზებული კონტროლირებადი ექსპერიმენტი. ასე რომ, გარდა იმისა, რომ არჩევის 100 საუკეთესო ავტორები მიიღებენ Barnstar, ისინი ასევე აიყვანეს 100 ზედა ავტორების ვის არ მისცეს Barnstar. ამ ასი მსახურობდა საკონტროლო ჯგუფში, და რომელმაც Barnstar და ვინც არ იყო განსაზღვრული შემთხვევით. როდესაც Restivo და van de Rijt შევხედე საკონტროლო ჯგუფში მათ აღმოაჩინეს, რომ მას ჰქონდა ვარდნით შენატანების ძალიან. და ბოლოს, როდესაც მკვლევარები შედარებით ადამიანი ჯგუფში (ანუ, მიიღო barnstars) და ადამიანი საკონტროლო ჯგუფი, მათ აღმოაჩინეს, რომ Barnstar გამოიწვია რედაქტორები შეუწყობს დაახლოებით 60% მეტი. თუმცა, ეს ზრდა წვლილი ხდებოდა, როგორც ნაწილი საერთო ვარდნა ორივე ჯგუფში.
როგორც ამ კვლევაში ჩანს, საკონტროლო ჯგუფის ექსპერიმენტი კრიტიკული გზა, რომელიც გარკვეულწილად პარადოქსული. იმისათვის, რომ ზუსტად გავზომოთ ეფექტი barnstars, Restivo და ვან დერ Rijt საჭირო დააკვირდეს ადამიანი, რომ არ მიუღია barnstars. ბევრჯერ მკვლევარები, რომლებიც არ იცნობენ ექსპერიმენტი ვერ ვაფასებთ წარმოუდგენელი ღირებულება საკონტროლო ჯგუფი. თუ Restivo და van de Rijt არ აქვს საკონტროლო ჯგუფი, ისინი არ შედგენილი ზუსტად არასწორი დასკვნა. კონტროლის ჯგუფების იმდენად მნიშვნელოვანია, რომ დირექტორმა ძირითადი კაზინო კომპანიამ განაცხადა, რომ არსებობს მხოლოდ სამი გზა, რომ თანამშრომლები შეიძლება ნასროლი მისი კომპანია: ქურდობა, სექსუალური ძალადობის და გაშვებული ექსპერიმენტი გარეშე საკონტროლო ჯგუფის (Schrage 2011) .
Restivo და van de Rijt სასწავლო გვიჩვენებს ოთხი ძირითადი ინგრედიენტები ექსპერიმენტი: რეკრუტირება, randomization, ინტერვენცია, და შედეგებზე. ერთად, ამ ოთხი ინგრედიენტები საშუალებას მისცემს მეცნიერებს გასცდეს კორელაცია და გავზომოთ მიზეზობრივი ეფექტი მკურნალობა. კერძოდ, randomization იმას ნიშნავს, რომ როდესაც თქვენ შედარების შედეგების მკურნალობა და საკონტროლო ჯგუფების თქვენ ხარჯთაღრიცხვა მიზეზობრივი ეფექტი რომ ინტერვენცია, რომ ნაკრები მონაწილეებს. სხვა სიტყვებით, რანდომიზებული კონტროლირებადი ექსპერიმენტი შეგიძლიათ დარწმუნებული უნდა იყოს, რომ ნებისმიერი განსხვავებები შედეგები გამოწვეულია ინტერვენცია და არა confounder, სარჩელი, რომ მე ზუსტი ტექნიკური დანართი გამოყენებით პოტენციური შედეგების ფარგლებში.
გარდა იმისა, რომ ლამაზი ილუსტრაცია მექანიკის ექსპერიმენტი, Restivo და van de Rijt სასწავლო ასევე გვიჩვენებს, რომ ლოგისტიკის ციფრული ექსპერიმენტი შეიძლება იყოს სრულიად განსხვავებული ანალოგი ექსპერიმენტი. In Restivo და van de Rijt ექსპერიმენტი, ეს იყო მარტივი, რათა Barnstar არავის მსოფლიოში და ეს იყო ადვილად აკონტროლოთ შედეგზე ნომერი edits-მეტი გაფართოებულ დროში (იმიტომ, რომ რედაქტირების ისტორია ავტომატურად ჩაწერა Wikipedia). ეს უნარი სიტყვით მკურნალობა და გავზომოთ შედეგების არ ღირებულება თვისობრივად განსხვავებით ექსპერიმენტი წარსულში. მიუხედავად იმისა, რომ ეს ექსპერიმენტი ჩართული 200 ადამიანი, ეს შეიძლება უკვე აწარმოებს 2,000 ან 20,000 ადამიანი. მთავარია, თავიდან აცილების მკვლევარები სკალირების up მათი ექსპერიმენტი ფაქტორი 100 არ ღირს, ეს იყო ეთიკა. რომ არის, Restivo და van de Rijt არ სურს, რათა barnstars უნდა გავცეთ რედაქტორები და მათ არ სურთ მათი ექსპერიმენტი ჩაშლას Wikipedia საზოგადოების (Restivo and Rijt 2012; Restivo and Rijt 2014) . ასე რომ, მიუხედავად იმისა, რომ ექსპერიმენტი Restivo და van de Rijt შედარებით მარტივი, ეს ნათლად ჩანს, რომ ზოგიერთი რამ ექსპერიმენტი იგივე დარჩა და ზოგიერთი შეიცვალა. კერძოდ, ძირითადი ლოგიკა ექსპერიმენტების არის იგივე, მაგრამ ლოგისტიკის შეიცვალა. შემდეგი, რათა უფრო ნათლად იზოლირება შესაძლებლობების ეს ცვლილება, მე შედარება ექსპერიმენტი, რომელიც მკვლევართა შეუძლია გააკეთოს ახლა სახის ექსპერიმენტი რომ გაკეთდა წარსულში.