Zoufälleg kontrolléiert Experimenter hu véier Haaptgrënn Ingredienten: Recrutement vun de Participanten, randomization vun Behandlung, Liwwerung vun Behandlung, a Moosse vun Resultater.
Randomiséierter kontrolléiert Experimenter hunn véier Haaptinhalter: d'Recrutement vun de Participanten, d'Randomisierung vun der Behandlung, d'Liwwerung vun der Behandlung an d'Mesure vun den Resultater. Den digitale Alter ännert net d'fundamental Natur vun Experimentatioun, awer et mécht et méi einfach logistesch. Zum Beispill, an der Vergaangenheet ass et schwiereg gewiescht ze sinn dat Verhalen vu Millioune vu Leit ze meeschteren, awer dat féiert routiné an villen digitale Systemer. D'Fuerscher déi sech erausfannen wéi dës nei Chancen an Accès kommen, kënnen Experimenter lafen, déi bis elo onméiglech waren.
Fir dëst e bëssche méi konkret ze maachen - och wat et de selwechten huet a wat geännert huet - lued Iech e Experiment vum Michael Restivo an Arnout van de Rijt (2012) . Si wollten den Effekt vun informellen Peer fir d'Redaktioun vun der Wikipedia ze verstoen. Besonnesch hunn si d'Effekter vun Barstarneren studéiert , eng Präisiwwerung datt all Wikipedian een anere Wikipedian kënnt fir häerzlech Aarbecht an d'Duefir ze respektéieren. Restivo an van de Rijt hunn Barnstaren op 100 verdient Wikipedianer. Duerno hunn d'Begréissungsbeispiele vun de Recipienten op Wikipedia an de kommende 90 Deeg verfolgt. Vill fir hir Iwwerraschung, d'Leit, déi se d'Barnstars verginn hunn, hunn e puer Ännerunge méi gemaach nodeems se eng kréien. An anere Wierder, d'Barstars hu sech enttäuschen, anstatt d'Beitrag ze encouragéieren.
Glécklecherweis waren Restivo an van de Rijt net e "perturbéieren an observéieren" Experiment; Si hunn e randomiséierter kontrolléiert Experiment gesat. Also, ausser de Choix vu 100 Top Contributoren fir e Barnstar ze kréien, hunn se och 100 Top Contributioune geholl fir déi se net hunn. Dës 100 war eng Kontrollgruppe. An, kritesch, wien an der Behandlungsgruppe war an deen an der Kontrollgruppe war zoufälleg virgesinn.
Wann Restivo an van de Rijt d'Verhalen vu Leit an der Kontrollgruppe gesinn hunn, hu se fest fonnt datt hir Beiträg ze reduzéieren. Weider, wann Restivo an van de Rijt Leit an der Behandlungsgruppe vergläichen (dh Barnstaren krut) bei Leit an der Kontrollgruppe, hu se fest fonnt datt Leit an der Behandlungskonferenz ca. 60% méi bäigedroen hunn. An anere Wierder, d'Beiträg vu béide Gruppen hu geduet, mee déi vun der Kontrollgruppe hunn esou vill méi séier gemaach.
Wéi dës Studie illustréiert, ass d'Kontrollgruppe an Experimenten kritesch op eng Manéier paradox. Fir just de Effekt vu Barstarneren ze moossen, huet de Restivo an de de Rijt Leit observéiert, déi net Barnstars kritt hunn. Vill Zäite ginn d'Fuerscher déi net mat Experimenter vertraut sinn, de Wäert vun der Kontrollgruppe net ze schätzen. Wann Restivo an van de Rijt keng Kontrollgruppe haten, hätten si genee d'falsch Schlussfolger gezunn. Kontrollgruppen si sou wichteg datt de CEO vun enger grousser Kasino Gesellschaft gesot huet, datt et nëmmen dräi Weeër ginn datt d'Mataarbechter vu senger Firma entschëllegt ginn: fir Dikrech, fir sexuelle Belästegung oder fir e Experiment ouni Kontrollgruppe (Schrage 2011) .
De Studium vun Restivo an van de Rijt illustréiert déi véier Haaptinhaltwierk vun engem Experiment: Rekrutement, Randomisatioun, Interventioun an Resultater. Zesumme kënnen dës véiert Ingrediente Wëssenschaftler iwwer Korrelatiounen iwwerhuelen an de kausalen Effekt vun Behandlungen messen. Spezifi- géiert, gëtt d'Zoufällegung datt Leit an de Behand- a Kontrollgruppen ähnlech sinn. Dëst ass wichteg, et heescht datt all Differenz vun den Resultater tëschent den zwou Gruppen op d'Behandlung a net als Confounder geschriwwe ginn.
Zousätzlech zu enger exzellente Illustratioun vun der Mechanik vun Experimenteren ass d'Restivo an de de Rijt d'Studie och datt d'Logistik vun den digitale Experimenten ganz ënnerschiddlech sinn wéi déi vun den analogen Experimenten. Den Restnert a van de Rijt Experiment war et einfach, d'Barnstar fir jiddereen ze ginn, an et war einfach d'Resultater Nummer vun den Ännerungen ze iwwerwaachen - iwwert eng längere Zäit (doduerch datt d'Geschicht ännert automatesch vun Wikipedia gespäichert). Dës Fäegkeet fir Behandlungen ze maache an d'Resultat ze maache fir iwwerhaapt Käschten ass qualitativ am Géigesaz zu Experimenter an der Vergaangenheet. Obwuel dëst Experiment 200 Mënschen huet, kéint et mat 2.000 oder souguer 20.000 Leit lafen. D'Haaptheng, déi d'Fuerscher verhënneren datt hir Experiment duerch e Faktor vun 100 war ze scannen, war net kascht; et war Ethik. Dat heescht datt Restivo an van de Rijt keng Barnstars hunn fir onreizend Editéierer ze ginn, a si wollten hiren Experiment un d'Wikipedia Community (Restivo and Rijt 2012, 2014) . Ech wäert erëm e puer ethesch Iwwerleeungen zréckginn duerch Experienz spéider an dësem Kapitel a am Kapitel 6.
Schlussendlech weist d'Experiment vu Restivo a van de Rijt kloer datt d'Grondregelung vun der Experimatioun net geännert huet, kann d'Logistik vun Experimenten vun digitaler Alter kaum dramatesch anescht sinn. Als nächstes, fir d'Opportunitéit vun dësen Verännerungen méi kloer d'Isolatioun ze isoléieren, vergläicht ech den Experimenten déi d'Fuerscher elo mat den Ermëttlungen vun der Vergangenheet gemaach hunn.