4.2 Τι είναι τα πειράματα;
Τυχαιοποιημένη ελεγχόμενη πειράματα έχουν τέσσερα βασικά συστατικά: την πρόσληψη των συμμετεχόντων, τυχαιοποίηση της θεραπείας, την παράδοση της θεραπείας, και τη μέτρηση των αποτελεσμάτων.
Τυχαιοποιημένη ελεγχόμενα πειράματα μπορούν να λάβουν πολλές μορφές και μπορεί να χρησιμοποιηθεί για τη μελέτη πολλών τύπων συμπεριφοράς. Όμως, στον πυρήνα τους, τυχαιοποιημένη ελεγχόμενη πειράματα έχουν τέσσερα βασικά συστατικά: την πρόσληψη των συμμετεχόντων, τυχαιοποίηση της θεραπείας, την παράδοση της θεραπείας, και τη μέτρηση των αποτελεσμάτων. Η ψηφιακή εποχή δεν αλλάζει τη θεμελιώδη φύση του πειραματισμού, αλλά δεν καθιστούν ευκολότερη εφοδιαστικά. Για παράδειγμα, στο παρελθόν θα μπορούσε να ήταν δύσκολο να μετρηθεί η συμπεριφορά εκατομμυρίων ανθρώπων, αλλά αυτό είναι τώρα συνήθως συμβαίνει σε πολλά ψηφιακά συστήματα. Οι ερευνητές που μπορώ να καταλάβω πώς να αξιοποιήσει αυτές τις νέες ευκαιρίες που θα είναι σε θέση να τρέξει τα πειράματα που ήταν αδύνατο στο παρελθόν.
Για να γίνει αυτό όλα λίγο πιο συγκεκριμένη, τόσο ό, τι έχει μείνει το ίδιο και τι έχει αλλάξει, ας εξετάσουμε Michael Restivo και Arnout Van de Rijt του (2012) . Οι ερευνητές θέλησαν να κατανοήσουν την επίδραση των άτυπων ανταμοιβές από ομοτίμους για συντακτική εισφορές στο Wikipedia. Συγκεκριμένα, μελέτησαν τις επιδράσεις της barnstars, ένα βραβείο που κάθε Wikipedian μπορεί να δώσει σε οποιοδήποτε άλλο Wikipedian να αναγνωρίσει τη σκληρή δουλειά και τη δέουσα επιμέλεια. Restivo και van de Rijt έδωσε barnstars έως 100 άξιους Βικιπαιδιστές. Στη συνέχεια, Restivo και van de Rijt παρακολουθούνται επόμενων συνεισφορών των δικαιούχων να Wikipedia κατά τις επόμενες 90 ημέρες. Προς μεγάλη έκπληξή τους, οι άνθρωποι στους οποίους απονέμεται barnstars έτειναν να κάνουν λιγότερες αλλαγές μετά την παραλαβή ένα. Με άλλα λόγια, οι barnstars φάνηκε να αποθαρρύνει αντί να ενθαρρύνουν τη συνεισφορά.
Ευτυχώς, Restivo και van de Rijt δεν τρέχει ένα πείραμα "διαταράξει και να τηρούν"? έτρεχαν μια τυχαιοποιημένη ελεγχόμενη πείραμα. Έτσι, εκτός από την επιλογή 100 κορυφαία συνεισφέροντες να λάβετε barnstar, πήραν επίσης 100 κορυφαίοι συνεργάτες στους οποίους δεν έδωσε barnstar. Αυτά εκατό χρησίμευσαν ως ομάδα ελέγχου, και ο οποίος πήρε μια barnstar και οι οποίοι δεν καθορίστηκε τυχαία. Όταν Restivo και van de Rijt κοίταξε την ομάδα ελέγχου διαπίστωσαν ότι είχε μια απότομη πτώση των εισφορών πολύ. Τέλος, όταν οι ερευνητές συνέκριναν τα άτομα στην ομάδα θεραπείας (δηλαδή, έλαβε barnstars) και τα άτομα στην ομάδα ελέγχου, διαπίστωσαν ότι η barnstar προκάλεσε συντάκτες να συνεισφέρουν περίπου 60% περισσότερο. Όμως, αυτή η αύξηση της συνεισφοράς γινόταν ως μέρος μιας συνολικής μείωσης στις δύο ομάδες.
Καθώς αυτή η μελέτη καταδεικνύει, η ομάδα ελέγχου σε πειράματα είναι κρίσιμη με έναν τρόπο που είναι κάπως παράδοξο. Για να μετρηθεί με ακρίβεια η επίδραση της barnstars, Restivo και van der Rijt που απαιτούνται για να παρατηρήσει τους ανθρώπους που δεν έλαβαν barnstars. Πολλοί ερευνητές φορές που δεν είναι εξοικειωμένοι με τα πειράματα αδυνατούν να εκτιμήσουν την απίστευτη αξία της ομάδας ελέγχου. Αν Restivo και van de Rijt δεν είχε ομάδα ελέγχου, που θα έχουν συντάξει ακριβώς το λάθος συμπέρασμα. Οι ομάδες ελέγχου είναι τόσο σημαντικό το γεγονός ότι ο διευθύνων σύμβουλος μιας μεγάλης εταιρείας του καζίνο έχει πει ότι υπάρχουν μόνο τρεις τρόποι με τους οποίους οι εργαζόμενοι μπορούν να απολυθούν από την εταιρεία του: την κλοπή, τη σεξουαλική παρενόχληση, καθώς και την εκτέλεση ενός πειράματος χωρίς ομάδα ελέγχου (Schrage 2011) .
μελέτη Restivo και van de Rijt του απεικονίζει τα τέσσερα κύρια συστατικά ενός πειράματος: προσλήψεις, τυχαιοποίηση, η παρέμβαση, και τα αποτελέσματα. Μαζί, αυτά τα τέσσερα συστατικά επιτρέψει στους επιστήμονες να προχωρήσουν πέρα από συσχετισμούς και να μετρήσει την αιτιώδη επίδραση των θεραπειών. Συγκεκριμένα, τυχαιοποίηση σημαίνει ότι όταν συγκρίνουμε τα αποτελέσματα για τις ομάδες θεραπείας και ελέγχου μπορείτε να πάρετε μια εκτίμηση της αιτιώδους αποτέλεσμα αυτής της παρέμβασης για το εν λόγω σύνολο των συμμετεχόντων. Με άλλα λόγια, με μια τυχαιοποιημένη ελεγχόμενη πείραμα μπορείτε να είστε σίγουροι ότι τυχόν διαφορές στα αποτελέσματα που προκαλούνται από την παρέμβαση και όχι παράγοντας σύγχυσης, μια αξίωση που κάνω ακριβείς στο τεχνικό προσάρτημα, χρησιμοποιώντας το πλαίσιο πιθανές εκβάσεις.
Εκτός του ότι είναι μια ωραία απεικόνιση των μηχανικών πειραμάτων, μελέτης Restivo και van de Rijt δείχνει επίσης ότι τα logistics των ψηφιακών πειράματα μπορεί να είναι εντελώς διαφορετική από την αναλογική πειράματα. Σε Restivo και το πείραμα van de Rijt, ήταν εύκολο να δώσει το barnstar σε οποιονδήποτε στον κόσμο και ήταν εύκολο να παρακολουθείτε την έκβαση αριθμός των επεξεργασιών-για μια παρατεταμένη χρονική περίοδο (επειδή edit ιστορία καταγράφεται αυτόματα από την Wikipedia). Αυτή η ικανότητα να παραδώσει τις θεραπείες και τη μέτρηση των αποτελεσμάτων χωρίς κόστος είναι ποιοτικά σε αντίθεση με τα πειράματα στο παρελθόν. Παρά το γεγονός ότι αυτό το πείραμα συμμετείχαν 200 άτομα, θα μπορούσε να έχει τρέξει με 2.000 ή 20.000 άτομα. Το κύριο πράγμα που αποτρέπει τους ερευνητές από την κλιμάκωση πείραμα τους με ένα συντελεστή 100 δεν κοστίζουν, ήταν ηθική. Δηλαδή, Restivo και van de Rijt δεν θέλουν να δώσουν barnstars να ανάξιοι συντάκτες και δεν ήθελαν πείραμά τους να διαταράξει την κοινότητα της Wikipedia (Restivo and Rijt 2012; Restivo and Rijt 2014) . Έτσι, παρόλο που το πείραμα του Restivo και van de Rijt είναι σχετικά απλή, δείχνει σαφώς ότι κάποια πράγματα σχετικά με τα πειράματα έχουν μείνει το ίδιο και κάποιες έχουν αλλάξει. Συγκεκριμένα, η βασική λογική του πειραματισμού είναι η ίδια, αλλά οι logistics έχουν αλλάξει. Στη συνέχεια, προκειμένου να απομονωθούν με μεγαλύτερη σαφήνεια τις ευκαιρίες που δημιουργούνται από αυτή την αλλαγή, θα συγκρίνει τα πειράματα που οι ερευνητές μπορούν να κάνουν τώρα με τα είδη των πειραμάτων που έχουν γίνει στο παρελθόν.
