4.2 Τι είναι τα πειράματα;
Τυχαιοποιημένη ελεγχόμενη πειράματα έχουν τέσσερα βασικά συστατικά: την πρόσληψη των συμμετεχόντων, τυχαιοποίηση της θεραπείας, την παράδοση της θεραπείας, και τη μέτρηση των αποτελεσμάτων.
Τα τυχαία ελεγχόμενα πειράματα έχουν τέσσερα βασικά συστατικά: πρόσληψη συμμετεχόντων, τυχαιοποίηση της θεραπείας, παροχή θεραπείας και μέτρηση των αποτελεσμάτων. Η ψηφιακή εποχή δεν αλλάζει τη θεμελιώδη φύση του πειραματισμού, αλλά καθιστά ευκολότερη την υλικοτεχνική. Για παράδειγμα, στο παρελθόν, μπορεί να ήταν δύσκολο να μετρηθεί η συμπεριφορά εκατομμυρίων ανθρώπων, αλλά αυτό συμβαίνει τώρα σε πολλά ψηφιακά συστήματα. Οι ερευνητές που μπορούν να καταλάβουν πώς να αξιοποιήσουν αυτές τις νέες ευκαιρίες θα είναι σε θέση να εκτελέσουν πειράματα που ήταν αδύνατο προηγουμένως.
Για να γίνει όλο αυτό πιο συγκεκριμένο - και αυτό που έχει μείνει το ίδιο και αυτό που άλλαξε - ας εξετάσουμε ένα πείραμα του Michael Restivo και του Arnout van de Rijt (2012) . Ήθελαν να κατανοήσουν την επίδραση των ανεπίσημων ανταμοιβών από ομοτίμους στις συντακτικές συνεισφορές στη Wikipedia. Συγκεκριμένα, μελέτησαν τις επιπτώσεις των barnstars , ένα βραβείο που οποιοσδήποτε Βικιπαίδος μπορεί να δώσει σε οποιονδήποτε άλλον Βικιπαίδεια για να αναγνωρίσει τη σκληρή δουλειά και τη δέουσα επιμέλεια. Οι Restivo και van de Rijt έδωσαν barnstars σε 100 άξιους Wikipedians. Στη συνέχεια παρακολούθησαν τις επακόλουθες συνεισφορές των παραληπτών στη Wikipedia για τις επόμενες 90 ημέρες. Προς μεγάλη έκπληξή τους, οι άνθρωποι στους οποίους απονεμήθηκαν barnstars είχαν την τάση να κάνουν λιγότερες επεξεργασίες μετά τη λήψη ενός. Με άλλα λόγια, οι barnstars φάνηκαν να είναι αποθαρρυντικοί παρά να ενθαρρύνουν τη συμβολή.
Ευτυχώς, ο Restivo και ο van de Rijt δεν εκτελούσαν ένα πείραμα "διαταράσσουν και παρατηρούν" διεξήγαγαν ένα τυχαίο ελεγχόμενο πείραμα. Έτσι, εκτός από την επιλογή 100 κορυφαίων συνεισφερόντων για να λάβουν ένα barnstar, πήραν επίσης 100 κορυφαίους συνεργάτες στους οποίους δεν έδωσαν ένα. Αυτές οι 100 χρησίμευσαν ως ομάδα ελέγχου. Και, κριτικά, ο οποίος ήταν στην ομάδα θεραπείας και ο οποίος ήταν στην ομάδα ελέγχου προσδιορίστηκε τυχαία.
Όταν οι Restivo και van de Rijt εξέτασαν τη συμπεριφορά των ατόμων στην ομάδα ελέγχου, διαπίστωσαν ότι οι συνεισφορές τους μειώνονταν επίσης. Περαιτέρω, όταν οι Restivo και van de Rijt συνέκριναν ανθρώπους στην ομάδα θεραπείας (δηλαδή, έλαβαν barnstars) σε άτομα στην ομάδα ελέγχου, διαπίστωσαν ότι οι άνθρωποι στην ομάδα θεραπείας συνέβαλαν περίπου 60% περισσότερο. Με άλλα λόγια, οι συνεισφορές και των δύο ομάδων ήταν αποτυχημένες, αλλά αυτές της ομάδας ελέγχου γίνονταν πολύ πιο γρήγορα.
Όπως δείχνει αυτή η μελέτη, η ομάδα ελέγχου στα πειράματα είναι κρίσιμη κατά τρόπο που είναι κάπως παράδοξο. Προκειμένου να μετρηθεί επακριβώς η επίδραση των barnstars, οι Restivo και van de Rijt χρειάστηκαν να παρατηρήσουν ανθρώπους που δεν έλαβαν barnstars. Πολλές φορές, οι ερευνητές που δεν είναι εξοικειωμένοι με τα πειράματα αποτυγχάνουν να εκτιμήσουν την απίστευτη αξία της ομάδας ελέγχου. Εάν οι Restivo και van de Rijt δεν είχαν ομάδα ελέγχου, θα είχαν καταλήξει σε λάθος συμπέρασμα. Οι ομάδες ελέγχου είναι τόσο σημαντικές ώστε ο διευθύνων σύμβουλος μιας μεγάλης εταιρείας χαρτοπαικτικών λεσχών δήλωσε ότι υπάρχουν μόνο τρεις τρόποι με τους οποίους οι εργαζόμενοι μπορούν να απολυθούν από την εταιρεία του: για κλοπή, για σεξουαλική παρενόχληση ή για τη διεξαγωγή πειράματος χωρίς ομάδα ελέγχου (Schrage 2011) .
Οι μελέτες του Restivo και van de Rijt δείχνουν τα τέσσερα κύρια συστατικά ενός πειράματος: πρόσληψη, τυχαιοποίηση, παρέμβαση και αποτελέσματα. Μαζί, αυτά τα τέσσερα συστατικά επιτρέπουν στους επιστήμονες να ξεπεράσουν τις συσχετίσεις και να μετρήσουν την αιτιώδη επίδραση των θεραπειών. Συγκεκριμένα, η τυχαιοποίηση σημαίνει ότι οι άνθρωποι στις ομάδες θεραπείας και ελέγχου θα είναι παρόμοιοι. Αυτό είναι σημαντικό επειδή σημαίνει ότι οποιαδήποτε διαφορά στα αποτελέσματα μεταξύ των δύο ομάδων μπορεί να αποδοθεί στη θεραπεία και όχι σε μια σύγχυση.
Εκτός από την ωραία απεικόνιση της μηχανικής των πειραμάτων, η μελέτη των Restivo και van de Rijt δείχνει επίσης ότι η υλικοτεχνική υποστήριξη των ψηφιακών πειραμάτων μπορεί να είναι εντελώς διαφορετική από εκείνη των αναλογικών πειραμάτων. Στο πείραμα του Restivo και του van de Rijt, ήταν εύκολο να δώσει κανείς το barnstar σε οποιονδήποτε και ήταν εύκολο να εντοπίσει το αποτέλεσμα - τον αριθμό των επεξεργασιών - για μεγάλο χρονικό διάστημα (επειδή το ιστορικό επεξεργασίας καταγράφεται αυτόματα από τη Wikipedia). Αυτή η ικανότητα να παραδίδει θεραπείες και να μετρά τα αποτελέσματα χωρίς κόστος είναι ποιοτικά αντίθετη με τα πειράματα στο παρελθόν. Αν και αυτό το πείραμα περιελάμβανε 200 άτομα, θα μπορούσε να έχει τρέξει με 2.000 ή ακόμα και 20.000 άτομα. Το κύριο πράγμα που εμποδίζει τους ερευνητές να αυξήσουν το πείραμά τους κατά 100, δεν ήταν κόστος. ήταν ηθική. Δηλαδή, οι Restivo και van de Rijt δεν ήθελαν να δώσουν barnstars στους αχρείους συντάκτες και δεν ήθελαν το πείραμά τους να διαταράξει την κοινότητα της Wikipedia (Restivo and Rijt 2012, 2014) . Θα επανέλθω σε μερικές από τις ηθικές σκέψεις που έθεσαν τα πειράματα αργότερα σε αυτό το κεφάλαιο και στο κεφάλαιο 6.
Εν κατακλείδι, το πείραμα των Restivo και van de Rijt δείχνει σαφώς ότι ενώ η βασική λογική του πειραματισμού δεν έχει αλλάξει, η υλικοτεχνική υποστήριξη των πειραμάτων ψηφιακής ηλικίας μπορεί να είναι δραματικά διαφορετική. Στη συνέχεια, για να απομονώσουμε σαφέστερα τις ευκαιρίες που δημιουργούν αυτές οι αλλαγές, θα συγκρίνω τα πειράματα που μπορούν να κάνουν οι ερευνητές τώρα με τα πειράματα που έχουν γίνει στο παρελθόν.
