Οι έρευνες δεν είναι δωρεάν, και αυτό είναι ένα πραγματικό εμπόδιο.
Μέχρι στιγμής, έχω αναθεωρήσει συνοπτικά το συνολικό πλαίσιο σφάλματος της έρευνας, το οποίο είναι το ίδιο αντικείμενο θεραπειών βιβλίου (Weisberg 2005; Groves et al. 2009) . Αν και αυτό το πλαίσιο είναι περιεκτικό, γενικά αναγκάζει τους ερευνητές να παραβλέπουν έναν σημαντικό παράγοντα: το κόστος. Αν και το κόστος - το οποίο μπορεί να μετρηθεί είτε με χρόνο είτε με χρήματα - σπάνια συζητείται ρητά από ακαδημαϊκούς ερευνητές, είναι ένας πραγματικός περιορισμός που δεν πρέπει να αγνοηθεί. Στην πραγματικότητα, το κόστος είναι θεμελιώδους σημασίας για ολόκληρη τη διαδικασία έρευνας έρευνας (Groves 2004) : είναι ο λόγος που οι ερευνητές συνεντεύουν ένα δείγμα ανθρώπων και όχι ολόκληρο τον πληθυσμό. Μια απλή αφοσίωση στην ελαχιστοποίηση του σφάλματος, ενώ αγνοούμε πλήρως το κόστος δεν είναι πάντα προς το συμφέρον μας.
Οι περιορισμοί της εμμονής με τη μείωση του σφάλματος αποδεικνύονται από το έργο ορόσημο του Scott Keeter και συναδέλφων (2000) σχετικά με τις επιπτώσεις των δαπανηρών πεδίων σε περιορισμό της μη ανταπόκρισης στις τηλεφωνικές έρευνες. Ο Keeter και οι συνάδελφοί του διενήργησαν δύο ταυτόχρονες μελέτες, μία χρησιμοποιώντας «τυποποιημένες» διαδικασίες πρόσληψης και μία με «αυστηρές» διαδικασίες πρόσληψης. Η διαφορά μεταξύ των δύο μελετών ήταν η προσπάθεια που καταβλήθηκε για την επαφή των ερωτηθέντων και την ενθάρρυνσή τους να συμμετάσχουν. Για παράδειγμα, στη μελέτη με «αυστηρές» προσλήψεις, οι ερευνητές κάλεσαν τα δείγματα νοικοκυριών πιο συχνά και σε μεγαλύτερο χρονικό διάστημα και έκαναν επιπλέον επανακλήσεις εάν οι συμμετέχοντες αρχικά αρνήθηκαν να συμμετάσχουν. Αυτές οι πρόσθετες προσπάθειες οδήγησαν στην πραγματικότητα σε χαμηλότερο ποσοστό μη ανταπόκρισης, αλλά αύξησαν σημαντικά το κόστος. Η μελέτη που χρησιμοποιεί "αυστηρές" διαδικασίες ήταν δύο φορές πιο ακριβή και οκτώ φορές πιο αργή. Και, στο τέλος, και οι δύο μελέτες παρήγαγαν ουσιαστικά ίδιες εκτιμήσεις. Αυτό το έργο, καθώς και οι επακόλουθες αναπαραγωγές με παρόμοια ευρήματα (Keeter et al. 2006) , θα πρέπει να σας οδηγήσουν στο να αναρωτηθούμε: είμαστε καλύτεροι με δύο εύλογες έρευνες ή μία παρθένα έρευνα; Τι γίνεται με 10 εύστοχες έρευνες ή μία έρευνα; Τι γίνεται με 100 εύστοχες έρευνες ή μια παρθένα έρευνα; Σε κάποιο σημείο, τα πλεονεκτήματα κόστους πρέπει να αντισταθμίζουν τις ασαφείς, μη ειδικές ανησυχίες για την ποιότητα.
Όπως θα δείξω σε αυτό το υπόλοιπο κεφάλαιο, πολλές από τις ευκαιρίες που δημιουργούνται από την ψηφιακή εποχή δεν είναι να κάνουν εκτιμήσεις που προφανώς έχουν μικρότερο σφάλμα. Αυτές οι ευκαιρίες μάλλον αφορούν την εκτίμηση διαφορετικών ποσοτήτων και την πραγματοποίηση εκτιμήσεων ταχύτερα και φθηνότερα, ακόμη και με ενδεχομένως υψηλότερα σφάλματα. Οι ερευνητές που επιμένουν σε μια μονομανή εμμονή με την ελαχιστοποίηση του σφάλματος εις βάρος άλλων διαστάσεων της ποιότητας θα χάσουν τις συναρπαστικές ευκαιρίες. Λαμβάνοντας υπόψη αυτό το ιστορικό του συνολικού πλαισίου σφαλμάτων της έρευνας, θα στραφούμε τώρα σε τρεις κύριους τομείς της τρίτης εποχής έρευνας έρευνας: νέες προσεγγίσεις στην εκπροσώπηση (τμήμα 3.4), νέες προσεγγίσεις για τη μέτρηση (τμήμα 3.5) και νέες στρατηγικές συνδυασμού ερευνών με μεγάλες πηγές δεδομένων (ενότητα 3.6).