3.3.3 Стоимость

Обзоры не являются свободными, и это является реальным ограничением.

До сих пор я кратко рассмотрел общую схему ошибок опроса, которая сама по себе является предметом обработки длины книги (Weisberg 2005; Groves et al. 2009) . Хотя эта структура является всеобъемлющей, она, как правило, заставляет исследователей игнорировать важный фактор: стоимость. Хотя затраты, которые могут быть измерены либо временем, либо деньгами, редко обсуждаются академическими исследователями, это реальное ограничение, которое нельзя игнорировать. Фактически, стоимость фундаментальна для всего процесса исследований исследования (Groves 2004) : именно по этой причине исследователи берут интервью у выборки людей, а не всего населения. Целенаправленная преданность минимизации ошибки при полном игнорировании стоимости не всегда в наших интересах.

Ограничения навязчивой идеи с уменьшающейся ошибкой проиллюстрированы ориентировочным проектом Скотта Кетера и его коллег (2000) о влиянии дорогостоящих полевых операций на сокращение нерепортации в телефонных опросах. Китер и его коллеги провели два одновременных исследования, один из которых применял «стандартные» процедуры набора и один из них применял «строгие» процедуры найма. Разница между этими двумя исследованиями заключалась в том, сколько усилий было увязано с респондентами и поощряло их к участию. Например, в исследовании с «строгим» набором, исследователи называли выборки домашних хозяйств чаще и в течение более длительного периода времени и делали дополнительные обратные вызовы, если участники изначально отказались участвовать. Эти дополнительные усилия фактически привели к более низкой частоте отсутствия ответа, но они существенно увеличили стоимость. Исследование с использованием «строгих» процедур было в два раза дороже и в восемь раз медленнее. И, в конце концов, оба исследования дали практически одинаковые оценки. Этот проект, а также последующие повторения с аналогичными результатами (Keeter et al. 2006) , должны побудить вас задаться вопросом: лучше ли нам провести два разумных опроса или один первоначальный опрос? Как насчет 10 разумных опросов или одного девственного опроса? Что относительно 100 разумных опросов или одного девственного опроса? В какой-то момент ценовые преимущества должны перевешивать неопределенные, неспецифические проблемы качества.

Как я покажу в этом разделе, многие возможности, создаваемые эпохой цифровых технологий, не связаны с оценкой, которая, очевидно, имеет более низкую погрешность. Скорее, эти возможности связаны с оценкой разных величин и оценкой быстрее и дешевле, даже с возможными более высокими ошибками. Исследователи, которые настаивают на единодушной одержимости минимизацией ошибок за счет других аспектов качества, упускают интересные возможности. Учитывая этот фон об общей структуре ошибок опроса, мы перейдем к трем основным направлениям третьей эры исследований исследования: новые подходы к представлению (раздел 3.4), новые подходы к измерению (раздел 3.5) и новые стратегии объединения обследований с большими источниками данных (раздел 3.6).