3.3.3 Трошкови

Анкете нису бесплатни, а ово је прави ограничење.

До сада сам укратко прегледао оквир укупне грешке у истраживању, који је сама предмет предметног третмана (Weisberg 2005; Groves et al. 2009) . Иако је овај оквир свеобухватан, генерално узрокује да истраживачи превидјују важан фактор: трошкови. Иако трошкови - који се могу мерити било временом или новцем - ријетко се експлицитно расправљају од академских истраживача, то је стварно ограничење које се не сме занемарити. У ствари, трошкови су фундаментални за читав процес истраживања истраживања (Groves 2004) : то је разлог што истраживачи интервјуишу узорак људи, а не читаву популацију. Једнодушна посвећеност минимизирању грешке у потпуности игнорисање трошкова није увек у нашем најбољем интересу.

Ограничења опсесије с смањеном грешком илустрира се у пројекту скитнице Сцотт Кеетер-а и колега (2000) о ефектима скупих теренских операција на смањење неиспорности у телефонским истраживањима. Кеетер и колеге су водили две истовремене студије, један који је користио "стандардне" процедуре запошљавања и један са "ригорозним" процедурама запошљавања. Разлика између две студије била је количина напора која је ступила у контакт са испитаницима и подстакла их да учествују. На пример, у студији са "ригорозним" запошљавањем, истраживачи су чешће и дуже време позвали узоркована домаћинства и давали додатне позиве ако су учесници у почетку одбили да учествују. Ови додатни напори заправо су доносили нижу стопу непостојања, али су знатно повећали трошкове. Студија коришћењем "ригорозних" процедура била је двоструко скупља и осам пута спорија. И на крају, обе студије произвеле су у суштини идентичне процене. Овај пројекат, као и накнадне репликације са сличним налазима (Keeter et al. 2006) , требало би да вас доведе до (Keeter et al. 2006) : да ли смо боље са два разумна истраживања или један необичан преглед? Шта је са 10 разумних анкета или једним неистраженим истраживањем? Шта је око 100 разумних анкета или једног необјашњивог истраживања? У одређеном тренутку, трошковне предности морају надмашити нејасне, неспецифичне бриге о квалитету.

Као што ћу показати у овом остатку поглавља, многе могућности које су створене у дигиталном добу нису о изради процјена које очигледно имају мању грешку. Умјесто тога, ове могућности се односе на процјену различитих количина и процјену бржих и јефтинијих, чак и уз могуће више грешке. Истраживачи који инсистирају на једнодушној опсесији са минимизацијом грешке на рачун других димензија квалитета пропусте узбудљиве могућности. С обзиром на ову позадину у оквиру укупног оквира грешке у истраживању, сада ћемо се окренути на три главна подручја треће ере истраживања истраживања: нови приступи представљању (поглавље 3.4), нови приступи мјерењу (дио 3.5), и нове стратегије за комбинирање истраживања са великим изворима података (одељак 3.6).