Inquéritos não são livres, e esta é uma restrição real.
Até agora, revisei brevemente a estrutura total de erros de pesquisa, que por si só é objeto de tratamentos em tamanho de livro (Weisberg 2005; Groves et al. 2009) . Embora essa estrutura seja abrangente, geralmente faz com que os pesquisadores negligenciem um fator importante: o custo. Embora o custo - que pode ser medido pelo tempo ou pelo dinheiro - raramente seja discutido explicitamente pelos pesquisadores acadêmicos, é uma restrição real que não deve ser ignorada. De fato, o custo é fundamental para todo o processo de pesquisa de (Groves 2004) : é a razão pela qual os pesquisadores entrevistam uma amostra de pessoas em vez de uma população inteira. Uma devoção unilateral para minimizar o erro, ignorando completamente o custo, nem sempre é do nosso interesse.
As limitações de uma obsessão com a redução do erro são ilustradas pelo projeto marcante de Scott Keeter e colegas (2000) sobre os efeitos de operações de campo caras na redução da não resposta em pesquisas telefônicas. Keeter e seus colegas realizaram dois estudos simultâneos, um usando procedimentos de recrutamento “padrão” e um usando procedimentos de recrutamento “rigorosos”. A diferença entre os dois estudos foi a quantidade de esforço que entrou em contato com os entrevistados e incentivando-os a participar. Por exemplo, no estudo com recrutamento “rigoroso”, os pesquisadores chamaram os domicílios amostrados com mais frequência e por um período mais longo de tempo e fizeram chamadas de retorno adicionais se os participantes inicialmente se recusassem a participar. Esses esforços extras de fato produziram uma taxa menor de não resposta, mas aumentaram substancialmente o custo. O estudo usando procedimentos “rigorosos” foi duas vezes mais caro e oito vezes mais lento. E, no final, ambos os estudos produziram estimativas essencialmente idênticas. Este projeto, assim como as repetições subsequentes com achados semelhantes (Keeter et al. 2006) , devem levar você a se perguntar: será que estamos melhores com duas pesquisas razoáveis ou uma pesquisa primitiva? O que cerca de 10 pesquisas razoáveis ou uma pesquisa intocada? O que cerca de 100 pesquisas razoáveis ou uma pesquisa imaculada? Em algum momento, as vantagens de custo devem superar as preocupações vagas e inespecíficas sobre a qualidade.
Como mostrarei neste resto do capítulo, muitas das oportunidades criadas pela era digital não se referem a fazer estimativas que obviamente têm menos erros. Em vez disso, essas oportunidades são sobre estimar quantidades diferentes e sobre como fazer estimativas mais rápidas e mais baratas, mesmo com erros possivelmente maiores. Pesquisadores que insistem em uma obsessão obstinada com a minimização do erro à custa de outras dimensões da qualidade, vão perder oportunidades estimulantes. Dada essa contextualização sobre a estrutura total do erro de pesquisa, agora nos voltaremos para três áreas principais da terceira era da pesquisa: novas abordagens para a representação (seção 3.4), novas abordagens para medição (seção 3.5) e novas estratégias para combinar pesquisas com fontes de big data (seção 3.6).