A medição é sobre como fazer inferências a partir do que seus entrevistados dizem o que seus entrevistados pensam e fazem.
A segunda categoria de levantamento do quadro de erro total é medida; trata-se de como podemos fazer inferências a partir das respostas que os inquiridos dão às nossas perguntas. Acontece que as respostas que recebemos, e, portanto, as inferências que fazemos, pode depender maneiras-on criticamente e em algumas vezes surpreendentes exatamente como pedimos. Talvez nada ilustra este importante ponto melhor do que uma piada no livro maravilhoso de fazer perguntas por Norman Bradburn, Seymour Sudman, e Brian Wansink (2004) :
Dois padres, um dominicano e um jesuíta, estão discutindo se é um pecado para fumar e orar ao mesmo tempo. Depois de não conseguir chegar a uma conclusão, cada um vai para consultar o seu respectivo superior. O dominicano diz: "O que fez a sua opinião superior?"
O jesuíta responde: "Ele disse que estava bem."
"Isso é engraçado" o dominicano responde: "Meu supervisor disse que era um pecado."
O jesuíta disse: "O que você perguntar a ele?" O Dominicana responde: "Perguntei-lhe se ele estava bem a fumar enquanto orava." "Ah", disse o jesuíta, "Eu perguntei se era OK para rezar, enquanto fumar."
Há muitos exemplos de anomalias como a experimentada pelos dois sacerdotes. Na verdade, o próprio problema na raiz dessa brincadeira tem um nome na comunidade de pesquisa pesquisa: efeitos forma de pergunta (Kalton and Schuman 1982) . Para ver como efeitos forma de pergunta pode afetar pesquisas reais, considere estas duas questões da pesquisa que olha muito semelhantes:
Embora ambas as perguntas parecem medir a mesma coisa, eles produziram resultados diferentes em um experimento de pesquisa reais (Schuman and Presser 1996) . Quando perguntado de uma maneira, cerca de 60% dos entrevistados relataram que os indivíduos eram mais culpados por crime, mas quando perguntou para o outro lado cerca de 60% relataram que as condições sociais eram mais culpados (Figura 3.2). Em outras palavras, a pequena diferença entre as duas perguntas pode levar os investigadores a uma conclusão diferente.
Além da estrutura do questão, os respondentes também pode dar respostas diferentes com base nas palavras específicas utilizadas. Por exemplo, a fim de medir opiniões sobre prioridades governamentais, os entrevistados foram ler a seguinte mensagem:
"Estamos confrontados com muitos problemas neste país, nenhum dos quais podem ser resolvidos facilmente ou barata. Vou citar alguns desses problemas, e para cada um que eu gostaria que você me diga se você acha que está gastando muito dinheiro com isso, muito pouco dinheiro, ou sobre a quantidade certa. "
". Ajudas para os pobres" Em seguida, metade dos inquiridos foram questionados sobre "bem-estar" e metade foram questionados sobre Embora estes possam parecer duas frases diferentes para a mesma coisa, eles provocou resultados muito diferentes (Figura 3.3); Os americanos afirmam estar muito mais de suporte de "ajuda aos pobres" do que "bem-estar" (Smith 1987; Rasinski 1989; Huber and Paris 2013) . Enquanto os pesquisadores da pesquisa consideram estes efeitos redacção ser anomalias, eles também poderiam considerá-los os resultados da investigação. Ou seja, nós aprendemos algo sobre a opinião pública a partir deste resultado.
Como esses exemplos sobre efeitos forma de pergunta e efeitos redacção mostrar, as respostas que os pesquisadores recebem pode ser influenciada de maneira sutil com base em como eles fazer suas perguntas. Isso não significa que as pesquisas não devem ser utilizados; muitas vezes não há escolha. Em vez disso, os exemplos mostram que devemos construir as nossas perguntas com cuidado e não devemos aceitar respostas de forma acrítica.
Mais concretamente, isto significa que se você está analisando os dados de pesquisa coletados por outra pessoa, certifique-se de que você leu o questionário real. E, se você estiver criando seu próprio questionário, eu tenho três sugestões. Primeiro, eu sugiro que você leia mais sobre concepção do questionário (por exemplo, Bradburn, Sudman, and Wansink (2004) ); não há mais a ele do que eu fui capaz de descrever aqui. Em segundo lugar, eu sugiro que você copiar palavra por palavra-perguntas de pesquisas de alta qualidade. Embora isso soa como plágio, cópia perguntas é incentivada na pesquisa de levantamento (contanto que você citar a pesquisa original). Se você copiar a perguntas de pesquisas de alta qualidade, você pode ter certeza que eles foram testados e você pode comparar as respostas para o seu inquérito para respostas de algum outro inquérito. Finalmente, eu sugiro que você pré-testar suas perguntas com algumas pessoas de sua população de armação (Presser et al. 2004) ; minha experiência é que o pré-teste sempre revela questões surpreendentes.