3.3.2 mesure

La mesure est de faire des inférences de ce que vos répondants disent à ce que vos répondants pensent et font.

La deuxième catégorie du cadre d'erreur d'enquête totale est la mesure; il traite de la façon dont nous pouvons tirer des conclusions à partir des réponses que les répondants donnent à nos questions. Il se trouve que les réponses que nous recevons, et donc les inférences que nous faisons, peuvent dépendre des moyens sur la critique et parfois surprenantes dans exactement comment nous demandons. Peut-être rien illustre ce point important de mieux qu'une blague dans le livre merveilleux Questions de Norman Bradburn, Seymour Sudman et Brian Wansink demandé (2004) :

Deux prêtres, un dominicain et un jésuite, discutent si elle est un péché de fumer et de prier en même temps. Après avoir échoué à parvenir à une conclusion, chacun va hors de consulter son supérieur respectif. dit The Dominican, "Qu'est-ce que votre mot à dire supérieur?"

Le jésuite répond: «Il a dit qu'il allait bien."

"C'est drôle», répond le dominicain, "Mon superviseur a dit qu'il était un péché."

Le jésuite a dit: «Qu'est-ce que vous lui demandez?" Répond The Dominican, "je lui ai demandé si elle était mal à fumer tout en priant." "Oh" dit le jésuite, "j'ai demandé si elle était OK pour prier en fumant."

Il existe de nombreux exemples d'anomalies comme celle vécue par les deux prêtres. En fait, la question très à la racine de cette plaisanterie a un nom dans le milieu de la recherche de l' enquête: les effets de forme d'interrogation (Kalton and Schuman 1982) . Pour voir comment les effets de forme de question pourraient avoir un impact réel des enquêtes, tenir compte de ces deux questions de l'enquête à la recherche très similaires:

• "Combien vous d' accord avec l'énoncé suivant: Les individus sont plus à blâmer que les conditions sociales de la criminalité et l' anarchie dans ce pays."
• "Combien vous d' accord avec l'énoncé suivant: Les conditions sociales sont plus à blâmer que les individus pour le crime et l' anarchie dans ce pays."

Bien que ces deux questions semblent mesurer la même chose, ils ont produit des résultats différents dans une expérience réelle de l' enquête (Schuman and Presser 1996) , (Schuman and Presser 1996) . Lorsqu'on lui a demandé d' une façon, environ 60% des répondants ont indiqué que les individus sont plus à blâmer pour le crime, mais quand demandé l'autre façon environ 60% ont déclaré que les conditions sociales étaient plus à blâmer (Figure 3.2). En d'autres mots, la petite différence entre les deux questions pourrait conduire les chercheurs à une conclusion différente.

Figure 3.2: Les résultats d'une expérience d'enquête (Schuman and Presser 1996, Table 8.1) . Les chercheurs peuvent obtenir des réponses différentes en fonction exactement comment ils ont posé la question. Ceci est un exemple d'un effet sous forme de questions (Kalton and Schuman 1982) .

En plus de la structure de la question, les répondants peuvent également donner des réponses différentes en fonction des mots spécifiques utilisés. Par exemple, afin de mesurer des opinions sur les priorités gouvernementales, les répondants ont été lus le message suivant:

"Nous sommes confrontés à de nombreux problèmes dans ce pays, dont aucun ne peut être résolu facilement ou à peu de frais. Je vais nommer quelques-uns de ces problèmes, et pour chacun d'eux, je voudrais que vous me disiez si vous pensez que nous dépensons trop d'argent sur elle, trop peu d'argent, soit environ la bonne quantité ".

". L'aide pour les pauvres" Ensuite, la moitié des répondants ont été interrogés sur «bien-être» et la moitié ont été interrogés sur Bien que ces peut sembler deux phrases différentes pour la même chose, ils ont suscité des résultats très différents (figure 3.3); Américains déclarent être beaucoup plus favorable à " l' aide aux pauvres» que «bien - être» (Smith 1987; Rasinski 1989; Huber and Paris 2013) , (Smith 1987; Rasinski 1989; Huber and Paris 2013) . Alors que les chercheurs de l'enquête considèrent que ces effets de formulation comme des anomalies, ils pourraient également les considérer les résultats de recherche. Autrement dit, nous avons appris quelque chose sur l'opinion publique de ce résultat.

Figure 3.3: Résultats de Huber and Paris (2013) . Les répondants sont beaucoup plus favorables à "l'aide aux pauvres» que «le bien-être." Ceci est un exemple d'un effet question de formulation selon laquelle les réponses que les chercheurs reçoivent dépendent exactement quels mots qu'ils utilisent dans leurs questions.

Comme ces exemples sur question des effets de forme et les effets de formulation montrent, les réponses que les chercheurs reçoivent peuvent être influencés de manière subtile sur la base de la façon dont ils demandent à leurs questions. Cela ne signifie pas que les enquêtes ne devraient pas être utilisés; souvent, il n'y a pas de choix. Au contraire, les exemples montrent que nous devrions construire soigneusement nos questions et nous ne devrions pas accepter les réponses sans réserve.

La plupart concrètement, cela signifie que si vous analysez les données d'enquête recueillies par quelqu'un d'autre, assurez-vous que vous avez lu le questionnaire réelle. Et, si vous créez votre propre questionnaire, j'ai trois suggestions. Tout d' abord, je vous suggère de lire plus sur la conception du questionnaire (par exemple, Bradburn, Sudman, and Wansink (2004) ); il n'y a plus à ce que je suis en mesure de décrire ici. Deuxièmement, je vous suggère de copier-mot pour mot-questions des enquêtes de haute qualité. Bien que cela ressemble à du plagiat, les questions de copie est encouragée dans la recherche de l'enquête (aussi longtemps que vous citez l'enquête initiale). Si vous copiez des questions des enquêtes de haute qualité, vous pouvez être sûr qu'ils ont été testés et vous pouvez comparer les réponses à votre sondage à des réponses d'une autre enquête. Enfin, je vous suggère de pré-tester vos questions avec des gens de votre population cadre (Presser et al. 2004) , (Presser et al. 2004) ; mon expérience est que pré-test révèle toujours des questions surprenantes.