3.3.2 Mesura

El mesurament es tracta de fer inferències a partir del que els enquestats diuen el que els seus enquestats pensen i fan.

La segona categoria del marc d'error total de l'enquesta és el mesurament; es tracta de com podem fer inferències a partir de les respostes que els enquestats donen a les nostres preguntes. Resulta que les respostes que rebem, i per tant les inferències que fem, poden dependre críticament formes-en-ia vegades sorprenents exactament com ens preguntem. Potser res il·lustra aquest important punt millor que una broma en el meravellós llibre de Norman Fer preguntes Bradburn, Seymour Sudman, i Brian Wansink (2004) :

Dos sacerdots, un dominicà i un jesuïta, estan discutint si es tracta d'un pecat de fumar i pregar al mateix temps. Després de no poder arribar a una conclusió, cada un va a consultar al seu respectiu superior. El diu Dominicana ", el que va fer el teu diguem superior?"

El jesuïta respon: "Va dir que estava bé."

"Això és graciós", respon la República Dominicana, "El meu supervisor va dir que era un pecat."

El jesuïta va dir, "Què li demana?", Respon la Dominicana ", li vaig preguntar si estava bé fumar mentre resava." "Oh", va dir el jesuïta, "Em va preguntar si estava bé per resar mentre es fuma."

Hi ha molts exemples d'anomalies com l'experimentada pels dos sacerdots. De fet, el mateix problema a l'arrel d'aquesta broma té un nom a la comunitat d'investigació de l'enquesta: interrogació efectes de formulari (Kalton and Schuman 1982) . Per veure com els efectes de formulari qüestió podrien afectar enquestes reals, consideri aquestes dues preguntes de l'enquesta d'aspecte molt similars:

• "Quant està vostè d'acord amb la següent afirmació: Els individus són més culpable que les condicions socials de la delinqüència i la il·legalitat en aquest país."
• "Quant està vostè d'acord amb la següent afirmació: Les condicions socials són més culpables que tots els individus de la delinqüència i la il·legalitat en aquest país."

Encara que ambdues preguntes semblen mesurar la mateixa cosa, que produeixen diferents resultats en un experiment real d'enquesta (Schuman and Presser 1996) . Quan se li va preguntar d'una manera, al voltant del 60% dels enquestats va informar que els individus eren més culpables de la delinqüència, però quan se li va preguntar l'altra manera al voltant del 60% va informar que les condicions socials eren més culpables (Figura 3.2). En altres paraules, la petita diferència entre les dues preguntes podria portar els investigadors a una conclusió diferent.

Figura 3.2: Els resultats d'un experiment d'enquesta (Schuman and Presser 1996, Table 8.1) . Els investigadors poden obtenir diferents respostes depenent de exactament com es va fer la pregunta. Aquest és un exemple d'un efecte de forma de pregunta (Kalton and Schuman 1982) .

A més de l'estructura de la pregunta, els enquestats també poden donar diferents respostes basades en les paraules específiques utilitzades. Per exemple, per tal de mesurar les opinions sobre les prioritats governamentals, els enquestats es van llegir el missatge següent:

"Ens enfrontem a molts problemes en aquest país, cap dels quals es poden resoldre fàcilment oa baix cost. Vaig a nomenar alguns d'aquests problemes, i per cada un m'agradaria que em digués si li sembla que estem gastant massa diners en això, molt pocs diners, o sobre la quantitat correcta ".

". L'ajuda per als pobres" A continuació, la meitat dels enquestats se'ls va preguntar sobre el "benestar" i l'altra meitat se'ls va preguntar per bé aquests poden semblar com dues frases diferents per a la mateixa cosa, que van provocar resultats molt diferents (Figura 3.3); Nord-americans informen de ser molt més suport de "ajuda als pobres" de "benestar" (Smith 1987; Rasinski 1989; Huber and Paris 2013) . Mentre que els investigadors de l'estudi consideren que aquests efectes paraules perquè siguin anomalies que podrien també considerar els resultats de la investigació. És a dir, hem après alguna cosa sobre l'opinió pública d'aquest resultat.

Figura 3.3: Resultats de Huber and Paris (2013) . Els enquestats són molt més suport de "ajuda als pobres" que "benestar". Aquest és un exemple d'un efecte de redacció de la pregunta per la qual cosa les respostes que reben els investigadors depenen exactament quines paraules que utilitzen en les seves preguntes.

Com aquests exemples sobre efectes forma de pregunta i efectes redacció mostren, les respostes que reben els investigadors poden ser influenciats de manera subtil sobre la base de la forma en què demanen a les seves preguntes. Això no vol dir que les enquestes no han de ser utilitzats; sovint no hi ha altra opció. Per contra, els exemples il·lustren que hem de construir les nostres preguntes amb cura i no hem d'acceptar sense crítica respostes.

El més concretament, això vol dir que si vostè està analitzant les dades de l'enquesta recollits per una altra persona, assegureu-vos que ha llegit el qüestionari real. I, si va a crear el seu propi qüestionari, tinc tres suggeriments. En primer lloc, li suggereixo que llegeixi més sobre el disseny del qüestionari (per exemple, Bradburn, Sudman, and Wansink (2004) ); hi ha més a ell que he estat capaç de descriure aquí. En segon lloc, suggereixo que copiï-paraula per paraula-preguntes de les enquestes d'alta qualitat. Encara que això sona com el plagi, la còpia de les preguntes s'anima en la investigació de l'enquesta (sempre que se citi l'enquesta original). Si copia les preguntes de les enquestes d'alta qualitat, vostè pot estar segur que han estat provats i es poden comparar les respostes a l'enquesta a les respostes d'alguna altra enquesta. Finalment, li suggereixo que pretest a les seves preguntes amb algunes persones de la seva població trama (Presser et al. 2004) ; la meva experiència és que la pre-prova sempre revela qüestions sorprenents.