3.3.2 Pagsukat

Pagsukat ay tungkol sa paggawa inferences mula sa kung ano ang iyong mga respondents sabihin mo kung ano ang iyong mga respondents isipin at gawin.

Ang pangalawang kategorya ng kabuuang survey error balangkas ay pagsukat; ito na trato sa kung paano namin maaaring gumawa ng inferences mula sa mga sagot na respondents ibigay sa aming mga katanungan. Ito ay lumiliko out na ang mga sagot na natanggap namin, at samakatuwid ang inferences ginawa namin, ay maaaring depende critically-at sa minsan nakakagulat na paraan-sa eksakto kung paano namin magtanong. Marahil walang naglalarawan ito mahalagang punto mas mahusay kaysa sa isang joke sa kahanga-hangang aklat Pagtatanong sa pamamagitan ng Norman Bradburn, Seymour Sudman, at Brian Wansink (2004) :

Dalawang pari, isang Dominican at isang Heswita, ay pagtalakay kung ito ay isang kasalanan sa usok at manalangin nang sabay-sabay. Pagkatapos bagsak upang maabot ang isang konklusyon, ang bawat napupunta off upang kumonsulta kanyang kani superior. Ang Dominican nagsasabing, "Ano ang ginawa ng inyong superior say?"

Ang mga Heswita ay tumugon, "Sinabi niya ito ay tama."

"Iyan ay nakatatawa" ang Dominican sagot, "Ang aking supervisor sinabi ito ay isang kasalanan."

Ang mga Heswita sinabi, "Ano ang ginawa mo sa kanya?" Ang Dominican sumagot, "Tinanong ko siya kung ito ay tama sa usok habang nagdarasal." "Oh" sabi ng Heswita, "Tinanong ko kung ito ay OK upang manalangin habang paninigarilyo."

Mayroong maraming mga halimbawa ng mga anomalies tulad ng isa na naranasan ng mga dalawang pari. Sa katunayan, ang napaka isyu sa ugat ng joke na ito ay may isang pangalan sa komunidad survey pananaliksik: tanong anyo effects (Kalton and Schuman 1982) . Upang makita kung paano tanong anyo epekto ay maaaring maka-apekto real survey, isaalang-alang ang mga ito ng dalawang halos katulad na naghahanap ng survey na mga tanong:

• "Magkano sumasang-ayon ka sa mga sumusunod na pahayag: Ang mga indibidwal ay mas dapat sisihin sa panlipunang mga kondisyon para sa krimen at kawalan ng batas sa bansang ito."
• "Magkano ang sumasang-ayon ka sa mga sumusunod na pahayag: Social kondisyon ay mas dapat sisihin sa mga indibidwal para sa krimen at kawalan ng batas sa bansang ito."

Kahit na parehong mga katanungan lumitaw upang masukat ang parehong bagay, sila ay ginawa ng iba't ibang mga resulta sa isang tunay na survey eksperimento (Schuman and Presser 1996) . Kapag tinanong ng isang daan, tungkol sa 60% ng mga respondents iniulat na ang mga indibiduwal ay mas dapat sisihin sa krimen, ngunit kapag tinatanong ang mga iba pang mga paraan tungkol sa 60% iniulat na panlipunang mga kondisyon ay mas dapat sisihin (Figure 3.2). Sa ibang salita, ang maliit na pagkakaiba sa pagitan ng dalawang mga katanungan ay maaaring humantong mga mananaliksik sa isang iba't ibang konklusyon.

Figure 3.2: Ang mga resulta mula sa isang eksperimento survey (Schuman and Presser 1996, Table 8.1) . Mananaliksik ay maaaring makakuha ng iba't ibang mga sagot depende sa eksakto kung paano nila tinanong ang tanong. Ito ay isang halimbawa ng isang katanungan na form epekto (Kalton and Schuman 1982) .

Bilang karagdagan sa ang istraktura ng ang tanong, respondents din ay maaaring magbigay ng iba't ibang sagot batay sa tiyak na mga salita na ginagamit. Halimbawa, upang masukat opinyon tungkol prayoridad ng pamahalaan, respondents ay basahin ang mga sumusunod na prompt:

"Kami ay nahaharap sa maraming mga problema sa bansang ito, wala sa kung saan ay maaaring malutas sa madaling o inexpensively. Pupunta ako upang pangalanan ang ilan sa mga problemang ito, at sa bawa't isa'y Gusto ko mong sabihin sa akin kung sa tingin mo kami ay paggastos ng masyadong maraming pera sa mga ito, masyadong maliit na pera, o tungkol sa tamang dami. "

". Aid para sa mga mahihirap" Next, kalahati ng mga respondents ay tinatanong tungkol sa "welfare" at kalahati ay tinatanong tungkol Habang ang mga maaaring mukhang tulad ng dalawang magkaibang mga parirala para sa parehong bagay, ang mga ito elicited very iba't ibang mga resulta (Figure 3.3); Amerikano ulat na lalong supportive ng "aid sa mga dukha" kaysa sa "welfare" (Smith 1987; Rasinski 1989; Huber and Paris 2013) . Habang survey mananaliksik isaalang-alang ang mga paraan ng pagsasalita effects na anomalya, hindi na nila ring isaalang-alang ang mga ito natuklasan sa pananaliksik. Iyon ay, kami ay natutunan ng isang bagay tungkol sa pampublikong opinyon mula sa resultang ito.

Figure 3.3: Mga resulta mula sa Huber and Paris (2013) . Respondents ay mas supportive ng "aid sa mga dukha" kaysa sa "welfare." Ito ay isang halimbawa ng isang katanungan paggamit ng mga salita na epekto kung saan ang sagot na matanggap mananaliksik depende sa eksakto kung aling mga salita na ginagamit nila sa kanilang mga katanungan.

Tulad ng mga halimbawa tungkol sa suliraning effects form at paggamit ng mga salita effects ipakita, ang mga sagot na matanggap mananaliksik ay maaaring maapektuhan din sa mapaglalang paraan batay sa kung paano sila magtanong sa kanilang mga katanungan. Ito ay hindi nangangahulugan na mga survey ay hindi dapat gamitin; madalas walang choice. Sa halip, ang mga halimbawa ilarawan na dapat naming bumuo ng aming mga katanungan nang mabuti at hindi natin dapat tanggapin kasagutan uncritically.

Karamihan concretely, ito ay nangangahulugan na kung ikaw ay pag-aaral sa survey data na nakolekta sa pamamagitan ng ibang tao, siguraduhin na basahin mo ang mga aktwal na palatanungan. At, kung ikaw ay paggawa ng iyong sariling palatanungan, Mayroon akong tatlong mga mungkahi. Una, Iminumungkahi ko sa iyo basahin ang nalalaman tungkol questionnaire disenyo (eg, Bradburn, Sudman, and Wansink (2004) ); doon ay mas na ito kaysa sa ako ay able sa ilarawan dito. Pangalawa, minumungkahi ko na kopyahin-word sa iyo para sa word-katanungan mula sa mataas na kalidad na mga survey. Kahit na ito tunog tulad ng panunulad, pagkopya katanungan ay hinihikayat sa survey pananaliksik (hangga't banggitin mo ang orihinal na survey). Kung kokopya ng mga tanong mula sa mataas na kalidad na mga survey, maaari mong siguraduhin na sila ay nai-subok at maaari mong ihambing ang mga sagot sa iyong mga survey sa mga tugon mula sa ilang iba pang mga survey. Sa wakas, Iminumungkahi ko sa iyo pre-subukan ang iyong mga katanungan na may ilang mga tao mula sa iyong populasyon frame (Presser et al. 2004) ; ang aking karanasan ay na pre-testing laging nagpapakita nakakagulat na mga isyu.