3.3.2 Мерење

Мерење је о прављењу закључака на основу онога што ваши испитаници кажу да оно што ваши испитаници мисле и раде.

Друга категорија укупног оквира грешке Истраживање је мерење; бави се како можемо направити закључке из одговора које испитаници дају на наша питања. Испоставило се да добијамо одговоре, а самим тим и закључци које доносимо, може да се ослони критички иу понекад изненађујуће начине-на тачно како питамо. Можда ништа илуструје ово веома важно питање боље него шалу на предивној књизи постављати питања Норман Брадбурн, Сеимоур Судман, и Бриан Вансинк (2004) :

Два свештеника, доминикански и језуита, разматрају да ли је грех да пуше и да се моли у исто време. Након неуспеха да се постигне закључак, сваки одлази да се консултује Својим претпостављеног. Доминиканска каже, "Шта је ваш претпостављени реч?"

Језуита одговара: "Он је рекао да је у реду."

"То је смешно" Доминиканска одговара: "Мој надзорник је рекао да је то грех."

Језуита је рекао, "Шта сте га питали?" Доминиканска одговара: "Питао сам га да ли је у реду да пушим док се моли." "О", рекао је језуита, "упитао сам да ли је у реду да се моле док пушења."

Постоје многи примери аномалија као што се може доживјети од два свештеника. У ствари, врло питање у корену овог шали има име у истраживању заједнице: ефекте форма питање (Kalton and Schuman 1982) . Да бисте видели како питање форма ефекти могу утицати праве анкете, узети у обзир ове две веома сличне питања гледа анкете:

• "Колико сте сагласни са следећом изјавом: Појединци су криви него социјалних услова за криминал и безакоње у овој земљи."
• "Колико се слажете са следећом изјавом: Социјални услови су криви него појединцима за криминал и безакоње у овој земљи."

Иако се појављују оба питања за мерење исту ствар, они су произвели другачије резултате у експерименту прави истраживања (Schuman and Presser 1996) . Упитан један начин, око 60% испитаника изјавило да су појединци били више крив за злочин, али када се питали на другу страну око 60% је изјавило да је социјални услови су били више криви (слика 3.2). Другим речима, мала разлика између ова два питања би могло да доведе истраживача до другачијег закључка.

Слика 3.2: Резултати експеримента у истраживању (Schuman and Presser 1996, Table 8.1) . Истраживачи могу добити различите одговоре у зависности од тога тачно како су се питали на питање. Ово је пример ефекта на питање форме (Kalton and Schuman 1982) .

Поред структуре питања, испитаници могу дати различите одговоре на основу одређених речи коришћених. На пример, како би се одредила мишљења о државним приоритетима, испитаници су прочитајте следеће упит:

"Суочени смо са многим проблемима у овој земљи, од којих нико не може решити лако и јефтино. Ја ћу навести неке од ових проблема, као и за сваки од њих желео бих да ми кажете да ли да трошимо превише новца на њега, премало новца, или о правој висини. "

". Помоћи за сиромашне" следећи, половина испитаника је постављено питање о "добробити" и пола је питање о Док су можда изгледа као две различите фразе за исту ствар, они изазивају веома различите резултате (слика 3.3); Американци наводе да нису много већу подршку "помоћи сиромашнима", него "благостања" (Smith 1987; Rasinski 1989; Huber and Paris 2013) . Док истраживачи истраживања сматрају да ова формулација ефекте да буде аномалије, они би такође их узети у обзир резултате истраживања. То јест, научили смо нешто о јавном мњењу из овог резултата.

Слика 3.3: Резултати Huber and Paris (2013) . Испитаници су много више подржавају "помоћи сиромашнима" него "благостање." Ово је пример ефекта питање ријечи којим су одговори које истраживачи добијају зависи од тачно које речи које користе у својим питањима.

Као што ови примери о ефектима формирају питање и формулацију ефекте показати, одговори које истраживачи добијају се може утицати на суптилне начине на основу тога колико они траже од својих питања. То не значи да истраживања не треба да се користи; често нема избора. Уместо тога, примери илуструју да би требало пажљиво изгради наша питања и ми не треба да прихвати одговор некритички.

Већина конкретно, то значи да ако се анализирају подаци истраживања прикупљене од стране неког другог, уверите се да сте прочитали стварни упитник. А, ако се стварају своју анкету, имам три предлога. Прво, ја предлажем да прочитате више о дизајнирању упитника (нпр Bradburn, Sudman, and Wansink (2004) ); има више тога него што сам био у стању да опише овде. Друго, ја предлажем да копирате-од речи до речи-питања из истраживања високог квалитета. Иако ово звучи као плагијат, копирање питања се подстиче у истраживању (под условом да наведу оригинални истраживање). Ако копирате питања из анкете високог квалитета, можете бити сигурни да су тестирани и можете упоредити одговоре на ваше анкете на одговорима из неког другог истраживања. На крају, ја предлажем да пре-тест питања са неким људима из вашег оквира популације (Presser et al. 2004) ; моје искуство је да је претходно тестирање увек открива изненађујуће питања.