O'lchov, sizning respondentlaringiz nima deganini va nima qilsa, shuni qilishini anglatadi.
Vakil muammolari bilan bir qatorda, jami tekshiruv xatolik doirasi, ikkinchi katta xato manbai - o'lchashdir : respondentlarning savollarimizga bergan javoblaridan qanday qilib biz tomonlarni qanday qilib echib tashlaymiz. Ko'rinib turibdiki, biz olgan javoblar, shuning uchun biz chiqargan xulosalar tanqidiy va ba'zida hayratlanarli tarzda - biz qanday qilib so'rashimiz mumkin. Balki hech narsa Norman Bradburn, Seymour Sudman va Brayan Wansink tomonidan Savolni ajoyib kitobida bir hazil Ushbu muhim nuqta yaxshi ko'rsatadi (2004) :
Ikki ruhoniylar, bir Dominikan va iezuit, u tutun va bir vaqtning o'zida ibodat qilish gunoh yoki yo'qligini muhokama qilinadi. xulosa erishish uchun ayb so'ng, har bir o'z tegishli ustun maslahatlashing off ketadi. Dominika "Sizning ustun dedingiz nima?", Deydi
Iezuit "U OK bo'ldi dedi.", Javob
"Bu kulgili" Dominika, javob "Mening rahbar u gunoh edi."
Iezuit "nima so'rashga edi?" Dominika javob, dedi "u ibodat esa chekish OK bo'ldi, agar men so'radim." "Oh" iezuit, dedi "u chekish esa ibodat qilish uchun OK edi, agar so'radim men."
Ushbu o'ziga xos hazildan tashqari, tadqiqotchi tadqiqotchilar siz o'rgangan narsalaringiz qanday qilib so'ralganingizga bog'liq bo'lgan ko'plab tizimli usullarni hujjatlashdi. Aslida, bu hazilning ildizida tadqiqot mavzusidagi tadqiqot jamoasida bir ism bor: savol shakllari ta'siri (Kalton and Schuman 1982) . So'rov natijalarining ta'siri haqiqiy tadqiqotlarga qanday ta'sir qilishi mumkinligini bilish uchun ushbu ikki juda o'xshash so'rovnoma savolini ko'rib chiqing:
Ikkala savol ham xuddi shunday narsani o'lchash uchun uchragan bo'lsa-da, ular haqiqiy tekshiruv tajribasida turli natijalarga erishdilar (Schuman and Presser 1996) . Bir yo'l so'raganida, respondentlarning 60% shaxslar jinoyat uchun aybdor ko'proq edi, deb xabar, lekin boshqa yo'l so'raganida, taxminan 60% ijtimoiy sharoitlar aybdor ko'proq edi (3.3 rasm) qildi. Boshqacha qilib aytganda, bu ikki savol o'rtasidagi kichik farq tadqiqotchilarni boshqa xulosaga olib kelishi mumkin.
Savolning tuzilishiga qo'shimcha ravishda respondentlar ishlatilgan muayyan so'zlarga qarab turli javoblar berishi mumkin. Misol uchun, hukumatning ustuvorligi to'g'risidagi fikrlarni baholash uchun respondentlar quyidagi savollarni o'qidilar:
"Biz osonlik yoki arzon hal qilinishi mumkin hech qaysi bu mamlakatda ko'p muammolar bilan duch kelamiz. Men bu muammolar ayrim nom ketyapman, va har biri uchun men sizga biz unga juda oz pul juda ko'p pul sarf, yoki o'ng miqdori haqida-ku, deb o'ylayman yo'qmi siz menga aytib bermoqchiman. "
So'ngra so'ralganlarning yarmi "farovonlik" haqida so'raldi va yarimga "kambag'allarga yordam" so'ralgandi. Ular xuddi shu narsa uchun ikkita turli xil iboralar kabi ko'rinishi mumkin bo'lsa-da, ular turli xil natijalarga erishishdi (3.4-rasm); Amerikaliklar kambag'allarga yordam berishni "farovonlik" dan ko'ra ko'proq qo'llab-quvvatlayotganliklari haqida hisobot (Smith 1987; Rasinski 1989; Huber and Paris 2013) .
So'rov shaklidagi ta'sirlar va matn effektlari haqidagi bu misollar ko'rsatadiki, tadqiqotchilarning javoblari ularning savollariga qanday javob berishlari bilan bog'liq. Ushbu misollar, ba'zan tadqiqotchilarga o'z so'rovlarini so'rash uchun "to'g'ri" usul haqida hayron bo'lishga olib keladi. Savol berishning aniq noto'g'ri usullari bor deb o'ylayman, biroq har doim bitta to'g'ri yo'l bor deb o'ylamayman. Ya'ni, "farovonlik" yoki "kambag'allarga yordam" so'rash yaxshiroq emas; bu respondentlarning munosabati haqida ikki xil narsalarni o'lchaydigan ikki xil savol. Ushbu misollar, ba'zan tadqiqotchilarni tadqiqotlarni ishlatmaslik kerak degan xulosaga keltiradi. Afsuski, ba'zan tanlov yo'q. Buning o'rniga, men bu misollardan chuqurroq saboq olishimiz kerak, deb o'ylayman. Savollarni diqqat bilan tuzishimiz kerak va biz javoblarni asossiz qabul qilmasligimiz kerak.
Eng aniq aytganda, agar siz boshqalar tomonidan to'plangan tadqiqot ma'lumotlarini tahlil qilsangiz, haqiqiy savolnomani o'qiganingizga ishonch hosil qiling. Va o'z savolnomangizni yaratayotgan bo'lsangiz, menda to'rtta taklif bor. Birinchidan, so'rovnoma loyihasi haqida ko'proq ma'lumot olishingizni tavsiya qilaman (masalan Bradburn, Sudman, and Wansink (2004) ); Bu erda bu erda tasvirlab bergandan ham ko'proq narsa bor. Ikkinchidan, yuqori sifatli so'rovlardan so'z-savollar uchun nusxa ko'chirishni taklif qilaman. Masalan, agar siz ularning irqiy / etnik kelib chiqishi haqida so'rashni istasangiz, yirik miqyosdagi davlat so'rovnomalarida, masalan, aholini ro'yxatga olishda foydalaniladigan savollarga nusxa ko'chirishingiz mumkin. Bu plagiat kabi ko'rinishi mumkin bo'lsa-da, savollarni nusxalash tadqiqot tadqiqotida rag'batlantiriladi. Savollarni yuqori sifatli so'rovlardan nusxa ko'chirsangiz, ularning sinovdan o'tganligiga ishonch hosil qilishingiz mumkin va sizning so'rovingizga javoblarni boshqa ba'zi so'rovlardan javoblar bilan solishtirishingiz mumkin. Agar so'rovnoma muhim savol tahrir ta'sir yoki savol shakli ta'sir bo'lishi mumkin, deb o'ylayman, agar yarim respondentlar savolga biri versiyasini olish va yarim boshqa versiyasini olish qaerda Uchinchidan, siz tadqiqot tajriba ishlatish mumkin (Krosnick 2011) . Va nihoyat, siz o'zingizning savollaringizni sizning qavatingizdagi ba'zi odamlar bilan sinovdan o'tkazishingizni tavsiya qilaman; tadqiqotchi tadqiqotchilar ushbu jarayonni oldindan tekshirishga chaqiradilar (Presser et al. 2004) . Mening tajribam shu bilan birga, tadqiqotni oldindan tekshirish juda foydali.