Pengukuran iku babagan babagan apa sing dipikir lan dilakoni responden saka apa sing diucapake.
Saliyane masalah representasi, total kerangka kesalahan survey nuduhake yen kasalahan sumber utama kaloro yaiku pengukuran : carane kita nggawe kesimpulan saka jawaban sing responden menehi pitakonan kita. Ternyata jawaban sing ditampa, lan mulane kesimpulan sing kita lakoni, bisa gumantung kanthi kritis-lan cara-cara sing kadhangkala ngagetake-persis cara kita ndangu. Senadyan ora ana sing nggambarake titik penting iki luwih apik tinimbang lelucon ing buku sing ditampilake dening Norman Bradburn, Seymour Sudman, lan Brian Wansink (2004) :
Two imam, a Dominika lan Yesuit, ngrembakaken apa iku dosa kanggo ngetokaké keluk lan ndedonga ing wektu sing padha. Sawise mboten saguh kanggo nggayuh kesimpulan, saben dipateni kanggo takon pamilike kang unggul. Dominika ngandika, "Apa iya ngomong unggul Panjenengan?"
Yesuit panjaluk, "Ngandika iku ana sehat-sehat."
"Sing lucu" balesan Dominika, "supervisor Kula ngandika iku dosa."
Yesuit ngandika, "Apa sing durung takon marang?" Balesan Dominikan, "Aku takon marang yen ana sehat-sehat ngudhut nalika ndedonga." "Oh" ngandika ing Jesuit, "Aku takon yen ana OK kanggo ndedonga nalika udud."
Nglirwakake lelucon iki, peneliti survey wis nyathet akeh cara sing sistematis sing apa sing sampeyan sinau gumantung carane sampeyan takon. Jebule, masalah banget ing akar lelucon iki nduweni jeneng ing komunitas riset survey: efek bentuk pitakonan (Kalton and Schuman 1982) . Kanggo ndeleng carane pitakonan wangun mbuktikake bisa ndadékaké survey nyata, nimbang pitakonan pitakonan sing meh padha kaya iki:
Senadyan loro pitakonan katon kanggo ngukur bab sing padha, padha gawé asil sing beda ing eksprimen survey nyata (Schuman and Presser 1996) . Nalika ditakoni salah sawijining cara, sekitar 60% responden nglaporake yen individu luwih bisa nyalahake tindak pidana, nanging nalika ditakoni kanthi cara liyane, kira-kira 60% nyatakake yen kondisi sosial luwih penting kanggo nyalahke (angka 3.3). Ing tembung liyane, prabédan cilik antarane rong pitakonan iki bisa mimpin peneliti menyang kesimpulan sing beda.
Saliyane struktur pertanyaan, responden bisa uga menehi jawaban sing beda-beda, gumantung saka tembung-tembung tartamtu sing digunakake. Contone, kanggo ngukur panemu babagan prioritas pemerintah, responden padha maca pituduh ing ngisor iki:
"We sing ngadhepi karo akeh masalah ing negara iki, ora ana kang bisa ditanggulangi gampang utawa regi mirah. Aku arep kanggo jeneng sawetara masalah iki, lan kanggo saben siji aku ate sampeyan ngomong apa sampeyan mikir kita lagi mbuwang dhuwit kakehan ing iku, banget sethitik dhuwit, utawa bab jumlah tengen. "
Sabanjure, setengah responden ditakoni babagan "kesejahteraan" lan setengah ditakoni babagan "bantuan kanggo wong miskin." Nalika iki bisa uga katon kaya rong frasa sing beda, padha nemu asil sing beda banget (angka 3.4); Amerika nyathet minangka "bantuan kanggo wong miskin" tinimbang "kesejahteraan" (Smith 1987; Rasinski 1989; Huber and Paris 2013) .
Minangka conto-conto iki babagan efek bentuk pitakonan lan efek tembung sing dituduhake, jawaban sing ditampa dening peneliti bisa dipengaruhi dening carane wong njaluk pitakonan. Conto-conto iki kadhangkala mimpin para panaliti nggoleki babagan cara sing "bener" kanggo nyuwun pitakonan sing ditliti. Nalika aku mikir ana sawetara cara sing salah kanggo takon, aku ora mikir ana sing bener. Mangkono, ora mesthi luwih apik kanggo takon babagan "kesejahteraan" utawa "bantuan kanggo wong miskin"; Iki minangka rong pitakonan sing beda sing ngukur rong perkara babagan sikap responden. Conto-conto iki uga kadhangkala ngetokake panaliti kanggo nyimpulake yen survey ngirim ora digunakake. Sayange, kadhangkala ora ana pilihan. Nanging, pawulangan sing bener saka conto kasebut yaiku supaya kita kudu mbangun pitakonan kasebut kanthi teliti, lan kita kudu ora nampa respon sacara tanpa kritik.
Paling konkrit, iki berarti yen sampeyan nganalisa data survey sing dikumpulake dening wong liya, priksa manawa sampeyan wis maca kuesioner sing bener. Lan yen sampeyan nggawe kuesioner dhewe, aku duwe papat saran. Kawitan, kula nyaranake sampeyan maca liyane babagan desain kuesioner (umpamane, Bradburn, Sudman, and Wansink (2004) ); ana luwih saka iki aku wis bisa njlèntrèhaké ing kene. Kapindho, aku suggest sampeyan nyalin tembung kanggo tembung-pitakonan saka survey kualitas apik. Contone, yen sampeyan pengin njaluk responden babagan bal-balan / etnis, sampeyan bisa nyalin pitakonan sing digunakake ing survey pemerintah ukuran gedhe, kayata sensus. Senajan bisa uga kaya plagiarisme, pitakonan nyalin didhukung ing riset survey (anggere sampeyan nyebut survey asli). Yen sampeyan nyalin pitakonan saka survey kanthi kualitas dhuwur, sampeyan bisa uga yakin manawa wis dites, lan sampeyan bisa mbandhingake tanggepane survey menyang respon saka sawetara survey liyane. Kapindho, yen sampeyan mikir kuesioner sampeyan bisa ngemot pitakonan tembung wigati utawa efek wujud pitakonan penting, sampeyan bisa mbukak eksperimen survey ing ngendi setengah responden nampa siji versi pitakonan lan setengah nampa versi liyane (Krosnick 2011) . Akhire, aku suggest sampeyan nyoba pilot-pitakonan sampeyan karo sawetara wong saka populasi pigura; panaliti panitia nyebat proses pre-testing (Presser et al. 2004) . Pengalaman kula punika pre-testing survey punika sanget mbiyantu.