3.3.2 Mjerenje

Mjerenje je o tome da zaključke iz onoga što vaši ispitanici kažu da ono što vaši ispitanici misle i rade.

Druga kategorija ukupnog okvira anketa pogreške je mjerenje; ona se bavi kako možemo napraviti zaključke iz odgovora koje ispitanici daju na naša pitanja. Ispostavilo se da su odgovori koje primamo, a time i zaključci koje donosimo, možete ovise-a u ponekad iznenađujuće načine na točno kako se postaviti. Možda ništa ilustrira ova važna stvar bolja od šale u prekrasnom knjige postavljanja pitanja od strane Normana Bradburn, Seymour Sudman i Brian Wansink (2004) :

Dva svećenika, dominikanac i isusovac, raspravljaju da li je to grijeh pušiti i moliti u isto vrijeme. Nakon što nije uspio doći do zaključka, svaki odlazi konzultirati njegov odgovarajući nadređeni. Dominikanski kaže: "Što je vaš vrhunsku rekao?"

Isusovačka odgovara: "On je rekao da je u redu."

"To je smiješno" dominikanski odgovara: "Moj nadređeni rekao da je to grijeh."

Isusovačka je rekao: "Što ste ga pitali?" Dominikanski odgovara: "Pitao sam ga je li to bilo u redu pušiti dok je molio." "Oh", rekao je isusovac, "Pitao sam se je li u redu da se moli dok pušenje."

Postoje mnogi primjeri anomalija kao što je bila s dva svećenika. U stvari, vrlo problem u korijenu ovog vica ima ime u anketi istraživačke zajednice: Obrazac učinke pitanje (Kalton and Schuman 1982) . Da biste vidjeli kako Upit za učinci mogu utjecati na stvarne anketama, uzeti u obzir te dvije vrlo slična pitanja izgleda ankete:

• "Koliko se slažete sa sljedećom tvrdnjom: Pojedinci su više krivi od socijalnih uvjeta za kriminal i bezakonja u ovoj zemlji."
• "Koliko se slažete sa sljedećom tvrdnjom: Socijalni uvjeti su više krivi od pojedinaca za kriminal i bezakonja u ovoj zemlji."

Iako su oba pitanja se pojavljuju za istu stvar, oni su proizvodili različite rezultate u eksperimentu u realnom ankete (Schuman and Presser 1996) . Na pitanje u jednom smjeru, oko 60% ispitanika izjavilo je da su pojedinci bili su krivi za zločin, ali na upit na drugu stranu oko 60% izjavilo da su društveni uvjeti bili više krivi (Slika 3.2). Drugim riječima, mala je razlika između ta dva pitanja može dovesti istraživače na drugačiji zaključak.

Slika 3.2: Rezultati ankete eksperimenta (Schuman and Presser 1996, Table 8.1) . Istraživači mogu dobiti različite odgovore, ovisno o tome kako je točno da postavi pitanje. To je primjer pitanje forme učinkom (Kalton and Schuman 1982) .

Osim strukturi pitanje, ispitanici su također može dati različite odgovore na temelju specifičnih riječi koje se koriste. Na primjer, kako bi se izmjerila mišljenja o vladinim prioritetima, ispitanici su pročitali sljedeću uputu:

"Mi smo suočeni s brojnim problemima u ovoj zemlji, od kojih nitko ne može riješiti lako i jeftino. Idem da spomenemo neke od tih problema, a za svaku od njih volio bih da mi kažete da li mislite da trošimo previše novca na to, premalo novca, ili u dovoljnoj mjeri. "

". Potporama za siromašne" Dalje, polovica ispitanika su pitali o "dobrobiti", a druga polovica su pitali o Iako to može činiti kao dvije različite izraze za istu stvar, oni su izazvale vrlo različite rezultate (Slika 3.3); Amerikanci kažu da su mnogo više podržavaju "pomoć za siromašne" od "dobrobiti" (Smith 1987; Rasinski 1989; Huber and Paris 2013) . Dok znanstvenici ankete u obzir te tekst učinci se anomalije, oni također mogu uzeti u obzir im rezultate istraživanja. To jest, naučili smo nešto o mišljenju javnosti iz ovog rezultata.

Slika 3.3: Rezultati Huber and Paris (2013) . Ispitanici su mnogo više podržavaju "pomoć za siromašne" od "dobrobiti". Ovo je primjer pitanje tekst efekt pri čemu su odgovori koje su istraživači dobivaju ovise o točno koje riječi koje koriste u svojim pitanjima.

Kao što ovi primjeri o Upit za efekte i tekst efekte pokazati, odgovori da istraživači dobivaju se može utjecati na suptilne načine na temelju kako oni traže od svojih pitanja. To ne znači da ankete ne smije se koristiti; često nema izbora. Umjesto toga, ovi primjeri pokazuju da trebamo graditi na naša pitanja pažljivo i ne bismo trebali prihvatiti odgovore nekritički.

Većina konkretno, to znači da ako analizi podataka ankete prikupljene netko drugi, pobrinite se da ste pročitali stvarni upitnik. A, ako se stvaranje vlastite upitnik, imam tri prijedloga. Prvo, ja predlažem da pročitate više o upitnika (npr Bradburn, Sudman, and Wansink (2004) ); tu je više za njega nego što sam bio u mogućnosti opisati ovdje. Drugo, ja predlažem da copy-riječ za riječ-pitanja iz kvalitetnih istraživanja. Iako ovo zvuči kao plagijat, kopiranje pitanja potiče u anketama (koliko god navode izvorni ankete). Ako kopirate pitanja od kvalitetnih anketama, možete biti sigurni da su testirani i možete usporediti odgovore na svoje istraživanje na odgovorima iz neke druge ankete. Na kraju, predlažem da pre-test pitanja s nekim ljudima iz svog okvira populacije (Presser et al. 2004) ; moje iskustvo je da prethodno ispitivanje uvijek otkriva iznenađujuće pitanja.