Měření je o tom důsledky z toho, co vaše mínění respondentů s tím, co respondenti myslí a co dělají.
Druhá kategorie celkového rámce chyby průzkum je měření; zabývá se, jak můžeme dělat závěry z odpovědí, že respondenti dávají na naše otázky. Ukazuje se, že odpovědi, které dostáváme, a proto závěry, které my dělají, může záviset kriticky av někdy překvapující způsoby, jak přesně se ptáme. Možná, že nic to ilustruje důležitý bod lepší než vtip v nádherné knize ptát Norman Bradburn, Seymour Sudman a Brian Wansink (2004) :
Dva kněží, dominikánský a jezuita, diskutujeme o tom, zda se jedná o hřích kouřit a modlit se ve stejnou dobu. Poté, co nedokázal dospět k závěru, každý zhasne konzultovat jeho příslušný nadřízený. Dominikánský říká: "Co dělal váš lepší slovo?"
Jezuita odpoví, "Řekl, že to bylo v pořádku."
"To je legrační," dominikánský odpoví: "Můj nadřízený říká, že je to hřích."
uvedl jezuita, "Co jste se ho zeptat?" Dominikánský odpoví, "Zeptal jsem se ho, jestli to bylo v pořádku kouřit zatímco se modlí." "Aha" uvedl jezuita, "zeptal jsem se, jestli to bylo v pořádku, aby se modlili, zatímco kouření."
Existuje mnoho příkladů anomálií, jako je ten, který má zkušenosti mezi oběma kněžími. Ve skutečnosti je velmi otázka u zrodu tohoto vtipu má název v průzkumu výzkumné komunity: Dotaz formuláře účinky (Kalton and Schuman 1982) . Chcete-li vidět, jak účinky otázka formy mohly ovlivnit skutečné průzkumy, považují tyto dvě velmi podobné otázky vypadající Průzkum:
Ačkoli obě otázky Zdá se, že měření totéž, oni produkovali různé výsledky v reálném průzkumu experimentu (Schuman and Presser 1996) . Když byl dotázán na jednu stranu, asi 60% respondentů uvedlo, že jednotlivci byli více vinu za trestný čin, ale když byl dotázán na druhou stranu asi 60% uvedlo, že sociální podmínky byly více na vině (Obrázek 3.2). Jinými slovy, malý rozdíl mezi těmito dvěma otázkami by mohlo vést výzkumné pracovníky k jinému závěru.
Kromě struktury na otázku, respondenti také může poskytnout různé odpovědi na základě konkrétních použitých slov. Například, aby bylo možné měřit názory o vládních prioritách, byli respondenti přečíst následující řádek:
"Čelíme mnoha problémy v této zemi, z nichž žádný lze snadno a levně vyřešit. Chystám se jmenovat některé z těchto problémů, a pro každou z nich bych rád, abyste mi říct, zda si myslíte, utrácíme příliš mnoho peněz na to, příliš málo peněz, nebo tak akorát. "
. "Pomoc pro chudé" Next, polovina respondentů byli dotazováni na "blaho" a polovina byli dotazováni I když tyto se může zdát jako dva různé fráze pro stejnou věc, tedy sklízejí velmi rozdílné výsledky (Obrázek 3.3); Američané uvádějí, že jsou mnohem příznivější pro "pomoc chudým" než "welfare" (Smith 1987; Rasinski 1989; Huber and Paris 2013) . Zatímco výzkumníci průzkumu považují tyto formulace účinky jako anomálie, mohli by také zvážit jim výsledky výzkumu. To znamená, že jsme se naučili něco o veřejného mínění z tohoto výsledku.
Jak tyto příklady o účincích otázek forma a znění účinky ukazují, že odpovědi, že výzkumní pracovníci dostávají může být ovlivněna v jemných způsobů, založených na tom, jak požádat své otázky. To neznamená, že by neměl být používán průzkumy; Často není na výběr. Spíše příklady ilustrují, že bychom měli pečlivě postavit na naše otázky a neměli bychom přijímat odpovědi nekriticky.
Většina konkrétně, to znamená, že pokud jste analýzu dat byly zjišťovány prostřednictvím někoho jiného, ujistěte se, že jste si přečetli aktuální dotazníku. A pokud vytváříte svůj vlastní dotazník, mám tři návrhy. Za prvé, navrhuji, abyste si přečíst více o dotazníku designu (např Bradburn, Sudman, and Wansink (2004) ); tam je víc, než jsem byl schopen se zde popisovat. Za druhé, navrhuji, abyste kopírování slovo slovních otázek z vysoce kvalitních průzkumů. I když to zní jako plagiátorství, kopírování otázky jsou vyzývány výzkumného šetření (jak dlouho, jak si citovat původního průzkumu). Pokud zkopírujete na otázky z vysoce kvalitních průzkumů, můžete si být jisti, že byly testovány a můžete porovnat odpovědi na svého průzkumu na odpovědi z nějakého jiného průzkumu. A konečně, navrhuji, abyste předem vyzkoušet své dotazy s některými lidmi ze svého rámu populace (Presser et al. 2004) ; moje zkušenost je, že pre-testování vždy odhalí překvapivé otázky.