D'Mesure ass iwwer de Begrëff, wat Är Interviewten denken a maachen aus wat se soten.
Zousätzlech zu Probleemer vun der Representatioun weist de totale Ëmfuerderungsféierkriibrium datt d'zweetgréisste Fehlerquell misst sinn : Wéi mir Affer vun den Äntwerten ausgëtt, déi d'Interviewten zu eisen Froen stellen. Et stellt sech eraus datt d'Äntwerten déi mer kréien, an dofir déi Opfaassungen déi mir maachen, kënnen kritesch abegraff - a manchmal iwwerraschend Weeër - genau wéi mir froen. Vläicht näischt illustréiert dësen wichtegen Punkt besser wéi e Witz an der wonneger Brochstéck Froen vum Norman Bradburn, Seymour Sudman, an Brian Wansink (2004) :
Zwee Paschtéier, een dominikanesche an enger Jesuitekierch, si diskutéieren, ob et e Sënn ass op der selwechter Zäit gefëmmt a biet. No nokënnt eng Konklusioun ze erreechen, geet all ugefaangen sengem respektiven ausféieren ze consultéieren. Déi Dominikanesch seet, "Wat Är ausféieren soen huet?"
Der Jesuitekierch reagéiert, "Hie sot et wier riwwer."
"Dat ass komesch" déi Dominikanesch seet, "My Opsiicht sot et eng Sënn ass."
Der Jesuitekierch gesot, "Wat hutt dir him froen?" Déi Dominikanesch seet, "ech gefrot him wann et riwwer war gefëmmt iwwerdeems gebiet." "Oh" gesot der Jesuitekierch, "ech gefrot ob et OK war iwwerdeems fëmmen ze bieden."
No dësem spezifesche Witz, hunn d'Fuerscher Forscher vill systematesch dokumentéiert dokumentéiert datt wat Dir léiert hänkt wéi Dir Froen hutt. Tatsächlech ass déi ganz Emgéigend bei der Wuerzelpaar vun dësem Witz een Numm an der Ëmfuerschungsforschung: (Kalton and Schuman 1982) effekter (Kalton and Schuman 1982) . Fir ze kucken, wéi Froen Form Effekter op echte Ëmfroen ausmaachen, fannt Dir dës zwee ganz ähnlech Aussoen Froen:
Obwuel zwou Froe wéi déi selwecht Saach méieren, hunn se an e realen Ëmfro experimentéiert (Schuman and Presser 1996) . Wéi een Wee gefroot huet, hunn ongeféier 60% vun den Awunner geschwat, datt Leit méi zum Verbriechen géife krute kënnen, awer wann et ëm déi aner Manéier gefuerdert huet, hunn ongeféier 60% gemellt datt sozial Konditiounen méi Schold sinn (Bild 3.3). An anere Wierder, de klengen Ënnerscheed tëschent deenen zwou Froen kéint Fuerscher an eng aner Schlussphase féieren.
Niewent der Struktur vun der Fro ass d'Ënnerspréch och ënnerschiddlech Äntwerten, abhängig vu de spezifesche Wierder. Zum Beispill, fir d'Meenungen iwwer Regierungsprioritéiten ze meeschteren, waren d'Interviewten déi folgend Aufgab:
"Mir si mat vill Problemer an dësem Land konfrontéiert, keent vun deenen einfach oder inexpensively geléist kënne ginn. Ech ginn elo e puer vun dëse Problemer ze Numm, a fir all ee wéilt ech wëll Iech weg soen, ob Dir mengt mir op se zevill Geld bass Ausgaben, ze wéineg Geld, oder iwwer d'Recht Quantitéit. "
Niewent der Hälfte vun den Interviewten hu sech iwwer "Wuelfillen" gefrot an d'Halschent hu gefrot iwwert "Hëllef fir den Aarmen". Obwuel si zwee ähnlech Sätze fir déi selwecht Sachen hunn, hunn se ganz verschidden Resultater erhëicht (3,4); D'Amerikaner wësse vill méi "Hëllef fir den Aarm" wéi "Wuelfillen" (Smith 1987; Rasinski 1989; Huber and Paris 2013) .
Wéi dës Beispiller iwwert Froen Effekter a Formuléierungseffekt weisen, sinn d'Äntwerten déi Forscher kritt kréien kënne beaflosst ginn duerch wéi se hir Froen stellen. Dës Beispiller ginn heiansdo Fuerscher iwwer den "korrekten" Wee gefrot, fir hir Ëmfroen Froen ze stellen. Während ech denken, et ginn e puer kloer falsch Weeër fir eng Fro ze stellen, ech denken net datt et ëmmer e puer eenzeg korrege Wee ass. Dat ass net evidenter besser, iwwer "Wuelfillen" oder "Hëllef fir d'Aarm" ze froen; Dës sinn zwee ënnerschiddlech Froen déi zwou verschidde Saachen iwwer d'Haltung vun der Interviewten méngt. Dës Beispiller ginn och heiansdo Fuerscher gefouert, datt d'Ëmfroen net benotzt ginn. Leider, heiansdo gëtt et keng Wiel. Statt, ech denken, datt déi richteg Lektioun aus dësen Beispiller ze zéien ass, datt mir eis Froen suergfälteg entwéckele kënnen an datt mir d'Äntwerten net kritesch akzeptéiere sollten.
Déi meescht konkret heescht dat, datt wann Dir Analyse vun Ëmfragendaten, déi vun engem aneren gesammelt ginn, analyséieren, gitt sécher datt Dir den aktuelle Questionnaire gelies hutt. A wann Dir Äert eegene Questionnaire schreift, hunn ech véier Suggestiounen. Als éischt, ech proposéieren Iech datt Dir méi iwwer Fraeformat liesen (zB Bradburn, Sudman, and Wansink (2004) ); et ass méi wéi dat wat ech hei beschreiwen konnten. Zweetens, ech recommandéieren, Dir kopéiert Wuert fir Wuert-Froen aus héichqualitativ Ëmfroen. Zum Beispill, wann Dir d'Ënnerbesprieche iwwert hir Rass / Ethnie ugeet, kënnt Dir d'Froe kopéieren, déi a Groussbritannien Ëmfroen benotzt ginn, wéi zum Beispill d'Zensus. Obwuel dat kéint wéi Plagiarismus sinn, a Fro ze kopéieren an Ëmfrohungsforschung (soulaang Dir déi ursprénglech Ëmfro) zitéiert. Wann Dir Froen aus héichqualitativen Ëmfroen kopéiert, kënnt Dir sécher sinn, datt si gepréift ginn an Dir kënnt d'Äntwerten op Är Ëmfro onziddelen fir u Responsen aus verschiddene Ëmfroen ze vergläichen. Drëttens, wann Dir mengen datt Äre Questionnaire wichteg Fraeffektiveeffekter oder Froenformeffekt enthalen, kënnt Dir en Ëmfro experimentéieren, wou d'Hallschent vun den Interviewten eng Versioun vun der Fro kritt kritt an d'Halschent d'aner Versioun (Krosnick 2011) . Endlech, ech proposéieren Iech datt Dir Är Froen mat verschiddenen Leit aus Ärer Ruffpopulatioun testen hutt; D'Fuerschung vun de Fuerscher nennt dësen Prozess Pre-Testen (Presser et al. 2004) . Meng Experienz ass datt d'Ëmfro fir Pre-Test gutt hilft.