3.3.2 측정

측정은 응답자가 응답자 생각하고 무엇을 말에서 추론을 만들기에 관한 것입니다.

전 조사 오류 프레임 워크의 두 번째 범주는 측정이며; 우리가 응답자는 우리의 질문에주는 답변에서 추론 할 수있는 방법을 다룬다. 그러므로 우리가받을 답변, 그리고 우리가 만드는 추론, 비판적-하고 때로는 놀라운 방법을-에 따라 달라질 수 있음을 우리에게 정확히 밝혀졌습니다. 아마 아무것도 노먼 Bradburn, 시모어 Sudman, 브라이언 Wansink하여 질문 요구 멋진 책의 농담보다 중요한 점 더 설명하지 (2004) :

두 사제하는 도미니카 공화국과 예수회, 연기와 같은 시간에기도하는 죄인지 여부를 논의하고있다. 결론에 도달 실패 후, 각각 자신의 각각의 우수한 상담을 꺼집니다. 도미 니칸은 "당신의 우수한 말을 했는가?"라고

예수회는 "그는 그것을 확실히했다."응답

"그건 재미있다"도미 니칸는 응답 "내 상사는 그것이 죄라고 말했다."

예수회는 "당신은 무엇을 물어나요?"도미니크가 응답, 말했다, "이기도하면서 연기에 확실히 있다면 나는 그에게 물었다." "아"예수회는 말했다, "이 흡연하면서기도 OK 있다면 내가 물었다."

두 사제가 경험 한 것과 같은 이상 현상의 많은 사례가있다. 질문 양식의 효과 : 사실,이 농담의 루트에있는 아주 문제는 조사 연구 커뮤니티에 이름이 (Kalton and Schuman 1982) . 질문 양식 효과, 실제 설문 조사에 영향을 미칠 두 매우 유사 찾고 설문 조사 질문을 고려하는 방법을 참조하십시오 :

• "얼마나 당신은 다음과 같은 성명에 동의 : 개인이 국가의 범죄와 불법에 대한 사회적 조건보다 비난이 더 있습니다."
• "당신은 다음 문을 얼마나 동의 : 사회 조건이이 나라에서 범죄와 불법에 대한 개인보다 책임이 더 있습니다."

두 질문은 같은 일을 측정하는 것처럼 보이지만, 그들은 실제 설문 조사 실험에서 다른 결과 생산 (Schuman and Presser 1996) . (그림 3.2) 한 가지 방법을 물었을 때, 응답자의 약 60 %는 개인이 범죄에 대한 비난 더 있다고보고 있지만, 다른 방법을 물었을 때 약 60 %는 사회적 조건이 비난이 더 있다고보고했다. 즉, 두 질문 사이의 작은 차이가 상이한 결론 연구자 이어질 수있다.

그림 3.2 : 설문 조사 실험의 결과 (Schuman and Presser 1996, Table 8.1) . 연구자들은이 질문을 정확하게하는 방법에 따라 다른 답을 얻을 수 있습니다. 이 질문 양식 효과의 예입니다 (Kalton and Schuman 1982) .

문제의 구성에 더하여, 응답자는 또한 사용되는 특정 단어에 기초하여 상이한 응답을 제공 할 수있다. 예를 들어, 정부의 우선 순위에 대한 의견을 측정하기 위해, 응답자는 다음과 같은 메시지를 판독 하였다 :

"우리는 쉽게 또는 저렴하게 해결 될 수 없음있는이 나라에서 많은 문제에 직면하고 있습니다. 나는이 문제를 몇 가지 이름을거야, 그리고 각각에 대해 나는 우리가 그것에 너무 적은 돈을 너무 많은 돈을 지출, 또는 적당한 양에 대해 있다고 생각 여부를 말해 싶습니다. "

". 가난한 지원"다음에, 응답자의 절반이 "복지"를 반 정도했다가에 대해 질문했다이 같은 일에 대한 두 개의 서로 다른 문구처럼 보일 수도 있지만, 그들은 (그림 3.3) 매우 다른 결과를 이끌어; 미국인들은 "복지"가 아닌 "가난한 원조"의 더 많은 지원되는보고한다 (Smith 1987; Rasinski 1989; Huber and Paris 2013) . 설문 조사 연구자들은 예외로 이러한 표현 효과를 고려하지만, 그들은 또한 그들에게 연구 결과를 고려할 수 있습니다. 즉, 우리는이 결과에서 여론에 대해 뭔가를 배웠습니다.

그림 3.3 :의 결과 Huber and Paris (2013) . 응답자들은 훨씬보다 "가난한 원조"더 많은지지있다 "복지."이것은 연구자들이받은 답변 그들의 질문에 사용할 정확히 어떤 단어에 의존함으로써 질문의 표현 효과의 예입니다.

질문 양식 효과와 표현 효과에 대한 이러한 예는 표시로, 연구자가받는 응답은 그들의 질문을하는 방법에 따라 미묘한 방식으로 영향을받을 수있다. 이것은 조사가 사용되지 않아야 함을 의미하지는 않는다; 종종 선택의 여지가 없다. 오히려, 예를 들면 우리가 신중하게 우리의 질문을 구성해야하며, 우리가 무 비판적으로 응답을 받아 들일 것을 보여줍니다.

가장 구체적으로, 이것은 당신이 다른 사람에 의해 수집 된 조사 자료를 분석하는 경우 당신이 실제 질문을 읽고 있는지, 확인을 의미합니다. 당신이 당신의 자신의 설문지를 작성하는 경우에, 나는 세 가지 제안이 있습니다. 첫째, 난 당신이 설문지 설계에 대한 자세한 내용을 제안한다 (예를 들어, Bradburn, Sudman, and Wansink (2004) ); 내가 여기에 설명 할 수 있었던 것보다 더있다. 둘째, 당신이 복사 말을하는 것이 높은 품질의 설문 조사에서 단어 질문 좋습니다. 이 표절처럼 들리지만, 복사 질문 (한 원래 설문 조사를 인용 등) 조사 연구를 권장합니다. 당신은 높은 품질의 설문 조사에서 질문을 복사하는 경우, 당신은 그들이 시험되었음을 확신 할 수 있습니다 당신은 다른 설문 조사에서 응답으로 설문 조사에 대한 응답을 비교할 수 있습니다. 마지막으로, 나는 당신이 당신의 프레임 인구에서 일부 사람들이 질문을 미리 테스트 제안 (Presser et al. 2004) ; 내 경험 사전 테스트는 항상 놀라운 문제를 알 수 있다는 것입니다.