แบบสำรวจไม่ได้ฟรีและนี่คือข้อ จำกัด ที่แท้จริง
จนถึงตอนนี้ฉันได้ตรวจสอบกรอบข้อผิดพลาดในการสำรวจทั้งหมดสั้น ๆ ซึ่งเป็นเรื่องของการบำบัดด้วยหนังสือ (Weisberg 2005; Groves et al. 2009) แม้ว่ากรอบนี้จะครอบคลุม แต่ก็มักทำให้นักวิจัยมองข้ามปัจจัยที่สำคัญ: ค่าใช้จ่าย แม้ว่าค่าใช้จ่ายซึ่งสามารถวัดได้โดยใช้เวลาหรือเงินไม่ค่อยพูดถึงนักวิชาการนักวิจัยอย่างชัดเจน แต่ก็เป็นข้อ จำกัด ที่แท้จริงที่ไม่ควรละเลย ค่าใช้จ่ายเป็นพื้นฐานสำหรับกระบวนการวิจัยทั้งหมด (Groves 2004) : เป็นเหตุผลที่นักวิจัยสัมภาษณ์ตัวอย่างของคนมากกว่าประชากรทั้งหมด การอุทิศตนเพื่อลดข้อผิดพลาดในขณะที่ละเลยค่าใช้จ่ายไม่ได้อยู่ในความสนใจที่ดีที่สุดเสมอไป
ข้อ จำกัด ของความหลงใหลในการลดข้อผิดพลาดแสดงให้เห็นได้จากโครงการสำคัญของ Scott Keeter และเพื่อนร่วมงาน (2000) เกี่ยวกับผลกระทบของการดำเนินงานสนามที่มีราคาแพงในการลดการไม่ตอบสนองในการสำรวจทางโทรศัพท์ Keeter และเพื่อนร่วมงานทำงานสองการศึกษาพร้อมกันโดยใช้กระบวนการสรรหา "มาตรฐาน" และขั้นตอนการสรรหาบุคลากร "เข้มงวด" ความแตกต่างระหว่างการศึกษาทั้งสองคือจำนวนความพยายามที่เข้าสู่ผู้ที่ตอบแบบสอบถามและกระตุ้นให้พวกเขาเข้าร่วม ตัวอย่างเช่นในการศึกษาที่มีการสรรหา "อย่างเข้มงวด" นักวิจัยเรียกว่าครัวเรือนที่ทำการทดลองบ่อยครั้งขึ้นไปในระยะเวลานานและได้รับการตอบกลับเป็นพิเศษหากผู้เข้าร่วมกิจกรรมแรกปฏิเสธที่จะเข้าร่วม ความพยายามที่เพิ่มขึ้นเหล่านี้ได้ก่อให้เกิดอัตราที่ต่ำกว่าของ nonresponse แต่พวกเขาเพิ่มค่าใช้จ่ายอย่างมาก การศึกษาโดยใช้ขั้นตอน "เข้มงวด" มีราคาแพงกว่าสองเท่าและแปดครั้งช้ากว่า และในท้ายที่สุดการศึกษาทั้งสองทำตัวเลขเดียวกัน โครงการนี้เช่นเดียวกับการทำซ้ำตามมาด้วยผลการวิจัยที่คล้ายคลึงกัน (Keeter et al. 2006) ควรทำให้คุณสงสัยว่าเราดีกว่าด้วยการสำรวจที่มีเหตุผลสองอันหรือแบบสำรวจที่เก่าแก่หรือไม่? สิ่งที่เกี่ยวกับ 10 สำรวจที่เหมาะสมหรือการสำรวจเก่าแก่? สิ่งที่เกี่ยวกับการสำรวจที่เหมาะสม 100 หรือการสำรวจที่เก่าแก่? ในบางจุดข้อได้เปรียบด้านค่าใช้จ่ายต้องมีค่าเกินขีด จำกัด ความกังวลที่ไม่เกี่ยวกับคุณภาพ
ดังที่ฉันจะแสดงในส่วนที่เหลือของบทนี้หลายโอกาสที่สร้างขึ้นโดยยุคดิจิทัลไม่ได้เกี่ยวกับการประมาณการณ์ที่เห็นได้ชัดว่ามีข้อผิดพลาดที่ต่ำกว่า แต่โอกาสเหล่านี้เป็นเรื่องเกี่ยวกับการประมาณปริมาณที่แตกต่างกันและเกี่ยวกับการประมาณการณ์ได้เร็วขึ้นและราคาถูกแม้จะมีข้อผิดพลาดที่สูงกว่า นักวิจัยที่ยืนหยัดในความหลงใหลในเรื่องเดียวที่มีข้อผิดพลาดในการลดข้อผิดพลาดในเรื่องค่าใช้จ่ายอื่น ๆ ที่มีคุณภาพจะไม่ได้รับโอกาสที่น่าสนใจ เมื่อพิจารณาถึงกรอบข้อผิดพลาดในการสำรวจทั้งหมดแล้วเราจะหันไปใช้ 3 ส่วนหลัก ๆ ของยุคที่สามของการวิจัยเชิงสำรวจ: แนวทางใหม่ในการเป็นตัวแทน (หัวข้อ 3.4) แนวทางใหม่ในการวัดผล (หัวข้อ 3.5) และกลยุทธ์ใหม่ในการรวมการสำรวจ มีแหล่งข้อมูลขนาดใหญ่ (ส่วน 3.6)