نظر سنجی ها آزاد نیست، و این یک محدودیت واقعی است.
تا کنون، من به طور خلاصه چارچوب خطای بررسی کل را بررسی کردم، که خود موضوع مسائل طول کتاب است (Weisberg 2005; Groves et al. 2009) . اگر چه این چارچوب جامع است، اما به طور کلی باعث می شود محققان عامل مهمی را نادیده بگیرند: هزینه. با وجودی که هزینه که می تواند با هر زمان یا پول اندازه گیری شود، به ندرت به صراحت توسط محققان دانشگاهی بحث می شود، این یک محدودیت واقعی است که نباید نادیده گرفته شود. در واقع، هزینه کل فرآیند تحقیق تحقیقاتی (Groves 2004) : دلیل این است که محققان با نمونه ای از مردم مصاحبه می کنند تا یک کل جمعیت. تقدیر منحصر به فرد برای به حداقل رساندن خطا در حالی که به طور کامل نادیده گرفتن هزینه است همیشه به نفع ما نیست.
محدودیت های وسواس در کاهش خطا با طرح برجسته اسکات کاتر و همکاران (2000) در مورد اثرات عملیات میدان گران قیمت بر کاهش عدم پاسخ در نظرسنجی های تلفن همراه نشان داده شده است. کیتر و همکاران دو مطالعه همزمان انجام دادند، یکی با استفاده از روش های "استاندارد" استخدام و یکی با استفاده از روش های "دقیق" استخدام. تفاوت بین دو مطالعه، میزان تلاش بود که با مخاطبین تماس گرفت و آنها را تشویق کرد تا شرکت کنند. به عنوان مثال، در مطالعه با استخدام دقیق، محققان خانواده های نمونه را بیشتر و بیش از یک دوره طولانی تر نامگذاری کردند و اگر شرکت کنندگان در ابتدا حاضر به شرکت در آن شرکت نکردند، تماس تلفنی اضافی دریافت کردند. این تلاش های اضافی در واقع باعث کاهش نرخ پاسخ غیرمستقیم شد، اما هزینه آنها به میزان قابل توجهی افزوده شد. مطالعه با استفاده از روشهای "دقیق" دو برابر گران بود و هشت بار کندتر بود. و در نهایت، هر دو مطالعات، برآوردهای اساسا یکسان را تولید کردند. این پروژه و نیز تکرارهای بعدی با یافته های مشابه (Keeter et al. 2006) باید شما را به تعجب (Keeter et al. 2006) : آیا ما با دو نظرسنجی معقول و یا یک نظرسنجی بی نظیر بهتر هستیم؟ در مورد 10 نظرسنجی منطقی یا یک نظرسنجی بی نظیر چه؟ چه حدود 100 نظرسنجی منطقی یا یک نظرسنجی بی نظیر؟ در برخی موارد، مزایای هزینه باید بیش از حد مبهم، ناسازگاری در مورد کیفیت باشد.
همانطور که در این بقیه فصل نشان خواهم داد، بسیاری از فرصت های ایجاد شده توسط عصر دیجیتال در مورد تخمین ها نیست که بدیهی است که خطا کمتری دارند. در عوض، این فرصت ها در مورد تخمینی مقادیر مختلف و در مورد ساخت تخمین ها سریع تر و ارزان تر است، حتی با احتمالا خطاهای بیشتر. محققانی که بر روی یک وسواس تک محوری تمرکز می کنند با کاهش خطا در هزینه های دیگر ابعاد کیفیت، فرصت های هیجان انگیز را از دست می دهند. با در نظر گرفتن این پس زمینه در مورد چارچوب خطای کل بررسی، ما در حال حاضر به سه حوزه اصلی دور سوم تحقیق تحقیق می پردازیم: رویکردهای جدید برای نمایندگی (بخش 3.4)، رویکردهای جدید برای اندازه گیری (بخش 3.5) و استراتژی های جدید برای ترکیب بررسی ها با منابع داده بزرگ (بخش 3.6).