Ushbu bo'limda hikoyasiga sifatida o'qish uchun emas, balki, bir yo'naltiruvchi sifatida foydalanish uchun mo'ljallangan.
Bu bobda mavzular ko'pchiligi ham kabi jamoatchilik fikrini tadqiqotlari Amerika uyushmasi (AAPOR) da so'nggi prezidentlik manzillar, aks ettirilgan Dillman (2002) , Newport (2011) , Santos (2014) , va Link (2015) .
Tadqiqot tadqiqot rivojlantirish haqida ko'proq tarixiy fon uchun, qarang Smith (1976) va Converse (1987) . Tadqiqot tadqiqot uch davrlarga g'oyasi haqida ko'proq uchun qarang: Groves (2011) va Dillman, Smyth, and Christian (2008) (bir oz boshqacha uch eralarini tashkil buzadi).
Tadqiqot tadqiqotlar ikkinchi davrida birinchi o'tish ichida bir cho'qqisi hisoblanadi Groves and Kahn (1979) o'rtasida batafsil bosh-to-boshi taqqoslash qilsa, bir yuzma-yuz va telefon so'rov. Brick and Tucker (2007) tasodifiy raqamli terish namuna olish usullari tarixiy rivojlantirishga orqaga qaraydi.
How tadqiqot ko'proq jamiyatdagi o'zgarishlarga javoban o'tmishda o'zgardi, qarang Tourangeau (2004) , Mitofsky (1989) , va Couper (2011) .
ba'zan respondentlar o'zlari ichki davlatlar xabardor emas, chunki savollar ichki davlatlar haqida o'rganish muammoli bo'lishi mumkin. Misol uchun, Nisbett and Wilson (1977) mualliflari xulosa maqolada: "mavzular ba'zan (a) g'ofil:« aqliy jarayonlarga og'zaki hisobotlarni, biz bilamiz mumkin ko'proq aytish: ". O'xshash nomi bilan ajoyib qog'oz bor muhimi javob ta'sir bir rag'bat mavjudligi, (b) javob mavjudligiga va (v) rag'bat javob ta'sir qildi, deb g'ofil bexabar. "
Tadqiqotchilar xabar xatti yoki munosabat bilan kuzatilgan xatti afzal kerak dalillarni olish uchun qarang: Baumeister, Vohs, and Funder (2007) (psixologiya) va Jerolmack and Khan (2014) va javoblar (Maynard 2014; Cerulo 2014; Vaisey 2014; Jerolmack and Khan 2014) (sotsiologiya). so'rab, shuningdek rioya o'rtasidagi farq tadqiqotchilar qayd va nozil preferensiyalar haqida gapirish iqtisod, ham paydo bo'ladi. Misol uchun, bir tadqiqotchi, ular (aytib afzalliklarini) muzqaymoq eb yoki sport zalida ketadi afzal bo'lsin respondentlarni so'rashi mumkin yoki ilmiy-tadqiqot, odamlar muzqaymoq eb qanchalik tez-tez kuzatish va sport (nozil preferensiyalar) borib mumkin. Iqtisodiyot belgilangan imtiyozlar ma'lumotlar ayrim turlarini chuqur Skeptitsizm bor (Hausman 2012) .
Bu bahslar bir asosiy mavzusi ma'lum xulq har doim aniq emas. Lekin, avtomatik ravishda qayd xulq, aniq bo'lmasligi mumkin qiziqtirgan bir namuna ustida to'plangan bo'lishi mumkin emas, va tadqiqotchilar uchun yaxshi bo'lmasligi mumkin. Shunday qilib, bir necha vaziyatlarda, men ma'lum xulq foydali bo'lishi mumkin, deb o'ylayman. Bundan tashqari, bu bahslar ikkinchi asosiy mavzusi tuyg'ular, bilim, taxminlar va fikrlarning haqida hisobotlar har doim aniq emas. Lekin bu ichki davlatlar haqida ma'lumot zarur bo'lsa, tadqiqotchilar-yo ayrim xatti tushuntirib yordam berish uchun yoki narsa tushuntirdi-keyin bo'lishi sifatida tegishli bo'lishi mumkin so'rab.
Umumiy tadqiqot xato kitob uzunligi muolajalar olish uchun qarang: Groves et al. (2009) , yoki Weisberg (2005) . Umumiy tadqiqot xato rivojlantirish tarixi uchun, qarang Groves and Lyberg (2010) .
A tadqiqot Kun tartibi: vakillik jihatidan, non-javob va nooziq-javob tarafkashlik masalalariga katta joriy Ijtimoiy Fanlar So'rov Nonresponse bo'yicha milliy tadqiqot kengashi hisobot (2013) . Yana bir foydali Bosh nuqtai tomonidan taqdim etiladi (Groves 2006) . Bundan tashqari, rasmiy statistika Journal, jamoatchilik fikrini choragidagi va siyosiy va ijtimoiy fan Amerika akademiyasi tarixi butun maxsus masalalar nodavlat javob mavzusida chop etildi. Nihoyat, javob darajasi hisoblash aslida juda ko'p turli xil yo'llari bor; Bu yondashuvlar jamoatchilik fikrini Tadqiqotchilar Amerika uyushmasi (AAPOR) tomonidan bir hisobotda batafsil tasvirlanadi (Public Opinion Researchers} 2015) .
1936 Adabiy Digest poll batafsil o'rganib qilindi (Bryson 1976; Squire 1988; Cahalan 1989; Lusinchi 2012) . Bundan tashqari, voqea ma'lumotlar to'plash qarshi ogohlantirish uchun bir masal sifatida ishlatilgan (Gayo-Avello 2011) . 1936-yilda, Jorj Gallup namunalarini yanada murakkab formasini foydalanish va juda ham kichik namunasi bilan aniqroq smetasini ishlab chiqarish imkoniyatiga ega bo'ldi. Adabiy Digest ustidan Gallup muvaffaqiyati bir davrdir tadqiqot tadqiqot rivojlantirish edi (Converse 1987, Ch 3; Ohmer 2006, Ch 4; Igo 2008, Ch 3) .
O'lchov jihatidan, loyihalashtirish anketa uchun katta birinchi resurs hisoblanadi Bradburn, Sudman, and Wansink (2004) . Munosabat masalalar bo'yicha, xususan, band yanada ilg'or davolash uchun, qarang Schuman and Presser (1996) . Pre-sinov masalalar bo'yicha batafsil mavjud Presser and Blair (1994) , Presser et al. (2004) , va 8-bob Groves et al. (2009) .
Tadqiqot xarajatlarini va tadqiqot xatolar o'rtasidagi savdo-off mumtoz, kitob-uzunligi davolash Groves (2004) .
Standart ehtimoli namuna olish va baholash Classic kitob metrajli davolash bo'lgan Lohr (2009) (yana kirish) va Särndal, Swensson, and Wretman (2003) (ko'proq rivojlangan). Post-tabaqalanishi va tegishli usullar A klassik kitob metrajli davolash Särndal and Lundström (2005) . Ba'zi raqamli yoshi sozlash, tadqiqotchilar o'tmishda ko'pincha haqiqiy emas edi non-respondentlarning haqida bir oz bilaman. Tadqiqotchilar non-respondentlarning haqida ma'lumot bo'lsa non-javob tuzatish turli shakllari mumkin (Kalton and Flores-Cervantes 2003; Smith 2011) .
Xbox o'rganish Wang et al. (2015) tadqiqotchilar hujayra ko'p, juda ko'p hujayralar mavjud bo'lsa ham anglatadi taxmin qilish imkonini beradi (ba'zan "Mister P" deb nomlangan MRP,) ko'p tushish va post-tabaqalanishi ismli bir ibora ishlatadi. Bu usulning dan hisob-kitoblarga sifati haqida ba'zi munozaralar bor bo'lsa-da, u bilan kashf qilish uchun bir istiqbolli maydon kabi ko'rinadi. Texnikasi birinchi ishlatilgan Park, Gelman, and Bafumi (2004) , va keyingi foydalanish va munozaralar bor edi (Gelman 2007; Lax and Phillips 2009; Pacheco 2011; Buttice and Highton 2013; Toshkov 2015) . Individual og'irliklari va hujayra asoslangan og'irliklari o'rtasidagi munosabat haqida qo'shimcha ma'lumot olish uchun qarang: Gelman (2007) .
Tarozida veb anketalar boshqa yondashuvlarga uchun, qarang Schonlau et al. (2009) , Valliant and Dever (2011) , va Bethlehem (2010) .
Sample taalukli tomonidan taklif etilgan Rivers (2007) . Bethlehem (2015) namunasi taalukli ishlash aslida boshqa bir masal yondashuvlarga (masalan, qatlamli namuna olish) va boshqa sozlamalar yondashuvlarga (masalan, post-tabaqalanishi) o'xshash bo'ladi, deb bahs yuritadi. Onlayn panellari haqida qo'shimcha ma'lumot olish uchun, qarang Callegaro et al. (2014) .
Ba'zan tadqiqotchilar ehtimoli namunalari va nooziq-ehtimollik namunalari o'xshash sifatli smetasini hosil, deb topdik (Ansolabehere and Schaffner 2014) , lekin boshqa taqqoslashlar non-ehtimoli namunalari yomon nima, deb topdik (Malhotra and Krosnick 2007; Yeager et al. 2011) . Ushbu xilma-bir imkon sababi non-ehtimoli namunalari vaqt davomida yaxshilandi, deb. Non-ehtimollik namuna olish usullari yanada pessimistik ko'rinishi uchun Non-ehtimoli Namuna tanlab olish kuni AAPOR Vazifa kuchi ko'rish (Baker et al. 2013) , va men ham xulosa hisobotini quyidagi izoh o'qib tavsiya.
Non-ehtimollik namunalarida noto'g'ri kamaytirish og'irlik ta'siri bo'yicha huzur-tahlil qilish uchun, ham jadval 2.4 ga qarang Tourangeau, Conrad, and Couper (2013) o'zgarishlar foydali lekin xato qilgan tuzatishlar tuyuladi "tuzish mualliflar keladi, qaysi. . . "
Conrad and Schober (2008) Kelajak Survey intervyu nazarda tutgan nomli tahrir hajmini beradi, va u ushbu bo'limdagi mavzular ko'p murojaat. Couper (2011) shunga o'xshash mavzularni murojaat va Schober et al. (2015) , yangi sozlamalar uchun barpo etilgan ma'lumotlar yig'ish usullari oliy sifatli ma'lumotlar olib kelishi mumkin qanday yaxshi misol bo'la oladi.
Ijtimoiy fan anketalar uchun Facebook ilova yordamida yana bir qiziqarli misol uchun, qarang Bail (2015) .
Mijoz ishtirokchilari uchun bir qiziqarli va qimmatli tajriba qilish haqida qo'shimcha maslahat uchun, maxsus dizayn usuli bo'yicha ishlarni ko'rib (Dillman, Smyth, and Christian 2014) .
Stone et al. (2007) ekologik lahzali baholash va tegishli usullar kitob uzunligi davolash taklif etadi.
Judson (2007) Tadqiqot va ma'muriy ma'lumotlarni birlashtirish jarayon "Axborot integratsiya," bu yondashuv ba'zi afzalliklari muhokama va ayrim misollarni taqdim etadi.
tadqiqotchilar raqamli izlari va ma'muriy ma'lumotlarni foydalanishingiz mumkin yana bir usuli xos xususiyatlari bilan odamlar uchun namuna olish ramka hisoblanadi. Shu bilan birga, bu yozuvlar ham shaxsiy hayoti bilan bog'liq savollar yaratishingiz mumkin masal ramka foydalanish uchun kirish (Beskow, Sandler, and Weinberger 2006) .
Men uni tasvirlab ayting qanday paydo bo'lishi mumkin, deb amplifike so'raydi kelsak, bu yondashuv sifatida yangi emas. Bu yondashuv statistika-model asosida post-tabaqalanishi uch katta joylarda chuqur yo'nalishlarga ega (Little 1993) , Tuhmat (Rubin 2004) , va kichik maydoni baholash (Rao and Molina 2015) . Bu, shuningdek, tibbiy tadqiqotlar o'rinbosar o'zgaruvchilar foydalanish bilan bog'liq (Pepe 1992) .
Raqamli izi ma'lumotlar kirishini bog'liq axloqiy masalalar bilan bir qatorda, amplifike kerakli shuningdek, odamlar bir so'rovda oshkor tanlashingiz bo'lmasligi mumkin nozik xususiyatlarini chiqarsa foydalanish mumkin (Kosinski, Stillwell, and Graepel 2013) .
Yilda iqtisodiy va qachon bashorat Blumenstock, Cadamuro, and On (2015) kabi tozalash va qo'ng'iroq ma'lumotlarni qayta ishlash uchun xarajat sifatida bir qo'shimcha tadqiqot va o'z ichiga olmaydi sobit xarajatlarning o'zgaruvchan iqtisodiy xarajat ko'proq murojaat qiling. Umuman olganda, amplifike kerakli ehtimol yuqori belgilangan xarajatlarni va raqamli tajribalar (4-dars qarang) o'xshash past o'zgaruvchan xarajatlarini ega bo'ladi. Batafsil ishlatiladigan ma'lumotlarga details Blumenstock, Cadamuro, and On (2015) qog'oz bor Blumenstock and Eagle (2010) va Blumenstock and Eagle (2012) . Bir necha imputuation dan yondashuvlar (Rubin 2004) amplifike so'raydi smeta ta'qib noaniqlik yordam berishi mumkin. Tadqiqotchilar jami soni, o'rniga individual darajadagi xususiyatlar haqida g'amxo'rlik faqat so'rab amplifike amalni qilishni bo'lsa, keyin yondashuvlar King and Lu (2008) va Hopkins and King (2010) foydali bo'lishi mumkin. Mashinasozlik ta'lim yondashuvlar haqida qo'shimcha ma'lumot olish uchun Blumenstock, Cadamuro, and On (2015) , qarang James et al. (2013) (yana kirish) yoki Hastie, Tibshirani, and Friedman (2009) (ko'proq rivojlangan). Yana bir mashhur mashina ta'lim darslik bo'lib Murphy (2012) .
Boyitilgan so'rash bilan bog'liq, Ansolabehere va Hersh olib keladi (2012) , ikki asosiy qadamlar haqida moshig'ida: 1) tadqiqot ma'lumotlarini to'g'ri master faylidan ishlab chiqarish uchun ko'p turli ma'lumotlarni manbalarini birlashtirish va 2) Catalist qobiliyati bog'lash Catalist qobiliyati uning master faylidan. Shuning uchun, Ansolabehere va Hersh diqqat bu qadamning har bir tekshirib ko'ring.
master faylidan yaratish uchun, Catalist birlashtiradi va, shu jumladan, bir qancha turli xil manbalardan ma'lumot uyg'unlashib: Boshqa noma'lum tijorat operatorlar bir necha saylov yozuvlar har bir davlatdan oniy, Manzil Ro'yxatdan o'tish Ro'yxatdan ofisining Milliy o'zgarishi ma'lumotlariga va ma'lumotlar. Barcha bu poklik va birlashma sodir haqida gory details bu kitobda doirasiga sig'maydi, ammo qanchalik ehtiyot bu jarayon, original ma'lumotlar manbalarda xatolar targ'ib qiladi va xatolar tanishtiradi. Catalist uning axborotga ishlov berish muhokama va uning xom ma'lumotlar ba'zi ta'minlash uchun tayyor bo'lsa-da tadqiqotchilar butun Catalist ma'lumotlar quvuri ko'rib uchun, bu aslo mumkin emas edi. Aksincha, tadqiqotchilar Catalist ma'lumotlar fayli xato noma'lum, va, ehtimol, unknowable, miqdorini bor edi, bir vaziyatda edi. tanqidchi emas respondentlar tomonidan bayonnomasida tomonidan, CCES ustida tadqiqot hisobotlar va Catalist master ma'lumotlar fayli xatti o'rtasida katta farqlar master ma'lumotlar faylida xatolar sabab bo'ldi, deb taxmin mumkin, chunki, bu jiddiy tashvish.
Ansolabehere va Hersh ma'lumotlar sifati tashvish hal qilish ikki xil turli yondashuvdan. Birinchidan, Catalist master faylida ovoz uchun o'z-o'zini xabar ovoz bilan taqqoslab tashqari, tadqiqotchilar, shuningdek, nisbatan o'z-o'zini xabar partiya, poyga, saylovchilarni ro'yxatga olish holati (masalan, ro'yxatga yoki yo'q ro'yxatga olingan) va ovoz berish usuli (masalan, shaxsan, butparastlarning Catalist bazalari topiladigan qadriyatlarga saylov, va hokazo). Bu to'rt demografik o'zgaruvchilar uchun, tadqiqotchilar ovoz berish uchun qaraganda Catalist master faylida tadqiqot hisoboti va ma'lumotlar o'rtasida shartnoma ancha yuqori darajasini topildi. Shunday qilib, Catalist master ma'lumotlar fayli u kambag'al umumiy sifati emas, deb shama, ovoz berish, boshqa belgilar bo'yicha yuqori sifatli ma'lumotga ega ko'rinadi. Ikkinchidan, Catalist ma'lumotlarni yordamida qismi, bir ajrim Ansolabehere va Hersh County ovoz berish yozuvlar sifatini uch turli chora-tadbirlar ishlab chiqildi va ular ovoz berish orqali-hisobot taxmin darajasi bu ma'lumotlar sifati chora-tadbirlar har qanday uchun aslida befarq ekan deb ustidan-hisobot yuqori sur'atlari ayniqsa past ma'lumotlar sifati bilan mamlakat tomonidan surilgan emas, degan fikrdamiz.
Bu master ovoz berish fayl yaratish hisobga olib, bo'lajak xatolar ikkinchi manba unga tadqiqot yozuvlarni bog'lovchi etiladi. Bu bog'liqlik noto'g'ri amalga oshiriladi Misol uchun, bu xabar va tasdiqlangan ovoz berish xatti orasidagi farq bir ustidan-smeta olib kelishi mumkin (Neter, Maynes, and Ramanathan 1965) . har bir kishi, har ikki ma'lumot manbalari bo'lgan barqaror, yagona identifikatorni bo'lsa edi, u holda havola arzimas bo'ladi. AQSh va eng boshqa mamlakatlarda, shu bilan birga, hech qanday universal identifikatori mavjud emas. Bundan tashqari, bunday bo'lsa ham, bir identifikator odamlar, ehtimol tadqiqotchilari so'roviga uni ta'minlash uchun ikkilanib bo'lardi! nomi, jinsi, tug'ilgan yili va uy manzili: Shunday qilib, Catalist bu holda, har bir javobgarning haqida ma'lumotlarning to'rt dona nomukammal identifikatorlari foydalanib oqimlarga qilish edi. Misol uchun, Catalist CCES yilda Homie J Simpson, ularning master ma'lumotlar fayli Gomer Jey Simpson kabi bir xil odam edi, agar qaror qabul qilish edi. Amalda, taalukli tadqiqotchilar uchun ham yomoni, bir qiyin va iflos jarayon, va, Catalist mulkiy bo'lishi uning taalukli uslublarini ko'rib chiqildi.
taalukli algoritmlar tasdiqlash maqsadida, ular ikki qiyinchiliklar tayanib. MITRE korporatsiyasi: Birinchidan, Catalist mustaqil, uchinchi shaxs tomonidan bajarilgan taalukli tanlovda ishtirok etdi. MITRE barcha ishtirokchilar ikki shovqinli ma'lumotlar fayllari taqdim mos bo'lishi, va turli jamoalar Mitre uchun eng yaxshi taalukli qaytishga kuch sinashdi. MITRE o'zi to'g'ri taalukli bilardi, chunki ular jamoa gol ega edi. sinashdi 40 kompaniyalar, Catalist ikkinchi joyga keldi. mulkiy texnologiya mustaqil, uchinchi tomon baholash bunday juda nodir va ajoyib qimmatli hisoblanadi; Bu Catalist ning taalukli tartib davlat zamonaviy da, aslida, deb bizga ishonch berishi kerak. Lekin davlat-zamonaviy yetarlicha yaxshi emas? Bu taalukli raqobat tashqari, Ansolabehere va Hersh Catalist uchun o'z taalukli muammo yaratdi. oldingi loyiha, Ansolabehere va Hersh Florida dan saylovchi yozuvlarni to'plangan edi. Ular sohalarida Catalist uchun redacted va keyin ularning haqiqiy qiymatiga bu sohalarning Catalist ning hisobotlarni nisbatan ba'zi bilan bu yozuvlar ba'zi taqdim. Yaxshiyamki, Catalist hisobotlari Catalist ularning master ma'lumotlar fayli ustiga qisman saylovchi yozuvlarni mos mumkin, deb ko'rsatib, baxillik qadriyatlar yaqin edi. Bu ikki muammolar, Ansolabehere va Hersh tomonidan uchinchi shaxs tomonidan bir va bir, biz ularning aniq amalga oshirish o'zimizni ko'rib mumkin emas-da, bizga Catalist taalukli algoritmlarini ko'proq ishonch berish.
ovoz berish tekshirish uchun ko'p oldingi urinishlar bor edi. Bu adabiyot umumiy nuqtai uchun, qarang Belli et al. (1999) , Berent, Krosnick, and Lupia (2011) , Ansolabehere and Hersh (2012) , va Hanmer, Banks, and White (2014) .
Bu holatda tadqiqotchilar Catalist ma'lumotlarni sifati bilan da'vat qilingan bo'lsa-da, tijorat sotuvchilari, boshqa baholash kamroq faol bo'lgan, deb qayd etish muhim ahamiyatga ega. Tadqiqotchilar kambag'al sifati topdik qachon (o'zi uch operatorlar birgalikda ma'lumotlarni birlashtirilib: Acxiom, Experian va İnfoUSA) Marketing tizimlari guruhi bir iste'mol-faylga so'rov ma'lumotlar (Pasek et al. 2014) . Bu tadqiqotchilar to'g'ri bo'lishi kutilmoqda tadqiqot javob kelmadi ma'lumotlar fayli, faylidan savollarga bir qator va etishmayotgan ma'lumotlar naqsh bo'yicha ma'lumotlar yo'q etishmayotgan ma'lumotlar muntazam edi, boshqacha aytganda (xabar tadqiqot qiymatiga bog'liq edi edi, deb ), tasodifiy emas.
Anketalar va ma'muriy ma'lumotlar o'rtasida rekord aloqa haqida qo'shimcha ma'lumot olish uchun, qarang Sakshaug and Kreuter (2012) va Schnell (2013) . Umuman rekord aloqa haqida qo'shimcha ma'lumot olish uchun, qarang Dunn (1946) va Fellegi and Sunter (1969) (tarixiy) va Larsen and Winkler (2014) (zamonaviy). O'xshash yondashuvlar ham bunday ma'lumotlar tekilleştirme, masalan, aniqlash, nomi bilan taalukli, ikki nusxadagi aniqlash kabi nomlar ostida kompyuter ilm-fan rivojlandi, va rekord aniqlash nusxa etildi (Elmagarmid, Ipeirotis, and Verykios 2007) . Shaxsan ma'lumot aniqlash uzatish talab qilmaydigan oqimlarga yozib olish yondashuvlarni asrab-avaylash maxfiylik ham bor (Schnell 2013) . Facebook da Tadqiqotchilar probabilisticsly ovoz berish xatti o'z yozuvlarni bog'langan bir tartib ishlab chiqilgan (Jones et al. 2013) ; Bu bog'liqlik, men bob 4 haqida gapirib beraman tajriba baholash uchun amalga oshirildi (Bond et al. 2012) .
hukumat ma'muriy yozuvlar uchun keng ko'lamli ijtimoiy so'rovnoma bog'lovchi Yana bir misol Sog'liqni saqlash va pensiya tadqiqotida va aholini ijtimoiy muhofaza qilish boshqarmasi keladi. Bu ishda ham, ruxsat tartibi haqida axborot, shu jumladan, ko'rish Olson (1996) va Olson (1999) .
Catalist ba'zi milliy hukumatlar statistika idoralarida umumiy xodimlari-bir master faylidan-jarayoniga ma'muriy qaydlar ko'plab manbalarini birlashtirib jarayoni. Statistika Shvetsiya ikki tadqiqotchilar mavzusida batafsil kitob yozdim (Wallgren and Wallgren 2007) . (Olmstead County, Minnesota; Mayo klinikasi uy) Amerika Qo'shma Shtatlarida bir okrugidagi bunday yondashuvga misol uchun, qarang Sauver et al. (2011) . Ma'muriy qaydlar paydo mumkin xatolar haqida ko'proq uchun qarang: Groen (2012) .