Одан әрі түсініктеме

Бұл бөлім баяндау ретінде оқылуы тиіс емес, сілтеме ретінде пайдаланылуы үшін арналған.

• Кіріспе (бөлім 3.1)

Осы тарауда тақырыптар көптеген, сондай-ақ сияқты қоғамдық пікірді зерттеу Американдық қауымдастығының (AAPOR) соңғы президенттік мекенжайлары, жаңғырып болатын Dillman (2002) , Newport (2011) , Santos (2014) , сондай-ақ Link (2015) .

Сауалнама зерттеулерді дамыту туралы көбірек тарихи фон үшін, қараңыз Smith (1976) және Converse (1987) . Зерттеу үш дәуірдің идеясына туралы қосымша алу үшін, қараңыз Groves (2011) және Dillman, Smyth, and Christian (2008) (аздап басқаша үш дәуір дейін бұзады).

Зерттеу екінші дәуірі бірінші көшу ішіндегі шыңы болып табылады Groves and Kahn (1979) бет-бет және телефон сауалнама арасында егжей-тегжейлі бас-басы салыстыру жасайды. Brick and Tucker (2007) кездейсоқ таңбалы нөмірді теру таңдама әдістерін тарихи даму кезінде жалтақтап.

Сауалнама зерттеу қоғамдағы өзгерістерге жауап өткен өзгерді қалай көп алу үшін, қараңыз Tourangeau (2004) , Mitofsky (1989) , сондай-ақ Couper (2011) .

• (Бөлім 3.2) бақылау vs. сұрайды

кейде респонденттер өздері олардың ішкі мемлекеттердің туралы білмейді, өйткені сұрақ қою арқылы ішкі мемлекеттердің туралы білу қиындық тудыруы мүмкін. Мысалы, Nisbett and Wilson (1977) туларының атағымен тамаша қағазды бар: «Біз білеміз аламыз артық айтсам:. Психикалық процестер туралы ауызша баяндамалар» авторлары жасасуға мақалада: «субъектілер кейде (а) білмейді ынталандыру жауап әсер етті деп білмей бір бастысы жауап болмыстың (б) бейхабар, жауап әсер ынталандыру, сондай-ақ (с) болуы. «

Зерттеушілер хабарлады мінез-құлық немесе қатынастар мінез-байқалады жөн деп аргументтер үшін, қараңыз Baumeister, Vohs, and Funder (2007) (психология) және Jerolmack and Khan (2014) және жауап (Maynard 2014; Cerulo 2014; Vaisey 2014; Jerolmack and Khan 2014) (әлеуметтану). сұрап және бақылау, сондай-ақ зерттеушілер арасындағы айырмашылық көрсетілген және преференциялар анықталған туралы әңгіме экономика, туындайды. Мысалы, зерттеуші олар балмұздақ жеп немесе спортзалға жүріп (көрсетілген преференциялар) немесе ғылыми-зерттеу адам балмұздақ жейді қаншалықты жиі сақтауға және тренажер залы анықталды (преференциялар) өтіңіз мекен қалайды ма респондент сұрасаң болады. Экономика көрсетілген преференциялар деректердің жекелеген түрлерін терең шүбә бар (Hausman 2012) .

Осы пікірталастар келген басты тақырыбы хабарлады мінез-құлық әрқашан дәл емес болып табылады. Бірақ, автоматты түрде жазылған мінез-құлық дәл болуы, қызығушылық үлгідегі жиналған мүмкін емес мүмкін емес, мен зерттеушілердің қол жеткізу мүмкін болмайды. Осылайша, кейбір жағдайларда, Зерттелетін мінез-пайдалы болуы мүмкін деп ойлаймын. Бұдан әрі, осы пікірталастар жылғы екінші басты тақырыбы эмоциялар туралы есептер, білім, күту және пікірлер әрқашан дәл емес болып табылады. Бірақ, бұл ішкі мемлекеттердің туралы ақпарат кейбір мінез-құлқын түсіндіруге немесе түсіндірді-, содан кейін керек сұрап нәрсе қажет болуы мүмкін көмектесу үшін зерттеушілер-бірімен қажет болса.

• Барлығы сауалнама қате (бөлім 3.3)

Жалпы сауалнама қате туралы кітап ұзындығы емдеу үшін, қараңыз Groves et al. (2009) , немесе Weisberg (2005) . Жалпы зерттеу қате даму тарихында, қараңыз Groves and Lyberg (2010) .

Зерттеулер бағдарламасын: өкілдік тұрғысынан емес-жауап және емес жауап объективті мәселелеріне үлкен енгізу Social Science сауалнамалары Басқа да жөніндегі ұлттық ғылыми-зерттеу кеңесі есеп болып табылады (2013) . Тағы бір пайдалы шолу ұсынған (Groves 2006) . Сондай-ақ, ресми статистика Journal, қоғамдық пікір Quarterly, саяси Америка академиясының және әлеуметтік ғылымдар шежіресі бүкіл арнайы мәселелер емес жауап тақырыбы бойынша жарияланды. Соңында, жауап жиілігін есептеу іс жүзінде әр түрлі тәсілдері бар; Осы көзқарастарды қоғамдық пікірді зерттеушілер Америка қауымдастығының (AAPOR) бойынша есепте егжей-тегжейлі сипатталған (Public Opinion Researchers} 2015) .

1936 Әдеби Дайджест сауалнамаға егжей-тегжейлі зерттелген (Bryson 1976; Squire 1988; Cahalan 1989; Lusinchi 2012) . Ол сондай-ақ кездейсоқ деректер жинау қарсы ескертуге үшін астарлы әңгімесінде ретінде қолданылған (Gayo-Avello 2011) . 1936 жылы Джордж Gallup сынамаларды іріктеу неғұрлым күрделі нысанын пайдаланылады, және әлдеқайда аз үлгідегі дәлірек сметасын өндіруге қабілетті болды. Әдеби Digest астам Gallup табысы зерттеу зерттеулердің дамуы маңызды кезең болды (Converse 1987, Ch 3; Ohmer 2006, Ch 4; Igo 2008, Ch 3) .

Өлшем тұрғысынан алғанда, сауалнамаларды жобалау үшін үлкен бірінші ресурс болып табылады Bradburn, Sudman, and Wansink (2004) . Қатынасы мәселелері бойынша арнайы бағытталған неғұрлым озық емдеу үшін, қараңыз Schuman and Presser (1996) . Алдын-ала тестілеу мәселелер бойынша толығырақ қол жетімді Presser and Blair (1994) , Presser et al. (2004) , сондай-ақ 8-тарау Groves et al. (2009) .

Сауалнама шығындар мен зерттеу қателер арасындағы сауда-Off классикалық, кітап-ұзындығы емдеу Groves (2004) .

• Кім (бөлім 3.4) сұрауға

Классикалық кітап метражды стандартты ықтималдығы сынамаларды іріктеу және бағалау болып табылады емдеу Lohr (2009) (одан кіріспе) және Särndal, Swensson, and Wretman (2003) (неғұрлым озық). Кейінгі стратификация және онымен байланысты әдістерін классикалық кітап-ұзындығы емдеу Särndal and Lundström (2005) . Кейбір сандық жасы параметрлерінде, зерттеушілер өткен жиі шынайы емес еді емес респонденттердің туралы өте аз білеміз. Зерттеушілер емес респонденттердің туралы ақпарат бар болған кезде емес жауап түзету түрлі нысандары мүмкін (Kalton and Flores-Cervantes 2003; Smith 2011) .

Ның Xbox зерттеу Wang et al. (2015) зерттеушілер жасуша көптеген жасушалар бар, тіпті білдіреді бағалауға мүмкіндік береді (кейде «Мистер P» деп аталатын АЕК) көпдеңгейлі регрессиялық және кейінгі стратификация деп аталатын технологияны пайдаланады. Бұл техниканың жылғы сметасын сапасы туралы кейбір пікір-сайыс бар болғанымен, ол зерттеуге перспективалы ауданы сияқты. Техника бірінші қолданылған Park, Gelman, and Bafumi (2004) , сондай-ақ кейіннен пайдалану және дебат болды (Gelman 2007; Lax and Phillips 2009; Pacheco 2011; Buttice and Highton 2013; Toshkov 2015) . Жеке салмақ және ұялы негізделген массасының арасындағы байланысты туралы толығырақ қараңыз Gelman (2007) .

Салмақ веб зерттеулер үшін басқа тәсілдерді үшін қараңыз Schonlau et al. (2009) , Valliant and Dever (2011) , сондай-ақ Bethlehem (2010) .

Үлгі Сәйкес ұсынған Rivers (2007) . Bethlehem (2015) сынама сәйкестік орындау іс жүзінде басқа таңдама тәсілдерді (мысалы, стратифицированной таңдау) және басқа да түзету тәсілдерін (мысалы, кейінгі стратификация) ұқсас болады дейді. Онлайн панельдер туралы қосымша алу үшін, қараңыз Callegaro et al. (2014) .

Кейде зерттеушілер ықтималдығы үлгілері және емес ықтималдығы үлгілері ұқсас сапалы бағалауды бере деп тапты (Ansolabehere and Schaffner 2014) , бірақ басқа салыстырулар емес ықтималдығы үлгілері нашар екенін тапты (Malhotra and Krosnick 2007; Yeager et al. 2011) . Осы айырмашылықтарды бірі ықтимал себебі емес ықтималдығы үлгілері уақыт бойы жақсарды деп табылады. Емес ықтималдығы таңдама әдістерін неғұрлым пессимистік мақсатында емес ықтималдығы іріктеу бойынша AAPOR Мақсатты топ қараңыз (Baker et al. 2013) , мен сондай-ақ жиынтық есебін мынадай түсініктемелерімен оқу ұсынамыз.

Емес ықтималдығы сынамада құлай азайту үшін салмақтау әсері мета-талдау үшін, кестені қараңыз 2.4 Tourangeau, Conrad, and Couper (2013) «жасасуға авторларды әкеледі, түзетулер пайдалы, бірақ дұрыс болмайтындықтан түзетулер болып көрінуі. . . «

• (3.5 бөлімін) сұрауға қалай

Conrad and Schober (2008) Болашақ Survey сұхбат көздейтін атты редакцияланған көлемін қамтамасыз етеді, және ол осы бөлімде тақырыптар көптеген қаралады. Couper (2011) ұқсас тақырыптарды қарастырады, және Schober et al. (2015) жаңа параметрге бейімделген деректер жинау әдістері жоғары сапалы деректер әкелуі мүмкін қалай жақсы мысал ұсынады.

Әлеуметтік ғылым зерттеулер үшін Facebook бағдарламаларды пайдалана отырып, тағы бір қызықты қараңыз, мысалы, Bail (2015) .

Қатысушылар үшін жағымды және бағалы тәжірибе зерттеулер енгізу туралы толығырақ ақпарат алу үшін, Арнайы Дизайн әдісі бойынша жұмысты қараңыз (Dillman, Smyth, and Christian 2014) .

Stone et al. (2007) , экологиялық мезеттік бағалау және олармен байланысты әдістерін кітап ұзындығы емдеу ұсынады.

• Басқа деректерге байланысты сауалнамалар (бөлім 3.6)

Judson (2007) осы тәсілді кейбір артықшылықтары талқылайды, сондай-ақ кейбір мысалдар ұсынады «, ақпараттық интеграция» деп сауалнама және әкімшілік деректерді біріктіру процесін сипатталған.

зерттеушілер сандық іздері және әкімшілік деректерді пайдалана алатын тағы бір жолы нақты сипаттамалары бар адамдар үшін дискретизация жақтау болып табылады. Алайда, сынамаларды іріктеу жақтауын пайдаланылуы осы жазбалар, сондай-ақ жеке өміріне байланысты сұрақтар жасауға болады қатынасу (Beskow, Sandler, and Weinberger 2006) .

Күшейтілген өтініштер болсақ, бұл тәсіл ол, мен оны сипатталған болатынмын қалай көрінуі мүмкін, сондай-ақ жаңа емес. Бұл тәсіл статистика-моделі негізделген пост-стратификация үш ірі аудандардың терең байланысы (Little 1993) , есептеу (Rubin 2004) , сондай-ақ шағын ауданы бағалау (Rao and Molina 2015) . Ол сондай-ақ, медициналық ғылыми-зерттеу суррогат айнымалы пайдалануға байланысты (Pepe 1992) .

Сандық ізі мәліметтерге қатынасу қатысты этикалық мәселелермен қатар, күшейтілген Сұрау, сондай-ақ адам сауалнама анықтауға таңдай алмауы мүмкін сезімтал қасиеттерді тұжырым жасауға пайдаланылуы мүмкін (Kosinski, Stillwell, and Graepel 2013) .

Құны және уақыты сметаларды Blumenstock, Cadamuro, and On (2015) айнымалы шығындар бір қосымша құны неғұрлым қараңыз сауалнама-мен осындай қоңырау деректерді тазалау және өңдеу үшін құны ретінде негізгі шығындар кірмейді. Жалпы, күшейтілген Сұрау бәлкім жоғары тіркелген шығындарды және сандық эксперименттер ұқсас төмен айнымалы шығындарды (4-тарауды қараңыз) ие болады. Пайдаланылатын деректерге Толығырақ Blumenstock, Cadamuro, and On (2015) қағаз болып табылады Blumenstock and Eagle (2010) және Blumenstock and Eagle (2012) . Бірнеше imputuation тәсілдері (Rubin 2004) күшейтілген өтінуден бағалаудағы белгісіздік түсіру көмектесуі мүмкін. Зерттеушілер ғана жиынтық сандары гөрі жеке деңгейдегі қасиеттер қамқорлық сұрап күшейді істеп болса, онда тәсілдер King and Lu (2008) және Hopkins and King (2010) пайдалы болуы мүмкін. Машина оқыту тәсілдерін туралы көбірек алу үшін Blumenstock, Cadamuro, and On (2015) , қараңыз James et al. (2013) (толығырақ кіріспе) немесе Hastie, Tibshirani, and Friedman (2009) (неғұрлым озық). Тағы бір танымал машина оқыту кітабымыз Murphy (2012) .

Байытылған өтініштер болсақ, Ansolabehere және Герш нәтижелері (2012) екі негізгі қадамдар туралы шарнир: дәл мастер datafile өндіруге көптеген бытыраңқы деректер көздерін біріктіру Catalist 1) қабілеті және 2) Catalist қабілеті үшін зерттеу деректерін байланыстыру оның мастер datafile. Сондықтан, Ansolabehere және Герш мұқият осы қадамдардың әрбір тексеріңіз.

мастер datafile жасау үшін, Catalist біріктіреді және қоса алғанда, көптеген әр түрлі көздерден ақпаратты үйлесімге: бірнеше дауыс беру жазбалар әр мемлекеттен суреттер, Мекенжай тіркелімі почтамты Ұлттық өзгерту алынған деректер, сондай-ақ басқа да анықталмаған коммерциялық провайдерлер деректер. Бұл барлық тазалау және біріктіру орын туралы қалай Горы егжей Осы кітаптың аясынан тыс тұр, бірақ бұл процесс, қалай да мұқият, бастапқы деректер көздеріне қателерді тарату болады және қателерді енгізу болады. Catalist оның деректер өңдеуді талқылап, оның шикізат кейбір деректер ұсынуға дайын болғанымен, ол зерттеушілер бүкіл Catalist деректер құбырын қайта қарау үшін ғана мүмкін емес еді. Керісінше, зерттеушілер Catalist деректер файлы қате кейбір белгісіз, және, бәлкім, танып, сомасы болды жағдайға тап болды. сыншы емес респонденттер анық емес есептеме бойынша, Catalist мастер деректер файлындағы БҒСБК және мінез-құлқы туралы зерттеу есептерді арасындағы үлкен айырмашылық мастер деректер файлындағы қателер туындаған деп болжам мүмкін, өйткені бұл күрделі мәселе болып табылады.

Ansolabehere және Герш деректер сапасын алаңдаушылық шешудің екі түрлі көзқарас алды. Біріншіден, Catalist мастер файлда дауыс беруге өзін-өзі хабарлады дауыс беру салыстыру қосымша зерттеушілер, сондай-ақ өзін-өзі хабарлады партияның, нәсілдік, сайлаушылар тіркеу мәртебесін (мысалы, тіркелген немесе тіркелген жоқ) және дауыс беру әдісін (мысалы, адамның салыстырғанда, сырттай Catalist дерекқорлардан табылды осы құндылықтарға сайлау бюллетенiне, және т.б.). Осы төрт демографиялық айнымалы үшін, зерттеушілер дауыс беруге арналған қарағанда Catalist мастер файлда зерттеу есебі мен деректер арасындағы келісімнің әлдеқайда жоғары деңгейін таптым. Осылайша, Catalist мастер деректер файлы ол сапасы нашар алғанда емес екенін болжауға дауыс беру басқа қасиеттерді жоғары сапалы ақпарат пайда болады. Екіншіден, ішінара Catalist, Ansolabehere және Герш деректерді пайдалана отырып, бұл табу уездік дауыс беру жазбаларын сапасын үш түрлі шаралар әзірленді, және олар астам-есеп дауыс беру болжамды мөлшерлемесі осы деректер сапасын кез келген шараларды негізінен байланысты емес екенін тауып артық есептілік жоғары қарқыны ерекше төмен деректер сапасына округтері бойынша жетегі жатқан жоқ деп болжайды.

Бұл мастер дауыс беру файлдың құру ескере отырып, әлеуетті қателер екінші көзі оған зерттеу жазбаларды байланыстыру. Осы байланыс дұрыс жасалады Мысалы, егер ол артық смета хабарлады және дауыс беру тексерілген мінез-құлық арасындағы айырма ретінде әкелуі мүмкін (Neter, Maynes, and Ramanathan 1965) . әрбір адам, екі деректер көздеріне болды тұрақты, бірегей идентификатор болса, онда байланыс тривиальным болады. АҚШ-та және көптеген басқа елдерде, алайда, жоқ әмбебап идентификатор бар. Әрі қарай, болған, тіпті егер осындай идентификатор адамдар, бәлкім, зерттеушілерді танысады, оны қамтамасыз ету үшін қобалжып болар еді! аты, жынысы, туған жылы, сондай-ақ үй мекен-жайы: Осылайша, Catalist бұл жағдайда, кемелсіз сәйкестендіргіштерді пайдаланып әрбір респондентке туралы ақпарат төрт дана байланыстарды жасауға мәжбүр болды. Мысалы, Catalist БҒСБК жылы Homie J Симпсон, егер шешім қабылдауға тура келді, олардың шеберлік деректер файлындағы Homer Jay Симпсон бірдей адам болды. Іс жүзінде, сәйкес келетін зерттеушілер үшін Ушықтыратын үшін, қиын және лас процесс болып табылады, және, Catalist оның сәйкес келетін әдіс патенттелген болып саналады.

Сәйкес алгоритмдері тексеруге мақсатында, олар екі қыр сүйенеді. MITRE тұсында корпорациясы: Біріншіден, Catalist тәуелсіз, үшінші тарап іске болды келетін конкурсқа қатысты. MITRE тұсында екі қанағаттандырады болуы шулы деректер файлдары, және әр түрлі командалар Mitre ең күшті салыстырым оралу үшін жарысты барлық қатысушыларға ұсынды. MITRE тұсында өзі олар команда гол мүмкіндігіне ие болды, дұрыс сәйкестігін білген ғой. жарысты 40 компаниялардың, Catalist екінші орынға шықты. патенттелген технологиясы тәуелсіз, үшінші тарап бағалау Мұндай өте сирек және керемет құнды болып табылады; ол бізге Catalist берушінің сәйкестік рәсімдер мемлекеттік-ақ өнер деңгейінде мәнi бар екенін атап беруге тиіс. Бірақ жеткілікті мемлекеттік заманауи жақсы? Бұл салыстыру конкурсқа Сонымен қатар, Ansolabehere және Герш Catalist өз сәйкес келетін міндет құрылды. ертерек жобадан, Ansolabehere және Герш Флорида сайлаушылар жазбаларды жинаған. Олар Catalist үшін Redacted өз салаларында кейбір осы жазбаларды кейбір көзделген, содан кейін олардың нақты мәндері осы кен орындарын Catalist есептерін салыстырды. Бақытымызға орай, Catalist есептері Catalist олардың шеберлік деректер файлының үстіне жартылай сайлаушылар жазбаларды сәйкес келуі мүмкін екенін көрсете отырып, ұсталған құндылықтарға жақын болды. Бұл екі проблемалар, үшінші тарапқа және Ansolabehere және Герш арқылы бір, бізге олардың нақты іске асыру өзіміз қайта қарауға мүмкін емес, тіпті Catalist сәйкес келетін алгоритмдер көп сенім береді.

дауыс беру растау үшін көптеген алдыңғы әрекеттері болған. Бұл әдебиет шолу үшін, қараңыз Belli et al. (1999) , Berent, Krosnick, and Lupia (2011) , Ansolabehere and Hersh (2012) , сондай-ақ Hanmer, Banks, and White (2014) .

Бұл жағдайда зерттеушілер Catalist деректерді сапасы марапатталды дегенмен, коммерциялық сатушылар басқа бағалау кем ынта болды атап өту маңызды. : Зерттеушілер (Acxiom, Experian және InfoUSA өзі бірге үш провайдерлер деректерді біріктірілген) Маркетинг Systems Group бастап тұтыну-файлға кезде сауалнама деректерді нашар сапасын тапты (Pasek et al. 2014) . Яғни, басқа сөзбен айтқанда хабарсыз кеткен деректер жүйелі болды (деректер файлы зерттеушілер дұрыс болады деп күтілуде, деп сауалнама жауаптарын сәйкес емес, сұрақтар саны көп, және хабар-ошарсыз кеткен деректер үлгісі үшін datafile жетіспейтін еді деректер хабарлады зерттеу құнына байланысты болатын, болып табылады ), кездейсоқ емес.

Зерттеулер және әкімшілік деректер арасындағы рекордтық байланыс туралы қосымша алу үшін, қараңыз Sakshaug and Kreuter (2012) және Schnell (2013) . Жалпы рекордтық байлау туралы қосымша алу үшін, қараңыз Dunn (1946) және Fellegi and Sunter (1969) (тарихи) және Larsen and Winkler (2014) (осы заманғы). Де осындай пайымның анықтау қайталамайды, мұндай деректер дедупликации, сатыдағы сәйкестендіру, аты сәйкестік ретінде атаулармен информатика әзірленген, және рекордтық анықтау қайталамайды болатын (Elmagarmid, Ipeirotis, and Verykios 2007) . Жеке ақпаратты анықтау беруді талап етпейтін рекордтық байлау тәсілдерін сақтай құпиялылық сондай-ақ бар (Schnell 2013) . Facebook зерттеушілері probabilisticsly дауыс беру мінез-құлық олардың жазбаларын сілтейді рәсімін әзірленген (Jones et al. 2013) ; Осы байланыс Мен 4-тарау шамамен баяндаймын эксперимент бағалау үшін жасалды (Bond et al. 2012) .

Үкімет әкімшілік жазбаларға ауқымды әлеуметтік сауалдама байланыстыратын тағы бір мысал Денсаулық сақтау және Зейнетақымен зерттеу және халықты әлеуметтік қорғау Әкімшілігінің шыққан. Келісім тәртібі туралы ақпаратты қоса алғанда, осы зерттеу туралы қосымша алу үшін, қараңыз Olson (1996) және Olson (1999) .

мастер datafile-Catalist кейбір ұлттық үкіметтердің статистикалық кеңселері ортақ қызметкерлері болып табылады үдерісіне әкімшілік есеп көптеген көздерін біріктіру процесі. Статистика Швеция екі зерттеушілер тақырыбында егжей-тегжейлі кітап жазған (Wallgren and Wallgren 2007) . Америка Құрама Штаттары (Olmstead County, Миннесота; Мейо клиникасының үй) бір округте осы көзқарастың Мысалы, қараңыз Sauver et al. (2011) . Әкімшілік жазбалар пайда болады қателер туралы қосымша алу үшін, қараңыз Groen (2012) .