Wat lêst neist

• Ynlieding (seksje 3.1)

In protte fan 'e tema' s yn dit haadstik binne ek yn 'e resinte foarsitteradressen opnommen yn' e Amerikaanske Feriening foar Public Opinion Research (AAPOR), sa as dy fan Dillman (2002) , Newport (2011) , Santos (2014) en Link (2015) .

Foar mear oer de ferskillen tusken ûndersiikûndersyk en ynterfaasje ynterview, sjoch Small (2009) . Yn ferbân mei in djippe ynterviews is in famylje fan oanwêzigen neamd etnografy. Yn etnyografysk ûndersyk fertsjinje de ûndersikers oer it generaal in protte tiid mei dielnimmers yn har natuerlike omjouwing. Foar mear oer de ferskillen tusken etnografy en ynterfaasje ynterview, sjoch Jerolmack and Khan (2014) . Foar mear oer digitale etnografy, sjoch Pink et al. (2015) .

Myn beskriuwing fan 'e skiednis fan ûndersiikûndersyk is fier te koart om in protte fan' e spannende ûntwikkelings dy't opnommen binne opnimme. Foar mear histoaryske eftergrûn sjoch Smith (1976) , Converse (1987) , en Igo (2008) . Foar mear oer it idee fan trije ea's fan ûndersiikûndersyk sjoch Groves (2011) en Dillman, Smyth, and Christian (2008) (wêrtroch't de trije jieren wat ferskille).

Groves and Kahn (1979) biede in heulendal yn 'e oergong fan' e earste oant de twadde era yn ûndersykûndersyk troch in detaillearre kop-to-haad ferliking te meitsjen tusken in oantal persoanen en tillevyzjeûndersyk. ( ??? ) besjen op 'e histoaryske ûntwikkeling fan willekeurige digitale dialoochmetoade.

Hoe mear hoe't ûndersyksûndersiken yn it ferline feroare binne yn antwurd op feroaringen yn 'e maatskippij, sjoch Tourangeau (2004) , ( ??? ) , en Couper (2011) .

• Oanfreegje op fersen (seksje 3.2)

De sterkte en swakkens fan it freegjen en beoardielen binne debatearre troch psychologen (bygelyks Baumeister, Vohs, and Funder (2007) ) en sosjologen (bygelyks Jerolmack and Khan (2014) ; Maynard (2014) ; Cerulo (2014) ; Vaisey (2014) , Jerolmack and Khan (2014) ], it ferskil tusken fraach en beoordeling is ek yn 'e ekonomy, dêr't ûndersikers oer presintearre en spesifike foarkars prate kinne, bygelyks in ûndersiker freegje kin opfrege oft se it iets of iten leare en nei it gym gean (presinteare foarkarren), of kinne beoardiele hoe faak minsken iiskâlde en gean nei de gym (offere foarkarren). Der is djip skepsis oer bepaalde soarten presinteare foarkar yn Hausman (2012) as beskreaun yn Hausman (2012) .

In wichtich tema út dizze debatten is dat rapportgedrach net altyd krekt is. Mar, lykas yn haadstik 2 beskreaun is, kinne grutte gegevensboarnen net krekt wêze, se kinne net opnommen wurde op in probleem fan belang, en se kinne miskien net tagonklik wêze foar ûndersikers. Sa tink ik dat, yn guon situaasjes, rapportaazje kin brûkber wêze. Fierder is in twadde haadtema fan dizze debatten dat rapporten oer emoasjes, kennis, ferwachtings en mieningen net altyd krekt binne. Mar as ynformaasje oer dizze ynterne steaten nedich is troch ûndersikers - of om te helpen wat guod te ferklearjen as as ding te ferklearjen - dan freget fraach mooglik te passen. Fansels kin learje oer ynterne steat troch fragen te freegjen kinne problematysk wêze omdat soms de respondinten sels net bewust binne fan har ynterne steaten (Nisbett and Wilson 1977) .

• Totale surveyfout (seksje 3.3)

Haadstik 1 fan Groves (2004) docht in poerbele baan om 'e saaklik ynsidintele terminology te kombinearjen, dy't troch ûndersikers ûndersocht wurdt om it totale surveyferskrogramma te beskriuwen. Foar in boeklange behanneling fan 'e totale ûndersyksfermaderken sjoch Groves et al. (2009) , en foar in histoaryske oersjoch, sjoch Groves and Lyberg (2010) .

It idee om fergriemen fan flaters yn 'e weifeling en fariant te kommen is ek yn it masine learen; Sjoch, bygelyks, diel 7.3 fan Hastie, Tibshirani, and Friedman (2009) . Dit liedt faak ûndersikers om te praten oer in "fio-variance" hanneljen.

Yn betingsten foar in represintaasje, in grutte ynfloed op 'e problemen fan nonresponse en nonresponse foaroardielen is de Nationale Research Council rapportaazje Netresponse yn sosjale wittenskipûndersiken: In Research Agenda (2013) . In oar nuttige oersjoch is steld troch Groves (2006) . Ek binne allegear spesjale problemen fan 'e Journal of Official Statistics , Public Opinion Quarterly , en de Annalen fan' e Amerikaanske Akademy fan Politike en Sosjale Wittingen publisearre op it ûnderwerp fan net-antwurd. Uteinlik binne der faak in protte ferskillende manieren om de antwurdzeter te berekkenjen; Dizze oanpaks wurde yn detail ynskreaun yn in rapport troch The American Association of Public Opinion Researchers (AAPOR) ( ??? ) .

Foar mear oer de 1936 Literêre Digest- pollen, sjoch Bryson (1976) , Squire (1988) , Cahalan (1989) , en Lusinchi (2012) . Foar in oare diskusje fan 'e periodyk as in ferklearring fan warskôging tsjin' e hazze-data-kolleksje, sjoch Gayo-Avello (2011) . Yn 1936 brûkt George Gallup in súksesfolle foarm fan sampling en koe krekter genôch skatting meitsje mei in folle lytsere probleem. Gallup's súkses oer de Literêre Digest wie in mielstien yn 'e ûntwikkeling fan ûndersyksûndersyk as beskreaun yn haadstik 3 fan @ converse_survey_1987; haadstik 4 fan Ohmer (2006) ; en haadstik 3 fan @ igo_averaged_2008.

Mei it mjitten is in geweldige earste boarne foar it opstellen fan fragelisten Bradburn, Sudman, and Wansink (2004) . Foar mear avansearre behanneling sjoch Schuman and Presser (1996) , dy't spesifyk rjochte is op attitude-fragen, en Saris and Gallhofer (2014) , dy't algemien is. In lyts ferskillende oanpak nei mjittingen wurdt yn psychosmetyk neamd, lykas beskreaun yn ( ??? ) . Mear oer pretesting is beskikber yn Presser and Blair (1994) , Presser et al. (2004) , en haadstik 8 fan Groves et al. (2009) . Foar mear op surveyûndersoarten sjoch Mutz (2011) .

Yn 'e kosten fan' e kosten is de klassike, boeklange behanneling fan 'e ôfhannelings tusken ûndersiikkosten en surveyfoargers Groves (2004) .

• Wa't frege (diel 3.4)

Twa klassike boeklange behannelingen fan standert problemen probearjen en skatten binne Lohr (2009) (mear ynliedend) en Särndal, Swensson, and Wretman (2003) (mear avansearre). In klassike boeklange behanneling fan post-stratifikaasje en relatearre metoaden is Särndal and Lundström (2005) . Yn guon digitale-ynstellings kenne ûndersikers in soad oer nonrespondents, dy't yn it ferline net faak wier wie. Ferskillende foarmen fan nonresponse-oanpassing binne mooglik as ûndersikers hawwe ynformaasje oer nonrespondents, lykas beskreaun troch Kalton and Flores-Cervantes (2003) en Smith (2011) .

De Xboxstúdzje fan W. Wang et al. (2015) brûkt in technyk dy't multilevel-regression en post-stratifikaasje neamt ("Mr. P."), dy't ûndersikers de groep betsjutte kinne, sels as der in protte groepen binne. Hoewol is der in pear debatten oer de kwaliteit fan 'e skatten fan dizze technyk, liket it in protte belang om te ûndersykjen. De technyk waard earst brûkt yn Park, Gelman, and Bafumi (2004) , en dêrnei waard der gebrûk makke en debat (Gelman 2007; Lax and Phillips 2009; Pacheco 2011; Buttice and Highton 2013; Toshkov 2015) . Foar mear oer de ferbining tusken individuele gewichten en groepsgewichten, sjoch Gelman (2007) .

Foar oare oanwêzigen om Schonlau et al. (2009) , sjoch Schonlau et al. (2009) , Bethlehem (2010) , en Valliant and Dever (2011) . Online panels kinne gebrûk meitsje fan problemen problemen of net-probabiliteit-sampling. For more on online panels, see Callegaro et al. (2014) .

Somtiden hawwe ûndersikers fûn dat problemen problemen en net-probabilitêre problemen skatten fan fergelykbere kwaliteit (Ansolabehere and Schaffner 2014) , mar oare fergelykingen hawwe fûn dat net-probabiliteit-problemen slimmer wurde (Malhotra and Krosnick 2007; Yeager et al. 2011) . Ien mooglike reden foar dizze ferskillen is dat net-probabiliteit-samples fan 'e tiid ferbettere hawwe. Foar in pessimistyske ferzje fan net-probabilite-samplingmetoaden sjogge de AAPOR-Task Force oer net-probabiliteit-sampling (Baker et al. 2013) , en ik advisearje ek it lêzen fan 'e kommentaar dy't de gearfetting rapport folgje.

• Hoe freegje (seksje 3.5)

Conrad and Schober (2008) is in bewurke volumint mei it bewarjen fan it Survey Interview fan 'e takomst , en it biedt in ferskaat oan sichtpunten oer de takomst om fragen te freegjen. Couper (2011) tema's, en Schober et al. (2015) biede in aardige foarbyld fan hoe't datasammeljenmetoaden dy't oan in nije ynstelling oanpast binne kinne ta hegere kwaliteitsgegevens resultaat. Schober and Conrad (2015) biede in algemien argumint oer it oanhâlden fan it proses fan ûndersiikûndersyk om oanpassingen yn 'e mienskip te passen.

Tourangeau and Yan (2007) besjogge problemen fan sosjale winsklike foardielen yn gefoelige fragen, en Lind et al. (2013) biede wat mooglike redenen wêrom't minsken mear gefoelige ynformaasje publisearje kinne yn in kompjûter-behearsking ynterview. Foar mear oer de rol fan 'e minsken fan' e interviewers yn 'e tanimmende partisipaasje yn' e ûndersiken, sjoch Maynard and Schaeffer (1997) , Maynard, Freese, and Schaeffer (2010) , Conrad et al. (2013) , en Schaeffer et al. (2013) . Foar mear op mishannemodusûndersiken, sjoch Dillman, Smyth, and Christian (2014) .

Stone et al. (2007) biede in boeklange behanneling fan ekologyske momintêre evaluaasje en relatearre metoaden.

Foar mear advizen oer it meitsjen fan ûndersiikingen in noflike en weardefolle ûnderfining foar dielnimmers, sjoch wurk op 'e Tailored Design Method (Dillman, Smyth, and Christian 2014) . Foar in nij nijsgjirrich foarbyld fan Facebook-apps foar sosjale wittenskipûndersiken, sjoch Bail (2015) .

• Untfangingen dy't keppele binne oan grutte data boarnen (seksje 3.6)

Judson (2007) beskriuwt it proses foar it kombinearjen fan ûndersiken en bestjoerlike gegevens as "ynintegraasjeintegraasje" en bespreket guon foardielen fan dizze oanpak, en ek inkele foarbylden oanbiede.

Oangeande ferrike freegje, binne der al in soad eardere problemen foar it fêststellen fan stimmen. Foar in oersjoch fan dy literatuer, sjoch Belli et al. (1999) , Ansolabehere and Hersh (2012) , Hanmer, Banks, and White (2014) , en Berent, Krosnick, and Lupia (2016) . Sjoch Berent, Krosnick, and Lupia (2016) foar in skeptysk sjoen fan de resultaten presintearre yn Ansolabehere and Hersh (2012) .

It is wichtich om te notearjen dat wannear't Ansolabehere en Hersh troch de kwaliteit fan gegevens fan Catalist stimulearre binne, binne oare evaluaasjes fan kommersjele fertsjinters minder entûsjast. Pasek et al. (2014) fûn minne kwaliteit doe't gegevens fan in oersicht fergelykber waarden mei in konsumintgegevens fan Marketing Systems Group (dy't sels gearfetsje fan gegevens fan trije providers: Acxiom, Experian, and InfoUSA). Dat is dat it gegevensbestân net oerienkommende reaksjes opnommen dat ûndersikers ferwachte wurde soene, de konsumintriem hat gegevens foar in protte fragen fûn, en it ûntbrekkende datasjemuster korrelearre mei de rapportearre survey value (yn oare wurden, data waard systematysk, net willekeurich).

Foar mear op rekket ferbân tusken ûndersiken en bestjoerlike gegevens, sjoch Sakshaug and Kreuter (2012) en Schnell (2013) . Foar mear op skilderijen yn algemien, sjoch Dunn (1946) en Fellegi and Sunter (1969) (histoarysk) en Larsen and Winkler (2014) (moderne). Ferlykbere oanwêzigen binne ek ûntwikkele yn kompjûterwittens ûnder nammen lykas gegevensdupuplikaasje, eksimplaar fan identiteiten, nammen oerienkomme, dûbele detectie en dûbele rekkenbewurking (Elmagarmid, Ipeirotis, and Verykios 2007) . Der binne ek privacy-oanwêzige oanwêzigen om keppeling op te nimmen dat de transmission fan persoanlike identifikaasje net nedich is (Schnell 2013) . Undersikers op Facebook ûntwikkele in proseduere om probabilistysk har rekken te ferlykjen foar it stimulearjen fan gedrach (Jones et al. 2013) ; Dizze linking is dien om in eksperimint te evaluearjen dat ik jo fertelle oer yn haadstik 4 (Bond et al. 2012) . Foar mear oer it ynstimmen fan konsintraasjekampen, sjoch Sakshaug et al. (2012) .

In oar foarbyld fan keppelingen fan in grutskalige maatskiplike enkête oan bestjoerlike bestjoerskrêften komt út 'e Soarch- en Pensjele Survey en de Social Security Administration. Foar mear op dat stúdzje, ynklusyf ynformaasje oer de ynstimmingsproseduere, sjoch Olson (1996, 1999) .

It proses foar it kombinearjen fan in protte boarnen fan bestjoersakten yn in masterdatefile - it proses dat de kataliste wurket - is mienskiplik yn 'e statistyske kantoaren fan guon nasjonale regearings. Twa ûndersikers fan Statistik Sweden hawwe in detaillearre boek skreaun oer it ûnderwerp (Wallgren and Wallgren 2007) . Foar in foarbyld fan dizze oanpak yn in ienige provinsje yn 'e Feriene Steaten (Olmstead County, Minnesota, thús fan' e Mayo Clinic), sjoch Sauver et al. (2011) . Foar mear op fouten dy't yn bestjoerlike registers ferskine kinne, sjoch Groen (2012) .

In oare manier wêryn ûndersikers gebrûk meitsje kinne fan grutte gegevensboarnen yn ûndersyksûndersiken as samplingfoarm foar minsken mei spesifike skaaimerken. Spitigernôch kin dizze oanpak fragen oangeande privacy (Beskow, Sandler, and Weinberger 2006) .

Oer it fersterkjen fan fragen, dizze oanpak is net sa nij as it miskien ferskynt fan hoe't ik it beskreaun haw. It hat djipste ferbiningen mei trije grutte gebieten yn statistyk: model-basearre post-stratifikaasje (Little 1993) , ympulaasje (Rubin 2004) , en lyts gebietskema (Rao and Molina 2015) . It is ek ferbûn mei it brûken fan surrogate fariabelen yn medyske ûndersiken (Pepe 1992) .

De kosten en Blumenstock, Cadamuro, and On (2015) ferwize mear nei variable fariant - de kosten fan ien ekstra ûndersiik - en hawwe gjin fêste kosten lykas de kosten foar it suverjen en ferwurkjen fan de opropdatas. Yn it algemien wurde amplisearre fragen nei alle gedachten hege fêste kosten en lege ferhege kosten lyk oan dy fan digitale eksperiminten (sjoch haadstik 4). Foar mear ynformaasje oer Dabalen et al. (2016) yn 'e ûntwikkellannen, sjoch Dabalen et al. (2016) .

Foar ideeën oer hoe makliker as gefolch om te freegjen, soe ik oanbefellje om mear te learen oer meardere ymputaasje (Rubin 2004) . As de ûndersikers ek amplifisearje soarchje oer aggresjearre betinksten, ynstee fan yndividuele trekken, dan kinne de oanwêzigen yn King and Lu (2008) en Hopkins and King (2010) nuttich wêze. Uteinlik, foar mear oer it Blumenstock, Cadamuro, and On (2015) komt oan te gean yn Blumenstock, Cadamuro, and On (2015) , sjoch James et al. (2013) (mear ynliedend) of Hastie, Tibshirani, and Friedman (2009) (mear avansearre).

Ien ethike probleem oangeande fersterke fraach is dat it kin brûkt wurde om gefoelige toetsen yn te lûken dat minsken net kieze kinne om te sjen yn in ûndersyk as beskreaun yn Kosinski, Stillwell, and Graepel (2013) .