3.3.3 Kostnads
Undersøkelser er ikke gratis, og dette er en reell begrensning.
Så langt har jeg kort anmeldt den totale undersøkelsen feil rammeverk, som selv er gjenstand for boken lengde behandlinger (Weisberg 2005; Groves et al. 2009) . Selv om dette rammeverket er omfattende, generelt fører det forskere å utelate en viktig faktor: kostnad. Selv om kostnads som kan måles ved enten tid eller penger er sjelden eksplisitt drøftet av akademiske forskere, er det en reell begrensning at vi overser i vår fare. Faktisk, grunnen forskerne intervjuet prøver av folk i stedet for hele befolkningen er å spare penger. Således er kostnaden grunnleggende for prosessen med undersøkelsen forskning (Groves 2004) . En målbevisst hengivenhet til å minimere feil under fullstendig ignorerer kostnader er ikke alltid i vår beste interesse.
Begrensningene av en besettelse med å redusere feil er illustrert av den banebrytende studie av Scott Keeter og kolleger (2000) om effekten av kostbare feltoperasjoner for å redusere frafallet i telefon undersøkelser. Keeter og kolleger kjørte to samtidige undersøkelser, en bruker "Standard" prosedyrer og en ved hjelp av "strenge" prosedyrer. Selv om "strenge" prosedyrer gjorde produsere en lavere frafall, estimater fra begge prøvene var i utgangspunktet det samme. Men de "strenge" prosedyrer koste omtrent dobbelt så mye og tok 8 ganger så lang. Er vi bedre av med 2 rimelige undersøkelser eller en perfekt undersøkelse? Hva med 10 rimelige undersøkelser eller en perfekt undersøkelse? Hva om 100 rimelige undersøkelser eller en perfekt undersøkelse? På et tidspunkt kostnadsfordeler må oppveier vage, uspesifikke bekymringer om kvalitet.
Mange av de mulighetene som skapes av den digitale tidsalder er ikke om å skape forutsetninger som åpenbart har lavere feil. Snarere disse mulighetene er i ferd med å lage estimater billigere og raskere, men kanskje med feil som i dag er høyere eller vanskeligere å måle. Som mange av eksemplene i dette kapitlet vil vise, er forskere som insisterer på en single-minded besettelse med å minimere feil på bekostning av andre dimensjoner av kvalitet kommer til å gå glipp av spennende muligheter. Gitt denne bakgrunn om den totale undersøkelsen feilen rammer, vil vi nå gå over til tre hovedområder den tredje æra av undersøkelsen forskning: nye tilnærminger til representasjon (punkt 3.4), nye tilnærminger til målings (punkt 3.5), og nye strategier for å kombinere undersøkelser med digitale spor (punkt 3.6).
