3.3.3 Costo
Le indagini non sono liberi, e questo è un vero e proprio vincolo.
Finora, ho brevemente esaminato il quadro complessivo degli errori del sondaggio, che a sua volta è oggetto di trattamenti a lunghezza di libro (Weisberg 2005; Groves et al. 2009) . Sebbene questo quadro sia completo, generalmente i ricercatori trascurano un fattore importante: il costo. Sebbene il costo, che può essere misurato in termini di tempo o denaro, raramente viene discusso esplicitamente dai ricercatori accademici, è un vero limite che non dovrebbe essere ignorato. In effetti, il costo è fondamentale per l'intero processo di ricerca dell'indagine (Groves 2004) : è la ragione per cui i ricercatori intervistano un campione di persone piuttosto che un'intera popolazione. Una devozione mirata a minimizzare l'errore ignorando completamente i costi non è sempre nel nostro interesse.
I limiti dell'ossessione per la riduzione dell'errore sono illustrati dal progetto fondamentale di Scott Keeter e colleghi (2000) sugli effetti di costose operazioni sul campo sulla riduzione della mancata risposta nei sondaggi telefonici. Keeter e colleghi hanno condotto due studi simultanei, uno con procedure di assunzione "standard" e uno con procedure di reclutamento "rigorose". La differenza tra i due studi è stata la quantità di sforzo che è andato in contatto con gli intervistati e incoraggiandoli a partecipare. Ad esempio, nello studio con reclutamento "rigoroso", i ricercatori hanno chiamato le famiglie del campione più frequentemente e per un periodo di tempo più lungo e hanno fatto callback aggiuntivi se i partecipanti inizialmente si rifiutavano di partecipare. Questi sforzi extra hanno in effetti prodotto un tasso inferiore di mancata risposta, ma hanno aggiunto sostanzialmente il costo. Lo studio che utilizzava procedure "rigorose" era due volte più costoso e otto volte più lento. E, alla fine, entrambi gli studi hanno prodotto stime sostanzialmente identiche. Questo progetto, così come le successive repliche con risultati simili (Keeter et al. 2006) , dovrebbero farti (Keeter et al. 2006) : stiamo meglio con due sondaggi ragionevoli o un sondaggio originale? Che ne dici di 10 sondaggi ragionevoli o di un sondaggio incontaminato? Che dire di 100 sondaggi ragionevoli o di un sondaggio incontaminato? A un certo punto, i vantaggi in termini di costo devono superare le preoccupazioni vaghe e non specifiche sulla qualità.
Come mostrerò in questo resto del capitolo, molte delle opportunità create dall'era digitale non riguardano il fare stime che ovviamente hanno un errore inferiore. Piuttosto, queste opportunità riguardano la stima di quantità diverse e il rendere le stime più rapide ed economiche, anche con eventuali errori più elevati. I ricercatori che insistono su un'ossessione mirata a minimizzare l'errore a scapito di altre dimensioni della qualità, perderanno opportunità entusiasmanti. Considerando questo contesto sul quadro complessivo degli errori dell'indagine, passeremo ora a tre aree principali della terza era della ricerca sui sondaggi: nuovi approcci alla rappresentazione (sezione 3.4), nuovi approcci alla misurazione (sezione 3.5) e nuove strategie per combinare le indagini con grandi fonti di dati (sezione 3.6).
