3.5.2 sondaggi Wiki

Sondaggi Wiki permettono nuovi ibridi di domande chiuse e aperte.

Oltre a porre domande in tempi più naturali e in contesti più naturali, la nuova tecnologia ci consente anche di cambiare la forma delle domande. La maggior parte delle domande del sondaggio è chiusa, con gli intervistati che scelgono da una serie fissa di scelte scritte dai ricercatori. Questo è un processo che un importante ricercatore di sondaggi chiama "mettere le parole nella bocca delle persone". Per esempio, ecco una domanda di indagine chiusa:

"Questa prossima domanda riguarda il tema del lavoro. Vorresti per favore guardare questa scheda e dirmi qual è la cosa su questa lista che preferiresti di più in un lavoro?

1. Alto reddito
2. Nessun pericolo di essere licenziato
3. Gli orari di lavoro sono brevi, molto tempo libero
4. Possibilità di avanzamento
5. Il lavoro è importante e dà una sensazione di realizzazione. "

Ma queste sono le uniche risposte possibili? I ricercatori potrebbero perdere qualcosa di importante limitando le risposte a questi cinque? L'alternativa alle domande chiuse è una domanda di indagine a risposta aperta. Ecco la stessa domanda posta in una forma aperta:

"La prossima domanda è sul tema del lavoro. Le persone cercano cose diverse in un posto di lavoro. Che cosa la maggior parte preferisce in un lavoro? "

Sebbene queste due domande appaiano abbastanza simili, un esperimento di sondaggio di Howard Schuman e Stanley Presser (1979) rivelato che possono produrre risultati molto diversi: quasi il 60% delle risposte alla domanda aperta non sono incluse nelle cinque risposte create dai ricercatori ( figura 3.9).

Figura 3.9: i risultati di un esperimento di sondaggio mostrano che le risposte possono dipendere dal fatto che la domanda venga posta in forma chiusa o aperta. Adattato da Schuman and Presser (1979) , tabella 1.

Sebbene le domande aperte e chiuse possano fornire informazioni abbastanza diverse ed entrambe erano popolari nei primi giorni della ricerca sui sondaggi, le domande chiuse hanno finito per dominare il campo. Questo dominio non è dovuto al fatto che le domande chiuse hanno dimostrato di fornire una misurazione migliore, ma piuttosto perché sono molto più facili da usare; il processo di analisi delle domande aperte è soggetto a errori e costoso. L'allontanamento dalle domande aperte è sfortunato perché sono proprio le informazioni che i ricercatori non sapevano in anticipo che possono essere le più preziose.

La transizione da indagini gestite da persone a computer, tuttavia, suggerisce una nuova via d'uscita da questo vecchio problema. E se ora potessimo avere domande sul sondaggio che combinano le migliori caratteristiche di entrambe le domande aperte e chiuse? Cioè, e se potessimo avere un sondaggio che sia aperto a nuove informazioni e produca risposte facili da analizzare? Questo è esattamente quello che Karen Levy ed io (2015) abbiamo provato a creare.

In particolare, Karen e io pensavamo che i siti web che raccolgono e curano i contenuti generati dagli utenti potrebbero essere in grado di informare la progettazione di nuovi tipi di sondaggi. Siamo stati particolarmente ispirati da Wikipedia, un meraviglioso esempio di un sistema aperto e dinamico basato su contenuti generati dagli utenti, quindi abbiamo chiamato il nostro nuovo sondaggio un sondaggio wiki . Proprio come Wikipedia si evolve nel tempo sulla base delle idee dei suoi partecipanti, abbiamo immaginato un sondaggio che si evolva nel tempo in base alle idee dei suoi partecipanti. Karen e io abbiamo sviluppato tre proprietà che i sondaggi wiki dovrebbero soddisfare: dovrebbero essere avidi, collaborativi e adattivi. Quindi, con un team di sviluppatori web, abbiamo creato un sito Web in grado di eseguire sondaggi wiki: www.allourideas.org .

Il processo di raccolta dei dati in un sondaggio wiki è illustrato da un progetto che abbiamo fatto con l'ufficio del sindaco di New York City per integrare le idee dei residenti in PlaNYC 2030, il piano di sostenibilità a livello cittadino di New York. Per iniziare il processo, l'Ufficio del Sindaco ha generato un elenco di 25 idee basate sul loro precedente raggio di azione (ad es. "Richiede tutti i grandi edifici per rendere certi aggiornamenti di efficienza energetica" e "Insegna ai bambini le questioni verdi come parte del curriculum scolastico"). Usando queste 25 idee come semi, l'ufficio del sindaco ha posto la domanda "quale pensi sia un'idea migliore per creare una città più verde e più grande di New York?" Agli intervistati è stata presentata una coppia di idee (ad esempio "Open schoolyards across the city" come campi da gioco pubblici "e" Aumentare piantagioni di alberi mirate in quartieri con alti tassi di asma "), e è stato chiesto loro di scegliere tra loro (figura 3.10). Dopo aver scelto, gli intervistati sono stati immediatamente presentati con un altro paio di idee selezionate a caso. Sono stati in grado di continuare a fornire informazioni sulle loro preferenze fino a quando hanno desiderato o votando o scegliendo "Non posso decidere". Fondamentalmente, gli intervistati sono stati in grado di contribuire con le proprie idee, che in attesa di approvazione da parte l'ufficio del sindaco divenne parte del pool di idee da presentare agli altri. Pertanto, le domande che i partecipanti hanno ricevuto sono state aperte e chiuse contemporaneamente.

Figura 3.10: interfaccia per un sondaggio wiki. Il pannello (a) mostra la schermata di risposta e il pannello (b) mostra la schermata dei risultati. Riprodotto con il permesso di Salganik and Levy (2015) , figura 2.

L'ufficio del sindaco ha lanciato il suo sondaggio wiki nell'ottobre 2010 in concomitanza con una serie di riunioni della comunità per ottenere il feedback dei residenti. Nel corso di circa quattro mesi, 1436 intervistati hanno contribuito 31.893 risposte e 464 nuove idee. Criticamente, 8 delle 10 migliori idee di punteggio sono state caricate dai partecipanti piuttosto che essere parte del set di idee di seme dell'Ufficio del Sindaco. E, come descriviamo nel nostro articolo, questo stesso modello, con idee caricate che ottengono punteggi migliori rispetto alle idee seme, accade in molte indagini wiki. In altre parole, essendo aperti a nuove informazioni, i ricercatori sono in grado di apprendere cose che sarebbero state perse utilizzando approcci più chiusi.

Oltre ai risultati di queste indagini specifiche, il nostro progetto di indagine wiki illustra anche come la struttura dei costi della ricerca digitale significhi che i ricercatori possano ora interagire con il mondo in modi leggermente diversi. I ricercatori universitari sono ora in grado di costruire sistemi reali che possono essere utilizzati da molte persone: abbiamo ospitato oltre 10.000 sondaggi wiki e raccolto oltre 15 milioni di risposte. Questa capacità di creare qualcosa che può essere usato su vasta scala deriva dal fatto che una volta che il sito web è stato costruito, non costa praticamente nulla per renderlo liberamente disponibile per tutti nel mondo (ovviamente, questo non sarebbe vero se avessimo un umano -interviste ministeriali). Inoltre, questa scala consente diversi tipi di ricerca. Ad esempio, queste 15 milioni di risposte, così come il nostro flusso di partecipanti, forniscono un prezioso banco di prova per la futura ricerca metodologica. Descriverò ulteriori informazioni sulle altre opportunità di ricerca create dalle strutture di costo dell'era digitale, in particolare i dati a costo zero, quando discuto degli esperimenti nel capitolo 4.