3.5.2 enquestes Wiki

Enquestes wiki permeten nous híbrids de preguntes tancades i obertes.

A més de fer preguntes en moments més naturals i en contextos més naturals, la nova tecnologia també ens permet canviar la forma de les preguntes. La majoria de les preguntes de l'enquesta es tanquen, i els enquestats trien entre un conjunt fix d'opcions escrites per investigadors. Aquest és un procés que un prominent investigador d'enquestes diu "posar paraules a la boca de la gent". Per exemple, aquí teniu una pregunta de l'enquesta tancada:

"Aquesta pregunta següent és sobre el tema del treball. Podria mirar aquesta targeta i dir-me quina és la llista que preferiu més en una feina?

1. Ingressos elevats
2. No hi ha cap perill de ser acomiadat
3. Les hores de treball són curtes, molt de temps lliure
4. Possibilitats d'avançar
5. El treball és important i dóna una sensació de realització ".

Però són aquestes les úniques respostes possibles? Pot ser que els investigadors faltin alguna cosa important limitant les respostes a aquests cinc? L'alternativa a preguntes tancades és una pregunta d'enquestes de composició oberta. Aquí es fa la mateixa pregunta en forma oberta:

"La següent pregunta és sobre el tema de treball. La gent busca coses diferents en un lloc de treball. Què és el que més prefereixen en un treball? "

Tot i que aquestes dues preguntes semblen semblants, un experiment d'enquestes de Howard Schuman i Stanley Presser (1979) revelar que poden produir resultats molt diferents: gairebé el 60% de les respostes a la pregunta oberta no s'inclouen en les cinc respostes creades per l'investigador ( figura 3.9).

Figura 3.9: Resultats d'un experiment d'enquesta que mostra que les respostes poden dependre de si es fa la pregunta en forma oberta o tancada. Adaptat de Schuman and Presser (1979) , taula 1.

Tot i que les preguntes obertes i tancades poden proporcionar informació força diferent i ambdues eren populars en els primers dies de la investigació de l'enquesta, han arribat preguntes tancades per dominar el camp. Aquest domini no es deu a que es demostri que les preguntes tancades proporcionen una millor mesura, sinó que són molt més fàcils d'usar; el procés d'anàlisi de preguntes obertes és propens a errors i costosos. Allunyar-se de les preguntes obertes és lamentable perquè és precisament la informació que els investigadors no sabien per endavant que poden ser els més valuosos.

Tanmateix, la transició de les enquestes administrades per humans a les administracions informàtiques suggereix una nova sortida d'aquest antic problema. Què passa si ara podríem tenir preguntes d'enquesta que combinin les millors funcions de preguntes obertes i tancades? És a dir, i si poguéssim tenir una enquesta que ambdós estan oberts a la nova informació i produeix respostes fàcils d'analitzar? Això és exactament el que Karen Levy i jo (2015) hem intentat crear.

En particular, Karen i jo pensaven que els llocs web que recopilen i cuiden contingut generat per l'usuari podrien informar el disseny de nous tipus d'enquestes. Ens vam inspirar especialment a Wikipedia: un meravellós exemple d'un sistema obert i dinàmic, impulsat pel contingut generat per l'usuari, així que vam cridar a la nostra nova enquesta una enquesta wiki . De la mateixa manera que Wikipedia evoluciona amb el temps a partir de les idees dels seus participants, imaginem una enquesta que evoluciona amb el temps a partir de les idees dels seus participants. Karen i jo vam desenvolupar tres propietats que les enquestes de wiki haurien de satisfer: han de ser avaricioses, col·laboratives i adaptables. A continuació, amb un equip de desenvolupadors web, hem creat un lloc web que podria publicar enquestes wiki: www.allourideas.org .

El procés de recollida de dades en una enquesta de wiki s'il·lustra amb un projecte que vam fer amb l'Oficina de l'Alcaldia de la ciutat de Nova York per integrar les idees dels residents en PlaNYC 2030, el pla de sostenibilitat de tota la ciutat de Nova York. Per començar el procés, l'Oficina de l'Alcalde va generar una llista de 25 idees basades en la seva difusió prèvia (per exemple, "Cal que tots els grans edificis realitzin certes millores en l'eficiència energètica" i "Ensenyi als nens sobre temes verds com a part del currículum escolar"). Amb aquestes 25 idees com a llavors, l'Oficina de l'alcalde va fer la pregunta "Què creu que és una millor idea per crear una ciutat de Nova York més ecològica i més gran?" Es va presentar un parell d'idees als participants (p. Ex., "Estades oberts a tota la ciutat" com a parcs públics "i" Augmentar les plantacions d'arbres orientades en els barris amb altes taxes d'asma "), i se'ls va demanar que triï entre ells (figura 3.10). Després de triar, els enquestats es van presentar immediatament amb un altre parell d'idees aleatòriament seleccionat. Van poder continuar aportant informació sobre les seves preferències durant el temps que volguessin per votar o escollint "No puc decidir". En qualsevol moment, els enquestats van poder contribuir amb les seves pròpies idees, que pendent d'aprovació l'Oficina de l'Alcalde, es va convertir en part del conjunt d'idees que es presentaran als altres. Per tant, les preguntes que van rebre els participants van ser oberts i tancades simultàniament.

Figura 3.10: Interfície per a una enquesta wiki. El tauler (a) mostra la pantalla de resposta i el tauler (b) mostra la pantalla de resultats. Reproduït amb permís de Salganik and Levy (2015) , figura 2.

L'Oficina de l'alcalde va posar en marxa la seva enquesta wiki l'octubre de 2010, juntament amb una sèrie de trobades comunitàries per obtenir comentaris de residents. Al llarg d'uns quatre mesos, 1.436 enquestats van aportar 31.893 respostes i 464 noves idees. Críticament, 8 de les 10 millors idees de puntuació van ser pujades pels participants en lloc de formar part del conjunt d'idees de sembra de l'Alcaldia. I, tal com es descriu en el nostre article, aquest mateix patró, amb idees pujades que anoten millor que les idees de llavors, passa en moltes enquestes wiki. En altres paraules, en obrir-se a una nova informació, els investigadors són capaços d'aprendre coses que s'hagin perdut utilitzant enfocaments més tancats.

Més enllà dels resultats d'aquestes enquestes específiques, el nostre projecte d'enquesta wiki també il·lustra com l'estructura de costos de la recerca digital fa que els investigadors puguin comprometre's amb el món d'una manera diferent. Els investigadors acadèmics ara poden construir sistemes reals que poden ser utilitzats per moltes persones: hem allotjat més de 10.000 enquestes wiki i han recollit més de 15 milions de respostes. Aquesta capacitat de crear alguna cosa que es pot utilitzar a escala prové del fet que una vegada que s'ha creat el lloc web, costa bàsicament res per fer-lo lliurement disponible per a tothom del món (per descomptat, això no seria veritat si teníem humans -entrevistes administrates). A més, aquesta escala permet diferents tipus de recerca. Per exemple, aquests 15 milions de respostes, així com el nostre flux de participants, proporcionen un test bed valuós per a futures investigacions metodològiques. Vaig a descriure més sobre altres oportunitats de recerca que es creen per estructures de costos d'edat digital -especialment dades de cost variable zero- quan parlo d'experiments al capítol 4.