3.5.2 encuestas Wiki
Encuestas wiki permiten nuevos híbridos de preguntas cerradas y abiertas.
Además de hacer preguntas en tiempos más naturales y en contextos más naturales, las nuevas tecnologías también nos permiten cambiar la forma de las preguntas. La mayoría de las preguntas de la encuesta están cerradas y los encuestados eligen entre un conjunto fijo de opciones escritas por los investigadores. Este es un proceso que un destacado investigador de encuestas llama "poner palabras en boca de la gente". Por ejemplo, aquí hay una pregunta de la encuesta cerrada:
"Esta próxima pregunta es sobre el tema del trabajo. ¿Por favor, mire esta tarjeta y dígame qué cosa en esta lista que lo más prefieren en un trabajo?
- Altos ingresos
- No hay peligro de ser despedido
- Las horas de trabajo son cortas, mucho tiempo libre
- Posibilidades de avance
- El trabajo es importante y da una sensación de logro ".
¿Pero son estas las únicas respuestas posibles? ¿Pueden los investigadores perder algo importante al limitar las respuestas a estos cinco? La alternativa a las preguntas cerradas es una pregunta de encuesta abierta. Aquí está la misma pregunta formulada en forma abierta:
"La siguiente pregunta es sobre el tema de trabajo. La gente busca cosas diferentes en un puesto de trabajo. ¿Qué es lo que más prefieren en un trabajo? "
Aunque estas dos preguntas parecen bastante similares, un experimento de Howard Schuman y Stanley Presser (1979) reveló que pueden producir resultados muy diferentes: casi el 60% de las respuestas a la pregunta abierta no se incluyen en las cinco respuestas creadas por el investigador ( figura 3.9).
Figura 3.9: Resultados de un experimento de encuesta que muestra que las respuestas pueden depender de si la pregunta se realiza en forma cerrada o abierta. Adaptado de Schuman and Presser (1979) , tabla 1.
Aunque las preguntas abiertas y cerradas pueden arrojar información bastante diferente y ambas fueron populares en los primeros días de la investigación de la encuesta, las preguntas cerradas han llegado a dominar el campo. Esta dominación no se debe a que las preguntas cerradas han demostrado proporcionar una mejor medición, sino más bien porque son mucho más fáciles de usar; el proceso de análisis de preguntas abiertas es propenso a errores y costoso. El alejamiento de las preguntas abiertas es desafortunado porque es precisamente la información que los investigadores no supieron con anticipación la que puede ser la más valiosa.
Sin embargo, la transición de las encuestas administradas por humanos a las administradas por computadora sugiere una nueva forma de salir de este viejo problema. ¿Qué pasaría si ahora pudiéramos tener preguntas de la encuesta que combinen las mejores características de las preguntas abiertas y cerradas? Es decir, ¿qué pasaría si pudiéramos tener una encuesta que esté abierta a nueva información y produzca respuestas fáciles de analizar? Eso es exactamente lo que Karen Levy y yo (2015) hemos intentado crear.
En particular, Karen y yo pensamos que los sitios web que recopilan y seleccionan contenido generado por el usuario podrían ser capaces de informar el diseño de nuevos tipos de encuestas. Fuimos particularmente inspirados por Wikipedia, un maravilloso ejemplo de un sistema abierto y dinámico impulsado por el contenido generado por el usuario, por lo que llamamos a nuestra nueva encuesta una encuesta wiki . Del mismo modo que la Wikipedia evoluciona a lo largo del tiempo en función de las ideas de sus participantes, imaginamos una encuesta que evoluciona con el tiempo según las ideas de sus participantes. Karen y yo desarrollamos tres propiedades que las encuestas wiki deberían satisfacer: deberían ser codiciosas, colaborativas y adaptativas. Luego, con un equipo de desarrolladores web, creamos un sitio web que podría ejecutar encuestas wiki_: www.allourideas.org .
El proceso de recopilación de datos en una encuesta wiki se ilustra con un proyecto que hicimos con la Alcaldía de Nueva York para integrar las ideas de los residentes en PlaNYC 2030, el plan de sostenibilidad de la ciudad de Nueva York. Para comenzar el proceso, la Alcaldía generó una lista de 25 ideas basadas en su alcance anterior (por ejemplo, "Exigir que todos los grandes edificios realicen actualizaciones de eficiencia energética" y "Enseñar a los niños sobre cuestiones ecológicas como parte del plan de estudios"). Usando estas 25 ideas como semillas, la Alcaldía formuló la pregunta "¿Cuál crees que es una mejor idea para crear una ciudad de Nueva York más verde y mejor?". A los encuestados se les presentaron un par de ideas (p. Ej., "Patios escolares abiertos en toda la ciudad" como áreas de juego públicas "y" aumentar las plantaciones de árboles en lugares con altos índices de asma "), y se les pidió elegir entre ellas (figura 3.10). Después de elegir, a los encuestados se les presentó inmediatamente otro par de ideas seleccionadas al azar. Pudieron seguir contribuyendo con información sobre sus preferencias durante el tiempo que quisieron, ya sea mediante votación o eligiendo "No puedo decidir". Crucialmente, en cualquier punto, los encuestados pudieron aportar sus propias ideas, que, en espera de aprobación por parte de la Alcaldía se convirtió en parte del conjunto de ideas que se presentarán a otros. Por lo tanto, las preguntas que los participantes recibieron fueron abiertas y cerradas simultáneamente.
Figura 3.10: Interfaz para una encuesta wiki. El panel (a) muestra la pantalla de respuesta y el panel (b) muestra la pantalla de resultados. Reproducido con permiso de Salganik and Levy (2015) , figura 2.
La Alcaldía lanzó su encuesta wiki en octubre de 2010 junto con una serie de reuniones comunitarias para obtener comentarios de los residentes. Durante aproximadamente cuatro meses, 1.436 encuestados contribuyeron con 31.893 respuestas y 464 ideas nuevas. Críticamente, 8 de las 10 mejores ideas de puntuación fueron subidas por los participantes en lugar de ser parte del conjunto de ideas iniciales de la Oficina del Alcalde. Y, como describimos en nuestro documento, este mismo patrón, con ideas cargadas que obtienen mejores puntajes que las ideas iniciales, ocurre en muchas encuestas wiki. En otras palabras, al estar abiertos a la información nueva, los investigadores pueden aprender cosas que se habrían pasado por alto utilizando enfoques más cerrados.
Más allá de los resultados de estas encuestas específicas, nuestro proyecto de encuesta wiki también ilustra cómo la estructura de costos de la investigación digital significa que los investigadores ahora pueden interactuar con el mundo de maneras algo diferentes. Los investigadores académicos ahora pueden construir sistemas reales que pueden ser utilizados por muchas personas: hemos alojado más de 10,000 encuestas wiki y hemos recopilado más de 15 millones de respuestas. Esta capacidad de crear algo que se puede usar a escala proviene del hecho de que una vez que se ha construido el sitio web, básicamente no cuesta nada hacerlo disponible libremente para todos en el mundo (por supuesto, esto no sería cierto si tuviéramos entrevistas dirigidas). Además, esta escala permite diferentes tipos de investigación. Por ejemplo, estas 15 millones de respuestas, así como nuestra corriente de participantes, proporcionan un valioso banco de pruebas para futuras investigaciones metodológicas. Describiré más sobre otras oportunidades de investigación creadas por las estructuras de costos de la era digital, particularmente los datos de costo variable cero, cuando analizo los experimentos en el capítulo 4.
