3.5.2 enquêtes Wiki

Enquêtes Wiki permettent de nouveaux hybrides de questions fermées et ouvertes.

En plus de poser des questions à des moments plus naturels et dans des contextes plus naturels, la nouvelle technologie nous permet également de changer la forme des questions. La plupart des questions du sondage sont fermées, les répondants choisissant parmi un ensemble fixe de choix écrits par des chercheurs. Il s'agit d'un processus qu'un chercheur de premier plan appelle «mettre des mots dans la bouche des gens». Par exemple, voici une question de sondage fermée:

"Cette prochaine question concerne le travail. Voulez-vous s'il vous plaît regarder cette carte et dites-moi quelle chose sur cette liste vous préféreriez le plus dans un emploi?

1. Revenu élevé
2. Pas de danger d'être licencié
3. Les heures de travail sont courtes, beaucoup de temps libre
4. Chances d'avancement
5. Le travail est important et donne un sentiment d'accomplissement. "

Mais sont-ce les seules réponses possibles? Les chercheurs pourraient-ils manquer quelque chose d'important en limitant les réponses à ces cinq questions? L'alternative aux questions fermées est une question d'enquête ouverte. Voici la même question posée sous une forme ouverte:

"La prochaine question est l'objet de travaux. Les gens recherchent des choses différentes dans un emploi. Que feriez-vous dans la plupart préfèrent un emploi? "

Bien que ces deux questions semblent assez similaires, Howard Schuman et Stanley Presser (1979) montré qu'ils pouvaient produire des résultats très différents: près de 60% des réponses à la question ouverte ne sont pas incluses dans les cinq réponses créées par les chercheurs ( figure 3.9).

Figure 3.9: Résultats d'une expérience d'enquête montrant que les réponses peuvent dépendre du fait que la question soit posée sous forme fermée ou ouverte. Adapté de Schuman and Presser (1979) , tableau 1.

Bien que les questions ouvertes et fermées puissent donner des informations très différentes et que les deux étaient populaires au début de la recherche par sondage, des questions fermées ont dominé le domaine. Cette domination n'est pas due au fait que les questions fermées ont été prouvées pour fournir une meilleure mesure, mais plutôt parce qu'elles sont beaucoup plus faciles à utiliser; le processus d'analyse des questions ouvertes est sujette aux erreurs et coûteux. L'abandon des questions ouvertes est regrettable car ce sont précisément les informations que les chercheurs ne savaient pas à l'avance qui peuvent être les plus utiles.

La transition des enquêtes administrées par l'homme vers des enquêtes administrées par ordinateur suggère cependant une nouvelle façon de sortir de ce vieux problème. Et si nous pouvions maintenant avoir des questions d'enquête qui combinent les meilleures caractéristiques des questions ouvertes et fermées? Autrement dit, que se passerait-il si nous pouvions avoir un sondage ouvert à de nouvelles informations et produisant des réponses faciles à analyser? C'est exactement ce que Karen Levy et moi-même (2015) avons essayé de créer.

En particulier, Karen et moi avons pensé que les sites Web qui recueillent et conservent le contenu généré par les utilisateurs pourraient être en mesure d'éclairer la conception de nouveaux types d'enquêtes. Nous avons été particulièrement inspirés par Wikipédia, un merveilleux exemple d'un système ouvert et dynamique alimenté par du contenu généré par les utilisateurs. Nous avons donc appelé notre sondage une enquête wiki . Tout comme Wikipédia évolue au fil du temps sur la base des idées de ses participants, nous avons imaginé une enquête qui évolue au fil du temps sur la base des idées de ses participants. Karen et moi avons développé trois propriétés que les enquêtes wiki devraient satisfaire: elles devraient être gourmandes, collaboratives et adaptatives. Ensuite, avec une équipe de développeurs Web, nous avons créé un site Web qui pourrait faire fonctionner les sondages wiki: www.allourideas.org .

Le processus de collecte de données dans un sondage wiki est illustré par un projet que nous avons mené avec le bureau du maire de New York afin d'intégrer les idées des habitants dans PlaNYC 2030, le plan de développement durable de la ville de New York. Pour commencer le processus, le bureau du maire a produit une liste de 25 idées basées sur leur portée précédente (par exemple, «Exiger que tous les grands bâtiments améliorent leur efficacité énergétique» et «Enseigner aux enfants les questions écologiques dans le programme scolaire»). En utilisant ces 25 idées comme des graines, le bureau du maire a posé la question «Quelle est la meilleure idée pour créer une ville plus verte et plus grande à New York?» Les répondants ont reçu une paire d'idées (par exemple, «Des cours ouvertes à travers la ville en tant que terrains de jeux publics »et« Augmenter les plantations d'arbres ciblées dans les quartiers où les taux d'asthme sont élevés »), et on leur a demandé de choisir entre elles (figure 3.10). Après avoir choisi, les répondants ont immédiatement reçu une autre paire d'idées choisies au hasard. Ils ont pu continuer à fournir des informations sur leurs préférences aussi longtemps qu'ils le souhaitaient en votant ou en choisissant «Je ne peux pas décider». Fondamentalement, à tout moment, les répondants pouvaient apporter leurs propres idées, ce qui - en attente d'approbation par le bureau du maire-fait partie du pool d'idées à présenter à d'autres. Ainsi, les questions reçues par les participants étaient à la fois ouvertes et fermées simultanément.

Figure 3.10: Interface pour un sondage wiki Le panneau (a) montre l'écran de réponse et le panneau (b) montre l'écran de résultat. Reproduit avec la permission de Salganik and Levy (2015) , figure 2.

Le bureau du maire a lancé son sondage wiki en octobre 2010 en conjonction avec une série de réunions communautaires pour obtenir des commentaires des résidents. Sur environ quatre mois, 1 436 répondants ont contribué à 31 893 réponses et 464 nouvelles idées. De manière critique, 8 des 10 meilleures idées de notation ont été téléchargées par les participants plutôt que de faire partie de l'ensemble des idées de départ du bureau du maire. Et, comme nous le décrivons dans notre article, ce même modèle, avec des idées téléchargées qui marquent mieux que des idées de graines, se produit dans de nombreux sondages wiki. En d'autres termes, en étant ouverts à de nouvelles informations, les chercheurs peuvent apprendre des choses qui auraient été manquées en utilisant des approches plus fermées.

Au-delà des résultats de ces enquêtes spécifiques, notre projet de sondage wiki illustre également comment la structure des coûts de la recherche numérique signifie que les chercheurs peuvent maintenant s'engager de différentes manières dans le monde. Les chercheurs universitaires sont maintenant capables de construire de véritables systèmes qui peuvent être utilisés par de nombreuses personnes: nous avons hébergé plus de 10 000 sondages wiki et recueilli plus de 15 millions de réponses. Cette capacité à créer quelque chose qui peut être utilisé à grande échelle vient du fait qu'une fois que le site a été construit, il ne coûte pratiquement rien de le rendre librement accessible à tous dans le monde (bien sûr, cela ne serait pas vrai -administered interviews). En outre, cette échelle permet différents types de recherche. Par exemple, ces 15 millions de réponses, ainsi que notre flux de participants, constituent un banc d'essai précieux pour la recherche méthodologique future. Je vais en dire plus sur les autres opportunités de recherche créées par les structures de coûts numériques, en particulier les données à coût variable nul, lorsque je parle des expériences du chapitre 4.