3.5.2 Wiki - Umfragen
Wiki - Umfragen ermöglichen , neue Hybride von geschlossenen und offenen Fragen.
Zusätzlich zu Fragen zu natürlichen Zeiten und in natürlicheren Kontexten ermöglicht uns die neue Technologie auch, die Form der Fragen zu ändern. Die meisten Befragungsfragen sind geschlossen, und die Befragten wählen aus einer festen Auswahl von Forschern. Dies ist ein Prozess, den ein prominenter Umfrageforscher "Worte in den Mund nimmt". Zum Beispiel hier eine geschlossene Umfragefrage:
"Diese nächste Frage betrifft das Thema Arbeit. Würden Sie sich bitte diese Karte ansehen und mir sagen, welches Ding auf dieser Liste Sie am liebsten in einem Job hätten?
- Hohes Einkommen
- Keine Gefahr, gefeuert zu werden
- Die Arbeitszeiten sind kurz, viel Freizeit
- Chancen für den Aufstieg
- Die Arbeit ist wichtig und vermittelt ein Gefühl der Leistung. "
Aber sind das die einzig möglichen Antworten? Könnten Forscher etwas Wichtiges verpassen, indem sie die Antworten auf diese fünf einschränken? Die Alternative zu geschlossenen Fragen ist eine offene Umfragefrage. Hier ist die gleiche Frage in einer offenen Form gestellt:
"Das nächste Frage ist, über das Thema der Arbeit. Die Menschen suchen für verschiedene Dinge in einem Job. Was würden Sie am meisten in einem Job bevorzugen? "
Obwohl diese beiden Fragen sehr ähnlich erscheinen, ergab ein Umfrageexperiment von Howard Schuman und Stanley Presser (1979) , dass sie sehr unterschiedliche Ergebnisse liefern können: Fast 60% der Antworten auf die offene Frage sind in den fünf von Forschern erstellten Antworten nicht enthalten ( Abbildung 3.9).
Abbildung 3.9: Ergebnisse eines Umfrageexperiments, die zeigen, dass die Antworten davon abhängen können, ob die Frage in geschlossener oder offener Form gestellt wird. Nach Schuman and Presser (1979) , Tabelle 1.
Obwohl offene und abgeschlossene Fragen sehr unterschiedliche Informationen liefern können und beide in den Anfängen der Umfrageforschung populär waren, dominieren geschlossene Fragen das Feld. Diese Beherrschung liegt nicht daran, dass geschlossene Fragen nachweislich eine bessere Messung liefern, sondern weil sie viel einfacher zu verwenden sind; Der Prozess der Analyse offener Fragen ist fehleranfällig und teuer. Die Abkehr von offenen Fragen ist bedauerlich, denn genau die Informationen, die die Forscher im Voraus nicht wussten, können am wertvollsten sein.
Der Übergang von von Menschen verwalteten zu computergesteuerten Umfragen deutet jedoch auf einen neuen Ausweg aus diesem alten Problem hin. Was wäre, wenn wir jetzt Umfragefragen haben könnten, die die besten Eigenschaften von offenen und geschlossenen Fragen kombinieren? Was wäre, wenn wir eine Umfrage durchführen könnten, die offen für neue Informationen ist und leicht zu analysierende Antworten liefert? Genau das haben Karen Levy und ich (2015) versucht zu kreieren.
Insbesondere waren Karen und ich der Meinung, dass Websites, die nutzergenerierte Inhalte sammeln und kuratieren, möglicherweise in der Lage sind, das Design neuer Arten von Umfragen zu beeinflussen. Wir haben uns besonders von Wikipedia inspirieren lassen - ein wunderbares Beispiel für ein offenes, dynamisches System, das von nutzergenerierten Inhalten angetrieben wird. Deshalb haben wir unsere neue Umfrage als Wiki-Umfrage bezeichnet . So wie sich Wikipedia im Laufe der Zeit auf der Grundlage der Ideen seiner Teilnehmer entwickelt, haben wir uns eine Umfrage ausgedacht, die sich im Laufe der Zeit auf der Grundlage der Ideen ihrer Teilnehmer entwickelt. Karen und ich entwickelten drei Eigenschaften, die Wiki-Umfragen erfüllen sollten: Sie sollten gierig, kollaborativ und anpassungsfähig sein. Dann haben wir mit einem Team von Webentwicklern eine Website erstellt, auf der Wiki-Umfragen laufen könnten: www.allourideas.org .
Der Datenerhebungsprozess in einer Wiki-Umfrage wird durch ein Projekt illustriert, das wir mit dem Bürgermeisteramt von New York City durchgeführt haben, um die Ideen der Bewohner in PlaNYC 2030, New Yorks stadtweiten Nachhaltigkeitsplan, zu integrieren. Zu Beginn des Prozesses erstellte das Büro des Bürgermeisters eine Liste von 25 Ideen auf der Grundlage ihrer bisherigen Reichweite (z. B. "Erfordert alle großen Gebäude, um Verbesserungen der Energieeffizienz vorzunehmen" und "Kinder über grüne Themen als Teil des Schulunterrichts zu unterrichten"). Mit diesen 25 Ideen als Samen stellte das Büro des Bürgermeisters die Frage: "Was halten Sie für eine bessere Idee, um ein grüneres, größeres New York City zu schaffen?" Den Befragten wurden Ideen präsentiert (z. B. "Offene Schulhöfe in der Stadt") als öffentliche Spielplätze "und" gezielte Baumpflanzungen in Gegenden mit hohen Asthmaraten erhöhen ") und wurden gebeten, zwischen ihnen zu wählen (Abbildung 3.10). Nach der Auswahl wurde den Befragten sofort ein weiteres zufällig ausgewähltes Ideenpaar präsentiert. Sie konnten weiterhin so lange über ihre Präferenzen berichten, wie sie wollten, entweder indem sie abstimmten oder "Ich kann mich nicht entscheiden" auswählten. Entscheidend war, dass die Befragten zu jedem Zeitpunkt ihre eigenen Ideen einbringen konnten, die bis zur Genehmigung durch das Büro des Bürgermeisters wurde Teil des Ideenpools, der anderen vorgestellt wurde. Daher wurden die Fragen, die die Teilnehmer erhielten, gleichzeitig offen und geschlossen.
Abbildung 3.10: Schnittstelle für eine Wiki-Umfrage. Panel (a) zeigt den Antwortbildschirm und Panel (b) zeigt den Ergebnisbildschirm. Reproduziert mit Genehmigung von Salganik and Levy (2015) , Abbildung 2.
Das Büro des Bürgermeisters startete seine Wiki-Umfrage im Oktober 2010 in Verbindung mit einer Reihe von Community-Meetings, um Feedback von den Einwohnern zu erhalten. Über vier Monate hinweg trugen 1.436 Befragte 31893 Antworten und 464 neue Ideen bei. Kritisch, 8 der Top-10-Scoring-Ideen wurden von den Teilnehmern hochgeladen, anstatt Teil der Reihe von Ideen aus dem Büro des Bürgermeisters zu sein. Und, wie wir in unserem Artikel beschrieben haben, das gleiche Muster, mit hochgeladenen Ideen besser als Samen Ideen, geschieht in vielen Wiki-Umfragen. Mit anderen Worten: Durch die Offenheit für neue Informationen sind Forscher in der Lage, Dinge zu lernen, die bei der Verwendung geschlossener Ansätze verpasst worden wären.
Über die Ergebnisse dieser spezifischen Umfragen hinaus zeigt unser Wiki-Umfrage-Projekt auch, wie die Kostenstruktur der digitalen Forschung bedeutet, dass Forscher jetzt auf verschiedene Weise mit der Welt interagieren können. Akademische Forscher sind jetzt in der Lage, echte Systeme zu bauen, die von vielen Menschen genutzt werden können: Wir haben mehr als 10.000 Wiki-Umfragen gehostet und mehr als 15 Millionen Antworten gesammelt. Diese Fähigkeit, etwas zu schaffen, das im großen Maßstab genutzt werden kann, kommt daher, dass es nach dem Aufbau der Website im Grunde nichts kostet, es jedermann weltweit frei zugänglich zu machen (das wäre natürlich nicht wahr, wenn wir Menschen hätten) -verwaltete Interviews). Darüber hinaus ermöglicht diese Skala verschiedene Arten von Forschung. Zum Beispiel bieten diese 15 Millionen Antworten sowie unser Teilnehmerstrom ein wertvolles Testfeld für zukünftige Methodenforschung. Ich werde mehr über andere Forschungsmöglichkeiten, die durch Kostenstrukturen im digitalen Zeitalter entstehen - insbesondere Daten zu variablen Kosten - beschreiben, wenn ich in Kapitel 4 über Experimente spreche.
