3.5.2ウィキ調査

ウィキ調査は、閉鎖とオープン質問の新しいハイブリッドを可能にします。

より自然な時間に、より自然な文脈で質問することに加えて、新しい技術により、質問の形式を変更することもできます。ほとんどの調査質問は閉鎖されており、回答者は研究者によって書かれた固定の選択肢から選択します。これは、著名な調査研究者が「人の口に言葉を入れる」というプロセスです。たとえば、閉じたアンケートの質問です:

"次の質問は仕事のテーマです。あなたはこのカードを見て、あなたが仕事で最も好むだろうこのリストのどのものを教えてください?

  1. 高所得
  2. 解雇の危険はない
  3. 勤務時間は短く、自由時間が多い
  4. 進歩の可能性
  5. 仕事は重要であり、達成感を与える。

しかしこれらは唯一可能な答えですか?研究者はこれらの5つの反応を制限することで何か重要なものを見逃しているだろうか?閉鎖された質問の代わりに、開放的な質問があります。開いた形式で質問されたのと同じ質問があります:

「この次の質問は、作業の対象になります。人々は仕事で別のものを探してください。あなたは、ほとんどの仕事に何を好むだろう?」

これら2つの質問は非常によく似ているが、Howard SchumanとStanley Presser (1979)による調査の結果、彼らは非常に異なる結果を生み出すことができることを明らかにした。すなわち、オープン質問に対する回答の60%近くが研究者が作成した5人の回答図3.9)。

図3.9:アンケートの結果は、回答が閉じた状態であるか開いている状態で質問されているかによって応答が異なることを示しています。 Schuman and Presser(1979)の表1から適応される。

図3.9:アンケートの結果は、回答が閉じた状態であるか開いている状態で質問されているかによって応答が異なることを示しています。 Schuman and Presser (1979)表1から適応される。

開かれた質問と閉鎖された質問は全く異なる情報を生み出すことができ、両者は調査研究の初期に人気があったが、閉鎖的な質問がこの分野を支配するようになった。この優位性は、閉鎖された質問がより良い測定を提供することが証明されているのではなく、はるかに使いやすいためです。オープンエンドの質問を分析するプロセスは誤りがちで高価です。未解決の質問からの離脱は、研究者が事前に知らなかった情報が正確には最も価値のある情報であるため、残念です。

しかし、人間が管理する調査からコンピュータ管理の調査に移行することは、この古い問題から新しい道を示唆しています。開いた質問と閉じた質問の両方の優れた機能を組み合わせたアンケートの質問を今作成できる場合はどうなりますか?つまり、新しい情報が公開されており、分析が容易な回答が得られるという調査を行うことができたらどうでしょうか?それはカレン・レヴィと私(2015)が作成しようとしたこととまったく同じです。

特に、カレンと私は、ユーザーが作成したコンテンツを収集して管理するウェブサイトが、新しいタイプのアンケートをデザインに知らせることができると考えていました。私たちは特にWikipediaに触発されました。これは、ユーザーが作成したコンテンツに基づいたオープンでダイナミックなシステムの素晴らしい例です。そこで、新しい調査をwiki調査と呼びました。ウィキペディアは、その参加者のアイデアに基づいて時間をかけて進化するのと同じように、私たちは、 その参加者のアイデアに基づいて時間をかけて進化する調査を想像しました。カレンと私は、ウィキサーベイが満たさなければならない3つの特性を開発しました。それらは貪欲で協力的で適応性があるべきです。そして、Web開発者のチームとともに、wiki surveys: www.allourideas.orgを実行できるWebサイトを作成しました。

wiki調査のデータ収集プロセスは、ニューヨーク市長のオフィスで行ったプロジェクトで説明されています。住民のアイデアをNew Yorkの都市全体の持続可能性計画であるPlaNYC 2030に統合します。このプロセスを開始するために、市長室は​​、以前のアウトリーチに基づいて25のアイデアのリストを作成しました(例えば、「すべての大きな建物に特定のエネルギー効率向上を要求する」および「学校のカリキュラムの一部として緑の問題を教える」など)。市長室は、これらの25のアイデアを種として使用して、「より緑が豊かでニューヨーク市を創造するための良いアイデアだと思いますか?」という質問をしました。回答者には、「街中のオープンな校庭「公共娯楽場として」「喘息の発生率が高い地域での樹木の植え付けを増やす」)、それらの中から選択するよう求められました(図3.10)。選択した後、回答者にはすぐに別のランダムに選択されたアイデアが提示されました。彼らは、投票によって、あるいは「私は決定できません」を選択することを望む限り、自分の嗜好に関する情報を提供し続けることができました。重要な点は、いつでも、回答者は自分のアイデアを投稿することができました。市長室は、他の人に提示されるアイデアのプールの一部となった。したがって、参加者が受け取った質問は同時に開かれ、閉じられた。

図3.10:wiki調査のインターフェースパネル(a)は応答画面を示し、パネル(b)は結果画面を示す。 Salganik and Levy(2015)の許可を得て再現されました(図2)。

図3.10:wiki調査のインターフェースパネル(a)は応答画面を示し、パネル(b)は結果画面を示す。 Salganik and Levy (2015)許可を得て再現。図2。

市長室は、住民からのフィードバックを得るための一連のコミュニティ会議と合わせて、2010年10月にWiki調査を開始しました。約4ヵ月間に、1,436人の回答者が31,893件の回答と464の新しいアイデアを寄稿しました。重要なことに、トップ10のスコアリングアイデアのうち8つは市長室の種子アイデアの一部ではなく、参加者によってアップロードされました。また、私たちの論文で説明しているように、同じアイデアは、アイデアよりも優れたアイデアをアップロードして、多くのWiki調査で発生します。言い換えれば、研究者は新しい情報を公開することで、より多くの閉じたアプローチを用いて逃してしまったことを学ぶことができます。

これらの調査の結果を超えて、私たちのWiki調査プロジェクトは、デジタル研究のコスト構造が、研究者が世界とやや異なったやり方で取り組むことができる方法を示しています。学術研究者は今、多くの人々が利用できる実際のシステムを構築することができます:私たちは10,000以上のWiki調査をホストし、1500万回以上の回答を集めました。規模で使用できるものを作成するこの能力は、ウェブサイトが構築されると、基本的には世界の誰もが自由に利用できるようにすることはありません(もちろん、人間がいればこれは当てはまりません管理されたインタビュー)。さらに、このスケールは異なる種類の研究を可能にする。例えば、これら1500万人の回答は、参加者の流れと同様に、将来の方法論的研究のための貴重なテストベッドを提供します。第4章の実験について議論するとき、デジタル時代のコスト構造、特に可変コスト・データによって生み出される他の研究機会についてより詳しく説明します。