调查维基启用封闭式和开放式问题的新的混合动力汽车。
除了在更自然的时间和更自然的环境中提问,新技术还允许我们改变问题的形式。大多数调查问题都是关闭的,受访者从研究人员编写的一组固定选择中进行选择。这是一个着名调查研究人员称之为“在人们口中说话”的过程。例如,这是一个封闭的调查问题:
“接下来的问题是关于工作的问题。请你看一下这张卡片,然后告诉我你最喜欢哪份工作?
- 高收入
- 没有被解雇的危险
- 工作时间短,有很多空闲时间
- 晋升的机会
- 这项工作很重要,给人一种成就感。“
但这些是唯一可能的答案吗?研究人员可能会通过限制对这五种问题的反应来忽略重要的事情吗?封闭式问题的替代方案是一个开放式的调查问题。这是以开放形式提出的相同问题:
“这接下来的问题是工作的主题。人们期待在工作中得到不同的东西。你会在大多数工作更喜欢?“
尽管这两个问题看起来非常相似,但Howard Schuman和Stanley Presser (1979)一项调查实验表明,它们可以产生截然不同的结果:对开放性问题的答案中有近60%未包含在五个研究人员创建的答案中(图3.9)。
虽然开放和封闭的问题可以产生完全不同的信息,并且两者在调查研究的早期都很受欢迎,但封闭式问题已成为该领域的主导。这种支配并不是因为已经证明封闭式问题可以提供更好的测量,而是因为它们更容易使用;分析开放式问题的过程容易出错并且成本高昂。摆脱悬而未决的问题是不幸的,因为正是研究人员提前不知道的信息才是最有价值的。
然而,从人工管理到计算机管理调查的过渡表明了解决这一老问题的新方法。如果我们现在可以将调查问题与开放和封闭问题的最佳特征结合起来怎么办?也就是说,如果我们可以进行调查,既可以接受新信息又可以产生易于分析的响应呢?这正是Karen Levy和我(2015)试图创造的。
特别是,Karen和我认为收集和管理用户生成内容的网站可能能够为新类型的调查设计提供信息。我们特别受到维基百科的启发 - 这是一个由用户生成的内容驱动的开放,动态系统的一个很好的例子 - 所以我们称我们的新调查为维基调查 。正如维基百科基于其参与者的想法随着时间的推移而发展,我们想象一项基于其参与者的想法随着时间的推移而发展的调查。 Karen和我开发了wiki调查应该满足的三个属性:它们应该是贪婪的,协作的和适应性的。然后,我们与一个Web开发团队一起创建了一个可以运行wiki survey_的网站: www.allourideas.org 。
维基调查中的数据收集过程通过我们与纽约市市长办公室合作的项目来说明,以便将居民的想法融入纽约全市可持续发展计划PlanYC 2030。为了开始这个过程,市长办公室根据他们之前的外展(例如,“要求所有大型建筑物进行某些能效升级”和“教育孩子们将绿色问题作为学校课程的一部分”)生成了25个想法的清单。使用这25个想法作为种子,市长办公室问了一个问题“你认为哪个更好的想法可以创造一个更环保,更大的纽约市?”受访者被提出了一对想法(例如,“城市中的公开校园”)作为公共游乐场“和”增加哮喘发病率高的社区的目标树种“,并被要求在它们之间做出选择(图3.10)。选择后,受访者立即被提出另一个随机选择的想法。只要他们希望通过投票或选择“我无法做出决定”,他们就可以继续提供有关他们偏好的信息。至关重要的是,在任何时候,受访者都能够提出他们自己的想法,这些想法正在等待批准。市长办公室 - 成为向他人展示的思想库的一部分。因此,参与者收到的问题同时是开放和封闭的。
市长办公室于2010年10月与一系列社区会议一起启动了维基调查,以获得居民反馈。在大约四个月的时间里,有1,436名受访者提供了31,893份回复和464份新想法。至关重要的是,前10名得分想法中有8项是由参与者上传的,而不是市长办公室提出的种子想法的一部分。而且,正如我们在论文中所描述的那样,在许多维基调查中,同样的模式,上传的创意得分比种子创意更好。换句话说,通过对新信息持开放态度,研究人员能够学习使用更封闭的方法而错过的东西。
除了这些特定调查的结果之外,我们的维基调查项目还说明了数字研究的成本结构如何意味着研究人员现在可以以不同的方式与世界接触。学术研究人员现在能够构建可供许多人使用的真实系统:我们已经举办了超过10,000次维基调查,并收集了超过1500万份回复。这种创造可以大规模使用的东西的能力来自这样一个事实,即一旦网站建成,它几乎没有任何东西可以让世界上的每个人免费使用(当然,如果我们拥有人类,那就不是真的了。 - 管理的访谈)。此外,这种规模可以进行不同类型的研究。例如,这1500万份答复以及我们的参与者流为未来的方法学研究提供了宝贵的试验平台。当我在第4章讨论实验时,我将更多地描述由数字时代成本结构创建的其他研究机会 - 特别是零可变成本数据。