3.5.2 pesquisas Wiki

Levantamentos Wiki permitir novos híbridos de perguntas fechadas e abertas.

Além de fazer perguntas em tempos mais naturais e em contextos mais naturais, a nova tecnologia também nos permite mudar a forma das perguntas. A maioria das perguntas da pesquisa é fechada, com os entrevistados escolhendo a partir de um conjunto fixo de escolhas escritas pelos pesquisadores. Esse é um processo que um proeminente pesquisador da pesquisa chama de "colocar palavras na boca das pessoas". Por exemplo, aqui está uma pergunta fechada da pesquisa:

“Esta próxima pergunta é sobre o assunto do trabalho. Peço-lhe que olhar para este cartão e diga-me que coisa nesta lista quem mais preferem em um trabalho?

1. Alta renda
2. Nenhum perigo de ser demitido
3. As horas de trabalho são curtas, muito tempo livre
4. Chances de avanço
5. O trabalho é importante e dá uma sensação de realização ".

Mas estas são as únicas respostas possíveis? Os pesquisadores podem sentir falta de algo importante ao limitar as respostas a esses cinco? A alternativa para perguntas fechadas é uma questão de pesquisa aberta. Aqui está a mesma pergunta feita em um formulário aberto:

"Esta próxima pergunta é sobre o tema do trabalho. As pessoas procuram coisas diferentes em um trabalho. O que você prefere mais em um trabalho? "

Embora essas duas perguntas pareçam bastante semelhantes, um experimento de pesquisa de Howard Schuman e Stanley Presser (1979) revelou que elas podem produzir resultados muito diferentes: quase 60% das respostas à questão aberta não estão incluídas nas cinco respostas criadas pelo pesquisador ( figura 3.9).

Figura 3.9: Resultados de um experimento de pesquisa mostrando que as respostas podem depender se a pergunta é feita de forma fechada ou aberta. Adaptado de Schuman and Presser (1979) , tabela 1.

Embora as perguntas abertas e fechadas possam produzir informações bastante diferentes e ambas fossem populares nos primeiros dias da pesquisa, perguntas fechadas passaram a dominar o campo. Essa dominação não se deve ao fato de as perguntas fechadas terem provado fornecer uma melhor medição, mas sim porque são muito mais fáceis de usar; o processo de analisar questões abertas é propenso a erros e caro. O afastamento das questões abertas é lamentável, porque são precisamente as informações que os pesquisadores não sabiam de antemão que podem ser as mais valiosas.

A transição de pesquisas administradas por humanos para pesquisas administradas por computador, no entanto, sugere uma nova saída para esse problema antigo. E se pudéssemos agora ter perguntas de pesquisa que combinam os melhores recursos de perguntas abertas e fechadas? Ou seja, e se pudéssemos fazer uma pesquisa que mostrasse que ambas estão abertas a novas informações e produz respostas fáceis de analisar? É exatamente isso que Karen Levy e eu (2015) tentamos criar.

Em particular, Karen e eu pensamos que os sites que coletam e selecionam conteúdo gerado pelo usuário podem informar o design de novos tipos de pesquisa. Fomos particularmente inspirados pela Wikipédia - um exemplo maravilhoso de um sistema aberto e dinâmico impulsionado pelo conteúdo gerado pelo usuário - por isso chamamos a nossa nova pesquisa de pesquisa wiki . Assim como a Wikipedia evolui ao longo do tempo com base nas ideias de seus participantes, imaginamos uma pesquisa que evolui ao longo do tempo com base nas ideias de seus participantes. Karen e eu desenvolvemos três propriedades que as pesquisas wiki devem satisfazer: elas devem ser gananciosas, colaborativas e adaptativas. Em seguida, com uma equipe de desenvolvedores da Web, criamos um site que poderia realizar pesquisas na wiki: www.allourideas.org .

O processo de coleta de dados em uma pesquisa wiki é ilustrado por um projeto que fizemos com o Gabinete do Prefeito da cidade de Nova York, a fim de integrar as ideias dos residentes no PlaNYC 2030, o plano de sustentabilidade municipal de Nova York. Para iniciar o processo, o Gabinete do Prefeito gerou uma lista de 25 ideias com base em seu alcance anterior (por exemplo, “Exigir que todos os grandes edifícios façam certas atualizações de eficiência energética” e “Ensinar as crianças sobre questões verdes como parte do currículo escolar”). Usando essas 25 ideias como sementes, o Gabinete do Prefeito fez a pergunta: “Qual você acha que é uma ideia melhor para criar uma cidade mais verde e maior de Nova York?” Os entrevistados receberam um par de ideias (por exemplo, “Abrir pátios da escola” como playgrounds públicos ”e“ Aumentar o plantio direcionado de árvores em bairros com altas taxas de asma ”, e foi solicitado que escolhessem entre eles (figura 3.10). Após a escolha, os entrevistados foram imediatamente apresentados a outro par de idéias selecionado aleatoriamente. Eles puderam continuar contribuindo com informações sobre suas preferências pelo tempo que desejassem, votando ou escolhendo “não consigo decidir”. Crucialmente, a qualquer momento, os entrevistados puderam contribuir com suas próprias ideias, que - dependendo da aprovação Gabinete do Prefeito - tornou-se parte do conjunto de idéias a serem apresentadas aos outros. Assim, as perguntas que os participantes receberam foram abertas e fechadas simultaneamente.

Figura 3.10: Interface para um levantamento wiki. O painel (a) mostra a tela de resposta e o painel (b) mostra a tela de resultados. Reproduzido com permissão de Salganik and Levy (2015) , figura 2.

O Gabinete do Prefeito lançou sua pesquisa wiki em outubro de 2010 em conjunto com uma série de reuniões da comunidade para obter feedback dos residentes. Em cerca de quatro meses, 1.436 respondentes contribuíram com 31,893 respostas e 464 novas ideias. Criticamente, 8 das 10 principais ideias de pontuação foram carregadas pelos participantes, em vez de fazer parte do conjunto de ideias iniciais do Gabinete do Prefeito. E, como descrevemos em nosso artigo, esse mesmo padrão, com idéias carregadas que pontuam melhor do que idéias iniciais, acontece em muitas pesquisas wiki. Em outras palavras, por estar aberto a novas informações, os pesquisadores são capazes de aprender coisas que teriam sido perdidas usando abordagens mais fechadas.

Além dos resultados dessas pesquisas específicas, nosso projeto de pesquisa wiki também ilustra como a estrutura de custo da pesquisa digital significa que os pesquisadores podem agora se engajar com o mundo de maneiras diferentes. Pesquisadores acadêmicos agora são capazes de construir sistemas reais que podem ser usados ​​por muitas pessoas: já realizamos mais de 10.000 pesquisas wiki e coletamos mais de 15 milhões de respostas. Essa capacidade de criar algo que pode ser usado em escala vem do fato de que, uma vez que o site foi construído, não custa nada para torná-lo livremente disponível para todos no mundo (claro, isso não seria verdade se tivéssemos humanos entrevistas administradas). Além disso, esta escala permite diferentes tipos de pesquisa. Por exemplo, essas 15 milhões de respostas, bem como nosso fluxo de participantes, fornecem um valioso leito de testes para futuras pesquisas metodológicas. Descreverei mais sobre outras oportunidades de pesquisa que são criadas pelas estruturas de custo da era digital - particularmente dados de custo variável zero - quando discuto experiências no capítulo 4.