Survei wiki memungkinkan hibrida baru pertanyaan tertutup dan terbuka.
Selain mengajukan pertanyaan pada waktu yang lebih alami dan dalam konteks yang lebih alami, teknologi baru juga memungkinkan kita untuk mengubah bentuk pertanyaan. Sebagian besar pertanyaan survei ditutup, dengan responden memilih dari serangkaian pilihan tetap yang ditulis oleh para peneliti. Ini adalah proses yang oleh salah satu peneliti survei terkemuka disebut "meletakkan kata-kata di mulut orang." Misalnya, inilah pertanyaan survei tertutup:
“Pertanyaan berikutnya adalah masalah pekerjaan. Bisakah Anda melihat kartu ini dan memberi tahu saya hal mana dalam daftar ini yang paling Anda sukai dalam suatu pekerjaan?
- Penghasilan tinggi
- Tidak ada bahaya dipecat
- Jam kerja singkat, banyak waktu luang
- Peluang untuk maju
- Pekerjaan itu penting, dan memberi perasaan pencapaian. "
Tetapi apakah ini satu-satunya jawaban yang mungkin? Mungkin peneliti kehilangan sesuatu yang penting dengan membatasi tanggapan ke lima ini? Alternatif untuk pertanyaan tertutup adalah pertanyaan survei terbuka. Inilah pertanyaan yang sama ditanyakan dalam bentuk terbuka:
"Pertanyaan berikutnya adalah tentang masalah pekerjaan. Orang mencari hal-hal yang berbeda dalam pekerjaan. Apa yang akan Anda paling suka dalam pekerjaan? "
Meskipun kedua pertanyaan ini muncul sangat mirip, sebuah eksperimen survei oleh Howard Schuman dan Stanley Presser (1979) mengungkapkan bahwa mereka dapat menghasilkan hasil yang sangat berbeda: hampir 60% jawaban terhadap pertanyaan terbuka tidak termasuk dalam lima tanggapan yang diciptakan oleh peneliti ( gambar 3.9).
Meskipun pertanyaan terbuka dan tertutup dapat menghasilkan informasi yang sangat berbeda dan keduanya populer pada hari-hari awal penelitian survei, pertanyaan tertutup telah mendominasi bidang ini. Dominasi ini bukan karena pertanyaan tertutup telah terbukti memberikan pengukuran yang lebih baik, tetapi lebih karena mereka lebih mudah digunakan; proses menganalisis pertanyaan terbuka adalah kesalahan-rawan dan mahal. Perpindahan dari pertanyaan terbuka sangat disayangkan karena justru informasi yang para peneliti tidak ketahui sebelumnya dapat menjadi yang paling berharga.
Transisi dari survei yang dikelola manusia ke komputer, bagaimanapun, menunjukkan jalan keluar baru dari masalah lama ini. Bagaimana jika kita sekarang bisa memiliki pertanyaan survei yang menggabungkan fitur terbaik dari pertanyaan terbuka dan tertutup? Artinya, bagaimana jika kita bisa memiliki survei yang keduanya terbuka untuk informasi baru dan menghasilkan tanggapan yang mudah dianalisis? Itulah yang berhasil saya ciptakan oleh Karen Levy dan saya (2015) .
Secara khusus, Karen dan saya berpikir bahwa situs web yang mengumpulkan dan mengkurasi konten yang dibuat pengguna mungkin dapat menginformasikan desain jenis survei baru. Kami terutama terinspirasi oleh Wikipedia — contoh luar biasa dari sistem terbuka dan dinamis yang didorong oleh konten buatan pengguna — jadi kami menyebut survei baru kami sebagai survei wiki . Sama seperti Wikipedia berkembang dari waktu ke waktu berdasarkan ide-ide dari para peserta, kami membayangkan sebuah survei yang berkembang dari waktu ke waktu berdasarkan ide-ide dari para peserta. Karen dan saya mengembangkan tiga properti yang harus dipenuhi survei wiki: mereka harus tamak, kolaboratif, dan adaptif. Kemudian, dengan tim pengembang web, kami membuat situs web yang dapat menjalankan survei wiki: www.allourideas.org .
Proses pengumpulan data dalam survei wiki diilustrasikan oleh proyek yang kami lakukan dengan Kantor Walikota New York City untuk mengintegrasikan ide-ide warga ke dalam PlaNYC 2030, rencana kesinambungan kota New York. Untuk memulai proses, Kantor Walikota menghasilkan daftar 25 ide berdasarkan jangkauan mereka sebelumnya (misalnya, "Mewajibkan semua bangunan besar untuk membuat peningkatan efisiensi energi tertentu" dan "Ajarkan anak-anak tentang isu-isu hijau sebagai bagian dari kurikulum sekolah"). Menggunakan 25 ide ini sebagai benih, Kantor Walikota menanyakan pertanyaan “Menurut Anda, mana yang lebih baik untuk menciptakan Kota New York yang lebih hijau dan lebih hijau?” Responden disajikan dengan sepasang ide (misalnya, “Membuka sekolah di seluruh kota sebagai taman bermain umum ”dan“ Meningkatkan penanaman pohon yang ditargetkan di lingkungan dengan tingkat asma tinggi ”), dan diminta untuk memilih di antara mereka (gambar 3.10). Setelah memilih, responden langsung disajikan dengan sepasang gagasan lain yang dipilih secara acak. Mereka dapat terus menyumbangkan informasi tentang preferensi mereka selama yang mereka inginkan baik dengan memilih atau dengan memilih "Saya tidak bisa memutuskan." Yang penting, pada titik tertentu, responden dapat menyumbangkan ide mereka sendiri, yang - menunggu persetujuan oleh Kantor Walikota — menjadi bagian dari kumpulan gagasan untuk disajikan kepada orang lain. Dengan demikian, pertanyaan yang diterima peserta terbuka dan ditutup secara bersamaan.
Kantor Walikota meluncurkan survei wiki pada bulan Oktober 2010 bersamaan dengan serangkaian pertemuan masyarakat untuk mendapatkan umpan balik dari penduduk. Selama sekitar empat bulan, 1.436 responden memberikan kontribusi 31.893 tanggapan dan 464 ide baru. Secara kritis, 8 dari 10 ide skor teratas diunggah oleh peserta daripada menjadi bagian dari kumpulan ide benih dari Kantor Walikota. Dan, seperti yang kami jelaskan dalam makalah kami, pola yang sama ini, dengan ide-ide yang diunggah yang mencetak lebih baik daripada ide benih, terjadi di banyak survei wiki. Dengan kata lain, dengan bersikap terbuka terhadap informasi baru, para peneliti dapat mempelajari hal-hal yang terlewatkan dengan menggunakan pendekatan yang lebih tertutup.
Di luar hasil survei khusus ini, proyek survei wiki kami juga mengilustrasikan bagaimana struktur biaya penelitian digital berarti bahwa para peneliti sekarang dapat terlibat dengan dunia dalam cara yang agak berbeda. Para peneliti akademis sekarang dapat membangun sistem nyata yang dapat digunakan oleh banyak orang: kami telah menyelenggarakan lebih dari 10.000 survei wiki dan telah mengumpulkan lebih dari 15 juta tanggapan. Kemampuan untuk menciptakan sesuatu yang dapat digunakan dalam skala berasal dari fakta bahwa begitu situs web telah dibangun, pada dasarnya biaya tidak ada yang membuatnya tersedia secara gratis untuk semua orang di dunia (tentu saja, ini tidak akan benar jika kita memiliki manusia -administered wawancara). Selanjutnya, skala ini memungkinkan berbagai jenis penelitian. Misalnya, 15 juta tanggapan ini, serta aliran peserta kami, menyediakan tempat uji yang berharga untuk penelitian metodologi di masa mendatang. Saya akan menjelaskan lebih banyak tentang peluang penelitian lain yang dibuat oleh struktur biaya era digital — khususnya data biaya variabel nol — ketika saya mendiskusikan eksperimen dalam bab 4.