3.5.2 kaji selidik Wiki

Kaji selidik Wiki membolehkan hibrid baru soalan tertutup dan terbuka.

Di samping bertanya pada masa-masa semula jadi dan dalam konteks yang lebih semula jadi, teknologi baru juga membolehkan kita mengubah bentuk soalan. Soalan-soalan kaji selidik kebanyakan ditutup, dengan responden memilih dari satu set pilihan pilihan yang ditulis oleh penyelidik. Ini adalah satu proses yang seorang penyelidik kaji selidik menonjol memanggil "meletakkan kata-kata di mulut orang." Sebagai contoh, inilah pertanyaan kaji selidik tertutup:

"Soalan seterusnya ini adalah mengenai subjek kerja. Bolehkah anda melihat kad ini dan beritahu saya perkara yang ada dalam senarai ini yang anda paling suka dalam pekerjaan?

1. Pendapatan tinggi
2. Tiada bahaya dipecat
3. Waktu kerja adalah pendek, banyak masa lapang
4. Peluang untuk kemajuan
5. Kerja itu penting, dan memberikan perasaan pencapaian. "

Tetapi adakah ini hanya satu jawapan yang mungkin? Mungkin penyelidik kehilangan sesuatu yang penting dengan mengehadkan tanggapan terhadap lima ini? Alternatif kepada soalan tertutup adalah soalan tinjauan terbuka. Inilah soalan yang sama yang ditanya dalam bentuk terbuka:

"Ini soalan berikut adalah mengenai subjek kerja. Orang mencari perkara yang berbeza dalam pekerjaan. Apa yang anda paling suka dalam kerja? "

Walaupun kedua-dua soalan ini agak serupa, percubaan kaji selidik oleh Howard Schuman dan Stanley Presser (1979) mendedahkan bahawa mereka boleh menghasilkan keputusan yang sangat berbeza: hampir 60% daripada respons terhadap soalan terbuka tidak termasuk dalam lima respons yang dicipta oleh penyelidik ( angka 3.9).

Rajah 3.9: Hasil daripada eksperimen kaji selidik yang menunjukkan bahawa respons boleh bergantung kepada sama ada soalan itu ditanya dalam bentuk tertutup atau terbuka. Diadaptasi dari Schuman and Presser (1979) , jadual 1.

Walaupun soalan terbuka dan tertutup boleh menghasilkan maklumat yang agak berbeza dan kedua-duanya popular pada masa awal penyelidikan tinjauan, soalan tertutup telah datang untuk menguasai bidang. Penguasaan ini bukan kerana soalan tertutup telah terbukti memberikan pengukuran yang lebih baik, tetapi kerana mereka lebih mudah digunakan; proses menganalisis soalan terbuka adalah rawan yang salah dan mahal. Pindah dari soalan terbuka adalah malang kerana tepatnya maklumat yang tidak diketahui para penyelidik lebih awal daripada yang mungkin menjadi yang paling berharga.

Peralihan dari manusia yang diberikan kepada kaji selidik komputer yang dikendalikan oleh komputer, bagaimanapun, mencadangkan cara baru daripada masalah lama ini. Bagaimana jika sekarang kita boleh mempunyai soalan tinjauan yang menggabungkan ciri-ciri terbaik dari kedua-dua soalan terbuka dan tertutup? Maksudnya, bagaimana jika kita boleh membuat tinjauan yang kedua-duanya terbuka kepada maklumat baru dan menghasilkan respons mudah untuk analisa? Itulah yang Karen Levy dan saya (2015) cuba mencipta.

Khususnya, Karen dan saya menganggap bahawa laman web yang mengumpul dan mengurus kandungan yang dijana pengguna mungkin dapat memberitahu reka bentuk jenis tinjauan baru. Kami sangat terinspirasi oleh Wikipedia-contoh yang baik dari sistem yang terbuka dan dinamik yang didorong oleh kandungan yang dijana pengguna-jadi kami menelefon tinjauan baru kami tinjauan wiki . Sama seperti Wikipedia berubah mengikut masa berdasarkan gagasan para peserta, kami membayangkan satu kaji selidik yang berkembang dari masa ke masa berdasarkan idea para peserta. Karen dan saya membangunkan tiga sifat yang harus dipenuhi oleh tinjauan wiki: mereka harus tamak, kolaboratif, dan menyesuaikan diri. Kemudian, dengan satu pasukan pemaju web, kami membuat laman web yang boleh menjalankan tinjauan wiki: www.allourideas.org .

Proses pengumpulan data dalam satu tinjauan wiki digambarkan oleh sebuah projek yang kami lakukan dengan Pejabat Bandaraya New York City untuk mengintegrasikan ide-ide penduduk ke dalam PlaNYC 2030, rancangan kesinambungan bandar raya New York. Untuk memulakan proses itu, Pejabat Datuk Bandar menghasilkan senarai 25 idea berdasarkan jangkauan terdahulu mereka (contohnya, "Memerlukan semua bangunan besar untuk menaik taraf kecekapan tenaga tertentu" dan "Ajar anak-anak tentang isu hijau sebagai sebahagian daripada kurikulum sekolah"). Dengan menggunakan 25 idea ini sebagai biji, Pejabat Datuk Bandar bertanya soalan "Apa yang anda fikir adalah idea yang lebih baik untuk mewujudkan Bandar Raya yang lebih hijau, lebih besar di New York City?" Responden telah dibentangkan dengan sepasang idea (misalnya, "Buka sekolah di seluruh bandar sebagai taman permainan awam "dan" Meningkatkan penanaman pokok sasaran di kawasan kejiranan dengan kadar asma yang tinggi "), dan diminta memilih antara mereka (angka 3.10). Selepas memilih, responden dengan serta-merta dibentangkan dengan sepasang idea yang dipilih secara rawak. Mereka dapat terus menyumbang maklumat tentang pilihan mereka selagi mereka mahu sama ada dengan mengundi atau dengan memilih "Saya tidak boleh membuat keputusan." Secara kritis, pada bila-bila pun, responden dapat menyumbang idea mereka sendiri, yang menunggu kelulusan oleh Pejabat Datuk Bandar - menjadi sebahagian daripada kumpulan idea yang akan dibentangkan kepada orang lain. Oleh itu, soalan yang diterima peserta adalah terbuka dan ditutup secara serentak.

Rajah 3.10: Antara muka untuk tinjauan wiki. Panel (a) menunjukkan skrin respons dan panel (b) menunjukkan skrin hasil. Diterbitkan semula dengan izin dari Salganik and Levy (2015) , angka 2.

Pejabat Datuk Bandar melancarkan tinjauan wikinya pada bulan Oktober 2010 bersempena siri pertemuan komuniti untuk mendapatkan maklum balas penduduk. Lebih kurang empat bulan, 1,436 responden menyumbang 31,893 jawapan dan 464 idea baru. Secara kritis, 8 daripada 10 idea pemarkahan teratas dimuat naik oleh peserta dan bukan menjadi sebahagian daripada set idea benih dari Pejabat Mayor. Dan, seperti yang kita terangkan di dalam kertas kerja kita, corak yang sama, dengan idea yang dimuat naik yang lebih baik daripada idea benih, berlaku dalam banyak tinjauan wiki. Dengan kata lain, dengan terbuka kepada maklumat baru, para penyelidik dapat mempelajari perkara-perkara yang akan dilepaskan dengan menggunakan pendekatan yang lebih tertutup.

Di luar hasil tinjauan khusus ini, projek tinjauan wiki kami juga menggambarkan bagaimana struktur kos penyelidikan digital bermakna para penyelidik kini boleh terlibat dengan dunia dalam cara yang agak berbeza. Penyelidik akademik kini dapat membina sistem sebenar yang boleh digunakan oleh ramai orang: kami telah menganjurkan lebih daripada 10,000 kaji selidik wiki dan telah mengumpulkan lebih daripada 15 juta jawapan. Keupayaan untuk mencipta sesuatu yang boleh digunakan secara berskala datang dari fakta bahawa apabila laman web telah dibina, ia secara asasnya tidak ada apa-apa untuk menjadikannya bebas untuk semua orang di dunia (tentu saja, ini tidak benar jika kita mempunyai manusia -mememberikan wawancara). Selanjutnya, skala ini membolehkan pelbagai jenis penyelidikan. Sebagai contoh, ini 15 juta jawapan, serta aliran peserta kami, menyediakan ujian tidur yang berharga untuk penyelidikan metodologi masa depan. Saya akan menerangkan lebih lanjut mengenai peluang penyelidikan lain yang dicipta oleh struktur kos digital-terutamanya data kos pembolehubah sifar-apabila saya membincangkan eksperimen dalam bab 4.