Coding manifestos pulitik, hiji hal ilaharna dipigawé ku para ahli, bisa dipigawé ku proyék ngitung manusa balukarna reproducibility gede sarta kalenturan.
Sarupa Smithsonian Galaxy, aya loba kaayan peneliti sosial hayang kode, mengklasifikasikan, atawa labél hiji gambar atawa sapotong téks. Conto jenis ieu panalungtikan nya éta coding of manifestos pulitik. Salila pamilu, parpol ngahasilkeun manifestos ngajéntrékeun posisi kawijakan maranéhanana sarta guiding philosophies. Contona, di dieu mangrupa sapotong tina Manifesto tina Partéy Buruh di Britania Raya tina 2010:
"Jutaan jalma digawé di ladenan umum urang embody nilai best of Britania, nulungan empower urang nyieun kalolobaan kahirupan sorangan bari mayungan eta ti resiko teu kudu boga ka tega sorangan. Ngan sakumaha nu ayeuna urang kudu bolder ngeunaan peran pamaréntah dina nyieun pasar gawé cukup, urang ogé kudu reformers kandel pamaréntahan. "
manifestos ieu ngandung data berharga pikeun élmuwan pulitik, sabagean pamilu diajar jeung dinamika debat kawijakan. Dina raraga sacara sistematis nimba informasi ti manifestos ieu, peneliti dijieun The Manifesto Project, nu dikumpulkeun 4.000 manifestos tina ampir 1.000 pihak di 50 nagara lajeng dikelompokeun élmuwan pulitik mun sacara sistematis kode aranjeunna. Unggal kalimah di unggal Manifesto ieu disandi ku ahli maké skéma 56-kategori. Hasil tina usaha kolaborasi ieu téh dataset masif nyimpulkeun informasi study di manifestos ieu, sarta dataset ieu geus dipaké dina leuwih ti 200 karya ilmiah.
Kenneth Benoit sareng kolega Anjeun (2016) mutuskeun nyokot Manifesto coding tugas nu kungsi saméméhna geus dipigawé ku para ahli jeung ngahurungkeun kana proyék ngitung manusa. Hasilna, aranjeunna dijieun prosés coding anu leuwih bisa diulang sarta leuwih fleksibel, teu nyebut langkung mirah tur gancang.
Gawe sareng 18 manifestos dihasilkeun nalika genep pamilu panganyarna di Britania Raya, Benoit sareng kolega Anjeun dipaké pamisah-Larapkeun-ngagabungkeun strategi jeung pagawe ti pasar tanaga gawé microtask (Amazon Mechanical Turk sarta CrowdFlower conto pasar tenaga kerja microtask; pikeun leuwih lengkep dina pasar misalna , tingali Bab 4). Para panalungtik nyandak unggal Manifesto jeung dibeulah kana kalimat. Hareup, jalma anu dilarapkeun skéma coding ka unggal kalimah. Dina sababaraha hal, pamiarsa anu dipenta pikeun mengklasifikasikan tiap kalimah sakumaha ngarujuk kana kawijakan ékonomi (kénca atawa katuhu), kana kawijakan sosial (liberal atawa konservatif), atawa ngayakeun (inohong 5,5). Unggal kalimah ieu nu disandi ku kira lima urang béda. Tungtungna, ratings kasebut digabungkan maké Model statistik nu accounted pikeun duanana épék individu-rater jeung kasusah-of-kalimah épék. Dina sagala, Benoit sareng kolega Anjeun dikumpulkeun 200,000 ratings ti ngeunaan 1.500 urang.
Dina raraga meunteun kualitas nu coding balaréa, Benoit sareng kolega Anjeun oge kagungan ngeunaan 10 ahli-profesor jeung mahasiswa pascasarjana di pulitik elmu-laju manifestos sarua ngagunakeun prosedur nu sarupa. Sanajan ratings ti anggota balaréa leuwih variabel batan ratings ti ahli, konsensus rating riungan tadi perjangjian anu luar biasa jeung rating ahli konsensus (inohong 5,6). ngabandingkeun Ieu nunjukeun yen, sakumaha kalayan Smithsonian Galaxy, proyék ngitung manusa bisa ngahasilkeun hasil kualitas luhur.
Ngawangun on hasilna ieu, Benoit sareng kolega Anjeun dipake sistem riungan-coding maranéhna pikeun ngalakukeun panalungtikan anu mungkin kalawan sistem coding ahli-amprok dipaké ku Proyek Manifesto. Contona, dina Project Manifesto teu kode nu manifestos dina topik di imigrasi lantaran anu lain topik salient nalika skéma coding ieu dimekarkeun dina pertengahan 1980-an. Na, dina titik ieu, éta logistically infeasible keur Project Manifesto mun balik sarta recode manifestos maranéhna pikeun néwak informasi ieu. Ku sabab eta bakal muncul anu peneliti museurkeun diajar politik imigrasi nu kaluar tina tuah. Sanajan kitu, Benoit sareng kolega Anjeun éta bisa ngagunakeun sistem ngitung manusa maranéhna pikeun ngalakukeun coding-ngaropéa ieu panalungtikan maranéhanana sual-gancang sarta gampang.
Dina raraga diajar kawijakan imigrasi, aranjeunna disandi di manifestos pikeun dalapan pihak dina 2010 pamilihan umum dina Britania Raya. Unggal kalimah di unggal Manifesto ieu disandi sakumaha keur naha éta patali jeung imigrasi, jeung lamun kitu, naha ieu pro-imigrasi, nétral, atawa anti imigrasi. Dina 5 jam di launching proyék maranéhanana, hasil éta dina. Maranehna dikumpulkeun leuwih ti 22.000 réspon dina waragad jumlahna $ 360. Salajengna, dina perkiraan ti balaréa némbongkeun perjangjian anu luar biasa kalawan survéy saméméhna para ahli. Lajeng, salaku test ahir, dua bulan ka hareup, anu peneliti dihasilkeun maranéhna riungan-coding. Dina sababaraha jam, maranéhna sempet dijieun dataset riungan-disandi anyar nu raket loyog maranéhna aslina riungan-disandi set data. Dina basa sejen, ngitung manusa sangkan aranjeunna keur ngahasilkeun coding naskah pulitik anu sapuk jeung Panakawan ahli tur éta bisa diulang. Salajengna, sabab nu ngitung manusa éta gancang jeung mirah, ieu gampang pikeun aranjeunna pikeun ngaropea pendataan maranéhna pikeun sual ieu panalungtikan husus maranéhanana ngeunaan imigrasi.