5.2.2 Crowd-kodēšana politiskiem manifestiem

Kodēšana politiskos manifestus, ko parasti veic eksperti, var veikt ar cilvēka skaitļošanas projekta rezultātā lielāku atkārtojamību un elastību.

Līdzīgi Galaxy Zoo, ir daudzas situācijas, kad sociālie zinātnieki vēlas kodu, klasificēt, vai etiķetes attēlu vai kādu tekstu. Piemērs šāda veida pētījumu ir kodēšana politisko manifestu. vēlēšanu laikā, politiskās partijas ražot manifestus, raksturojot savu politisko nostāju un vadošie filozofiju. Piemēram, šeit ir gabals no manifesta Darba partijas Lielbritānijā no 2010. gadam:

"Miljoniem cilvēku, kas strādā mūsu sabiedrisko pakalpojumu iemieso labākās vērtības Lielbritānijā, palīdzot dot iespēju cilvēkiem, lai padarītu lielāko daļu savu dzīvi, vienlaikus aizsargājot tos no riskiem, kas viņiem nebūtu jāsedz par to pašu. Tāpat kā mums ir drosmīgāki par lomu valdības padarīt tirgi strādā godīgi, mums arī jābūt treknrakstā reformatori valdību. "

Šie manifesti satur vērtīgus datus politologi, īpaši tie studē vēlēšanas un dinamiku politikas debatēs. Lai sistemātiski iegūt informāciju no šīm manifestiem, zinātnieki radīja manifests projekts , kas organizēta politologi ar kodu 4000 manifestus no gandrīz 1000 personām 50 valstīs. Katrs teikums katrā manifests ir kodēta eksperts, izmantojot 56-kategorijas shēmu. Šīs sadarbības centienu rezultāts ir masveida datu kopa apkopojot informāciju iegulto šajos manifestiem, un šī datu kopa ir izmantota vairāk nekā 200 zinātnisku rakstu.

Kenneth Benoit un kolēģi (2015) nolēma veikt manifestu kodēšanas uzdevums, kas iepriekš bija veikta eksperti un pārvērst to par cilvēka skaitļošanas projektu. Tā rezultātā, viņi radīja kodēšanas process, kas ir vairāk atkārtojami un elastīgāka, nemaz nerunājot lētāk un ātrāk.

Darbs ar 18 manifestiem radīto sešām nesenajām vēlēšanām Apvienotajā Karalistē laikā, Benoit un kolēģi izmanto split-piemēro-apvieno stratēģiju ar darbiniekiem no mikro uzdevumu darba tirgū (Amazon Mechanical Turk un CrowdFlower piemēri mikro uzdevumu darba tirgiem, jo ​​vairāk uz mikro uzdevumu darba tirgos, skatīt 4. nodaļu). Pētnieki paņēma katru manifestu, un sadalīt to teikumus. Tālāk, cilvēka vērtējums tika piemērota katram teikumam. Jo īpaši, ja teikums iesaistīta politikas paziņojumu, tika kodēti kopā divās dimensijās: ekonomiskais (no ļoti kreisās uz ļoti labi) un sociālā (no liberāla līdz konservatīvi) (5.5 attēls). Katrs teikums tika kodēti ar aptuveni 5 dažādiem cilvēkiem. Visbeidzot, šie reitingi tika apvienoti, izmantojot statistisko modeli, kas veidoja gan individuāliem izvērtētājs ietekmi un grūtības teikumu ietekmi. Kopumā Benoit un kolēģi savākti 200000 reitingu no aptuveni 1500 darbiniekiem.

5.5 attēls: kodēšanas shēmu no Benoit et al. (2015) (1. zīm).

Lai novērtētu no pūļa kodēšanas kvalitāti, Benoit un kolēģi bija arī aptuveni 10 eksperti-profesori un pēcdiploma studentiem politoloģijā likmes pašus manifestus izmantojot līdzīgu procedūru. Lai gan atsauksmes no dalībnieku pūļa bija mainīgāki nekā vērtējumiem no ekspertiem, vienprātība pūlis reitings bija izcils līgumu ar vienprātība ekspertu vērtējums (5.6 attēls). Šis salīdzinājums parāda, ka, tāpat kā Galaxy Zoo, cilvēka Aprēķina projekti var ražot augstas kvalitātes rezultātus.

5.6 attēls: Ekspertu aplēses (x-ass) un pūļa aplēses (y-ass) bija ievērojams līgumā kad kodēšanas 18 partiju manifestus no Lielbritānijas (Benoit et al. 2015) . Manifestus kodētas bija no trim politiskajām partijām (konservatīvais, Darba, Liberālo demokrātu) un sešas vēlēšanās (1987, 1992, 1997, 2001, 2005, 2010).

Pamatojoties uz šo rezultātu, Benoit un kolēģi izmanto viņu laukumā kodēšanas sistēmu, lai veiktu izpēti, kas bija iespējams ar manifests projektu. Piemēram, manifests Project nebija kodēt manifestus par tēmu imigrācijas, jo tas nebija spilgta temats kad kodēšanas shēma tika izstrādāta 1980. gadu vidū. Un šajā brīdī, tas ir loģistikas neiespējama lai manifests Project doties atpakaļ un atkārtoti kodu savus manifestus, lai attēlotu šo informāciju. Tāpēc šķiet, ka pētnieki ir ieinteresēti pētīt politiku imigrācijas ir no luck. Tomēr Benoit un kolēģi bija iespēja izmantot savas cilvēku skaitļošanas sistēmu, lai to paveiktu kodēšanas-pielāgota savu pētījumu jautājumu, ātri un viegli.

Lai izpētītu imigrācijas politiku, viņi kodēti manifestus astoņus pusēm 2010. gada vēlēšanām Lielbritānijā. Katrs teikums katrā manifests tika kodēti, vai tas saistīts ar imigrāciju, un, ja tā, vai tas bija pro-imigrācija, neitrāla, vai anti-imigrācijas. Laikā 5 stundām uzsākot savu projektu, rezultāti bija. Viņi bija savākti vairāk nekā 22000 atbildes, kuru kopējās izmaksas ir 360 $. Turklāt aplēses no pūļa parādīja ievērojamu līgumu ar agrāku aptauju eksperti. Tad, kā noslēguma testu, divus mēnešus vēlāk, pētnieki reproducēt savu pūļa kodēšanu. Dažu stundu laikā, viņi radīja jaunu pūļa kodēta datu kopumu, kas cieši saistīti savu sākotnējo laukumā kodēta datu kopumu. Citiem vārdiem sakot, cilvēks aprēķins ļāva tām gūt kodēšana politiskās tekstiem ka panākta vienošanās ar ekspertu novērtējumu un bija atkārtojama. Turklāt, jo cilvēka aprēķins bija ātrs un lēts, tas bija viegli viņiem pielāgot savu datu vākšanu, lai to konkrēto pētījuma jautājumu par imigrāciju.