5.2.2 minios kodavimas politinių manifestų

Kodavimo politinius manifestais, nors paprastai daroma ekspertų, gali būti atliekama žmogaus skaičiavimo projektą, kurio metu daugiau atkuriamumo ir lankstumo.

Panašus į "Galaxy" zoologijos sodą, yra daugybė situacijų, kai socialiniai tyrinėtojai nori koduoti, klasifikuoti arba pažymėti vaizdą ar teksto dalį. Tokio pobūdžio tyrimo pavyzdys yra politinių manifestų kodavimas. Rinkimų metu politinės partijos rengia manifestus, apibūdinančius savo politines pozicijas ir vadovaujančias filosofijas. Pavyzdžiui, čia yra darbo partijos Jungtinės Karalystės manifesto nuo 2010 m. Dalis:

"Milijonai žmonių, dirbančių mūsų viešųjų paslaugų įkūnija geriausius vertybes Britanijoje, padėti žmonėms sudaryti gaukite savo gyvenimą, o juos apsaugoti nuo rizikos, jie neturėtų būti dėl jų pačių. Lygiai taip pat mes turime būti drąsiau apie vyriausybės vaidmenį priimant rinkos veiktų sąžiningai, mes taip pat turime būti drąsūs reformatoriai valdžios. "

Šie manifestai yra vertingi duomenys politiniams mokslininkams, ypač tiems, kurie studijuoja rinkimus ir politinių diskusijų dinamiką. Siekdami sistemingai išgauti informaciją iš šių manifestų, mokslininkai sukūrė "Manifesto" projektą, kuriame surinkta 4 000 manifestų iš beveik 1000 šalių 50 šalių ir vėliau organizavo politologus, kad juos sistemingai įteiks. Kiekvienas kiekvieno manifesto sakinys buvo užfiksuotas ekspertu, naudojančiu 56 kategorijų schemą. Šių bendrų pastangų rezultatas yra masinis duomenų rinkinys, apibendrinantis šių manifestų informaciją, ir šis duomenų rinkinys buvo naudojamas daugiau nei 200 mokslinių straipsnių.

Kennethas Benoitas ir jo kolegos (2016) Nusprendė imtis manifesto kodavimo užduoties, kurią anksčiau atliko ekspertai, ir pavers ją žmogišku skaičiavimo projektu. Dėl to jie sukūrė labiau atkuriamą ir lankstesnį kodavimo procesą, jau nekalbant apie pigesnį ir greitesnį.

Bendradarbiaujant su 18 manifestų, sukurtų per šešis paskutinius rinkimus Jungtinėje Karalystėje, Benoitas ir jo kolegos naudojo "split-apply-combine" strategiją su "mikrotaskų" ​​darbo rinkos darbuotojais ("Amazon Mechanical Turk" ir "CrowdFlower" yra mikrostokų darbo rinkų pavyzdžiai; , žr. 4 skyrių). Tyrėjai paėmė kiekvieną manifestą ir padalijo į sakinius. Be to, asmuo pritaikė kodavimo schemą kiekvienam sakiniui. Visų pirma skaitytojai buvo paprašyti kiekvieną sakinį klasifikuoti kaip ekonominę politiką (kairėje arba dešinėje), socialinę politiką (liberalų ar konservatorių) ar ne (5.5 pav.). Kiekvieną sakinį kodavo maždaug penki skirtingi žmonės. Galiausiai, šie reitingai buvo derinami naudojant statistinį modelį, kuris turėjo tiek individualių efektų, tiek sunkumų, susijusių su sakiniu. Benoit ir jo kolegos iš viso surinko 200 000 įvertinimų iš maždaug 1500 žmonių.

5.5 pav. Kodavimo schema iš Benoit et al. (2016) . Skaitytojams buvo prašoma kiekvieną sakinį klasifikuoti kaip ekonominę politiką (kairėje arba dešinėje), socialinei politikai (liberali ar konservatyvi) ar nė vienai iš jų. Pritaikytas iš Benoit et al. (2016) , 1 pav.

Siekiant įvertinti minų kodavimo kokybę, Benoit ir jo kolegai taip pat turėjo apie 10 ekspertų-dėstytojų ir politologų aukštąjį išsilavinimą, taikydami panašią procedūrą tuos pačius manifestus. Nors minios narių reitingai buvo didesni nei ekspertų vertinimai, konsensuso minios reitingas turėjo puikų susitarimą su konsensuso ekspertų įvertinimu (5.6 pav.). Šis palyginimas rodo, kad, kaip ir "Galaxy Zoo", žmonių skaičiavimo projektai gali pagaminti kokybiškus rezultatus.

5.6 paveikslas. Ekspertų vertinimai ( \(x\) -akisas) ir minios sąmatas ( \(y\) -akis) buvo nepaprastai svarbūs, koduojant 18 partijos manifestų iš Jungtinės Karalystės (Benoit et al. 2016) . Kodifikuoti manifestai buvo iš trijų politinių partijų (konservatorių, darbo ir liberalų demokratų) ir šešių rinkimų (1987, 1992, 1997, 2001, 2005 ir 2010 m.). Pritaikytas iš Benoit et al. (2016) , 3 pav.

Remdamasis šiuo rezultatu, Benoitas ir jo kolegos naudojo savo minų kodavimo sistemą atlikti mokslinius tyrimus, kurie buvo neįmanomi eksperimentine kodavimo sistema, naudojama "Manifesto" projekte. Pvz., "Manifesto" projektas nepateikė manifestų dėl imigracijos temos, nes tai nebuvo pagrindinė tema, kai kodavimo schema buvo sukurta 1980-ųjų viduryje. Ir šiuo metu logistikos požiūriu neįmanoma, kad "Manifesto" projektas sugrąžintų ir pergręžtų savo manifestus, kad būtų užfiksuota ši informacija. Todėl atrodo, kad mokslininkai, dominantys imigracijos politikos tyrinėjimu, nesiseka. Tačiau Benoitas ir jo kolegos galėjo greitai ir lengvai panaudoti savo žmogiškąją skaičiavimo sistemą, kad tai padėtų koduoti pagal savo mokslinių tyrimų klausimą.

Siekiant ištirti imigracijos politiką, jie koduoja aštuonių partijų manifestus 2010 m. Bendrojo rinkimų metu Jungtinėje Karalystėje. Kiekvienas manifesto kiekvienas sakinys buvo užfiksuotas, ar jis susijęs su imigracija, ir jei taip, tai buvo pro imigracija, neutrali ar antimigracija. Per 5 valandas nuo projekto pradžios buvo gauti rezultatai. Jie surinko daugiau nei 22 000 atsakymų, kurių bendra kaina siekė 360 JAV dolerių. Be to, minios įvertinimai parodė puikų susitarimą su ankstesne ekspertų apklausa. Tada, kaip paskutinį testą, praėjus dviem mėnesiams, tyrėjai atgamino minų kodavimą. Per kelias valandas jie sukūrė naują minų koduotą duomenų rinkinį, kuris labai atitiko jų pradinį minų koduotą duomenų rinkinį. Kitaip tariant, žmogaus skaičiavimas leido jiems generuoti koduotę politinius tekstus, kurie buvo suderinti su ekspertų vertinimais ir buvo atkuriami. Be to, kadangi žmonių skaičiavimas buvo greitas ir pigus, jiems buvo lengva pritaikyti savo duomenų rinkimą į konkretų tyrimo klausimą apie imigraciją.