5.2.2 Dav-kódování politické manifesty
Kódování politické manifesty, co obvykle provádí odborníky, může být provedena pomocí lidského výpočetního projektu vede k větší reprodukovatelnost a flexibilitu.
Podobně jako u Galaxy Zoo, existuje mnoho situací, kdy sociální vědci chtějí kódu, klasifikovat, nebo etiketa obraz nebo část textu. Příkladem tohoto typu výzkumu je kódování politické manifesty. Během voleb, politické strany vyrábět manifesty popisující jejich politické postoje a vedení filozofie. Například, tady je kus manifestu labouristické strany ve Velké Británii od roku 2010:
"Miliony lidí, kteří pracují v našich veřejných služeb ztělesňují nejlepších hodnot Británie, pomáhá posilovat lidem, aby co nejvíce z jejich vlastních životů a zároveň je chrání před riziky, neměly by nést samy. Stejně jako musíme být odvážnější o roli vlády v fungování trhů spravedlivě, musíme také být odvážné reformátoři vlády. "
Tyto manifesty obsahují cenné údaje pro politology, zejména těch, kteří studují volby a dynamiku politických debat. S cílem soustavně získávat informace z těchto manifestů, výzkumníci vytvořili manifest projekt , který organizované politologové kódovat 4000 manifesty z téměř 1000 osob v 50 zemích světa. Každá věta v každém manifestu byl zakódován znalcem pomocí schématu 56-kategorie. Výsledkem tohoto společného úsilí je masivní datové sady shrnující informace vložené do těchto manifestů, a to datová sada byla použita ve více než 200 vědeckých prací.
Kenneth Benoit a jeho kolegové (2015) se rozhodl vzít kódovací úkol manifest, které předtím byly provedeny odborníky a přeměnit ji na výpočetního projektu lidského. V důsledku toho, že vytvořil procesu kódování, který je více reprodukovatelné a pružnější, nemluvě o levnější a rychlejší.
Práce s 18 manifesty vygenerovaných během šesti nedávných voleb ve Velké Británii, Benoit a jeho kolegové použít split-platí-spojit strategie s pracovníky z trhu práce micro-úloh (Amazon Mechanical Turk a CrowdFlower jsou příklady mikro-úkolů trzích práce; více na mikro-úkolů trhů práce, viz kapitola 4). Výzkumníci vzali každý manifest a byl rozdělen do vět. Dále lidská hodnocení se aplikuje na každé větě. Zejména v případě, že trest zahrnoval politické prohlášení bylo políãkÛm dvou dimenzích: ekonomické (od velmi zleva zcela vpravo) a sociální (od liberálů na konzervativce) (Obrázek 5.5). Každá věta byla kódována asi pět různých lidí. A konečně, tyto ratingy byly spojeny s použitím statistického modelu, který připadá na obou individuálních Rater efekty a obtížnosti trestu účinků. Ve všech, Benoit a jeho kolegové shromažďují 200.000 ratingy od asi 1500 pracovníků.
Obrázek 5.5: Schéma kódování od Benoit et al. (2015) (obrázek 1).
Aby bylo možné posoudit kvalitu kódování davu, Benoit a jeho kolegové také měl asi 10 odborníků-profesorů a postgraduálních studentů v oboru politologie-rate stejné manifesty za použití podobného postupu. Přestože hodnocení od členů davu byly variabilnější než hodnocení od odborníků, konsensus hodnocení dav měl pozoruhodnou dohodu s konsensus expertní hodnocení (obrázek 5.6). Toto srovnání ukazuje, že stejně jako u Galaxy Zoo, výpočetní projekty v oblasti lidských mohou produkovat vysoce kvalitní výsledky.
Obrázek 5.6: Expertní odhady (osa x) a odhady dav (osa y) byli v pozoruhodném dohodě při kódování 18 manifesty výrobců z Velké Británie (Benoit et al. 2015) . Manifesty kódované byly ze tří politických stran (konzervativní, práce, liberální demokraté) a šesti volbách (1987, 1992, 1997, 2001, 2005, 2010).
V návaznosti na tento výsledek, Benoit a kolegové použili jejich dav-kódovací systém dělat výzkum, který byl nemožný s manifest Project. Například manifest projekt neměl kódovat manifesty na téma imigrace, protože to nebyl nápadný téma, kdy byl kódovací systém vyvinutý v polovině-1980. A v tomto bodě, to je logisticky nemožné, aby manifest projektu vrátit a znovu kód svá prohlášení k zachycení těchto informací. Z tohoto důvodu se zdá, že výzkumníci mají zájem o studium politiku imigrace mají smůlu. Nicméně, Benoit a jeho kolegové byli schopni využít jejich lidské výpočetního systému provádět tuto kódování-přizpůsobené jejich výzkumu otázek rychle a snadno.
Aby bylo možné studovat imigrační politiku, ale kódované manifesty pro osm stran ve volbách roku 2010 ve Velké Británii. Každá věta v každém manifestu byla kódována jak k zda to souvisí s přistěhovalectvím, a pokud ano, zda to bylo pro-imigrace, neutrální, nebo anti-imigrace. Do 5 hodin od zahájení jejich projekt, výsledky byly v. Oni sbíral více než 22.000 odpovědí na celkových nákladech ve výši $ 360. Dále, odhady z davu ukázal pozoruhodnou dohodu s dřívějším průzkumu odborníků. Potom, jako závěrečný test, o dva měsíce později, výzkumníci reprodukovat jejich dav-kódování. Během několika hodin, oni vytvořili nový dav kódované datové sady, které přesně odpovídají jejich původní datovou sadu dav kódované. Jinými slovy, člověk výpočet jim umožnilo generovat kódování politických textů, které souhlasily s odborným hodnocením a byl reprodukovatelné. Dále, protože lidský výpočet byla rychlá a levná, bylo to pro ně snadné přizpůsobit jejich sběr dat pro jejich konkrétní výzkumné otázky o imigraci.
