5.2.2 foul-kodaj nan manifèst politik

Coding manifèst politik, yon bagay tipikman fè pa ekspè yo, ka fèt pa yon pwojè kalkil imen ki kapab lakòz nan pi gwo rproduktibilite ak fleksiblite.

Menm jan ak Galaksi Zoo, gen anpil sitiyasyon kote chèchè sosyal vle kòd, klasifye, oswa mete etikèt sou yon imaj oswa moso tèks. Yon egzanp sa a kalite rechèch se kodaj manifestos politik yo. Pandan eleksyon yo, pati politik yo pwodui manifesto ki dekri pozisyon politik yo ak k ap gide filozofi yo. Pou egzanp, isit la se yon moso nan Manifès la nan Pati a Labour nan Wayòm Ini a soti nan 2010:

"Dè milyon de moun k ap travay nan sèvis piblik nou an enkòpore valè yo pi bon nan Grann Bretay, ede pèmèt moun yo fè pi plis nan pwòp vi yo pandan y ap pwoteje yo soti nan risk ki genyen nan yo pa ta dwe gen pote sou kont yo. Menm jan nou bezwen yo dwe odasyeu sou wòl la nan gouvènman an nan fè mache travay san patipri, nou bezwen tou yo dwe refòmatè fonse nan gouvènman an. "

Manifè sa yo gen ladan done valab pou syantis politik, patikilyèman moun ki etidye eleksyon yo ak dinamik de deba politik. Yo nan lòd yo sistematik ekstrè enfòmasyon ki soti nan manifestasyon sa yo, chèchè te kreye pwojè a Manifès, ki kolekte 4,000 manifeste soti nan prèske 1,000 pati nan 50 peyi yo ak Lè sa a, òganize syantis politik sistematik kòd yo. Chak fraz nan chak manifesto te kode pa yon ekspè lè l sèvi avèk yon konplo 56-kategori. Rezilta efò kolaborasyon sa a se yon dataset masiv ki rezime enfòmasyon ki entegre nan manifakti sa yo, epi sa a te itilize nan dat plis pase 200 papye syantifik.

Kenneth Benoit ak kòlèg li (2016) deside pran manifakti a kodaj travay ki te deja te fè pa ekspè ak vire l 'nan yon pwojè kalkil imen. Kòm yon rezilta, yo te kreye yon pwosesis kodaj ki pi reproduzib ak pi fleksib, nou pa mansyone pi bon mache ak pi vit.

Travay ak 18 manifeste ki te pwodwi pandan sis eleksyon resan yo nan Wayòm Ini a, Benoit ak kòlèg li yo te itilize estrateji fann-aplike-konbine ak travayè yo nan yon mache travay microtask (Amazon Mechanical Turk ak CrowdFlower yo se egzanp mache mikrotask; pou plis sou mache sa yo , gade Chapit 4). Chèchè yo te pran chak manifè ak divize li nan fraz. Apre sa, yon moun aplike konplo a kodaj nan chak fraz. An patikilye, lektè te mande pou klasifye chak fraz kòm refere a politik ekonomik (gòch oswa dwa), nan politik sosyal (liberal oswa konsèvatif), oswa ni (figi 5.5). Chak fraz te kode pa sou senk moun diferan. Finalman, evalyasyon sa yo te konbine avèk yon modèl estatistik ki te konte pou efè endividyèl-rater ak efè difikilte-of-fraz. Nan tout, Benoit ak kòlèg kolekte 200,000 evalyasyon soti nan apeprè 1,500 moun.

Figi 5.5: Coding konplo de Benoit et al. (2016). Lektè yo te mande pou klasifye chak fraz kòm refere a politik ekonomik (gòch oswa dwa), nan politik sosyal (liberal oswa konsèvatif), oswa ni. Adapte de Benoit et al. (2016), figi 1.

Figi 5.5: Coding konplo de Benoit et al. (2016) . Lektè yo te mande pou klasifye chak fraz kòm refere a politik ekonomik (gòch oswa dwa), nan politik sosyal (liberal oswa konsèvatif), oswa ni. Adapte de Benoit et al. (2016) , figi 1.

Yo nan lòd yo evalye bon jan kalite a nan kodaj la foul moun, Benoit ak kòlèg li yo tou te gen apeprè 10 ekspè pwofesè- ak elèv gradye nan syans politik-vitès manifestos yo menm lè l sèvi avèk yon pwosedi ki sanble. Malgre ke evalyasyon yo nan manm foul moun yo te pi varyab pase evalyasyon yo soti nan ekspè yo, Rating nan foul moun konsansis te gen remakab akò ak Rating la ekspè konsansis (figi 5.6). Sa a konparezon montre ke, menm jan ak Galaksi Zoo, pwojè imitasyon imen ka pwodwi rezilta-wo kalite.

Figi 5.6: Estime ekspè (x-aks) ak estimasyon foul moun (y-aks) yo te nan akò remakab lè kodaj 18 manifesto pati nan Wayòm Ini a (Benoit et al., 2016). Manifakti yo kode yo te soti nan twa pati politik yo (Konsèvatif, Labour, ak Demokrat Liberal) ak sis eleksyon (1987, 1992, 1997, 2001, 2005, ak 2010). Adapte de Benoit et al. (2016), figi 3.

Figi 5.6: Estime ekspè ( \(x\) -aks) ak estimasyon foul moun ( \(y\) -aks) te nan akò remakab lè kodaj 18 manifesto pati nan Wayòm Ini a (Benoit et al. 2016) . Manifakti yo kode yo te soti nan twa pati politik yo (Konsèvatif, Labour, ak Demokrat Liberal) ak sis eleksyon (1987, 1992, 1997, 2001, 2005, ak 2010). Adapte de Benoit et al. (2016) , figi 3.

Bati sou rezilta sa a, Benoit ak kòlèg li te itilize sistèm foul moun-kodaj yo pou fè rechèch ki te enposib avèk sistèm kodaj ekspè ki te itilize pa Manifè Pwojè a. Pou egzanp, Manifè Pwojè a pa t 'kòd manifesto yo sou sijè a nan imigrasyon paske sa pa te yon sijè enpòtan lè yo te konplo a kod devlope nan mitan ane 1980 yo. Epi, nan pwen sa a, li se lojistikman enfasib pou Manifè Pwojè a pou retounen ak recode manifestos yo pou yo pran enfòmasyon sa a. Se poutèt sa, li ta parèt ke chèchè ki enterese nan etidye politik yo nan imigrasyon yo soti nan chans. Sepandan, Benoit ak kòlèg li yo te kapab sèvi ak sistèm kalkil imen yo fè sa a kodaj-Customized kesyon rechèch yo-byen vit ak byen fasil.

Yo nan lòd yo etidye politik imigrasyon, yo kode manifesto yo pou uit pati yo nan eleksyon jeneral 2010 la nan Wayòm Ini a. Chak fraz nan chak manifesto te kode sou si wi ou non li ki gen rapò ak imigrasyon, epi si se konsa, si li te pro-imigrasyon, net, oswa anti-imigrasyon. Nan 5 èdtan nan lansman pwojè yo, rezilta yo te pous Yo te ranmase plis pase 22,000 repons nan yon pri total de $ 360. Pli lwen, estimasyon yo soti nan foul la te montre remakab akò ak yon sondaj pi bonè de ekspè nan. Lè sa a, kòm yon tès final, de mwa pita, chèchè yo repwodwi foul moun-kodaj yo. Nan kèk èdtan, yo te kreye yon nouvo faz-kode dataset ki byen matche orijinal done yo foul moun-kode done. Nan lòt mo, kalkil imen pèmèt yo jenere kodaj nan tèks politik ki te dakò ak evalyasyon ekspè e li te reproduzib. Pli lwen, paske kalkil imen an te rapid ak bon mache, li te fasil pou yo Customize koleksyon done yo nan kesyon espesifik rechèch yo sou imigrasyon.