Pli lwen Book

Seksyon sa-a fèt yo dwe itilize kòm yon referans, olye ke ou dwe li kòm yon naratif.

• Entwodiksyon (Seksyon 5.1)

Kolaborasyon Mass melanje ide ki soti syans sitwayen ameriken, ekstènalizasyon ouvè, ak entèlijans kolektif. Syans Sitwayen souvan sa vle di ki enplike "sitwayen" (sa vle di, ki pa syantis) nan pwosesis la syantifik (Crain, Cooper, and Dickinson 2014) . Ekstènalizasyon ouvè souvan sa vle di pran yon pwoblèm anjeneral rezoud nan yon òganizasyon ak olye externalisation li nan yon gwo foul moun (Howe 2009) . Kolektif entèlijans souvan sa vle di gwoup moun ki aji kolektivman nan fason ki sanble entelijan (Malone and Bernstein 2015) . Nielsen (2012) se yon entwodiksyon liv-longè bèl bagay nan pouvwa a nan kolaborasyon mas pou rechèch syantifik.

Gen plizyè kalite nan kolaborasyon mas ki pa anfòm nètman nan twa kategori yo ke mwen pwopoze, e mwen panse twa merite atansyon espesyal paske yo kapab itil nan rechèch sosyal nan kèk pwen. Yon egzanp se mache prediksyon, kote patisipan achte ak kontra komès ke yo restituer ki baze sou rezilta ki rive nan mond lan (Wolfers and Zitzewitz 2004; Arrow et al. 2008) . Predi ke mache yo ap souvan yo itilize pa konpayi ak gouvènman pou prévisions, ak predi ke mache te tou te itilize pa chèchè sosyal nou ka prevwa rproduktibilite a nan pibliye syans nan sikoloji (Dreber et al. 2015) .

Yon egzanp dezyèm ki pa anfòm byen nan konplo klasifikasyon mwen an se pwojè a Polymath, kote chèchè kolabore lè l sèvi avèk blogs ak wiki bay prèv teyorèm matematik nouvo (Gowers and Nielsen 2009; Cranshaw and Kittur 2011; Nielsen 2012; Kloumann et al. 2016) . Pwojè a Polymath se nan kèk fason menm jan ak Prize la Netflix, men nan patisipan yo pwojè Polymath plis aktivman bati sou solisyon yo yo te yon pati nan lòt moun.

Yon egzanp twazyèm ki pa anfòm byen nan konplo klasifikasyon mwen an se tan-depandan mobilizasyon tankou Ajans la defans avanse Rechèch Pwojè (DARPA) Rezo defi (sa vle di, defi a Wouj balon). Pou plis enfòmasyon sou sa yo tan mobilizasyon sansib wè Pickard et al. (2011) , Tang et al. (2011) , ak Rutherford et al. (2013) .

• Moun kalkil (Seksyon 5.2)

Tèm "imen kalkil" vini soti nan travay ou fè pa syantis òdinatè, ak konpreyansyon kontèks la dèyè rechèch sa a pral amelyore kapasite w nan chwazi soti pwoblèm ke sa ta kapab prèt nan li. Pou sèten travay, òdinatè yo èkstrèmeman pwisan ak kapasite byen lwen depase moun menm ekspè. Pou egzanp, nan echèk, òdinatè ka bat menm pi bon mèt yo Grand. Men,-yo ak sa a se mwens byen apresye pa sosyal syantis-pou lòt travay, òdinatè yo aktyèlman pi mal ke moun. Nan lòt mo, kounye a ou se pi bon pase menm òdinatè a pi sofistike nan travay sèten ki enplike pwosesis nan imaj, videyo, odyo, ak tèks. Se konsa-jan sa te ilistre pa yon bèl bagay XKCD desen ki pi ba-gen travay ki fasil pou òdinatè epi yo ka difisil pou moun, men gen tou travay ki difisil pou òdinatè ak fasil pou moun (Figi 5.13). syantis Odinatè ap travay sou sa yo difisil-pou-òdinatè-fasil-pou-imen travay, Se poutèt sa, reyalize ke yo ka gen ladan moun nan pwosesis enfòmatik yo. Men ki jan Luis von Ahn (2005) dekri kalkil imen lè li te premye envante tèm nan nan tèz li yo: ". Yon paradigm pou itilize pouvwa pwosesis imen yo rezoud pwoblèm ki òdinatè pa kapab ankò rezoud"

Figi 5.13: Pou kèk travay òdinatè yo se etonan, depase kapasite nan de ekspè nan moun. Men, pou lòt travay, moun òdinè ka pèfòme òdinatè menm sofistike sistèm yo. pwoblèm echèl gwo ki enplike travay ki difisil pou òdinatè ak fasil pou moun yo byen-adapte pou kalkil moun. Itilize dapre kondisyon ki dekri la a: http://xkcd.com/license.html

Lè sa a definisyon FoldIt-ki mwen dekri nan seksyon an sou louvri apèl-ta ka konsidere tankou yon pwojè kalkil moun. Sepandan, mwen chwazi yo kategorize FoldIt kòm yon apèl louvri paske li mande pou konpetans espesyalize epi li pran solisyon a pi bon kontribye olye ke lè l sèvi avèk yon dezinyon-aplike-konbine estrateji.

Pou yon tretman ekselan longè liv nan kalkil imen, nan sans ki pi jeneral nan tèm nan, gade Law and Ahn (2011) . Chapit 3 nan Law and Ahn (2011) gen yon diskisyon enteresan nan konbine etap pi konplèks pase sa yo nan chapit sa a.

Tèm "fann-aplike-konbine" te itilize pa Wickham (2011) a dekri yon estrateji pou estatistik informatique, men li parfe kaptire pwosesis la nan pwojè anpil kalkil moun. Fann-aplike-konbine Estrateji a se menm jan ak fondasyon an MapReduce devlope nan Google (Dean and Ghemawat 2004; Dean and Ghemawat 2008) .

De entelijan pwojè kalkil imen ke mwen pa t 'gen espas yo diskite sou yo jwèt la Piseta (Ahn and Dabbish 2004) ak Analyse antivirus (Ahn et al. 2008) . Tou de nan pwojè sa yo jwenn fason kreyatif motive patisipan yo bay etikèt sou imaj. Sepandan, toulède nan pwojè sa yo tou leve soti vivan kesyon etik paske, kontrèman Galaksi Zoo, patisipan yo nan jwèt la Piseta ak Analyse antivirus pa t 'konnen ki jan yo te done yo te itilize (Lung 2012; Zittrain 2008) .

Enspire pa jwèt la Piseta, anpil chèchè yo te eseye devlope lòt moun "jwèt ak yon objektif" (Ahn and Dabbish 2008) (sa vle di, "imen ki baze sou kalkil jwèt" (Pe-Than, Goh, and Lee 2015) ) ki ka itilize yo rezoud yon varyete de lòt pwoblèm tou. Ki sa ki sa yo "jwèt ak yon objektif" genyen an komen se yo ke yo eseye fè travay yo patisipe nan kalkil imen agreyab. Se konsa, pandan y ap jwèt la Piseta pataje menm fann-aplike-konbine estrikti a ak Galaksi Zoo, li diferan nan ki jan patisipan yo motive-plezi vs moun vle fè ede syans.

Deskripsyon mwen nan Galaksi zou tire sou Nielsen (2012) , Adams (2012) , Clery (2011) , ak Hand (2010) , ak prezantasyon mwen nan objektif yo rechèch nan Galaksi zou te senplifye. Pou plis enfòmasyon sou istwa a nan galaksi klasifikasyon nan astwonomi ak ki jan Galaksi zou kontinye sa a tradisyon, gade Masters (2012) ak Marshall, Lintott, and Fletcher (2015) . Bati sou Galaksi zou, chèchè yo te ranpli Galaksi zou 2 ki kolekte plis pase 60 milyon pi konplèks klasifikasyon mòfoloji soti nan volontè (Masters et al. 2011) . Pli lwen, yo branche deyò nan pwoblèm deyò nan mòfolojik galaksi ki gen ladan eksplore sifas la nan lalin lan, pou chèche planèt yo, ak transkripsyon dokiman fin vye granmoun. Kounye a, tout pwojè yo pou yo ranmase nan www.zooniverse.org (Cox et al. 2015) . Youn nan pwojè yo-Snapshot Serengeti-bay prèv ki montre Galaksi zou-kalite pwojè imaj klasifikasyon kapab tou gen pou fè pou rechèch anviwònman (Swanson et al. 2016) .

Pou chèchè planifye yo sèvi ak yon mikwo-travay mache travay (egzanp, Amazon Mechanical Turk) pou yon pwojè kalkil imen, Chandler, Paolacci, and Mueller (2013) ak Wang, Ipeirotis, and Provost (2015) ofri bon konsèy sou konsepsyon travay epi lòt pwoblèm ki gen rapò.

Chèchè enterese nan kreye sa m 'te rele dezyèm jenerasyon sistèm kalkil imen (egzanp, sistèm ki itilize etikèt imen nan tren yon modèl aprantisaj machin) ka enterese nan Shamir et al. (2014) (pou yon egzanp lè l sèvi avèk odyo) ak Cheng and Bernstein (2015) . Epitou, pwojè sa yo ka fè ak apèl louvri, annakò ak sa chèchè konpetisyon yo kreye modèl aprantisaj machin ak pi gran pèfòmans nan prediksyon. Pou egzanp, ekip la Galaksi zou kouri yon apèl louvri epi li te jwenn yon apwòch nouvo ki depase yon sèl la devlope nan Banerji et al. (2010) ; wè Dieleman, Willett, and Dambre (2015) pou plis detay.

• Apèl Louvri (Seksyon 5.3)

apèl Louvri yo pa nouvo. An reyalite, youn nan ki pi byen li te ye apèl yo louvri dat tounen nan 1714 lè Palman an bretay la kreye Prize la Lonjitid pou nenpòt moun ki ki ta ka devlope yon fason yo detèmine lonjitid la nan yon bato nan lanmè. Pwoblèm nan stumped anpil nan syantis yo pi gran nan jou yo, ki gen ladan Isaac Newton, e li te solisyon an genyen evantyèlman soumèt pa yon clockmaker soti nan peyi a ki pwoche bò pwoblèm nan yon fason diferan soti nan syantis ki te konsantre sou yon solisyon ki ta yon jan kanmenm enplike astwonomi (Sobel 1996) . Kòm egzanp sa a montre, yon rezon ki fè apèl louvri yo te panse yo travay sa byen se yo ke yo bay aksè a moun ki gen pèspektiv diferan yo ak kapasite li (Boudreau and Lakhani 2013) . Wè Hong and Page (2004) ak Page (2008) pou plis enfòmasyon sou valè a nan divèsite nan rezoud pwoblèm.

Chak nan ka yo rele louvri nan chapit la mande pou yon ti jan nan eksplikasyon plis pou pou ki sa li ki dwe nan kategori sa a. Premyèman, yon fason ke mwen distenge ant kalkil imen ak pwojè rele louvri se si wi ou non pwodiksyon an se yon mwayèn de tout solisyon yo (kalkil moun) oswa solisyon a pi bon (ouvè apèl). Prize la Netflix se yon ti jan difisil nan sans sa a paske solisyon a pi bon vire soti nan ka yon mwayèn sofistike nan solisyon endividyèl, yon pwoche bò rele yon solisyon ansanbl (Bell, Koren, and Volinsky 2010; Feuerverger, He, and Khatri 2012) . Nan pèspektiv nan Netflix, sepandan, tout sa yo te fè te chwazi solisyon an pi byen.

Dezyèmman, pa kèk definisyon nan kalkil moun (egzanp, Von Ahn (2005) ), FoldIt ta dwe konsidere yon pwojè kalkil moun. Sepandan, mwen chwazi yo kategorize FoldIt kòm yon apèl louvri paske li mande pou konpetans espesyalize epi li pran solisyon a pi bon kontribye, olye ke lè l sèvi avèk yon dezinyon-aplike-konbine estrateji.

Finalman, yon sèl te kapab diskite ke elèv bay lòt elèv-a-Patant ki se yon egzanp distribye koleksyon done. Mwen chwazi genyen ladan yo li kòm yon apèl louvri paske li gen yon estrikti konpetisyon ki tankou epi sèlman kontribisyon yo pi byen yo te itilize (Lè nou konsidere ke ak distribye koleksyon done, lide a nan kontribisyon bon ak move ki pi piti a klè).

Pou plis enfòmasyon sou Prize la Netflix, wè Bennett and Lanning (2007) , Thompson (2008) , Bell, Koren, and Volinsky (2010) , ak Feuerverger, He, and Khatri (2012) . Pou plis enfòmasyon sou FoldIt wè, Cooper et al. (2010) , Andersen et al. (2012) , ak Khatib et al. (2011) ; deskripsyon m 'lan nan FoldIt tire sou deskripsyon an Nielsen (2012) , Bohannon (2009) , ak Hand (2010) . Pou plis enfòmasyon sou elèv bay lòt elèv-a-Patant, gade Noveck (2006) , Bestor and Hamp (2010) , Ledford (2007) , ak Noveck (2009) .

Menm jan ak rezilta yo nan Glaeser et al. (2016) , Mayer-Schönberger and Cukier (2013) , Chapit 10 rapò gwo pwogrè nan pwodiktivite a nan enspektè lojman nan New York City lè enspeksyon yo se gide pa modèl prediksyon. Nan vil Nouyòk, sa yo modèl prediksyon te konstwi pa anplwaye vil la, men nan lòt ka, yon sèl te kapab imajine ke yo te kapab kreye oswa amelyore ak apèl louvri (egzanp, Glaeser et al. (2016) ). Sepandan, yon sèl pi gwo enkyetid ak modèl prediksyon te itilize asiyen resous se ke modèl yo gen potansyèl la yo ranfòse prejije ki egziste deja. Anpil chèchè deja konnen "fatra nan, fatra soti", ak ak modèl prediksyon li kapab "patipri nan, patipri soti." Wè Barocas and Selbst (2016) ak O'Neil (2016) pou plis enfòmasyon sou danje ki genyen nan modèl prediksyon bati ak done fòmasyon partial.

Yon pwoblèm ki ta ka anpeche gouvènman soti nan lè l sèvi avèk konpetisyon louvri se ke li mande pou lage done, ki kapab mennen nan vyolasyon sou vi prive. Pou plis enfòmasyon sou vi prive ak lage done nan apèl louvri wè Narayanan, Huey, and Felten (2016) ak diskisyon an nan Chapit 6.

• Distribiye koleksyon done (Seksyon 5.4)

Deskripsyon mwen nan eBird tire sou deskripsyon an Bhattacharjee (2005) ak Robbins (2013) . Pou plis enfòmasyon sou ki jan chèchè itilize modèl estatistik yo analize done eBird wè Hurlbert and Liang (2012) ak Fink et al. (2010) . Pou plis enfòmasyon sou istwa a nan syans sitwayen nan ornothology, gade Greenwood (2007) .

Pou plis enfòmasyon sou Journals Pwojè a Malawi, wè Watkins and Swidler (2009) ak Kaler, Watkins, and Angotti (2015) . Se pou plis sou yon pwojè ki gen rapò nan Lafrik di sid, gade Angotti and Sennott (2015) . Pou plis egzanp nan rechèch lè l sèvi avèk done ki sòti nan Pwojè a Malawi Journals wè Kaler (2004) ak Angotti et al. (2014) .

• Designing pwòp ou a (Seksyon 5.5)

apwòch mwen an ofri konsèy konsepsyon te endiktif, ki baze sou egzanp yo nan siksè ak echwe pwojè kolaborasyon mas ke mwen te tande pale sou. Genyen tou yon kouran nan rechèch eseye aplike plis jeneral sosyal teyori sikolojik desine kominote yo sou entènèt se sa ki ki gen rapò ak desen an nan pwojè kolaborasyon mas, wè, pou egzanp, Kraut et al. (2012) .

Konsènan motivasyon patisipan yo, li se aktyèlman byen difisil eseye figi konnen egzakteman poukisa moun patisipe nan pwojè kolaborasyon mas (Nov, Arazy, and Anderson 2011; Cooper et al. 2010, Raddick et al. (2013) ; Tuite et al. 2011; Preist, Massung, and Coyle 2014) . Si ou gen plan motive patisipan yo ak peman sou yon mache travay mikwo-travay (egzanp, Amazon Mechanical Turk) Kittur et al. (2013) ofri kèk konsèy.

Konsènan pèmèt sipriz, pou plis egzanp sou dekouvèt inatandi ap vini soti nan pwojè Zoouniverse, gade Marshall, Lintott, and Fletcher (2015) .

Konsènan ke yo te etik, kèk bon entwodiksyon jeneral nan pwoblèm ki konsène yo se Gilbert (2015) , Salehi et al. (2015) , Schmidt (2013) , Williamson (2016) , Resnik, Elliott, and Miller (2015) , ak Zittrain (2008) . Pou pwoblèm espesyalman ki gen rapò ak pwoblèm legal ak anplwaye foul moun, wè Felstiner (2011) . O'Connor (2013) adrese kesyon sou etik sipèvizyon nan rechèch lè wòl yo nan chèchè yo ak patisipan bwouye. Pou pwoblèm ki gen rapò nan done pataje pandan y ap pwoteje participats nan pwojè syans sitwayen ameriken, wè Bowser et al. (2014) . Tou de Purdam (2014) ak Windt and Humphreys (2016) gen kèk diskisyon sou pwoblèm yo ki etik nan distribye koleksyon done. Finalman, pi pwojè rekonèt kontribisyon men se pa bay patènite kredi nan patisipan yo. Nan Foldit, jwè yo Foldit yo souvan ki nan lis kòm yon otè (Cooper et al. 2010; Khatib et al. 2011) . Nan lòt pwojè louvri rele, kontribitè a genyen ka souvan ekri yon papye dekri solisyon yo jwenn yo (egzanp, Bell, Koren, and Volinsky (2010) ak Dieleman, Willett, and Dambre (2015) ). Nan fanmi an Galaksi zou nan pwojè, kontribye trè aktif ak enpòtan pafwa yo konn envite yo dwe ko-otè sou papye. Pou egzanp, Ivan Terentev ak Tim Matorny, de Radyo Galaksi zou patisipan nan men Larisi, te ko-otè sou youn nan papye yo ki leve soti nan fè konnen ke pwojè (Banfield et al. 2016; Galaxy Zoo 2016) .