Stu rùbbrica hè disignatu a ièssiri usatu comu nu rifirimentu, piuttostu chè per esse lettu comu na fàvula.
Cullaburazioni Mass blends idei da scienza citadinu, crowdsourcing, è paga cullittivu. Scienza citadinu di solitu significa chi trattàvanu "citadini" (vene à dì, non-scinziati), in u prucedimentu scentificu (Crain, Cooper, and Dickinson 2014) . Crowdsourcing di solitu significa piglià un prublema di solitu solving moins de un 'urganisazione è inveci cuscini lu à una mansa di (Howe 2009) . Nurmativa u cullettivu di solitu significheghja i gruppi di pirsuni agiscenu fusioni in modi ca parenu intelligenti (Malone and Bernstein 2015) . Nielsen (2012) hè un spettaculu chì surghjenti librettu di-a durata in lu putiri di cullaburazioni di massa di a ricerca scientifica.
Cci sunnu tanti tipi di cullaburazioni di massa ca nun stava bonu neatly nta li tri catigurìi ca mi prupusi, è pensu trè meritava spiciali attinzioni, pirchi Pò esse tandu interessante di a ricerca suciali, a quarchi puntu. Un esempiu hè marcati di saggi, induve i participanti cumprà è u Cuntrattu di cumerciu chì sò fundate mortgage nantu à outcomes chì accade in u mondu (Wolfers and Zitzewitz 2004; Arrow et al. 2008) . Marcati pridisci sunnu spissu usati da impresi è i cullettività di pruspettiva, e ni li mircati pridisci hannu statu macari usatu par circadori suciale à predict u replicability di studii publicatu in psiculugia (Dreber et al. 2015) .
A seconda esempiu chì ùn mi jìssi beni in u mio schema categorization hè u prugettu Omu Univirsali, unni circadori cullabburau usannu un blog è wikis à determinà nove theorems matimatica (Gowers and Nielsen 2009; Cranshaw and Kittur 2011; Nielsen 2012; Kloumann et al. 2016) . U prugettu Omu Univirsali è in certi modi sìmili a lu Premiu Netflix, ma a li participanti a prugettu Omu Univirsali di più attivu edificau supra la suluzzioni parziale di l 'autri.
A terza esempiu chì ùn mi jìssi beni in u mio schema categorization hè mobilizations tempu-dipindenti da com'è a difesa Advanced Research Projects Agency (DARPA) Network Challenge (vale à dì, u Red Parrucchiera Barabattule). Pè sapenne di più nantu à issi tempi mobilizations fattivu voir Pickard et al. (2011) , Tang et al. (2011) , e Rutherford et al. (2013) .
Lu tèrmini "càlculu umani" veni fora di u travagliu fattu da scentifichi urdinatore, è à capì u cuntestu daretu à sta ricerca sarà migliuramentu di u vostru capacità à coglie fora prublemi, chì pudia esse amenable à lu. Per certi affari, impianti ncridibilmenti putenti cù sviluppu luntanu di più di la cumpagnia ancu di quelli tercani. Per esempiu, in iucaturi, impianti pò batta mancu lu megghiu Grand maestri. Ma-e sta hè menu bè apprizzatu di a sucetà scinziati-di altri affari, impianti sò intreccia tantu peggiu di la genti. Nta àutri paroli, avà tu sì megliu cà macari lu cchiù sufisticata urdinatore à certi affari nantu à a so trasfurmazioni di images, video, audio, è un testu. Cusì-comu fu fatta da un spettaculu chì XKCD animata-ci sò affari chì aduprera di impianti e dura di pòpulu, ma ci sò ancu fatti chì sò difficiuli per impianti e facile di pirsuni (Figura 5.13). scentifichi informatica a travagghiari supra sti dura-di-impianti-ii-di-umana fatti, dunca, s'addunau ca putièunu cumprendi la cumpagnia di a so dimarchja programming. Ecco comu Luis av Ahn (2005) discrivutu càlculu umani, quannu ammintatu prima u termine à a so insemi: ". Una di paradigmu di l'usu di a putenza di trasfurmazioni umani p'arrisòrviri prubbrema ca impianti ùn pò ancu scioglie"
Par sta definizione FoldIt-ch'e aghju discritta in a sizzioni: in u aperta chiama-putìa ssiri cunzidiratu un prugettu càlculu umanu. A ogni modu, aghju sceglie a categorize FoldIt comu nu d aperta per via ch'ella ci hè bisognu di sapè fà spertu e si pigghia li suluzzioni megliu, hà cuntribuitu piuttostu cà cù una divisioni-applicàrisi àutri-valdi strategia.
Pi nu cillenti cure lunghezza libru di càlculu umana, in u sensu cchiù ginirali di la palora, voir Law and Ahn (2011) . Chapter 3 di Law and Ahn (2011) havi na ntirissanti discussioni di passi di mischjà più cumplessa cà i passi in stu capitulu.
Lu tèrmini "spaccatu-applicàrisi àutri-valdi" era adupratu par Wickham (2011) pi discrìviri una strategia di scienza dî compiuter di statìstiche, ma si occupa benissimu lu prucessu di parechji prugetti càlculu umanu. U-applicàrisi àutri-valdi spaccatu stratiggìa eni sìmili a lu quadru MapReduce sviluppatu à Google (Dean and Ghemawat 2004; Dean and Ghemawat 2008) .
Dui scattru prugetti càlculu umani chì ùn avianu u spaziu di discussioni sunnu lu Game ESP (Ahn and Dabbish 2004) è Curacao (Ahn et al. 2008) . Tutti dui di sti prughjetti trovu modi di creatività a motivate i participanti à purtà un etichette nantu à imàgini. Tuttavia, à prò di sti prugetti hà risuscitatu custioni etichi parchì, comu aise Zoo, i participanti à u ESP Game e Curacao nun sacciu comu li dati fochi usatu (Lung 2012; Zittrain 2008) .
Inspirati da u ESP Game, parechji circadori ani pruvatu à sviluppà altri "ghjochi cù una finalità" (Ahn and Dabbish 2008) (vale à dì, "ghjochi càlculu umani-based" (Pe-Than, Goh, and Lee 2015) ) chì pò esse usatu p'arrisòrviri un varietà di altri prublemi. Chì sti "ghjochi cù una finalità" tenint in cumunu è chì si arrinesci a fari li fatti so indiati in càlculu umani e bugliticce. Cusì, mentri lu ESP Game n cumuni la stissa spaccatu-applicàrisi àutri-mudificà a struttura incù aise Zoo, lu diffirisci in quantu i participanti sò mutivatu-di piacè vs. brama à aiutà li scienzi.
I mo description of Desire Zoo si basa nantu à Nielsen (2012) , Adams (2012) , Clery (2011) , e Hand (2010) , è a mio prisentazione di i scopi di ricerca di Vexin Zoo era pratica. Pè sapenne di più nantu à a storia di classìfica Vexin à l 'astronumìa, e comu aise Zoo cuntinueghja sta tradizione, voir Masters (2012) e Marshall, Lintott, and Fletcher (2015) . Building nantu à aise Zoo, i circadori di tennis aise Zoo 2 chi studiusu di più di 60 milioni di più Pavel murfulòggicu cumplessu da vuluntari (Masters et al. 2011) . In seguita, ch'elli si vede in e quistione di fora di morphology aise cumpresi venda à a superficia di a luna, in cerca di pianeti, e transcribing vechji documenti. Nzinu a ora, tutti i so prugetti sò colti à www.zooniverse.org (Cox et al. 2015) . Unu di i prughjetti di-Snapshot serengeti-parmette tistimunianzi ca aise Zoo-tippu prugetti classìfica imaghjini pò ancu essa fattu di ricerca ambiente (Swanson et al. 2016) .
Di circadori preparanu à utilizà un mercatu di travagghiu micru-compitu (p'asempiu, Amazon vutu Manicure Scissors) per un prugettu càlculu umani, Chandler, Paolacci, and Mueller (2013) e Wang, Ipeirotis, and Provost (2015) offri boni cunsigli di u generu compitu e lucca related issues.
Circadori interested in facenu ciò ch'e pensu è chiamatu sistemi càlculu umani siconda generazione (per esempiu, sistema ca usamu etichette umana à furmà un mudellu amparera machine) putissi essiri ntirissatu ntô Shamir et al. (2014) (pi asempiu cù faccia) e Cheng and Bernstein (2015) . Also, sti prughjetti pò esse fatta cù chiama aperta, cù quale circadori di mettesi à creà mudelli machine à perdre cù i più grandi armata di predictive. Per esempiu, a squadra aise Zoo corse una d aperta è trovu un novu avvicinamentu chì outperformed i unu mossu in Banerji et al. (2010) ; voir Dieleman, Willett, and Dambre (2015) pi li dittagli.
chiamate Open ùn sò novu. In fatti, unu di li cchiù canusciutu-chiama aperta ricolla à 1714, quannu lu parramentu di Britain criatu Lu Premiu Longitudine di qualchissia chì pudia sviluppà un certu modu di definisce u Voyage di un battellu in mare. U prublemu stumped tanti di li cchiù granni scentifichi di u tempu, tra cui 'Isaac Newton, e li suluzzioni chi vinceru vinni' n sècutu mandata da un clockmaker da la campagne chì si avvicinanu, u prublema di un'antra manera da scentifichi chì eranu fighjendu e scumesse di una suluzione chì diventerà una certa manera, vennu cuimmurciuti astronumìa (Sobel 1996) . Comu stu isempiu è, unu motivu ca chiama aperta sò parsi a appiccicò accussì beni è ch'elli si derà un accessu à a ghjente cù i sfarenti, e pruspettive offerte è e cumpetenze (Boudreau and Lakhani 2013) . Voir Hong and Page (2004) e Page (2008) di più nantu à u valori di a diversità in u prublema suluzione.
Ciascuna di l 'li casi d' aperta in lu capitulu abbisogna un pocu di più spiegazione per quessa ch'ella un'he in sta categuria. Prima, unu viaghju ch'e distìnguiri tra càlculu umani è prugetti d 'aria è diversa p'agghicari' n màssima hè un mediu di tutti li suluzzioni (càlculu umanu), o l 'suluzione megliu (d aperta). Lu Premiu Netflix hè assai scaltru in nfatti perchì a sola suluzione megghiu riniscìu a èssiri na Average sufisticata di individuale suluzione, un S'avvicinò chjama una suluzione corti ducali (Bell, Koren, and Volinsky 2010; Feuerverger, He, and Khatri 2012) . Da u puntu di Netflix, parò, tuttu ciò ch'elli avianu a fari era coglie sola suluzione megliu.
Seconda, da certi definizione di càlculu umani (per esempiu, Von Ahn (2005) ), FoldIt avissi a ssiri cunzidiratu un prugettu càlculu umanu. A ogni modu, aghju sceglie a categorize FoldIt comu nu d aperta per via ch'ella ci hè bisognu di sapè fà spertu e si pigghia li suluzzioni megliu, hà cuntribuitu, piuttostu cà cù una divisioni-applicàrisi àutri-valdi strategia.
Infine, unu putissi sustennu ca avance-di-Brivettu hè un esempiu di cullezzione di dati distribuiti. I sceglie a cumprendi ca si trattava di nu d aperta per via ch'ella hè una struttura di stu paliu feroci-cum'è e sulu li megghiu li cuntribbuti sunnu usati (mentri cu cullezzione di dati distribuitu, l'idea di li cuntribbuti boni e tinti è menu chiaru).
Pè sapenne di più nantu à u Premiu Netflix, voir Bennett and Lanning (2007) , Thompson (2008) , Bell, Koren, and Volinsky (2010) , e Feuerverger, He, and Khatri (2012) . Pè sapenne di più nantu à FoldIt vede, Cooper et al. (2010) , Andersen et al. (2012) , e Khatib et al. (2011) ; u mio description of FoldIt si basa nantu e descrizzioni in Nielsen (2012) , Bohannon (2009) , e Hand (2010) . Pè sapenne di più nantu à merci-di-Brivettu, voir Noveck (2006) , Bestor and Hamp (2010) , Ledford (2007) , e Noveck (2009) .
Simili à u risultatu di Glaeser et al. (2016) , Mayer-Schönberger and Cukier (2013) , Chapter 10 raporti grande acquisti in u impianti di inspectors varri à New York City, quannu cuntrolli sò misteri guidati da mudelli predictive. In New York City, sti mudelli predictive foru custruiti da persone chì travaglianu a cità, Ma in altri casi, si pudia pensà chì puderanu esse criatu, o dâ migghiuranza cu chiama aperta (per esempiu, Glaeser et al. (2016) ). Tuttavia, una primura cù mudelli predictive essiri usatu pi ch'iddu distribbuisci e risorse è chì i mudeli pà avè u putenziale di rinfurzà i biases esistenti. Parechje circadori già sacciu ", città vecchia in, vecchia fora", e cu mudelli predictive si pò esse "rifarisce à, lu priggiudizziu fora." See Barocas and Selbst (2016) e O'Neil (2016) di più nantu à u rinunziò di mudelli predictive custruitu cu dati di furmazione biased |.
Unu problema chi pudia impedisce a cullettività da usannu contests aperta è chì hè ubligatoriu di libbirtati di dati, ca putissi purtari a lu pettu a privacy. Pè sapenne di circa privacy è libbirtati di dati a chjamanu aperta voir Narayanan, Huey, and Felten (2016) è l 'avanguardia in Chapter 6.
I mo description of eBird si basa nantu e descrizzioni in Bhattacharjee (2005) e Robbins (2013) . Pè sapenne di supra comu circadori aduprà mudelli di statìstiche analizà dati eBird voir Hurlbert and Liang (2012) e Fink et al. (2010) . Pè sapenne di più nantu à a storia di a scenza u citadinu in ornothology, voir Greenwood (2007) .
Pè sapenne di più nantu à u Journals Prugettu Malawi, voir Watkins and Swidler (2009) e Kaler, Watkins, and Angotti (2015) . È di più nantu à un prughjettu ligata in Sud Africa, voir Angotti and Sennott (2015) . Pè sapenne di li siquenti sunnu asempî di a ricerca cù data, da u Prughjettu Malawi Journals voir Kaler (2004) e Angotti et al. (2014) .
I mo appruccià si versu a fanni i cunsigli generu fù inductif, basata supra li siquenti sunnu asempî di successu è hà fiascatu prugetti cullaburazioni di massa ca Corsu a francisata troppu intesu parlà. Ci hè dinò un bracciu di a ricerca prova a applicàrisi àutri tiurìi custumi suciali cchiù ginirali à i dicori cumunità ligna chì hè Bandera di a lu disignu di prughjetti cullaburazioni di massa, vede, per esempiu, Kraut et al. (2012) .
Par ciò chì riguarda i participanti motivating, hè primurosu di truvà di usu pi cumprènniri pròpiu poita populu participà à prugetti cullaburazioni di massa (Nov, Arazy, and Anderson 2011; Cooper et al. 2010, Raddick et al. (2013) ; Tuite et al. 2011; Preist, Massung, and Coyle 2014) . Sè vo piglià a motivate participanti cu pagamentu nantu à un mercatu di travagghiu micru-compitu (p'asempiu, Amazon Manicure Scissors vutu) Kittur et al. (2013) prupone qualchi cunsiglii.
Par ciò chì riguarda iscrizzione meraviglia, di cchiù li siquenti sunnu asempî di scuperte sò morti mpruvisa vinia fora di prughjetti Zoouniverse, voir Marshall, Lintott, and Fletcher (2015) .
Par ciò chì riguarda essa pratichi, certi boni ntruduzzioni ginirali si à i resultati intarvena sò Gilbert (2015) , Salehi et al. (2015) , Schmidt (2013) , Williamson (2016) , Resnik, Elliott, and Miller (2015) , e Zittrain (2008) . Di tematiche spicificamenti riguardanti resultati ligali cu cullaburatori, a ghjente, voir Felstiner (2011) . O'Connor (2013) saluti e comu pruvàrinni oversight etichi di a ricerca, quandu i rolli di circadori è i participanti sfocatura. Di tematiche riguardanti dati spartera, mentri chì prutegge participats in prughjetti di scienza citadinu, voir Bowser et al. (2014) . Sìa Purdam (2014) e Windt and Humphreys (2016) hannu qualchi discussioni su li tematiche etichi a cullezzione di dati distribuiti. Infine, a più prugetti ricunnosce i cuntributi, ma ùn dà creditu authorship à i participanti. In Foldit, u lettore Foldit sunnu spissu alincati nti un autore (Cooper et al. 2010; Khatib et al. 2011) . In altri prugetti d aperta, u Contributor vincitori ponnu spissu scrive una carta addiscriviennu a so suluzione (per esempiu, Bell, Koren, and Volinsky (2010) e Dieleman, Willett, and Dambre (2015) ). In a famiglia di Vexin Zoo di prughjetti, i participanti assai attivu è mpurtanti sunnu spissu invitati à esse co-autori in u articuli. Per esempiu, Ivan Terentev e Tim Matorny, dui participanti aise Zoo Radio da Russia, eranu co-autori nantu à unu di i ducumenti chi si svilupparu da chì prugettu (Banfield et al. 2016; Galaxy Zoo 2016) .