Əlavə şərh

Bu bölmədə bir povest kimi oxumaq üçün daha çox, bir sened kimi istifadə üçün nəzərdə tutulmuşdur.

• Giriş (Bölmə 5.1)

Mass əməkdaşlıq vətəndaş elm, wordpress və kollektiv kəşfiyyat ideyaları qarışır. Vətəndaş elm adətən "vətəndaşları" elmi prosesi (yəni, qeyri-elm) cəlb deməkdir (Crain, Cooper, and Dickinson 2014) . Wordpress adətən bir izdiham IT Outsourcing əvəzinə adətən bir təşkilat çərçivəsində həll bir problem alaraq və deməkdir (Howe 2009) . Kollektiv kəşfiyyat adətən ağıllı görünür yolla kollektiv fəaliyyət göstərən qruplar deməkdir (Malone and Bernstein 2015) . Nielsen (2012) Elmi-Tədqiqat kütləvi əməkdaşlıq hakimiyyətə gözəl kitab uzunluğu giriş.

Mən təklif üç kateqoriyaya daxil səliqəli uyğun olmayan kütləvi əməkdaşlıq çox növləri var və onlar bir anda ictimai tədqiqat faydalı ola bilər, çünki üç xüsusi diqqətə layiqdir düşünürəm. Məsələn iştirakçıları almaq proqnozlaşdırılması bazarları, və dünyada baş verən yekunlarına həsr geri əsasında ticarət müqavilələri var (Wolfers and Zitzewitz 2004; Arrow et al. 2008) . Əvvəlcədən bazarlarına tez-tez proqnozlaşdırılması üçün firma və hökumətlər tərəfindən istifadə olunur, və proqnozlaşdırılması bazarları da psixologiya nəşr işlər replicability proqnozlaşdırmaq sosial tədqiqatçılar tərəfindən istifadə edilmişdir (Dreber et al. 2015) .

Mənim Kateqoriyalara sxemi də uyğun deyil İkinci misal tədqiqatçılar yeni math teoremləri sübut etmək bloglar və wikis istifadə əməkdaşlıq Polymath layihədir (Gowers and Nielsen 2009; Cranshaw and Kittur 2011; Nielsen 2012; Kloumann et al. 2016) . Polymath layihə Netflix mükafatı bənzər bəzi yollarla, lakin Polymath layihə iştirakçılarının daha fəal başqalarının qismən həllər inşa edilmişdir.

Mənim Kateqoriyalara sxemi də uyğun deyil Üçüncü misal (yəni, Red Balloon Challenge) Müdafiə Advanced Research Projects Agency (DARPA) Network Challenge kimi vaxt asılı Mobilizations edir. Bu vaxt daha ətraflı məlumat üçün həssas səfərbərliklərə görmək Pickard et al. (2011) , Tang et al. (2011) , və Rutherford et al. (2013) .

• İnsan hesablama (Bölmə 5.2)

Termini "insan hesablama" kompüter alimləri tərəfindən edilən işlər çıxır və bu cavabdeh ola bilər problemləri seçmək üçün qabiliyyəti inkişaf edəcək ki, bu araşdırma arxasında kontekstində dərk. Müəyyən vəzifələri üçün kompüter uzaq hətta ekspert insanlar dən çox imkanları ilə inanılmaz güclü edir. Məsələn, şahmat, kompüter hətta ən yaxşı qrossmeysterlər döymək bilərsiniz. Amma və bu daha az sosial tərəfindən yüksək qiymətləndirilir alimlər üçün digər vəzifələri, kompüter həqiqətən insanların daha pisdir. Başqa sözlə, indi siz şəkillər, video, audio və mətn emal cəlb müəyyən vəzifələri hətta ən inkişaf etmiş kompüter daha yaxşıdır. Belə ki, kimi gözəl XKCD ilə təsvir edilmişdir karikatura orada insanlar üçün kompüterlər üçün asan və çətin vəzifələri, lakin kompüterlər üçün ağır və insanlar üçün asan vəzifələri (Şəkil 5.13) da var. hard--kompüter asan üçün insan üçün vəzifələri, buna görə də, onların hesablama prosesində insanlar daxil ola bilər ki, həyata keçirilir və bu barədə iş Kompüter elm. Burada Luis von Ahn necə (2005) o, ilk onun dissertasiya termini coined zaman insan hesablanması təsvir edir: ". Bir paradiqma kompüter hələ həll edə bilər ki, problemləri həll etmək üçün insan emal gücü istifadə üçün"

5.13 Şəkil: Bəzi vəzifələri üçün kompüter gözəl insan ekspertlərin imkanı çoxdur. Lakin, digər vəzifələri üçün, adi insanlar hətta inkişaf etmiş kompüter sistemləri outperform bilər. kompüterlər üçün ağır və insanlar üçün asan vəzifələri cəlb irimiqyaslı problemlər insan hesablanması üçün yaxşı uygundur. Burada təsvir şərtlərinə uyğun olaraq istifadə olunur: http://xkcd.com/license.html

Bu müəyyən FoldIt-I açıq bölməsində təsvir çağırışlarına-bilər ki, bir insan hesablama layihə hesab etmək. Lakin, xüsusi bacarıq tələb edir, çünki mən açıq çağırış kimi FoldIt Kateqoriyalara seçin və ən yaxşı həll split-müraciət-birləşdirmək strategiya istifadə daha çox qatqı təmin edir.

Insan hesablama əla kitab uzunluğu müalicəsi üçün, müddəti ən ümumi mənada, görmək Law and Ahn (2011) . Fəsil 3 Law and Ahn (2011) Bu fəsildə nisbətən daha mürəkkəb birləşdirmək addımlar maraqlı müzakirə var.

Termini "split-müraciət birləşdirir" tərəfindən istifadə edilmişdir Wickham (2011) statistik kompüter üçün bir strategiya təsvir, lakin mükəmməl çox insan hesablama layihələr prosesi gösterir. Split-müraciət birləşdirmək strategiya Google inkişaf MapReduce çərçivəsində oxşar (Dean and Ghemawat 2004; Dean and Ghemawat 2008) .

Mən müzakirə üçün yer yox idi iki ağıllı insan hesablama layihələr ESP oyun var (Ahn and Dabbish 2004) və reCAPTCHA (Ahn et al. 2008) . Bu layihələrin hər iki images yazıları təmin etmək iştirakçıları həvəsləndirmək üçün yaradıcı yollar tapılmadı. Galaxy Zoo fərqli olaraq, ESP Oyun və reCAPTCHA iştirakçılarına onların data istifadə olunur necə bilmirdim, çünki Lakin, bu layihələrin həm də etik sualları gündəmə (Lung 2012; Zittrain 2008) .

ESP oyun ruhlanan çox tədqiqatçılar başqaları "məqsədi ilə games" inkişaf etdirmək üçün cəhd (Ahn and Dabbish 2008) (yəni, "insan-based hesablama oyun" (Pe-Than, Goh, and Lee 2015) ) ola bilər ki, digər problemləri bir sıra həll etmək üçün istifadə olunur. Nə bu "məqsədi ilə oyun" ortaq onlar xoş insan hesablanmasında iştirak vəzifələri etmək üçün cəhd edir. ESP Game Galaxy Zoo ilə eyni split-müraciət-birləşdirmək strukturu bölüşür Belə ki, bu elm kömək etmək arzusu vs iştirakçılar necə motivasiya-əyləncə fərqlənir.

Galaxy Zoo Mənim təsviri çəkir Nielsen (2012) , Adams (2012) , Clery (2011) , və Hand (2010) , və Galaxy Zoo tədqiqat məqsədləri Mənim təqdimat sadələşdirilmiş edilmişdir. Astronomiya galaxy təsnifatı tarixi və necə Galaxy Zoo bu ənənəni davam daha ətraflı məlumat üçün, bax Masters (2012) və Marshall, Lintott, and Fletcher (2015) . Galaxy Zoo Building, tədqiqatçılar könüllülər-dən çox 60 milyon daha mürəkkəb morfoloji təsnifatları toplanmış Galaxy Zoo 2 başa (Masters et al. 2011) . Bundan başqa, onlar Ay səthində tədqiq planetlərin üçün axtarış, və köhnə sənədlər transcribing o cümlədən galaxy morfologiya kənarda problemləri daxil həyata budaqlı. Hal-hazırda, bütün layihələr toplanmışdır www.zooniverse.org (Cox et al. 2015) . Biri layihələrin-Snapshot Galaxy Zoo tipli image təsnifat layihələr də ekoloji tədqiqat üçün edilə bilər ki, sübut Serengeti-edir (Swanson et al. 2016) .

Tədqiqatçılar bir insan hesablama layihə üçün mikro-tapşırıq əmək bazarının (məsələn, Amazon Mechanical Türk) istifadə etməyi planlaşdırır üçün, Chandler, Paolacci, and Mueller (2013) və Wang, Ipeirotis, and Provost (2015) tapşırıq dizayn və yaxşı məsləhət təklif digər məsələlər.

Mən ikinci nəsil insan hesablama sistemləri deyilən nə yaradılmasında maraqlı tədqiqatçılar (məsələn, maşın öyrənmə model qatar insan yazıları istifadə sistemləri) maraqlı ola bilər Shamir et al. (2014) və (audio istifadə edərək, misal üçün) Cheng and Bernstein (2015) . Həmçinin, bu layihələr tədqiqatçılar böyük sadələşdirilmiş çıxışı ilə maşın təlim modelləri yaratmaq üçün rəqabət vasitəsi açıq zənglər ilə edilə bilər. Məsələn, Galaxy Zoo komanda açıq zəng qaçdım və inkişaf bir outperformed yeni yanaşma aşkar Banerji et al. (2010) ; görmək Dieleman, Willett, and Dambre (2015) Ətraflı məlumat üçün.

• Open zənglər (Bölmə 5.3)

Open zənglər yeni deyil. Britaniya parlamenti dənizdə gəminin boylam müəyyən etmək üçün bir yol inkişaf edə bilər hər kəs üçün Boylam mükafatı yaradılmışdır zaman Əslində, ən tanınmış açıq zənglər biri 1714 aiddir. Problem Isaac Newton, o cümlədən gün ən böyük elm adamlarından çox qarşılaşaraq çıxılmaz vəziyyətə və qalib həll nəticədə elə astronomiya cəlb ki, bir həlli diqqət edilmişdir alimlər fərqli problem yaxınlaşdı kənd bir Saatcı'nın tərəfindən təqdim olunub (Sobel 1996) . Bu misal göstərir ki, açıq zənglər yaxşı iş düşünülür bir səbəbi onlar müxtəlif perspektivləri və bacarıqları ilə insanlar çıxışı təmin edir (Boudreau and Lakhani 2013) . Bax Hong and Page (2004) və Page (2008) problem həll müxtəliflik dəyəri daha çox.

fəsildə açıq çağırış hallarda hər bu kateqoriya məxsusdur niyə daha izahat bir az tələb edir. Birincisi, mən insan hesablama və açıq çağırış layihələr ayırmaq bir yol çıxış bütün həllərin orta (insan hesablama) və ya ən yaxşı həll (açıq çağırış) olsun. Ən yaxşı həll fərdi həllər inkişaf etmiş orta olduğu ortaya çıxdı, çünki Netflix mükafatı bu mövzuda bir qədər çətin deyil, bir bir ansambl həll adlı yaxınlaşdı (Bell, Koren, and Volinsky 2010; Feuerverger, He, and Khatri 2012) . Netflix baxımdan, lakin onlar nə idi bütün ən yaxşı həll seçin idi.

İkincisi, insan hesablama bəzi anlayışlar (məsələn, Von Ahn (2005) ), FoldIt insan hesablama layihə hesab edilməlidir. Lakin, xüsusi bacarıq tələb edir, çünki mən açıq çağırış kimi FoldIt Kateqoriyalara seçin və ən yaxşı həll deyil, split-müraciət-birləşdirmək strategiya istifadə edərək daha əməyi edir.

Nəhayət, bir ki, Peer-to-Patent paylandı məlumatların toplanması nümunəsidir iddia edə bilər. Mən bunu bir müsabiqə kimi strukturu və (paylanmış məlumatların toplanması ilə yaxşı və pis haqları ideyası az aydındır isə) yalnız ən yaxşı töhfələr istifadə olunur, çünki açıq çağırış kimi daxil seçin.

Netflix mükafatı daha çox üçün, bax Bennett and Lanning (2007) , Thompson (2008) , Bell, Koren, and Volinsky (2010) , və Feuerverger, He, and Khatri (2012) . FoldIt haqqında daha çox üçün, Cooper et al. (2010) , Andersen et al. (2012) , və Khatib et al. (2011) ; FoldIt mənim təsviri şərhləri çəkir Nielsen (2012) , Bohannon (2009) , və Hand (2010) . Peer-to-Patent üzrə daha ətraflı məlumat üçün, bax Noveck (2006) , Bestor and Hamp (2010) , Ledford (2007) , və Noveck (2009) .

Nəticələrinə oxşar Glaeser et al. (2016) , Mayer-Schönberger and Cukier (2013) , New York City mənzil müfəttişlərinin məhsuldarlığı Fəsil 10 hesabat böyük mənfəət yoxlamalar sadələşdirilmiş modelləri rəhbər zaman. New York City, bu sadələşdirilmiş modelləri şəhər əməkdaşları tərəfindən tikilib, lakin digər hallarda, onlar yaradılmış və ya açıq zəngləri ilə arta bilər ki, təsəvvür edə bilər (məsələn, Glaeser et al. (2016) ). Lakin, sadələşdirilmiş modelləri vəsait ayırmaq üçün istifadə olunan bir əsas narahatlıq modelləri mövcud meyli gücləndirmək üçün potensial var. Bir çox tədqiqatçılar artıq ", zibil zibil həyata" bilirik və sadələşdirilmiş modelləri ilə ola bilər "in qərəzli, bias həyata." Baxın Barocas and Selbst (2016) və O'Neil (2016) inşa sadələşdirilmiş modelləri təhlükələri haqqında daha çox qərəzli təlim data ilə.

açıq müsabiqələr istifadə hökumətləri mane ola bilər bir problem gizlilik pozulması gətirib çıxara bilər data azad tələb edir. Açıq zənglər gizlilik və məlumatların azad haqqında daha ətraflı məlumat üçün bax: Narayanan, Huey, and Felten (2016) və 6-cı fəsildə müzakirə.

• Paylanmış məlumatların toplanması (Bölmə 5.4)

EBird Mənim təsviri təsviri çəkir Bhattacharjee (2005) və Robbins (2013) . Tədqiqatçılar eBird məlumatları təhlil statistik modellər istifadə necə haqqında daha ətraflı bax Hurlbert and Liang (2012) və Fink et al. (2010) . Ornothology vətəndaş elm tarixi daha ətraflı məlumat üçün, bax Greenwood (2007) .

Malavi Jurnallar layihəsi üzrə daha ətraflı məlumat üçün, bax Watkins and Swidler (2009) və Kaler, Watkins, and Angotti (2015) . Və Cənubi Afrika əlaqəli layihə haqqında daha ətraflı üçün bax Angotti and Sennott (2015) . Malavi Jurnallar Layihəsi tədqiqat istifadə məlumatların daha nümunələri üçün bax Kaler (2004) və Angotti et al. (2014) .

• Öz (Bölmə 5.5) layihələndirilməsi

dizayn məsləhət təklif Mənim yanaşma uğurlu nümunələri əsasında induktiv idi və mən eşitdim kütləvi əməkdaşlıq layihələri bilmədi. Tədqiqat bir stream, məsələn, kütləvi əməkdaşlıq layihələrinin dizayn müvafiq ki, online icmaların dizayn daha ümumi sosial psixoloji nəzəriyyələri tətbiq görmək üçün çalışır da var Kraut et al. (2012) .

Motivasiya iştirakçıları gəldikdə, insanların kütləvi əməkdaşlıq layihələrində iştirak dəqiq nə anlamaq üçün həqiqətən çox çətin deyil (Nov, Arazy, and Anderson 2011; Cooper et al. 2010, Raddick et al. (2013) ; Tuite et al. 2011; Preist, Massung, and Coyle 2014) . (Məsələn, Amazon Mechanical Türk) mikro-tapşırıq əmək bazarında ödəniş iştirakçıları həvəsləndirmək üçün planlıyorsanız Kittur et al. (2013) bəzi məsləhətlər təklif edir.

Zoouniverse layihələr çıxan gözlənilməz kəşflər daha nümunələri üçün, sürpriz imkan gəldikdə, bax Marshall, Lintott, and Fletcher (2015) .

Etik olan gəlincə, cəlb məsələləri yaxşı ümumi tətbiqi var Gilbert (2015) , Salehi et al. (2015) , Schmidt (2013) , Williamson (2016) , Resnik, Elliott, and Miller (2015) , və Zittrain (2008) . Xüsusi izdiham əməkdaşları ilə hüquqi məsələləri ilə bağlı məsələlər üçün, bax Felstiner (2011) . O'Connor (2013) araşdırma etik nəzarət haqqında suallar müraciət tədqiqatçılar və iştirakçıların rolu blur zaman. Vətəndaş elm layihələr iştirakçılarının qatılacağı qorunması isə mübadiləsi data ilə bağlı məsələlər üçün, bax Bowser et al. (2014) . Hər iki Purdam (2014) və Windt and Humphreys (2016) paylanmış məlumatların toplanması etik məsələlər barədə bəzi müzakirə. Nəhayət, ən layihələr töhfələr etiraf lakin iştirakçılarına müəlliflik kredit vermir. Foldit ildə Foldit oyunçuların tez-tez müəllifi kimi verilmişdir (Cooper et al. 2010; Khatib et al. 2011) . Açıq çağırış layihələr, qalib töhfə tez-tez onların həll yollarını izah kağız yaza bilərsiniz (məsələn, Bell, Koren, and Volinsky (2010) və Dieleman, Willett, and Dambre (2015) ). layihələrin Galaxy Zoo ailə, son dərəcə fəal və əhəmiyyətli ianəçilər bəzən bülletenlərinin həmmüəlliflər olmağa dəvət edirik. Məsələn, Ivan Terentev və Tim Matorny, Rusiyadan iki Radio Galaxy Zoo iştirakçıları layihə yaranan bülletenlərinin bir həmmüəlliflər idi (Banfield et al. 2016; Galaxy Zoo 2016) .