Нэмэлт тайлбар

Энэ хэсэг нь хүүрнэл гэж уншиж болно гэхээсээ илүү, лавлагаа болгон ашиглах зорилготой юм.

• Танилцуулга (Хэсэг 5.1)

Олон нийтийн хамтын ажиллагаа иргэн шинжлэх ухаан, crowdsourcing, хамтын оюун санаануудыг хольцтой. Иргэн, шинжлэх ухааны ихэвчлэн "иргэн" (өөрөөр хэлбэл, төрийн бус эрдэмтэд) шинжлэх ухааны үйл ажиллагаанд татан оролцуулах гэсэн үг (Crain, Cooper, and Dickinson 2014) . Crowdsourcing ихэвчлэн олны үүнийг аутсорсинг нь ихэвчлэн байгууллагын хүрээнд шийдэж асуудлыг авч, оронд нь хэлнэ (Howe 2009) . Хамтын оюун ухаан нь юм шиг санагдаж ухаалаг замаар хамтдаа ажиллаж буй хүмүүсийн бүлгийг хэлнэ (Malone and Bernstein 2015) . Nielsen (2012) шинжлэх ухааны судалгааны олон нийтийн хамтын ажиллагааны хүчинд гайхалтай ном урттай танилцуулга юм.

олон нийтийн хамтын ажиллагааны олон төрлийн гурван ангилалд би санал болгон цэвэрхэн багтахгүй байхгүй бол байдаг бөгөөд би тэднийг зарим үед нийгмийн судалгааны чухал ач холбогдолтой байж болох юм, учир нь гурван онцгой анхаарал хүртэх ёстой гэж бодож байна. Үүний нэг жишээ нь оролцогчид худалдаж авах таамаглал зах зээл, дэлхийн тохиолдож үр дүнд эргүүлэн суурилсан худалдааны гэрээ юм (Wolfers and Zitzewitz 2004; Arrow et al. 2008) . Таамаглахад зах зээл нь ихэвчлэн урьдчилан нь компаниуд, засгийн ашигладаг бөгөөд урьдчилан таамаглахад зах зээл нь мөн сэтгэл судлалын онд хэвлэгдсэн судалгааны түгээн урьдчилан нийгмийн судлаачид ашиглаж байна (Dreber et al. 2015) .

Миний ангилал хөтөлбөрт сайн таарах биш хоёр дахь жишээ PolyMath төсөл, судлаачид шинэ математикийн теоремууд батлах блог, wikis ашиглан хамтран ажиллаж байна (Gowers and Nielsen 2009; Cranshaw and Kittur 2011; Nielsen 2012; Kloumann et al. 2016) . PolyMath төсөл Netflix шагналд төстэй зарим талаараа, харин PolyMath төслийн оролцогчид илүү идэвхтэй бусдын хэсэгчилсэн шийдэл дээр барьсан.

Миний ангилал хөтөлбөрт сайн таарах биш гурав дахь жишээ нь ийм Батлан ​​хамгаалах Дэвшилтэт судалгааны төслүүдийн агентлаг (DARPA) Сүлжээний Challenge (өөрөөр хэлбэл, Улаан Balloon сорилтын) гэх мэт цаг хугацааны хамааралтай дайчилгаанаас юм. Энэ хугацаанд илүү эмзэг дайчилгаанаас үзнэ үү Pickard et al. (2011) , Tang et al. (2011) болон Rutherford et al. (2013) .

• Хүний тооцоолох (Хэсэг 5.2)

цаг "Хүний тооцоолох" компьютерийн эрдэмтдийн хийсэн ажлын гарч ирдэг бөгөөд энэ нь судалгааны цаана хүрээнд үүнийг эхлүүлж байж болох асуудлуудыг гаргаж авах нь таны чадварыг сайжруулах болно ойлгох. Зарим ажлууд нь, компьютер хол ч гэсэн шинжээч хүн хэтэрсэн чанаруудыг нь маш хүчтэй байдаг. Жишээ нь, шатрын, компьютер тэр ч байтугай хамгийн их мастерууд хожиж чадна. Гэхдээ-, энэ бага болон нийгмийн чангарсан нь эрдэмтэд, бусад ажлууд, компьютер нь үнэндээ хүмүүсээс илүү их муу байна. Өөрөөр хэлбэл, яг одоо та зураг, видео бичлэг, аудио болон текст боловсруулах холбоотой тодорхой ажлуудад-д ч гэсэн хамгийн төвөгтэй компьютер илүү сайн байдаг. гайхамшигтай XKCD өөр Тиймээс-гэж харуулсан байна хүүхэлдэйн-тэнд хүмүүсийн компьютер, хатуу хялбар зорилт байдаг боловч, компьютерийн хатуу хүмүүс хялбар үүрэг (Зураг 5.13) бас байна. Эдгээр хатуу, компьютер-хялбар төлөө хүний ​​төлөө ажлууд, тиймийн тул, тэд тооцооллын үйл явцад хүмүүсийг оруулж болно гэж ойлгосон дээр ажиллаж Компьютерийн эрдэмтэд. Энд хэрхэн Luis фон Ahn байна (2005) Хүний тооцооллыг тэр анх түүний диссертаци хэллэг гарахад хүргэсэн үед тайлбарласан: ". Асуудлыг шийдэхийн тулд компьютер хараахан шийдэж чадахгүй байгаа хүний ​​боловсруулах хүчийг ашиглах нь зарчмыг"

Хүний мэргэжилтнүүдийн чадварыг давж, зарим нэг ажлуудын хувьд компьютер үнэхээр гайхалтай байна: Зураг 5.13. Харин бусад ажлуудад жирийн хүн ч гэсэн боловсронгуй компьютер системийг хавьгүй илүү юм. болон компьютерийн хатуу хүн нь хялбар байдаг үүргийг татах Том хэмжээний асуудал хүний ​​тооцоолол нь сайн зохицсон байдаг. Энд тайлбарласан нөхцлийн дагуу Ашиглагдсан: http://xkcd.com/license.html

Хүний тооцоолох төсөл энэ тодорхойлолтод FoldIt-I нээлттэй хэсэгт тайлбарласан гэхэд дуудлага, боломжтой гэж үзэж болно. Гэсэн хэдий ч, би энэ нь мэргэжлийн ур чадвар шаарддаг учраас FoldIt нээлттэй дуудлага ангилах сонгосон бөгөөд энэ нь хамгийн сайн шийдэл нь хагалах хэрэглэнэ-нэгтгэх стратеги ашиглан илүү хувь нэмэр болдог.

Хүний тооцоолол нь маш сайн ном урт эмчилгээ нь, хугацаанд нь хамгийн ерөнхий утгаар нь харж Law and Ahn (2011) . Бүлэг 3 Law and Ahn (2011) энэ бүлэгт хамаагүй илүү төвөгтэй холбох алхамуудын талаар сонирхолтой ярилцлага байна.

Хугацааны "хагалах-хэрэглэнэ нэгтгэх" хэрэглэж байсан Wickham (2011) статистик тооцооллын хувьд стратегийг тодорхойлох, гэхдээ энэ нь төгс олон хүний тооцоолох төслүүдийн үйл явцыг хамардаг. Хагалах хэрэглэнэ-нэгтгэх стратеги Google-д боловсруулсан MapReduce хүрээнд ижил байна (Dean and Ghemawat 2004; Dean and Ghemawat 2008) .

Би хэлэлцэх зай байхгүй байсан хоёр ухаантай хүний тооцоолох төсөл ESP Тоглоомын байна (Ahn and Dabbish 2004) болон reCAPTCHA (Ahn et al. 2008) . Эдгээр төслүүдийн аль аль нь зураг дээр хаяг өгөх оролцогчдыг урамшуулах бүтээлч арга замыг олжээ. Гэсэн хэдий ч, эдгээр төслүүдийн аль алинд нь, учир нь Galaxy амьтны хүрээлэнд ялгаатай нь, ESP Тоглоом болон reCAPTCHA оролцогчид өөрсдийн мэдээллийг ашиглаж байгаа хэрхэн мэдэхгүй байсан ёс зүйн асуулт тавьсан (Lung 2012; Zittrain 2008) .

ESP тоглолтын өдөөгдсөн олон судлаачид бусдыг "зорилгоор тоглоом" боловсруулах гэж оролдсон байна (Ahn and Dabbish 2008) (өөрөөр хэлбэл, "Хүний суурилсан тооцоолох тоглоом" (Pe-Than, Goh, and Lee 2015) ) байх болно гэдгийг бусад нь төрөл бүрийн асуудлуудыг шийдэж байсан. Ямар Эдгээр "зорилгоор тоглоом" нийтлэг байдаг нь таатай хүний ​​тооцоолол оролцож буй ажлыг хийхийг оролдож байгаа юм. Тиймээс, ESP Тоглоомын Galaxy амьтны хүрээлэнд нэгэн адил хагалах хэрэглэнэ-нэгтгэх бүтцийг хуваалцаж байхад, энэ нь шинжлэх ухаан туслах хүсэлтэй Үзүүлэлт Бодит ба уран оролцогчид хэрхэн буй урам зоригтой, хөгжилтэй нь ялгаатай байдаг.

Galaxy амьтны хүрээлэнгийн Миний танилцуулга дээр татаж Nielsen (2012) , Adams (2012) , Clery (2011) , ба Hand (2010) болон Galaxy амьтны хүрээлэнгийн эрдэм шинжилгээний зорилго Миний танилцуулга хялбаршуулсан байна. Одон орон дахь галактик ангилал түүх, хэрхэн Galaxy Zoo энэ уламжлалыг хэвээр талаар дэлгэрэнгүй үзнэ үү Masters (2012) болон Marshall, Lintott, and Fletcher (2015) . Galaxy амьтны хүрээлэнд дээр байр, судлаачид Galaxy Zoo 2 сайн дурын 60 гаруй сая илүү төвөгтэй морфологи ангилал цуглуулж дууссан (Masters et al. 2011) . Цаашилбал, тэд сарны гадаргууг судлах гариг ​​хайх, хуучин бичиг баримтыг галиглах зэрэг галактик морфологи гадна асуудал гарч салбарлан. Одоогоор тэдний бүх төслүүд дээр цуглуулсан байна www.zooniverse.org (Cox et al. 2015) . Нэг нь төсөл, Хормын хувилбарын Galaxy зоо төрлийн зураг ангилал төслүүд нь байгаль орчны судалгаа хийж болно гэдгийг нотлох баримт Серенгети-олгодог (Swanson et al. 2016) .

Судлаачид хүний ​​тооцоолох төсөлд бичил ажил хөдөлмөрийн зах зээл (жишээ нь, Amazon механик Turk) ашиглаж төлөвлөж хувьд, Chandler, Paolacci, and Mueller (2013) болон Wang, Ipeirotis, and Provost (2015) ажлын зураг төсөл, сайн зөвлөгөө санал болгож байна холбогдох бусад асуудал.

Би хоёр дахь үеийн хүний тооцоолох систем гэж нэрлэдэг байсан зүйл бий сонирхож судлаачид (жишээ нь, машин сургалтын загвар сургах хүний шошгыг хэрэглэх систем) сонирхож болох Shamir et al. (2014) болон (аудио ашиглан жишээ нь) Cheng and Bernstein (2015) . Мөн эдгээр төслүүд нь нээлттэй дуудлага, судлаачид хамгийн урьдаас гүйцэтгэл нь машин сургалтын загварыг бий болгох өрсөлдөх түүгээр нь хийж болно. Жишээ нь, Galaxy зоо баг нээлттэй дуудлага гүйж, боловсруулсан нэг улсуудыг шинэ хандлагыг олж Banerji et al. (2010) ; харж Dieleman, Willett, and Dambre (2015) дэлгэрэнгүйг.

• Нээлттэй дуудлага (Хэсэг 5.3)

Нээлттэй дуудлага нь шинэ зүйл биш юм. Үнэн хэрэгтээ хамгийн алдартай нээлттэй дуудлагын нэг нь Их Британийн УИХ-ын далай дахь хөлөг онгоцны уртраг тодорхойлох арга замыг боловсруулж болох юм хэнд ч Уртраг шагналыг бий болгосон үед 1714 буцаж эхлэлтэй. Асуудал хоног, Исаак Ньютон, түүний дотор хамгийн агуу эрдэмтэд олон stumped болон шалгарсан шийдэл эцэст нь ямар нэгэн байдлаар одон оролцуулах гэж уусмал дээр төвлөрсөн байсан эрдэмтдийн өөрөөр асуудлыг дөхөж хөдөө орон нутгаас нь clockmaker ирүүлсэн байна (Sobel 1996) . Дээрх жишээнээс, нээлттэй дуудлага маш сайн ажиллаж гэж бодож байгаа нэг шалтгаан нь тэд өөр өөр өнцгөөс, ур чадвар бүхий хүмүүст боломж олгох явдал юм (Boudreau and Lakhani 2013) . Үзнэ үү Hong and Page (2004) болон Page (2008) асуудлыг шийдвэрлэх нь олон янз байдлын үнэ цэнийг илүү байна.

-р бүлэгт нээлттэй дуудлага тохиолдолд бүр энэ ангилалд хамаарах учраас цаашид тайлбарыг нь жаахан шаарддаг. Нэгдүгээрт, би хүний ​​тооцоолол, нээлттэй дуудлага төслүүдийг хооронд нь ялгах нэг арга зам гаралт бүхий л шийдлийг дунджаар (хүний ​​тооцоолох), эсвэл хамгийн сайн шийдлийг (нээлттэй дуудлага) байгаа эсэх юм. Хамгийн сайн шийдэл хувь хүний ​​шийдэл нь нарийн дундаж байх болсон учир нь Netflix шагналыг энэ талаар бага зэрэг төвөгтэй байдаг нь тухайн чуулга шийдэл гэж нэрлэдэг дөхөж (Bell, Koren, and Volinsky 2010; Feuerverger, He, and Khatri 2012) . Netflix талаас Гэвч тэд хийж байсан хамгийн сайн сайхан бүхнийг шийдлийг сонгож байсан юм.

Хоёрдугаарт, хүний ​​тооцоолол зарим тодорхойлолт (жишээ нь Von Ahn (2005) ), FoldIt хүний ​​тооцоолох төсөл нь авч үзэх хэрэгтэй. Гэсэн хэдий ч, би энэ нь мэргэжлийн ур чадвар шаарддаг учраас FoldIt нээлттэй дуудлага ангилах сонгосон бөгөөд энэ нь хамгийн сайн шийдэл биш харин хуваах, хэрэглэх, холбох стратеги ашиглахын оронд хувь нэмрээ оруулсан авдаг.

Эцэст нь хэлэхэд, нэг нь Peer-тулд-Патент гэж тараасан мэдээлэл цуглуулах жишээ юм үзэж болох юм. Би энэ уралдаан шиг бүтэцтэй бөгөөд зөвхөн хамгийн сайн хувь нэмэр ашиглаж байна (харин тараасан мэдээлэл цуглуулах нь сайн, муу хувь нэмэр санаа нь бага тодорхой юм) Учир нь нээлттэй дуудлага болгон оруулах сонгох хэрэгтэй.

Netflix шагналын талаар дэлгэрэнгүй үзнэ үү Bennett and Lanning (2007) , Thompson (2008) , Bell, Koren, and Volinsky (2010) болон Feuerverger, He, and Khatri (2012) . FoldIt талаар дэлгэрэнгүй үзнэ үү, Cooper et al. (2010) , Andersen et al. (2012) болон Khatib et al. (2011) ; FoldIt миний тодорхойлолт нь тодорхойлолтыг татаж Nielsen (2012) , Bohannon (2009) , ба Hand (2010) . Үе тэнгийн-тулд-Патент талаар дэлгэрэнгүй үзнэ үү Noveck (2006) , Bestor and Hamp (2010) , Ledford (2007) , болон Noveck (2009) .

Үр дүнд адил Glaeser et al. (2016) , Mayer-Schönberger and Cukier (2013) , Нью-Йорк хот дахь орон сууцны байцаагчид бүтээмж Chapter 10 тайлан том олз хяналт шалгалт урьдчилсан загварыг дагаж байгаа үед. Нью-Йорк хот, эдгээр таамаглалын загвар хот ажилчдын барьсан боловч бусад тохиолдолд, нэг нь бий болно гэсэн юм, эсвэл нээлттэй дуудлага нь сайжирсан төсөөлж болох юм (жишээ нь, Glaeser et al. (2016) ). Гэсэн хэдий ч, нөөцийг хуваарилж ашиглаж байгаа урьдаас загвар нь нэг томоохон асуудал загварууд байгаа гажуудлыг бататгахын тулд боломжтой юм. Олон судлаачид аль хэдийн "-д хог, хог гарч" үзнэ үү мэдэж, урьдаас загварууд нь энэ байх болно "-д хэвийсэн, хэвийсэн гарч." Barocas and Selbst (2016) болон O'Neil (2016) барьсан таамаглалын загвар аюулын талаар дэлгэрэнгүй нэг талыг барьсан сургалт мэдээлэл.

нээлттэй тэмцээнд ашиглах засаг захиргаа урьдчилан сэргийлэх болох нэг асуудал нь мэдээлэл чөлөөлөх, хувийн нууцыг зөрчиж хүргэж болох шаардлагатай байгаа юм. Нээлттэй дуудлага нь хувийн, мэдээлэл гаргах тухай дэлгэрэнгүй үзнэ үү Narayanan, Huey, and Felten (2016) , 6-р бүлэгт хэлэлцүүлэг.

• Тархсан мэдээлэл цуглуулах (Хэсэг 5.4)

EBird миний тодорхойлолт нь тодорхойлолтыг татаж Bhattacharjee (2005) болон Robbins (2013) . Хэрхэн судлаачид eBird мэдээллийг шинжлэх статистик загварыг ашиглах талаар дэлгэрэнгүй үзнэ үү Hurlbert and Liang (2012) болон Fink et al. (2010) . Ornothology иргэдийн шинжлэх ухааны түүхэнд талаар дэлгэрэнгүй үзнэ үү Greenwood (2007) .

Малави Журнал төслийн талаар дэлгэрэнгүй үзнэ үү Watkins and Swidler (2009) болон Kaler, Watkins, and Angotti (2015) . Өмнөд Африкт холбогдох төсөл дээр дэлгэрэнгүй үзнэ үү Angotti and Sennott (2015) . Малави Журнал төслийн судалгааны ашиглан өгөгдлийг илүү жишээг үзнэ үү Kaler (2004) болон Angotti et al. (2014) .

• Өөрийн (Хэсэг 5.5) боловсруулах

загвар зөвлөгөө санал миний арга барил амжилттай жишээн дээр тулгуурлан, индуктив байсан, би-ий тухай сонссон олон нийтийн хамтын ажиллагаа төсөл амжилтгүй болсон. Нийгмийн сэтгэл зүйн ерөнхий онол онлайн иргэдийг төлөвлөх нь олон нийтийн хамтын ажиллагаа төслийн зураг төслийн холбогдох юм, жишээ нь, өргөдөл харах судалгаа нь гол оролдлого ч бас байдаг Kraut et al. (2012) .

Урамшуулах оролцогчдын хувьд, энэ нь хүн чухам яагаад олон нийтийн хамтын ажиллагаа төслүүдэд оролцох олохын тулд үнэндээ маш төвөгтэй байдаг (Nov, Arazy, and Anderson 2011; Cooper et al. 2010, Raddick et al. (2013) ; Tuite et al. 2011; Preist, Massung, and Coyle 2014) . Хэрэв та бичил зорилт нь хөдөлмөрийн зах зээл дээр төлбөр (жишээ нь, Amazon механик Turk) нь оролцогчдыг урамшуулах төлөвлөж байгаа бол Kittur et al. (2013) зарим зөвлөгөөг санал болгож байна.

Zoouniverse төслүүд гарч ирэх гэнэтийн нээлт илүү жишээ нь гэнэтийн бэлэг бий болгох талаар үзнэ үү Marshall, Lintott, and Fletcher (2015) .

Ёс суртахууны байгаа талаар яригдсан асуудлуудын зарим нь сайн ерөнхий танилцуулга нь Gilbert (2015) , Salehi et al. (2015) , Schmidt (2013) , Williamson (2016) , Resnik, Elliott, and Miller (2015) , болон Zittrain (2008) . Ялангуяа олон хүн албан хаагчдын эрх зүйн асуудалтай холбоотой асуудлаар үзнэ үү Felstiner (2011) . O'Connor (2013) судлаачид, оролцогчдын үүрэг бүдгэрүүлдэггүй үед судалгааны ёс зүйн хяналт тавих тухай асуудлыг авч үзнэ. Иргэн, шинжлэх ухааны төслүүдэд participats хамгаалахын зэрэгцээ хуваах мэдээ холбоотой асуудлуудыг үзнэ үү Bowser et al. (2014) . Аль аль нь Purdam (2014) болон Windt and Humphreys (2016) тараасан мэдээлэл цуглуулах нь ёс зүйн асуудлын талаар зарим хэлэлцүүлэг байна. Эцэст нь, ихэнх төслүүд хувь нэмрийг хүлээн зөвшөөрч ч оролцогчдод зохиогчийн зээл өгч чадахгүй байна. Foldit онд Foldit тоглогчид ихэвчлэн зохиогч гэж дурдсан байна (Cooper et al. 2010; Khatib et al. 2011) . Бусад нээлттэй дуудлага төсөл нь ялалт хувь нэмэр оруулагч нь ихэвчлэн тэдний шийдлийг тодорхойлох нь цаасан дээр бичиж болно (жишээ нь, Bell, Koren, and Volinsky (2010) болон Dieleman, Willett, and Dambre (2015) ). төслийн Galaxy зоо гэр бүлд маш идэвхтэй, чухал хувь нэмэр оруулагчид заримдаа баримт бичиг дээр хамтран зохиогчид гэж урьж байна. Жишээ нь, Иван Terentev болон Тим Matorny, ОХУ-аас хоёр Радио Galaxy зоо оролцогчид тухайн төслөөс үүссэн баримт бичиг нь нэг талаар хамтран зохиогчид байв (Banfield et al. 2016; Galaxy Zoo 2016) .