తదుపరి చదవటానికి ఏమి
- పరిచయము (విభాగం 5.1)
సామూహిక సహకారం సివిలియన్ సైన్స్ , క్రౌడ్ సోర్సింగ్ , మరియు సామూహిక మేధస్సు నుండి ఆలోచనలు మిళితం చేస్తుంది. పౌర శాస్త్రం సాధారణంగా శాస్త్రీయ విధానంలో "పౌరులు" (అంటే, శాస్త్రవేత్తలు) ను కలిగి ఉంటుంది; మరింత చూడండి, Crain, Cooper, and Dickinson (2014) మరియు Bonney et al. (2014) . క్రౌడ్ సోర్సింగ్ అనేది సాధారణంగా ఒక సంస్థలో సాధారణంగా పరిష్కరించే సమస్యను తీసుకుంటుంది మరియు దానిని ఒక గుంపుకు అవుట్సోర్సింగ్ చేస్తుంది; మరింత చూడండి, Howe (2009) . సమిష్టి ప్రజ్ఞ సాధారణంగా అర్థం వ్యక్తుల సమూహాలు అంటే తెలివైనగా అనిపించే మార్గాల్లో; Malone and Bernstein (2015) . Nielsen (2012) అనేది శాస్త్రీయ పరిశోధనకు సామూహిక సహకార శక్తికి పుస్తక-పొడవు పరిచయం.
నేను ప్రతిపాదించిన మూడు విభాగాల్లో చక్కగా సరిపోని అనేక రకాల సామూహిక సహకారాలు ఉన్నాయి, వీటిలో మూడు ప్రత్యేక శ్రద్ధ అవసరం ఎందుకంటే అవి సామాజిక పరిశోధనలో ఉపయోగకరంగా ఉండవచ్చు. ఒక ఉదాహరణ అంచనా మార్కెట్లలో ఉంది, ఇందులో పాల్గొనేవారు ప్రపంచంలో సంభవించే ఫలితాలపై ఆధారపడి విమోచనీయమైన ఒప్పందాలను కొనుగోలు చేస్తారు. అంచనా వేయడం మార్కెట్లను తరచుగా కంపెనీలు మరియు ప్రభుత్వాలచే ఉపయోగించబడుతున్నాయి, మరియు సైకాలజీలో ప్రచురించిన అధ్యయనాల యొక్క పునరుత్పాదనను అంచనా వేయడానికి వారు సామాజిక పరిశోధకులు కూడా ఉపయోగించారు (Dreber et al. 2015) . ఊహాజనిత మార్కెట్ల యొక్క అవలోకనం కోసం, Wolfers and Zitzewitz (2004) మరియు Arrow et al. (2008) .
నా వర్గీకరణ పథకానికి బాగా సరిపోయే రెండవ ఉదాహరణ, PolyMath ప్రాజెక్ట్, పరిశోధకులు కొత్త గణిత సిద్ధాంతాలు నిరూపించడానికి బ్లాగులు మరియు వికీలను ఉపయోగించి పనిచేసారు. పాలీమ్యాత్ ప్రాజెక్ట్ నెట్ఫ్లిక్స్ ప్రైజ్ మాదిరిగానే కొన్ని మార్గాల్లో ఉంది, కానీ ఈ ప్రాజెక్ట్లో పాల్గొనేవారు ఇతరుల పాక్షిక పరిష్కారాలపై మరింత చురుకుగా నిర్మించారు. PolyMath ప్రాజెక్ట్ గురించి మరింత తెలుసుకోవడానికి, Gowers and Nielsen (2009) , Cranshaw and Kittur (2011) , Nielsen (2012) , మరియు Kloumann et al. (2016) .
నా వర్గీకరణ పథకానికి బాగా సరిపోయే మూడవ ఉదాహరణ, డిఫెన్స్ అధునాతన రీసెర్చ్ ప్రాజెక్ట్స్ ఏజెన్సీ (DARPA) నెట్వర్క్ ఛాలెంజ్ (అనగా, ది రెడ్ బెలూన్ ఛాలెంజ్) వంటి సమయం-ఆధారిత మోబిలిజేషన్లలో ఒకటి. ఈ సమయ-సెన్సిటివ్ సమీకరణాలపై మరింతగా Pickard et al. (2011) ఇతరులను చూడండి Pickard et al. (2011) , Tang et al. (2011) , మరియు Rutherford et al. (2013) .
- మానవ గణన (సెక్షన్ 5.2)
"మానవ గణన" అనే పదాన్ని కంప్యూటర్ శాస్త్రవేత్తలచే పని చేస్తోంది, మరియు ఈ పరిశోధన వెనుక ఉన్న సందర్భం అర్థం చేసుకోవడం వలన ఇది సరిగ్గా సరిపోయే సమస్యలను ఎంచుకునే సామర్థ్యాన్ని మెరుగుపరుస్తుంది. కొన్ని పనులు కోసం, కంప్యూటర్లు కూడా చాలా శక్తివంతమైనవి, నిపుణుల మానవులను కూడా మించిన సామర్థ్యాలతో. ఉదాహరణకు, చెస్ లో, కంప్యూటర్లు కూడా ఉత్తమ గ్రాండ్మాస్టర్లను ఓడించగలవు. కానీ -ఇది సాంఘిక శాస్త్రవేత్తలచే తక్కువగా ప్రశంసించబడింది-ఇతర పనుల కోసం, కంప్యూటర్లు నిజానికి ప్రజల కన్నా ఘోరంగా ఉంటారు. ఇతర మాటలలో, ప్రస్తుతం మీరు చిత్రాలు, వీడియో, ఆడియో మరియు టెక్స్ట్ యొక్క ప్రాసెసింగ్ పాల్గొన్న కొన్ని పనులు వద్ద అత్యంత అధునాతన కంప్యూటర్ కంటే ఉత్తమం. ఈ హార్డ్-ఫర్-కంప్యూటింగులపై పనిచేసే కంప్యూటర్ శాస్త్రవేత్తలు-మానవ-పని కోసం సులభమైన పనుల వలన వారు వారి గణన ప్రక్రియలో మానవులను చేర్చవచ్చని గ్రహించారు. లూయిస్ వాన్ అహ్న్ (2005) మానవ సిద్ధాంతాన్ని ఈ విధంగా వివరించారు: "కంప్యూటర్లు ఇంకా పరిష్కారం కాగల సమస్యలను పరిష్కరించడానికి మానవ ప్రాసెసింగ్ శక్తిని ఉపయోగించుకోవటానికి ఒక ఉదాహరణ." మానవ గణన యొక్క పుస్తకం-పొడవు చికిత్స కోసం, ఈ పదానికి చాలా సాధారణ భావం, Law and Ahn (2011) .
Ahn (2005) ఫోల్డిట్ లో ప్రతిపాదించిన నిర్వచనం ప్రకారం, నేను బహిరంగ కాల్స్లోని విభాగంలో వివరించినది-ఇది ఒక మానవ గణన ప్రాజెక్ట్గా పరిగణించబడుతుంది. అయితే, నేను ఫోల్డిట్ను బహిరంగ కాల్గా వర్గీకరించడానికి ఎంచుకుంటాను ఎందుకంటే ప్రత్యేక నైపుణ్యాలు (అధికారిక శిక్షణ అవసరం కానప్పటికీ) మరియు స్ప్లిట్-దరఖాస్తు-మిళితం వ్యూహాన్ని ఉపయోగించకుండా కాకుండా ఉత్తమ పరిష్కారం దోహదపడుతుంది.
"స్ప్లిట్-దరఖాస్తు-కలయిక" అనే పదాన్ని Wickham (2011) గణాంక కంప్యూటింగ్ కోసం ఒక వ్యూహాన్ని వివరించడానికి ఉపయోగించింది, కానీ ఇది అనేక మానవ గణన ప్రాజెక్టుల ప్రక్రియను సంపూర్ణంగా సంగ్రహిస్తుంది. స్ప్లిట్-దరఖాస్తు-మిళితం వ్యూహం అనేది గూగుల్ వద్ద అభివృద్ధి చేసిన MapReduce ఫ్రేమ్కు సమానంగా ఉంటుంది; MapReduce పై మరిన్ని Dean and Ghemawat (2004) , Dean and Ghemawat (2004) మరియు Dean and Ghemawat (2008) . ఇతర పంపిణీ చేసిన కంప్యూటింగ్ నిర్మాణాలపై మరింత సమాచారం కోసం, Vo and Silvia (2016) . Law and Ahn (2011) యొక్క చాప్టర్ 3 ఈ అధ్యాయంలో కంటే ఎక్కువ సంక్లిష్ట మిళిత దశలను కలిగి ఉన్న ప్రాజెక్టుల చర్చను కలిగి ఉంది.
నేను అధ్యాయంలో చర్చించిన మానవ గణన పధకాలలో పాల్గొనేవారు ఏమి జరుగుతున్నారో తెలుసుకున్నారు. అయితే కొన్ని ఇతర ప్రాజెక్టులు, ఇప్పటికే జరుగుతున్న "పని" ను (eBird కు సమానంగా) మరియు పాల్గొనే అవగాహన లేకుండా ఉండటానికి ప్రయత్నిస్తాయి. ఉదాహరణకు, ESP గేమ్ (Ahn and Dabbish 2004) మరియు reCAPTCHA (Ahn et al. 2008) . ఏదేమైనా, ఈ రెండు ప్రాజెక్టులు కూడా నైతిక ప్రశ్నలను పెంచుతున్నాయి, ఎందుకంటే పాల్గొనేవారి డేటా ఎలా ఉపయోగించబడుతుందో తెలియదు (Zittrain 2008; Lung 2012) .
ESP గేమ్ ద్వారా ప్రేరణ పొందిన అనేకమంది పరిశోధకులు ఇతర " (Ahn and Dabbish 2008) ఒక (Ahn and Dabbish 2008) " (Ahn and Dabbish 2008) (అంటే "మానవ-ఆధారిత గణన ఆటలు" (Pe-Than, Goh, and Lee 2015) ఇతర సమస్యలను పరిష్కరించడానికి ఉపయోగిస్తారు. ఈ "గేమ్స్తో ఒక ప్రయోజనం" ఉమ్మడిగా ఉంటున్నది ఏమిటంటే వారు మానవ గణనలో ఆనందకరంగా ఉండే పనులు చేయటానికి ప్రయత్నిస్తారు. అందువలన, ESP గేమ్ గెలాక్సీ జంతుప్రదర్శనశాలతో ఒకే స్ప్లిట్-దరఖాస్తు-కలయిక నిర్మాణాన్ని పంచుకుంటుంది, ఇది విజ్ఞాన శాస్త్రానికి సహాయం చేయడానికి ప్రేరేపిత-ప్రేరేపిత కోరికను ఎలా వ్యక్తీకరిస్తుంది. ఒక ప్రయోజనంతో ఆటల కోసం, Ahn and Dabbish (2008) .
గెలాల్ జూ యొక్క నా వివరణ Nielsen (2012) , Adams (2012) , Clery (2011) , మరియు Hand (2010) లపై ఆధారపడింది మరియు గెలాక్సీ జూ యొక్క పరిశోధనా లక్ష్యాల నా ప్రదర్శన సరళీకృతం చేయబడింది. ఖగోళశాస్త్రంలో గాలక్సీ వర్గీకరణ చరిత్ర మరియు గాలక్సీ జూ ఈ సంప్రదాయాన్ని ఎలా కొనసాగించాలో చూడండి, Masters (2012) మరియు Marshall, Lintott, and Fletcher (2015) . గెలాక్సీ జంతుప్రదర్శనశాలలో పరిశోధకులు గాలక్సీ జూ 2 ని పూర్తి చేశారు, ఇది 60 మిలియన్ల కంటే ఎక్కువ సంక్లిష్ట పదనిర్మాణ శాస్త్ర వర్గాలను వాలంటీర్స్ (Masters et al. 2011) నుండి సేకరించింది. అంతేకాకుండా, వారు గెలాక్సీ పదనిర్మాణం బయట సమస్యలకు దారితీసింది, చంద్రుని ఉపరితలం అన్వేషించడం, గ్రహాల కోసం అన్వేషణ మరియు పాత పత్రాలను లిప్యంతరీకరణ చేయడంతో సహా. ప్రస్తుతం, అన్ని వారి ప్రాజెక్టులు Zooniverse వెబ్సైట్లో సేకరించబడతాయి (Cox et al. 2015) . ప్రాజెక్టులలో ఒకటి-స్నాప్షాట్ సెరెంగెటి- గెలాక్సీ జంతుప్రదర్శన శాల రకం వర్గీకరణ ప్రాజెక్టులు కూడా పర్యావరణ పరిశోధనకు (Swanson et al. 2016) .
మానవ గణన ప్రాజెక్ట్, Chandler, Paolacci, and Mueller (2013) మరియు J. Wang, Ipeirotis, and Provost (2015) కోసం ఒక మైక్రోట్రాక్ కార్మిక మార్కెట్ (ఉదా. అమెజాన్ మెకానికల్ టర్క్) ను J. Wang, Ipeirotis, and Provost (2015) ఇతర సంబంధిత సమస్యలు. Porter, Verdery, and Gaddis (2016) మైక్రోట్రాక్ కార్మిక విఫణుల యొక్క ఉపయోగాల్లో ప్రత్యేకంగా దృష్టి సారించిన ఉదాహరణలు మరియు సలహాలు "డేటా బలోపేత" అని పిలిచారు. డేటా బలోపేత మరియు డేటా సేకరణ మధ్య లైన్ కొంతవరకు అస్పష్టంగా ఉంది. Grimmer and Stewart (2013) .
నేను కంప్యూటర్ సహాయంతో మానవ గణన వ్యవస్థలను (ఉదా., యంత్ర అభ్యాస మోడల్ను శిక్షణ కోసం మానవ లేబుల్స్ను ఉపయోగించే వ్యవస్థలు) అని పిలిచేవాటిని సృష్టించే ఆసక్తిని కలిగి ఉన్న పరిశోధకులు Shamir et al. (2014) (ఆడియోను ఉపయోగించడం కోసం ఉదాహరణ) మరియు Cheng and Bernstein (2015) . అలాగే, ఈ పథకాలలో యంత్ర అభ్యాస నమూనాలు బహిరంగ కాల్స్తో అభ్యర్థించబడతాయి, తద్వారా పరిశోధకులు గొప్ప అభేద్యమైన పనితీరుతో యంత్ర అభ్యాస నమూనాలను రూపొందించడానికి పోటీ పడుతున్నారు. ఉదాహరణకు, గెలాక్సీ జూ బృందం బహిరంగ కాల్ చేసాడు మరియు Banerji et al. (2010) అభివృద్ధి చేసిన ఒక నూతన విధానాన్ని కనుగొన్నారు Banerji et al. (2010) ; వివరాల కోసం Dieleman, Willett, and Dambre (2015) చూడండి.
- కాల్స్ తెరువు (విభాగం 5.3)
తెరిచిన కాల్స్ కొత్తవి కావు. వాస్తవానికి, అత్యంత ప్రసిద్ధమైన బహిరంగ కాల్స్ ఒకటి 1714 నాటిది, బ్రిటన్ పార్లమెంటు సముద్రంలో లాంగిట్యూడ్ను నిర్ణయించడానికి ఒక మార్గాన్ని అభివృద్ధి చేసే ఎవరికీ లాంగిట్యూడ్ బహుమతిని సృష్టించింది. ఈ సమస్య ఐజాక్ న్యూటన్తో సహా అనేక మంది గొప్ప శాస్త్రవేత్తలను స్టాంప్ చేసింది, మరియు విజేత పరిష్కారం చివరికి జాన్ హారిసన్, గడియారాన్ని తయారు చేసిన గ్రామీణకారులచే సమర్పించబడినది, ఇది ఖగోళశాస్త్రంతో సంబంధం ఉన్న ఒక పరిష్కారంపై దృష్టి కేంద్రీకరించిన శాస్త్రవేత్తల నుండి భిన్నంగా సమస్యను సంప్రదించింది. ; మరింత సమాచారం కోసం, చూడండి Sobel (1996) . ఈ ఉదాహరణ ఉదహరిస్తుంది, బహిరంగ కాల్స్ బాగా పనిచేయాలని భావిస్తున్న ఒక కారణం, వారు విభిన్న దృక్పథాలు మరియు నైపుణ్యాలతో ఉన్న వ్యక్తులకు (Boudreau and Lakhani 2013) ప్రాప్తి చేస్తారు. Hong and Page (2004) మరియు Page (2008) .
అధ్యాయం లో ప్రతి బహిరంగ కేసు కేసులు ఈ వర్గంలో ఎందుకు చెందుతాయో మరింత వివరణాత్మక వివరణ అవసరం. మొదట, నేను మానవ గణన మరియు బహిరంగ కాల్ ప్రాజెక్టుల మధ్య వ్యత్యాసాన్ని చూపే ఒక పద్ధతి, అవుట్పుట్ అనేది అన్ని పరిష్కారాల సగటు (మానవ గణన) లేదా ఉత్తమ పరిష్కారం (బహిరంగ కాల్). ఉత్తమ పరిష్కారం వ్యక్తిగత పరిష్కారాల యొక్క అధునాతన సగటుగా మారిన కారణంగా, నెట్ఫ్లిక్స్ బహుమతి కొంతవరకు గమ్మత్తైనది, ఇది ఒక సమూహ పరిష్కారం (Bell, Koren, and Volinsky 2010; Feuerverger, He, and Khatri 2012) అని పిలువబడే విధానం. అయితే నెట్ఫ్లిక్స్ దృక్పథం నుండి, వారు చేయవలసిన అన్ని ఉత్తమ పరిష్కారాన్ని ఎంచుకుంది. Bennett and Lanning (2007) , Thompson (2008) , Bell, Koren, and Volinsky (2010) , మరియు Feuerverger, He, and Khatri (2012) .
రెండవది, మానవ గణన యొక్క కొన్ని వివరణలు (ఉదా., అహ్ן Ahn (2005) ), ఫోల్డిట్ను మానవ గణన ప్రాజెక్ట్గా పరిగణించాలి. అయినప్పటికీ, నేను దానిని బహిరంగ కాల్గా వర్గీకరించడానికి ఎంచుకున్నాను ఎందుకంటే ప్రత్యేక నైపుణ్యాలు (ప్రత్యేక శిక్షణ అవసరం కానప్పటికీ) మరియు స్ప్లిట్-దరఖాస్తు-మిళితం వ్యూహాన్ని ఉపయోగించకుండా కాకుండా ఉత్తమ పరిష్కారం పడుతుంది. ఫోల్డిట్ గురించి మరిన్ని చూడండి Cooper et al. (2010) , Khatib et al. (2011) , మరియు Andersen et al. (2012) ; బోల్నాన్ Bohannon (2009) , Hand (2010) , మరియు Nielsen (2012) చిత్రాలలో వర్ణనలపై ఫోల్డిట్ యొక్క నా వివరణను గీశాడు.
చివరగా, పీర్-టు-పేటెంట్ పంపిణీ చేయబడిన సమాచార సేకరణకు ఒక ఉదాహరణ అని వాదించవచ్చు. నేను బహిరంగ కాల్గా చేర్చాను ఎందుకంటే ఇది పోటీ వంటి నిర్మాణాన్ని కలిగి ఉంది మరియు ఉత్తమమైన రచనలు మాత్రమే ఉపయోగించబడతాయి, పంపిణీ చేయబడిన డేటా సేకరణతో, మంచి మరియు చెడు రచనల ఆలోచన తక్కువగా ఉంటుంది. పీర్-టు-పేటెంట్ పై మరిన్ని Noveck (2006) కొరకు Noveck (2006) , Ledford (2007) , Noveck (2009) మరియు Bestor and Hamp (2010) .
సామాజిక పరిశోధనలో బహిరంగ కాల్స్ ఉపయోగించి, Glaeser et al. (2016) మాదిరిగానే ఫలితాలు Glaeser et al. (2016) , Mayer-Schönberger and Cukier (2013) యొక్క 10 వ అధ్యాయంలో నివేదించబడింది, అందుచే న్యూయార్క్ నగరం గృహనిర్మాణ ఇన్స్పెక్టర్ల ఉత్పాదకతలో పెద్ద లాభాలను ఉత్పత్తి చేయడానికి ముందస్తు మోడలింగ్ను ఉపయోగించుకుంది. న్యూయార్క్ నగరంలో, ఈ ఊహాజనిత నమూనాలు నగర ఉద్యోగుల చేత నిర్మించబడ్డాయి, అయితే ఇతర సందర్భాల్లో, వారు బహిరంగ కాల్స్ (ఉదా., Glaeser et al. (2016) తో సృష్టించబడవచ్చు లేదా అభివృద్ధి చేయవచ్చని ఊహించవచ్చు. అయినప్పటికీ, వనరులను కేటాయించటానికి ఉపయోగించిన ఊహాజనిత నమూనాలతో ఒక పెద్ద ఆందోళన ఉంది, ఈ నమూనాలు ఇప్పటికే ఉన్న పక్షపాతాలను బలోపేతం చేసే సామర్థ్యాన్ని కలిగి ఉంటాయి. అనేకమంది పరిశోధకులు అప్పటికే "చెత్త, చెత్త," అని పిలుస్తారు మరియు ఇది అంచనా వేసే మోడల్లతో "పక్షపాతంతో, పక్షపాతంతో Barocas and Selbst (2016) ." Barocas and Selbst (2016) మరియు O'Neil (2016) పక్షపాత శిక్షణా డేటాతో.
బహిరంగ పోటీలను ఉపయోగించకుండా ప్రభుత్వాలను నిరోధించే ఒక సమస్య, ఇది గోప్యతా ఉల్లంఘనకు దారితీసే డేటా విడుదల అవసరం. బహిరంగ కాల్స్ లో గోప్యత మరియు డేటా విడుదల గురించి మరింత సమాచారం కోసం, చూడండి Narayanan, Huey, and Felten (2016) మరియు అధ్యాయం 6 లో చర్చ.
ప్రిడిక్షన్ మరియు వివరణ మధ్య విభేదాలు మరియు సారూప్యతలపై మరిన్నింటి కోసం, Breiman (2001) , Breiman (2001) Shmueli (2010) , Watts (2014) , మరియు Kleinberg et al. (2015) . సాంఘిక పరిశోధనలో ఊహించిన దాని గురించి మరింత తెలుసుకోవడానికి, Athey (2017) , Cederman and Weidmann (2017) , Hofman, Sharma, and Watts (2017) , ( ??? ) మరియు Yarkoni and Westfall (2017) .
జీవశాస్త్రంలో బహిరంగ కాల్ ప్రాజెక్టుల సమీక్ష కోసం, డిజైన్ సలహాతో సహా, Saez-Rodriguez et al. (2016) .
- పంపిణీ చేయబడిన సమాచార సేకరణ (విభాగం 5.4)
ఇబ్రేర్ గురించి నా వర్ణన Bhattacharjee (2005) , Robbins (2013) , మరియు Sullivan et al. (2014) . EBird డేటాను విశ్లేషించడానికి గణాంక నమూనాలను పరిశోధకులు ఎలా ఉపయోగిస్తారో మరింత తెలుసుకోవడానికి Fink et al. (2010) ఇతరులను చూడండి Fink et al. (2010) మరియు Hurlbert and Liang (2012) . EBird పాల్గొనేవారి నైపుణ్యాన్ని అంచనా వేయడానికి మరింతగా, Kelling, Johnston, et al. (2015) . ఆర్కిథాలజీలో సిటిజెన్ సైన్స్ చరిత్రపై మరింత సమాచారం కోసం, Greenwood (2007) .
మాలావీ జర్నల్స్ ప్రాజెక్ట్ లో మరిన్ని, Watkins and Swidler (2009) మరియు Kaler, Watkins, and Angotti (2015) . దక్షిణాఫ్రికాలో ఒక సంబంధిత ప్రాజెక్ట్ గురించి మరింత తెలుసుకోవడానికి, Angotti and Sennott (2015) . మాలావి జర్నల్స్ ప్రాజెక్ట్ నుండి డేటాను ఉపయోగించి పరిశోధన యొక్క మరిన్ని ఉదాహరణలు Kaler (2004) మరియు Angotti et al. (2014) మరియు Angotti et al. (2014) చూడండి Angotti et al. (2014) .
- మీ స్వంత రూపకల్పన (సెక్షన్ 5.5)
డిజైన్ సలహా అందించడానికి నా విధానం ప్రేరణాత్మకంగా ఉంది, విజయవంతమైన మరియు విఫలమైన మాస్ సహకార ప్రాజెక్టుల ఉదాహరణల ఆధారంగా నేను విన్నది. సామూహిక సహకార ప్రాజెక్టుల రూపకల్పనకు అనుగుణంగా ఉన్న ఆన్లైన్ కమ్యూనిటీలను రూపొందించడానికి మరింత సాధారణ సామాజిక మానసిక సిద్ధాంతాలను అమలు చేయడానికి పరిశోధన ప్రయత్నాల ప్రవాహం కూడా ఉంది, ఉదాహరణకి, Kraut et al. (2012) .
పాల్గొనేవారిని ప్రోత్సహించే విషయంలో, ప్రజలు మాస్ సహకార ప్రాజెక్టులు (Cooper et al. 2010; Nov, Arazy, and Anderson 2011; Tuite et al. 2011; Raddick et al. 2013; Preist, Massung, and Coyle 2014) . మీరు మైక్రోట్రాక్ కార్మిక మార్కెట్ (ఉదా. అమెజాన్ మెకానికల్ టర్క్), Kittur et al. (2013) ఆల్పై పాల్గొనేవారికి చెల్లింపును ప్రోత్సహించాలని భావిస్తే Kittur et al. (2013) కొన్ని సలహా అందిస్తుంది.
ఆశ్చర్యం కలిగించటం గురించి, జూలై ప్రాజెక్టుల నుండి వచ్చిన ఊహించని ఆవిష్కరణల యొక్క మరిన్ని ఉదాహరణలు, Marshall, Lintott, and Fletcher (2015) లింటోట్ Marshall, Lintott, and Fletcher (2015) .
నైతికంగా ఉండటం గురించి, Gilbert (2015) , Salehi et al. (2015) పాల్గొన్న సమస్యలకు కొన్ని మంచి సాధారణ పరిచయాలు Salehi et al. (2015) , Schmidt (2013) , Williamson (2016) , Resnik, Elliott, and Miller (2015) , మరియు Zittrain (2008) . గుంపు ఉద్యోగులతో చట్టపరమైన సమస్యలకు ప్రత్యేకంగా సంబంధించిన సమస్యల కోసం, Felstiner (2011) . O'Connor (2013) పరిశోధకుల నైతిక పర్యవేక్షణ గురించి ప్రశ్నలను అడ్రస్ చేసినప్పుడు పరిశోధకులు మరియు పాల్గొనేవారి బ్లర్ యొక్క పాత్రలు. పౌరుడు సైన్స్ ప్రాజెక్టులలో పాల్గొనేవారిని కాపాడుకుంటూ డేటాను పంచుకునే సమస్యలకు, Bowser et al. (2014) చూడండి Bowser et al. (2014) . Purdam (2014) మరియు Windt and Humphreys (2016) రెండూ పంపిణీ చేయబడిన సమాచార సేకరణలో నైతిక సమస్యల గురించి చర్చించాయి. చివరగా, చాలా ప్రాజెక్టులు రచనలను అంగీకరిస్తాయి కాని పాల్గొనేవారికి రచయిత హక్కును ఇవ్వు. ఫోల్డిట్లో, ఆటగాళ్ళు తరచుగా రచయితగా (Cooper et al. 2010; Khatib et al. 2011) జాబితాలో ఉన్నారు. ఇతర బహిరంగ కాల్ ప్రాజెక్టులలో, విజేతగా Dieleman, Willett, and Dambre (2015) తరచుగా తమ పరిష్కారాలను (ఉదా. Bell, Koren, and Volinsky (2010) మరియు Dieleman, Willett, and Dambre (2015) ) గురించి వివరించే ఒక కాగితాన్ని వ్రాయవచ్చు.
