ඊළඟට කියවන්න

• හැඳින්වීම (Section 5.1)

ජන සංයුතිය , පුරවැසි විද්යාව , සමූහ බලය බෙදාහැරීම සහ සාමූහික ඔත්තු බැලීම් වලින් අදහස් හුවමාරු කර ගනී. පුරවැසි විද්යාව සාමාන්යයෙන් විද්යාත්මක ක්රියාවලියේ දී "පුරවැසියන්" (එනම්, නුනා විද්යඥයින්) සම්බන්ධ කිරීම අදහස් කරයි; වැඩි විස්තර සඳහා Crain, Cooper, and Dickinson (2014) සහ Bonney et al. (2014) . Crowdsourcing සාමාන්යයෙන් අදහස් කරන්නේ සංවිධානයක් තුළ සාමාන්යයෙන් විසඳා ගැටළුවක් ඇති කර ගැනීම සහ එය සමූහය වෙත පවරා ගැනීම වෙනුවට; වැඩි විස්තර සඳහා, Howe (2009) . සාමුහික බුද්ධිය සාමාන්යයෙන් අදහස් කරන්නේ බුද්ධිමත් පෙනුමක් ඇති ආකාරවලින් සාමූහිකව ක්රියා කරන පුද්ගලයින්ගේ කණ්ඩායම් ය. වැඩි විස්තර සඳහා Malone and Bernstein (2015) බලන්න Malone and Bernstein (2015) . Nielsen (2012) යනු විද්යාත්මක පර්යේෂණ සඳහා මහා සහයෝගිතාව පිලිබඳ පොතක් දිගට හැඳින්වීමකි.

මම යෝජනා කර ඇති කාණ්ඩ තුනට සෘජුව ගැළපෙන නොයෙක් වර්ගයේ මානුෂීය සහයෝගීතාවයක් ඇති අතර, ඒවායින් තුනක් සමාජ පර්යේෂණවල ප්රයෝජනවත් විය හැකි නිසා විශේෂයෙන් ඒවා විශේෂයෙන් සැලකිල්ලට ගත යුතුය. එක් උදාහරණයක් වන්නේ පුරෝකථන වෙලඳපොලවල් වන අතර, ලොව පුරා සිදු වන ප්රතිඵල මත පදනම් වූ ප්රතිඵල පදනම් කර ගත් කොටස්කරුවන්ට මිලදී ගැනීම සහ වෙළඳ ගිවිසුම් මිලදී ගත හැකි වෙළඳ ගිවිසුම්. ප්රක්ශේපණය සඳහා සමාගම් සහ ආන්ඩු විසින් පුරෝකථනය කරන වෙළඳපලවල් බොහෝ විට භාවිතා කරනු ලබන අතර, ඔවුන් මානසික (Dreber et al. 2015) ප්රකාශිත අධ්යයනවල (Dreber et al. 2015) අනාවැකි පල කිරීමට පුරෝකථනය කිරීම සඳහා සමාජ පර්යේෂකයන් විසින් භාවිතා කරනු ලැබ ඇත (Dreber et al. 2015) . අනාවැකි පළේ වෙළෙඳපොළ පිළිබඳ දළ විශ්ලේෂණයක් සඳහා Wolfers and Zitzewitz (2004) සහ Arrow et al. (2008) .

මගේ වර්ගීකරණ යෝජනා ක්රමයට හොඳින් ගැලපෙන දෙවන උදාහරණයක් වන්නේ PolyMath ව්යාපෘතිය යි. නව ගණිත න්යායන් ඔප්පු කිරීම සඳහා බ්ලොග් සහ විකිපීඩියා භාවිතා කිරීම සඳහා පර්යේෂකයින් හවුල් විය. PolyMath ව්යාපෘතිය Netflix Prize වලට සමාන බවක් නොපෙනේ. නමුත් මෙම ව්යාපෘතියේ හවුල්කරුවන් අන් අයගේ අර්ධීය විසඳුම් මත ක්රියාශීලීව ගොඩ නැගූහ. PolyMath ව්යාපෘතිය සඳහා වැඩි විස්තර සඳහා Gowers and Nielsen (2009) , Cranshaw and Kittur (2011) , Nielsen (2012) සහ Kloumann et al. (2016) .

මගේ වර්ගීකරණ යෝජනා ක්රමයට හොඳින් ගැලපෙන තුන්වන උදාහරණයක් නම් ආරක්ෂක අධිආරක්ෂක පර්යේෂණ ව්යාපෘති නියෝජිතායතනය (DARPA) ජාල අභියෝගය (එනම්, රතු බැලූන් අභියෝගය) වැනි කාලය මත පදනම්ව බලමුලු ගැන්වීමයි. මෙම කාලය තුල සංවේදී බලමුලු ගැන්වීම සඳහා වැඩි දුරටත් Pickard et al. (2011) , Tang et al. (2011) සහ Rutherford et al. (2013) .

• මානව ගණනය (Section 5.2)

පරිගණකමය විද්යාඥයින් විසින් සිදු කරන ලද කාර්යයන්ගෙන් "මානව ගණනය" යනුවෙන් හැඳින්වෙන්නේ, සහ මෙම පර්යේෂණ පිටුපස ඇති වටපිටාව තේරුම් ගැනීම සඳහා සුදුසු යැයි සිතිය හැකි ගැටලු තෝරා ගැනීමට ඇති හැකියාවයි. ඇතැම් කර්තව්යයන් සඳහා, විශේෂඥ මිනිසුන්ගේ හැකියාවන්ට වඩා වැඩි හැකියාවක් ඇති පරිගණක සමග ඉතා බලවත් වේ. උදාහරණයක් ලෙස, චෙස්, පරිගණක සඳහා හොඳම අධිමාත්රයන් පවා පරාජය කළ හැකිය. එහෙත්, මෙය සමාජ විද්යාඥයන් විසින් අඩු ගණනය කරනු ලබන්නේ වෙනත් කාර්යයන් සඳහා වන අතර, පරිගණක වඩා ඇත්තටම මිනිසුන්ට වඩා නරක ය. වෙනත් වචනවලින් කිවහොත්, දැන් ඔබ රූප, රූපවාහිනිය, ශ්රව්ය සහ පෙළ සැකසීමේ සමහර කාර්යයන් සඳහා වඩාත්ම සංකීර්ණ පරිගණකයට වඩා හොඳය. පරිගණක දෘෂ්ටි විද්යාඥයන්ට පහසු කාර්යයන් සඳහා පරිගණක විද්යාඥයින් විසින් ඔවුන්ගේ පරිගණන ක්රියාවලියේදී ඒවාට ඇතුළත් කළ හැකි බව අවබෝධ කර ගත්හ. ලුයිස් ෆොන් අන් (2005) විසින් ඔහුගේ පරිගණක විද්යාවෙහිදී ඔහුගේ ප්රකාශය තුළ මුල්ම වාග්මාලාව හැඩගැසූ ආකාරය විස්තර කළ පරිදි: "පරිගණක සැකසීමේ ගැටළු විසඳීමට ගැටළු විසඳීමට මානව සැකසුම් බලයක් භාවිතා කිරීම සඳහා වූ පරමාදර්ශය". Law and Ahn (2011) වඩාත්ම සාමාන්ය අර්ථය, Law and Ahn (2011) බලන්න Law and Ahn (2011) .

Ahn (2005) ෆොල්ඩිට් හි ඉදිරිපත් කළ නිර්වචනයට අනුව විවෘත ඇමතුම් පිළිබඳ විස්තර කරන ලද - මානව ගණිත ව්යාපෘතියක් ලෙස සැලකිය හැකිය. කෙසේ වෙතත්, ෆොල්ඩිත් ලෙස විවෘත ඇමතුමක් ලෙස වර්ගීකරනය කිරීමට මම තීරණය කරමි. එය විශේෂිත පුහුණුවක් අවශ්ය නොවේ (නමුත් විධිමත් පුහුණුවක් නොලැබේ.) නමුත් බෙදුම්-උපයෝගීතා ක්රමෝපායක් භාවිතා කිරීම වෙනුවට එය හොඳම විසඳුමයි.

සංඛ්යාත්මක පරිගණනය සඳහා ක්රමවේදයක් විස්තර කිරීම සඳහා Wickham (2011) විසින් "split-apply-combine" යන යෙදුම භාවිතා කරන ලදී. Split-apply-combine උපායමාර්ගය Google හි ඇති MapReduce රාමුව හා සමාන වේ; MapReduce පිළිබඳ වැඩි විස්තර සඳහා, Dean and Ghemawat (2004) සහ Dean and Ghemawat (2008) . අනෙකුත් ව්යාප්ත පරිගණක පරිගණක නිර්මාණ සඳහා වැඩි විස්තර සඳහා Vo and Silvia (2016) . මෙම පරිච්ඡේදයේ වඩා සංකීර්ණ ඒකාබද්ධ පියවරයන් සමඟ Law and Ahn (2011) සංග්රහයේ 3 වන පරිච්ඡේදයේ සාකච්ඡා කර ඇත.

පරිච්ජේදයේ මා සාකච්ඡා කර ඇති මානව ගණිත ව්යාපෘතිවලදී, සිදුවෙමින් පවතින දේ ගැන හ්භාගීවනනනට දැන සිටියහ. කෙසේවෙතත්, තවත් ව්යාපෘති කිහිපයක් දැනටමත් සිදුවෙමින් පවතින "වැඩ" අල්ලා ගැනීමට උත්සාහ දරයි. උදාහරණයක් ලෙස ESP ගේම්ස් (Ahn and Dabbish 2004) සහ reCAPTCHA (Ahn et al. 2008) . කෙසේ වෙතත්, මෙම ව්යාපෘති දෙකටම ඔවුන්ගේ ආචාරධර්ම ප්රශ්න මතු කරයි. හ්භාගීවනනනට තම දත්ත භාවිතා කරන ආකාරය නොදන්නා නිසා (Zittrain 2008; Lung 2012) .

ESP ගේම්ස් විසින් ගවේෂණය කරන ලද බොහෝ පර්යේෂකයන් විසින් වෙනත් "අරමුණක් සහිත ක්රීඩා" (Ahn and Dabbish 2008) (එනම් "මානව පාදක පරිගණක ගණනය කිරීම්" (Pe-Than, Goh, and Lee 2015) විවිධ ගැටලු විසඳීම සඳහා භාවිතා කරනු ලැබේ. පොදු අරමුණක් ඇති "පොදු දේවල්" පොදු ඒවා වන්නේ මානව ගණයේ ක්රියාකාරිත්වයේ කාර්යයන් ප්රීතියට පත් කිරීමයි. මෙලෙස, ESP ගේම්ස් එකට ගැලැක්සි සවුකාව සමඟ සමාන බෙදීම් ඇති අතර, හ්භාගීවනනනට අභිපේ්රරනය කරන ආකාරය අනුව එය වෙනස් වේ. විද්යාවට උදව් කිරීමට ආශාවක්. අරමුණක් ඇති ක්රීඩා සඳහා වැඩි විස්තර සඳහා Ahn and Dabbish (2008) .

ගැලැක්සි සත්වෝද්යානය පිළිබඳ මගේ විස්තරය Nielsen (2012) , Adams (2012) , Clery (2011) සහ Hand (2010) පිළිබඳ මගේ විස්තරය වන අතර Galaxy Zoo හි පර්යේෂණ අරමුණු සරළ කිරීම සරල විය. තාරකා විද්යාවේ ග්ලැක්කේසියා වර්ගීකරණයෙහි ඉතිහාසය පිළිබඳ වැඩි විස්තර සහ ගැලැක්සි සත්වෝද්යානය මෙම සම්ප්රදායට අඛණ්ඩව ක්රියාත්මක කරන්නේ කෙසේද යන්න පිළිබඳව Masters (2012) සහ Marshall, Lintott, and Fletcher (2015) . ගැලැක්සි සත්වෝද්යානය මත ගොඩනැඟීම, පර්යේෂකයන් විසින් Galaxy Zoo 2 සම්පූර්ණ කරන ලද අතර ස්වේච්ඡා සේවකයන්ගෙන් මිලියන 60 කට වඩා වැඩි සංකීර්ණ රූපජනක වර්ගීකරණයන් එකතු කරන ලදි (Masters et al. 2011) . තවද, චන්ද්රයාගේ පෘෂ්ඨය ගවේෂණය, ග්රහලෝකයන් සොයා ගැනීම සහ පැරණි ලියකියවිලි පිටපත් කිරීම ඇතුලුව, චක්රාවාට විද්යාව හැරුණු විට ගැටළු වලට විසිරී ගියේය. වර්තමානයේ සිය ව්යාපෘති සියළුම ව්යාපෘති Zooniverse වෙබ් අඩවියේ එකතු කර ඇත (Cox et al. 2015) . ව්යාපෘති වලින් එකක් වන Snapshot Serengeti - ගැලැක්සි සත්වෝද්යාන වර්ගීකරණ වර්ගීකරණය කිරීමේ ව්යාපෘති පරිසර පර්යේෂණ සඳහාද (Swanson et al. 2016) .

මානව Chandler, Paolacci, and Mueller (2013) ව්යාපෘතියක් සඳහා Chandler, Paolacci, and Mueller (2013) ශ්රම වෙලඳපොලක් (උදා. ඇමේසන් යාන්ත්රික ටුර්ක්) භාවිතා කිරීමට සැලසුම් කරන පර්යේෂකයින් සඳහා, Chandler, Paolacci, and Mueller (2013) සහ J. Wang, Ipeirotis, and Provost (2015) වෙනත් සම්බන්ධ ගැටළු Porter, Verdery, and Gaddis (2016) "දත්ත වැඩිදියුණු කිරීම" ලෙස හැඳින්වෙන්නේ ක්ෂුද්ර වැඩපොලේ කම්කරු වෙළඳපොළවල්වල භාවිතය පිළිබඳව විශේෂයෙන් අවධානය යොමු කරන ලද උදාහරණ හා උපෙදස්. දත්ත වැඩි කිරීම හා දත්ත එක්රැස් කිරීම අතර පරතරය තරමක් පැහැදිළි ය. පෙළ සඳහා අධීක්ෂණය කරන ලද ඉගෙනුම් සඳහා ලේබල එකතු කිරීම හා භාවිතය සඳහා, Grimmer and Stewart (2013) බලන්න Grimmer and Stewart (2013) .

මා පරිගණක පරිගණනය සඳහා යොදාගත් මානව වර්ගීකරණ පද්ධති ලෙස හඳුන්වන පර්යේෂකයින් උනන්දුවක් දක්වන පර්යේෂකයින් (උදාහරණ ලෙස පරිගණක ඉගෙනුම් ආකෘතියක් පුහුණු කිරීම සඳහා මානව ලේබල භාවිතා කරන පද්ධති) Shamir et al. (2014) (ශබ්ද භාවිතා කිරීම සඳහා උදාහරණයක්) සහ Cheng and Bernstein (2015) . එසේම, මෙම ව්යාපෘතිවල යන්ත්ර ඉගෙනුම් ආකෘති සඳහා විවෘත ඇමතුම් ලබා ගත හැකි අතර, පර්යේෂකයන්ට උපරිමාණාත්මක කාර්ය සාධනය සහිතව පරිගණක ඉගෙනුම් මාදිලි නිර්මාණය කිරීමට තරඟ වදිති. නිදසුනක් වශයෙන්, Galaxy Zoo කණ්ඩායම විවෘත ඇමතුමක් ලබා ගනිමින්, Banerji et al. (2010) විසින් දියුණු කරන ලද නව ප්රවේශයක් සොයා ගත්තේය Banerji et al. (2010) ; විස්තර සඳහා Dieleman, Willett, and Dambre (2015) බලන්න.

• විවෘත ඇමතුම් (5.3 වගන්තිය)

විවෘත ඇමතුම් අලුත් නොවේ. සැබවින්ම, ඉතා ප්රසිද්ධ ප්රසිද්ධ විවෘත ඇමතුමක් 1714 දී බි්රතාන්ය පාර්ලිමේන්තුව විසින් මුහුදේ දී නැව් නැව් තීරනය තීරණය කිරීමට ක්රමයක් වර්ධනය කළ හැකි ඕනෑම අයෙකු සඳහා දිගුකාලීන ත්යාගයක් නිර්මාණය කළ විට ඩී. ගැටලුව වූයේ අයිසැක් නිව්ටන් ඇතුලූ ශ්රේෂ්ඨතම විද්යාඥයින්ගෙන් බොහෝ දෙනා අතරටය. ජයග්රාහී විසඳුම අවසානයේ දී ජෝන් හැරිසන් විසින් ඉදිරිපත් කරන ලද කාලානුරූපක වේලාවක ඉදිරිපත් කරන ලදී. මෙම ගැටලුව විසඳා ගත් විද්යාඥයන්ගෙන් වෙනස් ආකාරයකින් තාරකා විද්යාව ; වැඩි විස්තර සඳහා, Sobel (1996) . මෙම උදාහරණ නිදර්ශනය වන පරිදි, විවෘත ඇමතුම් සඳහා ඉතා හොඳ වැඩක් ඇති බවක් එක් හේතුවක් නිසා ඔවුන් විවිධ දෘෂ්ටි කෝණයන් සහ කුසලතා සහිත පුද්ගලයින් වෙත ප්රවේශය ලබා දෙන බව (Boudreau and Lakhani 2013) . ගැටළු නිරාකරණයේ විවිධත්වයේ වටිනාකම පිළිබඳව Hong and Page (2004) හා Page (2008) .

මෙම පරිච්ඡේදයේ විවෘත ඇමතුම් නඩු සෑම අංශයකම ඊට අයත් වන්නේ ඇයිදැයි තව තවත් පැහැදිලි කිරීමක් අවශ්ය වේ. පළමුව, මානව ගණනය සහ විවෘත ඇමතුම් ව්යාපෘති අතර වෙනස හඳුනා ගත හැකි වන්නේ, ප්රතිදානය සාමාන්යයෙන් සෑම විසඳුමක් (මානව ගණනය) හෝ හොඳම විසඳුම (විවෘත ඇමතුම) වේ. හොඳම විසඳුම වන්නේ එක් එක් විසඳුම්වල සංකීර්ණ සාමාන්යයක් බවට පත් වූ නිසා (Bell, Koren, and Volinsky 2010; Feuerverger, He, and Khatri 2012) විසඳුම ලෙස හඳුන්වන ප්රවේශය (Bell, Koren, and Volinsky 2010; Feuerverger, He, and Khatri 2012) . කෙසේ වෙතත් නෙට්ෆික්ස්ගේ ඉදිරිදර්ශනයේ සිට, ඔවුන් කළ යුතුව තිබුණේ හොඳම විසඳුමයි. නෙට්ෆ්රික්ස් ත්යාගය පිළිබඳ වැඩි විස්තර සඳහා Bennett and Lanning (2007) , Thompson (2008) , Bell, Koren, and Volinsky (2010) සහ Feuerverger, He, and Khatri (2012) .

දෙවනුව, මානව ගණනය පිළිබඳ සමහර අර්ථදැක්වීම් (නිද. Ahn (2005) ), Foldit මානව ගණිත ව්යාපෘතියක් ලෙස සැලකිය යුතුය. කෙසේ වෙතත්, මම එය විවෘත ඇමතුමක් ලෙස වර්ගීකරනය කිරීමට තෝරාගෙන එයට විශේෂිත පුහුණුවක් අවශ්ය වන නමුත් එය විශේෂිත පුහුණුවක් නොලැබේ. එය බෙදුම්වාදී උපකරණයක් භාවිතා කිරීම වෙනුවට හොඳම විසඳුම වේ. ෆොල්ඩිට් ගැන වැඩි විස්තර සඳහා Cooper et al. (2010) , Khatib et al. (2011) , Andersen et al. (2012) ; Bohannon (2009) , Hand (2010) සහ Nielsen (2012) හි විස්තර කර ඇත්තේ Foldit ගේ විස්තරයෙනි.

අවසාන වශයෙන්, පේර්ට-පේටන්ට් යනු බෙදාහැර තිබෙන දත්ත එකතු කිරීමේ උදාහරණයකි. එය විවෘත කැඳවීමක් ලෙස එය විවෘත කිරීම සඳහා තරඟකාරී ආකාරයේ ව්යුහයක් ඇති අතර එය බෙදාහැරීමේ දත්ත එකතු කිරීමේදී හොඳ සහ නරක දායකයන්ගේ අදහස අඩු ය. Peer-to-Patent පිළිබඳ වැඩි විස්තර සඳහා Noveck (2006) , Ledford (2007) , Noveck (2009) , සහ Bestor and Hamp (2010) .

සමාජ පර්යේෂණයන් තුළ විවෘත ඇමතුම් භාවිතා කිරීම සම්බන්ධයෙන්, Glaeser et al. (2016) සමානකම් වලට සමාන ප්රතිඵල Glaeser et al. (2016) , Mayer-Schönberger and Cukier (2013) 10) පරිච්ඡේදයේ වාර්තා කර ඇති අතර, නිව් යෝර්ක් නගරයේ නිවාස උප පරීක්ෂකවල ඵලදායිතාවයේ විශාල වාසි ලබා ගැනීමට පුරෝකථන මෝස්තර භාවිතා කිරීමට හැකි විය. නිව් යෝර්ක් නගරයේ දී මෙම පුරෝකථන ආකෘතීන් නගර සේවකයන් විසින් ඉදිකරන ලද නමුත්, වෙනත් අවස්ථාවලදී, විවෘත ඇමතුම් මගින් ඔවුන් නිර්මාණය කළ හැකි හෝ වැඩිදියුණු කළ හැකි බව (උදාහරණයක් ලෙස, Glaeser et al. (2016) ) උපකල්පනය කළ හැකිය. කෙසේ වෙතත්, සම්පත් වෙන් කිරීම සඳහා පුරෝකථන ආකෘති සමග එක් ප්රධාන ගැටලුවක් වන්නේ, මෙම ආකෘති පවතින පවත්නා පක්ෂ ශක්තිය තහවුරු කිරීමට ඇති හැකියාවයි. බොහෝ පර්යේෂකයන් දැනටමත් දැනටමත් "අපද්රව්ය, කසළ ඉවත් කිරීම" ද පුරෝකථනය කරන ලද ආකෘති සමග "පක්ෂග්රාහීව, පක්ෂග්රාහී" විය හැකිය. " Barocas and Selbst (2016) සහ O'Neil (2016) බලන්න. පක්ෂග්රාහී පුහුණු දත්ත.

විවෘත තරඟ සඳහා භාවිතයට ගැනීමට ඉඩ නොදෙන එක් ගැටලුවක් වන්නේ, මෙම දත්ත නිදහස් කිරීම අවශ්ය වන බවය. විවෘත ඇමතුම්වල පෞද්ගලිකත්වය සහ දත්ත නිකුත් කිරීම පිළිබඳ වැඩි විස්තර සඳහා, Narayanan, Huey, and Felten (2016) සහ 6 වන පරිච්ඡේදයේ සාකච්ඡාව බලන්න.

අනාවැකි සහ පැහැදිලි කිරීම් අතර ඇති වෙනස්කම් හා සමානකම් පිළිබඳව Breiman (2001) , Shmueli (2010) , Watts (2014) සහ Kleinberg et al. (2015) . සමාජ පර්යේෂණ අනාවැකිය භූමිකාව ගැන තවත් විස්තර සඳහා, බලන්න Athey (2017) , Cederman and Weidmann (2017) , Hofman, Sharma, and Watts (2017) , ( ??? ) , සහ Yarkoni and Westfall (2017) .

සැලසුම් උපදෙස් ඇතුළුව ජෛව විද්යාවෙහි විවෘත කැඳවීම් ව්යාපෘති සමාලෝචනය සඳහා Saez-Rodriguez et al. (2016) .

• බෙදා හරින ලද දත්ත එකතුව (5.4 වගන්තිය)

EBird පිළිබඳ මගේ විස්තරය Bhattacharjee (2005) , Robbins (2013) සහ Sullivan et al. (2014) . පර්යේෂකයන් විසින් eBird දත්ත විශ්ලේෂණය කිරීමට සංඛ්යානමය ආකෘතීන් භාවිතා කරන ආකාරය පිළිබඳ වැඩි විස්තර සඳහා Fink et al. (2010) සහ Hurlbert and Liang (2012) . EBird සහභාගීකරුවන්ගේ හැකියාවන් තක්සේරු කිරීම පිළිබඳ වැඩි විස්තර සඳහා Kelling, Johnston, et al. (2015) . ඕලිටෝවිද්යාවේ පුරවැසි විද්යාවේ ඉතිහාසය පිළිබඳ වැඩි විස්තර සඳහා Greenwood (2007) බලන්න Greenwood (2007) .

මලාවි ජර්නල්ස් ව්යාපෘතිය පිළිබඳ වැඩි විස්තර සඳහා Watkins and Swidler (2009) සහ Kaler, Watkins, and Angotti (2015) . දකුණු අප්රිකාවේ ආශ්රිත ව්යාපෘතියක් සඳහා වැඩි විස්තර සඳහා Angotti and Sennott (2015) බලන්න Angotti and Sennott (2015) . මලාවි ජර්නල්ස් ව්යාපෘතියෙන් දත්ත භාවිතා කරන පර්යේෂණ සඳහා තවත් උදාහරණ සඳහා Kaler (2004) සහ Angotti et al. (2014) .

• ඔබගේම නිර්මාණය කිරීම (Section 5.5)

මා විසින් අසා ඇති සාර්ථක අසාර්ථක සහ අසාර්ථක මහජන සහයෝගීතා ව්යාපෘතිවල උදාහරණ මත පදනම්ව නිර්මාණාත්මක උපදෙස් සැපයීමේ මගේ ප්රවේශය උනුසුම් විය. මහා පරිමාණ සහයෝගීතා ව්යාපෘති සැලසුම් කිරීම සඳහා සබැඳි ප්රජාවන් නිර්මාණය කිරීම සඳහා වඩාත් පොදු සමාජ මනෝවිද්යාත්මක න්යායන් අනුගමනය කිරීම සඳහා පර්යේෂන ප්රයත්නයක් ද ඇත. උදාහරණ බලන්න, Kraut et al. (2012) .

ජනතාව (Cooper et al. 2010; Nov, Arazy, and Anderson 2011; Tuite et al. 2011; Raddick et al. 2013; Preist, Massung, and Coyle 2014) මහා පරිමාණ සහෙයෝගීතා ව්යාපෘති සඳහා සහභාගී වන අය (Cooper et al. 2010; Nov, Arazy, and Anderson 2011; Tuite et al. 2011; Raddick et al. 2013; Preist, Massung, and Coyle 2014) දැයි නිවැරදිව තේරුම් ගැනීම සඳහා (Cooper et al. 2010; Nov, Arazy, and Anderson 2011; Tuite et al. 2011; Raddick et al. 2013; Preist, Massung, and Coyle 2014) . ක්ෂුද්ර වැඩපොලේ ශ්රම වෙලඳපොලේ ගෙවීම සඳහා සහභාගිවන්නන් උනන්දු කිරීමට ඔබ සැලසුම් කරන්නේ නම් (උදා. ඇමේසන් යාන්ත්රික ටර්ක්), Kittur et al. (2013) උපදෙස් කිහිපයක් ඉදිරිපත් කරයි.

Zooiverse ව්යාපෘති වලින් එන අනපේක්ෂිත සොයාගැනීම්වල තවත් උදාහරන සඳහා Marshall, Lintott, and Fletcher (2015) .

ආචාර ධර්ම සම්බන්ධයෙන් සැලකිලිමත් වන ගැටළු වලට හොඳ යහපත් හැඳින්වීමක් වන්නේ Gilbert (2015) , Salehi et al. (2015) , Schmidt (2013) , Williamson (2016) , Resnik, Elliott, and Miller (2015) සහ Zittrain (2008) . සමූහ සේවකයින් සමඟ නීතිමය ගැටළු සඳහා නිශ්චිත ගැටළු සඳහා, Felstiner (2011) . පර්යේෂකයන්ගේ සහ සහභාගීකරුවන්ගේ චරිතයන් කෙලෙසන විට O'Connor (2013) පර්යේෂණයන් පිළිබඳ සදාචාරාත්මක අධීක්ෂනය පිළිබඳ ප්රශ්න යොමු කරයි. පුරවැසි විද්යා ව්යාපෘති වල සහභාගීත්වය සුරැකීමේදී දත්ත හුවමාරු කර ගැනීම සම්බන්ධ ගැටළු සඳහා Bowser et al. (2014) . Purdam (2014) හා Windt and Humphreys (2016) බෙදාහැර ඇති දත්ත එකතු කිරීමේදී ආචාර ධර්ම පිළිබඳ යම් සාකච්ඡාවක් තිබේ. අවසාන වශයෙන්, බොහෝ ව්යාපෘති දායකත්වයන් පිළිගන්නා නමුත් සහභාගීවන්නන්ට කතුවරුන්ගේ ණය නොදෙනු ඇත. Foldit හි ක්රීඩකයන් බොහෝ විට කතුවරයකු ලෙස ලැයිස්තුගත කර ඇත (Cooper et al. 2010; Khatib et al. 2011) . අනෙකුත් විවෘත ඇමතුම් ව්යාපෘතිවලදී, ජයග්රාහකයාට ඔවුන්ගේ විසඳුම් විස්තර කිරීමට ලිපියක් ලිවිය හැකිය (උදාහරණයක් ලෙස, Bell, Koren, and Volinsky (2010) සහ Dieleman, Willett, and Dambre (2015) ).