ਜਨਤਕ ਸ਼ਹਿਰੀ ਨਾਗਰਿਕ ਵਿਗਿਆਨ , ਭੀੜ-ਉਤਰਾਧਿਕਾਰ ਅਤੇ ਸਮੂਹਿਕ ਖੁਫ਼ੀਆ ਜਾਣਕਾਰੀ ਨਾਗਰਿਕ ਵਿਗਿਆਨ ਦਾ ਆਮ ਤੌਰ 'ਤੇ ਵਿਗਿਆਨਕ ਪ੍ਰਕਿਰਿਆ ਵਿਚ "ਨਾਗਰਿਕਾਂ" (ਅਰਥਾਤ, ਨੋਂਸਾਈਜੇਂਟਸ) ਨੂੰ ਸ਼ਾਮਲ ਕਰਨ ਦਾ ਮਤਲਬ ਹੁੰਦਾ ਹੈ; ਇਸ ਤੋਂ ਇਲਾਵਾ, Crain, Cooper, and Dickinson (2014) ਅਤੇ Bonney et al. (2014) . ਭੀੜ-ਸੁੱਰਖਿਆ ਦਾ ਆਮ ਤੌਰ 'ਤੇ ਮਤਲਬ ਕਿਸੇ ਸੰਸਥਾ ਦੇ ਅੰਦਰ ਆਮ ਤੌਰ ਤੇ ਸਮੱਸਿਆ ਦਾ ਹੱਲ ਕੱਢਣਾ ਅਤੇ ਇਸਨੂੰ ਭੀੜ ਵਿੱਚ ਆਊਟ ਸੋਰਸ ਕਰਨਾ; ਹੋਰ, Howe (2009) ਦੇਖੋ. ਸਮੂਹਿਕ ਖੁਫੀਆ ਦਾ ਅਰਥ ਆਮ ਤੌਰ ਤੇ ਅਜਿਹੇ ਵਿਅਕਤੀਆਂ ਦੇ ਸਮੂਹ ਹਨ ਜੋ ਸਮੂਹਿਕ ਤੌਰ ਤੇ ਕਾਰਜਸ਼ੀਲ ਤਰੀਕੇ ਨਾਲ ਕੰਮ ਕਰਦੇ ਹਨ ਜੋ ਸਮਝਦਾਰ ਲੱਗਦੇ ਹਨ ਹੋਰ ਲਈ, Malone and Bernstein (2015) ਦੇਖੋ Malone and Bernstein (2015) . Nielsen (2012) ਵਿਗਿਆਨਕ ਖੋਜ ਲਈ ਜਨਤਕ ਸਹਿਯੋਗ ਦੀ ਸ਼ਕਤੀ ਦੀ ਪੁਸਤਕ ਦੀ ਲੰਬਾਈ ਦੀ ਸ਼ੁਰੂਆਤ ਹੈ.
ਬਹੁਤ ਸਾਰੇ ਪਦਾਰਥਕ ਸਾਂਝੇ ਹਨ ਜੋ ਕਿ ਤਿੰਨਾਂ ਸ਼੍ਰੇਣੀਆਂ ਜਿਨ੍ਹਾਂ ਵਿੱਚ ਮੈਂ ਤਜਵੀਜ਼ ਕੀਤੀ ਹੈ ਵਿੱਚ ਚੰਗੀ ਤਰ੍ਹਾਂ ਫਿੱਟ ਨਹੀਂ ਹੁੰਦਾ ਅਤੇ ਮੈਨੂੰ ਲੱਗਦਾ ਹੈ ਕਿ ਇਨ੍ਹਾਂ ਵਿੱਚੋਂ ਤਿੰਨ ਨੂੰ ਵਿਸ਼ੇਸ਼ ਧਿਆਨ ਦਿੱਤਾ ਗਿਆ ਹੈ ਕਿਉਂਕਿ ਉਹ ਸਮਾਜਿਕ ਖੋਜ ਲਈ ਉਪਯੋਗੀ ਹੋ ਸਕਦੇ ਹਨ. ਇੱਕ ਉਦਾਹਰਣ ਭਵਿੱਖਬਾਣੀ ਮਾਰਕੀਟ ਹੈ, ਜਿੱਥੇ ਹਿੱਸਾ ਲੈਣ ਵਾਲੇ ਖਰੀਦਦਾਰ ਅਤੇ ਵਪਾਰਕ ਇਕਰਾਰਨਾਮਾ ਜੋ ਦੁਨੀਆਂ ਵਿੱਚ ਵਾਪਰਨ ਵਾਲੇ ਨਤੀਜਿਆਂ ਦੇ ਅਧਾਰ ਤੇ ਛੁਟਕਾਰਾ ਹੁੰਦਾ ਹੈ. ਪੂਰਵ ਅਨੁਮਾਨ ਮਾਰਕੀਟ ਅਕਸਰ ਫਰਮਾਂ ਅਤੇ ਸਰਕਾਰਾਂ ਦੁਆਰਾ ਅਨੁਮਾਨ ਲਗਾਉਣ ਲਈ ਵਰਤੀਆਂ ਜਾਂਦੀਆਂ ਹਨ, ਅਤੇ ਉਹਨਾਂ ਨੂੰ ਸਮਾਜਿਕ ਖੋਜਕਰਤਾਵਾਂ ਦੁਆਰਾ ਮਨੋਵਿਗਿਆਨ (Dreber et al. 2015) ਵਿੱਚ ਪ੍ਰਕਾਸ਼ਿਤ ਅਧਿਐਨ ਦੀ ਪ੍ਰਤੀਕਿਰਿਆਸ਼ੀਲਤਾ ਦਾ ਅੰਦਾਜ਼ਾ ਲਗਾਉਣ ਲਈ ਵਰਤਿਆ ਗਿਆ ਹੈ. ਪੂਰਵ ਅਨੁਮਾਨ ਮਾਰਕੀਟ ਦੀ ਇੱਕ ਸੰਖੇਪ ਜਾਣਕਾਰੀ ਲਈ, Wolfers and Zitzewitz (2004) ਅਤੇ Arrow et al. (2008) .
ਦੂਜੀ ਉਦਾਹਰਨ ਜੋ ਮੇਰੀ ਵਰਗੀਕਰਨ ਯੋਜਨਾ ਵਿੱਚ ਚੰਗੀ ਤਰ੍ਹਾਂ ਫਿੱਟ ਨਹੀਂ ਹੁੰਦੀ, ਉਹ ਪੌਲੀਮੇਥ ਪ੍ਰੋਜੈਕਟ ਹੈ, ਜਿੱਥੇ ਖੋਜਕਰਤਾਵਾਂ ਨੇ ਨਵੇਂ ਮੈਥ ਥਿਊਰਮਾਂ ਨੂੰ ਸਾਬਤ ਕਰਨ ਲਈ ਬਲੌਗ ਅਤੇ ਵਿਕੀ ਦੀ ਸਹਾਇਤਾ ਨਾਲ ਸਹਿਯੋਗ ਕੀਤਾ. ਪਾਲੀਮੇਥ ਪ੍ਰੋਜੈਕਟ ਨੈਟਫਲਿਕਸ ਇਨਾਮ ਦੇ ਸਮਾਨ ਕੁਝ ਤਰੀਕਿਆਂ ਵਿਚ ਹੈ, ਪਰ ਇਸ ਪ੍ਰੋਜੈਕਟ ਵਿਚ ਹਿੱਸਾ ਲੈਣ ਵਾਲਿਆਂ ਵਿਚ ਹੋਰ ਸਰਗਰਮ ਰੂਪ ਨਾਲ ਦੂਜਿਆਂ ਦੇ ਅੰਸ਼ਕ ਹੱਲਾਂ 'ਤੇ ਬਣਾਇਆ ਗਿਆ ਹੈ. ਪੌਲੀਮੇਥ ਪ੍ਰੋਜੈਕਟ ਬਾਰੇ ਵਧੇਰੇ ਜਾਣਕਾਰੀ ਲਈ ਗਵਰਜ਼ Gowers and Nielsen (2009) , Cranshaw and Kittur (2011) , Nielsen (2012) ਅਤੇ Kloumann et al. (2016)
ਤੀਜੀ ਉਦਾਹਰਨ ਜੋ ਮੇਰੀ ਵਰਗੀਕਰਨ ਯੋਜਨਾ ਵਿੱਚ ਚੰਗੀ ਤਰ੍ਹਾਂ ਫਿੱਟ ਨਹੀਂ ਹੁੰਦੀ ਹੈ, ਉਹ ਹੈ ਸਮਾਂ-ਨਿਰਭਰ ਮੋਬਲਾਈਜੇਸ਼ਨ ਜਿਵੇਂ ਕਿ ਰੱਖਿਆ ਅਡਵਾਂਸਡ ਰਿਸਰਚ ਪ੍ਰੋਜੈਕਟ ਏਜੰਸੀ (ਡਾਰਪਾ) ਨੈਟਵਰਕ ਚੈਲੰਜ (ਭਾਵ, ਲਾਲ ਬੈਲੂਨ ਚੈਲੰਜ). ਇਸ ਸਮੇਂ ਸੰਵੇਦਨਸ਼ੀਲ ਗਤੀਸ਼ੀਲਤਾ ਬਾਰੇ ਵਧੇਰੇ ਜਾਣਕਾਰੀ ਲਈ Pickard et al. (2011) ਵੇਖੋ Pickard et al. (2011) , Tang et al. (2011) , ਅਤੇ Rutherford et al. (2013) .
"ਮਨੁੱਖੀ ਗਣਨਾ" ਸ਼ਬਦ ਕੰਪਿਊਟਰ ਵਿਗਿਆਨੀ ਦੁਆਰਾ ਕੀਤੇ ਗਏ ਕੰਮ ਤੋਂ ਬਾਹਰ ਆਉਂਦਾ ਹੈ ਅਤੇ ਇਸ ਖੋਜ ਦੇ ਪਿੱਛੇ ਸੰਦਰਭ ਨੂੰ ਸਮਝਣ ਨਾਲ ਉਹਨਾਂ ਸਮੱਸਿਆਵਾਂ ਨੂੰ ਉਠਾਉਣ ਦੀ ਤੁਹਾਡੀ ਸਮਰੱਥਾ ਵਿੱਚ ਸੁਧਾਰ ਹੋਵੇਗਾ ਜੋ ਉਸ ਲਈ ਢੁੱਕਵੀਂ ਹੋ ਸਕਦੀਆਂ ਹਨ. ਕੁਝ ਖਾਸ ਕੰਮਾਂ ਲਈ, ਕੰਪਿਊਟਰ ਬਹੁਤ ਸ਼ਕਤੀਸ਼ਾਲੀ ਹਨ, ਸਮਰੱਥਾ ਵਾਲੇ ਮਨੁੱਖਾਂ ਤੋਂ ਬਹੁਤ ਜ਼ਿਆਦਾ ਸਮਰੱਥਾ ਵਾਲੇ. ਉਦਾਹਰਣ ਵਜੋਂ, ਸ਼ਤਰੰਜ ਵਿਚ, ਕੰਪਿਊਟਰ ਸਭ ਤੋਂ ਵਧੀਆ ਗ੍ਰੈਂਡਮਾਸਟਰ ਵੀ ਹਰਾ ਸਕਦੇ ਹਨ. ਪਰ - ਅਤੇ ਸਮਾਜਿਕ ਵਿਗਿਆਨੀ ਦੁਆਰਾ ਇਸ ਦੀ ਘੱਟ ਪ੍ਰਸ਼ੰਸਾ ਕੀਤੀ ਜਾਂਦੀ ਹੈ- ਦੂਜੇ ਕਾਰਜਾਂ ਲਈ, ਕੰਪਿਊਟਰ ਅਸਲ ਵਿੱਚ ਲੋਕਾਂ ਨਾਲੋਂ ਬਹੁਤ ਭੈੜੇ ਹਨ. ਦੂਜੇ ਸ਼ਬਦਾਂ ਵਿਚ, ਹੁਣ ਤੁਸੀਂ ਤਸਵੀਰਾਂ, ਵੀਡੀਓ, ਆਡੀਓ ਅਤੇ ਪਾਠ ਦੀ ਪ੍ਰਕਿਰਿਆ ਨੂੰ ਸ਼ਾਮਲ ਕਰਨ ਵਾਲੇ ਕੁਝ ਕੰਮਾਂ ਵਿਚ ਸਭ ਤੋਂ ਵੱਧ ਗੁੰਝਲਦਾਰ ਕੰਪਿਊਟਰ ਨਾਲੋਂ ਬਿਹਤਰ ਹੋ. ਕੰਪਿਊਟਰ ਵਿਗਿਆਨੀਆਂ ਲਈ ਕੰਮ ਕਰਨ ਵਾਲੇ ਕੰਪਿਊਟਰ ਵਿਗਿਆਨੀ ਇਸ ਲਈ ਆਸਾਨੀ ਨਾਲ ਕੰਮ ਕਰਨ ਵਾਲੇ ਮਨੁੱਖੀ ਕਾਰਜਾਂ ਨੂੰ ਸਮਝਦੇ ਹਨ ਕਿ ਉਹ ਮਨੁੱਖ ਨੂੰ ਆਪਣੀ ਗਣਨਾ ਦੀ ਪ੍ਰਕਿਰਿਆ ਵਿਚ ਸ਼ਾਮਿਲ ਕਰ ਸਕਦੇ ਹਨ. ਲੁਈਸ ਵੌਨ ਅਹਾਨ (2005) ਨੇ ਮਨੁੱਖੀ ਗਣਨਾ ਦਾ ਵਰਣਨ ਕੀਤਾ ਜਦੋਂ ਉਸ ਨੇ ਆਪਣੇ ਅਭਿਆਸ ਵਿੱਚ ਪਹਿਲੀ ਸ਼ਬਦ ਵਰਤਿਆ: "ਮਨੁੱਖੀ ਪ੍ਰਾਸੈਸਿੰਗ ਸ਼ਕਤੀ ਦੀ ਵਰਤੋਂ ਕਰਨ ਲਈ ਇੱਕ ਨਮੂਨਾ ਜਿਹੜੀਆਂ ਸਮੱਸਿਆਵਾਂ ਦੂਰ ਨਹੀਂ ਹੋ ਸਕਦੀਆਂ ਹਨ." ਮਨੁੱਖੀ ਗਣਨਾ ਦੀ ਇੱਕ ਪੁਸਤਕ-ਲੰਬਾਈ ਦੇ ਇਲਾਜ ਲਈ ਸ਼ਬਦ ਦੀ ਸਭ ਤੋਂ ਆਮ ਭਾਵ, Law and Ahn (2011) .
Ahn (2005) ਫੋਲਿਟ ਵਿਚ ਪ੍ਰਸਤੁਤ ਕੀਤੀ ਗਈ ਪਰਿਭਾਸ਼ਾ ਅਨੁਸਾਰ, ਜਿਸ ਨੂੰ ਮੈਂ ਖੁੱਲ੍ਹੇ ਕਾਲਾਂ ਦੇ ਭਾਗ ਵਿਚ ਵਰਣਿਤ ਕੀਤਾ- ਇਕ ਮਨੁੱਖੀ ਗਣਨਾ ਪ੍ਰੋਜੈਕਟ ਮੰਨਿਆ ਜਾ ਸਕਦਾ ਹੈ. ਹਾਲਾਂਕਿ ਮੈਂ ਫੁੱਲਿਟ ਨੂੰ ਇੱਕ ਖੁੱਲ੍ਹਾ ਕਾਲ ਦੇ ਤੌਰ ਤੇ ਸ਼੍ਰੇਣੀਬੱਧ ਕਰਨ ਲਈ ਚੁਣਦਾ ਹਾਂ ਕਿਉਂਕਿ ਇਸ ਵਿੱਚ ਖਾਸ ਹੁਨਰਾਂ ਦੀ ਜ਼ਰੂਰਤ ਹੁੰਦੀ ਹੈ (ਹਾਲਾਂਕਿ ਇਹ ਜ਼ਰੂਰੀ ਨਹੀਂ ਕਿ ਰਸਮੀ ਸਿਖਲਾਈ ਹੋਵੇ) ਅਤੇ ਇਸ ਵਿੱਚ ਸਪਲਿਟ-ਅਰਜ਼ੀ-ਮਿਲਾਨ ਰਣਨੀਤੀ ਦੀ ਵਰਤੋਂ ਕਰਨ ਦੀ ਬਜਾਏ ਇਸਦਾ ਵਧੀਆ ਹੱਲ ਹੈ.
"ਸਪਲਿਟ-ਅਪਲਾਈ-ਜੁਲੀਏ" ਸ਼ਬਦ Wickham (2011) ਦੁਆਰਾ ਅੰਕੜਾ ਸੰਕਲਨ ਲਈ ਰਣਨੀਤੀ ਦਾ ਵਰਣਨ ਕਰਨ ਲਈ ਵਰਤਿਆ ਗਿਆ ਸੀ, ਪਰ ਇਹ ਪੂਰੀ ਤਰ੍ਹਾਂ ਨਾਲ ਬਹੁਤ ਸਾਰੇ ਮਨੁੱਖੀ ਗਣਨਾ ਪ੍ਰਾਜੈਕਟਾਂ ਦੀ ਪ੍ਰਕਿਰਿਆ ਨੂੰ ਹਾਸਲ ਕਰਦਾ ਹੈ. ਸਪਲਿਟ-ਅਪਲੀਕੇਸ਼ਨ-ਰਣਨੀਤੀ ਰਣਨੀਤੀ ਗੂਗਲ 'ਤੇ ਤਿਆਰ ਕੀਤੇ ਗਏ ਮੈਪਰੇਡਿਊਸ ਫਰੇਮਵਰਕ ਵਰਗੀ ਹੈ; ਮੈਪਰੀਡਿਊਸ ਬਾਰੇ ਹੋਰ ਜਾਣਕਾਰੀ ਲਈ Dean and Ghemawat (2004) ਅਤੇ Dean and Ghemawat (2008) . ਹੋਰ ਡਿਸਟ੍ਰੀਬਿਊਟਿਡ ਕੰਪਿਊਟਿੰਗ ਆਰਕੀਟੈਕਚਰਜ਼ ਲਈ, Vo and Silvia (2016) . Law and Ahn (2011) ਦੇ ਅਧਿਆਇ 3 ਵਿਚ ਇਸ ਅਧਿਆਇ ਵਿਚਲੇ ਪੇਜਾਂ ਦੇ ਨਾਲ ਗੁੰਝਲਦਾਰ ਪੜਾਵਾਂ ਵਾਲੇ ਪ੍ਰਾਜੈਕਟਾਂ ਦੀ ਚਰਚਾ ਹੈ.
ਮਨੁੱਖੀ ਗਣਨਾ ਪ੍ਰੋਜੈਕਟਾਂ ਵਿਚ ਜਿਨ੍ਹਾਂ ਨੇ ਅਧਿਆਇ ਵਿਚ ਚਰਚਾ ਕੀਤੀ ਹੈ, ਹਿੱਸਾ ਲੈਣ ਵਾਲਿਆਂ ਨੂੰ ਪਤਾ ਹੋਣਾ ਚਾਹੀਦਾ ਸੀ ਕਿ ਕੀ ਹੋ ਰਿਹਾ ਹੈ. ਕੁਝ ਹੋਰ ਪ੍ਰਾਜੈਕਟ, ਹਾਲਾਂਕਿ, "ਕੰਮ" ਨੂੰ ਹਾਸਲ ਕਰਨ ਦੀ ਕੋਸ਼ਿਸ਼ ਕਰਦੇ ਹਨ ਜੋ ਪਹਿਲਾਂ ਹੀ ਹੋ ਰਿਹਾ ਹੈ (ਈਬਰਡ ਵਾਂਗ) ਅਤੇ ਸਹਿਭਾਗੀ ਜਾਗਰੂਕਤਾ ਤੋਂ ਬਗੈਰ. ਉਦਾਹਰਨ ਲਈ, ਈਐਸਪੀ ਖੇਡ (Ahn and Dabbish 2004) ਅਤੇ (Ahn and Dabbish 2004) (Ahn et al. 2008) . ਹਾਲਾਂਕਿ, ਇਹ ਦੋਵੇਂ ਪ੍ਰੋਜੈਕਟ ਨੈਤਿਕ ਸਵਾਲ ਉਠਾਉਂਦੇ ਹਨ ਕਿਉਂਕਿ ਪਾਰਟੀਆਂ ਨੂੰ ਪਤਾ ਨਹੀਂ ਸੀ ਕਿ ਉਨ੍ਹਾਂ ਦਾ ਡੇਟਾ ਕਿਵੇਂ ਵਰਤਿਆ ਜਾ ਰਿਹਾ ਸੀ (Zittrain 2008; Lung 2012)
ਈਐਸਪੀ ਖੇਡ ਦੁਆਰਾ ਪ੍ਰੇਰਿਤ, ਬਹੁਤ ਸਾਰੇ ਖੋਜਕਰਤਾਵਾਂ ਨੇ "ਇੱਕ ਮਕਸਦ ਨਾਲ ਖੇਡਾਂ" (Ahn and Dabbish 2008) (ਅਰਥਾਤ, "ਮਨੁੱਖ ਆਧਾਰਿਤ ਕੰਪਿਊਟਿੰਗ ਗੇਮਜ਼" (Pe-Than, Goh, and Lee 2015) ਨੂੰ ਵਿਕਸਿਤ ਕਰਨ ਦੀ ਕੋਸ਼ਿਸ਼ ਕੀਤੀ ਹੈ. ਕਈ ਹੋਰ ਸਮੱਸਿਆਵਾਂ ਦੇ ਹੱਲ ਲਈ ਵਰਤਿਆ ਜਾਂਦਾ ਹੈ ਇਹ "ਇੱਕ ਮਕਸਦ ਨਾਲ ਖੇਡਾਂ" ਵਿੱਚ ਕੀ ਆਮ ਮਿਲਦਾ ਹੈ ਕਿ ਉਹ ਮਨੁੱਖੀ ਗਣਨਾ ਵਿੱਚ ਕੰਮ ਨੂੰ ਮਜ਼ੇਦਾਰ ਬਣਾਉਣ ਦੀ ਕੋਸ਼ਿਸ਼ ਕਰਦੇ ਹਨ. ਇਸ ਤਰ੍ਹਾਂ, ਜਦੋਂ ਈਐਸਪੀ ਗੇਮ ਗਲੈਕਸੀ ਚਿੜੀਆਘਰ ਦੇ ਨਾਲ ਇਕੋ ਸਪਲਿੱਟ-ਅਨੁਕੂਲ-ਵਿਧੀ ਦਾ ਸਾਂਝਾ ਹਿੱਸਾ ਲੈਂਦਾ ਹੈ, ਤਾਂ ਇਹ ਇਸ ਗੱਲ 'ਤੇ ਨਿਰਭਰ ਕਰਦਾ ਹੈ ਕਿ ਕਿਵੇਂ ਭਾਗ ਲੈਣ ਵਾਲਿਆਂ ਨੂੰ ਪ੍ਰੇਰਿਤ ਕੀਤਾ ਜਾਂਦਾ ਹੈ- ਮਜ਼ੇਦਾਰ ਬਨਾਮ ਵਿਗਿਆਨ ਦੀ ਮਦਦ ਕਰਨ ਦੀ ਇੱਛਾ. ਕਿਸੇ ਮਕਸਦ ਨਾਲ ਖੇਡਾਂ ਬਾਰੇ ਵਧੇਰੇ ਜਾਣਕਾਰੀ ਲੈਣ ਲਈ, Ahn and Dabbish (2008) .
ਗਲੈਕਸੀ ਚਿੜੀਘਰ ਦਾ ਮੇਰਾ ਵੇਰਵਾ Nielsen (2012) , Adams (2012) , Clery (2011) ਅਤੇ Hand (2010) 'ਤੇ ਖਿੱਚਿਆ ਗਿਆ ਹੈ, ਅਤੇ ਮੇਰੀ ਗਲੈਕਸੀ ਚਿੜੀਆਘਰ ਦੇ ਖੋਜ ਟੀਚਿਆਂ ਦੀ ਪੇਸ਼ਕਾਰੀ ਨੂੰ ਸਰਲ ਬਣਾਇਆ ਗਿਆ ਸੀ. ਖਗੋਲ-ਵਿਗਿਆਨ ਵਿਚ ਗਲੈਕਸੀ ਕਲਾਸੀਫਿਕੇਸ਼ਨ ਦੇ ਇਤਿਹਾਸ ਤੇ ਹੋਰ ਅਤੇ ਇਸ ਤੱਥ ਨੂੰ ਜਾਰੀ ਰੱਖਣ ਲਈ, ਸਚਿਨ ਨੇ ਕਿਸ ਤਰ੍ਹਾਂ ਇਸ ਪ੍ਰਣਾਲੀ ਨੂੰ ਜਾਰੀ ਰੱਖਿਆ ਹੈ, Masters (2012) ਅਤੇ Marshall, Lintott, and Fletcher (2015) . ਗਲੈਕਸੀ ਚਿੜੀਆਘਰ 'ਤੇ ਨਿਰਮਾਣ, ਖੋਜਕਰਤਾਵਾਂ ਨੇ ਗਲੈਕਸੀ ਚਿੜੀਆਘਰ 2 ਨੂੰ ਪੂਰਾ ਕੀਤਾ ਜਿਸ ਨੇ ਵਲੰਟੀਅਰਾਂ (Masters et al. 2011) ਤੋਂ 60 ਮਿਲੀਅਨ ਤੋਂ ਵੱਧ ਜਟਿਲ ਰੂਪ ਵਿਗਿਆਨਿਕ ਵਰਗੀਕਰਨ ਇਕੱਠੇ ਕੀਤੇ. ਇਸ ਤੋਂ ਇਲਾਵਾ, ਉਹ ਚੰਦਰਮਾ ਦੀ ਸਤ੍ਹਾ ਨੂੰ ਖੋਜਣ, ਗ੍ਰਹਿ ਦੀ ਖੋਜ ਕਰਨ ਅਤੇ ਪੁਰਾਣੇ ਦਸਤਾਵੇਜ਼ਾਂ ਨੂੰ ਟ੍ਰਾਂਸਫਰ ਕਰਨ ਸਮੇਤ, ਗਲੈਕਸੀ ਮੋਰਫੋਲਜੀ ਤੋਂ ਬਾਹਰ ਦੀਆਂ ਮੁਸ਼ਕਿਲਾਂ ਵਿਚ ਖੁੰਝ ਗਈਆਂ. ਵਰਤਮਾਨ ਵਿੱਚ, ਉਹਨਾਂ ਦੇ ਸਾਰੇ ਪ੍ਰਾਜੈਕਟ ਜ਼ੂਂਸਵਿਸ਼ ਵੈਬਸਾਈਟ (Cox et al. 2015) ਤੇ ਇਕੱਠੇ ਕੀਤੇ ਗਏ ਹਨ. ਪ੍ਰਾਜੈਕਟ ਦਾ ਇੱਕ- ਸਨੈਪਸ਼ਾਟ ਸੇਰੇਨਗੇਟੀ-ਸਬੂਤ ਮੁਹੱਈਆ ਕਰਦਾ ਹੈ ਕਿ ਗਲੋਬਲ ਚਿੜੀਆਘਰ-ਕਿਸਮ ਦੇ ਚਿੱਤਰ ਨੂੰ ਵਰਗੀਕਰਨ ਪ੍ਰੋਜੈਕਟ ਨੂੰ ਵਾਤਾਵਰਨ ਖੋਜ ਲਈ ਵੀ ਕੀਤਾ ਜਾ ਸਕਦਾ ਹੈ (Swanson et al. 2016) .
ਮਨੁੱਖੀ ਗਣਨਾ ਪ੍ਰੋਜੈਕਟ, Chandler, Paolacci, and Mueller (2013) ਅਤੇ J. Wang, Ipeirotis, and Provost (2015) ਲਈ ਇਕ ਮਾਈਕ੍ਰੋਟੌਕ ਲੇਬਰ ਮਾਰਕੀਟ (ਐਮਾਜ਼ਾਨ ਮਕੈਨੀਕਲ ਟੁਕਰਾ) ਦੀ ਵਰਤੋਂ ਕਰਨ ਦੀ ਯੋਜਨਾ ਬਣਾ ਰਹੇ ਹਨ J. Wang, Ipeirotis, and Provost (2015) ਹੋਰ ਸਬੰਧਤ ਮੁੱਦਿਆਂ Porter, Verdery, and Gaddis (2016) ਮਾਈਕਰੋਟੌਕ ਲੇਬਰ ਮਾਰਕੀਟਾਂ ਦੀ ਵਰਤੋਂ 'ਤੇ ਖਾਸ ਤੌਰ' ਤੇ ਧਿਆਨ ਕੇਂਦ੍ਰਤ ਕਰਦੇ ਹਨ ਅਤੇ ਉਹ ਸਲਾਹ ਦਿੰਦੇ ਹਨ ਜੋ ਉਨ੍ਹਾਂ ਨੂੰ "ਡਾਟਾ ਵਧਾਉਣ" ਕਹਿੰਦੇ ਹਨ. ਡਾਟਾ ਵਧਾਉਣ ਅਤੇ ਡਾਟਾ ਇਕੱਤਰ ਕਰਨ ਦੇ ਵਿਚਕਾਰ ਦੀ ਰੇਟ ਕੁਝ ਹੱਦ ਤੱਕ ਧੁੰਦਲਾ ਹੈ. ਪਾਠ ਲਈ ਨਿਰੀਖਣ ਕੀਤੇ ਗਏ ਸਿੱਖਿਆ ਲਈ ਲੇਬਲ ਇਕੱਠੇ ਕਰਨ ਅਤੇ ਵਰਤਣ ਦੇ ਬਾਰੇ ਵਿੱਚ, Grimmer and Stewart (2013) .
ਖੋਜਕਰਤਾਵਾਂ ਨੂੰ ਜੋ ਮੈਂ ਕੰਪਿਊਟਰ ਸਹਾਇਤਾ ਪ੍ਰਾਪਤ ਮਨੁੱਖੀ ਗਣਨਾ ਪ੍ਰਣਾਲੀਆਂ (ਉਦਾਹਰਣ ਲਈ, ਸਿਸਟਮ ਜੋ ਮਸ਼ੀਨ ਸਿਖਲਾਈ ਮਾਡਲ ਨੂੰ ਸਿਖਲਾਈ ਦੇਣ ਲਈ ਮਨੁੱਖੀ ਲੇਬਲਾਂ ਦੀ ਵਰਤੋਂ ਕਰਦੇ ਹਨ) ਨੂੰ ਕਿਹਾ ਹੈ, ਬਣਾਉਣ ਵਿੱਚ ਦਿਲਚਸਪੀ ਰੱਖਦੇ ਹਨ, Shamir et al. (2014) ਵਿੱਚ ਦਿਲਚਸਪੀ ਹੋ ਸਕਦੀ ਹੈ Shamir et al. (2014) (ਆਡੀਓ ਦੀ ਵਰਤੋਂ ਕਰਦੇ ਹੋਏ ਇੱਕ ਉਦਾਹਰਣ ਲਈ) ਅਤੇ Cheng and Bernstein (2015) . ਇਸ ਤੋਂ ਇਲਾਵਾ, ਇਹਨਾਂ ਪ੍ਰੋਜੈਕਟਾਂ ਵਿੱਚ ਮਸ਼ੀਨ ਸਿੱਖਣ ਦੇ ਮਾਡਲ ਖੁੱਲ੍ਹੇ ਕਾਲਾਂ ਦੀ ਬੇਨਤੀ ਕਰ ਸਕਦੇ ਹਨ, ਜਿਸ ਨਾਲ ਖੋਜਕਰਤਾ ਮਸ਼ੀਨ ਸਿਖਲਾਈ ਮਾਡਲ ਬਣਾਉਣ ਲਈ ਮੁਕਾਬਲਾ ਕਰ ਸਕਦੇ ਹਨ. ਉਦਾਹਰਣ ਵਜੋਂ, ਗਲੈਕਸੀ ਚਿੜੀਆਘਰ ਟੀਮ ਨੇ ਇਕ ਖੁੱਲ੍ਹੀ ਕਾਲ ਕੀਤੀ ਅਤੇ ਇਕ ਨਵੀਂ ਪਹੁੰਚ ਲੱਭੀ ਜਿਸ ਨੇ Banerji et al. (2010) ; ਵੇਰਵੇ ਲਈ Dieleman, Willett, and Dambre (2015) ਦੇਖੋ.
ਓਪਨ ਕਾਲਾਂ ਨਵੀਆਂ ਨਹੀਂ ਹਨ ਦਰਅਸਲ, ਸਭ ਤੋਂ ਵੱਧ ਪ੍ਰਸਿੱਧ ਖੁੱਲ੍ਹੀਆਂ ਕਾਲਾਂ ਵਿਚੋਂ ਇਕ 1714 ਦੀ ਤਾਰੀਖ ਹੈ ਜਦੋਂ ਬ੍ਰਿਟੇਨ ਦੀ ਸੰਸਦ ਨੇ ਕਿਸੇ ਵੀ ਵਿਅਕਤੀ ਲਈ ਲੰਬਵਤ ਪੁਰਸਕਾਰ ਦੀ ਸਿਰਜਣਾ ਕੀਤੀ ਜੋ ਸਮੁੰਦਰੀ ਜਹਾਜ਼ ਦੇ ਲੰਬਕਾਰਾਤਮਕਤਾ ਨੂੰ ਨਿਰਧਾਰਤ ਕਰਨ ਦਾ ਰਾਹ ਬਣਾ ਸਕਦੀ ਹੈ. ਇਸ ਸਮੱਸਿਆ ਨੇ ਆਈਜ਼ਕ ਨਿਊਟਨ ਸਮੇਤ ਬਹੁਤ ਸਾਰੇ ਮਹਾਨ ਵਿਗਿਆਨੀਆਂ ਨੂੰ ਠੰਢਾ ਕੀਤਾ ਅਤੇ ਆਖਰਕਾਰ ਜੇਮਿੰਗ ਹੱਲ ਅਖੀਰ ਪੇਸ਼ ਕੀਤਾ ਗਿਆ, ਜੋ ਕਿ ਦਿਹਾਤੀ ਦੇ ਘਰੇਲੂ ਆਗੂ ਜੋਹਨ ਦੀ ਮਦਦ ਨਾਲ ਪੇਸ਼ ਕੀਤੀ ਗਈ ਇੱਕ ਸਮੱਸਿਆ ਦਾ ਹੱਲ ਹੈ, ਜੋ ਕਿ ਅਜਿਹੇ ਮਾਹੌਲ ਤੋਂ ਵੱਖਰੇ ਤਰੀਕੇ ਨਾਲ ਆਏ ਸਨ, ; ਹੋਰ ਜਾਣਕਾਰੀ ਲਈ, Sobel (1996) ਦੇਖੋ. ਜਿਵੇਂ ਕਿ ਇਹ ਉਦਾਹਰਨ ਦਰਸਾਉਂਦਾ ਹੈ, ਇਕ ਕਾਰਨ ਇਹ ਹੈ ਕਿ ਖੁੱਲ੍ਹਾ ਕਾਲਾਂ ਇੰਨੀ ਚੰਗੀ ਤਰ੍ਹਾਂ ਕੰਮ ਕਰਦੀਆਂ ਹਨ ਕਿ ਉਹ ਵੱਖੋ ਵੱਖਰੇ ਦ੍ਰਿਸ਼ਟੀਕੋਣ ਅਤੇ ਹੁਨਰਾਂ ਵਾਲੇ ਲੋਕਾਂ ਤਕ ਪਹੁੰਚ ਮੁਹੱਈਆ ਕਰਦੀਆਂ ਹਨ (Boudreau and Lakhani 2013) . ਸਮੱਸਿਆ ਨੂੰ ਹੱਲ ਕਰਨ ਵਿਚ ਵਿਭਿੰਨਤਾ ਦੇ ਮੁੱਲ ਬਾਰੇ ਵਧੇਰੇ ਜਾਣਕਾਰੀ ਲਈ Hong and Page (2004) ਅਤੇ Page (2008) ਦੇਖੋ.
ਅਧਿਆਇ ਵਿੱਚ ਹਰ ਇੱਕ ਖੁੱਲੀ ਕਾਲ ਦੇ ਮਾਮਲਿਆਂ ਵਿੱਚ ਇਸ ਸ਼੍ਰੇਣੀ ਵਿੱਚ ਇਹ ਕਿਉਂ ਲਿਖਿਆ ਗਿਆ ਹੈ ਇਸਦਾ ਹੋਰ ਸਪੱਸ਼ਟੀਕਰਨ ਦੀ ਲੋੜ ਹੈ ਸਭ ਤੋਂ ਪਹਿਲਾਂ, ਮੈਂ ਮਨੁੱਖੀ ਕੰਪਿਊਟੈਂਟ ਅਤੇ ਓਪਨ ਕਾਲ ਪ੍ਰੋਜੈਕਟਾਂ ਦੇ ਵਿਚਕਾਰ ਇੱਕ ਅੰਤਰਰਾਜਤ ਤਰੀਕਾ ਹੈ ਕਿ ਕੀ ਆਉਟਪੁੱਟ ਸਾਰੇ ਹੱਲ (ਮਨੁੱਖੀ ਗਣਨਾ) ਜਾਂ ਵਧੀਆ ਹੱਲ (ਔਫ ਕਾਲ) ਦੀ ਔਸਤ ਹੈ. ਇਸ ਸਬੰਧ ਵਿੱਚ ਨੈੱਟਫਿਲਸ ਇਨਾਮ ਕੁਝ ਹੱਦ ਤੱਕ ਔਖਾ ਹੈ ਕਿਉਂਕਿ ਵਧੀਆ ਹੱਲ ਵੱਖਰੇ ਵੱਖਰੇ ਹੱਲਾਂ ਦਾ ਇੱਕ ਵਧੀਆ ਔਸਤ ਸਾਬਤ ਹੋਇਆ ਹੈ, ਜੋ ਕਿ ਇੱਕ ਅੰਦਾਜ਼ ਹੱਲ (Bell, Koren, and Volinsky 2010; Feuerverger, He, and Khatri 2012) ਇੱਕ ਤਰੀਕਾ ਹੈ. Netflix ਦੇ ਨਜ਼ਰੀਏ ਤੋਂ, ਹਾਲਾਂਕਿ, ਉਹਨਾਂ ਨੂੰ ਕਰਨਾ ਸਭ ਤੋਂ ਵਧੀਆ ਹੱਲ ਸੀ. ਨੈੱਟਫਿਲਕਸ ਇਨਾਮ ਲਈ ਹੋਰ ਵੇਖੋ, Bennett and Lanning (2007) , Thompson (2008) , Bell, Koren, and Volinsky (2010) , ਅਤੇ Feuerverger, He, and Khatri (2012) .
ਦੂਜਾ, ਮਨੁੱਖੀ ਗਣਨਾ ਦੀਆਂ ਕੁਝ ਪਰਿਭਾਸ਼ਾਵਾਂ (ਉਦਾਹਰਣ ਵਜੋਂ, Ahn (2005) ), ਫੋਲਟ ਨੂੰ ਮਨੁੱਖੀ ਗਣਨਾ ਪ੍ਰੋਜੈਕਟ ਸਮਝਿਆ ਜਾਣਾ ਚਾਹੀਦਾ ਹੈ. ਹਾਲਾਂਕਿ, ਮੈਂ ਇਸ ਨੂੰ ਇੱਕ ਖੁੱਲੇ ਕਾਲ ਦੇ ਤੌਰ ਤੇ ਸ਼੍ਰੇਣੀਬੱਧ ਕਰਨ ਲਈ ਚੁਣਦਾ ਹਾਂ ਕਿਉਂਕਿ ਇਸ ਨੂੰ ਵਿਸ਼ੇਸ਼ ਹੁਨਰ ਦੀ ਜ਼ਰੂਰਤ ਹੈ (ਹਾਲਾਂਕਿ ਇਹ ਵਿਸ਼ੇਸ਼ ਤੌਰ ਤੇ ਵਿਸ਼ੇਸ਼ ਸਿਖਲਾਈ ਨਹੀਂ ਹੈ) ਅਤੇ ਇਹ ਸਪਲਿਟ-ਅਰਜ਼ੀ-ਮਿਲਾਨ ਰਣਨੀਤੀ ਦੀ ਵਰਤੋਂ ਕਰਨ ਦੀ ਬਜਾਏ ਸਭ ਤੋਂ ਵਧੀਆ ਹੱਲ ਹੈ. ਫੋਲਟ ਉੱਤੇ ਵਧੇਰੇ ਜਾਣਕਾਰੀ ਲਈ, Cooper et al. (2010) , Khatib et al. (2011) , ਅਤੇ Andersen et al. (2012) ; ਬੋਤਲਨ Bohannon (2009) , Hand (2010) , ਅਤੇ Nielsen (2012) ਵਿਵਰਣ ਦੇ ਵੇਰਵੇ ਖਿੱਚਣ ਦਾ ਮੇਰਾ ਵੇਰਵਾ.
ਅੰਤ ਵਿੱਚ, ਇੱਕ ਇਹ ਦਲੀਲ ਦੇ ਸਕਦਾ ਹੈ ਕਿ ਪੀਅਰ-ਟੂ-ਪੇਟੈਂਟ ਵਿਤਰਿਤ ਡਾਟਾ ਇਕੱਤਰ ਕਰਨ ਦਾ ਇੱਕ ਉਦਾਹਰਣ ਹੈ. ਮੈਂ ਇਸਨੂੰ ਇਕ ਖੁੱਲ੍ਹੀ ਕਾਲ ਦੇ ਤੌਰ ਤੇ ਸ਼ਾਮਲ ਕਰਨਾ ਚੁਣਦਾ ਹਾਂ ਕਿਉਂਕਿ ਇਸ ਕੋਲ ਮੁਕਾਬਲੇ ਵਰਗੀ ਢਾਂਚੇ ਹੈ ਅਤੇ ਕੇਵਲ ਵਧੀਆ ਯੋਗਦਾਨਾਂ ਦੀ ਵਰਤੋਂ ਕੀਤੀ ਜਾਂਦੀ ਹੈ, ਜਦੋਂ ਕਿ ਵੰਡੀ ਡਾਟਾ ਇਕੱਤਰ ਕਰਨ ਨਾਲ, ਚੰਗੇ ਅਤੇ ਬੁਰੇ ਯੋਗਦਾਨਾਂ ਦਾ ਵਿਚਾਰ ਘੱਟ ਸਪੱਸ਼ਟ ਹੁੰਦਾ ਹੈ. ਪੀਅਰ-ਟੂ-ਪੇਟੈਂਟ ਬਾਰੇ ਹੋਰ ਜਾਣਕਾਰੀ ਲਈ, Noveck (2006) , Ledford (2007) , Noveck (2009) , ਅਤੇ Bestor and Hamp (2010) .
ਸੋਸ਼ਲ ਰਿਸਰਚ ਵਿਚ ਖੁੱਲੇ ਕਾਲਾਂ ਦੀ ਵਰਤੋਂ ਕਰਨ ਦੇ ਨਤੀਜੇ ਵਜੋਂ, Glaeser et al. (2016) ਦੀ ਤਰਜ਼ 'ਤੇ ਨਤੀਜਾ Glaeser et al. (2016) , ਦੀ ਰਿਪੋਰਟ Mayer-Schönberger and Cukier (2013) ਦੇ ਅਧਿਆਇ 10 ਵਿਚ ਦੱਸੀ ਗਈ ਹੈ ਜਿਸ ਵਿਚ ਨਿਊਯਾਰਕ ਸਿਟੀ ਆਵਾਸ ਨਿਰੀਖਕਾਂ ਦੀ ਉਤਪਾਦਕਤਾ ਵਿਚ ਵੱਡਾ ਲਾਭ ਪੈਦਾ ਕਰਨ ਲਈ ਭਵਿੱਖਬਾਣੀ ਮਾਡਲਿੰਗ ਦੀ ਵਰਤੋਂ ਕਰਨ ਦੇ ਯੋਗ ਸੀ. ਨਿਊਯਾਰਕ ਸਿਟੀ ਵਿੱਚ, ਇਹ ਭਵਿੱਖਬਾਣੀ ਮਾਡਲ ਸ਼ਹਿਰ ਦੇ ਕਰਮਚਾਰੀਆਂ ਦੁਆਰਾ ਬਣਾਏ ਗਏ ਸਨ, ਪਰ ਦੂਜੇ ਮਾਮਲਿਆਂ ਵਿੱਚ, ਉਹ ਕਲਪਨਾ ਕਰ ਸਕਦੇ ਸਨ ਕਿ ਉਹ ਖੁੱਲ੍ਹੇ ਕਾਲਾਂ (ਉਦਾਹਰਨ ਲਈ Glaeser et al. (2016) ) ਨਾਲ ਬਣਾਏ ਜਾ ਸਕਦੇ ਹਨ ਜਾਂ ਸੁਧਾਰ ਕੀਤੇ ਜਾ ਸਕਦੇ ਹਨ. ਹਾਲਾਂਕਿ, ਸਰੋਤਾਂ ਨੂੰ ਵੰਡਣ ਲਈ ਪ੍ਰਭਾਵੀ ਮਾੱਡਲਾਂ ਦੀ ਵਰਤੋਂ ਨਾਲ ਇਕ ਮੁੱਖ ਚਿੰਤਾ ਇਹ ਹੈ ਕਿ ਇਹਨਾਂ ਮਾਡਲਾਂ ਵਿੱਚ ਮੌਜੂਦਾ ਪੱਖਪਾਤ ਨੂੰ ਹੋਰ ਮਜ਼ਬੂਤ ਕਰਨ ਦੀ ਸਮਰੱਥਾ ਹੈ. ਬਹੁਤ ਸਾਰੇ ਖੋਜਕਰਤਾਵਾਂ ਨੂੰ ਪਹਿਲਾਂ ਹੀ "ਕੂੜਾ-ਕਰਕਟ, ਕੂੜਾ-ਕਰਕਟ", ਅਤੇ ਪੂਰਵ ਸੂਚਕ ਮਾੱਡਲਾਂ ਨਾਲ ਜਾਣਿਆ ਜਾਂਦਾ ਹੈ ਕਿ ਇਹ "ਪੱਖਪਾਤ ਵਿੱਚ, ਪੱਖਪਾਤ ਵਿੱਚ ਹੋ ਸਕਦਾ ਹੈ." Barocas and Selbst (2016) ਅਤੇ O'Neil (2016) ਨੂੰ ਭਵਿੱਖਬਾਣੀ ਮਾਡਲ ਦੇ ਖ਼ਤਰਿਆਂ ਬਾਰੇ ਵਧੇਰੇ ਜਾਣਕਾਰੀ ਲਈ. ਪੱਖਪਾਤੀ ਸਿਖਲਾਈ ਡੇਟਾ
ਇੱਕ ਸਮੱਸਿਆ ਜੋ ਸਰਕਾਰਾਂ ਨੂੰ ਖੁੱਲ੍ਹੇ ਮੁਕਾਬਲੇ ਦੀ ਵਰਤੋਂ ਕਰਨ ਤੋਂ ਰੋਕ ਸਕਦੀ ਹੈ, ਇਸ ਲਈ ਇਹ ਡਾਟਾ ਰੀਲਿਜ਼ ਦੀ ਜ਼ਰੂਰਤ ਹੈ, ਜਿਸ ਨਾਲ ਗੋਪਨੀਯਤਾ ਉਲੰਘਣਾ ਹੋ ਸਕਦੀ ਹੈ. ਗੋਪਨੀਯਤਾ ਅਤੇ ਖੁੱਲੇ ਕਾਲਾਂ ਵਿੱਚ ਡਾਟਾ ਰੀਲੀਜ਼ ਦੇ ਬਾਰੇ ਵਧੇਰੇ ਜਾਣਕਾਰੀ ਲਈ, Narayanan, Huey, and Felten (2016) ਅਤੇ ਅਧਿਆਇ 6 ਵਿੱਚ ਚਰਚਾ ਦੇਖੋ.
ਪੂਰਵ-ਅਨੁਮਾਨ ਅਤੇ ਸਪਸ਼ਟੀਕਰਨ ਦੇ ਵਿਚਕਾਰ ਫਰਕ ਅਤੇ ਸਮਾਨਤਾ ਬਾਰੇ ਵਧੇਰੇ ਜਾਣਕਾਰੀ ਲਈ, Breiman (2001) , Shmueli (2010) , Watts (2014) ਅਤੇ Kleinberg et al. (2015) ਸੋਸ਼ਲ ਰਿਸਰਚ ਵਿਚ ਪੂਰਵ ਅਨੁਮਾਨ ਦੀ ਭੂਮਿਕਾ ਬਾਰੇ ਹੋਰ ਜਾਣਕਾਰੀ ਲੈਣ ਲਈ Athey (2017) , Cederman and Weidmann (2017) , Hofman, Sharma, and Watts (2017) , ( ??? ) , ਅਤੇ Yarkoni and Westfall (2017) .
ਬਾਇਓਲੋਜੀ ਵਿੱਚ ਖੁੱਲੇ ਕਾਲ ਪ੍ਰੋਜੈਕਟਾਂ ਦੀ ਸਮੀਖਿਆ ਲਈ, ਡਿਜ਼ਾਈਨ ਸਲਾਹ ਸਮੇਤ, ਦੇਖੋ Saez-Rodriguez et al. (2016)
ਈਬਰਡਡ ਦਾ ਮੇਰਾ ਵੇਰਵਾ Bhattacharjee (2005) , Robbins (2013) ਅਤੇ Sullivan et al. (2014) . ਖੋਜਕਰਤਾਵਾਂ ਨੂੰ ਈਬਰਡ ਡੇਟਾ ਦਾ ਵਿਸ਼ਲੇਸ਼ਣ ਕਰਨ ਲਈ ਅੰਕੜਾ ਮਾਡਲ ਦੀ ਵਰਤੋਂ ਕਰਨ ਬਾਰੇ ਹੋਰ ਜਾਣਕਾਰੀ ਲਈ Fink et al. (2010) ਅਤੇ Hurlbert and Liang (2012) . ਈਬਰਡ ਦੇ ਭਾਗੀਦਾਰਾਂ ਦੇ ਹੁਨਰ ਦਾ ਅੰਦਾਜ਼ਾ ਲਗਾਉਣ ਲਈ, Kelling, Johnston, et al. (2015) ਕੁਦਰਤੀ ਵਿਗਿਆਨ ਵਿਚ ਨਾਗਰਿਕ ਵਿਗਿਆਨ ਦੇ ਇਤਿਹਾਸ ਬਾਰੇ ਹੋਰ ਜਾਣਨ ਲਈ, Greenwood (2007) ਦੇਖੋ.
ਮਲਾਵੀ ਜਰਨਲਜ਼ ਪ੍ਰੋਜੈਕਟ ਬਾਰੇ ਹੋਰ ਜਾਣਕਾਰੀ ਲਈ, Watkins and Swidler (2009) ਅਤੇ Kaler, Watkins, and Angotti (2015) . ਦੱਖਣੀ ਅਫ਼ਰੀਕਾ ਵਿੱਚ ਕਿਸੇ ਸਬੰਧਤ ਪ੍ਰਾਜੈਕਟ 'ਤੇ ਹੋਰ ਜਾਣਕਾਰੀ ਲਈ, Angotti and Sennott (2015) . ਮਲਾਵੀ ਜਰਨਲਜ਼ ਪ੍ਰਾਜੈਕਟ ਦੇ ਅੰਕੜੇ ਦੀ ਵਰਤੋਂ ਕਰਕੇ ਖੋਜ ਦੇ ਹੋਰ ਉਦਾਹਰਣਾਂ ਲਈ Kaler (2004) ਅਤੇ Angotti et al. (2014) .
ਡਿਜ਼ਾਇਨ ਦੀ ਸਲਾਹ ਪੇਸ਼ ਕਰਨ ਲਈ ਮੇਰਾ ਵਿਚਾਰ ਪ੍ਰਗਤੀਸ਼ੀਲ ਰਿਹਾ, ਮੈਂ ਸਫਲ ਅਤੇ ਅਸਫਲ ਜਨਤਕ ਸਹਿਯੋਗ ਪ੍ਰਾਜੈਕਟਾਂ ਦੇ ਉਦਾਹਰਣਾਂ ਦੇ ਅਧਾਰ ਤੇ ਜੋ ਮੈਂ ਇਸ ਬਾਰੇ ਸੁਣਿਆ ਹੈ. ਜਨਤਕ ਸਹਿਯੋਗ ਪ੍ਰਾਜੈਕਟਾਂ ਦੇ ਡਿਜ਼ਾਇਨ ਨਾਲ ਸੰਬੰਧਿਤ ਔਨਲਾਈਨ ਸਮੂਹਾ ਨੂੰ ਡਿਜ਼ਾਇਨ ਕਰਨ ਲਈ ਹੋਰ ਸਧਾਰਨ ਸਮਾਜਿਕ ਮਨੋਵਿਗਿਆਨਿਕ ਥਿਊਰੀਆਂ ਲਾਗੂ ਕਰਨ ਲਈ ਖੋਜ ਦੇ ਯਤਨਾਂ ਦੀ ਵੀ ਇੱਕ Kraut et al. (2012) , ਉਦਾਹਰਨ ਲਈ, Kraut et al. (2012) .
ਪ੍ਰੇਰਿਤ ਕਰਨ ਵਾਲੇ ਭਾਗੀਦਾਰਾਂ ਬਾਰੇ, ਅਸਲ ਵਿੱਚ ਇਹ ਪਤਾ ਲਗਾਉਣ ਵਿੱਚ ਬਹੁਤ ਮੁਸ਼ਕਲ ਹੈ ਕਿ ਲੋਕ ਜਨ-ਸਹਿਯੋਗ ਪ੍ਰਾਜੈਕਟਾਂ ਵਿੱਚ ਹਿੱਸਾ ਕਿਉਂ ਲੈਂਦੇ ਹਨ (Cooper et al. 2010; Nov, Arazy, and Anderson 2011; Tuite et al. 2011; Raddick et al. 2013; Preist, Massung, and Coyle 2014) ਜੇ ਤੁਸੀਂ ਹਿੱਸਾ ਲੈਣ ਵਾਲਿਆਂ ਨੂੰ ਮਾਈਕ੍ਰੋਟੌਕ ਲੇਬਰ ਮਾਰਕੀਟ (ਜਿਵੇਂ ਕਿ ਐਮਾਜ਼ੋਨ ਮਕੈਨੀਕਲ ਟੁਕਰਾ), Kittur et al. (2013) ਤੇ ਭੁਗਤਾਨ ਕਰਨ ਲਈ ਪ੍ਰੇਰਿਤ ਕਰਨ ਦੀ ਯੋਜਨਾ ਬਣਾ ਰਹੇ ਹੋ Kittur et al. (2013) ਕੁਝ ਸਲਾਹ ਦਿੰਦੀ ਹੈ
ਹੈਰਾਨ ਕਰਨ ਯੋਗ ਹੋਣ ਦੇ ਬਾਰੇ ਵਿੱਚ, Zooiverse ਪ੍ਰਾਜੈਕਟਾਂ ਤੋਂ ਆਉਣ ਵਾਲੀਆਂ ਅਚਾਨਕ ਖੋਜਾਂ ਦੇ ਹੋਰ ਉਦਾਹਰਣਾਂ ਲਈ, Marshall, Lintott, and Fletcher (2015) .
ਨੈਤਿਕ ਹੋਣ ਸੰਬੰਧੀ, Gilbert (2015) , Salehi et al. (2015) , Schmidt (2013) , Williamson (2016) , Resnik, Elliott, and Miller (2015) , ਅਤੇ Zittrain (2008) . ਭੀੜ ਦੇ ਕਰਮਚਾਰੀਆਂ ਨਾਲ ਵਿਸ਼ੇਸ਼ ਤੌਰ 'ਤੇ ਸੰਬੰਧਿਤ ਮੁੱਦਿਆਂ ਦੇ ਮੁੱਦਿਆਂ ਲਈ, Felstiner (2011) ਦੇਖੋ. O'Connor (2013) ਖੋਜ ਦੇ ਨੈਤਿਕ ਨਿਗਰਾਨੀ ਬਾਰੇ ਸਵਾਲ ਪੁਛਦਾ ਹੈ ਜਦੋਂ ਖੋਜਕਰਤਾਵਾਂ ਅਤੇ ਭਾਗੀਦਾਰਾਂ ਦੀ ਭੂਮਿਕਾ ਧੁੰਦਲੀ ਹੋਵੇ ਨਾਗਰਿਕ ਵਿਗਿਆਨ ਪ੍ਰਾਜੈਕਟਾਂ ਵਿਚ ਹਿੱਸਾ ਲੈਣ ਵਾਲਿਆਂ ਦੀ ਰਾਖੀ ਕਰਨ ਵੇਲੇ ਸ਼ੇਅਰਿੰਗ ਡੇਟਾ ਨਾਲ ਸਬੰਧਤ ਮੁੱਦਿਆਂ ਲਈ, Bowser et al. (2014) ਵੇਖੋ Bowser et al. (2014) . Purdam (2014) ਅਤੇ Windt and Humphreys (2016) ਦੋਵਾਂ ਨੇ ਵੰਡੀ ਡੈਟਾ ਇਕੱਤਰਤਾ ਵਿਚ ਨੈਤਿਕ ਵਿਸ਼ਿਆਂ ਬਾਰੇ ਚਰਚਾ ਕੀਤੀ ਹੈ. ਅੰਤ ਵਿੱਚ, ਜ਼ਿਆਦਾਤਰ ਪ੍ਰੋਜੈਕਟ ਯੋਗਦਾਨਾਂ ਨੂੰ ਸਵੀਕਾਰ ਕਰਦੇ ਹਨ ਪਰ ਹਿੱਸਾ ਲੈਣ ਵਾਲਿਆਂ ਨੂੰ ਲੇਖਕ ਦੀ ਕ੍ਰੇਡਿਟ ਨਹੀਂ ਦਿੰਦੇ ਹਨ. ਫੋਲਟ ਵਿੱਚ, ਖਿਡਾਰੀਆਂ ਨੂੰ ਅਕਸਰ ਇੱਕ ਲੇਖਕ ਦੇ ਰੂਪ ਵਿੱਚ ਸੂਚੀਬੱਧ ਕੀਤਾ ਜਾਂਦਾ ਹੈ (Cooper et al. 2010; Khatib et al. 2011) . ਹੋਰ ਖੁੱਲੇ ਕਾਲ ਪ੍ਰੋਜੈਕਟਾਂ ਵਿੱਚ, ਜੇਤੂ ਯੋਗਦਾਨਕ ਅਕਸਰ ਉਹਨਾਂ ਦੇ ਹੱਲਾਂ ਦਾ ਵਰਣਨ ਕਰਨ ਲਈ ਇੱਕ ਕਾਗਜ਼ ਲਿਖ ਸਕਦਾ ਹੈ (ਜਿਵੇਂ, Bell, Koren, and Volinsky (2010) ਅਤੇ Dieleman, Willett, and Dambre (2015) ).