Na vota ca vo avete mutivatu un saccu di genti à travaglià nant'à un prublema sicuru à prupiziu, vi pudarà scopre à chì u vostru participanti sarà hétérogène in dui modi mpurtanti: ch'elli ti fatzu cambiat a so mistieru, è ch'elli ti fatzu cambiat a so livellu di sforzu. A prima riazzioni di parechji circadori suciali è à spazzà i participanti bassa qualità è poi puru à fà sorte una quantità fissu di nfurmazzioni da tutti lassaru. Chistu è lu modu sbagghiatu à cuncepisce un prugettu cullaburazioni di massa.
Prima, ùn ci hè nudda raggiuni di spazzà bassu i participanti abili. In chiama aperta, bassu i participanti abili causari senza prublemi; i so cuntributi nun fari mali a nuddu e iddi nun hannu bisognu ogni volta à evaluate. In càlculu umani è prugetti cullezzione di dati distribuitu, nantu à u cuntrariu, lu megghiu forma di cuntrollu di a qualità vene à traversu redundancy, micca un altu barra di participazzioni. In fatti, chiu tostu, lassannu fora i participanti suttana mistieru, un accostu megliu è à aiutà li à fà megliu cuntributi, tantu cum'è i circadori à eBird aghju fatta.
Siconda, ùn ci hè nunda chì fà sorte un numeru fissu di nfurmazzioni da ogni participant. Participazione à parechji prugetti cullaburazioni di massa hè un travagliu unequal (Sauermann and Franzoni 2015) cù un picculu numaru di ghjente cuntribbuiu assai-volte chjamatu u capu di grassu -and un saccu di genti cuntribuiscia à a picca-spissu discritta comu l 'longa cuda. S'è vo ùn sorte nantu à u corsu da u capu di grassu è u longa cuda, vi sò sumena tunnillati di nfurmazzioni uncollected. Per esempiu, s'ellu Wikipedia accettatu u 10 è sulu 10 Ammuscia sulu pi sgiò Orsuvè, ùn si perde circa lu 95% di Ammuscia sulu (Salganik and Levy 2015) . Cusì, cù prugetti cullaburazioni di massa, hè megliu à leverage heterogeneity chiuttostu ca arrinesci a eliminari lu.