Оролцогчдын ажилд авах, эмчилгээний санамсаргүй байдалтай, эмчилгээний хүргэх, мөн үр дүнг хэмжих: санамсаргүй хяналттай туршилт дөрвөн гол найрлага юм.
Санамсаргүй хяналттай туршилт нь олон хэлбэртэй байж болох ба зан үйлийн олон төрлийн судлах ашиглаж болно. оролцогчдын ажилд авах, эмчилгээний санамсаргүй байдалтай, эмчилгээний хүргэх, мөн үр дүнг хэмжих Харин тэдний гол дээр санамсаргүй хяналттай туршилт дөрвөн гол найрлага юм. дижитал нас туршилтын үндсэн мөн чанарыг өөрчлөх биш, харин энэ нь тэднийг илүү хялбар тээвэр ложистикийн хийх вэ. Жишээ нь, өнгөрсөн онд сая хүн зан хэмжихэд хэцүү байж болох байсан, гэхдээ одоо тогтмол олон тоон системд болж байна. Эдгээр шинэ боломжуудыг хэрхэн бэхэлгээний нь олохын болно Судлаачид урьд өмнө боломжгүй байсан туршилт ажиллуулах боломжтой байх болно.
Энэ бүх арай илүү бетон аль аль нь адил үлдсэн юм юу болох, ямар өөрчлөгдсөн-болтугай-ын Майкл Restivo болон Arnout ван де Rijt-ын хэлэлцэх болгохын тулд (2012) . Судлаачид Википедиа нь редакцийн оруулсан хувь нэмэр дээр албан бус үе тэнгийн урамшууллын нөлөө ойлгохыг хүссэн. Тухайлбал, тэд ямар ч Wikipedian хэцүү ажил, магадлан шинжилгээ хүлээн зөвшөөрөхөөс өөр бусад Wikipedian өгч болох шагнал, barnstars нөлөөг судалсан. Restivo болон ван де Rijt 100 зүй ёсны Wikipedians нь barnstars өгчээ. Дараа нь, Restivo болон ван де Rijt дараагийн 90 хоногийн турш Википедиа нь хүлээн авагч нь "дараагийн хувь нэмэр хянадаггүй. Тэдний гайхсан их тэд barnstars хүртсэн хэн хүн нэгийг нь хүлээн авснаас хойш цөөн тооны засваруудыг хийх хандлагатай. Өөрөөр хэлбэл, barnstars хувь нэмэр дэмжих гэхээсээ илүү урам зоригийг мохооход байх шиг санагдав.
Аз болоход, Restivo болон ван де Rijt нь "өөрчлөлт ордог ба ажиглалт" туршилт ажиллаж байгаа нь үгүй; Тэд санамсаргүй хяналттай туршилт ажиллаж байна. Тэгэхээр нь barnstar хүлээн авахын тулд 100 дээд хувь нэмэр оруулагчдыг сонгох гадна, тэд нь бас хэнд нь barnstar өгч чадахгүй байсан 100 дээд хувь нэмэр оруулагчдыг сонгосон. Эдгээр зуун хяналтын бүлэг ажиллаж байсан, хэн нь barnstar авсан, хэн санамсаргүйгээр тодорхойлж байсан юм. Restivo болон ван де Rijt хяналтын бүлгийн хараад тэд хувь нь огцом буурсан ч байсан болохыг тогтоосон байна. Эцэст нь хэлэхэд, судлаачид хяналтын бүлэгт эмчилгээний бүлгийн хүмүүс (өөрөөр хэлбэл, barnstars хүлээн авсан), ард түмнийг харьцуулахад тэд barnstar редактор ойролцоогоор 60% илүү хувь нэмэр оруулах учруулсан болохыг тогтоожээ. Гэвч, хувь нэмэр нь энэ өсөлт аль алинд нь бүлэгт нийт буурч нэг хэсэг болгон явагдаж байна.
Энэ судалгаа харуулж хувьд, туршилт хяналтын бүлэг нь бага зэрэг гаж байдлаар чухал ач холбогдолтой юм. нарийн barnstars нөлөөг хэмжих зорилгоор Restivo болон ван дер Rijt barnstars авч чадаагүй хүмүүс ажиглах хэрэгтэй. туршилт танил биш юм олон удаа судлаачид хяналтын бүлгийн гайхалтай үнэ цэнийг үнэлж чадахгүй байна. Restivo болон ван де Rijt хяналтын бүлэг байхгүй байсан бол тэд яг л буруу дүгнэлт гаргасан байсан юм. Хяналтын бүлэг ч хулгай, бэлгийн дарамт болон туршилт ажиллаж байгаа хяналт бүлгүүд томоохон казино компанийн гүйцэтгэх захирал ажилтнууд өөрийн компанийн буудсан байж болно зөвхөн гурван арга зам байдаг гэж хэлсэн байна гэж маш чухал юм (Schrage 2011) .
ажилд авах, санамсаргүй хуваарилалт, оролцоо, болон үр дүнг: Restivo болон ван де Rijt-ийн судалгаа туршилтын дөрвөн гол найрлага харуулж байна. Эдгээр дөрвөн найрлага эрдэмтэд хамаарлыг цааш хөдөлж, эмчилгээ учир шалтгааны хүчин төгөлдөр хэмжих боломжийг олгодог. Тодруулбал, санамсарг та эмчилгээ, хяналтын бүлгийн хувьд үр дүнг харьцуулах үед та оролцогчдын гэсэн цогц тухайн үйл ажиллагааны учир шалтгааны хүчин төгөлдөр үнэлгээг авч байгаа гэсэн үг юм. Өөрөөр хэлбэл, нэг санамсаргүй хяналттай туршилт та үр дүнг ямар ч ялгаа оролцоо биш, харин өөр нэг confounder, би боломжит үр дагавар тогтолцоог ашиглан Техникийн хавсралтад тодорхой болгох нь нэхэмжлэлийг үүдэлтэй юм байна гэдэгт итгэлтэй байж болно.
туршилтын механикийн сайхан жишээ байхаас гадна, Restivo болон ван де Rijt-ийн судалгаа нь тоон туршилт логистикийн аналог туршилт нь шал өөр байх болно гэдгийг харуулж байна. Restivo болон ван де Rijt-ийн туршилтын, энэ нь дэлхийн хэнд ч barnstar өгөх хялбар байсан ба энэ нь-дээш найруулгыг нь удаан хугацаанд (Wikipedia-аас түүх засварлах автоматаар бичигддэг учраас) үр дүнг-тоог хянахад хялбар байсан юм. Ямар ч үнээр эмчилгээ хүргэх, үр дүнг хэмжих Энэ чадвар нь чанарын хувьд урьд нь туршилтанд ялгаатай юм. Энэ туршилт 200 хүн оролцсон хэдий ч 2000, эсвэл 20,000 хүнтэй ажиллуулж байсан байж болох юм. үнэтэй байсан юм 100 хүчин зүйлээр нь тэдний туршилт хүртэл өргөжүүлэх нь судлаачид урьдчилан сэргийлэх гол зүйл бол, энэ нь ёс зүй юм. Өөрөөр хэлбэл, Restivo болон ван де Rijt undeserving засварлагчид нь barnstars өгөхийг хүсэхгүй байгаа юм бэ, тэд туршилт Wikipedia олон нийтэд саад хүсэхгүй байгаа юм бэ (Restivo and Rijt 2012; Restivo and Rijt 2014) . Тиймээс Restivo болон ван де Rijt нь туршилт нь харьцангуй энгийн байдаг хэдий ч энэ нь тодорхой туршилтын талаар зарим зүйлүүд хэвээр байна, зарим нь өөрчлөгдсөн болохыг харуулж байна. Тухайлбал, туршилтын үндсэн логик адил юм, гэхдээ логистикийн өөрчлөгдсөн байна. Дараа нь, зорилгоор нь илүү тодорхой энэ өөрчлөлтийг бий болгосон боломжийг тусгаарлаж, би судлаачид урьд өмнө хийж байсан туршилт төрлийн одоо юу хийж чадах туршилт харьцуулж болно.