Membangun produk Anda sendiri adalah berisiko tinggi, tinggi-imbalan. Tapi, jika bekerja, Anda bisa mendapatkan keuntungan dari umpan balik positif yang memungkinkan penelitian yang khas.
Mengambil pendekatan membangun percobaan Anda sendiri satu langkah lebih jauh, beberapa peneliti benar-benar membangun produk mereka sendiri. Produk-produk ini menarik peserta, dan kemudian melayani sebagai platform untuk percobaan dan jenis lain dari penelitian. Misalnya, sekelompok peneliti di University of Minnesota menciptakan MovieLens , yang menyediakan gratis, non-komersial rekomendasi film pribadi. MovieLens telah beroperasi terus menerus sejak tahun 1997, dan selama ini 250.000 pengguna terdaftar telah memberikan lebih dari 20 juta penilaian tentang lebih dari 30.000 film (Harper and Konstan 2015) . MovieLens telah digunakan masyarakat aktif pengguna untuk melakukan penelitian yang indah mulai dari pengujian teori-teori ilmu sosial tentang kontribusi untuk barang publik (Beenen et al. 2004; Cosley et al. 2005; Chen et al. 2010; Ren et al. 2012) Untuk menangani tantangan algoritmik dalam sistem rekomendasi (Rashid et al. 2002; Drenner et al. 2006; Harper, Sen, and Frankowski 2007; Ekstrand et al. 2015) ; untuk review lengkap melihat Harper and Konstan (2015) . Banyak dari percobaan ini tidak akan mungkin terjadi tanpa peneliti memiliki kontrol penuh atas produk kerja nyata.
Sayangnya, membangun produk Anda sendiri adalah sangat sulit, dan Anda harus berpikir tentang hal itu seperti membuat sebuah perusahaan start-up: berisiko tinggi, tinggi-imbalan. Jika berhasil, pendekatan ini menawarkan banyak kontrol yang berasal dari bangunan percobaan sendiri dengan realisme dan peserta yang datang dari bekerja dalam sistem yang ada. Selanjutnya, pendekatan ini berpotensi mampu menciptakan umpan balik positif dimana penelitian lebih mengarah ke produk yang lebih baik yang mengarah ke lebih banyak pengguna yang mengarah ke lebih banyak peneliti dan sebagainya (Gambar 4.15). Dengan kata lain, setelah umpan balik positif tendangan, penelitian harus mendapatkan lebih mudah dan lebih mudah. Meskipun potensi upside untuk pendekatan ini, saya tidak dapat menemukan contoh lain dari keberhasilan, yang menunjukkan betapa sulitnya untuk mengeksekusi berhasil. Tapi, harapan saya adalah bahwa strategi ini akan menjadi lebih praktis sebagai teknologi membaik. Kesulitan-kesulitan ini dengan menciptakan produk Anda sendiri berarti bahwa peneliti yang ingin mengontrol produk jauh lebih mungkin untuk bermitra dengan perusahaan, topik yang saya akan membahas berikutnya.