Bygg ditt eget produkt er høy risiko og høy belønning. Men, hvis det fungerer, kan du dra nytte av en positiv feedback loop som lar særegne forskning.
Tar tilnærming for å bygge ditt eget eksperiment ett skritt videre, noen forskere faktisk bygge sine egne produkter. Disse produktene tiltrekke deltakere, og da fungere som plattformer for eksperimenter og andre typer forskning. For eksempel, en gruppe forskere ved University of Minnesota opprettet MovieLens , som gir fri, ikke-kommersielle personlige filmanbefalinger. MovieLens har drevet kontinuerlig siden 1997, og i løpet av denne tiden 250.000 registrerte brukere har gitt mer enn 20 millioner anmeldelser om mer enn 30.000 filmer (Harper and Konstan 2015) . MovieLens har brukt aktivt fellesskap av brukere å utføre fantastiske forskning spenner fra testing samfunnsvitenskapelige teorier om bidrag til fellesgoder (Beenen et al. 2004; Cosley et al. 2005; Chen et al. 2010; Ren et al. 2012) Til adressering algoritmisk utfordringer i anbefalingssystemer (Rashid et al. 2002; Drenner et al. 2006; Harper, Sen, and Frankowski 2007; Ekstrand et al. 2015) ; for en full gjennomgang se Harper and Konstan (2015) . Mange av disse eksperimentene ville ikke vært mulig uten forskere som har full kontroll over en ekte produkt.
Dessverre, bygge ditt eget produkt er utrolig vanskelig, og du bør tenke på det som å lage en start-up selskapet: høy risiko og høy belønning. Hvis det er vellykket, denne tilnærmingen gir mye av kontrollen som kommer fra å bygge din egen eksperiment med realisme og deltakere som kommer fra arbeid i eksisterende systemer. Videre er denne tilnærmingen potensielt i stand til å skape en positiv feedback loop der mer forskning fører til et bedre produkt som fører til flere brukere som fører til flere forskere og så videre (figur 4.15). Med andre ord, når en positiv feedback loop slår inn, bør forskningen bli enklere og enklere. Til tross for den potensielle oppsiden i denne tilnærmingen, kan jeg ikke finne noen andre eksempler på suksess, som viser hvor vanskelig det er å utføre vellykket. Men, er mitt håp at denne strategien vil bli mer praktisk som teknologien blir bedre. Disse vanskelighetene med å lage ditt eget produkt betyr at forskere som ønsker å kontrollere et produkt er mye mer sannsynlig å samarbeide med et selskap, tema jeg vil ta opp neste.