Opbygning af dit eget produkt er en højrisiko, høj belønning tilgang. Men hvis det virker, kan du drage fordel af en positiv feedback loop, der muliggør særprægede undersøgelser.
Ved at gå i gang med at opbygge dit eget eksperiment et skridt videre, bygger nogle forskere faktisk deres egne produkter. Disse produkter tiltrækker brugere og tjener som platforme til forsøg og andre former for forskning. For eksempel har en gruppe forskere ved University of Minnesota oprettet MovieLens, som giver gratis, ikke-kommercielle personlige filmrekommendationer. MovieLens har fungeret kontinuerligt siden 1997, og i løbet af denne tid har 250.000 registrerede brugere givet mere end 20 millioner vurderinger af mere end 30.000 film (Harper and Konstan 2015) . MovieLens har brugt det aktive samfund af brugere til at udføre vidunderlig forskning lige fra at teste samfundsvidenskabelige teorier om bidrag til offentlige goder (Beenen et al. 2004; Cosley et al. 2005; Chen et al. 2010; Ren et al. 2012) algoritmiske udfordringer i anbefalingssystemer (Rashid et al. 2002; Drenner et al. 2006; Harper, Sen, and Frankowski 2007; Ekstrand et al. 2015) . Mange af disse eksperimenter ville ikke have været mulige uden forskere med fuld kontrol over et rigtigt arbejdsprodukt.
Desværre er opbygning af dit eget produkt utroligt vanskeligt, og du bør tænke på det som at oprette et opstartsselskab: højrisiko, høj belønning. Hvis det lykkes, giver denne tilgang meget af den kontrol, der kommer fra at opbygge dit eget eksperiment med realismen og deltagerne, der kommer fra at arbejde i eksisterende systemer. Endvidere kan denne tilgang potentielt skabe et positivt tilbagekoblingsløkke, hvor mere forskning fører til et bedre produkt, hvilket fører til flere brugere, der fører til flere forskere og så videre (figur 4.16). Med andre ord, når en positiv feedbacksløjfe sparker ind, bør forskningen blive lettere og lettere. Selvom denne tilgang er meget vanskelig i øjeblikket, er mit håb, at det bliver mere praktisk, da teknologien forbedres. Indtil da, hvis en forsker vil kontrollere et produkt, er den mere direkte strategi at samarbejde med et firma, det emne, jeg skal adressere næste.