5.3.4 Fazit

Offene Anrufe ermöglichen es Ihnen, Lösungen für Probleme zu finden, die Sie klar benennen können, die Sie jedoch nicht selbst lösen können.

In allen drei offenen Call-Projekte-Netflix-Preis, Foldit, Peer-to-Patent-Forscher gestellten Fragen einer bestimmten Form, erbeten Lösungen und nahm dann die besten Lösungen. Die Forscher brauchten nicht einmal die besten Experten zu wissen, zu fragen, und manchmal sind die guten Ideen kam von unerwarteter Seite.

Jetzt kann ich auch zwei wichtige Unterschiede zwischen Open-Call-Projekten und menschlichen Berechnungsprojekten hervorheben. Erstens gibt der Forscher bei offenen Aufrufprojekten ein Ziel vor (z. B. die Vorhersage von Filmbewertungen), während der Forscher bei der menschlichen Berechnung eine Mikrotask spezifiziert (z. B. eine Galaxie klassifizieren). Zweitens wollen die Forscher in offenen Aufrufen den besten Beitrag leisten - wie zum Beispiel den besten Algorithmus zur Vorhersage von Filmbewertungen, die Konfiguration mit der niedrigsten Energie eines Proteins oder das relevanteste Stück des Stands der Technik - und nicht irgendeine einfache Kombination von allen die Beiträge.

In Anbetracht der allgemeinen Vorlage für offene Aufrufe und dieser drei Beispiele, welche Arten von Problemen in der Sozialforschung könnten für diesen Ansatz geeignet sein? An dieser Stelle sollte ich anerkennen, dass es noch nicht viele erfolgreiche Beispiele gegeben hat (aus Gründen, die ich gleich erklären werde). In Bezug auf direkte Analoga könnte man sich einen Open-Call vom Typ Peer-to-Patent vorstellen, der von einem historischen Forscher verwendet wird, der nach dem frühesten Dokument sucht, um eine bestimmte Person oder Idee zu erwähnen. Ein Open-Call-Ansatz für diese Art von Problem könnte besonders wertvoll sein, wenn die potenziell relevanten Dokumente nicht in einem einzigen Archiv vorhanden sind, sondern weit verbreitet sind.

Im Allgemeinen haben viele Regierungen und Unternehmen Probleme, die offen für Aufrufe sind, weil offene Aufrufe Algorithmen generieren können, die für Vorhersagen verwendet werden können, und diese Vorhersagen können ein wichtiger Leitfaden für Maßnahmen sein (Provost and Fawcett 2013; Kleinberg et al. 2015) . Beispielsweise wollte Netflix, genau wie Netflix Bewertungen von Filmen vorhersagen konnte, Ergebnisse vorhersagen, z. B. welche Restaurants am wahrscheinlichsten Verstöße gegen den Gesundheitscode haben, um Inspektionsressourcen effizienter zuzuordnen. Von dieser Art von Problem motiviert, nutzten Edward Glaeser und seine Kollegen (2016) einen offenen Anruf, um der Stadt Boston bei der Vorhersage von Verstößen gegen Hygiene und sanitäre Einrichtungen auf der Grundlage von Daten aus Yelp-Berichten und historischen Inspektionsdaten zu helfen. Sie schätzten, dass das Vorhersagemodell, mit dem die offene Ausschreibung gewonnen wurde, die Produktivität der Inspektoren im Restaurant um etwa 50% verbessern würde.

Offene Aufrufe können möglicherweise auch verwendet werden, um Theorien zu vergleichen und zu testen. Zum Beispiel hat die Studie "Fragile Families and Child Wellbeing" etwa 5.000 Kinder seit Geburt in 20 verschiedenen US-Städten aufgespürt (Reichman et al. 2001) . Forscher haben Daten über diese Kinder, ihre Familien und ihre weitere Umgebung bei der Geburt und im Alter von 1, 3, 5, 9 und 15 Jahren gesammelt. Wie gut könnten die Forscher angesichts der Informationen über diese Kinder Ergebnisse vorhersagen, wie zum Beispiel, wer das College abschließt? Oder, in einer für einige Forscher interessanteren Weise, welche Daten und Theorien wären am effektivsten bei der Vorhersage dieser Ergebnisse? Da keines dieser Kinder derzeit alt genug ist, um zur Universität zu gehen, wäre dies eine echte zukunftsweisende Vorhersage, und es gibt viele verschiedene Strategien, die Forscher einsetzen könnten. Ein Forscher, der glaubt, dass Nachbarschaften für die Gestaltung von Lebensergebnissen entscheidend sind, könnte einen Ansatz verfolgen, während ein Forscher, der sich auf Familien konzentriert, etwas völlig anderes tun könnte. Welcher dieser Ansätze würde besser funktionieren? Wir wissen es nicht, und während wir herausfinden, könnten wir etwas wichtiges über Familien, Nachbarschaften, Bildung und soziale Ungleichheit lernen. Darüber hinaus könnten diese Vorhersagen als Richtschnur für zukünftige Datensammlungen dienen. Stellen Sie sich vor, es gäbe eine kleine Anzahl von Hochschulabsolventen, von denen nicht vorhergesagt wurde, dass sie von irgendeinem der Modelle absolviert würden; Diese Leute wären ideale Kandidaten für qualitative Nachbefragungen und ethnographische Beobachtungen. Daher sind die Vorhersagen bei dieser Art von offenem Ruf nicht das Ende; Vielmehr bieten sie eine neue Möglichkeit, verschiedene theoretische Traditionen zu vergleichen, zu bereichern und zu kombinieren. Diese Art von offenem Ruf ist nicht spezifisch für die Verwendung von Daten aus der Fragile Families und Child Wellbeing Study, um vorherzusagen, wer zum College gehen wird; es könnte verwendet werden, um irgendein Ergebnis vorherzusagen, das schließlich in irgendeinem longitudinalen sozialen Datensatz gesammelt wird.

Wie ich bereits in diesem Abschnitt geschrieben habe, gab es nicht viele Beispiele von Sozialforschern, die offene Anrufe verwenden. Ich denke, das liegt daran, dass offene Anrufe nicht gut dafür geeignet sind, wie Sozialwissenschaftler typischerweise ihre Fragen stellen. Zurück zum Netflix-Preis würden Sozialwissenschaftler normalerweise nicht nach voraussagenden Geschmäckern fragen; Vielmehr würden sie fragen, wie und warum kulturelle Geschmäcker für Menschen aus verschiedenen sozialen Schichten sich unterscheiden (siehe zB Bourdieu (1987) ). Eine solche "Wie" - und "Warum" -Frage führt nicht zu leicht nachprüfbaren Lösungen und erscheint daher schlecht geeignet, um Anrufe zu öffnen. Offensichtliche Aufrufe sind daher für die Vorhersage von Fragen geeigneter als Fragen der Erklärung . Jüngere Theoretiker haben jedoch Sozialwissenschaftler dazu aufgerufen, die Dichotomie zwischen Erklärung und Vorhersage zu überdenken (Watts 2014) . Da die Grenze zwischen Vorhersage und Erklärung verschwimmt, gehe ich davon aus, dass offene Anrufe in der Sozialforschung zunehmend üblich werden.