3 Menschen + 1 Computer = Beste Vorhersage
Computer schlagen oft Menschen bei der Vorhersage der Zukunft, wie der politische Analyst Nate Silver während der US-Präsidentschaftswahlen 2012 überzeugend demonstrierte und in seinem Buch The Signal and the Noise zeigt. Studien haben jedoch gezeigt, dass die Vorhersagen von Menschen manchmal besser sind als die von Maschinen. Angenommen, Sie versuchen, den Erfolg eines Produkts beim Start vorherzusagen. Sollten Sie sich auf einen Computer verlassen oder der Weisheit eines Experten vertrauen?
Neue Forschungsergebnisse legen nahe, dass der beste Ansatz nicht entweder-oder ist; es ist beides. Aber “beides” bedeutet nicht eine einfache 50/50-Mischung. Verlassen Sie sich in relativ eindeutigen Kontexten mehr auf die Computeranalyse. In sehr unsicheren Fällen sollten die Meinungen von drei Experten gemittelt und ihrem kombinierten Urteil mehr Gewicht beigemessen werden als den Ergebnissen der Maschine.
Wir haben diese Richtlinien entdeckt, indem wir verschiedene Kombinationen von menschlichen und Computervorhersagen über Hits in den Pop-Charts in Deutschland und Großbritannien ausprobiert haben. Im Laufe von 12 Wochen haben wir 180 Personen — die Hälfte davon Fachleute der Musikindustrie, die Hälfte von ihnen Doktoranden ohne besondere Kenntnisse des Musikgeschäfts – gebeten, die Top—100-Positionen von Singles etablierter und neuer Künstler vorherzusagen.
Eine Vorhersage über einen Song eines etablierten Künstlers zu treffen, ist ein “gut strukturiertes” Problem – vergangene Performancedaten reduzieren die Unsicherheit. Hier haben wir festgestellt, dass in einem direkten Wettbewerb von Mensch gegen Maschine die Maschine tendenziell gewinnt (mit “Maschine” meinen wir Software, die sich auf gängige statistische Werkzeuge stützt, um eine vermutete lineare Beziehung zu analysieren). Aber die besten Ergebnisse kamen aus der Mischung von menschlichen und Computervorhersagen. Das Niveau des Fachwissens der Menschen war irrelevant; Wir erhielten die genauesten Ergebnisse, indem wir einfach der Prognose der Maschine etwas mehr Gewicht gaben als der der Menschen.
Für unbekannte Künstler — ein unsichererer Kontext — neigten die Menschen dazu, die Maschine zu schlagen. Aber auch hier führte die Kombination von Computer- und menschlichen Vorhersagen zu den besten Ergebnissen. Und in diesem Fall war Fachwissen sehr wichtig. Wenn wir nur die Schüler betrachteten, gab die optimale Kombination der Computervorhersage viel mehr Gewicht. Für die Profis der Musikindustrie war es das Gegenteil.
Wir haben dann die Urteile einer unterschiedlichen Anzahl von Profis gemittelt. Je größer die Gruppe, desto besser die Prognose, aber wir haben den größten Gewinn erzielt, als wir von zwei auf drei Experten umgestiegen sind.
Frühere Studien waren widersprüchlich, wobei Computer normalerweise in Laborexperimenten und Menschen in natürlichen Umgebungen gewinnen. Wir glauben, dass es einen Grund dafür gibt. Laborumgebungen sind in der Regel gut strukturiert, was die systematische Verarbeitung von Computern begünstigt. Die schlecht strukturierten Bedingungen in vielen natürlichen Umgebungen begünstigen das chaotische Funktionieren des menschlichen Gehirns.
Dies ist ein wichtiger Punkt, wenn Sie entscheiden, wie sehr Sie sich auf eine Computervorhersage für eine Produkteinführung verlassen möchten. Wenn es sich um ein bahnbrechendes Produkt handelt — etwas, das Kunden noch nie gesehen haben -, kann ein Computer wertvolle Erkenntnisse liefern, aber Sie sollten sich stärker auf das Urteil erfahrener Personen stützen.
