Könnte ein verallgemeinertes KI-Modell wie GPT-4 bessere Finanzvorhersagen machen als menschliche Analysten? Forscher der University of Chicago sind dieser Frage nachgegangen und kamen zu überraschenden Ergebnissen.
Die Befürchtung, dass KI Arbeitsplätze ersetzen könnte, bezog sich vor allem auf weniger qualifizierte Tätigkeiten. Aber müssen Experten wie Investment- und Finanzanalysten vielleicht auch ihre Karrieren überdenken?
Das Papier Die von den Forschern veröffentlichte Studie besagt, dass GPT-4 bei der Analyse der Finanzdaten eines Unternehmens und der Vorhersage seiner künftigen Erträge deutlich besser ist als menschliche Experten.
Ihr Experiment bestand darin, eine Bilanz und eine Gewinn- und Verlustrechnung in standardisierter Form an GPT-4 Turbo zu übergeben und das Modell zu bitten, sie zu analysieren.
Das Modell wurde dann gefragt, ob die wirtschaftliche Leistung des Unternehmens nachhaltig ist und ob die Erträge in der folgenden Periode steigen oder sinken werden.
Durch die Verwendung von Chain-of-Thought (CoT) Prompting wurde das Modell so gecoacht, dass es bei der Analyse der Daten einen Finanzanalysten nachahmte.
Die Forscher wollten ausschließlich die Fähigkeit von GPT-4 testen, Finanzzahlen zu analysieren. Deshalb gaben sie ihm keine anderen Daten wie den Namen des Unternehmens, Gespräche mit der Geschäftsführung oder andere Unternehmensinformationen.
Die Forscher ließen GPT-4 auch nicht wissen, aus welchem Jahr die Finanzdaten stammten. Dadurch wurde verhindert, dass GPT-4 anhand seiner Trainingsdaten Rückschlüsse auf das Unternehmen oder die wirtschaftlichen Bedingungen zum Zeitpunkt der Erstellung der Finanzdaten ziehen konnte.
Ergebnisse
GPT-4 erreichte eine Vorhersagegenauigkeit von 60%, was deutlich über der Genauigkeit von 53% liegt, die die menschlichen Analysten bei der gleichen Stichprobe von Unternehmenszahlen erreichten.
Menschliche Analysten analysieren in der Regel die Zahlen eines Unternehmens und kombinieren diese Analyse mit ihrem Branchen- und Privatwissen über das Unternehmen, bevor sie ihre Prognosen abgeben.
Es scheint, dass GPT-4 die Menschen übertrifft, auch wenn es den Nachteil hat, dass nur die Zahlen ohne weiteren Kontext vorliegen.
Aber vielleicht ist es gerade diese sachliche, unvoreingenommene Analyse von GPT-4, die ihm einen Vorteil gegenüber Menschen verschafft, die oft von Gefühlen oder Emotionen beeinflusst sind und voreingenommene Vorhersagen treffen.
Finanzanalysten verwenden häufig spezialisierte Modelle des maschinellen Lernens (ML), um die Zahlen zu berechnen und Vorhersagen für sie zu treffen. Die Forscher fanden heraus, dass GPT-4, ein verallgemeinertes Modell, gleich gut oder sogar etwas besser abschnitt als die spezialisierten ML-Modelle auf dem neuesten Stand der Technik.
Die Forscher kamen zu dem Schluss, dass, obwohl sie nicht sicher sind, wie GPT-4 das macht, seine Fähigkeit, menschliche Spezialisten zu übertreffen, das "Potenzial für LLMs hat, die Verarbeitung von Finanzinformationen zu demokratisieren".
Wird KI die Analysten der Wall Street ersetzen? Das könnte schneller passieren, als Sie denken, denn die Menschen haben keine gute Arbeit geleistet.
In einer Studie aus dem Jahr 2020 wurden aktiv verwaltete Investmentfonds mit der Performance des S&P 500 Benchmark-Index verglichen.
Diese Studie ergab, dass Sie, wenn Sie in den S&P 500 investiert hätten, bessere Ergebnisse erzielt hätten als 89% der Fondsmanager. Mit anderen Worten: Nur 11% der Finanzanalysten dieser Investmentfirmen haben den Index im Jahr 2020 geschlagen.
Da GPT-4 menschliche Analysten deutlich zu übertreffen scheint, werden Sie vielleicht bald ChatGPT fragen, ob Sie kaufen oder verkaufen sollen, und nicht mehr Ihren Fondsmanager.
