Kan en generaliserad AI-modell som GPT-4 göra bättre finansiella förutsägelser än mänskliga expertanalytiker? Forskare från University of Chicago undersökte denna fråga och kom fram till överraskande resultat.
Rädslan för att AI ska ersätta jobb har främst handlat om mindre kvalificerade arbetsuppgifter, men kan experter som investerings- och finansanalytiker också behöva ompröva sina karriärer?
Tidningen som forskarna publicerade visar att GPT-4 är betydligt bättre än mänskliga experter på att analysera ett företags finansiella data och förutse dess framtida resultat.
Deras experiment gick ut på att skicka en balans- och resultaträkning i standardiserad form till GPT-4 Turbo och be modellen att analysera dem.
Modellen fick sedan frågan om bolagets ekonomiska utveckling var hållbar och om vinsten skulle öka eller minska under den kommande perioden.
Med hjälp av CoT-meddelanden (Chain-of-Thought) coachade de modellen att efterlikna en finansanalytiker i sitt sätt att analysera data.
Forskarna ville enbart testa GPT-4:s förmåga att analysera finansiella siffror och försåg den därför inte med några andra uppgifter som företagets namn, diskussioner med ledningen eller annan företagsinformation.
Forskarna lät inte heller GPT-4 veta från vilket år de finansiella uppgifterna kom. Dessa ansträngningar hindrade GPT-4 från att använda sina träningsdata för att dra slutsatser om företaget eller ekonomiska förhållanden när finanserna sammanställdes.
Resultat
GPT-4 uppnådde en prediktionsnoggrannhet på 60%, vilket var betydligt bättre än den noggrannhet på 53% som de mänskliga analytikerna uppnådde på samma urval av företagssiffror.
Mänskliga analytiker analyserar vanligtvis ett företags siffror och kombinerar den analysen med sin bransch- och privata kunskap om företaget innan de utfärdar sina prognoser.
Det verkar som om GPT-4 överträffade människorna även med nackdelen att bara ha siffrorna utan något annat sammanhang.
Men det kan vara den här opartiska analysen av GPT-4 som ger den en fördel jämfört med människor som ofta påverkas av känslor och gör partiska förutsägelser.
Finansanalytiker använder ofta specialiserade maskininlärningsmodeller (ML) för att analysera siffrorna och göra förutsägelser åt dem. Forskarna fann att GPT-4, en generaliserad modell, presterade i nivå med eller något bättre än de senaste specialiserade ML-modellerna.
Forskarna drog slutsatsen att även om de inte är säkra på hur GPT-4 gör det, har dess förmåga att överträffa mänskliga specialister "potential för LLM att demokratisera finansiell informationsbehandling".
Kommer AI att ersätta Wall Street-analytiker? Det kan hända tidigare än du tror eftersom människor inte har gjort ett bra jobb.
I en studie från 2020 jämfördes aktivt förvaltade investeringsfonder med utvecklingen för jämförelseindexet S&P 500.
Den studien visade att om du investerade i S&P 500 skulle du ha uppnått bättre resultat än 89% av fondförvaltarna. Med andra ord var det bara 11% av finansanalytikerna på dessa värdepappersföretag som slog indexet 2020.
Eftersom GPT-4 verkar prestera betydligt bättre än mänskliga analytiker kanske du snart frågar ChatGPT om du ska köpa eller sälja, snarare än din fondförvaltare.
