Um OpenAI ist es wieder einmal ziemlich still geworden, und die viel gepriesenen Voice-Chat-Funktionen von GPT-4o werden viel langsamer eingeführt als erwartet.
Aber es gibt Gerüchte über neue Projekte, die in Arbeit sind, darunter SucheGPTdas generative KI und Web-Browsing kombiniert, und das geheimnisvollere "Project Strawberry".
Die Ursprünge von Strawberry reichen bis in den November 2023 zurück, als ein Modell (eher eine Trainingstechnik) namens Q* in Lecks von Reuters.
Es wurde sogar spekuliert, dass Q* potenziell gefährlich sei und eine Rolle bei der Einstellung und Entlassung von CEO Sam Altman im letzten Jahr spielte.
Q* sollte ein fortschrittliches Denkmodell mit einem KI-Agenten kombinieren, der in der Lage ist, das Internet zu erkunden.
Trotz dramatischer Schlagzeilen wie "OpenAI sitzt auf einem apokalyptisch mächtigen Modell" war seine Legitimität zu diesem Zeitpunkt sehr umstritten.
Im Mai und Juni dieses Jahres wurden weitere Einzelheiten des Q*-Projekts bekannt, das daraufhin in Project Strawberry oder einfach Strawberry umbenannt wurde. Nach Angaben von ReutersBei Strawberry handelt es sich um eine spezielle Methode zum Training von KI-Modellen, die das Internet autonom erkunden und "Deep Research" betreiben.
Das Q bezieht sich wahrscheinlich auf Q-Learning, eine seit langem etablierte Technik des Reinforcement Learning (RL). Was den Stern (*) betrifft, so besteht mehr Ungewissheit. Laut Reuters ähnelt es einer in Stanford entwickelten Methode namens "Self-Taught Reasoner" oder "STaR". Andere sagen, dass es mit einem Suchalgorithmus namens A* zu tun hat.
Quellen zufolge will OpenAI, dass das Modell Forschungen durchführt, indem es autonom das Web durchsucht, unterstützt von einem "Computer-using agent" (CUA) - der auch eine Schlüsselkomponente von SearchGPT ist.
Diesen Quellen zufolge möchte OpenAI, dass Strawberry "Aufgaben mit langem Zeithorizont" (LHT) ausführt, die komplexe Planung und Ausführung über längere Zeiträume beinhalten.
Der Stanford-Professor Noah Goodman, einer der Erfinder von STaR, erzählte Reuters von der Technologie, "Ich denke, das ist sowohl aufregend als auch erschreckend... wenn sich die Dinge weiter in diese Richtung entwickeln, müssen wir als Menschen über einige ernste Dinge nachdenken."
Auf die Frage nach Strawberry gab ein OpenAI-Sprecher eine allgemeine Erklärung zu den KI-Entwicklungszielen des Unternehmens ab:
"Wir wollen, dass unsere KI-Modelle die Welt mehr so sehen und verstehen wie wir. Die kontinuierliche Erforschung neuer KI-Fähigkeiten ist eine gängige Praxis in der Branche, mit der gemeinsamen Überzeugung, dass diese Systeme im Laufe der Zeit immer besser denken können.
Soziale Medien sorgen für Aufregung
Nicht lange nach dem Reuters-Bericht, Anfang August, postete Altman ein Foto von Erdbeeren mit der Bildunterschrift "i love summer in the garden", was die Spekulationen über das Strawberry-Projekt wieder anheizte.
ich liebe den sommer im garten pic.twitter.com/Ter5Z5nFMc
- Sam Altman (@sama) 7. August 2024
Dann begann der Nutzer iruletheworldmo, eine Art Meme-/Satire-Account mit Schwerpunkt KI (mit einem Profilfoto von Theodore Twombly, gespielt von Joaquin Phoenix, aus dem KI-Film Her, der mit Altman in Verbindung gebracht wird), erdbeerbezogene Inhalte zu posten, die auf einen potenziellen Durchbruch der "Stufe zwei" in der KI hinweisen.
Der Nutzer postete: "willkommen auf level zwei. wie fühlst du dich? habe ich dich dazu gebracht, dich zu fühlen?" Altman, CEO von OpenAI, antwortete mit "erstaunlich tbh".
Dieser Austausch löste eine Kettenreaktion von Beiträgen zum Thema Erdbeeren und massive Spekulationen auf X und Reddit aus.
willkommen auf Stufe zwei.
Wie fühlen Sie sich?
habe ich Ihnen das Gefühl gegeben?
- 🍓🍓🍓 (@iruletheworldmo) 7. August 2024
Erdbeere nimmt eine neue Wendung
Erst kürzlich, Die Informationen enthüllen dass OpenAI sich darauf vorbereitet, eine Version von Strawberry als Teil eines Chatbots auf den Markt zu bringen und sie möglicherweise schon im Herbst in ChatGPT zu integrieren.
OpenAI soll die Fähigkeiten von Strawberry auch Beamten der nationalen Sicherheit der USA demonstriert haben.
Interessanterweise entwickelt OpenAI nach Angaben von The Information zwei verschiedene Versionen von Strawberry:
- Diese kleinere, vereinfachte Version ist für die Integration in Chat-basierte Anwendungen wie ChatGPT gedacht. Sie zielt darauf ab, die Argumentationsfähigkeiten in Szenarien zu verbessern, in denen die Benutzer eher durchdachte, detaillierte Antworten als schnelle Antworten benötigen.
- Diese größere, leistungsfähigere Version wird verwendet, um hochwertige "synthetische" Trainingsdaten für das nächste Flaggschiff-Sprachmodell von OpenAI mit dem Codenamen "Orion" zu erzeugen.
Synthetische Daten, die von Strawberry generiert werden, könnten die Abhängigkeit von im Internet gesammelten Texten und Bildern für das Training verringern.
Dies könnte zu genaueren und zuverlässigeren KI-Modellen führen und anhaltende Probleme wie KI-"Halluzinationen" oder Modellzusammenbruch.
Seltsamerweise stimmen diese Charakterisierungen von Strawberry aber nicht so gut mit den früheren Beschreibungen von Q* überein.
Vielleicht könnten wir spekulieren, dass Strawberry, der autonome Agent, selbstständig im Internet surft und seine "Tiefenforschung" nutzt, um letztendlich Daten zu synthetisieren.
Vielleicht ist das rechnerisch effizienter und nützlicher für das Modelltraining als das einfache Auslesen der Rohdaten selbst?
AI weiß nicht, wie viele Rs in Erdbeere sind
An dieser Stelle nimmt die Geschichte eine bizarre und ironische Wendung.
Strawberry könnte nach einem Wort benannt sein, das aktuelle KI-Modelle, einschließlich einiger der fortschrittlichsten, oft nicht richtig schreiben können.
Fragen Sie eine KI, wie viele "r" in "Erdbeere" enthalten sind, und es besteht die Möglichkeit, dass sie selbstbewusst "zwei" statt der richtigen "drei" antwortet.
- Rob DenBleyker (@RobDenBleyker) 26. August 2024
Klingt lächerlich, oder? Ich habe es selbst nicht geglaubt, bis ich es mit Claude ausprobiert habe.
Als dies zum ersten Mal bekannt wurde, behaupteten einige, dass es sich um eine Art "Osterei" oder einen Scherz innerhalb der Systeme von OpenAI handelte.
Aber da Claude genauso reagiert wie ChatGPT, ist das eher unwahrscheinlich, es sei denn, die KI-Firmen haben sich hinter den Kulissen zu Nischen-Erdbeerwitzen verabredet.
Die Erklärung dafür ist in ihrer Einfachheit elegant.
Sprachmodelle sind, trotz des Namens, mathematische Systeme. Sie verstehen Wörter nicht "wirklich". Text wird in Code übersetzt, wodurch die Gefahr besteht, dass Kontext und Bedeutung auf Wortebene verloren gehen.
Warum die Erdbeere diesen Mangel zuverlässig auslöst, ist die rätselhaftere Frage.
Ob OpenAI den Namen "Strawberry" als spielerische Anspielung auf diesen häufigen KI-Stolperstein oder als reinen Zufall gewählt hat, bleibt in jedem Fall unklar. Es scheint etwas zu sein, was Altman tun könnte, ob Strawberry nun echt ist oder nicht.
Was als Nächstes in dieser bizarren, aber hochinteressanten (...) Erdbeergeschichte passiert, kann man nur vermuten. Um ehrlich zu sein, habe ich zum jetzigen Zeitpunkt das Gefühl, dass keine der spekulativen "Beweise", die wir von den großen Nachrichtenagenturen haben, völlig repräsentativ für das ist, was bei OpenAI vor sich geht.
Wir werden auf SearchGPT und/oder GPT-5 warten müssen, um zu sehen, wie sich die Produkte von OpenAI auf der Grundlage von Strawberry und anderen Projekten weiterentwickeln.