Die Cloud-Plattform Snowflake und Nvidia haben sich zusammengetan, um eine Plattform auf den Markt zu bringen, die es Snowflake-Nutzern ermöglicht, mit ihren Daten maßgeschneiderte KI-Anwendungen zu erstellen.
Die Partnerschaft wurde auf dem Snowflake Summit 2023 bekannt gegeben, wo Nvidia-CEO Jensen Huang von Snowflake-CEO Frank Slootman ein Snowboard als Geschenk überreicht bekam.
Die Zusammenarbeit beinhaltet die Integration von Nvidias NeMo-Plattform für große Sprachmodelle (LLMs) in die Snowflake Data Cloud. Dadurch können Unternehmen die in Snowflake-Konten gespeicherten Daten zur Entwicklung von LLMs nutzen.
Und so funktioniert es:
- Viele Unternehmen verwenden Snowflake bereits zur Speicherung interner Daten.
- Unternehmen nutzen das NeMo-Framework von Nvidia, um aus ihren Daten KI zu entwickeln.
- Sie trainieren und implementieren diese Anwendungen mit den Grafikprozessoren von Nvidia.
Microsoft Azure bot Anfang des Jahres ein ähnliches Produkt an, was zeigt, dass große Technologieunternehmen Unternehmen mehr Möglichkeiten zur Nutzung ihrer eigenen Daten für die Erstellung von KI-Modellen bieten wollen.
Nvidias NeMo, eine Cloud-native Unternehmensplattform, ermöglicht es Nutzern, generative KI-Modelle mit Milliarden von Parametern zu erstellen, anzupassen und einzusetzen. Der Plan sieht vor, dass Snowflake NeMo innerhalb der Snowflake Data Cloud hostet und ausführt, um Kunden den Weg für die Entwicklung und den Einsatz von benutzerdefinierten LLMs für generative KI-Anwendungen zu ebnen.
Manuvir Das, Nvidias Leiter für Enterprise Computing, erläuterte, wie Snowflake-Kunden auf diese Weise die Vorteile von Nvidias hochmoderner KI-Infrastruktur nutzen können.
"Sie können mit ihren eigenen Daten arbeiten, um ... führende generative KI-Anwendungen zu entwickeln, ohne sie aus der sicheren Data Cloud-Umgebung zu entfernen. Dadurch werden Kosten und Latenzzeiten reduziert, während die Datensicherheit erhalten bleibt", sagte er.
Huang betonte die Rolle von Daten bei der Erstellung von generativen KI-Anwendungen, die mit Unternehmensdaten arbeiten: "Gemeinsam werden Nvidia und Snowflake eine KI-Fabrik schaffen, die Unternehmen dabei hilft, ihre wertvollen Daten in maßgeschneiderte generative KI-Modelle umzuwandeln, um bahnbrechende neue Anwendungen anzutreiben - direkt von der Cloud-Plattform aus, die sie für ihre Geschäfte nutzen."
Auf diese Weise können Unternehmen bereits in Snowflake gespeicherte Daten nutzen - sie müssen sie nicht von einem anderen Ort übertragen. Das ist nicht nur viel schneller als der Aufbau von KI-Entwicklungspipelines von Grund auf, sondern auch sicherer.
Unternehmen wollen ihre Daten für KI nutzbar machen
Unternehmen wollen die Vorteile der KI voll ausschöpfen, aber ihnen fehlt oft die Technologie dazu - selbst wenn sie über Fachwissen in den Bereichen Datenwissenschaft und Technik verfügen.
Einige Unternehmen sind Hinwendung zu Open-Source-Modellen Die Lösung von Nvidia ist jedoch für Big-Data-Anwendungen skalierbar, die Terabytes oder sogar Petabytes an Daten umfassen.
Das geht davon aus, dass Unternehmen, die benutzerdefinierte generative KI-Modelle einsetzen, die auf ihren eigenen Daten trainiert wurden, denjenigen, die herstellerspezifische Modelle verwenden, einen Schritt voraus sind. Es ist das Beste aus beiden Welten, wenn proprietäre Daten mit Nvidias innovativen KI-Tools innerhalb des Snowflake-Ökosystems zusammenkommen.
"Mehr als 8.000 Snowflake-Kunden speichern Exabytes an Daten in der Snowflake Data Cloud. Da Unternehmen ihre Anwendungen und Dienste mit generativen KI-Funktionen ausstatten wollen, sind diese Daten der Treibstoff für die Erstellung individueller generativer KI-Modelle", erklärt Das.
Nvidia stellt im Rahmen dieser Partnerschaft beschleunigte Rechenleistung und KI-Software zur Verfügung. Die beiden Unternehmen arbeiten derzeit gemeinsam an der Entwicklung der KI-Engine von Nvidia und der Data Cloud von Snowflake.
In Das' Worten: "Generative KI ist eine Multi-Billionen-Dollar-Chance und hat das Potenzial, jede Branche zu verändern, wenn Unternehmen beginnen, maßgeschneiderte Modelle unter Verwendung ihrer wertvollen Daten zu entwickeln und einzusetzen."
Der enorme Wertzuwachs von Nvidia in diesem Jahr hat zu einer Vielzahl neuer Software- und Hardwareprojekte geführt.
So setzen die neuen H100-Grafikprozessoren neue Maßstäbe bei der KI-Trainingsleistung und ermöglichen neue Generationen größerer und besserer Modelle.