La plateforme cloud Snowflake et Nvidia se sont associés pour lancer une plateforme permettant aux utilisateurs de Snowflake de créer des applications d'IA sur mesure à partir de leurs données.
Le partenariat a été annoncé lors du Snowflake Summit 2023, où le PDG de Nvidia, Jensen Huang, a reçu un snowboard en cadeau de la part du PDG de Snowflake, Frank Slootman.
La collaboration consiste à intégrer la plateforme NeMo de Nvidia pour les grands modèles de langage (LLM) dans le nuage de données Snowflake. Les entreprises pourront ainsi utiliser les données stockées dans les comptes Snowflake pour développer des LLM.
Voici comment cela fonctionne :
- De nombreuses entreprises utilisent déjà Snowflake pour stocker des données internes.
- Les entreprises utilisent le cadre NeMo de Nvidia pour créer des IA à partir de leurs données.
- Ils forment et déploient ces applications avec les GPU de Nvidia.
Microsoft Azure a proposé un produit similaire plus tôt dans l'année, ce qui montre que les grandes entreprises technologiques veulent offrir aux entreprises davantage d'options pour utiliser leurs propres données afin de construire des modèles d'IA.
NeMo de Nvidia, une plateforme d'entreprise native dans le nuage, permet aux utilisateurs de construire, de personnaliser et de déployer des modèles d'IA génératifs avec des milliards de paramètres. Snowflake prévoit d'héberger et d'exécuter NeMo au sein de Snowflake Data Cloud, ouvrant ainsi la voie aux clients pour développer et déployer des LLM personnalisés pour les applications d'IA générative.
Manuvir Das, responsable de l'informatique d'entreprise chez Nvidia, a expliqué comment cela permet aux clients de Snowflake de tirer parti de l'infrastructure d'IA de pointe de Nvidia.
"Ils peuvent travailler avec leurs données propriétaires pour construire... des applications d'IA générative de pointe sans les déplacer hors de l'environnement Data Cloud sécurisé. Cela permettra de réduire les coûts et la latence tout en maintenant la sécurité des données", a-t-il déclaré.
Huang a souligné le rôle des données dans l'élaboration d'applications d'IA générative à partir des données de l'entreprise : "Ensemble, Nvidia et Snowflake créeront une usine d'IA qui aidera les entreprises à transformer leurs précieuses données en modèles d'IA générative personnalisés pour alimenter de nouvelles applications révolutionnaires - directement à partir de la plateforme cloud qu'elles utilisent pour gérer leurs activités."
Cette configuration permet aux entreprises d'utiliser les données déjà stockées dans Snowflake - elles n'ont pas besoin de les déplacer d'ailleurs. Non seulement c'est beaucoup plus rapide que de créer des pipelines de développement d'IA à partir de zéro, mais c'est aussi plus sûr.
Les entreprises cherchent à exploiter leurs données pour l'IA
Les entreprises veulent tirer pleinement parti de l'IA, mais elles manquent souvent de la technologie nécessaire, même si elles possèdent une expertise en science des données et en ingénierie.
Certaines entreprises sont se tourner vers des modèles à source ouverte La solution de Nvidia est extensible aux applications Big Data qui impliquent des téraoctets, voire des pétaoctets de données.
M. Das estime que les entreprises qui déploient des modèles d'IA générative personnalisés formés sur leurs propres données auront une longueur d'avance sur celles qui utilisent des modèles spécifiques à un fournisseur. C'est le meilleur des deux mondes, où les données propriétaires sont associées aux outils d'IA de pointe de Nvidia au sein de l'écosystème Snowflake.
" Plus de 8 000 clients de Snowflake stockent des exaoctets de données dans Snowflake Data Cloud. Alors que les entreprises cherchent à ajouter des capacités d'IA générative à leurs applications et services, ces données constituent un carburant pour créer des modèles d'IA générative personnalisés", explique Das.
Dans le cadre de ce partenariat, Nvidia fournit des logiciels de calcul accéléré et d'IA. Les deux entreprises travaillent actuellement à la conception conjointe du moteur d'IA de Nvidia et du nuage de données de Snowflake.
Selon M. Das, "l'IA générative représente une opportunité de plusieurs billions de dollars et a le potentiel de transformer tous les secteurs, car les entreprises commencent à construire et à déployer des modèles personnalisés en utilisant leurs précieuses données."
L'augmentation considérable de la valeur de Nvidia cette année a alimenté un grand nombre de nouveaux projets de logiciels et de matériel.
Par exemple, leurs nouveaux GPU H100 établissent de nouvelles références en matière de performances d'entraînement à l'IA, permettant de créer de nouvelles générations de modèles plus grands et plus performants.