Облачная платформа Snowflake и Nvidia объединились для запуска платформы, позволяющей пользователям Snowflake создавать на основе своих данных специализированные приложения искусственного интеллекта.
О партнерстве было объявлено на саммите Snowflake Summit 2023, где генеральный директор Nvidia Дженсен Хуанг получил в подарок сноуборд от генерального директора Snowflake Фрэнка Слоутмана.
Сотрудничество предполагает интеграцию платформы NeMo от Nvidia для больших языковых моделей (LLM) в Snowflake Data Cloud. Это позволит предприятиям использовать данные, хранящиеся в учетных записях Snowflake, для разработки LLM.
Вот как это работает:
- Многие компании уже используют Snowflake для хранения внутренних данных.
- Предприятия используют фреймворк NeMo от Nvidia для создания искусственного интеллекта на основе своих данных.
- Они обучают и развертывают эти приложения с помощью графических процессоров Nvidia.
Microsoft Azure предложила аналогичный продукт в начале года, показав, что крупные технологические компании хотят предложить предприятиям больше возможностей для использования собственных данных для создания моделей искусственного интеллекта.
NeMo от Nvidia, облачная платформа для предприятий, позволяет пользователям создавать, настраивать и развертывать генеративные модели ИИ с миллиардами параметров. Планируется, что Snowflake будет размещать и запускать NeMo в Snowflake Data Cloud, открывая клиентам путь к разработке и внедрению пользовательских LLM для генеративных приложений ИИ.
Манувир Дас, руководитель подразделения корпоративных вычислений Nvidia, рассказал о том, как это позволяет клиентам Snowflake использовать преимущества передовой инфраструктуры искусственного интеллекта Nvidia.
"Они могут работать со своими собственными данными для создания... передовых приложений генеративного искусственного интеллекта, не вынося их из защищенной среды Data Cloud. Это позволит сократить расходы и задержки при сохранении безопасности данных", - сказал он.
Хуанг подчеркнул роль данных в создании генеративных приложений ИИ, работающих с корпоративными данными: "Вместе Nvidia и Snowflake создадут фабрику ИИ, которая поможет предприятиям превращать свои ценные данные в пользовательские генеративные модели ИИ для создания революционных новых приложений - прямо на облачной платформе, которую они используют для ведения своего бизнеса".
Такая настройка позволяет предприятиям использовать данные, уже хранящиеся в Snowflake, - им не нужно переносить их из других мест. Это не только намного быстрее, чем создавать конвейеры разработки ИИ с нуля, но и более безопасно.
Предприятия стремятся использовать свои данные для искусственного интеллекта
Предприятия хотят использовать все преимущества искусственного интеллекта, но им часто не хватает технологий для этого - даже если они обладают знаниями в области науки о данных и инженерного дела.
Некоторые предприятия переход на модели с открытым исходным кодом Решение Nvidia масштабируется до приложений Big Data, содержащих терабайты и даже петабайты данных.
Дас считает, что компании, внедряющие собственные генеративные модели ИИ, обученные на собственных данных, будут на шаг впереди тех, кто использует модели конкретных производителей. Это лучшее из двух миров, где собственные данные объединяются с передовыми инструментами ИИ Nvidia в рамках экосистемы Snowflake.
"Более 8000 клиентов Snowflake хранят эксабайты данных в Snowflake Data Cloud. Поскольку предприятия стремятся добавить возможности генеративного ИИ в свои приложения и сервисы, эти данные являются топливом для создания собственных моделей генеративного ИИ", - пояснил Дас.
В рамках этого партнерства Nvidia предоставляет ускоренные вычисления и программное обеспечение для ИИ. В настоящее время обе компании совместно разрабатывают движок искусственного интеллекта Nvidia и облако данных Snowflake.
По словам Даса, "генеративный ИИ - это многотриллионная перспектива, которая способна изменить каждую отрасль, поскольку предприятия начинают создавать и внедрять собственные модели, используя свои ценные данные".
Огромный рост стоимости компании Nvidia в этом году послужил толчком к появлению большого количества новых программных и аппаратных проектов.
Например, новые графические процессоры H100 устанавливают новые стандарты производительности обучения искусственному интеллекту, позволяя создавать новые поколения больших и лучших моделей.
