Nvidia Research есть раскрыт новая технология искусственного интеллекта, которая может изменить 3D-моделирование объектов и дизайн видеоигр. Nvidia Neuralangelo, использующая глубокую нейронную сеть, представляет собой модель искусственного интеллекта, которая может успешно преобразовывать объекты из 2D-видео в сложные графические 3D-структуры с замысловатыми деталями и безупречной точностью.
Новая модель искусственного интеллекта позволила команде Nvidia Research создавать виртуальные копии различных объектов, демонстрируемых в реальном времени в 2D-видео, включая статуи и скульптуры, здания и другие различные конструкции.
Вдохновением для команды послужил сам скульптор - Микеланджело, вдохнувший жизнь в свои скульптуры Давида, Мадонны из Брюгге, Ангела и другие. После того как система преобразует 2D-объекты в 3D-графику, дизайнеры и разработчики смогут экспортировать их и затем импортировать в собственные проекты.
Команда, создавшая Nvidia Neuralangelo, надеется предложить решение для создания сложных структур, таких как здания, без ущерба для времени и других ресурсов. Новая система искусственного интеллекта может быть использована для разработки видеоигр, 3D-моделирования, архитектуры, робототехники и промышленных цифровых двойников.
Нейронный рендеринг
Nvidia Neuralangelo - не первая модель ИИ такого рода, но она, безусловно, более эффективна, чем ее предшественники и другие подобные технологии.
Предыдущие модели искусственного интеллекта не могли точно воспроизвести повторяющиеся текстурные узоры, сильные цветовые вариации или однородную цветовую палитру. Однако, поскольку Neuralangelo использует глубокие нейронные сети и примитивы нейрографики, он может воспроизводить более тонкие детали, которые требуются некоторым структурам.
Эта же технология используется в Nvidia Instant NeRF, которая также может преобразовывать 2D-изображения в захватывающие 3D-сцены. Эта технология получила награду за лучший доклад на выставке SIGGRAPH в 2022 году. С Nvidia Neuralangelo, исследователи надеются распространить эту технологию на архитектуру и 3D-моделирование и добиться еще более высоких результатов.
Чтобы протестировать приложение, исследователи сняли 2D-видео объекта с разных ракурсов, а затем заставили модель рассчитать и выбрать кадры, на которых будут запечатлены различные точки зрения. Сначала она создавала грубое 3D-представление объектов, а затем дорабатывала его, чтобы получить более четкие детали, подобно тому, как скульпторы придают своим изваяниям форму и вытачивают их.
Nvidia Neuralangelo на конференции CVPR
Инновационное решение на базе искусственного интеллекта от Nvidia Research позволит игровым дизайнерам, разработчикам VR, архитекторам, дизайнерам экстерьеров и интерьеров демонстрировать впечатляющие 3D-структуры, не тратя недели и месяцы на создание своих проектов.
Это позволит появляться новым технологиям и потенциально изменит индустрию видеоигр, позволив выпускать более конкурентоспособные игры с всемирно известной архитектурой, проработанными деталями и другими дополнениями.
Команда исследователей представит Nvidia Neuralangelo на выставке Cконференция по компьютерному зрению и распознаванию образов (CVPR) 2023, который пройдет с 18 по 22 июня в Ванкувере.
