Investigación de Nvidia tienen revelado nueva tecnología de IA que podría cambiar el modelado de objetos 3D y el diseño de videojuegos. Nvidia Neuralangelo, que utiliza una red neuronal profunda, es un modelo de IA capaz de transformar con éxito objetos de vídeos 2D en complejas estructuras gráficas 3D con detalles intrincados y una precisión impecable.
Este nuevo modelo de IA permitió al equipo de Nvidia Research generar réplicas virtuales de distintos objetos en tiempo real mostrados en vídeos 2D, como estatuas y esculturas, edificios y otras construcciones diferentes.
El equipo se inspiró en el mismísimo escultor Miguel Ángel, que dio vida a sus esculturas David, Virgen de Brujas, Ángel y otras. Una vez que el sistema transforme objetos 2D en gráficos 3D, los diseñadores y desarrolladores podrán exportarlos e importarlos a sus propios proyectos.
El equipo que está detrás de Nvidia Neuralangelo espera ofrecer una solución para generar estructuras complejas, como edificios, sin comprometer el tiempo ni otros recursos. El nuevo sistema de IA puede utilizarse en el desarrollo de videojuegos, el modelado 3D, la arquitectura, la robótica y los gemelos digitales industriales.
Representación neuronal
Nvidia Neuralangelo no es el primer modelo de IA de este tipo, pero sin duda es más eficaz que sus predecesores y otras tecnologías similares.
Los modelos de IA anteriores no podían reproducir con precisión patrones de textura repetitivos, fuertes variaciones de color o una paleta de colores homogénea. Sin embargo, como Neuralangelo utiliza redes neuronales profundas y primitivas gráficas neuronales, puede reproducir los detalles más sutiles que requieren algunas estructuras.
Esa misma tecnología impulsa el Nvidia Instant NeRF, que también puede transformar imágenes 2D en escenas 3D inmersivas. Esta tecnología ganó el premio a la mejor ponencia en SIGGRAPH en 2022. Con Nvidia Neuralangelo, los investigadores esperan extender esta tecnología a la arquitectura y el modelado 3D y lograr resultados aún mejores.
Para probar la aplicación, los investigadores tomaron un vídeo 2D de un objeto desde distintos ángulos y luego hicieron que el modelo calculara y seleccionara los fotogramas que captarían los distintos puntos de vista. Primero, creaba una representación 3D aproximada de los objetos y luego la afinaba para obtener detalles más nítidos, de forma similar a cómo los escultores dan forma y tallan sus esculturas.
Nvidia Neuralangelo en CVPR
La innovadora solución impulsada por IA de Nvidia Research permitirá a diseñadores de juegos, desarrolladores de RV, arquitectos y diseñadores de exteriores e interiores mostrar impresionantes estructuras en 3D sin tener que invertir semanas o meses en la construcción de sus proyectos.
Permitirá la aparición de nuevas tecnologías y, potencialmente, transformará la industria del videojuego al permitir que salgan juegos más competitivos, que presenten una arquitectura mundialmente conocida con finos detalles y otros añadidos.
El equipo de investigación presentará Nvidia Neuralangelo en el Conferencia sobre Visión por Computador y Reconocimiento de Patrones (CVPR) 2023, que se celebrará del 18 al 22 de junio en Vancouver.
