Neuralangelo AI de Nvidia convierte videos de iPhone en mundos 3D

Las películas de tu iPhone ahora son mundos de juegos.

Justo cuando pensabas que el salvaje mundo de la IA no podía sorprenderte más, Nvidia presenta su nueva IA Neuralangelo, que puede convertir videoclips 2D en estructuras y escenas 3D. Literalmente genera réplicas detalladas de edificios, esculturas y objetos reales a partir de videoclips tomados con un móvil o una cámara.

La idea detrás de Neuralangelo, que 'esculpe' escenas reales en 3D a partir de video, como un Miguel Ángel moderno (geddit), es que estas escenas en 3D se pueden importar luego a otro software. Los activos de Neuralangelo se pueden editar para usarlos en videojuegos, arch-viz, proyectos web 3, bueno, cualquier cosa, incluso ayudar a los artistas digitales a definir las fuentes de luz.

Esto viene en la parte posterior de la IA de Nvidia para conversar con los personajes del juego y la nueva IA generativa de texto a 3D que aún está en desarrollo por parte de los investigadores de HiFA. En una demostración de Neuralangelo (abajo), Nvidia mostró cómo su IA podía recrear objetos complejos, como el David de Miguel Ángel, así como algo tan cotidiano como un camión de plataforma.

Nvidia ha publicado una explicación detallada de cómo funciona Neuralangelo, compartiendo cómo puede traducir detalles intrincados en un video, como vidrio y mármol liso, en 3D. El argumento es que esta IA ayudará a acelerar los flujos de trabajo de los creativos y desbloqueará activos y mundos virtuales en 3D para nuevas industrias, no para reemplazar trabajos.

"Las capacidades de reconstrucción 3D que ofrece Neuralangelo serán un gran beneficio para los creadores, ayudándolos a recrear el mundo real en el mundo digital", dijo Ming-Yu Liu, director senior de investigación y coautor del artículo, en un comunicado de prensa. "Esta herramienta eventualmente permitirá a los desarrolladores importar objetos detallados, ya sean pequeñas estatuas o edificios masivos, en entornos virtuales para videojuegos o gemelos digitales industriales".

Los mejores generadores de IA son los que pueden encajar y mejorar un flujo de trabajo en lugar de reemplazar trabajos. Los nuevos modelos generativos de IA como Adobe Firefly, por ejemplo, pueden encajar en un flujo de trabajo de arte conceptual y acelerar el proceso, no reemplazar a los artistas que realizan el trabajo. Lea el tutorial de Ken Coleman sobre cómo usar Adobe Firefly o mi entrevista con Chris Colman de Final Frontier, quien usa IA todos los días.

Gracias por leer 5 artículos este mes* Únete ahora para acceso ilimitado

Disfruta de tu primer mes por solo £1 / $1 / €1

* Lee 5 artículos gratis por mes sin suscripción

Únete ahora para acceso ilimitado

Prueba el primer mes por solo1 £ / 1 $ / 1 €

Noticias diarias de diseño, reseñas, procedimientos y más, según lo elegido por los editores.

Ian Dean es editor de arte y diseño en Creativebloq y ex editor de muchas revistas líderes. Estos títulos incluyeron ImagineFX, 3D World y el título líder de videojuegos Official PlayStation Magazine. Al principio de su carrera, escribió para revistas de música y cine, incluidas Uncut y SFX. Ian lanzó la revista Xbox X360 y editó PlayStation World. Para Creative Bloq, Ian combina sus experiencias para traer las últimas noticias sobre IA, arte digital y arte y tecnología de videojuegos, y más a Creative Bloq, y en su tiempo libre hace garabatos en Procreate, ArtRage y Rebelle mientras encuentra tiempo para jugar. Xbox y PS5. También es un gran usuario de Cricut y un fanático de las cortadoras láser, y actualmente está creando en Glowforge y xTools M1.