este nuevo texto

El texto a 3D se está poniendo bueno.

La IA de texto a 3D está mejorando día a día, o eso parece. Si bien la IA generativa 2D, como Midjourney y Stable Diffusion, ha acaparado los titulares, el modelado 3D ha pasado desapercibido. Pero ahora los investigadores Junzhe Zhu y Peiye Zhuang han creado HiFA, y es un impresionante generador de IA en 3D, incluso en esta etapa inicial.

HiFA puede crear modelos 3D de alta definición para usar en videojuegos, escenas 3D y animación. Algunos pueden debatir qué juegos pueden usar estos activos, pero esta IA está ofreciendo buenos resultados. La controversia sobre el uso de IA aún continúa, y el artista Greg Rutkowski me dijo recientemente que era "aterrador" que su trabajo se usara en una IA sin permiso. Pero la tecnología avanza rápido.

La diferencia entre HiFA y sus rivales proviene de su uso y optimización de IA generativa de texto a imagen preentrenada, como Stable Diffusion. Si bien algunas IA de texto a 3D pueden crear modelos, se basan en renderizaciones 2D entrenadas y, por lo tanto, pueden tener inconsistencias. A continuación, HiFA describe su enfoque y por qué sus modelos de IA en 3D se ven mejor que la mayoría.

"Para abordar estas limitaciones, proponemos una reformulación de la pérdida de optimización utilizando la difusión previa. Además, presentamos un enfoque de entrenamiento novedoso que desbloquea el potencial de la difusión previa. Para mejorar la representación de geometría 3D, aplicamos supervisión de profundidad auxiliar para NeRF- imágenes renderizadas y regularizar el campo de densidad de los NeRF. Los extensos experimentos demuestran la superioridad de nuestro método sobre trabajos anteriores, lo que da como resultado un fotorrealismo avanzado y una consistencia de vista múltiple mejorada".

Estoy personalmente impresionado, los modelos 3D generados por esta IA se ven bien. Si no desea utilizar el modelo final, simplemente puede tomar y adaptar la malla 3D y pulirla o crear algo nuevo a partir de ella.

Nuestro reciente tutorial "Cómo usar Adobe Firefly" reveló que nuestro artista Ken Coleman usa IA para generar elementos para arte conceptual y mezclas en ZBrush y Procreate en su flujo de trabajo. Pude ver modelos generados por IA de texto a 3D que funcionan bien con este flujo de trabajo. Esta IA de Adobe se considera el modelo más ético. Si desea obtener más información, lea nuestra función 'Explicación de Adobe Firefly'.

Si desea profundizar en la IA generativa, lea nuestras guías sobre los mejores generadores de IA y descubra también cómo se comparan los generadores de IA. Pero ninguno de estos realmente ofrece modelos de texto a 3D como este nuevo generador de IA propuesto por HiFA. Puede ver más modelos creados en esta aplicación de IA a continuación, o descubrir cómo funciona todo en el sitio web de HiFA.

Gracias por leer 5 artículos este mes* Únete ahora para acceso ilimitado

Disfruta de tu primer mes por solo £1 / $1 / €1

* Lee 5 artículos gratis por mes sin suscripción

Únete ahora para acceso ilimitado

Prueba el primer mes por solo1 £ / 1 $ / 1 €

Noticias diarias de diseño, reseñas, procedimientos y más, según lo elegido por los editores.

Ian Dean es editor de arte y diseño en Creativebloq y ex editor de muchas revistas líderes. Estos títulos incluyeron ImagineFX, 3D World y el título líder de videojuegos Official PlayStation Magazine. Al principio de su carrera, escribió para revistas de música y cine, incluidas Uncut y SFX. Ian lanzó la revista Xbox X360 y editó PlayStation World. Para Creative Bloq, Ian combina sus experiencias para traer las últimas noticias sobre IA, arte digital y arte y tecnología de videojuegos, y más a Creative Bloq, y en su tiempo libre hace garabatos en Procreate, ArtRage y Rebelle mientras encuentra tiempo para jugar. Xbox y PS5. También es un gran usuario de Cricut y un fanático de las cortadoras láser, y actualmente está creando en Glowforge y xTools M1.