Creó IA que convierte una imagen 2D en un modelo 3D en cinco segundos

Investigadores de Adobe y la Universidad Nacional de Australia han desarrollado un algoritmo que convierte imágenes 2D en modelos 3D en sólo 5 segundos. Este avance promete revolucionar la creación de contenidos en diseño y entretenimiento, aunque cuidado con posibles problemas con texturas borrosas y violaciones derechos de autor.

El nuevo algoritmo, llamado Modelo de Reconstrucción Grande o LRM, es un avance significativo en la creación rápida de modelos 3D a partir de una sola imagen. El algoritmo, entrenado en un gran conjunto de datos de casi un millón de objetos 3D disponibles en Objaverse y MVImgNet, demostró una capacidad de generalización excepcional en una variedad de imágenes al crear contenido 3D.

A diferencia de los modelos anteriores que se entrenaron con conjuntos de datos limitados centrados en una sola categoría de imágenes, LRM utiliza una arquitectura transformadora, que se ha convertido en la base de muchos desarrollos en el campo del aprendizaje profundo, con 500 millones de parámetros. Esto permite que el modelo de IA funcione de manera efectiva con una variedad de tipos de imágenes, incluidas fotografías del mundo real y collages visuales creados por otros servicios de IA como DARLE y Difusión estable.

Yicong Hong, autor principal del estudio, enfatizó que LRM es un avance significativo en el campo de la reconstrucción 3D. El algoritmo es capaz de reproducir geometría detallada y texturas complejas, como la veta de la madera, manteniendo la calidad y la precisión.

La aplicación de LRM puede estar realmente extendida, desde el diseño y el entretenimiento hasta la industria del juego. Para los diseñadores y artistas 3D, esto significa una creación de modelos más rápida, lo cual es especialmente importante al desarrollar videojuegos y animaciones. Además, la posibilidad de que los usuarios comunes utilicen LRM promete hacer que el modelado 3D sea dominio exclusivo de algo más que los profesionales. Ahora será posible crear modelos detallados incluso a partir de fotografías tomadas con un teléfono inteligente.

Sin embargo, LRM tiene sus limitaciones, como el desenfoque de textura en áreas ocultas de la imagen. También vale la pena considerar las cuestiones de derechos de autor, especialmente en el contexto del uso de imágenes generadas por otros servicios de IA. Para demostrar las capacidades de LRM, los investigadores crearon página con demostraciones en vídeo y modelos 3D interactivos. Esto pone de relieve el papel cada vez mayor de la IA en el mundo moderno y su impacto potencial en el futuro de las industrias creativas.