Meta comparte el aprendizaje de Meta 3D Gen, un sistema generado por IA para crear objetos 3D a partir de indicaciones de texto.

Meta ha compartido un nuevo artículo de investigación sobre el tipo de inteligencia generativa (IA) que puede crear objetos 3D. Llamada Meta 3D Gen, la versión AI genera modelos 3D de alta calidad a partir de la entrada de texto en menos de un minuto. La compañía destacó que el modelo de IA puede crear mapas de alta resolución y mapas de propiedades utilizando una combinación de métodos de renderizado y de conversión de texto a malla desarrollados íntegramente internamente. Obviamente, este método es diferente del de Tencent y Stability AI, que lanzaron imágenes en 3D.

Compartiendo su investigación papelque se está ejecutando actualmente en el sitio web de Meta, la compañía dijo que su modelo 3D Gen puede ofrecer modelos 3D con alta fidelidad y alta garantía de calidad. También se dice que el modelo admite renderizado basado en física (PBR), lo que permite refinar los modelos generados en diferentes aplicaciones del mundo real. Es importante destacar que el artículo de investigación no está revisado por pares, por lo que algunas de las afirmaciones realizadas pueden ser exageradas. No hay forma de saberlo a menos que se presente una muestra al público.

El artículo también describe los métodos utilizados para desarrollar el modelo de IA. Meta ha desarrollado dos métodos internos: Meta 3D AssetGen y Meta 3D TextureGen. AssetGen se encarga de generar objetos 3D a partir de un mensaje determinado. En la Fase I, proporciona un modelo 3D para utilizar su comprensión rápida, y en la Fase II refina aún más el modelo 3D para que coincida con los métodos basados ​​en la visión y complete aquellas partes que no son visibles para los sentidos, aunque y cuáles. TextureGen es responsable de encontrar y utilizar los parámetros correctos del modelo.

Este método de producción de modelos 3D tiene muchas ventajas para el material 3D producido. Por ejemplo, debido a que utiliza mensajes de texto, no hay necesidad de imágenes de referencia y los usuarios pueden crear modelos completamente únicos. La compatibilidad con PBR también significa que estos tipos se pueden extraer del sistema y utilizar directamente en otro lugar. El documento afirma que la producción de este tipo de productos también es real.

Meta dijo que el modelo 3D Gen AI tiene una tasa de ganancia del 68 por ciento en una plataforma, lo que significa que 68 de cada 100 veces, la IA puede generar el activo 3D correcto basándose en un mensaje de texto. La compañía continúa diciendo que este modelo supera varios puntos de referencia de la industria en términos de confiabilidad de velocidad y calidad visual para aplicaciones complejas.