¿Qué es TRELLIS 3D?

¿Qué es TRELLIS 3D? Un cambio de juego en la creación de activos 3D

TRELLIS 3D es un enfoque revolucionario para la generación de activos 3D que combina tecnologías avanzadas de IA con estructuras arquitectónicas innovadoras para producir modelos 3D versátiles y de alta calidad. Este marco de vanguardia aprovecha las representaciones Structured Latent (SLAT), que permiten una generación 3D escalable y precisa. Desarrollado por expertos de la Universidad de Tsinghua, USTC y Microsoft Research, TRELLIS posibilita la creación de activos 3D con geometría detallada y texturas vívidas mediante potentes modelos de IA.

La tecnología central detrás de TRELLIS 3D

En el corazón de TRELLIS 3D se encuentra su representación Structured LATent (SLAT), un marco unificado para crear activos 3D. Al combinar una estructura de cuadrícula 3D dispersa con características visuales densas multivista, TRELLIS captura tanto las características geométricas (estructura) como las visuales (apariencia) de los objetos 3D. Esta fusión única permite generar objetos 3D de alta calidad que no solo son realistas, sino también flexibles en formatos de salida y capacidades de manipulación.

La integración de transformers de flujo rectificado es clave para manejar la dispersidad en el modelo SLAT. Esto permite la generación de activos 3D realistas en varias formas, incluidas Gaussianas 3D, Campos de Radiancia y mallas. El proceso impulsado por IA utiliza hasta 2 mil millones de parámetros entrenados en un gran conjunto de datos de 500.000 objetos 3D diversos, lo que garantiza flexibilidad, calidad y precisión en la creación de activos.

La versatilidad de TRELLIS 3D

Una de las características más destacadas de TRELLIS es su versatilidad para generar diferentes tipos de activos 3D. Ya sea que necesites un objeto simple para diseño de juegos o arte 3D complejo y detallado, TRELLIS cumple. Así es como funciona:

• Generación de texto a 3D: TRELLIS permite introducir prompts de texto (como “teléfono rotatorio de cobre vintage con detalles intrincados”), que luego se convierten en modelos 3D. Esta funcionalidad está impulsada por GPT-4, asegurando resultados precisos y creativos.

• Generación de imagen a 3D: TRELLIS también admite la conversión de imágenes en activos 3D. Aprovechando DALL‑E 3 y otras técnicas avanzadas de generación de imágenes, TRELLIS puede crear activos 3D directamente a partir de prompts de imagen, agregando otra capa de flexibilidad creativa.

• Variantes de activos y edición local: Una de las funciones más innovadoras de TRELLIS es su capacidad para generar variantes de modelos 3D existentes. Por ejemplo, puedes crear una textura metálica rugosa para un objeto o agregar una estructura transparente similar al vidrio, simplemente proporcionando los prompts de texto adecuados. Además, puedes realizar ediciones locales a los activos 3D, como quitar brazos de un meca de batalla o reemplazar sus piernas con un chasis de orugas, permitiendo diseños 3D altamente personalizados.

Aplicaciones en arte y diseño

Gracias a sus activos 3D de alta calidad, TRELLIS no es solo para desarrolladores y diseñadores; también es un cambio de juego para los artistas. Al utilizar sus potentes funciones de generación y manipulación de activos, los artistas pueden crear diseños de arte 3D vibrantes y complejos con facilidad. Esto convierte a TRELLIS en una herramienta invaluable para cualquiera que desee llevar los límites de la creación artística en 3D más allá.

Cómo funciona TRELLIS: la metodología

La clave de la eficacia de TRELLIS radica en su marco SLAT. Este combina estructuras dispersas con características visuales densas extraídas de modelos de visión preentrenados. Luego se generan vectores latentes para las celdas no vacías, asegurando que tanto la geometría como la textura se capturen con precisión. Gracias a la aplicación de transformers de flujo rectificado, TRELLIS puede manejar grandes conjuntos de datos y requisitos de activos diversos, ampliando los límites de lo posible en la generación 3D.

TRELLIS opera en una tubería de dos etapas:

1. Primero genera la estructura dispersa del objeto 3D.
2. Luego rellena las celdas no vacías con información detallada para completar el activo.

Esta metodología permite escalabilidad y flexibilidad, haciendo de TRELLIS una solución sólida para una amplia gama de necesidades de creación de activos 3D.

Conclusión: Por qué TRELLIS es el futuro de la generación 3D

TRELLIS 3D representa un avance significativo en el campo de la generación de activos 3D. Con su combinación única de generación de texto a 3D, conversión de imagen a 3D y capacidades de edición local, TRELLIS ofrece un nivel de flexibilidad y calidad sin precedentes. Ya seas desarrollador, diseñador o artista, TRELLIS te brinda las herramientas necesarias para crear activos 3D impresionantes y versátiles que se pueden adaptar a cualquier proyecto.

¿Dónde puedo usar TRELLIS 3D?

Si te interesa explorar esta poderosa tecnología, puedes usar TRELLIS 3D directamente en el sitio oficial: trellis3d.co.