Что такое TRELLIS 3D?

Что такое TRELLIS 3D? Прорыв в создании 3D‑активов

TRELLIS 3D — это революционный подход к генерации 3D‑активов, объединяющий передовые технологии ИИ с инновационной архитектурой для получения универсальных и высококачественных 3D‑моделей. Эта передовая система опирается на представления Structured Latent (SLAT), обеспечивающие масштабируемую и точную 3D‑генерацию. Разработанный экспертами из Цинхуа, USTC и Microsoft Research, TRELLIS позволяет создавать 3D‑активы с детализированной геометрией и выразительными текстурами с помощью мощных моделей ИИ.

Ключевая технология TRELLIS 3D

В основе TRELLIS 3D лежит представление Structured LATent (SLAT) — единый каркас для создания 3D‑активов. Комбинируя разрежённую 3D‑решётку с плотными многовидовыми визуальными признаками, TRELLIS захватывает как геометрические (структура), так и визуальные (внешний вид) характеристики 3D‑объектов. Такое сочетание позволяет генерировать высококачественные 3D‑объекты, реалистичные и гибкие по форматам вывода и возможностям редактирования.

Интеграция Rectified Flow Transformers — ключ к работе с разрежённостью SLAT‑модели. Это позволяет генерировать реалистичные 3D‑активы в разных формах: 3D‑гауссианы, поля излучения (Radiance Fields), меши. Процесс на базе ИИ использует до 2 млрд параметров, обученных на массиве из 500 000 разнообразных 3D‑объектов, что обеспечивает гибкость, качество и точность.

Универсальность TRELLIS 3D

Одна из сильнейших сторон TRELLIS — его универсальность при генерации разных типов 3D‑активов. Нужен ли простой объект для гейм‑дизайна или сложное 3D‑произведение искусства — TRELLIS справится. В частности:

• Text‑to‑3D: TRELLIS принимает текстовые промпты (например, «винтажный медный дисковый телефон с тонкой проработкой») и преобразует их в 3D‑модели. Возможность обеспечивается GPT‑4, что даёт точные и творческие результаты.

• Image‑to‑3D: TRELLIS поддерживает преобразование изображений в 3D‑активы. Используя DALL‑E 3 и другие современные методы генерации изображений, система создаёт 3D‑активы напрямую из визуальных промптов, расширяя творческую свободу.

• Варианты активов и локальное редактирование: TRELLIS способен генерировать варианты существующих 3D‑моделей. Например, можно придать объекту грубую металлическую текстуру или добавить прозрачную стеклоподобную структуру — достаточно корректного текстового промпта. Также доступны локальные правки: убрать руки у боевого меха или заменить ноги гусеничным шасси, получая высоко персонализированные 3D‑дизайны.

Применение в искусстве и дизайне

Благодаря высококачественным 3D‑активам TRELLIS полезен не только разработчикам и дизайнерам — это также мощный инструмент для художников. Используя возможности генерации и модификации, художники легко создают насыщённые и сложные 3D‑композиции.

Как это работает: методология

Эффективность TRELLIS обеспечивается каркасом SLAT. Он объединяет разрежённые структуры с плотными визуальными признаками, извлечёнными из предобученных моделей компьютерного зрения. Для непустых ячеек генерируются латентные векторы, что гарантирует точный захват геометрии и текстуры. Благодаря Rectified Flow Transformers TRELLIS обрабатывает крупные датасеты и разнообразные требования к активам, расширяя рамки возможного в 3D‑генерации.

TRELLIS работает по двухэтапному конвейеру:

1. Сначала генерируется разрежённая структура 3D‑объекта;
2. Затем непустые ячейки заполняются деталями для завершения актива.

Такой подход обеспечивает масштабируемость и гибкость, делая TRELLIS надёжным решением для широкого круга задач по созданию 3D‑активов.

Вывод: почему TRELLIS — будущее 3D‑генерации

TRELLIS 3D — значительный шаг вперёд в области генерации 3D‑активов. Уникальное сочетание Text‑to‑3D, Image‑to‑3D и локального редактирования обеспечивает невиданную ранее гибкость и качество. Будь вы разработчик, дизайнер или художник, TRELLIS предоставляет инструменты для создания впечатляющих и адаптируемых под любой проект 3D‑активов.

Где можно использовать TRELLIS 3D?

Если вы хотите опробовать эту мощную технологию, воспользуйтесь TRELLIS 3D на официальном сайте: trellis3d.co.