TRELLIS.2 - крупномасштабные генеративные 3D-модели с открытым исходным кодом от Microsoft

Что такое TRELLIS.2?

TRELLIS.2 - это крупномасштабная генеративная 3D-модель Microsoft с открытым исходным кодом и 4 миллиардами параметров, ориентированная на высокоточную генерацию изображений в 3D. Инновационная разреженная воксельная структура "O-Voxel" эффективно обрабатывает сложные топологии и резкие черты, позволяя генерировать высококачественные 3D-активы с полноценными PBR-материалами. Модели поддерживаются в широком диапазоне разрешений, от 512³ до 1536³, и могут быть быстро сгенерированы на графических процессорах NVIDIA H100, например, в разрешении 512³ примерно за 3 секунды.

Функциональные особенности TRELLIS.2

• Высокое качество и эффективность: Модель с 4 миллиардами параметров генерирует 3D-активы с высоким разрешением и полной текстурой на лету, поддерживая широкий диапазон разрешений, со скоростью генерации, превосходящей графические процессоры NVIDIA H100, например, разрешение 512³ за ~3 секунды.
• Обработка сложных топологийРазреженная воксельная структура "O-Voxel" способна надежно обрабатывать сложные топологии, такие как открытые поверхности, нетекучие геометрии и внутренне замкнутые структуры, преодолевая ограничения традиционных методов.
• Богатое моделирование текстур: Поддержка базовых цветов, а также возможность моделирования таких свойств поверхности, как шероховатость, металличность и непрозрачность, поддержка прозрачности и фотореалистичного рендеринга, а также высокая степень визуальной реалистичности создаваемых 3D-активов.
• Минималистичная обработка данных: Процесс обработки данных устраняет необходимость в рендеринге и оптимизации, а преобразование между текстурированными сетками и O-Voxel может быть завершено за короткий промежуток времени, что значительно повышает эффективность обработки.
• Открытый исходный код и простота использованияЛицензия MIT является открытым исходным кодом, поддерживает Linux и требует NVIDIA GPU с не менее чем 24 ГБ видеопамяти. Предварительно обученные модели доступны на Hugging Face для быстрого запуска и применения.

Основные преимущества TRELLIS.2

• Высокоточное 3D-генерирование: Генерируйте высококачественные 3D-активы со сложными формами и текстурами, поддерживайте различные разрешения и получайте фотореалистичные результаты.
• Возможность эффективной обработкиИспользование разреженной воксельной структуры и оптимизированных алгоритмов значительно повышает скорость генерации, например, всего около 3 секунд при разрешении 512³, что делает ее пригодной для крупномасштабных приложений.
• Мощная адаптация топологии: Преодолевая традиционные ограничения, он способен работать со сложными топологиями, такими как открытые поверхности, нетекучие геометрии и внутренне замкнутые структуры для широкого спектра приложений.
• Богатая материальная поддержка: Поддержка базовых цветов, а также возможность моделирования свойств материалов PBR, таких как шероховатость, металличность и непрозрачность, для создания 3D-активов, которые могут быть использованы для высококачественного рендеринга.
• Минималистичные процессы обработки данных: Быстрое преобразование между текстурированными сетками и O-Voxel без сложных этапов рендеринга или оптимизации, что значительно упрощает обработку.

Какой официальный сайт у TRELLIS.2?

• Веб-сайт проекта:: https://microsoft.github.io/TRELLIS.2/
• Репозиторий Github:: https://github.com/microsoft/TRELLIS.2
• Библиотека моделей HuggingFace:: https://huggingface.co/microsoft/TRELLIS.2-4B
• Технический документ arXiv:: https://arxiv.org/pdf/2512.14692
• Демонстрация опыта работы в режиме онлайн:: https://huggingface.co/spaces/microsoft/TRELLIS.2

Группы населения, для которых предназначен TRELLIS.2

• 3D-художники и дизайнеры: Он позволяет быстро создавать высококачественные 3D-модели, что помогает им быстро повторять свои проекты, экономить время моделирования и повышать эффективность творческой деятельности.
• разработчик игр: Для сценариев разработки игр, где необходимо быстро создавать сложные 3D-активы, генерируя 3D-модели высокого разрешения с богатыми материалами для улучшения визуальных эффектов игры.
• Команда VFX: С его помощью можно быстро создавать реалистичные 3D-сцены и реквизит, он поддерживает широкий спектр материалов и текстур, чтобы удовлетворить спрос на высококачественный 3D-контент в кино- и телепроизводстве.
• Разработчики виртуальной реальности (VR) и дополненной реальности (AR): Генерирует высокоточные 3D-модели, подходящие для приложений VR и AR, улучшая погружение и впечатления пользователя.
• Исследователи в области искусственного интеллекта и машинного обучения: Как мощные генеративные 3D-модели, они могут быть использованы для изучения методов 3D-генерации, оптимизации моделей и разработки новых алгоритмов.
• Преподаватели и студенты: Предоставить инструменты для преподавания и изучения смежных дисциплин, помогая студентам быстро освоить генеративные 3D-технологии и изучить возможности применения 3D-моделирования и рендеринга.