Нейросеть Trellis 2

Microsoft представил вторую версию генератора 3D-моделей, который превращает картинку в готовый текстурированный объект. Разработчики переписали архитектуру на O-Voxel, увеличили количество параметров до 4 миллиардов и научили систему выдавать разрешение 1536³. Результат — детализация, которую раньше приходилось доводить вручную часами.

Как работает генератор 3D-моделей

Загружаешь изображение — через минуту получаешь трёхмерный объект с текстурами. Система выдаёт базовую геометрию за 35 секунд, ещё 25 уходит на материалы в максимальном качестве. Если нужно быстрее, можно ограничиться разрешением 512³ и уложиться в 3 секунды. Никаких дополнительных настроек или ручной доработки — конвертация происходит без рендеринга и оптимизации.

В основе лежат структурированные латентные представления, которые сжимают данные в 16 раз без потери точности. Это позволяет обрабатывать сложные формы и сразу получать чистый меш с текстурами.

Физически корректные материалы и освещение

Система генерирует не просто цветную модель, а полноценные PBR-материалы: base color, roughness, metallic и opacity. Можешь сразу перекинуть объект в любой 3D-редактор или игровой движок — всё будет корректно реагировать на свет. Прозрачность, металлический блеск, шероховатость поверхности — всё это учитывается автоматически.

Сложная геометрия без ограничений

Раньше генераторы спотыкались на открытых поверхностях или объектах с внутренними полостями — приходилось дорабатывать вручную. Trellis 2 работает с любой топологией: non-manifold геометрия, вложенные структуры, тонкие стенки. Хочешь модель с прорезанными окнами или полую внутри — система справится без костылей.

Конвертация из текстурированного меша в O-Voxel занимает меньше 10 секунд на обычном процессоре. Обратное преобразование с CUDA-ускорением — до 100 миллисекунд. Это значит, что можно быстро итерировать и вносить правки.

Демо-версия доступна на Hugging Face, исходный код выложен на GitHub. Можно попробовать бесплатно или развернуть у себя, если есть GPU уровня H100 для максимальной скорости.