Нейросеть Visionary

Если вам надоело жонглировать десятком приложений для работы с 3D-ассетами, китайский проект Visionary может упростить жизнь. Это браузерный конструктор, который собирает разнородные объекты в единую сцену — от сплатов до классических мешей.

Что умеет собирать Visionary

Платформа понимает форматы, с которыми обычно приходится возиться через разные инструменты. Среди сплатов поддерживаются 3DGS, MLP-based 3DGS, 4DGS, Neural Avatars, а также PLY, SPLAT, KSplat, SPZ и SOG. Для мешей доступны GLB, GLTF, FBX и OBJ — стандартный набор, который закроет большинство задач.

Всё это можно загрузить в один проект и скомпоновать в онлайн-редакторе. Не нужно конвертировать файлы или настраивать пайплайны — просто перетаскиваешь объекты и видишь результат.

WebGPU вместо костылей

Под капотом работает WebGPU, что даёт приличную производительность прямо в браузере. Рендеринг сплатов и сложных мешей идёт без тормозов, а для инференса используется ONNX Runtime. В итоге получается связка, которая не требует установки тяжёлых программ и работает на любой платформе с современным браузером.

Интерфейс редактора выглядит минималистично — скорее как прототип, чем готовый продукт. Но для экспериментов с 3D-мирами и быстрой сборки сцен этого хватает. Весь код открыт и лежит на GitHub, так что можно допилить под свои нужды или просто посмотреть, как устроена работа с форматами.

Для кого подойдёт этот конструктор

Visionary пригодится тем, кто работает с Gaussian Splatting и не хочет собирать инструментарий по частям. Если у вас есть набор сплатов из разных источников или нужно быстро скомпоновать сцену с мешами и нейросетевыми аватарами — здесь всё в одном месте.

Опенсорс-формат означает, что можно интегрировать платформу в свой пайплайн или использовать как основу для кастомного редактора. Демо работает стабильно, а активное комьюнити на GitHub подсказывает решения для нестандартных кейсов.