WorldExplorer решает одну конкретную задачу: превращает обычный текст в полноценные 3D-миры, по которым можно ходить и которые можно изучать со всех сторон. Это как если бы ваши слова материализовались в виртуальной реальности.
Как работает генерация 3D-сцен из текста
Процесс создания трёхмерного мира происходит в несколько этапов. Сначала нейросеть рисует основное изображение по вашему описанию, затем генерирует дополнительные ракурсы той же сцены. На финальной стадии все эти виды собираются в единую 3D-сцену с помощью технологии гауссовых сплатов.
Такой подход позволяет создавать объёмные миры, которые выглядят естественно с любой точки обзора. Вы получаете не статичную картинку, а настоящую трёхмерную среду для исследования.
Интерактивный просмотр готовых миров
На сайте проекта можно протестировать технологию на готовых примерах. Интерактивный просмотрщик даёт возможность перемещаться по сгенерированным локациям, поворачивать камеру и рассматривать детали с разных углов.
Результат получается менее кинематографичным, чем у некоторых аналогов, но зато работает честно - без приукрашивания и маркетинговых уловок. То, что вы видите в демо, то и получите при самостоятельном использовании.
Время генерации и технические требования
На видеокарте RTX 3090 создание каркаса сцены занимает около 5 минут в быстром режиме. Полная генерация качественного 3D-мира требует 6-7 часов. Это довольно долго, но учитывая сложность задачи - вполне разумно.
Проект доступен через GitHub, что означает открытый исходный код и возможность запуска на собственном оборудовании. Никаких подписок или ограничений - только ваше железо и терпение.
Блог