Что это такое?
Веб-интерфейс для запуска модели WorldMirror 2.0 от Tencent, которая по изображениям или видео восстанавливает трёхмерную сцену в виде гауссовых сплатов, облака точек, глубины, нормалей и поз камер.
Скрипт установки (install.bat/install.sh) создаёт виртуальное окружение, ставит CUDA-совместимый PyTorch, компилирует gsplat под вашу архитектуру GPU и запускает бэкенд на FastAPI и фронтенд на Vite + TypeScript. После запуска открывается веб-страница с...
Разработчикам, исследователям компьютерного зрения и энтузиастам 3D, которые хотят быстро протестировать современную модель реконструкции на своём NVIDIA GPU (включая Blackwell) без ручной настройки зависимостей.
Модели вроде WorldMirror 2.0 сложно установить и запустить локально: требуются конкретные версии PyTorch, CUDA, ручная компиляция библиотек, нет готового UI. Этот проект решает проблему, предоставляя готовый веб-интерфейс с автоматической установкой и настройкой под любую видеокарту.
Скрипт установки (install.bat/install.sh) создаёт виртуальное окружение, ставит CUDA-совместимый PyTorch, компилирует gsplat под вашу архитектуру GPU и запускает бэкенд на FastAPI и фронтенд на Vite + TypeScript. После запуска открывается веб-страница с галереей из 22 готовых примеров или полем для загрузки своих изображений/видео. Вы выбираете сцену или бросаете файлы, нажимаете «Run inference» — и система...
HY-World 2.0 Playground — это open-source Web UI для локального запуска модели WorldMirror 2.0 от Tencent. Он упаковывает всю инфраструктуру в простой установщик, предоставляет удобный интерфейс для выбора входных данных (примеры или загрузка), визуализирует все выходные модальности (сплаты, облака точек, глубину, нормали, камеры) и хранит историю запусков. Проект специально адаптирован для работы на GPU Blackwell и...
Проект автоматически определяет архитектуру вашей видеокарты и компилирует gsplat под неё — даже под новейшие Blackwell GPU, которые в оригинальном torch 2.4 ещё не поддерживались.
Стоит попробовать, если вы хотите локально поэкспериментировать с современной 3D-реконструкцией без головной боли с установкой. Проект отлично документирован, имеет готовые примеры и понятный интерфейс. Для продакшена пока маловато звёзд и сообщества, но как исследовательский инструмент — очень удобен.
Проект активно поддерживается: последние коммиты за последние недели, но сообщество пока небольшое (13 звёзд). Адаптация для Blackwell и Windows выглядит качественной.
Карточка собрана по данным GitHub, README и структуре репозитория. Это не официальная документация проекта.
Веб-интерфейс для запуска модели WorldMirror 2.0 от Tencent, которая по изображениям или видео восстанавливает трёхмерную сцену в виде гауссовых сплатов, облака точек, глубины, нормалей и поз камер.
Для разработчиков, исследователей и энтузиастов, работающих с 3D-реконструкцией, которые хотят локально протестировать модель без сложной настройки зависимостей.
Рекомендуется NVIDIA GPU с поддержкой CUDA, включая архитектуру Blackwell. Проект автоматически подбирает архитектуру для компиляции gsplat.
Нет, достаточно запустить install.bat (Windows) или install.sh (Linux/WSL) — скрипт сам создаст окружение, установит зависимости и скачает веса модели с Hugging Face.
Если проект подходит под ваш сценарий, можем помочь с установкой, интеграцией, доработкой или аккуратным форком под вашу инфраструктуру.