Что это такое?
Набор инструментов для оценки глубины сцены по размытию на фотографиях, не требующий обучения на целевых данных.
FOSSA — исследовательский проект из Princeton Vision & Learning Lab, реализующий метод оценки глубины сцены по степени размытия объектов. Включает код для обучения и оценки модели, а также набор данных ZEDD для тестирования. Проект сопровождается научной...
Для исследователей компьютерного зрения и разработчиков, работающих с 3D-реконструкцией, AR/VR и автономными системами.
Традиционные методы оценки глубины требуют стереокамер, лазерных сканеров или специальных датасетов для обучения, что дорого и сложно внедрять.
Модель анализирует естественное оптическое размытие (дефокус) на снимках с малой глубиной резкости. Алгоритм обучается на синтетически сгенерированных данных и применяется к реальным изображениям без дополнительной донастройки (zero-shot подход). Для работы требуется CUDA-совместимый GPU.
FOSSA — исследовательский проект из Princeton Vision & Learning Lab, реализующий метод оценки глубины сцены по степени размытия объектов. Включает код для обучения и оценки модели, а также набор данных ZEDD для тестирования. Проект сопровождается научной статьёй и онлайн-демо.
Модель использует специально разработанное CUDA-расширение PowerExpPSF для симуляции оптического размытия, что ускоряет обучение в сотни раз.
Стоит пробовать исследователям в области компьютерного зрения для экспериментов с оценкой глубины. Для продакшена потребуется значительная доработка.
Проект свежий (2024), но имеет низкую активность сообщества (29 звёзд, 0 форков и issue). Код выложен полностью, roadmap выполнен.
Карточка собрана по данным GitHub, README и структуре репозитория. Это не официальная документация проекта.
Набор инструментов для оценки глубины сцены по размытию на фотографиях, не требующий обучения на целевых данных.
Для академических исследователей и инженеров, разрабатывающих алгоритмы 3D-реконструкции, AR-приложения или автономные системы.
Если проект подходит под ваш сценарий, можем помочь с установкой, интеграцией, доработкой или аккуратным форком под вашу инфраструктуру.