LibreDepthPro2l-depth
оценка глубины от Apple для LibreYOLO
1 мин чтенияобновлено
Модель объединяет Apple Depth Pro 2 (на архитектуре DINOv3 ViT-L/16) и вспомогательный оценщик фокусного расстояния DepthPro2-focal в одном файле формата LibreYOLO. Инструмент вычисляет метрическую глубину по одному снимку или в потоковом видео, а также определяет внутренние параметры камеры. Оригинальные веса Apple оставлены без изменений, что гарантирует полное совпадение результатов с первоисточником. Решение пригодится исследователям компьютерного зрения и 3D-реконструкции.
Ключевые особенности
- Объединяет чекпоинты
apple/DepthPro2-Lиapple/DepthPro2-focalпод единым интерфейсом LibreYOLO. - Выдаёт метрическую карту глубины в метрах и матрицу пиксельных интринсиков камеры (параметров оптики для OpenCV).
- Веса сохранены без переобучения с побитово идентичным выводом относительно официального кода Apple.
- Лицензия Apple AMLR допускает исключительно некоммерческие научные исследования и разработки.
Что можно сделать
- Построить карту метрической глубины для одиночной фотографии в академическом проекте.
- Запустить оценку глубины в реальном времени для анализа потокового видео.
- Получить матрицу параметров камеры OpenCV (3×3) без предварительной ручной калибровки.
Пример
from libreyolo import LibreYOLO
model = LibreYOLO("LibreDepthPro2l-depth.pt")
result = model.predict("image.jpg")
depth = result.depth_map # метрическая глубина в метрах
K = depth.intrinsics # (3, 3) интринсики камеры OpenCVПодробнее
Архитектура: DINOv3 ViT-L/16 + модуль оценки фокусного расстояния (ключи под префиксомfov.*).Особенности вывода: для пикселей неба возвращается бесконечность (
inf).Лицензия: Apple Machine Learning Research Model License Agreement (только некоммерческое использование).










Комментарии