ИзображенияLibreYOLO
LibreFlowSeekl-flow
оптический поток на базе Depth Anything V2
1 мин чтения
LibreFlowSeekl-flow — это чекпоинт FlowSeek для задачи оптического потока, перепакованный под task flow в LibreYOLO. Внутри — ResNet-34 для контекстной и feature-сетей, замороженный энкодер Depth Anything V2 ViT-B (Base) и 12 итераций refinement. Обученные параметры не менялись, только метаданные под схему LibreYOLO.
🔥 Ключевые особенности
- 🦾 Архитектура FlowSeek: ResNet-34 + Depth Anything V2 ViT-B (Base) + 12 итераций refinement.
- ✅ Чекпоинт самодостаточный: энкодер Depth Anything V2 уже встроен.
- ⬇ Подходит для оценки оптического потока между последовательными кадрами: N кадров дают N − 1 потоков.
- 🤝 Перепакован для LibreYOLO, но веса оставлены без изменений.
- ♥ Только некоммерческое использование: встроенный энкодер под CC BY-NC 4.0.
😎 Пример
from libreyolo import LibreYOLO
model = LibreYOLO("LibreFlowSeekl-flow.pt")
results = model(["frame_000.png", "frame_001.png"]) # N frames give N - 1 flows
flow = results[0].flow.data # (H, W, 2) float32, pixels, (dx, dy)
Подробнее
Бенчмарков в карточке нет; upstream оценивает generalist-чекпоинт на Spring и LayeredFlow.Обучение: TartanAir → Chairs and Things → смешанный fine-tune на Sintel + KITTI + HD1K + Things.
Лицензия: параметры FlowSeek — Apache 2.0, но встроенный Depth Anything V2 Base — CC BY-NC 4.0, коммерческое использование запрещено.
Варианты t и s используют Apache-2.0 Small encoder и не имеют такого ограничения.
Требования к VRAM в карточке не указаны.
Комментарии
Без регистрации: достаточно имени.