ИзображенияLibreYOLO
LibreFlowSeekm-flow
оптический поток с depth-энкодером
1 мин чтения
Это оптический поток FlowSeek, перепакованный LibreYOLO для задачи flow. Внутри — ResNet-34 для контекста и признаков, замороженный энкодер Depth Anything V2 ViT-B (Base) и 4 итерации уточнения. Чекпойнт самодостаточный: энкодер встроен.
🧬 Ключевые особенности
- ⚙ Репаковка в схему LibreYOLO checkpoint schema v1.0; обученные параметры не менялись.
- 🧩 Тот же набор весов, что у LibreFlowSeekl-flow, но с другим числом итераций — как в upstream
flowseek-M.json. - 🛑 Только non-commercial: встроенный Depth Anything V2 Base под CC BY-NC 4.0.
- 💡 Версии t и s используют Apache-2.0 Small-энкодер и не имеют такого ограничения.
- 📀 Источник — mattpoggi/flowseek; обучение на TartanAir, Chairs and Things и mixed fine-tune Sintel + KITTI + HD1K + Things.
🧩 Пример
from libreyolo import LibreYOLO
model = LibreYOLO('LibreFlowSeekm-flow.pt')
results = model(['frame_000.png', 'frame_001.png']) # N frames give N - 1 flows
flow = results[0].flow.data # (H, W, 2) float32, pixels, (dx, dy)
Подробнее
4 итерации уточнения; веса общие с LibreFlowSeekl-flow, отличается только число итераций.Коммерческое использование запрещено из-за CC BY-NC 4.0 у Depth Anything V2 Base.
Требования к VRAM и бенчмарки в карточке не указаны.
Комментарии
Без регистрации: достаточно имени.