LibreMEMFOFm-flow-tartan-t

Это MEMFOF (Tartan-T) от LibreYOLO — модель трёхкадрового optical flow, переупакованная для библиотеки LibreYOLO. Она читает кадры t-1, t и t+1 и предсказывает backward и forward поток для кадра t. В LibreYOLO это семейство LibreMEMFOF задачи flow, вариант size m, variant tartan-t.

💪 Ключевые особенности

• 👀 Трёхкадровый optical flow: на вход t-1, t, t+1, на выходе backward и forward поток для кадра t.
• 💪 Интеграция с LibreYOLO: задача flow, семейство LibreMEMFOF, результат доступен как Results.flow.
• 👉 Формат потока: (H, W, 2) в пикселях на исходном холсте изображения; to_rgb() даёт цветовое колесо Middlebury.
• 🤫 Веса не менялись: только metadata wrap в LibreYOLO v1.0 checkpoint, upstream model.safetensors тот же.
• 🔥 Настройки инференса как у upstream: fp32, 8 итераций уточнения, нативное разрешение с replicate padding до кратности 16.

🐱 Пример

from libreyolo import LibreYOLO

model = LibreYOLO("LibreMEMFOFm-flow-tartan-t.pt")
results = model(["frame_000.png", "frame_001.png", "frame_002.png"])  # 3 frames in, 2 results out
flow = results[0].flow.data       # (H, W, 2), dx and dy in pixels
rgb = results[0].flow.to_rgb()    # Middlebury colour wheel

Подробнее

Бенчмарков и требований к VRAM в карточке нет.
Это второй опубликованный этап обучения: fine-tune от MEMFOF-Tartan; веса upstream не изменены, только metadata wrap.
Инференс: fp32, 8 итераций уточнения, нативное разрешение с replicate padding до кратности 16.
Лицензия BSD 3-Clause; лицензия весов отдельно upstream не указана и наследуется от кода.