Датасет · MME-Benchmarks
Вторая версия бенчмарка Video-MME для понимания видео
MME-Benchmarks/Video-MME-v2
Обновлённый бенчмарк с видеороликами и аннотациями на английском языке для комплексной оценки видеомоделей.
Что внутри
Репозиторий содержит аннотации и видеоматериалы (от 1 до 10 тысяч примеров) на английском языке для оценки понимания видео. В версии 2026 года видео перекодированы в H265 без изменения метрик, а для вопросов Q1–Q3 на логическую связность добавлена разметка типов задач.
Что можно сделать
- Комплексное тестирование мультимодальных моделей на понимание видеоконтента
- Оценка логической связности ответов VLM при анализе видеоряда
- Задачи
- Видео + текст
- Языки
- Английский
- Размер
- 1K–10K записей
- Скачиваний за месяц
- 13,1 тыс.
- Лайков
- 52
Как загрузить
from datasets import load_dataset
ds = load_dataset("MME-Benchmarks/Video-MME-v2")