К содержимому

Датасет · MME-Benchmarks

Вторая версия бенчмарка Video-MME для понимания видео

MME-Benchmarks/Video-MME-v2

Обновлённый бенчмарк с видеороликами и аннотациями на английском языке для комплексной оценки видеомоделей.

Что внутри

Репозиторий содержит аннотации и видеоматериалы (от 1 до 10 тысяч примеров) на английском языке для оценки понимания видео. В версии 2026 года видео перекодированы в H265 без изменения метрик, а для вопросов Q1–Q3 на логическую связность добавлена разметка типов задач.

Что можно сделать

  • Комплексное тестирование мультимодальных моделей на понимание видеоконтента
  • Оценка логической связности ответов VLM при анализе видеоряда
Задачи
Видео + текст
Языки
Английский
Размер
1K–10K записей
Скачиваний за месяц
13,1 тыс.
Лайков
52

Как загрузить

from datasets import load_dataset

ds = load_dataset("MME-Benchmarks/Video-MME-v2")