Датасет · MLVU
Бенчмарк на понимание длинных видео (MLVU)
MLVU/MVLU
Тестовый набор и разметка на английском языке для оценки способности нейросетей анализировать длинные видеоролики.
Что внутри
Репозиторий содержит аннотации и код для оценки моделей в рамках бенчмарка MLVU, посвящённого пониманию длинных видео (задача question-answering на английском языке). Тестовая выборка включает 11 различных типов задач, в том числе вопросы по спортивным видео (SQA) и обучающим роликам (Tutorial).
Что можно сделать
- Тестирование мультимодальных моделей (Video-LLM) на понимание длинного видеоконтента
- Оценка качества ответов на вопросы по обучающим и спортивным видеозаписям
- Задачи
- Вопрос-ответ
- Языки
- Английский
- Скачиваний за месяц
- 26,2 тыс.
- Лайков
- 48
- Доступ
- по запросу на Hugging Face
Как загрузить
from datasets import load_dataset
ds = load_dataset("MLVU/MVLU")