К содержимому

Датасет · Video-Reason

1 миллион видеоклипов для обучения видео-рассуждениям

Video-Reason/VBVR-Dataset

Масштабный тренировочный датасет из 1 млн видеороликов с текстовыми промптами и кадрами для задач video reasoning.

Что внутри

Обучающая выборка из пакета Very Big Video Reasoning (VBVR), включающая 1 000 000 видеоклипов на английском языке, созданных с помощью 100 генераторов задач на рассуждение (по 10 000 примеров на каждый). Каждый элемент содержит видеоролик, начальный и конечный кадры, а также текстовый промпт для логического вывода.

Что можно сделать

  • Обучение мультимодальных моделей (VLM) логическому анализу и рассуждениям по видео
  • Тренировка моделей предсказания развития событий между начальным и конечным кадрами
  • Файнтюнинг систем видео-вопрос-ответ (VideoQA) на сложных синтетических сценариях
Задачи
Классификация видео, Вопросы по картинкам, Видео + текст
Языки
Английский
Размер
1M–10M записей
Скачиваний за месяц
496
Лайков
58

Модели, обученные на нём

Как загрузить

from datasets import load_dataset

ds = load_dataset("Video-Reason/VBVR-Dataset")