К содержимому

Датасет · facebook

Миллион видеороликов с текстовыми описаниями от Meta

facebook/PE-Video

Коллекция из 1 миллиона видео с описаниями и 120 тысячами проверенных аннотаций для обучения видеомоделей.

Что внутри

Масштабный набор данных из 1 миллиона разнообразных видеороликов, представленный в рамках работы над Perception Encoder. Для всех видео есть текстовые описания, а более 120 тысяч клипов дополнительно снабжены автоматическими и проверенными людьми экспертными аннотациями.

Что можно сделать

  • Обучение и оценка мультимодальных энкодеров для связки видео и текста
  • Дообучение VLM-моделей для генерации подробных описаний видеороликов
  • Создание систем семантического поиска по видеоархивам
Размер
100K–1M записей
Скачиваний за месяц
16,2 тыс.
Лайков
54

Модели, обученные на нём

Как загрузить

from datasets import load_dataset

ds = load_dataset("facebook/PE-Video")