К содержимому

Датасет · PerceptronAI

Эгоцентрический видео-бенчмарк домашних дел

PerceptronAI/EgoHome

Бенчмарк видео от первого лица с плотной разметкой действий рук и субсекундными сегментами от 100 мс.

Что внутри

Внутри 137 видеоклипов домашних дел от первого лица общей длительностью около 2 часов (1920×1080, 30 fps) на английском языке. Каждое видео вручную размечено четырьмя типами аннотаций: рамки рук (bounding boxes), подзадачи, действия рук и их текстовые описания, включая сверхкороткие сегменты от 100 мс. Данные представлены в виде видео, текста и таблиц.

Что можно сделать

  • Оценка мультимодальных видеомоделей на понимание бытовых действий с высокой временной точностью
  • Обучение детекторов рук и моделей распознавания мелких манипуляций в видео от первого лица
  • Тестирование систем генерации плотных описаний действий (dense video captioning)
Задачи
Классификация видео, Детекция объектов
Языки
Английский
Размер
до 1K записей
Скачиваний за месяц
2,4 тыс.
Лайков
4

Как загрузить

from datasets import load_dataset

ds = load_dataset("PerceptronAI/EgoHome")