К содержимому

Датасет · HumanBehaviorAtlas

Мультимодальный датасет анализа поведения и эмоций

HumanBehaviorAtlas/human_behavior_atlas

Объединённый корпус из 16 наборов с видео, аудио и текстом для распознавания эмоций, юмора и состояния человека.

Что внутри

Внутри собрано от 100 тысяч до 1 миллиона примеров с видео, аудио, текстами и заранее извлечёнными признаками на английском и китайском языках. Датасет объединяет 16 исходных наборов в единую схему для анализа эмоций, тональности, юмора, психического состояния и ответов на вопросы по видео. На этих данных обучалась базовая модель OmniSapiens.

Что можно сделать

  • Обучение мультимодальных моделей распознаванию эмоций и социальных сигналов
  • Тестирование систем видео-вопросов и анализа тональности речи
Задачи
Классификация видео, Классификация аудио, Классификация текста, Вопрос-ответ, Вопросы по картинкам, Мультимодальные
Языки
Английский, Китайский
Размер
100K–1M записей
Скачиваний за месяц
20 тыс.
Лайков
4

Модели, обученные на нём

Как загрузить

from datasets import load_dataset

ds = load_dataset("HumanBehaviorAtlas/human_behavior_atlas")