Датасет · HumanBehaviorAtlas
Мультимодальный датасет анализа поведения и эмоций
HumanBehaviorAtlas/human_behavior_atlas
Объединённый корпус из 16 наборов с видео, аудио и текстом для распознавания эмоций, юмора и состояния человека.
Что внутри
Внутри собрано от 100 тысяч до 1 миллиона примеров с видео, аудио, текстами и заранее извлечёнными признаками на английском и китайском языках. Датасет объединяет 16 исходных наборов в единую схему для анализа эмоций, тональности, юмора, психического состояния и ответов на вопросы по видео. На этих данных обучалась базовая модель OmniSapiens.
Что можно сделать
- Обучение мультимодальных моделей распознаванию эмоций и социальных сигналов
- Тестирование систем видео-вопросов и анализа тональности речи
- Задачи
- Классификация видео, Классификация аудио, Классификация текста, Вопрос-ответ, Вопросы по картинкам, Мультимодальные
- Языки
- Английский, Китайский
- Размер
- 100K–1M записей
- Скачиваний за месяц
- 20 тыс.
- Лайков
- 4
Модели, обученные на нём
Как загрузить
from datasets import load_dataset
ds = load_dataset("HumanBehaviorAtlas/human_behavior_atlas")