К содержимому

Датасет · 2077AIDataFoundation

Мультимодальный датасет зрительно-тактильных взаимодействий

2077AIDataFoundation/TouchScale

100 часов записей от первого лица с камер и тактильных перчаток для обучения роботов манипуляциям с предметами.

Что внутри

Внутри находятся видеозаписи и текстовые данные на английском языке, объём составляет от 10 до 100 тысяч примеров (100 часов из запланированных 500). Данные собраны с помощью единой системы захвата: налобной RGB-D камеры, двух камер на запястьях и тактильных перчаток с 880 сенсорами (такселями), фиксирующих прикосновения при повседневных действиях руками.

Что можно сделать

  • Обучение мультимодальных моделей (vision-tactile) для робототехники
  • Классификация видео с действиями рук и манипуляциями
  • Симуляция и прогнозирование тактильных ощущений по визуальным данным
Задачи
Робототехника, Классификация видео
Языки
Английский
Размер
10K–100K записей
Скачиваний за месяц
34,5 тыс.
Лайков
21
Доступ
по запросу на Hugging Face

Как загрузить

from datasets import load_dataset

ds = load_dataset("2077AIDataFoundation/TouchScale")