К содержимому

Датасет · ember-lab-berkeley

Крупный корпус демонстраций для предобучения роботов

ember-lab-berkeley/robocasa365-pretrain-mg

1615 часов синтетических видео и табличных данных по 60 задачам робототехники в формате LeRobot.

Что внутри

Часть коллекции RoboCasa365 в стандартном формате LeRobot v3.0, содержащая 536 030 эпизодов (более 116 млн кадров при 20 fps, всего 1615 часов) с трёх камер разрешением 256×256 в h264. Данные сгенерированы методом MimicGen путём аугментации человеческих демонстраций для 60 базовых задач (около 10 тысяч демо на задачу) с 720 вариантами текстовых инструкций. Включает видео и табличные данные.

Что можно сделать

  • Предобучить мультимодальную policy-модель или VLA (Vision-Language-Action) для управления роботами
  • Обучить визуально-моторные навыки выполнения 60 атомарных манипуляций по текстовым командам
  • Тестировать алгоритмы имитационного обучения (imitation learning) на больших объёмах синтетики
Задачи
Робототехника
Размер
100M–1B записей
Скачиваний за месяц
20,7 тыс.
Лайков
2

Как загрузить

from datasets import load_dataset

ds = load_dataset("ember-lab-berkeley/robocasa365-pretrain-mg")