jhd0313/diffusion_move-box
Политика управления для роборуки
1 мин чтенияобновлено
Модель обучена с помощью библиотеки LeRobot для решения задачи перемещения предметов (в частности, коробки) манипулятором соробота. Она использует подход Diffusion Policy (метод, представляющий контроль движений как процесс диффузии для создания плавных и согласованных траекторий). Модель принимает на вход состояние робота и изображения с двух камер (накладной и на запястье), выдавая управляющие действия. Полезно исследователям и инженерам, работающим с робототехникой на базе LeRobot.
Ключевые особенности
- Базируется на концепции Diffusion Policy для точного контактного управления
- Использует две камеры: накладную (overhead) и на запястье (wrist)
- Обучена на датасете из 50 эпизодов (10668 кадров при 30 FPS)
- Разработана и экспортирована с использованием экосистемы LeRobot
Что можно сделать
- Запустить готовую политику управления на вашем роботе so_follower
- Проанализировать датасет траекторий движений в пространстве LeRobot
- Дообучить модель на собственных демонстрациях для новых сценариев манипуляции
Пример
Запуск готовой политики управления на роботе через консольную утилиту:
lerobot-rollout \
--strategy.type=base \
--robot.type=so_follower \
--robot.port= \
--robot.cameras="{ overhead: {type: opencv, index_or_path: 0, width: 640, height: 480, fps: 30}, wrist: {type: opencv, index_or_path: 1, width: 640, height: 480, fps: 30}}" \
--policy.path=jhd0313/diffusion_move-box \
--task="Move the box" \
--duration=60Подробнее
Лицензия: apache-2.0Тип робота: so_follower
Параметры обучения: 5000 шагов, размер батча 8, оптимизатор adam, learning rate 0.0001
Фреймворк: LeRobot v0.6.0










Комментарии