ACT pen pickup
робот берёт колпачок ручки
1 min readupdated
Это ACT-политика для робота типа so_follower, обученная в LeRobot брать колпачок ручки и класть его в размеченную зону. На вход она получает 6-мерное состояние и изображения с камер wrist и front, на выходе — 6-мерный вектор действий. Размер модели — около 50 млн параметров.
Ключевые особенности
- ACT предсказывает короткие чанки действий, а не отдельные шаги.
- Две камеры по 3×480×640 и состояние робота — входные данные политики.
- Выход — 6-мерное действие для робота
so_follower. - Обучение на 20 эпизодах телеоперации: 7804 кадра при 30 FPS.
- 5000 шагов обучения, batch size 8, AdamW, lr 1e-5, LeRobot 0.7.1.
Пример запуска
lerobot-rollout \
--strategy.type=base \
--robot.type=so_follower \
--robot.port=<your_robot_port> \
--policy.path=ayazhan/act_pen_pickup \
--task="Pick up the pen cover and place it in the marked zone." \
--duration=60
Подробнее
Оценки успешности на реальном роботе в карточке нет; лицензия не указана.Для запуска нужны порт робота и камеры, имена которых совпадают с
wrist и front.Обучение: 5000 шагов, batch size 8, AdamW, lr 1e-5, seed 1000.
Требования к VRAM/железу не приведены; размер модели — около 50 млн параметров.










Comments