GR00T-политика для UR5
захват CPU и укладка в коробку
2 min readupdated
Это обученная в LeRobot политика на базе GR00T N1.7 от NVIDIA — открытой кросс-эмбодимент foundation-модели для роботов. На вход она получает изображение с одной камеры (480×640) и 7-мерное состояние робота (proprioception), а на выходе выдаёт 7-мерный вектор действий для UR5. Чекпоинт обучен под конкретную задачу: вакуумным гриппером поднять CPU и положить его в коробку. Это не универсальная модель, а узкая политика для одного типа робота и одной задачи; оценки успешности на реальном роботе в карточке пока нет. Пригодится тем, кто работает с LeRobot и UR5 и хочет запустить или разобрать пример обучения GR00T-политики.
Ключевые особенности
- В основе — GR00T N1.7: backbone Cosmos-Reason2/Qwen3-VL и flow-matching action transformer.
- Обучена на датасете из 500 эпизодов и 322 402 кадров при 30 FPS.
- Вход: изображение camera (3×480×640) и state (7,); выход: action (7,).
- Robot type — ur5, лицензия apache-2.0.
- Результатов оценки на реальном роботе в карточке нет.
Что можно сделать
- Запустить политику на UR5 через
lerobot-rollout, указав порт робота и камеру, и проверить задачу с вакуумным гриппером. - Использовать чекпоинт как готовый пример пайплайна LeRobot + GR00T для обучения своей политики на своём датасете.
- Разобрать конфигурацию обучения: 20 000 шагов, batch size 64, AdamW и lr 0.0001.
- Снять своё демо или посчитать success rate на реальном роботе — в карточке эти данные пока не заполнены.
Пример
lerobot-rollout \
--strategy.type=base \
--robot.type=ur5 \
--robot.port=<your_robot_port> \
--policy.path=SamerAyyad/VLA_Samer_04.11.2026_500eps_policy_GR00T \
--task='Pick up the CPU with the suction gripper and place it in the box' \
--duration=60
Подробнее
Бенчмарков нет: в карточке указано «No evaluation results».Обучение: 20 000 шагов, batch size 64, AdamW, lr 0.0001, seed 42, LeRobot 0.6.2.
Данные: 500 эпизодов, 322 402 кадра, 30 FPS.
Ограничение: политика под robot type ur5 и одну задачу; перенос на другого робота не заявлен.










Comments