GR00T N1.7 для робота-манипулятора
модель для задачи перемещения кубика
2 мин чтения
Новая рабочая политика (policy) для управления робототехникой, обученная на базе архитектуры GR00T N1.7 от NVIDIA. Модель создана для того, чтобы робот мог выполнять точные действия на основе данных с камер и состояния манипулятора. Она обучена с помощью библиотеки LeRobot и специализируется на базовой задаче захвата и перемещения предметов. Полезно исследователям и инженерам, работающим с физическими роботами-манипуляторами.
Ключевые особенности
- Основа GR00T N1.7: базируется на передовой архитектуре NVIDIA для гуманоидных роботов и робототехнических задач.
- Мультимодальный ввод: обрабатывает данные с двух камер (голова и стол) и текущее состояние робота.
- Узкая специализация: модель натренирована на задачу переноса кубика в коробку.
- Интеграция с LeRobot: полностью поддерживается экосистемой LeRobot для быстрого запуска и дообучения.
Что можно сделать
- Запустить на роботе: применить готовую политику для выполнения задачи складывания кубика в коробку с помощью скрипта rollout.
- Использовать датасет: изучить обучающие демонстрации и траектории из связанного набора данных cube_task_v1.
- Дообучить модель: использовать собранные эпизоды для адаптации робота под новые сценарии и окружения.
Пример
Запуск готовой политики на вашем роботе с помощью консольной утилиты LeRobot:
lerobot-rollout \
--strategy.type=base \
--robot.type=so_follower \
--robot.port= \
--robot.cameras="{ head: {type: opencv, index_or_path: 0, width: 640, height: 480, fps: 30}, table: {type: opencv, index_or_path: 1, width: 640, height: 480, fps: 30}}" \
--policy.path=ButteredWaffle/cube_task_v1_groot_n17 \
--task="Put the cube in the box" \
--duration=60Подробнее
Лицензия: apache-2.0Тип робота: so_follower (камеры: head, table)
Данные обучения: 75 эпизодов, 37058 фреймов на частоте 30 FPS
Параметры обучения: 7000 шагов, batch size 4, оптимизатор adamw (lr=0.0001)










Комментарии