pi05 lw_benchhub_pi05
готовая модель управления роботом
2 мин чтения
Модель основана на архитектуре π₀.₅ (Pi05) от Physical Intelligence и обучена с использованием библиотеки LeRobot для управления роботом типа double_piper. Она обрабатывает визуальные данные с нескольких камер и текущее состояние робота, выдавая управляющие действия для выполнения различных манипуляций на кухне и в быту. Модель создана для инженеров и исследователей в области робототехники, желающих применять методы имитационного обучения (imitation learning) на реальном «железе».
Ключевые особенности
- Разработана для обобщения в открытом мире (open-world generalization) в новых условиях.
- Специализирована под роботов конфигурации
double_piper. - Использует данные с трёх камер (базовой и двух запястных) вместе с состоянием робота.
- Обучена на датасете с более чем 6 миллионами кадров и 6500 эпизодами.
Что можно сделать
- Запустить модель для выполнения бытовых задач управления плитой, посудой и кухонными ящиками.
- Провести инференс и протестировать политику управления (policy) на реальном роботе с помощью CLI-инструментов LeRobot.
- Выполнить дообучение (fine-tune) базовой модели на собственных собранных демонстрациях.
Пример
Запуск готовой политики управления роботом через командную строку:
lerobot-rollout \
--strategy.type=base \
--robot.type=double_piper \
--robot.port= \
--robot.cameras="{ : {type: opencv, index_or_path: , width: 640, height: 480, fps: 30}, : {type: opencv, index_or_path: , width: 640, height: 480, fps: 30}}" \
--policy.path=whosricky/lw_benchhub_pi05 \
--task="L10K3TurnOnTheStoveAndPutTheMokaPotOnIt" \
--duration=60Подробнее
Базовая модель: lerobot/pi05_base (размер около 4.14B параметров).Оптимизатор: adamw с learning rate 2.5e-05, размер батча: 16.
Шаги обучения: 120 000 при частоте кадров 50 FPS.
Лицензия: gemma.










Комментарии