so101_smolvla_exp06
SmolVLA-политика для SO101
1 мин чтенияобновлено
Это файнтюн компактной vision-language-action модели SmolVLA от LeRobot для робота so101_follower. Политика обучена имитационному управлению на датасете Orellius/so101_sort_cubes_no_top: захватить фиолетовый куб и положить его в картонную коробку, игнорируя остальные объекты. На входе — состояние (6,) и изображение с фронтальной камеры (3, 480, 640), на выходе — действие (6,).
Ключевые особенности
- База —
lerobot/smolvla_base, лицензия apache-2.0. - Одна камера
frontи 6-мерное состояние робота. - Конкретная задача: сортировка кубиков, фиолетовый куб в коробку.
- Датасет: 77 эпизодов, 54 777 кадров, 30 FPS.
- Обучение: 15 000 шагов, batch size 16, AdamW, lr 1e-4.
Пример запуска
Команда для lerobot-rollout; подставьте свой порт робота и камеры.
lerobot-rollout \
--strategy.type=base \
--robot.type=so101_follower \
--robot.port=<your_robot_port> \
--policy.path=hubnemo/so101_smolvla_exp06_fixed_bs16_steps15k_r16_a32 \
--task="Grab the purple cube and put it into the cardboard box, ignore the other objects" \
--duration=60
Подробнее
ПодробнееОбучение: 15 000 шагов, batch size 16, AdamW, lr 1e-4, seed 1000, LeRobot 0.7.1.
Датасет: 77 эпизодов, 54 777 кадров, 30 FPS.
Робот:
so101_follower, камера front; вход state (6,) и изображение (3, 480, 640), выход action (6,).Результатов оценки на реальном роботе в карточке нет.










Комментарии