act_sos101_test_50k
модель робототехники для управления манипулятором
2 мин чтенияобновлено
Эта политика управления обучена с помощью библиотеки LeRobot для реализации метода ACT (Action Chunking with Transformers — метод имитационного обучения, предсказывающий короткие последовательности действий вместо отдельных шагов). Модель управляет роботом-манипулятором типа so_follower на основе визуальных данных с фронтальной камеры и текущего состояния суставов. Она обучена на задаче перемещения красного мяча в черную корзину по демонстрационным записям телеоперации. Полезно исследователям и инженерам, работающим с доступным робототехническим железом на базе LeRobot.
Ключевые особенности
- Совместимость с железом: модель разработана для роботов типа so_follower.
- Визуальный ввод: использует данные с фронтальной камеры с разрешением 480x640.
- Метод ACT: прогнозирует пачки действий для плавного и точного выполнения задач.
- Специализация: обучена на задаче захвата и перемещения красного мяча в черную корзину.
Что можно сделать
- Запуск на роботе: применить готовую политику для управления совместимым роботом-манипулятором в реальном времени.
- Дообучение: использовать датасет из 52 эпизодов для тренировки или кастомизации собственных политик управления.
- Анализ данных: исследовать датасет через визуализатор LeRobot для изучения траекторий движений.
Пример
Запуск готовой политики управления на вашем роботе:
lerobot-rollout \
--strategy.type=base \
--robot.type=so_follower \
--robot.port= \
--robot.cameras="{ : {type: opencv, index_or_path: , width: 640, height: 480, fps: 30}}" \
--policy.path=googaar/act_sos101_test_50k \
--task="Put red ball in black basket" \
--duration=60Подробнее
Число параметров: 0.05 млрдОбучение: 50 000 шагов, батч 8, оптимизатор adamw, learning rate 1e-05
Датасет: 52 эпизода, 29 867 фреймов при 30 FPS










Комментарии