Модель act_box_all
управление роборукой для сортировки предметов
1 мин чтенияобновлено
Эта политика (policy — обученная модель для управления роботом) обучена с помощью библиотеки LeRobot для роборуки типа so_follower. Она решает задачу перемещения красных кубиков и коробок по заданному сценарию. Модель предсказывает короткие последовательности действий (action chunks) на основе данных телеуправления, объединяя визуальные наблюдения с камеры и текущее состояние манипулятора. Инструмент пригодится разработчикам и исследователям робототехники, использующим экосистему LeRobot.
Ключевые особенности
- Использует две камеры (сверху и на запястье робота) с разрешением 480x640.
- Управляет 6 степенями свободы роборуки.
- Обучена на датасете из 105 эпизодов (около 39 тысяч кадров).
- Базируется на алгоритме Action Chunking with Transformers (ACT).
Что можно сделать
- Запустить готовую политику для перемещения кубиков на вашем роботе so_follower.
- Проанализировать датасет тренировки через визуализатор LeRobot.
- Дообучить модель на собственных демонстрациях для новых задач манипуляции.
Пример
Запуск готовой политики для робота:
lerobot-rollout \
--strategy.type=base \
--robot.type=so_follower \
--robot.port= \
--policy.path=charlilou/act_box_all \
--task="Put the red cube 3" \
--duration=60Подробнее
Оптимизатор: adamwLearning rate: 1e-05
Batch size: 16
Шагов обучения: 19000
Частота кадров: 30 FPS










Комментарии