G1-Wheel
датасет и чекпоинты для бимануальной манипуляции робота Unitree G1
2 мин чтенияобновлено
Набор данных и готовых весов обучения с подкреплением (reinforcement learning) для человекоподобного робота Unitree G1 с двумя пятипалыми кистями OYMotion ROHands в симуляторе Isaac Lab 2.3 / Isaac Sim 5.1. Модель учит робота брать рулевое колесо со стола левой рукой, передавать его в воздухе в правую руку и укладывать в корзину. В основе лежит подход M4PO: модель предсказывает остаточную поправку (residual) поверх замороженной базовой политики behavioral cloning (обучения с учителем на демонстрациях), построенной на методе flow-matching. Репозиторий пригодится исследователям робототехники для экспериментов с бимануальной передачей предметов и переносом навыков в симуляции.
Ключевые особенности
- Полное управление 31-мерным пространством действий робота, включая руки, хваты кистей, пояс и ноги.
- Крупный обучающий датасет
g1_wheel_v4.npzна 638 436 пар «состояние — действие» для базовой политики. - Два готовых чекпоинта: замороженная flow-matching BC база (
flow.pt) и полный чекпоинт M4PO (step_192000.pt) с моделью мира, актором и критиками. - В комплекте идут USD-ассеты робота Unitree G1, кистей ROHand и самой сцены со столом, рулём и корзиной.
Что можно сделать
- Воспроизвести эксперимент по перехвату рулевого колеса в воздухе в среде Isaac Lab 2.3 / Isaac Sim 5.1, объединив файлы репозитория с архивом кода
G1-Wheel-code.zip. - Использовать датасет из 638 тысяч шагов для обучения собственных политик имитации и сравнить их с базовой моделью
flow.pt. - Дообучить политику M4PO для перехода к более сложным уровням баланса, где поддержка таза минимальна или полностью отключена.
Пример
hf download Ozzey/G1-Wheel --local-dir G1-WheelПодробнее
Оценка успешности M4PO (64 эпизода на уровень): L2 (полная поддержка таза) — 81.3 %, L3 (поддержка 50 %) — 82.8 %, L4 (поддержка 20 %) — 40.6 %, L5 (свободное стояние) — 0 %.Для запуска симуляции требуются Isaac Lab 2.3 / Isaac Sim 5.1 и отдельный архив
G1-Wheel-code.zip, в корень которого распаковываются папки репозитория.Чекпоинт
step_192000.pt включает веса world model, actor, critics и состояния оптимизаторов.









Комментарии