LoongForge-GR00T-N1.7-LIBERO
VLA-политика для четырёх наборов LIBERO
2 min readupdated
LoongForge-GR00T-N1.7-LIBERO — это четыре SFT-чекпоинта для vision-language-action (VLA) модели GR00T-N1.7, по одному на наборы LIBERO: spatial, object, goal и 10. Каждый чекпоинт — дообучение nvidia/GR00T-N1.7-3B: бэкбон Qwen3-VL / Cosmos-Reason2-2B обрабатывает инструкцию, изображения с внешней и кистевой камер и состояние робота, а flow-matching diffusion transformer (DiT) предсказывает будущие действия. На выходе — 7-мерные дельта-команды энд-эффектора блоками по 16 шагов; при оценке выполняется 8 шагов, затем перепланирование. Обучение воспроизводит официальный рецепт NVIDIA Isaac-GR00T, но выполнено в LoongForge; пригодится для запуска LIBERO и работы с готовыми политиками.
Ключевые особенности
- Четыре независимых чекпоинта под libero_spatial, libero_object, libero_goal и libero_10.
- На входе: текстовая инструкция, внешняя и wrist-камера, 8-мерное состояние робота.
- 7D delta end-effector команды в OSC_POSE, чанки по 16 шагов, выполнение по 8 шагов.
- Чекпоинты в FP32, ~12.5 ГБ каждый; 3,455,180,928 параметров.
- Обучение в LoongForge по рецепту NVIDIA: 20 000 итераций, batch 640, bf16.
Что можно сделать
- Запустить оценку одного из наборов LIBERO через конфиги LoongForge.
- Подставить путь к нужному suite-каталогу в
libero_<suite>.yaml. - Сравнить поведение с официальными чекпоинтами nvidia/GR00T-N1.7-LIBERO.
- Прогнать политику в симуляторе LIBERO на 10 задачах каждого suite.
Пример
benchmark:
suite: libero_spatial
max_steps: 720
model:
backend: loongforge
model_type: Gr00tN1d7
server:
ckpt_path: /path/to/libero_spatial
Подробнее
4 чекпоинта: libero_spatial, libero_object, libero_goal, libero_10; каждый — отдельный SFT.FP32, 3,455,180,928 параметров, ~12.5 ГБ на чекпоинт.
Обучение: 20 000 итераций, глобальный batch 640 (80×8 GPU), bf16, seed 42.
Политика выдаёт 16 шагов, при оценке выполняется 8 до перепланирования.
Данные: LeRobot v2.1, 20 fps, robot_type=franka; чисел успеха на LIBERO в карточке нет.










Comments