Qwen3.5-2B AG99Live LoRA

Это LoRA-адаптер для Qwen/Qwen3.5-2B-Base, который по транскрипту речи и контексту генерирует непрерывные движения персонажа в формате JSON для AG99Live. Подходит для Live2D/VTS-аватаров: модель возвращает тайминг и последовательность шагов по осям лица и тела.

🔥 Ключевые особенности

• 🎙 На входе — segment.speech с текущей расшифровкой, плюс необязательные actions, tendency и user.
• 🎞 На выходе только duration_hint_ms (320–15000 мс) и motion_steps с axis_values и duration_weight от 1 до 3.
• 🪞 Поддерживаются оси головы, тела, взгляда, глаз, улыбки, рта и бровей — всего 15 параметров.
• 💻 Загрузка через Transformers и PEFT; нужны системный промпт AG99Live и ограничения структурированного вывода.
• 📚 Обучение: 929 примеров, 3 эпохи, LoRA rank 16, alpha 32; финальный loss — 0.4916.

🎧 Пример

Сценарий из карточки: на вход подаётся JSON с фразой «嗯暴雷在外面» в segment.speech. Модель возвращает duration_hint_ms и шаги движения, например head_yaw: 58.8, body_yaw: 60.1, eye_smile_left/right: 84.1 и mouth_smile: 68.1. Шаги идут по порядку и остаются разреженными: заполняются только оси, которые начинают или меняют движение.

Подробнее

Базовая модель — Qwen/Qwen3.5-2B-Base под Apache License 2.0.
Репозиторий не содержит тренировочных данных.
Допустимые ID осей и диапазоны значений задаются возможностями AG99Live.
Для работы нужны Transformers, PEFT и обвязка AG99Live.