ACE-Step 1.5 XL SFT 4B LM

Это 4B LM-компонент открытой музыкальной модели ACE-Step 1.5 (SFT), построенный на Qwen3-4B. Проект co-led ACE Studio и StepFun: языковая модель превращает пользовательский запрос в подробный blueprint песни — от коротких лупов до композиций на 10 минут — и направляет DiT-синтез.

🔥 Ключевые особенности

• 💵 Commercial-ready: сгенерированную музыку можно использовать в коммерческих целях; лицензия MIT.
• 📚 Обучение на лицензированной музыке, royalty-free/no-copyright данных и синтетическом аудио из MIDI-to-Audio.
• ⚡ Полная песня генерируется менее чем за 2 секунды на A100 и менее чем за 10 секунд на RTX 3090.
• 💻 Локальный запуск возможен с менее чем 4 ГБ VRAM.
• 🌎 Соблюдение промптов на 50+ языках; поддерживаются cover, repainting и vocal-to-BGM.
• 🎧 LM 4B: сильные audio understanding, composition и copy melody, CoT-метаданные, текст и captions, query rewrite.

💻 Пример

Пользовательский запрос → LM строит blueprint песни с метаданными, текстом и описанием → DiT синтезирует аудио. Сценарий покрывает как короткие лупы, так и композиции до 10 минут.

Подробнее

Полная песня: менее 2 с на A100 и менее 10 с на RTX 3090.
Локальный запуск: менее 4 ГБ VRAM.
LM 4B на базе Qwen3-4B: сильные audio understanding, composition и copy melody.
Лицензия MIT; проект co-led ACE Studio и StepFun.