Axon Image 2
быстрые LoRA-адаптеры и обвязка для Qwen-Image-2512
2 min readupdated
Репозиторий от axonlabsai предлагает набор облегчённых LoRA-адаптеров (надстроек над базовой моделью без изменения её основных весов) и вспомогательных скриптов для генерации изображений. Проект построен на базе Qwen-Image-2512 в связке с дистилляцией (ускоренной версией модели) Qwen-Image-2512-Lightning, что позволяет получать картинки всего за 4 шага. В отличие от крупных авторских чекпоинтов, здесь выложены только лёгкие адаптеры ранга 4 и прозрачный пайплайн для воспроизведения и дообучения на своих данных. Инструмент пригодится разработчикам, которые работают с линейкой Qwen-Image через diffusers и хотят ускорить генерацию или использовать готовые скрипты для композиции по нескольким референсам.
Ключевые особенности
- Два варианта адаптеров: версия
flashработает за 4 шага в паре с Lightning-адаптером, аproрассчитана на 40 шагов без дистилляции. - Инструменты для композиции и текста: в репозитории есть
axon_compose.pyдля сборки промптов с поддержкой до 4 референсов иmeme_tools.pyдля наложения точного текста поверх картинки. - Прозрачность обучения: к адаптерам приложены исходные состояния, дельты регуляризации и файлы
training-identity.jsonс хешами SHA-256 и точными ревизиями базовых моделей. - Поддержка редактирования и квантования: предусмотрена работа с
QwenImageEditPlusPipelineна базе Qwen-Image-Edit-2511 и загрузчик весов в формате int8 (axon_w8.py).
Что можно сделать
- Генерировать изображения в разрешении 1024×1024 за 4 шага в
diffusers, комбинируя адаптерflashсQwen-Image-2512-Lightning. - Собирать сложные сцены по нескольким референсным изображениям с помощью скрипта
axon_compose.pyи добавлять читаемые надписи черезmeme_tools.py. - Использовать опубликованный пайплайн как шаблон, чтобы обучить собственный LoRA-адаптер на своих данных и подключить его в тот же слот.
Пример
pipe = QwenImagePipeline.from_pretrained("Qwen/Qwen-Image-2512", torch_dtype=torch.bfloat16).to("cuda")
pipe.load_lora_weights("lightx2v/Qwen-Image-2512-Lightning", weight_name="Qwen-Image-2512-Lightning-4steps-V1.0-bf16.safetensors", adapter_name="lightning")
pipe.load_lora_weights("axonlabsai/axon-image-2-flash-preview", weight_name="models/flash/adapter_model.safetensors", adapter_name="axon")
pipe.set_adapters(["axon", "lightning"], adapter_weights=[1.0, 1.0])
image = pipe(prompt="a matte black studio monitor on a concrete desk, soft rim light", width=1024, height=1024, num_inference_steps=4, true_cfg_scale=1.0).images[0]
Подробнее
Веса базовой модели Qwen-Image-2512 в репозиторий не включены — они подгружаются отдельно.Адаптеры имеют rank 4 и alpha 4, дообучались всего 17 и 21 шаг оптимизатора и дают лишь небольшие сдвиги относительно базы (новых персонажей ждать не стоит).
Автор не публиковал замеры скорости или качества; экспериментальные игровые адаптеры исключены из релиза из-за ограничений авторского права.
Лицензия репозитория: Apache-2.0.










Comments