Sumi-e LoRA для LTX-2.5
видео в стиле японской живописи тушью
2 мин чтенияобновлено
Это стилевая LoRA (небольшой адаптер над базовой моделью) для видеогенератора Lightricks LTX-2.5 от автора enoky. Она стилизует генерируемые ролики под традиционную японскую живопись тушью суми-э: штрихи чёрной тушью, серые размывки, текстуру рисовой бумаги и обилие пустого пространства. Адаптер обучался только на статичных кадрах, поэтому отвечает исключительно за визуальную подачу, а за плавность движения по-прежнему отвечает базовая модель LTX-2.5. Подойдёт авторам, которым нужна художественная анимация в восточном минималистичном стиле.
Ключевые особенности
- Активация по триггеру: для включения стиля промпт нужно начинать с фразы
sumi-e ink painting,. - Совместимость: веса в формате
.safetensors(rank 32) подходят дляComfyUIи стандартногоltx-pipelines. - Сохранение динамики базы: обучение велось на однокадровых клипах только для видеоветки (self-attention, text cross-attention, feed-forward), поэтому физика и движение остаются родными от LTX-2.5.
- Склонность к крупным планам: датасет состоял из крупных планов, поэтому модель лучше всего работает при явном описании кадрирования в запросе.
Что можно сделать
- Генерировать минималистичные художественные заставки и арт-ролики для соцсетей или видеоэссе с эффектом растекающейся по бумаге туши.
- Создавать анимированные природные зарисовки крупным планом — например, колышущиеся на ветру листья бамбука или ветви деревьев.
- Комбинировать адаптер с базовым трансформером
ltx-2.5-22b-devв ComfyUI, регулируя силу влияния в диапазоне от 0.7 до 1.0.
Пример
uv run python -m ltx_pipelines.ti2vid_one_stage \
--transformer-path models/ltx-2.5/diffusion_models/ltx-2.5-22b-dev-transformer-bf16.safetensors \
--lora sumi-e_ltx-2.5_lora.safetensors 1.0 \
--prompt "sumi-e ink painting, Close-up of bamboo leaves swaying in the wind, wet ink bleeding into rice paper." \
--output-path out.mp4Подробнее
База обучения: трансформер ltx-2.5-22b-dev-transformer-bf16, 2000 шагов (rank 32) через ltx-trainer.Датасет: очищенная подборка синтетических изображений takara-ai/Sumi-e_no_kurozuappu_ink_painting_closeups.
Ограничения: сильный уклон в крупные планы и возможное наследование артефактов генератора, на котором создавался датасет.
Лицензия: LTX-2.x Community License (производная от LTX-2.5).








Комментарии