LTX-2.5-sdnq-4bit
генерация видео со звуком в 4-битном формате
2 мин чтенияобновлено
LTX-2.5-sdnq-4bit — это 4-битная квантованная (сжатая для экономии памяти видеокарты) сборка открытой модели LTX-2.5 от Lightricks в формате для библиотеки diffusers. Она умеет создавать синхронизированные видеоролики и звуковую дорожку по текстовому описанию, картинке или исходному видео, а также подходит для задач симуляции мира. В отличие от тяжеловесного оригинала, эта сборка от автора codeShare позволяет запускать генерацию локально с заметно меньшими требованиями к VRAM. Пригодится разработчикам, видеомейкерам и энтузиастам, которые хотят крутить генерацию видео со звуком на собственном железе без привязки к облачным API.
Ключевые особенности
- 4-битное квантование (SDNQ): веса модели сжаты для снижения потребления видеопамяти при локальном запуске.
- Синхронное видео и аудио: генерирует видеоряд и звуковое сопровождение одновременно из текста, изображений или видео.
- Гибкая архитектура DiT: в состав входят дистиллированный трансформер для быстрой генерации, полная версия SFT, свёрточный и диффузионный декодеры, а также пространственный апскейлер в 2 раза.
- Мультиязычность: заявлена поддержка 9 языков, включая английский, немецкий, французский, испанский, японский, корейский и китайский.
Что можно сделать
- Генерировать короткие видеоролики с готовой озвучкой по текстовому промпту или оживлять статичные иллюстрации без отдельного саунд-дизайна.
- Запускать двухэтапную генерацию в высоком разрешении с помощью встроенного апскейлера
latent_upsamplerи диффузионного декодера. - Развернуть локальный сервис или пайплайн на базе
diffusersна своей инфраструктуре без оплаты за каждую генерацию.
Пример
pip install git+[https://github.com/huggingface/diffusers](https://github.com/huggingface/diffusers)
Подробнее
Облегчённая 4-битная сборка оригинальной LTX-2.5 (оригинальный дистиллированный вариант занимает около 72 ГБ, полный — 110 ГБ).Требуется свежая версия
diffusers из ветки main на GitHub.Лицензия LTX-2.x Community License разрешает бесплатное коммерческое использование при годовой выручке компании менее 10 млн долларов.








Комментарии