Ltx-2.3 22b Ic-Lora Motion Track Control
управление движением видео по траекториям
1 мин чтенияобновлено
Эта модель представляет собой IC-LoRA (In-Context LoRA — специальная надстройка для добавления условий генерации «на лету») для базовой модели LTX-2.3-22b, которая позволяет задавать движение объектов в генерируемом видео с помощью разреженных точек и сплайнов. Пользователь передает опорное видео с цветными линиями траекторий или извлекает их через трекеры вроде SpatialTrackerV2, а модель генерирует видео строго по заданному пути. Решение создано для видеодизайнеров, авторов контента и исследователей, которым требуется точный контроль над анимацией и динамикой объектов в кадре.
Ключевые особенности
- Управление движением объектов и областей в видео с помощью сплайнов и точек
- Основана на современной базовой модели LTX-2.3-22b от Lightricks
- Поддержка использования опорных видео для покадрового контроля при инференсе
- Оптимизация за счёт фактора уменьшения разрешения опорного сигнала (Reference Downscale Factor)
Что можно сделать
- Создавать ролики с анимированными траекториями движения объектов через ComfyUI
- Рисовать пути перемещения вручную с помощью специального узла траекторий в ComfyUI
- Использовать трекинг из реальных видео для переноса движения на сгенерированные кадры
Пример
Для запуска в ComfyUI скачайте веса ltx-2.3-22b-ic-lora-motion-track-control-ref0.5.safetensors, поместите их в папку models/loras и используйте узлы LTXICLoRALoaderModelOnly и LTXAddVideoICLoRAGuide.
Подробнее
Базовая модель: LTX-2.3-22b VideoТип обучения: IC LoRA
Коэффициент уменьшения опорного разрешения: 2 (разрешение источника 0.5x от выхода)
Лицензия: LTX-2-community-license










Комментарии