MiniMax-H3 Turbo
генерация видео со звуком из текста, фото и референсов
2 мин чтенияобновлено
MiniMax-H3 Turbo от команды lightx2v создаёт видеоролики сразу со звуковой дорожкой на основе текстовых описаний, картинок или референсных материалов. Модель работает на базе фреймворка инференса (запуска нейросетей) LightX2V и ориентирована на быструю генерацию мультимодального контента и AI-аватаров. В отличие от классических видеомоделей без звука, здесь аудио и видеоряд формируются в едином процессе. Релиз пригодится создателям контента, разработчикам и тем, кто строит пайплайны для генерации роликов.
Ключевые особенности
- Генерация видео со звуком сразу в трёх режимах: Text-to-Audio/Video, Image-to-Audio/Video и Omni-Reference Audio/Video.
- Поддержка локального инференса через официальный репозиторий GitHub и скрипты в составе фреймворка LightX2V.
- Возможность запуска в облаке через платформу LightX2V Studio без локальной настройки GPU.
- Поддержка оркестрации и переиспользования рабочих процессов (workflows) для создания AI-аватаров.
Что можно сделать
- Генерировать ролики с говорящими AI-аватарами и мультимодальным контентом для соцсетей или презентаций.
- Оживлять статичные изображения с добавлением подходящей звуковой дорожки по текстовому промпту.
- Создавать видеоролики по заданным референсным материалам (режим Omni-Reference) для сохранения стиля или объектов.
- Встроить генерацию аудио и видео в собственные сервисы и приложения через LightX2V Studio API или локальный инференс.
Пример
Типовой сценарий работы с моделью: выберите задачу Image-to-Audio/Video или Omni-Reference Audio/Video, загрузите исходное изображение или референсы, задайте текстовый промпт и параметры генерации — на выходе получится готовый видеоролик со встроенной звуковой дорожкой.
Подробнее
Библиотека:minimax-h3 (фреймворк LightX2V).Поддерживаемые режимы: Text-to-Audio/Video, Image-to-Audio/Video, Omni-Reference Audio/Video.
Локальный запуск и спецификации модели вынесены в GitHub-репозитории
ModelTC/Minimax-H3-Turbo и ModelTC/LightX2V.В карточке не указаны точное количество параметров, требования к VRAM и цифры бенчмарков.














Комментарии