MiniMax-H3-ClipProj-GGUF
проекционные веса для текстовых энкодеров
2 мин чтенияобновлено
Данный репозиторий содержит набор проекционных весов в формате GGUF (формат квантования и хранения весов), которые позволяют использовать более компактные текстовые энкодеры Qwen3-VL (например, версий 4B и 8B) вместо стандартного тяжелого энкодера Qwen3-VL-32B в семействе моделей MiniMax-H3. Поскольку модели MiniMax-H3 video, MiniMax-H3-Image и P-H3-Image используют общую 5,120-мерную текстовую обусловленность, одна матрица проекции подходит для всех трех вариантов. Сами модели генерации, базовые энкодеры и VAE в комплект не входят. Инструмент пригодится разработчикам и энтузиастам, желающим оптимизировать запуск генеративных моделей MiniMax-H3 на имеющемся железе.
Ключевые особенности
- Совместимость с моделями MiniMax-H3 video, MiniMax-H3-Image и P-H3-Image благодаря единому формату текстового кондиционирования.
- Поддержка энкодеров разного размера: от актуальных версий Qwen3-VL-4B и Qwen3-VL-8B до устаревших вариантов Qwen3-VL-2B.
- Наличие двух архитектурных вариантов для матриц: стандартные проекции (например, Ridge) и более крупные MLP-версии.
- Точное сохранение тензорной точности исходных весов без дополнительного квантования.
Что можно сделать
- Запустить генерацию видео или изображений с моделями MiniMax-H3, используя уменьшенный текстовый энкодер для экономии ресурсов.
- Собрать форк stable-diffusion.cpp от Romara Labs с поддержкой патчей для подключения кастомных весов.
- Настроить параметры командной строки с флагами --llm и --cliproj для интеграции матриц в процесс генерации.
Пример
Пример использования весов и текстового энкодера в командной строке при запуске генерации:
--llm /path/to/qwen3-vl-4b.gguf \
--cliproj /path/to/mmh3-4b-ClipProj-v3.1.ggufПодробнее
Проекционные веса откалиброваны на видеопромптах.Текстовый ввод работает и для генерации картинок, но качество в этом режиме систематически не проверялось.
Лицензирование подчиняется условиям MiniMax H3 Community License Agreement.














Комментарии