ИзображенияWaveCut
MiniMax-H3-Image-Pruned
меньше веса, те же пиксели
1 мин чтенияобновлено
WaveCut опубликовал прунинг-версию MiniMax-H3-Image для text-to-image. Из чекпоинта удалены веса, которые инференс не использует: размер снизился со 135,3 до 94,1 ГБ, а картинки на той же GPU остаются бит-в-бит идентичными оригиналу. Ничего не квантовали и не дообучали.
🚀 Ключевые особенности
- 🗿 Удалены AdaLN-проекции на 13,0B параметров — их заменили таблицами на 116 МБ.
- 🤖 Текстовый энкодер Qwen3-VL-32B урезан с 64 до 50 decoder layers;
lm_headтоже убран. - 🔥 Трансформер: 33,1B → 20,1B параметров, 66,3 → 40,3 ГБ.
- 👀 Мёртвые строки последнего блока пропускаются только на вычислениях, не на весах.
- 🚀 На RTX PRO 6000 (96 ГБ) ускорение за счёт того, что модели помещаются на GPU без offload.
🤖 Пример
import torch
from minimax_h3_image_pruned import load_pipeline
pipe = load_pipeline("WaveCut/MiniMax-H3-Image-Pruned")
image = pipe(prompt="The image is a top-down photograph of ...",
height=3552, width=4736,
generator=torch.Generator().manual_seed(42),
output="images")[0]Подробнее
На RTX PRO 6000 (96 ГБ), 4736×3552: 26,3 с против 101,2 с у оригинала; пик памяти — 92,6 GiB.Работает только на шестишаговой сетке сэмплирования; SGLang и ComfyUI этот формат не загружают.
Таблицы собраны на RTX PRO 6000 Blackwell — на другом типе GPU возможно расхождение в пределах bfloat16.
Лицензия MiniMax-H3-Image Community: разрешённая территория не включает ЕС, Великобританию, Корею и США.
Комментарии