LiliPixel-V1
компактная модель для генерации пиксель-арта и спрайтов
2 мин чтенияобновлено
LiliPixel-V1 — это диффузионная трансформерная модель (DiT) с 191 миллионом параметров, обученная с нуля генерировать пиксель-арт и спрайты в нативных разрешениях 16x16, 32x32 и 64x64 пикселей. Модель использует текстовый энкодер Voyage-4-nano и поддерживает прозрачный фон для низких разрешений, а также режим реалистичной графики для 64x64. Благодаря скромному размеру она требует всего около 1 ГБ видеопамяти (VRAM) для работы в формате BF16. Инструмент отлично подойдет разработчикам игр и любителям пиксельной графики для быстрой генерации ассетов.
Ключевые особенности
- Обучена с нуля на датасетах пиксель-арта с поддержкой разрешений 16x16, 32x32 и 64x64
- Низкие системные требования: всего около 1 ГБ VRAM для быстрой генерации
- Поддержка прозрачного фона (RGBA) для разрешений 16x16 и 32x32
- Встроенный режим фотореализма для разрешений 64x64 с помощью специального промпта
Что можно сделать
- Генерировать спрайты персонажей и предметов с прозрачным фоном для инди-игр
- Создавать небольшие пиксель-арт пейзажи и сценки в разрешении 64x64
- Быстро экспериментировать с промптами для получения коллекций текстур и иконок
Пример
import torch
from diffusers import DiffusionPipeline
pipe = DiffusionPipeline.from_pretrained(
"Pinkstack/LiliPixel-V1-190M",
custom_pipeline="Pinkstack/LiliPixel-V1-190M",
trust_remote_code=True,
torch_dtype=torch.bfloat16,
).to("cuda")
image = pipe(
prompt="cute border collie dog with a purple colar, transparent background",
height=32, width=32,
num_inference_steps=30,
guidance_scale=3.0,
generator=torch.Generator("cuda").manual_seed(96),
).images[0]
image.save("LiliPixel-image.png")Подробнее
Модель: 191М параметров, архитектура DiT (24 слоя, ширина 768, 16 голов)Требования: ~1 ГБ VRAM, поддержка BF16 inference
Обучение: 132 000 шагов на одной RTX 4080 (126 GPU часов)
Ограничения: сложные сцены и большое число объектов в низком разрешении могут получаться неразборчивыми, рекомендуется генерировать несколько вариантов










Комментарии