TeachMaster Coder
генератор учебных анимаций на TSX
2 мин чтенияобновлено
Новая LoRA-модель на базе Qwen/Qwen3.8-27B превращает текстовые лекции, структуру урока и JSON с описанием картинок в готовый исполняемый код на React и Remotion (TSX) для создания анимированных учебных видео. Адаптер обучен строго на китайских учебных материалах и структурирует материал в виде заголовков, диаграмм, формул и визуальных блоков на холсте 1920x1080. Разработка пригодится разработчикам и авторам образовательного контента, желающим автоматизировать вёрстку и анимацию слайдов.
Ключевые особенности
- Базовая модель: обучена поверх Qwen/Qwen3.8-27B с использованием архитектуры Qwen3_5ForConditionalGeneration.
- Генерация TSX: превращает разметку лекций в компоненты для Remotion с покадровой анимацией.
- Работа с ассетами: интегрирует изображения по заданным путям через
staticFileи JSON-планирование. - Параметры обучения: ранг LoRA 64, alpha 128 с целевыми модулями
q_proj,k_proj,v_projиo_proj.
Что можно сделать
- Сборка роликов: применить модель в пайплайне для автоматического превращения текстовых конспектов в видеослайды.
- Визуализация формул: генерировать код для математических блоков, схем и таймлайнов обучения.
- Интеграция с Remotion: использовать полученный TSX-код в проектах Remotion для рендеринга учебных роликов.
Пример
import torch
from peft import PeftModel
from transformers import AutoTokenizer, Qwen3_5ForConditionalGeneration
base_id = "Qwen/Qwen3.8-27B"
adapter_id = "posprivacy/teachmaster-qwen38-27b-lora"
tokenizer = AutoTokenizer.from_pretrained(adapter_id)
base = Qwen3_5ForConditionalGeneration.from_pretrained(
base_id,
dtype=torch.bfloat16,
device_map="auto",
attn_implementation="sdpa",
)
model = PeftModel.from_pretrained(base, adapter_id).eval()Подробнее
Бенчмарки: итоговый loss обучения составил 0.1855, валидации — 0.1733.Требования к железу: обучение проводилось на 8 × NVIDIA A800 80GB в формате BF16.
Ограничения: модель не всегда точно соблюдает целевую длительность роликов (генерирует 16–21 секунду вместо 40) и может оставлять избыточное пустое пространство в центре кадра.










Комментарии