Qwen3.8-27B OCR Finance Next R1
документный VQA по вьетнамским финотчётам
1 min read
Файнтюн Qwen3.8-27B от unsloth/Qwen3.8-27B, обученный читать вьетнамские аудированные финансовые отчёты. Отвечает на вопросы по одной странице или по целому отчёту, считает изменения, проценты, доли, коэффициенты, направления, суммы и проверки, извлекает данные в JSON и сообщает, если на странице нет ответа. Размер — 27,36 млрд параметров.
Ключевые особенности
- Два варианта поставки: merged-веса bf16 (12 шардов, 51 ГБ) или LoRA-адаптер на 467 МБ поверх базовой модели.
- LoRA с r=16, alpha=16, без dropout, применена к attention, linear-attention (GDN) и MLP-проекциям языковой модели.
- Понимает вопросы по странице, по всему отчёту до 100 страниц в контексте и по нескольким страницам с метками вида «Ảnh 1».
- Умеет извлекать ответы в JSON, считать арифметику и проверять суммы.
- Рекомендуемый режим: thinking off, temperature 0, вопрос на вьетнамском в формате обучения.
Пример
vllm serve paulaan86/qwen38-27b-ocr-finance-next-r1 --max-model-len 32768
# для целых отчётов: --max-model-len 262144
Подробнее
ANLS: страницы — 0,860 (база 0,809), целые отчёты — 0,846 (0,769); held-out accuracy — 0,826 (0,253).Merged-веса: bf16, 12 шардов, 51 ГБ; LoRA-адаптер — 467 МБ.
Ограничения: проценты — 57 % точных ответов; только вьетнамские финотчёты; лицензия CC BY-NC 4.0, non-commercial.










Comments