Uni-MOPD-Teacher-VQA
специалист по общим визуальным вопросам на базе Qwen3-VL
2 мин чтенияобновлено
Модель решает задачи General VQA (отвечает на вопросы по изображениям и описывает их содержимое) в рамках проекта Uni-MOPD от автора AmberHeart. Она построена на базе мультимодальной MoE-модели (Mixture-of-Experts — архитектура с маршрутизацией по экспертам) Qwen3-VL-30B-A3B-Instruct общим объёмом 31.07 млрд параметров. В отличие от базовой версии и объединенного студента Uni-MOPD, этот чекпоинт прошел узкоспециализированное дообучение с подкреплением (RL) и лидирует в своем домене среди пяти моделей линейки. Подойдет разработчикам и исследователям, которым нужен выделенный учитель или сильная VLM для анализа картинок.
Ключевые особенности
- Основана на Qwen3-VL-30B-A3B-Instruct с сохранением исходной архитектуры и словаря.
- Финальная стадия обучения проведена методом RL (обучение с подкреплением) строго под задачи общего VQA.
- Входит в банк из пяти доменных учителей Uni-MOPD и может объединяться в пространстве весов с другими моделями серии.
- Распространяется под свободной лицензией Apache 2.0 в формате bfloat16.
Что можно сделать
- Встроить в сервисы анализа изображений и визуальные чат-боты для ответов на вопросы пользователей по фото.
- Использовать в качестве модели-учителя при дистилляции собственных мультимодальных моделей под задачи VQA.
- Смержить веса с другими специалистами линейки Uni-MOPD (STEM, OCR, GUI, Embodied) для создания кастомного ассистента.
Пример
from transformers import AutoProcessor, Qwen3VLMoeForConditionalGeneration
model_id = "AmberHeart/Uni-MOPD-Teacher-VQA"
model = Qwen3VLMoeForConditionalGeneration.from_pretrained(
model_id, dtype="auto", device_map="auto"
)
processor = AutoProcessor.from_pretrained(model_id)
out = model.generate(**inputs, max_new_tokens=128)
Подробнее
Размер: 31.07B параметров (архитектура MoE), веса в bfloat16 (14 файлов safetensors).Бенчмарки: конкретные цифры в карточке не приведены, указано лидерство в своем домене среди 5 учителей банка.
Требования: библиотека transformers версии 4.57.1 или выше.










Комментарии