Мультимодальный бенчмарк MMMU-Pro
Вопросы с изображениями и текстом по разным дисциплинам для проверки мультимодального понимания.
- Вопрос-ответ
- Вопросы по картинкам
- multiple choice
- Английский
Датасеты с Hugging Face с описанием на русском: что внутри и какие модели на них обучить. В каталоге уже 1 085, новые добавляются каждый час.
Отвечает DeepSeek · переписка хранится только в этой вкладке
Вопросы с изображениями и текстом по разным дисциплинам для проверки мультимодального понимания.
Мультимодальный английский датасет научных вопросов с вариантами ответов и изображениями.
1 440 de novo минибелков 50–120 остатков против 16 целей, созданных агентами Claude и проверенных в CRO.
Уменьшенные цветные изображения 64×64 для быстрой проверки моделей классификации.
Крупный открытый набор пар «изображение–текст» на английском для качественного дообучения T2I-моделей.
101 000 изображений еды по 101 категории для обучения и проверки классификаторов.
31 тыс. часов спонтанной речи по изображениям на 105 языках Индии, с транскриптами для ASR и мультимодальных задач.
Крупный синтетический датасет пар «скриншот — HTML/CSS-код» для генерации UI по изображению.
Огромный англоязычный набор для Document VQA, использованный при дообучении Idefics3.
Синтетические personas на основе демографии, географии и черт характера жителей Вьетнама.
6 млн изображений, сгенерированных FLUX.1-dev, и 20 млн англо-китайских описаний для обучения генеративных моделей.
306 207 сканов 3D-МРТ мозга с клиническими данными для self-supervised learning.
10 тыс. троек «исходное изображение — инструкция — результат» для обучения редактированию.
450+ нетривиальных вопросов с однозначным ответом для проверки LLM с инструментами и поиском.
Пары «изображение — текстовое описание» для обучения и оценки моделей связи картинок и текста.
Визуальные математические задачи с изображениями и текстом для проверки VLM.
Крупный image-text корпус DataComp-1B с улучшенными подписями от LLaVA-1.5-LLaMA3-8B.
Миллионы страниц документов с PDF, TIFF-изображениями и OCR-аннотациями для обучения распознаванию.
Задачи из стран и соревнований с изображениями и текстом для QA и генерации решений.
81 444 изображения искусства с метками художника, жанра и стиля.
~3,3 млн веб-изображений с подписями из alt-текста для обучения image-to-text.
HTML-страницы со скриншотами и инструкциями для обучения веб-агентов выполнять задачи на сайтах.
CAD-ассеты и сцены с настроенной физикой для симуляции домашних роботов.
4 146 примеров 3D-сцен Three.js с промптами, thinking traces и готовым HTML/JavaScript-кодом.