Датасет · maritaca-ai
Вопросы бразильского экзамена ENEM 2022–2024
maritaca-ai/enem
Задания с выбором ответа из вступительного экзамена в вузы Бразилии для оценки LLM и VLM.
Что внутри
Датасет объемом менее 1 тысячи записей включает вопросы с множественным выбором из вступительного экзамена в бразильские университеты (ENEM) за 2022–2024 годы на португальском языке. Для оценки чисто текстовых моделей в условия заданий встроены текстовые описания изображений, встречающихся в экзамене. Подходит для проверки как текстовых, так и визуально-текстовых моделей.
Что можно сделать
- Тестирование знаний португальского языка и эрудиции языковых моделей
- Оценка способности моделей решать экзаменационные тесты с выбором ответа
- Бенчмаркинг визуально-текстовых моделей (VQA) на задачах с описанием картинок
- Задачи
- Вопросы по картинкам, multiple choice
- Языки
- Португальский
- Размер
- до 1K записей
- Скачиваний за месяц
- 3,5 тыс.
- Лайков
- 18
Как загрузить
from datasets import load_dataset
ds = load_dataset("maritaca-ai/enem")