К содержимому

Датасет · maritaca-ai

Вопросы бразильского экзамена ENEM 2022–2024

maritaca-ai/enem

Задания с выбором ответа из вступительного экзамена в вузы Бразилии для оценки LLM и VLM.

Что внутри

Датасет объемом менее 1 тысячи записей включает вопросы с множественным выбором из вступительного экзамена в бразильские университеты (ENEM) за 2022–2024 годы на португальском языке. Для оценки чисто текстовых моделей в условия заданий встроены текстовые описания изображений, встречающихся в экзамене. Подходит для проверки как текстовых, так и визуально-текстовых моделей.

Что можно сделать

  • Тестирование знаний португальского языка и эрудиции языковых моделей
  • Оценка способности моделей решать экзаменационные тесты с выбором ответа
  • Бенчмаркинг визуально-текстовых моделей (VQA) на задачах с описанием картинок
Задачи
Вопросы по картинкам, multiple choice
Языки
Португальский
Размер
до 1K записей
Скачиваний за месяц
3,5 тыс.
Лайков
18

Как загрузить

from datasets import load_dataset

ds = load_dataset("maritaca-ai/enem")