Датасет · HAERAE-HUB
Корейский бенчмарк KMMLU
HAERAE-HUB/KMMLU
35 030 экспертных вопросов с выбором ответа по 45 предметам на корейском языке.
Что внутри
KMMLU — корейский бенчмарк из 35 030 вопросов с множественным выбором по 45 предметам: от гуманитарных до STEM. Вопросы собраны из оригинальных корейских экзаменов, а не переведены с английских бенчмарков, поэтому отражают язык и культуру. Авторы протестировали 26 публичных и проприетарных LLM.
Что можно сделать
- Оценка LLM на корейском языке
- Сравнение моделей по предметным знаниям
- Проверка культурной и языковой адаптации
- Задачи
- multiple choice
- Языки
- Корейский
- Размер
- 100K–1M записей
- Скачиваний за месяц
- 11,8 тыс.
- Лайков
- 105
Модели, обученные на нём
Как загрузить
from datasets import load_dataset
ds = load_dataset("HAERAE-HUB/KMMLU")