К содержимому

Датасет · FreedomIntelligence

Медицинский бенчмарк на китайском языке

FreedomIntelligence/CMB

Комплексный тестовый набор медицинских вопросов и ответов для оценки языковых моделей на китайском.

Что внутри

Текстовый датасет объёмом менее 1 000 примеров на китайском языке, представляющий собой медицинский бенчмарк для задач ответов на вопросы и генерации текста. В состав входят тестовые задания из блока CMB-Exam с раскрытыми и проверенными ответами, а сам набор включён в систему оценки OpenCompass.

Что можно сделать

  • Оценка медицинских знаний и точности ответов LLM на китайском языке
  • Сравнение моделей в рамках бенчмарка OpenCompass
Задачи
Вопрос-ответ, Генерация текста
Языки
Китайский
Размер
до 1K записей
Скачиваний за месяц
2,8 тыс.
Лайков
38

Модели, обученные на нём

Как загрузить

from datasets import load_dataset

ds = load_dataset("FreedomIntelligence/CMB")