Датасет · FreedomIntelligence
Медицинский бенчмарк на китайском языке
FreedomIntelligence/CMB
Комплексный тестовый набор медицинских вопросов и ответов для оценки языковых моделей на китайском.
Что внутри
Текстовый датасет объёмом менее 1 000 примеров на китайском языке, представляющий собой медицинский бенчмарк для задач ответов на вопросы и генерации текста. В состав входят тестовые задания из блока CMB-Exam с раскрытыми и проверенными ответами, а сам набор включён в систему оценки OpenCompass.
Что можно сделать
- Оценка медицинских знаний и точности ответов LLM на китайском языке
- Сравнение моделей в рамках бенчмарка OpenCompass
- Задачи
- Вопрос-ответ, Генерация текста
- Языки
- Китайский
- Размер
- до 1K записей
- Скачиваний за месяц
- 2,8 тыс.
- Лайков
- 38
Модели, обученные на нём
Как загрузить
from datasets import load_dataset
ds = load_dataset("FreedomIntelligence/CMB")