Датасет · tau
Вопросы на здравый смысл с вариантами
tau/commonsense_qa
12 102 англоязычных вопроса с четырьмя вариантами ответа для проверки commonsense-рассуждений.
Что внутри
CommonsenseQA — англоязычный multiple-choice датасет вопросов, требующих разных типов здравого смысла. В нём 12 102 вопроса с одним правильным и четырьмя отвлекающими ответами. Есть random split и question token split для обучения, валидации и теста.
Что можно сделать
- Оценка commonsense-рассуждений LLM
- Дообучение модели на multiple-choice QA
- Бенчмарк для question answering
- Задачи
- Вопрос-ответ
- Языки
- Английский
- Размер
- 10K–100K записей
- Скачиваний за месяц
- 110,5 тыс.
- Лайков
- 171
Модели, обученные на нём
- knowledgator/gliclass-base-v3.0Классификация текста 6,2 тыс.
- jaredpalmer/kev-27bКлассификация текста 3,2 тыс.
- knowledgator/gliclass-modern-base-v3.0Классификация текста 2,9 тыс.
- knowledgator/gliclass-multilang-miniКлассификация текста 2,2 тыс.
- knowledgator/gliclass-large-v3.0Классификация текста 2,1 тыс.
- knowledgator/gliclass-edge-v3.0Классификация текста 1,8 тыс.
- mradermacher/kev-27b-GGUFmultiple choice 1,8 тыс.
- nickprock/archai-jev-qwen-1.5bГенерация текста 1,5 тыс.
Как загрузить
from datasets import load_dataset
ds = load_dataset("tau/commonsense_qa")