Датасет · allenai
Вопросы по естественным наукам с корпусом на 17 млн фраз (QASC)
allenai/qasc
9 980 школьных научных вопросов с 8 вариантами ответа и корпус из 17 млн предложений для тренировки логики.
Что внутри
Англоязычный датасет QASC для оценки навыков композиции предложений при ответе на вопросы по программе начальной и средней школы. Состоит из 9 980 вопросов с выбором одного из 8 вариантов (разбитых на train, dev и test) и сопровождается фоновым текстовым корпусом из 17 миллионов предложений.
Что можно сделать
- Оценка способности LLM объединять факты из разных предложений (multi-hop reasoning)
- Обучение и тестирование RAG-систем на поиск нужных фактов в большом корпусе
- SFT-дообучение моделей на задачах с множественным выбором
- Задачи
- Вопрос-ответ, multiple choice
- Языки
- Английский
- Размер
- 1K–10K записей
- Скачиваний за месяц
- 21,4 тыс.
- Лайков
- 24
Модели, обученные на нём
- jaredpalmer/kev-27bКлассификация текста 3,5 тыс.
- mradermacher/kev-27b-GGUFmultiple choice 1,7 тыс.
- mradermacher/elf-1-12b-GGUF 753
- mradermacher/elf-1-31b-GGUF 721
- littlemex/prismyra-decision-35b-a3b-fp8Классификация текста 553
- blackmallangcow/nari-decision-4bЭмбеддинги 441
- mradermacher/bobcat-1.3-GGUF 260
- sanghwa-na/bobcat-1.3Zero-shot классификация 239
Как загрузить
from datasets import load_dataset
ds = load_dataset("allenai/qasc")