К содержимому

Датасет · allenai

Вопросы по естественным наукам с корпусом на 17 млн фраз (QASC)

allenai/qasc

9 980 школьных научных вопросов с 8 вариантами ответа и корпус из 17 млн предложений для тренировки логики.

Что внутри

Англоязычный датасет QASC для оценки навыков композиции предложений при ответе на вопросы по программе начальной и средней школы. Состоит из 9 980 вопросов с выбором одного из 8 вариантов (разбитых на train, dev и test) и сопровождается фоновым текстовым корпусом из 17 миллионов предложений.

Что можно сделать

  • Оценка способности LLM объединять факты из разных предложений (multi-hop reasoning)
  • Обучение и тестирование RAG-систем на поиск нужных фактов в большом корпусе
  • SFT-дообучение моделей на задачах с множественным выбором
Задачи
Вопрос-ответ, multiple choice
Языки
Английский
Размер
1K–10K записей
Скачиваний за месяц
21,4 тыс.
Лайков
24

Модели, обученные на нём

Как загрузить

from datasets import load_dataset

ds = load_dataset("allenai/qasc")