Датасет · rajpurkar
Вопросы и ответы по статьям Wikipedia
rajpurkar/squad_v2
Датасет для чтения и QA: 100 тыс. вопросов SQuAD 1.1 и 50 тыс. вопросов без ответа по статьям Wikipedia.
Что внутри
В наборе текстовые отрывки из статей Wikipedia, вопросы краудворкеров и ответы-фрагменты; часть вопросов специально создана без ответа. SQuAD 2.0 объединяет 100 000 вопросов из SQuAD 1.1 и более 50 000 безответных вопросов. Язык — английский, объём — от 100 тыс. до 1 млн записей.
Что можно сделать
- Обучить extractive QA-модель на английском
- Проверить умение модели определять отсутствие ответа
- Оценить reading comprehension и SFT для QA
- Задачи
- Вопрос-ответ
- Языки
- Английский
- Размер
- 100K–1M записей
- Скачиваний за месяц
- 44,8 тыс.
- Лайков
- 274
Модели, обученные на нём
- OpenSML/OpenSML-JSONLite-175MГенерация текста 2,3 тыс.
- vllm-sr/Vela-2.0-0.8BZero-shot классификация 1,9 тыс.
- wzebrowski/OpenSML-JSONLite-175MГенерация текста 1,8 тыс.
- manjunathshiva/opendecider-nanoZero-shot классификация 1,2 тыс.
- mradermacher/elf-1-31b-GGUF 1,1 тыс.
- mradermacher/elf-1-12b-GGUF 999
- mradermacher/elythros-decider-1.7b-GGUFZero-shot классификация 871
- blackmallangcow/nari-decision-4bЭмбеддинги 452
Как загрузить
from datasets import load_dataset
ds = load_dataset("rajpurkar/squad_v2")