Датасет · rajpurkar
SQuAD: вопросы по Wikipedia
rajpurkar/squad
Читательский QA-датасет: вопросы к статьям Wikipedia с ответами-фрагментами.
Что внутри
SQuAD — датасет на понимание прочитанного: краудворкеры задавали вопросы по статьям Wikipedia, ответ — фрагмент текста из статьи или вопрос без ответа. SQuAD 1.1 содержит 100 000+ пар вопрос-ответ по 500+ статьям. Язык — английский, модальность — текст.
Что можно сделать
- Обучение extractive QA-модели
- Оценка LLM и RAG-систем
- Fine-tune BERT-подобной модели
- Задачи
- Вопрос-ответ
- Языки
- Английский
- Размер
- 10K–100K записей
- Скачиваний за месяц
- 164,1 тыс.
- Лайков
- 891
Модели, обученные на нём
- makltd1/continual-lmГенерация текста 750
- Hussnain1/interviewmate-flan-t5-largeГенерация текста 367
- ducanhdinh/Qwen1.5-MoE-A2.7B-FinetuningВопрос-ответ 234
- salsarra/ConfliBERT-QAВопрос-ответ 115
- DevBM/t5-large-squad 104
- vrishv/router-34MКлассификация текста 96
- jonpark0/embeddinggemma-2-koПохожесть текстов 82
- mburchell/looped-40mГенерация текста 74
Как загрузить
from datasets import load_dataset
ds = load_dataset("rajpurkar/squad")