К содержимому

Датасет · kuznetsoffandrey

Русскоязычный датасет вопросов и ответов по Википедии

kuznetsoffandrey/sberquad

Классический корпус на русском языке из 10–100 тысяч вопросов краудворкеров к статьям Википедии с выделением ответа в тексте.

Что внутри

Это русскоязычный текстовый набор данных объёмом от 10 до 100 тысяч примеров для задач понимания прочитанного (reading comprehension). Он состоит из фрагментов статей Википедии и вопросов, составленных краудворкерами. Ответом служит конкретный отрезок исходного текста, либо вопрос может не иметь ответа.

Что можно сделать

  • Обучение и оценка моделей извлечения ответов из текста (extractive QA) на русском языке
  • Проверка систем поиска по базам знаний на умение определять отсутствие ответа
Задачи
Вопрос-ответ
Языки
Русский
Размер
10K–100K записей
Скачиваний за месяц
2,6 тыс.
Лайков
35

Модели, обученные на нём

Как загрузить

from datasets import load_dataset

ds = load_dataset("kuznetsoffandrey/sberquad")