К содержимому

Датасет · KorQuAD

Корейский датасет для вопросов и ответов по тексту (KorQuAD)

KorQuAD/squad_kor_v1

От 10K до 100K пар «вопрос-ответ» на корейском языке для обучения систем машинного чтения, созданный по стандарту SQuAD 1.0.

Что внутри

Крупный текстовый корпус на корейском языке объемом от 10 до 100 тысяч примеров для задач извлечения ответов из текста (question-answering). Датасет разработан по методологии известного бенчмарка SQuAD v1.0, чтобы проверять способность моделей понимать прочитанный текст и находить в нем точные ответы.

Что можно сделать

  • Обучение и проверка систем поиска ответов в документах (QA) на корейском
  • Оценка навыков машинного понимания текста (machine reading comprehension)
  • Дообучение корейских энкодеров и языковых моделей
Задачи
Вопрос-ответ
Языки
Корейский
Размер
10K–100K записей
Скачиваний за месяц
2,2 тыс.
Лайков
34

Модели, обученные на нём

Как загрузить

from datasets import load_dataset

ds = load_dataset("KorQuAD/squad_kor_v1")