Датасет · KorQuAD
Корейский датасет для вопросов и ответов по тексту (KorQuAD)
KorQuAD/squad_kor_v1
От 10K до 100K пар «вопрос-ответ» на корейском языке для обучения систем машинного чтения, созданный по стандарту SQuAD 1.0.
Что внутри
Крупный текстовый корпус на корейском языке объемом от 10 до 100 тысяч примеров для задач извлечения ответов из текста (question-answering). Датасет разработан по методологии известного бенчмарка SQuAD v1.0, чтобы проверять способность моделей понимать прочитанный текст и находить в нем точные ответы.
Что можно сделать
- Обучение и проверка систем поиска ответов в документах (QA) на корейском
- Оценка навыков машинного понимания текста (machine reading comprehension)
- Дообучение корейских энкодеров и языковых моделей
- Задачи
- Вопрос-ответ
- Языки
- Корейский
- Размер
- 10K–100K записей
- Скачиваний за месяц
- 2,2 тыс.
- Лайков
- 34
Модели, обученные на нём
- HANTAEK/klue-roberta-large-korquad-v1-qa-finetunedВопрос-ответ 21
- oceann315/klue-roberta-large-korquad-v1Вопрос-ответ 18
- NakJun/Llama-3.2-1B-Instruct-korQuAD-v1 15
- snumin44/biencoder-ko-bert-contextЭмбеддинги 10
- snumin44/biencoder-ko-bert-questionЭмбеддинги 9
- jiwonkaya/Llama-3.2-1B-Instruct-korQuAD-v1-Q4_K_M-GGUF 7
- rjslas7411/Llama-3.2-1B-Instruct-korQuAD-v1-Q4_K_M-GGUF 6
- seungwon-sw/q_lora_korqaГенерация текста 0
Как загрузить
from datasets import load_dataset
ds = load_dataset("KorQuAD/squad_kor_v1")