К содержимому

Датасет · google

Мультиязычный бенчмарк вопросов и ответов

google/xquad

Параллельный корпус из 1 190 вопросов и ответов на 10+ языках для проверки кросс-язычного QA.

Что внутри

В основе лежат 240 абзацев и 1 190 пар «вопрос — ответ» из проверочной выборки SQuAD v1.1. Тексты профессионально переведены на десять языков, включая русский, испанский, немецкий, греческий, турецкий, арабский, вьетнамский, тайский и китайский.

Что можно сделать

  • Оценка качества мультиязычных LLM в задачах поиска ответов по тексту (QA)
  • Проверка способности моделей переносить знания между языками без дообучения
  • Тестирование RAG-систем на многоязычных базах знаний
Задачи
Вопрос-ответ
Языки
Арабский, Немецкий, el, Английский, Испанский, Хинди, ro, Русский и ещё 4
Размер
10K–100K записей
Скачиваний за месяц
12,8 тыс.
Лайков
43

Модели, обученные на нём

Как загрузить

from datasets import load_dataset

ds = load_dataset("google/xquad")