К содержимому

Датасет · AmazonScience

Мультиязычный QA-датасет Mintaka

AmazonScience/mintaka

Комплексный датасет из 180 000 пар вопросов и ответов на 9 языках для end-to-end систем QA.

Что внутри

Датасет содержит 20 000 вопросов на английском языке с разметкой сущностей Wikidata, переведенных на арабский, французский, немецкий, хинди, итальянский, японский, португальский и испанский языки. Включает 8 типов сложных вопросов (включая превосходную степень, пересечение и multi-hop), собранных от краудворкеров.

Что можно сделать

  • Обучение и оценка мультиязычных end-to-end QA-моделей
  • Тестирование моделей на сложные и многошаговые рассуждения (multi-hop)
Задачи
Вопрос-ответ
Размер
100K–1M записей
Скачиваний за месяц
2 тыс.
Лайков
13

Модели, обученные на нём

Как загрузить

from datasets import load_dataset

ds = load_dataset("AmazonScience/mintaka")