Датасет · AmazonScience
Мультиязычный QA-датасет Mintaka
AmazonScience/mintaka
Комплексный датасет из 180 000 пар вопросов и ответов на 9 языках для end-to-end систем QA.
Что внутри
Датасет содержит 20 000 вопросов на английском языке с разметкой сущностей Wikidata, переведенных на арабский, французский, немецкий, хинди, итальянский, японский, португальский и испанский языки. Включает 8 типов сложных вопросов (включая превосходную степень, пересечение и multi-hop), собранных от краудворкеров.
Что можно сделать
- Обучение и оценка мультиязычных end-to-end QA-моделей
- Тестирование моделей на сложные и многошаговые рассуждения (multi-hop)
- Задачи
- Вопрос-ответ
- Размер
- 100K–1M записей
- Скачиваний за месяц
- 2 тыс.
- Лайков
- 13
Модели, обученные на нём
Как загрузить
from datasets import load_dataset
ds = load_dataset("AmazonScience/mintaka")