Датасет · taesiri
Вопросы и ответы по статьям arXiv
taesiri/arxiv_qa
Пары вопрос-ответ по научным статьям arXiv на английском для обучения и проверки QA-систем.
Что внутри
Карточка описывает автоматическую генерацию вопросов и ответов по статьям arXiv с помощью больших языковых моделей. Язык — английский, объём — от 100 тыс. до 1 млн примеров. Формат в карточке не указан.
Что можно сделать
- Дообучить QA-модель на научных текстах
- Проверить retrieval- и QA-систему по статьям arXiv
- Подготовить SFT-ассистента для работы с научными публикациями
- Задачи
- Вопрос-ответ
- Языки
- Английский
- Размер
- 100K–1M записей
- Скачиваний за месяц
- 1 тыс.
- Лайков
- 139
Модели, обученные на нём
Как загрузить
from datasets import load_dataset
ds = load_dataset("taesiri/arxiv_qa")