Датасет · EdinburghNLP
XSum: краткие пересказы новостей BBC
EdinburghNLP/xsum
Новостные статьи BBC с однофразовыми summary для обучения экстремальному суммаризированию.
Что внутри
XSum (Extreme Summarization) содержит новостные статьи BBC и их краткое изложение в одно предложение. В каждом примере есть поля document, summary и id статьи BBC. Набор на английском, размер — от 100 тыс. до 1 млн примеров; скачанные файлы занимают около 257,30 МБ.
Что можно сделать
- Обучить модель абстрактного суммаризирования на парах статья–одно предложение.
- Дообучить LoRA для BART/T5 на XSum.
- Оценить суммаризатор по качеству однофразовых пересказов.
- Задачи
- Суммаризация
- Языки
- Английский
- Размер
- 100K–1M записей
- Скачиваний за месяц
- 17,7 тыс.
- Лайков
- 157
Модели, обученные на нём
- chopratejas/kompress-baseРазметка токенов 824
- nixiesearch/nixie-querygen-v2Генерация текста 169
- sysresearch101/t5-large-finetuned-xsum-cnnСуммаризация 134
- bhargavis/fulltrain-xsum-bartСуммаризация 117
- suriya7/bart-finetuned-text-summarizationСуммаризация 107
- sysresearch101/t5-large-finetuned-xsumСуммаризация 67
- nixiesearch/nixie-querygen-v3 49
- Prikshit7766/bart-base-xsumСуммаризация 38
Как загрузить
from datasets import load_dataset
ds = load_dataset("EdinburghNLP/xsum")