Датасет · knkarthick
DialogSum: суммаризация диалогов
knkarthick/dialogsum
13 460 английских диалогов с суммаризацией для обучения и оценки моделей.
Что внутри
Датасет для суммаризации диалогов на английском языке. В нём 13 460 диалогов плюс 100 отложенных примеров для генерации тем. Тексты предназначены для задач summarization и text-generation.
Что можно сделать
- Дообучить модель суммаризации диалогов на SFT
- Оценить качество кратких пересказов диалогов
- Сделать LoRA для суммаризации разговорной речи
- Задачи
- Суммаризация, Генерация текста
- Языки
- Английский
- Размер
- 10K–100K записей
- Скачиваний за месяц
- 7,7 тыс.
- Лайков
- 259
Модели, обученные на нём
- mradermacher/mpt-30b-instruct-i1-GGUF 2,7 тыс.
- mradermacher/mpt-30b-instruct-GGUF 1,7 тыс.
- mradermacher/mpt-7b-8k-instruct-i1-GGUF 1,2 тыс.
- mradermacher/mpt-7b-8k-instruct-GGUF 600
- tensorblock/pgurazada1_llama2-7b-conversation-summarizer-GGUF 82
- Jvachier/meeting-notes-en-21mРазметка токенов 67
- emonHasan01/QwenSum-LoRAСуммаризация 50
- AnqiXaq/dialogsum-qlora-adapterГенерация текста 41
Как загрузить
from datasets import load_dataset
ds = load_dataset("knkarthick/dialogsum")