Датасет · allenai
Диалоги о просоциальных ответах
allenai/prosocial-dialog
100K+ многоходовых диалогов на английском для обучения безопасных собеседников.
Что внутри
ProsocialDialog — крупный многоходовый англоязычный диалоговый датасет. Он учит conversational agents отвечать на проблемный контент по социальным нормам. Ответы опираются на commonsense social rules (rules-of-thumb, RoTs); данные созданы совместно людьми и AI. Включает разнообразные неэтичные, проблемные, предвзятые и токсичные ситуации.
Что можно сделать
- Дообучить диалоговую модель безопасным ответам
- Оценить классификатор токсичности и просоциальности
- Сделать LoRA для ответов по социальным правилам
- Задачи
- Классификация текста
- Языки
- Английский
- Размер
- 100K–1M записей
- Скачиваний за месяц
- 1,1 тыс.
- Лайков
- 119
Модели, обученные на нём
- allenai/cosmo-xl 340
- togethercomputer/GPT-JT-Moderation-6BГенерация текста 195
- samratduttaofficial/WaterSheepZero-shot классификация 96
- Andrew93110/sn92-gen-v6 64
- oraculumai/Manchego-MLX-8bitКлассификация текста 62
- oraculumai/ManchegoКлассификация текста 44
- Andrew93110/sn92-gen-v5 43
- thecr7guy/gpt2-insFTГенерация текста 24
Как загрузить
from datasets import load_dataset
ds = load_dataset("allenai/prosocial-dialog")