Датасет · OpenMOSS-Team
Диалоговые SFT-данные MOSS-002
OpenMOSS-Team/moss-002-sft-data
Открытый диалоговый датасет для SFT: промпты и ответы text-davinci-003 на английском и китайском.
Что внутри
Открытый разговорный датасет, использованный для обучения MOSS-002. Пользовательские промпты расширены из небольшого набора человеческих seed-промптов по схеме Self-Instruct, ответы AI сгенерированы text-davinci-003. Промпты en_harmlessness взяты из red teaming data Anthropic; в карточке упомянуты сплиты en_helpfulness, en_honesty и другие. Языки — английский и китайский.
Что можно сделать
- SFT диалоговой LLM
- LoRA-дообучение под helpfulness/honesty
- Оценка safety на red-team промптах
- Задачи
- Генерация текста
- Языки
- Английский, Китайский
- Размер
- 1M–10M записей
- Скачиваний за месяц
- 452
- Лайков
- 96
Модели, обученные на нём
- OpenMOSS-Team/moss-moon-003-sftГенерация текста 263
- OpenMOSS-Team/moss-moon-003-baseГенерация текста 223
- OpenMOSS-Team/moss-moon-003-sft-pluginГенерация текста 194
- OpenMOSS-Team/moss-moon-003-sft-int4Генерация текста 177
- OpenMOSS-Team/moss-moon-003-sft-int8Генерация текста 130
- OpenMOSS-Team/moss-moon-003-sft-plugin-int4Генерация текста 128
- OpenMOSS-Team/moss-moon-003-sft-plugin-int8Генерация текста 66
Как загрузить
from datasets import load_dataset
ds = load_dataset("OpenMOSS-Team/moss-002-sft-data")