Датасет · openbmb
SFT-данные UltraInteract для сложного reasoning
openbmb/UltraInteract_sft
Англоязычные инструкции с деревьями предпочтений, цепочками рассуждений и multi-turn траекториями для обучения reasoning.
Что внутри
SFT-часть большого датасета UltraInteract для сложных задач рассуждения. Для каждой инструкции есть дерево предпочтений: цепочки рассуждений с разными стратегиями планирования, multi-turn траектории взаимодействия со средой и критикой, а также парные данные для preference learning. Язык — английский.
Что можно сделать
- Обучить SFT-модель сложному reasoning
- Дообучить LoRA для многошаговых задач
- Проверить preference learning или RLHF-пайплайн
- Языки
- Английский
- Размер
- 100K–1M записей
- Скачиваний за месяц
- 1,3 тыс.
- Лайков
- 132
Модели, обученные на нём
- mradermacher/Eurus-70b-sft-fixed-i1-GGUF 2,6 тыс.
- QuantFactory/Eurus-7b-sft-GGUFГенерация текста 1,4 тыс.
- mradermacher/Eurus-70b-sft-fixed-GGUF 1,1 тыс.
- IvmeLabs/Ivme-Conversate-N-v1-BaseГенерация текста 697
- mradermacher/Llama-3-8B-Instruct_Orce_plus-GGUF 616
- mradermacher/AuroraGPT-IT-v4-0125-i1-GGUF 597
- mradermacher/Eurux-8x22b-nca-i1-GGUF 296
- mradermacher/AuroraGPT-IT-v4-0125-GGUF 249
Как загрузить
from datasets import load_dataset
ds = load_dataset("openbmb/UltraInteract_sft")