Датасет · argilla
Синтетические инструкции для проверки строгого следования формату
argilla/ifeval-like-data
550 тысяч пар «инструкция-ответ» в стиле бенчмарка IFEval от Argilla для обучения моделей точному выполнению ограничений.
Что внутри
Датасет от Argilla содержит от 100 тысяч до 1 миллиона примеров на английском языке (в базовом сабсете 550 тысяч строк), синтетически сгенерированных моделью Qwen2.5-72B-Instruct по методике MagPie. Промпты составлены по аналогии с бенчмарком google/IFEval, могут включать конфликтующие требования, а корректность ответов проверена через lm-evaluation-harness.
Что можно сделать
- SFT-дообучение моделей строгому соблюдению сложных и формальных инструкций
- Повышение показателей LLM на бенчмарке IFEval и аналогичных тестах управляемости
- Исследование устойчивости моделей к противоречивым требованиям в промптах
- Задачи
- Генерация текста
- Языки
- Английский
- Размер
- 100K–1M записей
- Скачиваний за месяц
- 5,7 тыс.
- Лайков
- 51
Модели, обученные на нём
- mradermacher/Unbound-v1.12.0-27B-i1-GGUF 1,1 тыс.
- mradermacher/Mira-v1.12.1-27B-i1-GGUF 846
- mradermacher/Unbound-v1.12.0-27B-GGUF 717
- mradermacher/Mira-v1.12.1-27B-GGUF 545
- Diamegs/PIT-4B-FT-201812Генерация текста 149
- Diamegs/PIT-4B-FT-202012Генерация текста 142
- Diamegs/PIT-4B-FT-202412Генерация текста 134
- Diamegs/PIT-4B-FT-202212Генерация текста 128
Как загрузить
from datasets import load_dataset
ds = load_dataset("argilla/ifeval-like-data")