К содержимому

Датасет · argilla

Синтетические инструкции для проверки строгого следования формату

argilla/ifeval-like-data

550 тысяч пар «инструкция-ответ» в стиле бенчмарка IFEval от Argilla для обучения моделей точному выполнению ограничений.

Что внутри

Датасет от Argilla содержит от 100 тысяч до 1 миллиона примеров на английском языке (в базовом сабсете 550 тысяч строк), синтетически сгенерированных моделью Qwen2.5-72B-Instruct по методике MagPie. Промпты составлены по аналогии с бенчмарком google/IFEval, могут включать конфликтующие требования, а корректность ответов проверена через lm-evaluation-harness.

Что можно сделать

  • SFT-дообучение моделей строгому соблюдению сложных и формальных инструкций
  • Повышение показателей LLM на бенчмарке IFEval и аналогичных тестах управляемости
  • Исследование устойчивости моделей к противоречивым требованиям в промптах
Задачи
Генерация текста
Языки
Английский
Размер
100K–1M записей
Скачиваний за месяц
5,7 тыс.
Лайков
51

Модели, обученные на нём

Как загрузить

from datasets import load_dataset

ds = load_dataset("argilla/ifeval-like-data")