К содержимому

Датасет · MaziyarPanahi

180 тысяч оценок и решений для проверки политик ИИ

MaziyarPanahi/Jev-Policy-Verification-180K

Табличный и текстовый корпус на английском языке для RLHF, оценки ответов и проверки соблюдения правил моделями.

Что внутри

Внутри находятся 180 000 записей на английском языке, каждая из которых связывает эталонную метку с предсказанием модели jev-1.13.0, оценкой уверенности, структурированным ответом и данными о происхождении. Данные охватывают оценку качества, предпочтений, полезности ответов и следования заданным принципам (медицинских данных в наборе нет). Датасет выложен в плоском формате parquet.

Что можно сделать

  • Обучение reward-моделей и выравнивание LLM методами RLHF
  • Тренировка классификаторов и ранжировщиков для проверки ответов ИИ на соответствие правилам
Задачи
Классификация текста, text ranking, Обучение с подкреплением
Языки
Английский
Размер
100K–1M записей
Скачиваний за месяц
258
Лайков
13

Как загрузить

from datasets import load_dataset

ds = load_dataset("MaziyarPanahi/Jev-Policy-Verification-180K")