К содержимому

Датасет · PKU-Alignment

Мультимодальный датасет для выравнивания моделей

PKU-Alignment/align-anything

Данные с оценками предпочтений и текстовым фидбеком для выравнивания (alignment) моделей сразу по тексту, картинкам, аудио и таблицам.

Что внутри

Внутри собраны примеры для задачи any-to-any с детальными аннотациями предпочтений и языковой обратной связью. Датасет включает аудио, изображения, таблицы и текст, а его размер составляет от 10 до 100 тысяч записей. Материалы подготовлены командой PKU-Alignment для развития мультимодальных фундаментальных моделей.

Что можно сделать

  • Выравнивание (RLHF / DPO) мультимодальных моделей по человеческим предпочтениям
  • SFT-дообучение моделей на инструкциях с текстом и изображениями
  • Обучение reward-моделей с генерацией текстового фидбека
Задачи
Мультимодальные
Размер
10K–100K записей
Скачиваний за месяц
7,1 тыс.
Лайков
50

Модели, обученные на нём

Как загрузить

from datasets import load_dataset

ds = load_dataset("PKU-Alignment/align-anything")