Датасет · PKU-Alignment
Мультимодальный датасет для выравнивания моделей
PKU-Alignment/align-anything
Данные с оценками предпочтений и текстовым фидбеком для выравнивания (alignment) моделей сразу по тексту, картинкам, аудио и таблицам.
Что внутри
Внутри собраны примеры для задачи any-to-any с детальными аннотациями предпочтений и языковой обратной связью. Датасет включает аудио, изображения, таблицы и текст, а его размер составляет от 10 до 100 тысяч записей. Материалы подготовлены командой PKU-Alignment для развития мультимодальных фундаментальных моделей.
Что можно сделать
- Выравнивание (RLHF / DPO) мультимодальных моделей по человеческим предпочтениям
- SFT-дообучение моделей на инструкциях с текстом и изображениями
- Обучение reward-моделей с генерацией текстового фидбека
- Задачи
- Мультимодальные
- Размер
- 10K–100K записей
- Скачиваний за месяц
- 7,1 тыс.
- Лайков
- 50
Модели, обученные на нём
Как загрузить
from datasets import load_dataset
ds = load_dataset("PKU-Alignment/align-anything")