Датасет · openbmb
Данные RLAIF-V для доверенных VLM
openbmb/RLAIF-V-Dataset
Изображения и текст на английском для обучения и проверки доверенных мультимодальных моделей через RLAIF.
Что внутри
Датасет с изображениями и текстом на английском, от 10 до 100 тыс. примеров. Он сопровождает работу RLAIF-V об открытом AI-feedback для повышения надёжности моделей уровня GPT-4V и использовался в MiniCPM-V 4.5. Точный формат хранения в карточке не указан.
Что можно сделать
- Дообучить LoRA для image-text-to-text и visual-question-answering.
- Проверить trustworthiness мультимодальной модели.
- Обучить или проверить VLM на VQA-задачах.
- Задачи
- Картинка + текст, Вопросы по картинкам, Мультимодальные
- Языки
- Английский
- Размер
- 10K–100K записей
- Скачиваний за месяц
- 2,6 тыс.
- Лайков
- 227
Модели, обученные на нём
- openbmb/MiniCPM-V-4_5Картинка + текст 74,2 тыс.
- openbmb/MiniCPM-o-2_6Мультимодальные 41,1 тыс.
- openbmb/MiniCPM-V-4_5-ggufКартинка + текст 39,9 тыс.
- openbmb/MiniCPM-V-4Картинка + текст 29,6 тыс.
- openbmb/MiniCPM-V-2_6Картинка + текст 17,7 тыс.
- openbmb/MiniCPM-V-4_5-AWQКартинка + текст 13,5 тыс.
- openbmb/MiniCPM-Llama3-V-2_5Картинка + текст 10 тыс.
- openbmb/MiniCPM-V-4-ggufКартинка + текст 6 тыс.
Как загрузить
from datasets import load_dataset
ds = load_dataset("openbmb/RLAIF-V-Dataset")