К содержимому

Датасет · Vision-CAIR

Данные для выравнивания визуально-языковой модели MiniGPT-4

Vision-CAIR/cc_sbu_align

Компактный набор изображений из проекта MiniGPT-4, предназначенный для связывания визуальных данных и языковых моделей.

Что внутри

В репозитории лежат изображения объёмом менее 1 000 примеров, подготовленные исследователями из университета KAUST для проекта MiniGPT-4. Данные использовались на этапе выравнивания (alignment) для обучения модели вести диалог вокруг картинок.

Что можно сделать

  • Дообучение и адаптация мультимодальных моделей (VLM) для общения по изображениям
  • Воспроизведение пайплайна обучения архитектуры MiniGPT-4
Размер
до 1K записей
Скачиваний за месяц
748
Лайков
45

Как загрузить

from datasets import load_dataset

ds = load_dataset("Vision-CAIR/cc_sbu_align")