К содержимому

Датасет · zai-org

Двуязычные мультимодальные инструкции для CogVLM

zai-org/CogVLM-SFT-311K

Корпус пар «изображение — инструкция» для SFT-обучения визуально-языковых моделей на английском и китайском.

Что внутри

Датасет использовался для обучения первой версии мультимодальной модели CogVLM. Внутри собраны визуальные инструкции: около 3500 качественных примеров из MiniGPT-4 объединили с набором Llava-Instruct-150K и перевели на китайский язык с помощью языковой модели.

Что можно сделать

  • SFT-дообучение визуально-языковых моделей (VLM) на выполнение инструкций по картинкам
  • Адаптация мультимодальных моделей для работы с китайским и английским языками
Скачиваний за месяц
1,1 тыс.
Лайков
52

Как загрузить

from datasets import load_dataset

ds = load_dataset("zai-org/CogVLM-SFT-311K")