К содержимому

Датасет · yingss

Мультимодальный eval-датасет MixLoRA

yingss/mixlora-eval-data

Набор данных для мультимодальной оценки и бенчмарк MME из статьи MixLoRA (ACL 2024).

Что внутри

Датасет содержит отложенный набор мультимодальной оценки из 9 инструктивных задач (Vision-Flan) и бенчмарк MME для независимой оценки. Размер датасета составляет от 1K до 10K примеров на английском языке.

Что можно сделать

  • Оценка мультимодальных языковых моделей и LoRA-адаптеров
  • Бенчмаркинг Vision-Language моделей на задачах визуальных вопросов и ответов
Задачи
Вопросы по картинкам, Классификация картинок
Языки
Английский
Размер
1K–10K записей
Скачиваний за месяц
21,6 тыс.
Лайков
0

Как загрузить

from datasets import load_dataset

ds = load_dataset("yingss/mixlora-eval-data")