К содержимому

Датасет · laurenssam

Тест эквивалентности рендеринга REST для VLM

laurenssam/REST

Датасет для проверки устойчивости Vision-Language Models к подаче вопросов текстом или картинкой.

Что внутри

Содержит от 10K до 100K примеров на английском языке для задач visual-question-answering и image-text-to-text. Вопросы взяты из стандартных бенчмарков и отрендерены в читаемом виде для оценки кросс-модального рассуждения.

Что можно сделать

  • Оценка устойчивости Vision-Language Models к различным модальностям ввода
  • Тестирование моделей на кросс-модальное логическое соответствие
Задачи
Вопросы по картинкам, Вопрос-ответ, Картинка + текст
Языки
Английский
Размер
10K–100K записей
Скачиваний за месяц
24 тыс.
Лайков
0

Как загрузить

from datasets import load_dataset

ds = load_dataset("laurenssam/REST")