Датасет · laurenssam
Тест эквивалентности рендеринга REST для VLM
laurenssam/REST
Датасет для проверки устойчивости Vision-Language Models к подаче вопросов текстом или картинкой.
Что внутри
Содержит от 10K до 100K примеров на английском языке для задач visual-question-answering и image-text-to-text. Вопросы взяты из стандартных бенчмарков и отрендерены в читаемом виде для оценки кросс-модального рассуждения.
Что можно сделать
- Оценка устойчивости Vision-Language Models к различным модальностям ввода
- Тестирование моделей на кросс-модальное логическое соответствие
- Задачи
- Вопросы по картинкам, Вопрос-ответ, Картинка + текст
- Языки
- Английский
- Размер
- 10K–100K записей
- Скачиваний за месяц
- 24 тыс.
- Лайков
- 0
Как загрузить
from datasets import load_dataset
ds = load_dataset("laurenssam/REST")