К содержимому

Датасет · evayinhao

Бенчмарк пространственного мышления VLM в сценах с зеркалами

evayinhao/MIRA-Bench

Более 14 тысяч вопросов и ответов к реальным фото с отражениями для проверки мультимодальных моделей.

Что внутри

Бенчмарк MIRA-Bench включает 14 140 пар вопрос-ответ на английском языке, составленных к 1 011 изображению из 525 реальных сцен с зеркалами. В состав релиза входят оригинальные аннотации и 430 самостоятельно отснятых RGB-фотографий. Набор создан для проверки того, насколько хорошо vision-language модели (VLM) различают реальные объекты и их отражения, понимают пространство и принимают решения.

Что можно сделать

  • Тестирование vision-language моделей (VLM) на устойчивость к оптическим иллюзиям и отражениям
  • Оценка навыков пространственного рассуждения (spatial reasoning) у мультимодальных ИИ-ассистентов
  • Проверка систем компьютерного зрения для робототехники в сложных интерьерах
Задачи
Вопросы по картинкам
Языки
Английский
Размер
10K–100K записей
Скачиваний за месяц
803
Лайков
4
Доступ
по запросу на Hugging Face

Как загрузить

from datasets import load_dataset

ds = load_dataset("evayinhao/MIRA-Bench")