Датасет · evayinhao
Бенчмарк пространственного мышления VLM в сценах с зеркалами
evayinhao/MIRA-Bench
Более 14 тысяч вопросов и ответов к реальным фото с отражениями для проверки мультимодальных моделей.
Что внутри
Бенчмарк MIRA-Bench включает 14 140 пар вопрос-ответ на английском языке, составленных к 1 011 изображению из 525 реальных сцен с зеркалами. В состав релиза входят оригинальные аннотации и 430 самостоятельно отснятых RGB-фотографий. Набор создан для проверки того, насколько хорошо vision-language модели (VLM) различают реальные объекты и их отражения, понимают пространство и принимают решения.
Что можно сделать
- Тестирование vision-language моделей (VLM) на устойчивость к оптическим иллюзиям и отражениям
- Оценка навыков пространственного рассуждения (spatial reasoning) у мультимодальных ИИ-ассистентов
- Проверка систем компьютерного зрения для робототехники в сложных интерьерах
- Задачи
- Вопросы по картинкам
- Языки
- Английский
- Размер
- 10K–100K записей
- Скачиваний за месяц
- 803
- Лайков
- 4
- Доступ
- по запросу на Hugging Face
Как загрузить
from datasets import load_dataset
ds = load_dataset("evayinhao/MIRA-Bench")