Датасет · WanyueZhang
Бенчмарк пространственного мышления мультимодальных LLM
WanyueZhang/MulSeT
Англоязычный визуальный бенчмарк для проверки способности MLLM понимать 3D-сцены по двум разным ракурсам.
Что внутри
Датасет содержит изображения и вопросы на английском языке, направленные на оценку пространственного понимания у мультимодальных моделей. Задача нейросети — сопоставить информацию с двух разных точек обзора одной трёхмерной сцены, чтобы правильно ответить на вопрос.
Что можно сделать
- Тестирование и сравнение мультимодальных LLM в задачах 3D-восприятия и пространственной логики
- Диагностика слабых мест визуальных энкодеров при работе с несколькими ракурсами
- Языки
- Английский
- Скачиваний за месяц
- 80,6 тыс.
- Лайков
- 15
Как загрузить
from datasets import load_dataset
ds = load_dataset("WanyueZhang/MulSeT")