К содержимому

Датасет · WanyueZhang

Бенчмарк пространственного мышления мультимодальных LLM

WanyueZhang/MulSeT

Англоязычный визуальный бенчмарк для проверки способности MLLM понимать 3D-сцены по двум разным ракурсам.

Что внутри

Датасет содержит изображения и вопросы на английском языке, направленные на оценку пространственного понимания у мультимодальных моделей. Задача нейросети — сопоставить информацию с двух разных точек обзора одной трёхмерной сцены, чтобы правильно ответить на вопрос.

Что можно сделать

  • Тестирование и сравнение мультимодальных LLM в задачах 3D-восприятия и пространственной логики
  • Диагностика слабых мест визуальных энкодеров при работе с несколькими ракурсами
Языки
Английский
Скачиваний за месяц
80,6 тыс.
Лайков
15

Как загрузить

from datasets import load_dataset

ds = load_dataset("WanyueZhang/MulSeT")