К содержимому

Датасет · MilaWang

Бенчмарк пространственного интеллекта для VLM

MilaWang/SpatialEval

Бенчмарк для оценки пространственного интеллекта больших языковых и мультимодальных моделей по четырём направлениям.

Что внутри

Содержит задачи для проверки пространственных отношений, понимания позиций, подсчета объектов и навигации, включая сценарии Spatial-Map, Maze-Nav и Spatial-Grid. Модальности: image и text, размер от 10K до 100K примеров.

Что можно сделать

  • Оценка пространственного интеллекта мультимодальных языковых моделей
  • Тестирование навыков навигации и рассуждения VLM
Размер
10K–100K записей
Скачиваний за месяц
2,2 тыс.
Лайков
6

Как загрузить

from datasets import load_dataset

ds = load_dataset("MilaWang/SpatialEval")