Датасет · MilaWang
Бенчмарк пространственного интеллекта для VLM
MilaWang/SpatialEval
Бенчмарк для оценки пространственного интеллекта больших языковых и мультимодальных моделей по четырём направлениям.
Что внутри
Содержит задачи для проверки пространственных отношений, понимания позиций, подсчета объектов и навигации, включая сценарии Spatial-Map, Maze-Nav и Spatial-Grid. Модальности: image и text, размер от 10K до 100K примеров.
Что можно сделать
- Оценка пространственного интеллекта мультимодальных языковых моделей
- Тестирование навыков навигации и рассуждения VLM
- Размер
- 10K–100K записей
- Скачиваний за месяц
- 2,2 тыс.
- Лайков
- 6
Как загрузить
from datasets import load_dataset
ds = load_dataset("MilaWang/SpatialEval")