К содержимому

Датасет · worldbenchmark

Бенчмарк интуитивной физики для видео- и VLM-моделей

worldbenchmark/IntuitivePhysics

Крупный бенчмарк WorldBench на английском языке для оценки понимания физики в генеративных и визуальных моделях.

Что внутри

Датасет объёмом от 100 000 до 1 000 000 записей включает два компонента для проверки физического понимания. Первый состоит из 425 симулированных сцен по 132 кадра с картами RGB, нормалей, глубины, оптического потока и сегментации для моделей уровня Cosmos. Второй добавляет текстовые вопросы на английском языке к 181 видеоролику для задачи VQA.

Что можно сделать

  • Оценка физического реализма в video-to-video и text-to-video моделях
  • Тестирование vision-language моделей на понимание законов физики по видео
Задачи
Вопросы по картинкам, Текст → видео
Языки
Английский
Размер
100K–1M записей
Скачиваний за месяц
235,4 тыс.
Лайков
12

Как загрузить

from datasets import load_dataset

ds = load_dataset("worldbenchmark/IntuitivePhysics")