К содержимому

Датасет · BLINK-Benchmark

Бенчмарк зрительного восприятия для мультимодальных LLM

BLINK-Benchmark/BLINK

Набор изображений и текстов для оценки базовых навыков визуального восприятия у мультимодальных моделей.

Что внутри

Бенчмарк содержит от 1 до 10 тысяч примеров, сочетающих изображения и текстовые задания. Он создан авторами статьи «BLINK: Multimodal Large Language Models Can See but Not Perceive» для проверки способностей к зрительному восприятию, которые человек решает мгновенно, но которые упускают другие тесты.

Что можно сделать

  • Оценка и сравнение мультимодальных языковых моделей (MLLM)
  • Диагностика пробелов в базовом визуальном восприятии нейросетей
Размер
1K–10K записей
Скачиваний за месяц
19,3 тыс.
Лайков
50

Как загрузить

from datasets import load_dataset

ds = load_dataset("BLINK-Benchmark/BLINK")