Датасет · BLINK-Benchmark
Бенчмарк зрительного восприятия для мультимодальных LLM
BLINK-Benchmark/BLINK
Набор изображений и текстов для оценки базовых навыков визуального восприятия у мультимодальных моделей.
Что внутри
Бенчмарк содержит от 1 до 10 тысяч примеров, сочетающих изображения и текстовые задания. Он создан авторами статьи «BLINK: Multimodal Large Language Models Can See but Not Perceive» для проверки способностей к зрительному восприятию, которые человек решает мгновенно, но которые упускают другие тесты.
Что можно сделать
- Оценка и сравнение мультимодальных языковых моделей (MLLM)
- Диагностика пробелов в базовом визуальном восприятии нейросетей
- Размер
- 1K–10K записей
- Скачиваний за месяц
- 19,3 тыс.
- Лайков
- 50
Как загрузить
from datasets import load_dataset
ds = load_dataset("BLINK-Benchmark/BLINK")