Датасет · facebook
Winoground: композиционное понимание
facebook/winoground
Пары картинок и подписей с одинаковыми словами в разном порядке для проверки vision-language моделей.
Что внутри
Winoground — небольшой англоязычный бенчмарк на визуально-лингвистическое композиционное рассуждение. Даны две картинки и две подписи; слова в подписях одинаковые, но порядок разный, и нужно правильно сопоставить изображения и тексты. Данные вручную собраны экспертами-аннотаторами и снабжены разметкой. Примеров меньше 1000.
Что можно сделать
- Оценка композиционного reasoning у VLM
- Тест image-text matching
- Проверка чувствительности к порядку слов
- Задачи
- Картинка → текст, Текст → картинка, Классификация картинок
- Языки
- Английский
- Размер
- до 1K записей
- Скачиваний за месяц
- 1,8 тыс.
- Лайков
- 123
- Доступ
- по запросу на Hugging Face
Модели, обученные на нём
Как загрузить
from datasets import load_dataset
ds = load_dataset("facebook/winoground")