К содержимому

Датасет · mixed-modality-search

Мультимодальный бенчмарк поиска по тексту и картинкам

mixed-modality-search/MixBench25

Набор запросов и смешанных корпусов на базе MSCOCO, Google_WIT, VisualNews и OVEN для оценки кросс-модального поиска.

Что внутри

Бенчмарк объединяет данные из четырёх известных источников: MSCOCO, Google_WIT, VisualNews и OVEN. Внутри лежат тексты и изображения на английском языке, разделённые на сплиты с запросами (query), корпусами (corpus, mixed_corpus) и оценками релевантности (qrel).

Что можно сделать

  • Оценка качества систем смешанного мультимодального информационного поиска (text-ranking)
  • Тестирование эмбеддингов, работающих одновременно с текстовыми и визуальными документами
Задачи
text ranking
Языки
Английский
Скачиваний за месяц
48,7 тыс.
Лайков
0

Как загрузить

from datasets import load_dataset

ds = load_dataset("mixed-modality-search/MixBench25")