Датасет · mteb
Бенчмарк поиска контраргументов для эмбеддингов (ArguAna)
mteb/arguana
Набор текстовых пар из бенчмарка MTEB для оценки качества поиска лучшего контраргумента без знания темы.
Что внутри
Датасет входит в состав известного бенчмарка эмбеддингов MTEB и представляет собой корпус англоязычных текстов объёмом от 10 до 100 тысяч записей. Данные взяты из социальных, веб- и письменных источников и предназначены для задачи поиска подходящего контраргумента (text-to-text retrieval). В карточке приведён готовый пример оценки моделей через библиотеку mteb.
Что можно сделать
- Оценка и сравнение моделей текстовых эмбеддингов на задачах семантического поиска
- Тестирование RAG-систем и алгоритмов поиска релевантных аргументов в дискуссиях
- Задачи
- Поиск по текстам
- Языки
- eng
- Размер
- 10K–100K записей
- Скачиваний за месяц
- 18,9 тыс.
- Лайков
- 13
Модели, обученные на нём
Как загрузить
from datasets import load_dataset
ds = load_dataset("mteb/arguana")