Датасет · nyu-mll
Пары предложений для NLI
nyu-mll/multi_nli
433 тыс. пар предложений с разметкой textual entailment для обучения и проверки NLI-моделей.
Что внутри
Краудсорсный корпус из 433 тыс. пар предложений с аннотациями логического следования. Он покрывает разные жанры устной и письменной речи и предназначен в том числе для кросс-жанровой проверки. Язык — английский.
Что можно сделать
- Обучить классификатор NLI на парах предложений
- Проверить кросс-жанровое обобщение encoder-модели
- Использовать как бенчмарк для entailment-задач
- Задачи
- Классификация текста
- Языки
- Английский
- Размер
- 100K–1M записей
- Скачиваний за месяц
- 37,7 тыс.
- Лайков
- 124
Модели, обученные на нём
- cross-encoder/nli-deberta-v3-smallZero-shot классификация 379 тыс.
- cross-encoder/nli-deberta-v3-baseZero-shot классификация 214,5 тыс.
- cross-encoder/nli-MiniLM2-L6-H768Zero-shot классификация 208,7 тыс.
- cross-encoder/nli-deberta-v3-largeZero-shot классификация 111,9 тыс.
- cross-encoder/nli-deberta-v3-xsmallZero-shot классификация 44,7 тыс.
- cross-encoder/nli-distilroberta-baseZero-shot классификация 22 тыс.
- jaredpalmer/kev-0.8bКлассификация текста 14,2 тыс.
- jaredpalmer/kev-4bКлассификация текста 12,9 тыс.
Как загрузить
from datasets import load_dataset
ds = load_dataset("nyu-mll/multi_nli")