Датасет · nyu-mll
Бенчмарк GLUE для понимания языка
nyu-mll/glue
Сборник задач и данных для обучения и оценки систем понимания английского текста.
Что внутри
Это набор ресурсов для обучения, оценки и анализа систем понимания естественного языка. Включает несколько задач, в том числе вручную подготовленный оценочный набор ax; данные на английском, модальности — text и tabular. Объём — от 1 до 10 млн примеров, есть публичный лидерборд GLUE.
Что можно сделать
- Оценка и сравнение NLU-моделей на едином бенчмарке
- Дообучение классификатора для одной из задач GLUE
- Проверка переноса языковой модели на английские NLU-задачи
- Задачи
- Классификация текста
- Языки
- Английский
- Размер
- 1M–10M записей
- Скачиваний за месяц
- 585,5 тыс.
- Лайков
- 785
Модели, обученные на нём
- tasksource/ModernBERT-base-nliZero-shot классификация 45,9 тыс.
- chaoliangUNSW/Jev-Style-Qwen3.5-2B-Decision-GGUFКлассификация текста 15,9 тыс.
- tasksource/deberta-small-long-nliZero-shot классификация 10,2 тыс.
- tasksource/ModernBERT-large-nliZero-shot классификация 8,2 тыс.
- chaoliangUNSW/Jev-Style-Qwen3.5-2B-Decision-MLX-bf16Классификация текста 3,4 тыс.
- tasksource/ettin-17m-embedПохожесть текстов 3,2 тыс.
- tasksource/deberta-base-long-nliZero-shot классификация 2,2 тыс.
- nickprock/archai-jev-qwen-1.5bГенерация текста 1,5 тыс.
Как загрузить
from datasets import load_dataset
ds = load_dataset("nyu-mll/glue")