Датасет · allenai
WinoGrande: задачи на здравый смысл
allenai/winogrande
44 тыс. задач с пропуском и двумя вариантами ответа для проверки commonsense reasoning.
Что внутри
Набор текстовых задач на английском в формате заполнения пропуска с бинарным выбором. Вдохновлён Winograd Schema Challenge, но масштабирован и сделан устойчивее к bias датасета. Всего около 44 тыс. задач; метаданные: text, en, 10K–100K.
Что можно сделать
- Оценка LLM на commonsense reasoning
- Fine-tuning или LoRA для выбора ответа
- Бенчмарк устойчивости к bias
- Языки
- Английский
- Размер
- 10K–100K записей
- Скачиваний за месяц
- 229,9 тыс.
- Лайков
- 101
Модели, обученные на нём
- jaredpalmer/kev-27bКлассификация текста 3,2 тыс.
- mradermacher/kev-27b-GGUFmultiple choice 1,8 тыс.
- mradermacher/elf-1-31b-GGUF 1,1 тыс.
- mradermacher/elf-1-12b-GGUF 999
- blackmallangcow/nari-decision-4bЭмбеддинги 452
- kortexa-ai/shingi-27bКлассификация текста 424
- decision-tune/decisiontune-1.0Zero-shot классификация 262
- Danny-Dasilva/embeddinggemma-2-multimodal-typed-decisionZero-shot классификация 162
Как загрузить
from datasets import load_dataset
ds = load_dataset("allenai/winogrande")