Датасет · codeparrot
Бенчмарк APPS для генерации Python-кода
codeparrot/apps
10 тыс. задач по Python — от однострочных до алгоритмических — для оценки и обучения генерации кода.
Что внутри
APPS — бенчмарк для генерации Python-кода из 10 000 задач. Задачи варьируются от однострочных решений до существенных алгоритмических вызовов. Подробности — в статье по ссылке из карточки.
Что можно сделать
- Оценить LLM на генерации Python-кода
- Проверить code-ассистента на алгоритмических задачах
- Дообучить LoRA для Python-программирования
- Задачи
- Генерация текста
- Языки
- Код
- Скачиваний за месяц
- 26,8 тыс.
- Лайков
- 217
Модели, обученные на нём
- jondurbin/bagel-dpo-34b-v0.2Генерация текста 9,1 тыс.
- jondurbin/bagel-dpo-34b-v0.5Генерация текста 9 тыс.
- jondurbin/bagel-8b-v1.0Генерация текста 9 тыс.
- Zyphra/ZR1-1.5BГенерация текста 8,5 тыс.
- mradermacher/bagel-34b-v0.5-i1-GGUF 3,8 тыс.
- mradermacher/bagel-dpo-34b-v0.5-i1-GGUF 3,7 тыс.
- bartowski/Sky-T1-32B-Preview-GGUFГенерация текста 3,4 тыс.
- bartowski/Zyphra_ZR1-1.5B-GGUFГенерация текста 2,7 тыс.
Как загрузить
from datasets import load_dataset
ds = load_dataset("codeparrot/apps")