Датасет · BAAI
Задачи по Python для генерации кода
BAAI/TACO
Бенчмарк TACO: 25 443 задачи по Python для обучения и проверки генерации кода.
Что внутри
TACO — бенчмарк для генерации Python-кода. Он включает 25 443 задачи; в карточке отдельно указаны 1000 задач для train- и test-сплитов. Язык — код, задача — text-generation.
Что можно сделать
- Дообучение code LLM на Python-задачах
- Оценка генерации Python-кода
- Проверка code-ассистентов на бенчмарке
- Задачи
- Генерация текста
- Языки
- Код
- Размер
- 10K–100K записей
- Скачиваний за месяц
- 27 тыс.
- Лайков
- 148
Модели, обученные на нём
- Zyphra/ZR1-1.5BГенерация текста 8,5 тыс.
- bartowski/Sky-T1-32B-Flash-GGUFГенерация текста 3,5 тыс.
- bartowski/Sky-T1-32B-Preview-GGUFГенерация текста 3,4 тыс.
- bartowski/Zyphra_ZR1-1.5B-GGUFГенерация текста 2,7 тыс.
- mradermacher/Sky-T1-32B-Preview-i1-GGUF 1,1 тыс.
- mradermacher/Sky-T1-32B-Flash-i1-GGUF 1 тыс.
- mradermacher/Atlas-Coder-0.5B-i1-GGUF 820
- mradermacher/ZR1-1.5B-i1-GGUF 716
Как загрузить
from datasets import load_dataset
ds = load_dataset("BAAI/TACO")