Датасет · harborframework
Набор из 100 сложных задач для оценки ИИ-агентов
harborframework/harbor-mix
Кураторская выборка из 100 сложных и разнообразных агентских задач для быстрой и дешёвой проверки моделей.
Что внутри
В репозитории собрано ровно 100 директорий с задачами, отобранными из пула бенчмарков Harbor Adapters. Каждый каталог развёрнут в корень репозитория и включает файл instruction.md с описанием задания. Набор спроектирован так, чтобы сохранить широкий сигнал от масштабных проверок агентов, но требовать значительно меньше вычислительных затрат.
Что можно сделать
- Быстрый бенчмаркинг и оценка качества автономных ИИ-агентов
- Сравнение моделей в задачах генерации текста и обучения с подкреплением (reinforcement-learning)
- Задачи
- Генерация текста, Обучение с подкреплением
- Размер
- до 1K записей
- Скачиваний за месяц
- 56,4 тыс.
- Лайков
- 4
- Доступ
- по запросу на Hugging Face
Как загрузить
from datasets import load_dataset
ds = load_dataset("harborframework/harbor-mix")