К содержимому

Датасет · harborframework

Набор из 100 сложных задач для оценки ИИ-агентов

harborframework/harbor-mix

Кураторская выборка из 100 сложных и разнообразных агентских задач для быстрой и дешёвой проверки моделей.

Что внутри

В репозитории собрано ровно 100 директорий с задачами, отобранными из пула бенчмарков Harbor Adapters. Каждый каталог развёрнут в корень репозитория и включает файл instruction.md с описанием задания. Набор спроектирован так, чтобы сохранить широкий сигнал от масштабных проверок агентов, но требовать значительно меньше вычислительных затрат.

Что можно сделать

  • Быстрый бенчмаркинг и оценка качества автономных ИИ-агентов
  • Сравнение моделей в задачах генерации текста и обучения с подкреплением (reinforcement-learning)
Задачи
Генерация текста, Обучение с подкреплением
Размер
до 1K записей
Скачиваний за месяц
56,4 тыс.
Лайков
4
Доступ
по запросу на Hugging Face

Как загрузить

from datasets import load_dataset

ds = load_dataset("harborframework/harbor-mix")