К содержимому

Датасет · harborframework

Крупные входные файлы для бенчмарка Terminal-Bench-Science

harborframework/terminal-bench-science-lfs

Зеркало тяжёлых файлов для научных задач бенчмарка Terminal-Bench-Science, исключённое из git.

Что внутри

Репозиторий хранит крупные входные файлы, которые подтягиваются при сборке Docker-контейнеров для задач бенчмарка Terminal-Bench-Science. Все данные разложены по директориям конкретных задач и проверяются по контрольным суммам. Автор явно предупреждает, что это материалы бенчмарка и их нужно исключать из обучающих выборок.

Что можно сделать

  • Локальное развёртывание и прогон агентов на задачах бенчмарка Terminal-Bench-Science
  • Фильтрация обучающих корпусов от утечек тестовых данных (decontamination)
Скачиваний за месяц
365,1 тыс.
Лайков
11

Как загрузить

from datasets import load_dataset

ds = load_dataset("harborframework/terminal-bench-science-lfs")