К содержимому

Датасет · gnucleus-ai

Логи и результаты прогонов ИИ-агентов в FreeCAD (Bench v3)

gnucleus-ai/cad-gen-freecad-bench-v3

1300 финальных попыток 13 агентных систем на бенчмарке параметрического 3D-моделирования в FreeCAD с логами и результатами.

Что внутри

Внутри лежат результаты 1300 оцениваемых попыток (по одной финальной на каждую пару из 13 систем и задач) для таблицы лидеров Parametric CAD Bench v3. Датасет включает сводную таблицу в формате parquet, а также подробные файлы прогонов по папкам: конфигурацию, логи выполнения и итоговые результаты. Сами задачи опубликованы как запускаемые задания для среды Harbor.

Что можно сделать

  • Анализ ошибок и траекторий работы ИИ-агентов при генерации 3D-моделей
  • Сравнение эффективности различных LLM и агентных архитектур в задачах CAD-проектирования
  • Отбор успешных траекторий для SFT-обучения моделей генерации скриптов для FreeCAD
Размер
1K–10K записей
Скачиваний за месяц
92,8 тыс.
Лайков
1

Как загрузить

from datasets import load_dataset

ds = load_dataset("gnucleus-ai/cad-gen-freecad-bench-v3")