Датасет · gnucleus-ai
Логи и результаты прогонов ИИ-агентов в FreeCAD (Bench v3)
gnucleus-ai/cad-gen-freecad-bench-v3
1300 финальных попыток 13 агентных систем на бенчмарке параметрического 3D-моделирования в FreeCAD с логами и результатами.
Что внутри
Внутри лежат результаты 1300 оцениваемых попыток (по одной финальной на каждую пару из 13 систем и задач) для таблицы лидеров Parametric CAD Bench v3. Датасет включает сводную таблицу в формате parquet, а также подробные файлы прогонов по папкам: конфигурацию, логи выполнения и итоговые результаты. Сами задачи опубликованы как запускаемые задания для среды Harbor.
Что можно сделать
- Анализ ошибок и траекторий работы ИИ-агентов при генерации 3D-моделей
- Сравнение эффективности различных LLM и агентных архитектур в задачах CAD-проектирования
- Отбор успешных траекторий для SFT-обучения моделей генерации скриптов для FreeCAD
- Размер
- 1K–10K записей
- Скачиваний за месяц
- 92,8 тыс.
- Лайков
- 1
Как загрузить
from datasets import load_dataset
ds = load_dataset("gnucleus-ai/cad-gen-freecad-bench-v3")