研究人员推出了CADWorld,一个旨在评估计算机使用代理在机械计算机辅助设计(CAD)领域复杂、长周期任务中的能力的新基准。该基准包含11个类别共200个任务,专注于在FreeCAD中进行持久、结构化的工件创建和验证。目前的代理在性能上显示出显著差距,最强的代理成功率仅为17.5%,而专家成功率为87.0%,凸显了在延长工作流程中保持几何和结构完整性所面临的挑战。 AI
影响 该基准有望推动能够执行专业工程领域复杂、长期任务的AI代理的进步。
排序理由 该条目描述了一个用于评估特定领域AI代理的新基准,发布在arXiv上。[lever_c_demoted from research: ic=1 ai=1.0]
- alphaXiv
- arXiv
- CADWorld
- CatalyzeX
- CORE Recommender
- DagsHub
- FreeCAD
- Gotit.pub
- Hugging Face
- Influence Flower
- ScienceCast
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →