研究人员推出AssemblyWorld,一个交互式3D环境,旨在测试通用型AI智能体的3D装配能力。该环境以及包含100个装配任务的AssemblyWorldBench数据集,允许智能体根据2D视图和装配说明来操作部件。对八个不同智能体系统的评估显示出显著的性能差异,表现最佳的系统在部件准确性方面得分很高,但在完整装配的成功率方面较低。研究还强调,在可靠性和准确性方面,开源智能体普遍表现不如闭源智能体。 AI
影响 该基准测试有望加速在能够进行复杂物理操作和空间推理的AI智能体方面的研究。
排序理由 该集群描述了一篇介绍用于评估AI智能体在特定任务上表现的新基准和环境的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
- alphaXiv
- arXiv
- AssemblyWorld
- AssemblyWorldBench
- CatalyzeX
- DagsHub
- Gotit.pub
- Hugging Face
- ScienceCast
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →