AssemblyWorld

新的AI基准测试通用型智能体的3D装配能力

研究人员推出AssemblyWorld，一个交互式3D环境，旨在测试通用型AI智能体的3D装配能力。该环境以及包含100个装配任务的AssemblyWorldBench数据集，允许智能体根据2D视图和装配说明来操作部件。对八个不同智能体系统的评估显示出显著的性能差异，表现最佳的系统在部件准确性方面得分很高，但在完整装配的成功率方面较低。研究还强调，在可靠性和准确性方面，开源智能体普遍表现不如闭源智能体。