实体 Zachary S. Siegel

Zachary S. Siegel

PulseAugur coverage of Zachary S. Siegel — every cluster mentioning Zachary S. Siegel across labs, papers, and developer communities, ranked by signal.

Show in brief

总计 · 30天

90 天内 1

发布 · 30天

90 天内 0

论文 · 30天

90 天内 1

层级分布 · 90 天

主题

最近 · 第 1/1 页 · 共 1 条

RESEARCH · CL_01095 · Sep 18 · 14:32

新基准显示，AI代理在复现研究方面面临挑战

研究人员开发了AutoReproduce，一个多代理框架，旨在自动复现研究论文中的AI实验。该系统利用“论文谱系”从引用的文献中挖掘隐性知识，并采用基于采样的单元测试策略来确保代码的可执行性。此外，还引入了一个新的基准测试CORE-Bench，以评估AI在自动化计算可复现性方面的能力。初步测试表明，尽管像CORE-Agent（使用GPT-4o）这样的专用代理在处理困难任务时能达到22%的准确率，但AI在处理复杂计算环境方面的能力仍有很…

新基准显示，AI代理在复现研究方面面临挑战