PulseAugur
中
实时 02:52:18
English(EN) One Run Is Not an Idea: The Implementation Lottery in Automated Research

新论文警告：自动化研究存在“实现彩票”风险

作者 PulseAugur 编辑部 · [2 个来源] ·

一篇题为《一次运行并非一个想法：自动化研究中的实现彩票》的新研究论文，重点指出了自动化研究系统中的一个重大问题。该论文引入了“实现彩票”的概念，即关于一个想法的结论是基于单次实验运行得出的，而这可能无法代表该想法本身。这种实现上的差异可能导致不可靠的结论，因为研究结果会因测试的是想法的哪个具体版本而异。该研究提出了一种“想法可靠性审计”，通过测试多种实现并评估结果的一致性来衡量想法的可靠性。 AI

影响 强调了自动化研究结果潜在的不可靠性，敦促在得出结论前跨多种实现进行验证。

排序理由 该集群包含一篇研究论文，详细介绍了一种新方法并指出了自动化研究系统中的一个问题。

在 arXiv cs.MA (Multiagent) 阅读 →

AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →

新论文警告：自动化研究存在“实现彩票”风险

报道来源 [2]

  1. arXiv cs.AI TIER_1 English(EN) · Jingjie Ning, Shanshan Zhong, Xiaochuan Li, Ji Zeng, Chenyan Xiong ·

    一次运行并非一个想法：自动化研究中的实现彩票

    arXiv:2607.26587v1 Announce Type: cross Abstract: Automated research systems use experimental scores both to deliver artifacts and to decide which ideas to retain, transfer, and pursue. Yet one run scores one implementation of an idea. Crediting that realization-level score as ev…

  2. arXiv cs.MA (Multiagent) TIER_1 English(EN) · Chenyan Xiong ·

    一次运行并非一个想法：自动化研究中的实现彩票

    Automated research systems use experimental scores both to deliver artifacts and to decide which ideas to retain, transfer, and pursue. Yet one run scores one implementation of an idea. Crediting that realization-level score as evidence about the parent mechanism creates the \emp…

相关实体

相关话题