PulseAugur
实时 17:55:57
English(EN) Automated Discovery Has No Universally Superior Harness

研究发现自动化发现 Harness 存在泛化问题

一篇新研究论文对 OpenEvolveTTT-Discover 等自动化发现系统普遍优越的观念提出了质疑。这项涉及超过 310 万次 LLM 部署的研究发现,没有一个 Harness 在各种模型-问题对上始终表现优于其他 Harness。研究表明,Harness 选择应被视为一个超参数,需要针对特定问题和模型进行定制,而不是一刀切的解决方案。作者还提出了一种自适应分配方法,该方法可以剔除表现不佳的运行并将计算资源重新分配给表现更强的运行,其表现优于固定的或非自适应的集成方法。 AI

影响 表明当前的自动化发现系统可能并非最优,并强调需要针对特定的 AI 模型和问题制定自适应策略。

排序理由 学术论文,详细介绍了自动化发现系统的新方法和发现。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

研究发现自动化发现 Harness 存在泛化问题

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Akshat Gupta, Jermaine Lei, Alexander Lu, Gopala Anumanchipalli, Leshem Choshen ·

    自动化发现没有普遍优越的利用方式

    arXiv:2607.18235v1 Announce Type: cross Abstract: Autonomous discovery systems such as OpenEvolve and TTT-Discover are often used as general-purpose harnesses. However, in practice these are composite systems combining several design choices about archives, parent selection, expl…