PulseAugur
实时 05:31:51
English(EN) Agon: Competitive Cross-Model RL with Implicit Rival Grading of Reasoning

新的Agon强化学习框架使用竞争模型来评估推理

研究人员推出了一种新颖的强化学习框架Agon,该框架使用两个竞争模型来相互评估对方的推理过程。这种竞争方法通过在训练过程中隐式评判模型的推理来训练模型更有效地思考,而不是仅仅奖励最终答案。与标准的GRPO训练相比,Agon在DeepMath数据集上的pass@1率提高了一倍,并且优于“智能体混合”方法。 AI

影响 这种竞争性强化学习方法可以通过直接训练更好的思考过程,从而带来更强大、更具能力的推理模型。

排序理由 该集群包含一篇详细介绍新AI模型训练方法的论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新的Agon强化学习框架使用竞争模型来评估推理

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Vladislav Beliaev ·

    Agon: Competitive Cross-Model RL with Implicit Rival Grading of Reasoning

    Reinforcement learning from verifiable rewards (e.g. GRPO) is the engine behind today's reasoning models, yet it grades only the final answer. On hard problems this trains models to write more rather than to think better, since the trace itself is never graded and no label for go…