研究人员开发了一种名为熵正则化秩掩码策略优化(ERPO)的新方法,以改进代码生成任务的测试时强化学习(TTRL)。传统的TTRL依赖于自我投票来获取奖励,这不适用于程序无法通过表面形式进行比较的代码。ERPO通过在从问题陈述派生的探针上执行候选程序来引入探针共识奖励(PCR),从而创建行为训练信号。为了解决PCR的局限性,ERPO使用秩掩码进行保守更新,并使用熵上限来管理策略漂移,从而在代码生成基准测试中取得了显著的改进。 AI
影响 通过改进用于测试时适应的强化学习技术,增强了AI代码生成能力。
排序理由 该集群包含一篇详细介绍代码生成新方法的 ist 研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
- alphaXiv
- arXiv
- CatalyzeX
- DagsHub
- Entropy-Regularized Rank-Masked Policy Optimization
- Gotit.pub
- Hugging Face
- Probe Consensus Reward
- ScienceCast
- Test-Time Reinforcement Learning
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →