PulseAugur
实时 14:43:08

新框架改进了强化学习中的信用分配

研究人员推出了一种用于强化学习代理的新框架——Counterfactual Shapley Credit Assignment (CSCA)。CSCA 使用反事实 Shapley 值($\phi$-值)来更好地归因结果的功劳和过失,区分代理技能与环境随机性。该方法增强了时间信用分配,尤其是在因果稀疏、随机性高和奖励延迟的情况下。已开发出一种高效的 $\phi$-值估计器,从而产生了一种名为 $\phi$-PPO 的新策略梯度方法,该方法在挑战性环境中表现出卓越的样本效率。 AI

影响 增强了强化学习代理的样本效率和可解释性,有可能提高在复杂环境中的性能。

排序理由 该集群包含一篇详细介绍强化学习新框架和方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新框架改进了强化学习中的信用分配

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Mingxuan Li, Kaizhan-Lee, Elias Bareinboim ·

    反事实Shapley信用分配

    arXiv:2607.16999v1 Announce Type: cross Abstract: The Credit Assignment Problem (CAP) is fundamental to developing efficient and explainable Reinforcement Learning (RL) agents. Existing frameworks, whether relying on temporal contiguity or hindsight-conditioned reward reweighting…