PulseAugur
实时 11:04:57
English(EN) Malliavin Calculus for Counterfactual Gradient Estimation in Adaptive Inverse Reinforcement Learning

新的Malliavin微积分方法估计自适应IRL的反事实梯度

研究人员开发了一种新颖的被动自适应逆强化学习(IRL)算法,该算法通过观察前向学习者的梯度来重建其损失函数。这种新方法利用Malliavin微积分来有效地估计反事实梯度,这在被动IRL场景中至关重要但难以获得。通过将条件化重塑为涉及Malliavin量的不条件期望之比,该算法实现了标准的估计速率,并为这个复杂的梯度估计问题提供了一种具体的方法。 AI

影响 引入了一种新的数学技术来改进强化学习中的梯度估计,有可能提高学习智能体行为的效率。

排序理由 这是一篇详细介绍自适应逆强化学习新颖算法方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.LG 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新的Malliavin微积分方法估计自适应IRL的反事实梯度

报道来源 [1]

  1. arXiv cs.LG TIER_1 English(EN) · Vikram Krishnamurthy, Luke Snow ·

    Malliavin Calculus for Counterfactual Gradient Estimation in Adaptive Inverse Reinforcement Learning

    arXiv:2604.01345v2 Announce Type: replace Abstract: Inverse reinforcement learning (IRL) recovers the loss function of a forward learner from its observed responses. Adaptive IRL aims to reconstruct the loss function of a forward learner by passively observing its gradients as it…