实体
Temporal Difference (TD) learning
Temporal Difference (TD) learning
PulseAugur coverage of Temporal Difference (TD) learning — every cluster mentioning Temporal Difference (TD) learning across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
研究论文分析时间差分学习中的方差及其降低方法
一篇新研究论文分析了时间差分（TD）学习中的方差问题。TD学习是强化学习中使用的一种方法。研究表明，TD学习可以通过聚合更多独立的轨迹来减少方差，其方差渐近地受到蒙特卡洛估计量的限制。该研究还引入了直接优势估计（DAE）作为一种回归调整的控制变量，在大量样本场景下提供了比TD更严格的方差界限。
-
新界限增强了强化学习的统计推断能力
研究人员为马尔可夫链诱导的鞅开发了新的高维集中不等式和Berry-Esseen界。这些发现被应用于分析具有线性函数逼近的时间差（TD）学习，这是强化学习（RL）中的一种关键方法。该研究为TD学习提供了强大的一致性保证，并为TD估计量建立了$O(T^{- rac{1}{4}}\log T)$的分布收敛速率。