研究人员开发了一种新颖的端到端算法,用于部分可观测环境中的基于模型的强化学习。该算法通过整合用于状态滤波的序贯蒙特卡洛方法、用于动力学模型在线更新以及使用Q值函数进行近似在线规划的方法,解决了推断隐藏状态、学习潜在动力学和在不确定性下进行规划的挑战。理论分析提供了遗憾界限,将误差分解为与模型估计、粒子滤波、蒙特卡洛回滚和QMDP近似相关的部分,深入揭示了统计样本量、粒子预算、回滚预算和规划深度如何影响性能。该框架已在基于模型预测控制的深度强化学习设置中得到验证,显示了其在各种环境中的实际适用性。 AI
影响 为复杂、部分可观测环境中的决策提供了一个有理论依据且实用的方法,有望推动自主系统的发展。
排序理由 详细介绍新算法和理论分析的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
- arXiv
- end-to-end reinforcement learning
- Hugging Face
- model predictive control
- partially observable Markov decision process
- Particle Filters
- QMDP
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →