PulseAugur
实时 17:57:15
English(EN) Expected Free Energy as Belief-Dependent Utility for rho-POMDPs

新框架统一了 POMDP 中的不确定性约简和奖励

研究人员为部分可观察马尔可夫决策过程(POMDP)开发了一个新框架,该框架直接奖励不确定性约简。这种方法被称为最小化预期自由能(EFE),已被证明等同于求解一种特定类型的 POMDP,其中效用是预期的信息增益。在包括 Tiger 问题和 RockSample 在内的各种环境中的实验表明,EFE 规划无需针对特定任务进行调整,即可匹配或超越仅基于奖励的规划,并避免了过度探索问题。这为信息收集有成本的应用(如故障检测和医学筛查)提供了一个实用的、开箱即用的探索目标。 AI

影响 为部分可观察环境中的探索提供了一个统一的、未经调整的目标,有可能提高智能体在复杂现实世界任务中的性能。

排序理由 学术论文,详细介绍了 POMDP 的新理论框架和实验验证。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新框架统一了 POMDP 中的不确定性约简和奖励

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Patrick Cooper, Alvaro Velasquez ·

    rho-POMDPs 的预期自由能作为依赖于信念的效用

    arXiv:2607.16981v1 Announce Type: new Abstract: An agent acting under partial observability must decide when to gather information and which observations are worth their cost. Standard POMDPs value information only through its eventual effect on reward. The $\rho$-POMDP framework…