TD-MPC2
PulseAugur coverage of TD-MPC2 — every cluster mentioning TD-MPC2 across labs, papers, and developer communities, ranked by signal.
4 天有情绪数据
-
新的诊断工具改进了强化学习中的世界模型评估
研究人员引入了一种名为 operator-on-F 的新诊断工具,以更好地评估基于模型的强化学习中使用的世界模型。该方法通过关注模型潜在展开中的规划相关错误来补充现有的值等价性检查。operator-on-F 诊断显示了算子错误与规划回报损失之间的强相关性,在区分不同大小和架构的模型性能方面优于传统的奖励预测错误。
-
新的潜在空间规划框架提升农业机器人导航能力
研究人员开发了LeCropFollow,一种用于在非结构化农田中运行的农业机器人的新型视觉导航框架。该系统利用学习到的潜在表示,集成了自监督语义热力图提取器和基于模型的强化学习规划器(TD-MPC2),直接在潜在流形内优化轨迹。这种方法保留了语义上下文,实现了从模拟到现实世界的零样本迁移,无需微调。田间实验表明,LeCropFollow在结构化行中的表现与现有方法相当,在种植间隙中的表现显著优于现有方法,与基于关键点的技术相比,语义故…
-
FlowMPC框架通过世界模型增强模仿学习
研究人员开发了FlowMPC,一个新框架,可增强多模态动作空间中流匹配(FM)策略的性能。通过将学习到的世界模型与模仿学习的FM策略相结合,FlowMPC实现了模型预测路径积分(MPPI)规划,以改进测试时动作。在ManiSkill操作任务(特别是PickCube和PickSingleYCB)上的实验表明,FlowMPC的表现优于单独的FM策略,在剧集结束时的成功率方面显示出显著的提升。该方法表明,基于世界模型的规划可以有效地补充FM…
-
Equivariant World Models Offer Certified Predictability Horizon
一篇新研究论文介绍了一种方法,用于认证等变世界模型的可预测性范围。该方法提供了一个可计算的证书,保证了随时间变化的误差界限,并按模型的李雅普诺夫谱进行分层。这种方法证明了结构,特别是等变性,对于长期可靠的预测至关重要,而不仅仅是尺度。在实践中,一个在 Lorenz-96 数据上的等变网络准确地恢复了李雅普诺夫谱,而基线方法则失败了。该证书还成功审计了预训练模型,如 TD-MPC2 和 V-JEPA 2-AC,证明了其在评估模型校准和可…
-
ELVIS: Ensemble-Calibrated Latent Imagination for Long-Horizon Visual MPC
研究人员开发了ELVIS,一种用于强化学习中长时域视觉规划的新方法,该方法使用高斯混合模型预测控制器在扩展的rollout中维护多个假设。该方法在一个新论文中进行了详细介绍,还包含了一个不确定性感知的回报机制来稳定想象并限制复合误差。ELVIS在视觉控制任务上展示了最先进的性能,并有望在有遮挡的现实世界应用中发挥作用。另外,另一篇论文介绍了TRAP,一种通过操纵想象轨迹的排名来针对世界模型的后门攻击,该攻击已被证明会降低Dreamer…