cs.RO
PulseAugur coverage of cs.RO — every cluster mentioning cs.RO across labs, papers, and developer communities, ranked by signal.
4 天有情绪数据
-
利用无动作人类主观视角视频增强机器人学习
研究人员开发了一种名为Ego Guidance的新方法,该方法利用无动作监督的人类主观视角视频来改进机器人策略学习。该方法使用预训练的视觉语言模型(VLM)和共享动作与表征预测(SPAR)架构。研究结果表明,从这些视频中学到的表征能够提高机器人任务性能,尤其是在分布外任务上,并且性能随着视频数据的增加而扩展。
-
ZipDrift 通过多模态成本生成增强短视界MPC
研究人员开发了ZipDrift,一种用于在短视界模型预测控制(MPC)中生成多模态成本修正的新颖方法。该方法解决了传统MPC的局限性,传统MPC在面对多个最优解时可能目光短浅且容易出错。ZipDrift训练了一个单步漂移生成器来产生模仿长视界专家的成本修正,通过成本评估进行学习,而无需区分优化器。在运动学超车基准测试中,ZipDrift在所有测试场景中均实现了无碰撞性能,显著优于标准的MPC方法和ZipMPC风格的回归器。
-
具身AI研究解决记忆纠正和理解问题 · 跟踪2个来源
两篇新的arXiv论文探讨了记忆在具身AI系统中至关重要的作用。第一篇论文《SPARK: Self-Correcting Embodied Memory via Physical Re-Observation》介绍了一个通过重新观察环境来纠正AI知识库中错误的框架,展示了改进的问题回答能力和更高效的记忆存储。第二篇论文《When the Past Shapes Action: Understanding Embodied Memory…
-
新的ASTEROID框架提升AI智能体探索效率
研究人员开发了ASTEROID,一个新颖的师生框架,旨在提高在部分可观察性下运行的序列决策智能体的上下文内探索能力。该方法通过蒸馏基于学生智能体同策略上下文的专家动作来训练学生智能体,从而能够在没有传统强化学习高样本成本的情况下实现高效探索。ASTEROID在包括机器人和Procgen在内的各种环境中都表现出卓越的性能,实现了显著更高的回报,并在探索任务中超越了前沿模型。
-
ClearNav策略增强了四旋翼在复杂环境中的安全性
研究人员开发了ClearNav,一种用于四旋翼的新型导航策略,旨在提高在复杂环境中的飞行安全性。ClearNav通过将无人机的运动限制在其板载摄像头可观察的方向来解决碰撞问题,并对靠近障碍物的横向速度和高速进行惩罚。这种方法在模拟和现实世界的测试中都显著降低了碰撞率并提高了成功率,即使在传感器和计算能力有限的情况下也是如此。
-
Akule框架通过稀疏交互扩散模型加速多机器人运动规划
研究人员开发了Akule,一个利用稀疏交互扩散模型的多机器人运动规划新框架。该方法通过协调单个机器人运动来增强可扩展性,而无需昂贵的联合计算。Akule包含用于成对校正、上下文选择和效果组合的学习模块,能够进行高效的去噪更新。该系统已展示出显著的加速效果,在各种基准测试中规划速度提高了25倍,并成功协调了多达256个机器人。
-
AI 研究:Transformer 策略可能掩盖多智能体行动崩溃
一篇题为“Permutation Robustness Is Not Enough: Action Collapse in Multi-Agent Transformer Policies”的新研究论文探讨了将 Transformer 模型应用于多智能体机器人学习的挑战。研究强调,虽然 Transformer 可以模拟智能体交互,但其固有的排序可能导致策略中所有智能体选择相同动作,从而掩盖了潜在的排序敏感性。研究人员建议使用超越简单排…
-
新AI框架提升自动驾驶对弱势道路使用者的安全性
研究人员开发了一个用于评估和预测自动驾驶场景中弱势道路使用者(VRUs)关键性的新框架。与以往通常针对特定情况并侧重于车车交互的指标不同,这一新颖的指标被设计为场景无关的。所提出的方法显著提高了行人关键性的分类,显示出高达50%的提升。此外,整体关键性预测框架比现有方法展示了275%的改进,实现了0.96的高F1分数,并能够对所有交通参与者类别进行一致的评估。
-
Decentralized drone system autonomously monitors wildlife using AI
研究人员开发了一个基于视觉的去中心化系统,使用多个四旋翼无人机进行自主野生动物监测。该方法允许使用最少的传感器进行可扩展、低带宽的操作,仅依赖于一个板载RGB摄像头。该系统旨在在其自然栖息地中稳健地识别和追踪大型物种,采用新颖的协调和追踪算法,在没有集中通信的情况下应对动态环境。
-
新框架在视觉失效时维持人工智能世界模型
研究人员开发了一种新颖的框架,用于在主要视觉感知退化或被遮挡时维持世界模型。这种溯因方法将预期共证的缺失视为隐藏原因的指示,从而能够从声学等互补模态进行推断。该系统以麦克风阵列为实例,即使在没有视觉线索的情况下,也能检测和定位接近的道路使用者,并发出风险警告。实验表明,该方法可提供及时的警告,与现有的声学基线相比,可减少误报,并在显著的视觉退化下保持危险意识。
-
新的有序动作分词方法增强了机器人的视觉运动策略学习
研究人员推出了一种新颖的有序动作分词(OAT)方法,用于将连续的机器人动作块离散化为有序的令牌。该方法旨在通过提供高压缩率、完全可解码性和有序令牌空间来改进视觉运动策略学习,从而增强与下游策略的兼容性。OAT 利用带有寄存器、有限标量量化和诱导排序的 Transformer 进行训练,在推理成本和动作保真度之间实现了随时可变的权衡,并在模拟和真实世界的各种策略骨干和任务中展示了强大的性能。
-
PUMA框架增强四足机器人跑酷敏捷性
研究人员开发了PUMA,一个端到端的学习框架,旨在增强四足机器人的跑酷能力。该系统集成了视觉感知和立足点先验,使机器人能够估计以自我为中心的极坐标立足点先验,以实现主动姿态适应。在模拟和真实复杂地形中的实验证明了PUMA在挑战性障碍物穿越任务中的敏捷性和鲁棒性。
-
新的过滤方法增强了GPS信号退化时无人机的安全性 · 跟踪2个来源
研究人员开发了一种新方法,用于确保小型无人机系统(sUAS)在全局导航卫星系统(GNSS)信号退化时,其学习到的分离策略的安全性。该研究评估了两种架构方法:动作过滤和观测过滤。事实证明,观测过滤的有效性显著更高,通过将最坏情况的交通状况直接呈现给策略,从而保留了策略的决策权,将近空中碰撞的发生率降低了90%。
-
新FORGE方法增强机器人功能性工具使用泛化能力
研究人员开发了一种名为FORGE(功能推理与具身执行)的新方法,以提高机器人泛化功能性工具使用的能力。FORGE通过从无动作数据中预测可泛化的关键点轨迹,然后用有限的演示将其具身化为机器人动作,从而将功能性推理与动作执行分离。该方法在七种工具的击打功能基准测试中取得了超过2倍的成功率提升,在模拟和真实世界测试中均优于最先进的针对未见过工具的方法。
-
WristMimic 框架通过手腕引导实现全身人形机器人控制
研究人员开发了 WristMimic,一个新颖的框架,通过手腕运动引导操作来控制全身人形机器人。该方法将自由体运动与富含接触的手部操作分开,使用手腕运动学目标来引导手部配置和物体交互结果。实验表明,WristMimic 的性能与依赖于完整手指姿势监督的方法相当或更优,同时还允许在不同手部实体之间进行重定向。
-
新框架利用海试数据模拟AUV机动
研究人员开发了一种新的微分复合逼近框架,用于利用海试数据对自主水下航行器(AUV)的机动进行建模。该框架联合校准多项式基分量和数据自适应分量,从而能够更准确地预测AUV行为。采用具有灵敏度感知机制的基于梯度的协同校准方法和神经网络残差分量进行预测。该系统还包含一个用于估计和补偿洋流影响的程序,以改进学习目标。使用7米AUV的海试数据进行的评估表明,与现有方法相比,轨迹和速度预测得到了改进。
-
新框架验证了海上无人机的深度单目姿态估计
一篇新的研究论文详细介绍了一个用于测试自主航行海上无人机深度单目姿态估计的硬件验证框架。该系统允许在模拟的逼真海上环境中实现完全自主的室内飞行,捕捉关键的现实世界效应,如感知延迟和计算限制。实验证明了稳定的闭环飞行,为在舰船部署前开发海上无人机自主性奠定了安全的中间步骤。
-
新的ED3R框架使用协作机器人进行更快、更节能的野火检测
一个名为ED3R的新框架已被开发用于能源感知的分布式灾难检测,特别针对野火场景。该系统实现了机器人代理与远程控制器之间的协作决策,在最小化能源消耗的同时优化野火检测置信度。ED3R通过分布式神经网络回归模型,集成了避障、自适应任务完成和预测能力等功能,与现有方法相比,取得了很高的成功率以及在能源效率和检测速度方面的显著改进。
-
机器人通过视觉和触觉反馈学习和改进策略 · 跟踪5个来源
研究人员开发了新的框架,通过推理时引导和自我改进来提高机器人策略性能。VERITAS是一个生成器-验证器框架,它使用预训练策略和视觉验证器在无需额外训练的情况下引导动作,实现了可与专家演示相媲美的性能提升。ViTaL通过在视觉数据之外整合触觉反馈来增强这一点,用于接触丰富的操作任务,显著提高了成功率。此外,Visual-OPSD和ViGOS探索了多模态大语言模型的按策略自蒸馏技术,解耦感知与推理,以改善基础行为并降低推理成本。