critic
PulseAugur coverage of critic — every cluster mentioning critic across labs, papers, and developer communities, ranked by signal.
2 天有情绪数据
-
ACCRUE框架加速机器人学习,跨任务保留技能 · 跟踪2个来源
研究人员开发了ACCRUE,一个新颖的持续性离轨强化学习框架,旨在增强机器人基础模型(RFMs)。ACCRUE使机器人在学习新任务时能够高效地进行,同时保留先前获得的技能,解决了现有同策略和离策略方法的局限性。该框架通过跨任务携带轻量级的actor和critic网络来实现这一点,从而实现知识重用和适应,显著减少了现实世界机器人的训练时间并最大限度地减少了遗忘。
-
新的 QF3 算法将机器人运动策略训练速度提高了 10 倍
研究人员推出了一种新颖的离策略强化学习算法 QF3(具有过滤 Q-梯度的快速流),旨在更有效地训练机器人策略。QF3 利用流匹配结合 Critic 的动作梯度,通过单步预测反向传播,来精炼预训练的流策略或从头开始学习新策略。据报道,与现有的同策略技术相比,该方法在挂钟时间上实现了 10 倍的加速,并且是第一个能够从头开始成功训练人形机器人运动策略以实现零样本硬件迁移的离策略方法。
-
多智能体大语言模型在FIFA世界杯预测研究中表现不一
一项新近发表在arXiv上的研究探讨了多智能体大语言模型(LLMs)在预测方面的有效性,特别是针对2026年FIFA世界杯。该研究涉及一个四智能体系统,其中一个量化专家专注于统计数据,一个新闻专家专注于时事。一个评论智能体审查他们的预测,一个元智能体综合信息。新闻专家表现最佳,在预测确切比分方面达到了与博彩市场相当的准确率,这表明非结构化的实时信息可以作为有价值的预测信号。然而,研究发现,增加评论和元智能体阶段并不一定能超越最强专家的表现。
-
AI集群利用自动化辩论达成共识
TormentNexus 通过实施自动化辩论和共识协议,为多智能体 AI 系统引入了一种新颖的方法。该系统为不同的智能体分配了诸如规划者、执行者、测试者和批评者等专业角色,确保分歧是有原则的,并源于固有的技术张力。当出现冲突时,会启动一个结构化的辩论协议,从断言和证据到反提案,最后到综合和投票,旨在无需人工干预即可解决复杂的技术分歧。
-
AI框架进行具有空间意识的洪水和滑坡风险测绘
研究人员开发了一个新颖的框架,用于绘制印度喀拉拉邦和尼泊尔等地区的洪水和滑坡易感性和风险图。该框架采用空间异质性感知方法,比较了两种策略:邻近门控跨区域训练(S1)和生态门控区域约束训练(S2)。S1在两种灾害和两个地区都展现出更高的准确性和性能指标,尤其是在尼泊尔的洪水易感性方面。虽然两种策略都识别出了普遍的易发区,但S2更好地保留了区域特定的环境差异和预测因子重要性,这表明集成方法可以在尊重当地生态差异的同时增强区域区分度。
-
强化学习智能体因评论家偏差而在部分可观测性下挣扎
一项对部分可观测性下强化学习智能体的最新分析表明,学习性能受到的影响比之前归因于策略限制的要大。研究人员发现,即使最优策略是可表示的,价值函数也是富有表现力的,学习算法也可能收敛到次优策略。这是因为智能体无法观察到完整状态,导致评论家将无法解释的变化误解为价值估计中的急剧曲率,从而将执行器引离真正的最优值。研究表明,调整价值估计的前瞻性视野,而不是简单地提供过去观测的记忆,是缓解这一问题的关键。
-
AI代码测试循环得到改进,以提高验证准确性
研究人员开发了一种对抗性测试加固循环,旨在提高AI模型生成代码的验证准确性。该系统使用一个“测试器”模型编写初始测试,一个变异测试过程来识别残留的缺陷,以及一个“批评者”模型来生成专门针对这些缺陷的新测试。研究揭示了先前分析中的一个伪影,该伪影导致了夸大的跨谱系效应,并在后续实验中得到了纠正。改进后的过程在同谱系批评者回合中显示出显著的增量杀伤率,并在跨提供商配置中显示出有希望的试点差异,突显了线束设计在模型比较中的重要性。
-
TormentNexus 通过结构化辩论协议实现 AI 智能体共识自动化
TormentNexus 是一种旨在自动化多智能体 AI 系统之间共识建立的新协议。它通过实施结构化的辩论和共识机制,解决了可能阻碍开发的智能体分歧问题。该协议为规划者、执行者、测试者和批评者等智能体定义了不同的角色,每个角色都有可能导致冲突的具体目标。TormentNexus 将这些分歧形式化为多轮对话,旨在通过结构化的异议、反提案和加权投票来实现机器可读的共识。
-
AI 开发工具优先考虑可验证证据而非速度
作者花了四个月时间开发了一个 AI 开发工具,用于构建可发货的产品,强调对代理生成的工作进行可验证的证据和人工监督。该系统采用五角色循环(策略、执行、批评、评估、运维),使用更强大的模型来执行判断角色,使用更便宜的模型来执行任务,所有这些都由人类操作员指导的编排层进行管理。一个关键特性是冷启动的独立批评者门控,它在没有先前上下文的情况下审查工作,确保在执行不可逆操作(如提交到 Git)之前进行客观评估,而这些操作始终需要明确的人工批准。
-
新的SKooP方法提升了机器人运动的强化学习性能
研究人员开发了SKooP(对称Koopman预测),这是一种用于增强腿式机器人运动强化学习的新方法。该方法结合了形态对称性与通过自动编码器学习的Koopman模型,以提高策略学习的效率和通用性。SKooP将学习到的Koopman预测作为批评者的特权观察,从而能够从更平滑的特征中学习,并将群对称性纳入Actor和Critic网络,以实现更等变的策略。该方法在四足机器人的双足运动任务中,已证明能持续缩短收敛时间和提高学习到的奖励,并且策略…