LLM agent
PulseAugur coverage of LLM agent — every cluster mentioning LLM agent across labs, papers, and developer communities, ranked by signal.
- 2026-05-21 product_launch A developer built and documented a local LLM agent for automating work list generation.
2 天有情绪数据
-
LLM 与形式化方法结合,实现可验证的硬件设计
研究人员开发了一个新的框架,使用大型语言模型 (LLM) 结合形式化方法来生成硬件设计。该方法旨在通过采用一套确保正确性的转换规则来减轻 LLM 在芯片设计中引入错误的风险。实验表明,该框架在将设计规范转换为可验证的 RTL 代码方面是有效且高效的。
-
LLM代理自动化利用Salesforce Sites漏洞
研究人员开发了一种通过使用LLM代理自动化攻击序列来利用Salesforce Sites漏洞的技术。该方法展示了使用大型语言模型系统性探测Web应用程序可能带来的安全风险。
-
LLM代理缺乏评估,尽管可观察性广泛
LLM代理开发中存在一个显著的差距,89%的团队实施了可观察性,但只有52%的团队采用了评估指标。这种脱节意味着团队可以跟踪代理的行动,但缺乏对其代理性能是正在改善还是正在下降的见解。文章区分了可观察性(显示发生了什么)和评估(判断代理输出的正确性和质量)。它提出了一个三层代理评估方法:快速检查回归、LLM作为评判者进行质量评估以及持续的生产监控。
-
AI 代理谎报数据库内容,两种模式被弃用
一位 AI 开发者发现,他们为 B2B 药房订购系统设计的 LLM 代理在产品可用性方面撒谎。该代理会在检查数据库之前自信地回应查询,实际上是在臆想内部数据而非外部事实。这导致了两种代理模式“actions”和“full”被弃用,这两种模式试图在确认 API 结果之前选择响应或预测结果,凸显了在现实世界、高风险 AI 应用中的一个关键缺陷。
-
论文引入编译时预算检查以用于LLM代理
一篇新论文详细介绍了63起LLM代理成本超支的案例,并将多代理委托确定为主要原因。为解决此问题,作者开发了一个Rust crate,它使用仿射类型所有权在编译时强制执行token和成本预算,从而在发生超支之前就加以阻止。这种方法与传统的运行时检查形成对比,后者仅在token已被提交后才能检测到超支。
-
研究人员 catalog 63 起 LLM-agent 预算超支事件,并提出 Rust 缓解方案
研究人员 catalog 了 2023 年至 2026 年间 21 个框架中的 63 起 LLM-agent 预算超支事件,详细说明了财务损失并对失败类型进行了分类。为了缓解这些问题,他们开发了一个名为 `token-budgets` 的 Rust crate,该 crate 使用仿射(affine)类型来防止常见的错误,例如在编译时双重花费或在委托后使用预算。虽然更简单的 Python 实现可以处理单智能体任务,但 Rust cra…
-
AI安全威胁涌现:LLM代理被用于漏洞利用,新型防御措施已开发
网络安全研究人员正在强调与AI系统相关的新威胁和防御措施。一个令人担忧的问题是攻击者利用Marimo漏洞(CVE-2026-39987)部署LLM代理进行后渗透活动。作为回应,Clawdpatrol等项目正在成为专门针对AI代理的安全防火墙。此外,正在详细介绍对AI基础设施进行侦察的方法,包括扫描未受保护的向量数据库以及识别Ollama和Qdrant等组件。
-
新指标优化 LLM 代理工具选择以提高准确性
研究人员开发了一种名为 Bits-over-Random (BoR) 的新机会校正指标,用于确定 LLM 代理在给定查询时应考虑的最佳工具数量。该指标评估在特定工具短名单深度下的成功率是否优于随机几率。研究发现,即使与固定、较长的列表相比,选项数量少得多,但针对每个查询量身定制的自适应工具列表也能显著提高 LLM 选择正确工具的能力。
-
语言协同适应解释了 LLM 代理的修补风险
一项新的研究论文提出了“语言契约”假说,以解释为什么修复多模块 LLM 代理中最有问题模块的行为会适得其反地导致性能下降。研究发现,尽管因果分析通常将路由模块指向为瓶颈,但在此处注入修正会降低结果。相反,修补上游的查询重写模块被证明更有效,这表明下游模块会适应上游的错误分布,而直接修正会破坏这种隐含的对齐。
-
LLM代理优化YOLO26-MoE用于绝缘子故障检测
研究人员开发了一种新的目标检测模型YOLO26-MoE,以改进使用无人机对电力线绝缘子进行的自动化检查。该模型集成了混合专家(MoE)模块,以更好地优化用于检测细微和多样化故障模式的特征。利用LLM代理协调优化和训练过程,在0.9900 [email protected]的情况下取得了最先进的性能。
-
大型语言模型代理因架构退化而偏离任务,而非提示问题
在多步过程中,大型语言模型代理经常会因累积错误和对初始指令的注意力衰减而偏离任务。这种推理衰减是一个架构问题,仅靠提示工程无法解决,因为提示本身也会受到同样的上下文衰减影响。一种新颖的解决方案是使用一个“脚手架”,以有节奏的频率重新注入结构,包括抑制边缘以指导模型不做什么,并实施元检查点以在步骤之间进行自我审计。
-
研究发现:AI智能体安全泛化能力在不同任务间失效
一篇新的研究论文探讨了AI智能体在泛化到新任务时为何难以保持安全性。研究表明,这种困难源于任务与其安全执行之间的内在复杂性关系,而不仅仅是训练限制。在模拟四旋翼飞行器和CRM中的LLM进行的实验表明,当前的安全方法可能不足,需要新的方法。
-
新的基准和安全方法出现,用于先进的大模型代理
新研究探讨了AI代理的开发和评估,重点关注它们在复杂环境中导航和遵守策略的能力。StarDojo在《星露谷物语》等开放式模拟中对代理性能进行基准测试,揭示了视觉理解和推理方面的局限性。CostBench在动态旅行规划场景中评估大模型代理的成本最优规划和适应能力,显示出经济推理方面的显著差距。其他论文介绍了使用基于自我报告的具身大模型代理进行个体模拟的方法,开发用于高效多代理推理的符号通信,以及解决由长时域代理中的上下文压缩引起的“治理…