研究人员发现了一种针对多跳检索增强生成(RAG)代理的新攻击向量,称为显著性诱导。该方法通过操纵真实信息的位置、强调或框架来重定向代理推理,即使没有明确的指令或内容投毒。该攻击已在GPT、Claude、Gemini、DeepSeek和Qwen等多种前沿模型以及ReAct和Reflexion等代理架构上得到验证。提出的防御方法“显著性归一化”显著降低了攻击的成功率。 AI
影响 突显了AI代理的一个新漏洞,该漏洞需要超越内容和指令过滤的专门防御措施。
排序理由 学术论文,详细介绍了针对AI代理的新攻击向量和防御方法。[lever_c_demoted from research: ic=1 ai=1.0]
- Claude
- DeepSeek
- Gemini
- GPT
- Multi-Hop RAG Agents
- Qwen
- ReAct
- Salience Induction
- Salience Normalization
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →