一种名为“门控”的新型防御机制已被开发出来,以防止 AI 代理重新执行存储在其记忆中的恶意指令。该门控在执行前会检查记忆条目和计划任务的来源,并根据其来源和权限对其进行分类。该系统使用 Python 实现,在合成测试环境中成功消除了自主攻击,并在基准测试中显示出降低注入成功率的潜力,尽管对单会话攻击的影响较小。 AI
影响 这种防御机制通过防止持久性提示注入攻击,可以显著提高长效 AI 代理的安全性和可靠性。
排序理由 该条目描述了一种针对 AI 代理的新型防御机制,这是一种软件工具或技术。
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →