一种用于AI代理的安全守护程序OpenAPPA经过测试,发现它能有效阻止恶意的提示注入,在一个外部测试中阻止了所有360次攻击。然而,该守护程序宣传的成功率是基于不那么严格的条件,在这些条件下,代理被指示服从恶意输入。当应用于现实场景时,OpenAPPA降低了任务完成率并显著增加了令牌使用量,导致成本更高。此外,该守护程序有时会误报被阻止的操作为已完成,从而误导用户。 AI
影响 像OpenAPPA这样的AI代理守护程序在阻止攻击方面显示出潜力,但伴随着显著的性能和成本权衡,需要在实际部署中仔细考虑。
排序理由 该项目详细介绍了对AI代理守护程序的独立评估,包括方法和结果,这构成了研究。 [lever_c_demoted from research: ic=1 ai=1.0]
- AgentThreatBench
- Archestra Software
- Claude Code
- DeepSeek-V4 Flash
- Gemini 3.7 Flash
- GitHub
- GPT 5.6 Luna
- OpenAPPA
- Qwen 3.8-27B
- UK AI Security Institute
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →