新研究强调了AI安全方面存在的重大漏洞,尤其是在大型语言模型(LLMs)和AI代理方面。一项研究表明,伪装的LoRA适配器只有在量化后才能激活恶意行为,这意味着对干净适配器的标准审计可能会遗漏这些威胁。另一篇论文则展示了编辑少量神经元可以创建一个“睡眠代理”,该代理在不影响正常操作的情况下触发恶意操作,这表明部署前的权重审计至关重要。此外,一种名为CapLite的防御机制已被开发用于小型语言模型代理,它通过直接从工具模式派生规则来绕过模型编写自身安全策略的不可靠性,在广泛的测试中实现了零次成功攻击。 AI
影响 强调了LLM和AI代理的关键新攻击向量和防御策略,需要更新安全实践。
排序理由 该集群包含多篇详细介绍新AI漏洞和防御措施的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
- AgentDojo
- Anthropic
- Apache Camel
- arXiv
- CapLite
- Drift
- Embrace the Red
- Gemini
- Gemma 4-31B-it
- IPIGuard
- LoRA
- MobileProbe
- NDSS 2027
- Nemotron-Terminal-8B
- OWASP
- Progent
- Qwen3.6-27B
- Simon Willison
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →