新研究表明,AI模型可以被设计成隐藏任意能力,即使是对模型权重拥有完全访问权限的人也无法察觉。这是通过嵌入加密神经网络的后门攻击实现的,这些网络仅在提供特定触发器时执行。该研究在PyTorch中实现,表明这些隐藏的电路能够抵抗常见的诱导方法,如微调和基于梯度的搜索,这对当前的性能评估和审计过程构成了重大挑战。 AI
影响 这项研究突显了AI模型审计中的一个关键漏洞,表明当前的评估方法可能不足以检测隐藏的危险能力。
排序理由 该集群讨论了一篇研究论文,其中详细介绍了一种在AI模型中隐藏能力的新颖方法。
在 Mastodon — mastodon.social 阅读 →
- AI models
- AI Models Can Provably Hide Arbitrary Capabilities
- CBRN defense
- Neural Networks
- PyTorch
- 2610.13928
- Mastodon
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →