研究人员开发了一种名为 AnchorRep 的新防御机制,用于保护大型语言模型(LLM)免受在不同模型之间转移的对抗性攻击。该方法使用一个轻量级适配器来调整 LLM 的内部表示,在处理有害提示时,使其远离冻结的“锚定”模型的表示。AnchorRep 显著降低了跨模型攻击的成功率,在某些模型上成功率接近于零,同时对良性输入的性能没有显著损害。 AI
影响 这项研究可能带来更强大的 LLM,降低越狱的风险,并提高 AI 系统的安全性。
排序理由 该集群包含一篇详细介绍 LLM 新防御机制的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →