研究人员推出了一种新的评估大型语言模型(LLM)安全故障的方法——时间对数可观测性(TLO)。与仅指示是否发生故障的传统攻击成功率(ASR)不同,TLO分析模型在生成过程中的内部对数边际,以揭示故障是如何发生的。该技术可以区分具有相似ASR但根本原因不同的攻击,从而更细致地理解LLM的漏洞。TLO已在多种LLM和攻击类型中证明了其有效性,并且从中衍生出的简单早期停止规则可以在不影响良性查询的情况下显著减少成功的越狱攻击。 AI
影响 提供了对LLM安全故障更细粒度的理解,可能导致更强大的防御越狱攻击的措施。
排序理由 该集群包含一篇详细介绍LLM安全评估新方法的论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →