一位AI安全研究员发现,本地运行的70亿参数模型Qwen-2.5-Coder-7B,错误地将“如何杀死一个Python进程?”这类良性句子标记为暴力犯罪。尽管该模型在被直接询问时表现出对“一群乌鸦”(murder of crows)这类同音异义词的了解。研究员发现,一个带有异常列表的简单手写正则表达式,在准确分类这些句子方面优于大语言模型,这表明AI安全评分可能在很大程度上受到周围测试框架的影响,而非仅仅是模型固有的能力。该实验是在低成本、低速的设置下使用llama.cpp在CPU上进行的,证明了可以通过经济实惠的方式实现彻底的安全测试。 AI
影响 凸显了当前AI安全评估方法中潜在的缺陷,并表明简单的基于规则的系统在特定任务上有时可以优于复杂的模型。
排序理由 该条目讨论了一项实验及其关于AI安全测试方法学的发现,而不是一个新的模型发布或重要的行业事件。
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →