一项名为 LSCBench 的新基准测试对六个编码代理进行了 450 项任务的测试,发现尽管高达 91.3% 的任务生成了可运行的代码,但只有最多 25.1% 的任务生成了安全的代码。这凸显了当前 AI 编码助手在安全能力方面存在的巨大差距。该基准测试侧重于未明确提及安全要求的任务。 AI
影响 凸显了 AI 编码代理安全方面的一个关键差距,表明需要改进安全培训和评估。
排序理由 该集群讨论了 AI 编码代理的新基准测试及其安全性能,属于研究范畴。
在 Mastodon — sigmoid.social 阅读 →
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →