一个名为SkillLifeBench的新基准已被开发出来,用于评估AI代理技能在其整个生命周期中的安全性,包括实现、接口、运行时、组合和版本更改。该基准包含388个配对场景,并用于测试14个模型。值得注意的是,GPT-5.6-Sol和Claude Sonnet 4.6在运行时任务上的表现相似,均达到82.0%,但在生命周期任务上的表现却显著不同,GPT-5.6-Sol得分为96.7%,而Sonnet 4.6得分为56.7%。研究还发现,提供执行出处可以提高恢复率,这凸显了详细证据对于代理技能管理的重要性。 AI
影响 突出了AI代理技能管理中的关键安全漏洞,可能影响自主系统的可靠性和安全性。
排序理由 该集群描述了一篇介绍AI代理安全基准的新学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
- alphaXiv
- arXiv
- CatalyzeX
- Claude Sonnet 4.6
- DagsHub
- Gotit.pub
- GPT 5.6 "Sol"
- Hugging Face
- IArxiv
- ScienceCast
- SkillLifeBench
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →