实体 MaliciousSkillBench

MaliciousSkillBench

PulseAugur coverage of MaliciousSkillBench — every cluster mentioning MaliciousSkillBench across labs, papers, and developer communities, ranked by signal.

Show in brief

总计 · 30天

90 天内 1

发布 · 30天

90 天内 0

论文 · 30天

90 天内 1

层级分布 · 90 天

主题

情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条

TOOL · CL_212028 · Aug 21 · 04:00

新基准旨在提高恶意AI代理技能的检测能力

研究人员开发了MaliciousSkillBench，这是一个旨在检测恶意代理技能的新基准。恶意代理技能是指可以为LLM代理提供脚本和资源的扩展。该基准整合了来自13个公共来源的数据，形成了一个包含9,740个技能的数据集，其中7,505个被识别为恶意，2,235个被识别为良性。对包括学习型文本检测器和现成扫描仪在内的各种检测方法的评估显示，虽然一些模型在恶意技能方面取得了较高的召回率，但它们在良性技能方面常常面临较高的误报率，这表明…

新基准旨在提高恶意AI代理技能的检测能力