研究人员推出Uni-SafeBench,这是一个旨在评估统一多模态大模型(UMLMs)的新安全基准。这些模型在一个单一架构中集成了理解和生成能力,但其安全影响尚未得到充分了解。Uni-SafeBench通过一个名为Uni-Judger的框架,将安全分为六个领域和七种任务类型,以区分上下文安全性和内在安全性,从而填补了这一空白。初步评估表明,当前的统一模型可能无法持续保留其基础LLM的安全对齐,并且与专门的多模态模型相比,开源UMLM在安全性能上较低,尤其是在生成任务方面。 AI
影响 该基准有望推动未来多模态AI系统安全对齐的改进。
排序理由 该集群描述了一篇介绍用于评估AI模型的新颖基准的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →