研究人员推出了AV-SafetyBench,一个旨在评估文本到音频视频(T2AV)生成模型安全性的新基准。该基准考虑了可能由音轨或音频与视觉元素的联合解释所带来的风险,从而解决了现有安全评估的局限性。AV-SafetyBench包含一个跨越四个轴的13个类别的分类法,并使用5,200个提示来评估来自完整音视频、仅视频和仅音频视角的模型输出。对五个开源T2AV模型的初步评估显示存在重大的安全隐患,完整音视频不安全率从25.1%到49.4%不等。分析强调,仅视频评估常常会忽略仅音频和联合音视频风险,表明在T2AV生成中进行全面安全评估的至关重要性。 AI
影响 该基准对于识别和减轻新兴文本到音频视频AI模型的安全风险至关重要,指导未来朝着更负责任的AI方向发展。
排序理由 该项目是一篇介绍新AI模型评估基准的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
- Audio-only MPEG-4
- AV-Both
- AV-Joint
- AV-SafetyBench
- Cross-Modal Harm Emergence
- Full averaging scheme for differential equation with maximum
- Hugging Face
- T2AV
- Video Only
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →