研究人员开发了DPOison-VL,一种利用视觉语言模型(VLMs)直接偏好优化(DPO)中漏洞的新型攻击方法。该攻击通过在少量训练数据上进行不可感知的图像扰动来操纵模型对齐,而其他数据组件保持不变。DPOison-VL可以在使用极少量投毒数据的情况下实现高攻击成功率,同时保持模型的通用效用和准确性,表明VLM对齐过程存在重大的安全风险。 AI
影响 揭示了VLM对齐中的关键漏洞,可能影响多模态AI系统的安全性和可信度。
排序理由 该集群描述了一篇详细介绍AI模型新型攻击方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →