研究人员开发了一个新的基准 DIQ-H,用于评估视觉语言模型 (VLM) 在对抗性视觉条件和时间不一致性下的鲁棒性。该基准模拟了运动模糊和传感器噪声等现实世界的压力源,以评估这些损坏如何随着时间的推移导致持续的错误和不一致的输出。为了提高安全评估的效率,他们还引入了价值引导迭代精炼 (VIR) 框架,该框架可自动生成符合伦理的真实标注,准确率提高了 15.3%。 AI
影响 在持续部署场景中引入了评估 VLM 安全性和对齐度的新方法。
排序理由 这是一篇介绍用于评估 VLM 鲁棒性的新基准和框架的研究论文。
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →