PulseAugur
实时 08:37:50
English(EN) VLMGuard: Bootstrapping Malicious Prompt Detectors from Unlabeled Vision-Language Prompts in the Wild

VLMGuard框架使用未标记数据检测恶意VLM提示

研究人员开发了VLMGuard,一个旨在检测针对视觉-语言模型(VLM)的恶意提示的新框架。该系统通过利用在野外收集的未标记用户提示来解决标记数据有限的挑战。VLMGuard自动估算提示的恶意程度,从而无需人工标注即可训练分类器。实验表明,VLMGuard的性能优于现有方法,提高了检测准确性。 AI

影响 通过提供一种无需大量手动标记即可检测有害输入的方法,增强了视觉-语言模型的安全性和可靠性。

排序理由 该集群包含一篇研究论文,详细介绍了用于检测视觉-语言模型中恶意提示的新框架。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.LG 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

VLMGuard框架使用未标记数据检测恶意VLM提示

报道来源 [1]

  1. arXiv cs.LG TIER_1 English(EN) · Junlin Fang, Wenyu Chen, Reshmi Ghosh, Robert Sim, Ahmed Salem, Vitor R. Carvalho, Emily Lawton, Sharon Li, Jack W. Stokes, Sean Du ·

    VLMGuard: Bootstrapping Malicious Prompt Detectors from Unlabeled Vision-Language Prompts in the Wild

    arXiv:2410.00296v2 Announce Type: replace Abstract: Vision-language Models (VLMs) are essential for contextual understanding of both visual and textual information. However, their vulnerability to adversarially manipulated inputs presents significant risks, leading to compromised…