研究人员发现了一种名为尺度引起的语义偏移 (SISS) 的视觉语言模型 (VLM) 和网络代理安全漏洞。当图像转换(如调整大小或压缩)改变图像的机器可读含义时,就会发生这种情况。一个结合了双尺度验证和其他技术的攻击框架在一个包含四个闭源 VLM 的基准测试中取得了 58.75% 的成功率。SISS 的有效性受到激进压缩的限制,在更高分辨率下成功率会显著下降。虽然 SISS 可以提高网络代理中隐藏指令的感知度,但它只会导致大约 4% 的绝对行为妥协。 AI
影响 强调了一种针对 VLM 和网络代理的新型攻击向量,该向量与图像预处理相关,需要尺度一致的推理。
排序理由 学术论文,详细介绍了 VLM 中的一项新安全漏洞。[lever_c_demoted from research: ic=1 ai=1.0]
- 128x128
- 224x224
- 336x336
- 512x512
- arXiv
- ScaleGuard
- Scale-Induced Semantic Shift
- Vision--Language Models
- Web agents
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →