实体 MPS-Bench

MPS-Bench

PulseAugur coverage of MPS-Bench — every cluster mentioning MPS-Bench across labs, papers, and developer communities, ranked by signal.

总计 · 30天

1

90 天内 1

发布 · 30天

0

90 天内 0

论文 · 30天

1

90 天内 1

层级分布 · 90 天

主题

情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条

TOOL · CL_239274 · Sep 7 · 04:00

新基准揭示视觉语言模型难以实现个性化安全

研究人员推出了MPS-Bench，一个旨在评估视觉语言模型（VLMs）个性化安全性的新基准。该基准包含5,181个源自真实图像的场景，并包含隐藏的用户配置文件，以测试VLMs如何处理敏感信息。对八个领先VLMs的评估显示，它们经常未能根据缺失的上下文进行延迟处理，没有一个在个性化安全方面得分高于5分中的2.6分。研究确定“视觉主导”是一个关键问题，即处理早期阶段的视觉信息可能会覆盖文本安全信号，导致不安全的回应。为解决此问题，开发了一…