PrivTune

新的基准和微调数据提高了VLM的隐私意识

研究人员开发了新的方法来增强视觉语言模型（VLM）的隐私意识。他们引入了两个基准，PrivBench和PrivBench-H，旨在根据GDPR评估VLM对视觉隐私的理解。此外，还创建了一个名为PrivTune的精选指令微调数据集，以提高隐私敏感性。使用少量PrivTune数据对现有VLM进行微调，显著提高了它们在这些隐私基准上的性能，甚至超过了GPT-4，同时保持了它们的一般任务能力。