一个名为 TUPLE-Bench 的新基准已被开发出来,用于评估类型化决策模型中的隐私和效用权衡。这些模型通常会泄露超出预期粗略操作类别的敏感信息,例如细粒度的原因或概率。对九个模型的实验表明,即使有明确指示不泄露原因,模型也经常泄露这些信息,91.88%-99.93% 的响应泄露了原因。虽然完整输出通常会降低下游成本,但置信度字段在没有持续成本降低的情况下增加了泄露。该研究还引入了工作流约束隐私量化 (WCPQ) 作为一种在保留下游工作流效用的同时缓解此泄露的方法。 AI
影响 强调需要仔细审计 AI 决策接口,以防止意外信息泄露。
排序理由 该集群包含一篇详细介绍新基准和研究结果的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →