研究人员推出了一种新颖的合成文本生成框架——引导扩散(Guided Diffusion),该框架优先考虑隐私。该方法利用扩散语言模型(Diffusion Language Models)引导生成过程,使其生成流畅且语义对齐的文本,同时还融入了差分隐私(differential privacy)。与DP-SGD和Private Evolution等现有方法相比,该方法在分布保真度和下游效用方面表现出优越的性能,并且生成文本的速度明显快于Private Evolution。此外,该框架还可以扩展到特定数据不可区分性(Data-Specific Indistinguishability),提供针对数据投毒和记忆的正式保证。 AI
影响 通过生成具有正式隐私保证的高质量合成文本,增强了LLM训练数据中的隐私性。
排序理由 该集群包含一篇研究论文,详细介绍了一种具有隐私保证的合成文本生成新方法。[lever_c_demoted from research: ic=1 ai=1.0]
- arXiv
- Data-Specific Indistinguishability
- Differential Privacy
- Diffusion Language Models
- DP SGD
- Guided Diffusion
- Hugging Face
- Private Evolution
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →