研究人员开发了一个名为TRACE的新框架,即使在应用了近似遗忘方法后,也能从大型语言模型(LLMs)中重建训练数据。这可以通过分析遗忘前后的模型快照之间的差异来实现,这些差异充当了侧信道。TRACE识别候选令牌并使用对比评分机制来恢复数据样本,这表明当前遗忘部署中存在重大的隐私风险,并强调了需要更好的防御措施来防止参数差异泄露。 AI
影响 凸显了大型语言模型遗忘中的重大隐私风险,可能影响人工智能部署中数据隐私的管理方式。
排序理由 这是一篇详细介绍新框架及其实验结果的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →