PulseAugur
实时 14:19:10
English(EN) Revisiting the Past: Data Unlearning with Model State History

新的MSA算法利用模型历史高效地从LLM中遗忘数据

研究人员推出了一种名为模型状态算术(MSA)的新型算法,旨在高效地从大型语言模型中移除特定数据点的影响。与计算上不可行的完全重新训练不同,MSA利用历史模型检查点来抵消不需要的数据的影响。实验表明,MSA在各种基准测试和模型上表现具有竞争力,并且通常优于现有的数据遗忘方法。 AI

影响 为LLM中的数据擦除提供了一种更有效的方法,有可能提高模型的灵活性并遵守数据隐私法规。

排序理由 这是一篇详细介绍大型语言模型中数据遗忘新算法的研究论文。

在 arXiv cs.LG 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新的MSA算法利用模型历史高效地从LLM中遗忘数据

报道来源 [1]

  1. arXiv cs.LG TIER_1 English(EN) · Keivan Rezaei, Mehrdad Saberi, Abhilasha Ravichander, Soheil Feizi ·

    Revisiting the Past: Data Unlearning with Model State History

    arXiv:2506.20941v3 Announce Type: replace Abstract: Large language models are trained on massive corpora of web data, which may include private data, copyrighted material, factually inaccurate data, or data that degrades model performance. Eliminating the influence of such proble…