研究人员推出了一种名为模型状态算术(MSA)的新型算法,旨在高效地从大型语言模型中移除特定数据点的影响。与计算上不可行的完全重新训练不同,MSA利用历史模型检查点来抵消不需要的数据的影响。实验表明,MSA在各种基准测试和模型上表现具有竞争力,并且通常优于现有的数据遗忘方法。 AI
影响 为LLM中的数据擦除提供了一种更有效的方法,有可能提高模型的灵活性并遵守数据隐私法规。
排序理由 这是一篇详细介绍大型语言模型中数据遗忘新算法的研究论文。
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →