PulseAugur
实时 05:18:54
English(EN) The More Popular, The Harder to Forget: Adaptive Popularity for LLM Unlearning

新的 AdaPop 方法通过适应事实受欢迎度来改进 LLM 遗忘

研究人员开发了一种名为 AdaPop 的新方法,以改进从大型语言模型 (LLM) 中遗忘信息的过程。与之前对数据移除施加统一压力的旧方法不同,AdaPop 根据事实的受欢迎度调整梯度压力,使用 WikidataLLM-as-a-Judge 等外部代理。这种自适应方法有助于减少被遗忘内容的泄露,与现有技术相比,在释义查询下的泄露量减少了约五倍,在对抗性改写下的泄露量减少了 1.6 倍。该方法还实现了遗忘和保留信息之间平衡的自动化。 AI

影响 通过使遗忘更有效且不易泄露信息,增强了 LLM 中的数据隐私和控制。

排序理由 该集群包含一篇详细介绍 LLM 遗忘新方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 Hugging Face Daily Papers 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新的 AdaPop 方法通过适应事实受欢迎度来改进 LLM 遗忘

报道来源 [1]

  1. Hugging Face Daily Papers TIER_1 English(EN) ·

    越受欢迎,越难遗忘:LLM 遗忘的自适应受欢迎度

    AdaPop adapts gradient pressure by fact popularity and automates forget-retain balance to reduce leakage of unlearned content.