Chahana Dahal

新基准 GONE 评估 LLM 在结构化数据上的知识遗忘能力

研究人员推出 GONE，这是一个旨在评估大型语言模型 (LLM) 在处理结构化知识图谱事实时知识遗忘有效性的新基准。现有方法通常侧重于句子级数据，忽略了结构化信息固有的关系和推理方面。GONE 基准以及一个名为邻域扩展分布塑造 (NEDS) 的新框架，旨在精确地将遗忘的事实与其语义邻域分离开来。在 LLaMA-3-8B 和 Mistral-7B 模型上的评估表明，NEDS 在遗忘效率和局部性方面表现更优。