研究人员开发了CLLPU,一个旨在评估多语言大语言模型(LLMs)遗忘有效性的新基准。该基准解决了在所有语言或单一语言中抑制特定知识的挑战,而现有评估未能充分涵盖这一问题。使用CLLPU在Llama-3.1-8B-Instruct上进行的实验表明,当前的遗忘方法在通用抑制和特定语言约束方面都存在困难,通常无法完全清除目标知识,或无意中将其传播到预期边界之外。研究还强调,通用的多语言能力可能会掩盖对相关知识的损害,这凸显了在多语言大模型遗忘中精确控制传播的迫切需求。 AI
影响 将传播控制确立为多语言大模型遗忘的关键挑战,可能指导未来的研究和开发。
排序理由 学术论文,介绍了一个新的大模型遗忘基准。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →