研究人员开发了FedAlphaEdit,一个用于大型语言模型协同知识编辑的新框架。该方法解决了将现有的零空间约束编辑技术与协同框架相结合时出现的结构性故障,此前这种故障会导致编辑成功率和知识保留率的下降。FedAlphaEdit确保多个机构在不共享原始编辑数据的情况下,对共享模型的更新能够非常接近中心化编辑的结果。这是通过在单一零空间原则下对齐本地编辑和服务器端合并来实现的,使医院和金融公司等机构能够在保留无关知识的同时共同维护模型。 AI
影响 使机构间能够协同开发LLM,而不会损害数据隐私或现有知识。
排序理由 该集群包含一篇详细介绍LLM知识编辑新方法的论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →