研究人员开发了一种名为对抗性子空间对齐(ASAM)的新方法,以改进多模态大语言模型(MLLMs)中的知识编辑。该技术解决了当前方法在语义相似的视觉和语言变体之间泛化编辑能力的局限性。ASAM引入了潜在对抗性鲁棒化(LAR)来识别和利用脆弱的语义区域,以及秩约束子空间学习(RCSL)来对齐表示并确保知识单元内的一致预测。 AI
影响 提高了多模态模型在更新后保留和泛化知识的能力,这对于实际应用至关重要。
排序理由 该集群包含一篇学术论文,详细介绍了LLM多模态知识编辑的新方法。
- Latent Adversarial Robustification
- Multimodal large language models
- Rank-Constrained Subspace Learning
- Adversarial Subspace Alignment
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →