Disentangled Hallucination Subspaces

新框架解决多模态 AI 模型中的幻觉问题 · 跟踪 3 个来源

研究人员开发了新的框架来对抗多模态大语言模型 (MLLMs) 中的幻觉。UniHall 引入了一个细粒度数据集和一个自适应模糊测试框架 (SAMF) 来压力测试 MLLMs 并揭示性能下降。VADER 通过重新分配视觉焦点和选择性擦除证据来改进视频大语言模型的接地和时间一致性，这是一种无需训练的方法。第三种方法提出了每实例解耦子空间，可以在没有昂贵微调的情况下动态抑制幻觉模式，并在各种基准测试中展示了持续的改进。