Realized Hallucination Dataset

新的DreamRealm框架解决了视觉-语言模型的幻觉问题

研究人员开发了DreamRealm，一个新颖的训练后框架，旨在通过解决视觉-语言模型容易产生视觉幻觉的缺点来增强其可信度。该框架通过探索潜在的幻觉响应，对原始图像进行最小编辑以验证这些响应，然后训练模型将每个响应与其支持图像正确关联。这种方法使用Qwen3.5-9B模型的幻觉和一个名为RealmSet的数据集进行了演示，显著提高了视觉感知和幻觉基准的性能，包括在HallusionBench和MMVP准确性方面取得了显著的进步。