MMDG-Bench

新基准揭示多模态域泛化方法仅带来边际收益

研究人员推出了MMDG-Bench，这是一个旨在标准化多模态域泛化（MMDG）在各种数据集和任务上的评估的新基准。该基准旨在解决当前研究中阻碍真正算法进展的不一致性。来自MMDG-Bench的初步发现表明，专门的MMDG方法仅比基线方法带来边际改进，并且没有一种方法能持续优于其他方法。此外，现有方法在损坏和缺失模态场景下表现出显著下降，这凸显了MMDG仍然是一个具有挑战性的未解决问题。