MSVR310

FUSE框架通过频域分析增强多模态目标重识别 · arXiv论文

研究人员推出了一种新颖的多模态目标重识别框架FUSE，该框架在频域中运行。该方法通过关注编码了通常被忽视的关键几何和纹理细节的中高频特征，解决了现有方法的局限性。FUSE采用频谱分解模块将特征划分为不同的频子空间，并采用跨模态对齐模块来确保模态间的能量对齐和互补性。在RGBNT201和MSVR310等基准数据集上的实验表明，性能显著提高，确立了FUSE作为多模态表示学习的可解释范式。