UniCorrn

UniCorrn Transformer 统一跨模态的2D和3D几何匹配

研究人员推出UniCorrn，这是一种新颖的、基于Transformer的模型，旨在统一跨越各种视觉数据的几何匹配。该模型可以使用共享权重处理2D图像之间、2D图像与3D点云之间以及3D点云本身之间的对应任务。UniCorrn采用双流解码器来维护独立的外观和位置特征，从而实现跨异构模态的端到端学习和基于查询的灵活估计。该模型表现强劲，在2D-3D和3D-3D匹配基准测试中，其性能显著优于先前最先进的方法。