RegisterBridgeMM

新的面向寄存器的框架增强了RGB-红外目标检测能力

研究人员开发了RegisterBridgeMM，一个新颖的RGB-红外目标检测框架，该框架利用预训练模型的寄存器令牌来促进跨模态通信。该方法通过利用寄存器摘要进行特征适应，避免了密集的块对块交互。该框架在四个基准测试中表现出卓越的性能，在LLVIP、M3FD、DroneVehicle和FLIR-Aligned数据集上使用冻结的骨干流实现了最高的mAP50-95。