RGB-Event

UniMergeTrack 通过分层模型合并推进RGB-X视觉对象跟踪

研究人员推出了一种新颖的视觉对象跟踪方法UniMergeTrack，该方法结合了多种数据模态，如热红外、事件或深度信息。该方法通过独立训练特定模态的跟踪器，然后进行分层合并来解决现有范式的局限性。UniMergeTrack 使用高通滤波合并集成可转移骨干网络，并采用轻量级任务特定专家，同时通过最优传输对齐跟踪头。该方法在RGB-热红外、RGB-事件和RGB-深度跟踪的各种基准测试中展示了最先进的性能，显示出强大的泛化能力。