MOSEv2

新SAM2Dual方法提升长时视频分割鲁棒性

研究人员推出SAM2Dual，一种无需模型再训练即可增强长时视频对象分割鲁棒性的新方法。该方法采用双记忆系统，区分用于局部适应的短期记忆和通过间隔采样保留全局身份线索的长期记忆。此外，SAM2Dual还整合了文本感知记忆（TAM），根据语义兼容性重新加权记忆贡献，即使在视觉信息稀缺或模糊的情况下也能帮助保持身份。该方法在MOSEv2和LVOSv2等长时基准测试中均表现出持续改进。