Luoping Cui

新的DSAA框架提升了开放词汇模型中的细粒度属性检测能力

研究人员开发了一个名为双阶段属性激活（DSAA）的新框架，以提高开放词汇目标检测模型的细粒度检测能力。当前模型在将颜色和纹理等属性准确地绑定到对象方面存在困难，当类别信号较强时，属性信息常常被边缘化。DSAA通过两个阶段增强属性语义来解决这个问题：属性前缀适配器注入显式的属性先验，而键/值调制器在BERT编码过程中选择性地放大属性token的影响。一个属性感知的对比损失在训练过程中进一步辅助区分，在FG-OVD基准上的实验显示出显著的改进。