Jingyun Wang

GCLIP增强CLIP以实现开放词汇语义分割 · arXiv论文

研究人员开发了GCLIP，一种通过重新思考如何利用CLIP的全局知识来增强开放词汇语义分割的新方法。与以往削弱全局上下文而侧重于局部特征的方法不同，GCLIP修改了最后一个块的注意力（attention）和Value嵌入，以有效地聚合全局上下文。该方法旨在提高特征中的语义相关性，同时不引入同质注意力模式，从而在五个标准基准测试中取得了最先进的性能。