HMGCLIP

HMGCLIP框架通过细粒度属性学习增强电子商务产品理解

研究人员推出了一种新颖的多模态嵌入框架HMGCLIP，旨在改进电子商务表示学习。与使用全局嵌入的现有模型不同，HMGCLIP通过采用异构超图来对齐多粒度语义，从而捕获细粒度的产品属性。这种方法允许使用双粒度推理机制，融合属性证据以用于详细和广泛的下游任务。实验表明，HMGCLIP在一个新的细粒度数据集和MAVE基准测试上，其性能优于其他多模态编码器和电子商务基线。