HMGCLIP

新的HMGCLIP框架增强了电子商务表示学习

研究人员开发了HMGCLIP，一个新颖的多模态嵌入框架，旨在改进电子商务表示学习。该框架解决了当前模型将产品信息编码为全局嵌入的局限性，这种做法阻碍了细粒度属性的区分。HMGCLIP利用异构超图挖掘结构感知硬负例并对齐多粒度语义，从而实现用于细粒度和粗粒度任务的双粒度推理机制。在新电子商务数据集和MAVE基准上的实验表明，HMGCLIP的性能优于现有的多模态编码器和电子商务基线。