CLIP-family encoders

新资源Sketch2Inspire增强结构敏感的产品检索

研究人员推出Sketch2Inspire，一个旨在改进早期设计中产品检索的新资源。该资源源自Amazon Berkeley Objects数据集，整合了文本查询、草图查询以及文本-草图融合查询，以区分广泛的类别检索和结构敏感的类别内检索。使用CLIP系列编码器系统的评估表明，结合文本和草图输入的后期融合方法在自动和人工评估的相关性方面均取得了最高分，优于仅文本检索。