Multimodal retrieval of autobiographical memories: sensory information contributes differently to the recollection of events
PulseAugur coverage of Multimodal retrieval of autobiographical memories: sensory information contributes differently to the recollection of events — every cluster mentioning Multimodal retrieval of autobiographical memories: sensory information contributes differently to the recollection of events across labs, papers, and developer communities, ranked by signal.
-
新方法以有限数据增强无监督跨模态检索 · 跟踪4个来源
研究人员正在开发新的无监督跨模态检索方法,旨在提高效率并减少对大型手动标注数据集的依赖。论文提出了属性提示核哈希(APKH)和全局邻域对齐哈希(GNAH)等技术,这些技术利用视觉语言基础模型和有限的配对数据来构建紧凑、对齐的汉明空间。另一种方法UniCA引入了双向交叉注意力和正相似性损失,以实现更鲁棒的多模态检索,并在WebQA+等基准测试中取得了改进。
-
新框架推动文档和图像的多模态检索
研究人员介绍了几个用于多模态检索任务的新框架和基准。动态适配器路由 (DAR) 通过基于原型的路由来选择适配器,以解决持续多模态检索问题。V-SPLADE 提供了一种无需推理的视觉文档稀疏检索器,通过字幕门控令牌监督来改进词汇基础。HiKEY 提出了一个用于文档问答的分层检索框架,利用文档结构进行更好的路由和证据整合。此外,DeepImageSearch 将图像检索视为视觉历史中的自主探索任务,并引入了一个新的基准 (DISBench…