研究人员推出Reason What Matters (ReWAM),一个旨在改进大规模检索任务的通用多模态嵌入(UME)的新框架。ReWAM解决了现有方法中的局限性,例如在嵌入前生成完整的链式思考(CoT)推理所引入的延迟,以及GRPO中的统一优势分配。该框架结合了检索感知自蒸馏(RASD)以通过基于证据的指导来完善推理,以及检索自适应推理(RAI)以通过提前停止无效推理来优化追踪计算。在MMEB-V2和MRMR上的实验表明,ReWAM显著提高了检索性能和推理吞吐量,使得增强推理的UME更适合广泛部署。 AI
影响 提高了多模态检索任务的效率,使得先进的推理能够实际应用于大规模部署。
排序理由 详细介绍多模态嵌入新方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
- Chain-of-Thought
- GRPO
- MMEB-V2
- Reason What Matters
- Retrieval-adaptive Inference
- Retrieval-aware Self-Distillation
- ReWAM
- Universal multimodal embedding
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →