研究人员开发了一种名为 Loud and Clear (LoC) 的新方法,以改进多模态文档检索增强生成 (RAG) 系统利用视觉信息的方式。研究发现,现有方法未能充分利用检索文档中的视觉证据,即使找到了正确的页面。LoC 通过增强检索文档的“响度”(充分利用视觉令牌容量)和“清晰度”(优化页面以突出证据)来解决这一问题。这种方法结合了更高分辨率的页面和来自查询相关区域的光学字符识别 (OCR),在 SciEGQA 和 ViDoRe-v3 等基准测试中优于之前的八种方法。 AI
影响 通过更好地利用检索文档中的视觉信息,提高了多模态 RAG 系统的有效性。
排序理由 该项目是一篇学术论文,详细介绍了一种用于多模态文档 RAG 的新方法。[lever_c_demoted from research: ic=1 ai=1.0]
- alphaXiv
- arXiv
- CatalyzeX
- ColQwen3
- CORE Recommender
- DagsHub
- Gotit.pub
- Hugging Face
- Influence Flower
- Loud and Clear
- MMLongBench-Doc
- SciEGQA
- ScienceCast
- ViDoRe V3
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →