ColGraphRAG

ColGraphRAG通过晚期交互图像检索增强多模态问答能力

研究人员推出了一种新颖的多模态问答方法ColGraphRAG，该方法通过专注于图谱链接图像的晚期交互评分来增强证据检索。此方法旨在通过确保相关视觉资产（包括特定图像块和标记）在用于下游推理的结构化证据图中得到充分表示来提高准确性。在MultimodalQA基准上的初步评估表明，这种晚期交互评分技术能够更好地检索图像候选对象，并随后提高问答性能，尤其是在视觉证据至关重要的场景中。