GEMS-RAG

新的GEMS-RAG框架增强了LLM对复杂工程标准的推理能力

研究人员开发了GEMS-RAG，一个旨在改进大型语言模型处理复杂工程标准方式的新框架。这些标准因其多模态性质而具有挑战性，包括文本、图表和复杂的交叉引用。GEMS-RAG通过构建一个多模态知识图谱来解决这个问题，该图谱将视觉元素与文本信息和法规规则联系起来。这种方法增强了检索和问答能力，如在《统一交通管制设备手册》(MUTCD)上的演示所示。