Q-CARE

新的Q-CARE框架提供查询无关的RAG评估

研究人员推出了一种新颖的框架Q-CARE，旨在以查询无关的方式评估检索增强生成（RAG）系统。该系统将用户查询分解为子查询，并将答案分解为原子声明，以评估查询覆盖率和声明可验证性。Q-CARE的指标，包括C-Prec@k、C-nDCG@k、完整性、简洁性和可验证性，在多样化基准上显示出比现有的RAGEval和RAGChecker等方法与人类判断更高的相关性。