一个名为 DeclineCraft 的新基准被开发出来,用于评估检索增强生成(RAG)系统在无法回答问题时承认其局限性的能力。该基准使用关于特定日期之后 Minecraft 功能的问题,并以历史维基语料库为依据,发现单次检索可以提高系统回避回答不可回答问题的能力,但迭代检索和查询重写会降低这种能力。研究人员强调,传统上仅关注可回答问题准确性的评估可能会掩盖系统在承认局限性方面的退步。 AI
排序理由 额外的检索轮次可能导致 RAG 在回答“我不知道”时表现更差
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →