研究人员推出了HiddenPathQA,这是一个新的基准,旨在评估知识图谱问答(KGQA)系统在问题措辞未明确揭示底层知识图谱路径的情况下的表现。这解决了当前KGQA评估中的一个盲点,即评估通常依赖于用户可能不会提供的词汇线索。该基准包含1,055个跨越不同领域和跳数的手动验证问题。为了应对这一挑战,该论文提出了一种整体路径选择(Holistic Path Selection)方法,该方法将候选关系链作为整体单元进行评估,其表现显著优于六个现有的KGQA基线,即使在实体名称被替换为假名时也是如此。 AI
影响 该基准可以推动更强大的KGQA系统的发展,使其能够理解细微的用户查询,从而提高AI从复杂知识图谱中提取信息的能力。
排序理由 该集群描述了一篇介绍知识图谱问答新基准和方法论的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
在 Hugging Face Daily Papers 阅读 →
- Andrew
- Fidelis
- FlatHolistic
- HiddenPathQA
- Holistic Path Selection
- Kaping
- Karpa
- POG
- R2-KG
- TieredHolistic
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →