PulseAugur
实时 09:18:22
English(EN) NL2SHACL-Bench: A Benchmark Suite for Natural Language to SHACL Translation

新的基准套件评估LLM将自然语言翻译成SHACL的能力

研究人员推出了NL2SHACL-Bench,一个旨在评估将自然语言需求翻译成SHACL形状的新基准套件,用于验证RDF知识图谱。该基准用于评估四种大型语言模型,结果显示,尽管当前模型可以生成语法正确的SHACL,但在为复杂的逻辑和结构模式生成语义等效的约束方面存在困难。该新套件旨在为衡量NL2SHACL领域的进展提供有意义的基础。 AI

影响 该基准可以加速能够从自然语言理解和生成形式化约束的AI系统的开发,从而改进数据验证和知识图谱管理。

排序理由 该集群描述了一篇介绍特定AI任务基准套件的新学术论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新的基准套件评估LLM将自然语言翻译成SHACL的能力

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Yuchen Zhou, Niels Bobet, Maribel Acosta ·

    NL2SHACL-Bench:自然语言到SHACL翻译的基准套件

    arXiv:2608.07530v1 Announce Type: new Abstract: SHACL is a core technology for validating the conformance of RDF knowledge graphs (KGs). Yet, authoring SHACL shapes requires technical expertise that most domain experts lack. Translating natural language requirements into SHACL (N…