PulseAugur
实时 08:26:00
English(EN) PIPE-Cypher: Automatic Enterprise Benchmark Generation for Text-to-Cypher Systems

新管道自动化文本到 Cypher 系统的企业基准生成

研究人员开发了 PIPE-Cypher,一个用于自动生成文本到 Cypher 系统基准的新管道。该系统通过使用实时属性图和用户提供的查询来生成可执行、多样化且平衡的数据集,从而解决了创建相关基准的挑战。PIPE-Cypher 结合了模式分析、约束生成和 LLM 裁判来创建这些基准,并使用它们评估了 11 个本地下游模型。 AI

影响 能够更准确、可重复地评估企业环境中的文本到 Cypher 模型。

排序理由 该集群包含一篇详细介绍基准生成新方法的论文。

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →

报道来源 [2]

  1. arXiv cs.AI TIER_1 English(EN) · Suraj Ranganath, Anish Raghavendra ·

    PIPE-Cypher:文本到Cypher系统的自动企业基准生成

    arXiv:2606.08481v1 Announce Type: cross Abstract: Enterprise property graphs vary widely in schema structure, internal terminology, domain assumptions, governance constraints, and user interaction patterns. A deployment-relevant Text2Cypher benchmark therefore reflects the questi…

  2. arXiv cs.AI TIER_1 English(EN) · Anish Raghavendra ·

    PIPE-Cypher:文本到Cypher系统的自动企业基准生成

    Enterprise property graphs vary widely in schema structure, internal terminology, domain assumptions, governance constraints, and user interaction patterns. A deployment-relevant Text2Cypher benchmark therefore reflects the questions users and agents actually ask of that graph. C…