研究人员开发了 PIPE-Cypher,一个用于自动生成文本到 Cypher 系统基准的新管道。该系统通过使用实时属性图和用户提供的查询来生成可执行、多样化且平衡的数据集,从而解决了创建相关基准的挑战。PIPE-Cypher 结合了模式分析、约束生成和 LLM 裁判来创建这些基准,并使用它们评估了 11 个本地下游模型。 AI
影响 能够更准确、可重复地评估企业环境中的文本到 Cypher 模型。
排序理由 该集群包含一篇详细介绍基准生成新方法的论文。
AI 生成摘要 · Google Gemini · 来自 2 个来源。 我们如何撰写摘要 →