PulseAugur
实时 05:24:08
English(EN) Small context windows + knowledge graphs: the serialization format alone doubled my multi-hop accuracy (benchmarked 10 formats)

新的 ISONGraph 格式提高了本地 LLM 知识图谱的准确性

一种名为 ISONGraph 的新属性图格式已被开发出来,以提高本地大型语言模型使用知识图谱的效率和准确性。通过对十种不同的序列化格式进行基准测试,开发人员发现像 JSON 和 GraphML 这样的冗长格式仅在语法上就消耗了大量 token,从而减少了有效的图上下文。ISONGraph 的设计考虑了 LLM 的理解能力,使用的 token 大约减少了 70%,并在测试中达到了 92% 的遍历准确率,优于其他格式,并支持与本地模型完全离线使用。 AI

影响 通过减少知识图谱上下文的 token 使用量来优化本地 LLM 性能,有可能在较小的硬件上实现更复杂的 RAG 应用。

排序理由 用于 LLM 知识图谱集成的新开源格式。[lever_c_demoted from research: ic=1 ai=1.0]

在 r/LocalLLaMA 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新的 ISONGraph 格式提高了本地 LLM 知识图谱的准确性

报道来源 [1]

  1. r/LocalLLaMA TIER_1 English(EN) · /u/Immediate-Cake6519 ·

    小上下文窗口+知识图谱:仅序列化格式就使我的多跳准确率翻倍(基准测试了10种格式)

    <!-- SC_OFF --><div class="md"><p>Running local models means every token counts — an 8K or 16K window fills up fast when you're stuffing graph context into prompts for RAG.</p> <p>I benchmarked 10 graph serialization formats (JSON, GraphML, RDF variants, edge lists, etc.) on toke…