Open Knowledge Graphs

新的 K-12 知识图谱基准测试 LLM 课程认知能力

研究人员开发了 K12-KGraph，这是一个源自中国 K-12 教科书的知识图谱，旨在对教育类 LLM 的课程认知能力进行基准测试和训练。该图谱包含九种节点类型和十四种关系类型，并被用于创建 K12-Bench（一个包含 23,640 个问题的基准测试集）和 K12-Train（一个包含 7,335 个样本的监督微调语料库）。初步测试表明，Gemini-3-Flash 和 Gemma-4-31B-IT 等模型在课程理解方面存在困难，…