English(EN) OntoBook: Ontology-Grounded Synthetic Textbooks for Medical Encoder Pretraining

OntoBook 方法通过合成教科书增强医学编码器预训练

作者 PulseAugur 编辑部 · [1 个来源] · 2026-07-22 04:00

研究人员开发了 OntoBook，一种使用合成医学教科书预训练编码器语言模型的新颖方法。该方法将医学本体结构转换为文本，然后用于训练 ModernCamemBERT 等模型。OntoBook 在法国医学编码基准测试中表现出显著的改进，优于标准的掩码语言模型预训练。 AI

影响增强医学编码器预训练，可能改进医疗保健和医学编码中的 AI 应用。

排序理由该项目是一篇研究论文，详细介绍了一种用于预训练语言模型的新方法。 [lever_c_demoted from research: ic=1 ai=1.0]

AI 生成摘要 · Google Gemini · 来自 1 个来源。我们如何撰写摘要 →

报道来源 [1]

arXiv cs.AI TIER_1 English(EN) · Rian Touchent (ALMAnaCH), \'Eric de la Clergerie (ALMAnaCH) · 2026-07-22 04:00

OntoBook：基于本体的合成教科书用于医学编码器预训练

arXiv:2607.18927v1 Announce Type: new Abstract: We present OntoBook, a method that converts medical ontology structure into pretraining signal for encoder language models. Our approach has three stages: random walks through ontology graphs capture hierarchical and causal relation…