研究人员开发了MedHiVE,一个新颖的3D医学视觉语言建模框架,它利用分层专家混合(SMoE)架构。该方法通过整合医学扫描和报告固有的分层结构,关注跨多个组织级别的临床相关解剖区域,从而解决了现有模型的局限性。MedHiVE使用两级SMoE层级来路由视觉和文本标记,并结合对比学习在解剖级别和全局级别进行对齐。MedHiVE在超过25,000个CT扫描上进行了预训练,在分割、分类和检测任务上的表现优于11种最先进的方法。 AI
影响 这种分层方法有望提高AI模型在医学影像分析中的准确性和可解释性。
排序理由 该集群描述了一篇详细介绍用于医学视觉语言建模的新颖框架的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
在 Hugging Face Daily Papers 阅读 →
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →