Medical Evidence Advantage

新的Med-OPD框架改进了医学视觉-语言模型

研究人员开发了Med-OPD，一个旨在增强医学视觉-语言模型（Med-VLMs）的新型训练后框架。该方法将策略内蒸馏与一种称为医学证据优势（MEA）的新监督信号相结合。MEA通过比较原始和降级成像条件下的似然性，将模型的注意力集中在对诊断至关重要的视觉证据上。在OmniMedVQA数据集上的实验表明，Med-OPD在CT和MRI模态上显著优于标准的监督微调和基本的策略内蒸馏。