Shuchismita Anwar

基于注视监督的AI提升胸部X光诊断和报告生成能力

研究人员开发了一种新颖的两阶段多模态框架来解读胸部X光片，整合放射科医生的眼动追踪数据以提高诊断准确性和报告生成能力。第一阶段采用注视-令牌分类器，融合图像块、转录文本和放射科医生的注视点，增加的注视监督将AUC提高了4.4%，F1提高了13.3%。第二阶段将这些预测转化为区域特定的诊断语句，提取置信度加权的关键词，并使用提示式大型语言模型来提高临床术语得分。该方法为可解释的、注视感知的胸部X光分析设定了新基准。