HSQ-VLM

新型VLM增强糖尿病视网膜病变AI可解释性

研究人员开发了HSQ-VLM，这是一种新颖的视觉语言模型，旨在提高AI诊断糖尿病视网膜病变的可解释性。该模型采用新颖的象限分割流程，结合了基于地标的笛卡尔交叉注意力和拓扑潜在分区，将视网膜特征与以中央凹为中心的坐标系统对齐。HSQ-VLM通过解剖学精确地量化病理学来生成精确的自然语言报告，在3500张眼底图像的数据集上实现了高灵敏度的出血和微动脉瘤检测。