PathFLIP

PathFLIP框架增强了计算病理学中的语言-图像理解能力

研究人员推出了一种名为PathFLIP的新框架，旨在提高对计算病理学图像的理解能力。该方法通过将全切片图像（WSIs）的幻灯片级标题分解为区域特定的子标题，从而增强了文本描述与图像元素之间的对齐。PathFLIP利用大型语言模型（LLMs）遵循临床指令并适应各种诊断场景，在分类、检索和病灶定位等任务中展现出通用性。实验表明，PathFLIP在多个基准测试中的性能优于现有的病理学VLMs，同时所需的训练数据也更少。