UltraG-Bench

新基准UltraG-Bench评估VLM在超声图像中的关联能力

研究人员推出UltraG-Bench，一个旨在评估大型视觉语言模型（VLM）在超声成像背景下像素级证据关联能力的新基准。该基准建立在40个公开的超声分割数据集之上，包含三个渐进式任务：指令引导分割、证据关联视觉问答和证据关联报告生成。对14个最先进模型的初步评估突显了语义理解与精确像素级定位之间的显著差异，促使了UltraG-Agent的开发。该代理整合了VLM的推理能力与专门的分割模型UltraSAM3，以增强语义预测和视觉关联。