multilingual medical VQA

新基准和方法解决医疗AI中的跨语言视觉问答退化问题

研究人员开发了一个新的基准和一种方法来解决多语言医疗视觉问答（VQA）中的跨语言退化问题。该基准涵盖八种语言和四种场景，揭示了大型视觉语言模型（LVLMs）在不同语言和能力上的表现不均衡。为了解决这个问题，他们提出了MedVL-XLRepE，一种无需训练的方法，它利用英语医疗VQA的性能在推理时改进非英语表示，并在多种LVLMs和语言中显示出持续的退化缓解效果。