PathVQA
PulseAugur coverage of PathVQA — every cluster mentioning PathVQA across labs, papers, and developer communities, ranked by signal.
2 天有情绪数据
-
新的隐私防御方法用于修剪视觉语言模型的视觉标记
研究人员开发了 QPriv-VL,一个旨在增强用于联邦学习等敏感应用的视觉语言模型(VLM)隐私的新框架。该系统在传输前智能地修剪视觉标记,从而降低数据传输成本并减少暴露私人信息的风险。QPriv-VL 使用动态阈值预测器(DTP),该预测器考虑问题相关性和特征敏感性,以选择性地保留重要的视觉数据,同时抑制潜在的敏感区域,在传输的标记少得多的情况下实现了具有竞争力的准确性。
-
新的VQA研究探索答案可预测性、反事实学习、视觉基准和隐私
研究人员正通过几种新方法推进视觉问答(VQA)。一篇论文介绍了VT-Transformer,它使用Transformer架构通过分析视觉和文本特征来预测答案的可预测性,在VizWiz 2020数据集上显示出有效性。另一项研究提出了一个框架,增强反事实对比学习以提高VQA模型对语言偏差的鲁棒性,在VQA-CP v2和VQA v2数据集上取得了强劲的性能。第三篇论文通过引入面向视觉的大型视频模型的基准来挑战当前的评估方法,突出了它们在视觉…
-
新解码方法提升小型视觉语言模型在医学VQA方面的表现
研究人员开发了一种名为 Wasserstein 平衡解码的新解码方法,旨在提高小型视觉语言模型(2-8B)在医学视觉问答任务中的可靠性。该方法通过使用语义感知的 Wasserstein 停止准则,将博弈论解码扩展到处理开放式医学 VQA。与传统基线相比,该方法在 VQA-RAD 和 PathVQA 等数据集上实现了持续改进,提高了准确性并减少了推理迭代次数。
-
新的医学AI模型OpenMedQ和OpenMedReason推进视觉-语言能力
研究人员推出了OpenMedQ,一个在包含约335万个样本的大型开放医学影像和文本领域数据集上预训练的医学视觉-语言模型。该模型在PathVQA和VQA-MED等基准测试中取得了最先进的成果,显著优于Med-PaLM M等规模更大的模型。此外,其视觉编码器在未见过(unseen)的分类任务上表现强劲,超越了其他医学视觉模型。该项目还发布了代码和演示以供社区复现。另外,OpenMedReason项目开发了一个大规模、开放的多模态医学推理…
-
研究发现,医学VLM基准存在预训练污染
研究人员审计了公共医学视觉-语言基准中是否存在预训练污染,发现在SLAKE-En基准上,SigLIP-B-16等模型存在可衡量的图像侧重叠。文本分析显示,Qwen2.5-VL在SLAKE-En上以及其他VLMs在OmniMedVQA上存在规范顺序可交换信号。然而,研究得出结论,某些检测方法(如队列相对尾部富集)对于小型医学VLM队列并不可靠。
-
新框架修剪因果图以提升医学VQA模型泛化能力
研究人员开发了一个名为“可学习因果修剪”(LCT)的新框架,以提高医学视觉问答(MedVQA)模型的泛化能力。该方法将因果修剪直接集成到端到端优化过程中。LCT利用动态解剖特征库(DAFB)来捕获常见模式,并使用可微分修剪模块来抑制与这些全局原型相关的特征,从而鼓励模型专注于实例特定的证据。在多个医学VQA数据集上的实验表明,与现有的去偏方法相比,LCT提高了鲁棒性和泛化能力。
-
Wasserstein 平衡解码提升医学 VQA 可靠性
研究人员开发了一种名为 Wasserstein 平衡解码的新解码方法,以提高医学视觉问答(VQA)系统的可靠性,特别是对于较小的模型。该方法使用语义感知的 Wasserstein 停止准则来实现相似答案之间的一致性,避免了词汇排序问题。该方法在 VQA-RAD 和 PathVQA 等医学 VQA 数据集上显示出一致的改进,提高了 Qwen3-VL-2B 和 Gemma-3-4B 等模型的准确性和推理效率。