一篇新发表在 arXiv 上的研究论文详细介绍了一项对医学视觉语言模型(VLMs)及其训练后评估方法的受控审计。该研究聚焦于 Qwen2.5-VL-3B 模型,并比较了不同的训练后技术,包括监督微调(SFT)和低秩适配(LoRA),以及诸如 Group Relative Policy Optimization(GRPO)等标准方法。研究结果表明,尽管准确性指标可能有所提高,但某些训练后方法可能会无意中降低视觉受益事件和图像敏感性,这表明优化目标与实际视觉效用之间存在脱节。 AI
影响 强调了 VLM 训练后可能存在的陷阱,表明需要超越简单准确性的更细致的评估指标。
排序理由 研究论文,详细介绍了对医学 VLM 的受控审计。[lever_c_demoted from research: ic=1 ai=1.0]
- arXiv
- Group Relative Policy Optimization
- Hugging Face
- LoRA+
- PMC-VQA
- Qwen2.5-VL-3B
- supervised fine-tuning
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →