Multi-Strategy Fusion-Based Interrogation

研究提出MS-FBI以改进医学MLLM置信度校准 · arXiv论文

一项新近发表在arXiv上的研究，探讨了多模态大语言模型（MLLMs）在医学视觉问答（VQA）场景下的置信度校准问题。研究发现，MLLMs所表达的置信度与其真实准确率常常不相关，这在医疗环境中存在风险。为解决此问题，该研究提出了一种名为多策略融合式审问（MS-FBI）的新方法，该方法结合了审问技术和专家LLM评估。实验表明，MS-FBI可将预期校准误差（ECE）平均降低40%，从而提高MLLMs在AI辅助诊断中的可靠性。