研究人员开发了FOCUS,一个旨在增强Vision Transformers(ViTs)在应用于高光谱成像(HSI)时可解释性的新颖框架。该方法解决了理解HSI数据中ViT注意力机制的挑战,而HSI数据通常包含数百个窄波长带。FOCUS引入了类特定的光谱提示和一个可学习的[SINK] token,以生成稳定的空间-光谱显著性图和光谱重要性曲线,而无需梯度反向传播或修改ViT骨干网络。据报道,该框架将带级IoU提高了15%,并将注意力崩溃减少了40%以上,使得高分辨率ViT的可解释性在实际HSI应用中变得可行。 AI
影响 通过使黑盒ViT模型可解释,从而在多光谱成像应用中实现更值得信赖的决策。
排序理由 这是一篇研究论文,描述了一个用于提高Vision Transformers在高光谱成像中可解释性的新框架。
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →