VmambaSCI: Dynamic Deep Unfolding Network with Mamba for Compressive Spectral Imaging
PulseAugur coverage of VmambaSCI: Dynamic Deep Unfolding Network with Mamba for Compressive Spectral Imaging — every cluster mentioning VmambaSCI: Dynamic Deep Unfolding Network with Mamba for Compressive Spectral Imaging across labs, papers, and developer communities, ranked by signal.
1 天有情绪数据
-
新的Mamba架构通过解耦特征增强图像分类
研究人员开发了空间-上下文微分Mamba (SCDM),一种用于图像分类的新型架构,旨在提高病理特征与正常解剖结构之间的区分度。SCDM采用非对称双分支设计,其中正分支用于疾病特异性特征,负分支用于抑制正常解剖上下文。该方法采用相似性驱动的排斥门和微分推理规则,在RSNA肺炎数据集上实现了0.858的AUC,且参数量和FLOPs少于现有模型。
-
新基准测试比较用于太阳辐照度预报的视觉骨干
一篇新研究论文介绍了一个可控的基准测试,用于评估多模态短期太阳辐照度预报中的视觉骨干。该研究固定了整体预报流程,并分离出视觉骨干进行比较,测试了ConvNeXt、Swin Transformer和各种基于Mamba的架构等模型。在Folsom和NREL数据集上的结果表明,虽然所有评估的骨干都优于智能持久性方法,但VMamba Small和Swin Base等特定模型取得了具有竞争力的RMSE值,尽管在NREL分割上智能持久性方法仍然最强。
-
Vision Mamba vs. MambaOut:解码不同的视觉编码策略
一篇新的研究论文调查了 Vision Mamba (VMamba) 和 MambaOut 模型不同的编码策略,它们都利用选择性状态空间模型 (SSM) 作为传统自注意力机制在视觉任务中的替代方案。研究发现,VMamba 在令牌幅度和方向上组织语义证据,尤其在处理高分辨率分类和语义分割方面表现出色。相比之下,MambaOut 将区分类别的信��集中在前台令牌中,这种方法在令牌数量增加时稳定性较差。这些不同的方法表明,VMamba 在密集…
-
新的LFNet方法融合CNN和SSM特征以改进显著目标检测
研究人员开发了一种名为Liquid Fusion Network (LFNet) 的新方法,通过协调不同神经网络架构的特征来改进显著目标检测。LFNet利用受Liquid Neural Networks启发的液态融合方法,解决了卷积神经网络 (CNN) 和状态空间模型 (SSM) 中固有的频谱偏差。这种动态集成允许内容感知的特征聚合,并且可以扩展到多模态线索,从而在各种任务中实现最先进的性能。
-
新的STORM框架通过在令牌缩减过程中保留空间结构来增强Mamba模型
研究人员开发了STORM,一种新颖的空间感知令牌缩减框架,旨在解决Mamba等视觉状态空间模型在进行令牌压缩时出现的性能下降问题。现有的缩减方法在空间上是不敏感的,会破坏这些模型至关重要的二维结构。STORM将缩减重新构建为对空间单元的结构化操作,在无需额外训练的情况下保留了网格拓扑和邻域连贯性。这个即插即用的模块显著提高了准确性恢复能力,尤其是在VMamba上实现了高达63.3%的提升,在PlainMamba上仅下降1.0%,使其性…
-
新的 PRISMamba 方法通过旋转鲁棒性增强视觉 SSM
研究人员推出了一种新方法 PRISMamba,用于处理视觉状态空间模型(SSM)中的图像。与将图像序列化为线性序列的传统方法不同,PRISMamba 将图像划分为同心环,并在每个环内聚合信息。该方法通过选择性地过滤通道来增强旋转鲁棒性并提高效率。PRISMamba 在 ImageNet-1K 上实现了具有竞争力的准确性,同时与现有的 VMamba 模型相比,展示了更高的吞吐量和更少的 FLOPs,特别是在旋转变换下保持了性能。
-
MNet++ 通过自适应融合和状态空间建模增强医学图像分割
研究人员成功复现并扩展了 MNet,这是一个用于医学图像分割的混合二维/三维卷积网络。该研究在对前列腺 MRI 和肝脏 CT 数据集进行了验证,取得了较高的 Dice 系数。引入了两个新扩展:一个用于自适应特征融合的学习式门控机制(Fusion Gating)和一个用于改进长程建模的 VMamba 模块,两者都保持了对各向异性条件的鲁棒性。
-
FAF-CD框架提高了遥感图像变化检测的准确性
研究人员开发了FAF-CD,一种用于遥感图像变化检测的新型框架,在处理不完美和异构观测数据时尤其有效。该系统利用了DINOv3预训练编码器和基于VMamba的解码器,并包含一个融合模块,该模块可以对齐空间数据并使用傅里叶和Haar小波变换比较频率信息。FAF-CD在包括EO-SAR灾害测绘和光学变化检测在内的各种数据集上,均显示出比现有方法更高的准确性和效率。
-
Hugging Face 对用于遥感分割的视觉状态空间模型进行基准测试
一项新的基准研究严格比较了视觉状态空间模型(SSM),如 VMamba 和 MambaVision,与传统的 Vision Transformer 在遥感分割任务上的表现。研究发现,虽然视觉 SSM 在准确性和效率之间取得了良好的平衡,但改进更有可能源于以鲁棒性为重点的设计和边界感知解码,而不是仅仅扩大编码器。这项工作为评估未来的 Mamba 型分割骨干网络建立了一个可复现的标准。