U-Net
PulseAugur coverage of U-Net — every cluster mentioning U-Net across labs, papers, and developer communities, ranked by signal.
- used by AlphaEarth 90%
- used by ScienceCast 70%
- used by alphaXiv 70%
- used by Gotit.pub 70%
- used by Diffusion Transformer 70%
- used by Sentinel-2 70%
- used by Grad-CAM++ 70%
- instance of ScienceCast 70%
- competes with SegFormer 70%
- used by diffusion model 70%
- competes with MobileNetV2 70%
- instance of alphaXiv 70%
21 天有情绪数据
-
AI框架精准量化作物病害严重程度
研究人员开发了一种新颖的深度学习框架,用于精准量化田间作物的病害严重程度,旨在改进精准农业。该系统集成了语义分割、回归和分类,以评估压力水平,并根据受感染的叶片面积将其分为低到非常高。实验表明,使用MobileNetV2的U-Net模型取得了高性能,像素准确率为98.20%,严重程度指数与专家标注高度相关。
-
新框架通过迁移学习增强焊接机器人接缝分割 · 跟踪 2 个来源
研究人员开发了一个新框架,以改进建筑自动化焊接机器人的接缝分割,解决了恶劣光照和反射等挑战。该方法利用迁移学习和混合损失函数增强了 BiSeNetV2 模型,侧重于学习稳定性优化而非架构复杂性。该方法显著提高了性能,在反射条件下实现了 81.76% 的联合 IoU,并恢复了 96.33% 的失败案例,同时保持了实时应用的效率。
-
新研究探讨扩散分类器的偏见和改进方法
两篇新研究论文探讨了扩散分类器中的决策过程和偏见。第一篇论文介绍了MiPO,一种使用少数派偏好奖励来微调扩散模型以提高在代表性不足数据区域的分类准确性的方法。第二篇论文提出了ASOB-Bench,一个偏见评估框架,用于分析扩散分类器中的属性绑定、大小顺序偏见和背景依赖性,揭示了与传统视觉-语言模型相比的独特偏见特征。
-
新的 FairFlow 框架解决了文本到图像 AI 中的刻板印象偏见
研究人员开发了 FairFlow,一个旨在解决文本到图像扩散模型(特别是多模态扩散 Transformer (MM-DiTs))中刻板印象偏见的新框架。该研究确定了这些模型中充当“语义中心”并从文本提示传播偏见到视觉输出的特定层。FairFlow 在推理过程中干预这些确定的中心,注入学习到的“公平方向”来中和与性别、种族和交叉性相关的偏见,而不会显著影响生成质量或推理速度。
-
视觉模型适应性取决于高分辨率下的全局注意力
研究人员发现,冻结的视觉基础模型适应细粒度分割任务的能力,很大程度上取决于骨干网络是否将全局注意力应用于高分辨率的令牌集。在整个网格上进行全局注意力的各向同性视觉 Transformer (ViT) 随着分辨率的提高而持续改进,而那些在全局阶段之前对信息进行池化的分层骨干网络则在较低分辨率下达到平台期。这种效应特定于低秩适应技术。一个名为 SALT (Side-stem, Attention-gated U-Net, Low-rank…
-
新的U-Net框架可高效预测城市风速
研究人员开发了一种新颖的两阶段U-Net框架,可有效预测城市环境中的行人级风速。第一阶段使用U-Net模型(M1)逐块预测风场,第二阶段的U-Net模型(M2)则对这些预测进行优化,以减少块边界的不连续性。该方法在UrbanTALES数据集上进行训练,为高分辨率风力预测提供了一个灵活的代理模型,但它倾向于低估最大风速。
-
Transformer模型在糖尿病足溃疡分割中表现出更好的泛化能力
一项新研究对三种用于糖尿病足溃疡分割的深度学习模型进行了基准测试:U-Net、DeepLabV3+和SegFormer-B2。虽然所有模型在其训练数据集上表现良好,但当在外部数据集上进行测试时,它们的准确性显著下降。与卷积神经网络模型相比,基于Transformer的SegFormer-B2表现出更优越的泛化能力,这表明架构类型是跨医院性能的关键因素。
-
新型cGAN可从2D图像重构3D多孔介质
研究人员开发了一种新颖的条件生成对抗网络(cGAN)框架,能够从2D图像重构3D多孔介质体积。该方法独特地结合了属性条件生成与2D到3D重构,无需大量的3D训练数据,同时允许控制孔隙度等岩石物理属性。该框架采用混合架构,包含一个3D生成器和一个2D判别器,从2D切片学习3D结构,并在孔隙度控制方面取得了0.93的高$R^2$值。
-
SE-UNet框架为逆问题提供数据高效的图像合成
研究人员推出了一种新颖的图像合成框架SE-UNet,它解决了扩散模型在真实世界逆问题中的局限性。该新方法利用几何等变性和奇异值门控,无需广泛的预训练即可解决病态成像任务。SE-UNet在CIFAR-10上展示了最先进的零样本修复能力,显著优于现有基线,并能快速收敛到准确的解决方案。
-
AI模型利用站点和格点数据提升极端降水预报能力
研究人员开发了一种新颖的两阶段框架,采用U-Net架构来改进极端降水预报。该方法结合了概率分类和数值重构,融合了六个主要数值天气预报(NWP)模型的预报。一项关键创新是联合监督机制,该机制整合了中国2400多个气象站的观测数据,同时精炼了空间结构和峰值强度。评估显示,与单个NWP模型和现有产品相比,在强降雨事件方面有了显著改进,将预报从几乎没有实用价值转变为具有业务价值。
-
新框架揭示了几何一致性是稳定扩散模型(stable diffusion models)的关键
研究人员开发了一个统一的框架来分析几何变换对 UNets、ViTs 和 DiTs 等扩散模型架构的影响。通过将二面体群元素应用于中间隐藏状态,他们观察到几何一致的变换增强了特征稳定性,而不一致的变换则会导致特定于架构的失败。这项研究将几何一致性确立为稳定视觉和扩散模型中空间结构隐藏状态干预的关键原则,其研究结果得到了 Stable Diffusion 2.1、ViTs 和 DiTs 分析的支持。
-
新型AI模型从MRI合成Tau-PET图像用于阿尔茨海默病研究
研究人员开发了SFL-Net,一个旨在从多对比度MRI扫描合成Tau-PET图像的新型框架。该方法利用现成的MRI数据,解决了用于阿尔茨海默病分期的Tau-PET成像的规模化挑战。SFL-Net分解潜在表示并保留解剖细节,在各种保真度和重建指标上优于基线模型,同时还提供增强的可审计性。
-
新的REVIVE框架可恢复被污损的自动驾驶汽车摄像头流
研究人员开发了REVIVE框架,以解决自动驾驶汽车(AV)上的污损诱导遮挡攻击(VOAs)。REVIVE集成了检测、模式识别、使用基于EfficientNet的U-Net进行分割以及类型感知恢复方法。该框架采用BLIP引导的Stable Diffusion修复、直接像素替换和自适应中值滤波等技术,以在物理遮挡后恢复摄像头流的效用。评估表明,直接像素替换可以显著恢复目标检测的召回率和F1分数,优于其他基线,并确保转发的流的质量不低于未恢复的帧。
-
新研究探讨扩散模型在偏见缓解、一致性和效率方面的进展 · 跟踪6个来源
多篇研究论文探讨了扩散模型的进展,重点是提高其效率、减少偏见和理解其一致性。一篇论文介绍了CO-ALIGN,一种概念图对齐方法,用于在保持生成质量的同时缓解文本到图像模型的偏见。另一项理论分析收紧了扩散模型“分数匹配差距”的界限,表明分数近似质量在低噪声尺度下至关重要。第三篇论文使用随机矩阵理论来解释在不同数据子集上训练的扩散模型的一致性,将其与共享的高斯统计和数据属性联系起来。此外,研究还调查了少步扩散模型的方法,提出了可分解探针来…
-
新的RadiomicNet架构通过可解释的人工智能增强医学图像分割
研究人员开发了RadiomicNet,这是一种新颖的深度学习医学图像分割架构,它集成了手工制作的放射组学特征,以增强可解释性并降低计算需求。这种混合方法使用带有灰度共生矩阵(GLCM)和局部二值模式(LBP)特征的放射组学注意力门(RAG),来指导轻量级MobileNetV2编码器-解码器中的注意力。RadiomicNet在乳腺超声图像(BUSI)数据集和Kvasir-SEG上取得了有竞争力的性能,同时使用的参数比标准的U-Net和U…
-
扩散模型研究聚焦效率、不确定性和复现性
近期研究探索了扩散模型的进步,重点在于提高效率和解决特定挑战。一篇论文介绍了在扩散模型中更具样本效率的人类反馈强化学习(RLHF)方法,实现了高达6倍的提升。另一篇论文提出了一个随机微分方程框架HyperNSD,用于超图神经网络中的不确定性估计。此外,一项调查回顾了视觉扩散模型中的复现性问题,强调了隐私和版权方面的担忧。其他研究则侧重于扩散模型的有效训练后技术,例如用于4位计算的FourTune和用于超高分辨率图像编辑的UltraDi…
-
新的 AlphaEarth 先验知识提高了 SAR 洪水分割精度
研究人员开发了一种新的方法,通过整合土地覆盖先验知识,利用合成孔径雷达 (SAR) 图像进行快速洪水分割。该方法旨在提高在紧急情况下通常会出现的、事前 SAR 数据不可用时的分割精度。研究比较了包括 CNN 和 Vision Transformers 在内的各种基础骨干网络,证明了数字高程模型 (DEM) 和新颖的 AlphaEarth 先验知识都能在不同事件和骨干网络中提高分割性能。
-
Fast Equivariant Imaging 加速无监督深度学习训练
研究人员推出了一种新的无监督学习框架 Fast Equivariant Imaging (FEI),旨在加速深度成像网络的训练。FEI 使用不精确变量分裂方案重新构建了 Equivariant Imaging 目标,将网络训练与辅助恢复步骤分开。这种新颖的方法在 X 射线 CT 重建和图像修复等任务上,与标准的 Equivariant Imaging 相比,训练时间加速了十倍,同时还提高了泛化性能并实现了高效的测试时适应。
-
前列腺MRI假阳性在不同架构中模仿癌症特征
研究人员进行了一项多架构研究,以分析前列腺MRI检测中的假阳性。他们发现残留的假阳性与实际癌症共享影像学特征,这一特征在各种模型架构中持续存在。开发了一个事后精炼头以提高病例级特异性,在特定数据折叠中显示出性能的显著提高,但在外部数据集上饱和。
-
新的AI框架通过卫星图像增强洪水测绘 · 已追踪2个来源
研究人员开发了一种使用Sentinel-1和Sentinel-2卫星图像进行高分辨率洪水测绘的新框架。该方法通过引入一个针对美国本土的新数据集并采用新颖的学习策略,解决了光学数据中的云覆盖和雷达数据中的斑点噪声等限制。该框架利用了移位不变损失函数来处理地理定位不确定性,并使用条件变分自编码器(CVAE)进行生成去斑,在洪水测绘精度方面取得了显著改进。