PulseAugur
中
实时 08:52:14
实体 Diagonal Linear Networks

Diagonal Linear Networks

PulseAugur coverage of Diagonal Linear Networks — every cluster mentioning Diagonal Linear Networks across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
1
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 2
层级分布 · 90 天
主题
情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 2 条
  1. TOOL · CL_141235 ·

    论文分析SAM对对角线性网络训练的影响

    本文使用随机感知锐度最小化（SAM）分析了对角线性网络的训练动态。研究人员证明，训练过程中引入的噪声充当了SAM的随机形式，影响了损失景观和训练速度。该研究描述了噪声水平如何作为正则化参数，影响参数收缩、阈值处理和层平衡。
  2. RESEARCH · CL_38201 ·

    论文分析了SGD在高维线性网络中的动力学行为

    一篇新论文详细介绍了随机梯度下降（SGD）在对角线性网络中的高维行为。研究表明，在高维情况下，SGD的动力学行为可以用随机微分方程精确建模。这使得可以推导出一个确定性偏微分方程，该方程跟踪风险和曲率等关键统计数据，最终证明了指数级收敛到零风险。