实体
Relu Networks
Relu Networks
PulseAugur coverage of Relu Networks — every cluster mentioning Relu Networks across labs, papers, and developer communities, ranked by signal.
总计 · 30天
3
90 天内 3
发布 · 30天
0
90 天内 0
论文 · 30天
3
90 天内 3
层级分布 · 90 天
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 3 条
-
Deep ReLU networks analyzed for metric and similarity learning generalization
Researchers have developed a new theoretical framework to analyze the generalization performance of deep ReLU networks used in metric and similarity learning. The study derives the explicit form of the true metric for t…
-
ReLU 网络分析将 Fisher 信息与球谐函数联系起来
研究人员分析了具有随机隐藏权重的简单两层 ReLU 神经网络的 Fisher 信息矩阵。他们发现特征值分布显著地集中在特定的特征空间上,其中前三个特征空间几乎占了矩阵迹的全部。该研究确定这些主导特征空间对应于二阶或更低阶的球谐函数,并将其与神经切线核的 Mercer 分解联系起来。
-
研究人员发现大多数 ReLU 网络具有可识别的参数
一篇新论文探讨了深度 ReLU 网络的实现图,研究了函数在考虑了缩放和置换对称性的情况下,何时能唯一确定其参数。该研究引入了一个使用加权多面体复形来分析隐藏冗余的框架。一个关键发现是,对于输入层和隐藏层宽度至少为二的架构,存在一个可识别参数的开放集,这意味着函数维度等于参数数量减去隐藏神经元数量。