一篇新发表在arXiv上的论文提出了深度随机ReLU神经网络的$\ell^p$-Lipschitz常数的近最优估计。该研究关注具有随机参数和特定He初始化变体的网络,为宽网络推导了高概率的上界和下界。研究强调了$\ell^p$-Lipschitz常数的行为在$p$属于$[1,2)$或$[2,\infty]$区间时存在显著差异。 AI
影响 为深度神经网络的特性提供了理论见解,可能为未来的模型架构和训练策略提供信息。
排序理由 该集群包含一篇发表在arXiv上的学术论文,详细介绍了关于神经网络的理论研究。[lever_c_demoted from research: ic=1 ai=1.0]
- alphaXiv
- arXiv
- CatalyzeX
- DagsHub
- Gaussian function
- Gotit.pub
- He initialization
- Hugging Face
- Influence Flower
- Paul Geuchen
- rectifier
- ScienceCast
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →