本文研究了边界的几何特性如何影响浅层ReLU神经网络的逼近能力。研究在加权变差空间内为凸体上的逼近建立了上下界,将经典结果推广到更高维度和各种范数。它确定了决定最优逼近率的特定几何指数,并确定了维持经典逼近率的精确权重阈值。研究结果表明,即使在维度和误差范数等其他因素保持不变的情况下,边界几何也可以显著改变最优逼近指数。 AI
影响 为ReLU网络的逼近能力提供了理论见解,可能为未来的模型架构提供信息。
排序理由 该集群包含一篇详细介绍神经网络逼近理论研究的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →