PulseAugur
中
实时 16:52:55
实体 Generalization in Neural Networks Through the Lens of Magnitude Potential

Generalization in Neural Networks Through the Lens of Magnitude Potential

PulseAugur coverage of Generalization in Neural Networks Through the Lens of Magnitude Potential — every cluster mentioning Generalization in Neural Networks Through the Lens of Magnitude Potential across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
1
90 天内 1
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 1
层级分布 · 90 天
主题
情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条
  1. TOOL · CL_277265 ·

    新的“幅度势能”指标有助于神经网络泛化分析

    研究人员引入了一个名为“幅度势能”的新概念,该概念源自度量幅度理论,以更好地理解神经网络的泛化能力。该量在logit层计算,反映了一个点在数据集中的表示程度。实验表明,该幅度势能的比率与记忆分数相关,并且可以检测决策边界的结构变化,作为模块化算术任务中“grokking”的几何指标。即使在抑制神经网络坍塌的情况下,幅度势能也保留了关于几何结构的信息。