实体
Forward-Forward learning
Forward-Forward learning
PulseAugur coverage of Forward-Forward learning — every cluster mentioning Forward-Forward learning across labs, papers, and developer communities, ranked by signal.
总计 · 30天
1
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 2
层级分布 · 90 天
主题
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
通过似然比检验解释前向-前向学习
一篇新论文提出了前向-前向(FF)学习算法的似然比解释,认为其核心组成部分并非单纯的启发式方法。该研究认为,定义为激活值平方和的标量善意度量,是似然比检验的充分统计量。该框架扩展到各向异性和重尾分布,产生了广义的善意度量,并解释了除法归一化等现象。
-
前向-前向学习在实际任务上表现不如反向传播
一篇新的研究论文对 Geoffrey Hinton 提出的层局部训练方法——前向-前向(FF)学习算法的可扩展性提出了质疑。该研究引入了一种新工具 DTG-FF,该工具在包括 ImageNet-100 在内的多个真实世界基准测试中为 FF 设定了新的最先进水平。然而,研究表明,在更大的数据集和更高的类别数量下,FF 的表现明显逊于标准的反向传播(BP),这表明存在实际性能上限。此外,该论文还驳斥了 FF 在规模化方面的内存效率论点,表…