PulseAugur
实时 08:48:27
实体 exponential moving average

exponential moving average

PulseAugur coverage of exponential moving average — every cluster mentioning exponential moving average across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
1
90 天内 1
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 1
层级分布 · 90 天
主题
情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条
  1. RESEARCH · CL_107913 ·

    新的SPOFA框架稳定异构知识蒸馏

    研究人员开发了SPOFA,一个旨在稳定异构知识蒸馏(HKD)的新框架。HKD旨在传输不同模型架构(如Transformers和CNNs)之间的知识,但由于特征范数差异和梯度冲突,常常面临训练不稳定的问题。SPOFA通过双重稳定机制解决这些问题,该机制解耦特征幅度,并使用动量驱动的缩放器来适应性地惩罚冲突梯度,以最小的计算开销实现了最先进的准确性。