PulseAugur
实时 12:43:57
实体 Deep Heaviside neural Networks

Deep Heaviside neural Networks

PulseAugur coverage of Deep Heaviside neural Networks — every cluster mentioning Deep Heaviside neural Networks across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
0
90 天内 1
发布 · 30天
0
90 天内 0
论文 · 30天
0
90 天内 1
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 1 条
  1. RESEARCH · CL_29318 ·

    新的HTAF激活函数可实现二值神经网络的稳定训练

    研究人员开发了一种名为重尾激活函数(HTAF)的新激活函数,以应对训练具有二值化表示的神经网络所面临的挑战。HTAF是单位阶跃函数的平滑近似,旨在保持较大的梯度质量以实现稳定的优化。该新函数能够使用基于梯度的优化方法稳定地训练各种类型的神经网络,包括脉冲神经网络(Spiking Neural Networks)和二值神经网络(Binary Neural Networks)。研究人员还引入了隐式概念瓶颈模型(ICBMs),该模型利用HT…