PulseAugur
实时 12:01:49
实体 Singularly perturbed ordinary differential equations

Singularly perturbed ordinary differential equations

PulseAugur coverage of Singularly perturbed ordinary differential equations — every cluster mentioning Singularly perturbed ordinary differential equations across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
1
90 天内 1
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 1
层级分布 · 90 天
主题
情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条
  1. RESEARCH · CL_93389 ·

    研究论文将注意力机制视为耦合:基于快慢ODE的视角

    一篇新的研究论文通过快慢常微分方程(ODEs)的视角探讨了神经网络中注意力机制的概念。作者提出因果自注意力可以被视为一种耦合机制,并研究了第二种、时间上更慢的耦合机制是否可以对其进行补充。他们的理论框架被实例化为一个神经网络,表明这种更慢的耦合在50万个token时效果中性,提出的门控保持关闭状态,与密集基线相比没有性能提升,但时钟成本相当。