PulseAugur
中
实时 12:06:20
实体 Berglund

Berglund

PulseAugur coverage of Berglund — every cluster mentioning Berglund across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
1
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 2
层级分布 · 90 天
主题
情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 2 条
  1. TOOL · CL_352186 ·

    字节对编码形式化:主要大型语言模型中发现的无限分词变化

    研究人员形式化了字节对编码(BPE),这是一种常用于大型语言模型(LLM)的分词方法,以理解文本前缀如何改变分词。他们开发了一种使用“半径证书”的方法,可以有效地确定对于任何给定词典,这种改变是无限的还是有限的。分析表明,像GPT-2、cl100k、o200k和Llama 3这样的模型在其初始合并阶段就具有无限的起源半径,这表明前缀文本可能导致显著的分词变化。

  2. TOOL · CL_275203 ·

    SoftServe:新的拟牛顿法应对深度学习挑战

    研究人员开发了SoftServe,一种新颖的拟牛顿(QN)方法系列,旨在解决深度学习中非凸性和海量参数规模的挑战。与传统的QN方法不同,SoftServe即使在负曲率区域也能获得正定曲率估计,并通过对角线和Kronecker分解变体扩展到大型神经网络。该方法利用耦合牛顿-舒尔茨迭代进行矩阵运算,用GPU友好的矩阵乘法取代了昂贵的分解。SoftServe在病态问题上表现出优越的性能,包括物理信息神经网络和扩散模型,实现了比Adam和Mu…