实体
Matsumoto
Matsumoto
PulseAugur coverage of Matsumoto — every cluster mentioning Matsumoto across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
2
90 天内 2
层级分布 · 90 天
主题
情绪 · 30 天
2 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
新分析详细介绍了逻辑回归中梯度下降的性能
本文分析了高斯设计下逻辑回归中梯度下降的有限样本性能。作者证明,在步长较小的情况下,梯度下降可以实现向真实参数的小邻域的线性收敛,其 $\ell_2$ 误差为 $O(\sqrt{\|\theta^*\|_2^5d/n})$。他们还证明了使用较大步长可以实现更快的局部线性收敛。一项关键的技术贡献是证明了逻辑损失的梯度满足近似可逆性条件,这是通过对梯度偏差进行统一控制和对总体Hessian特征值进行精细分析来实现的。该研究还提出了一种新颖…
-
新研究收紧逻辑回归梯度下降的界限 · 跟踪2个来源
两篇新的arXiv论文深入探讨了逻辑回归梯度下降的理论基础。第一篇论文侧重于低维、可分离数据,通过分析损失函数的动力学来收紧收敛速率的界限。第二篇论文研究了具有高斯设计的逻辑回归,表征了有限样本估计性能,并在不同步长条件下建立了更快的参数估计收敛速率。两项研究都有助于更深入地理解梯度下降在这些特定机器学习背景下的行为。