实体
Mirror descent
Mirror descent
PulseAugur coverage of Mirror descent — every cluster mentioning Mirror descent across labs, papers, and developer communities, ranked by signal.
总计 · 30天
1
90 天内 3
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 3
层级分布 · 90 天
主题
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 3 条
-
新研究表明熵平滑凸优化无法加速
arXiv上发表的一篇由Dragomir等人撰写的论文表明，熵平滑凸优化无法加速。该研究证明了该类函数中最小化方法的收敛速率的下界，表明一阶方法在对数因子内是最优的。这一发现尤其值得注意，因为在标准的平滑假设下通常可以使用加速方法，但这项工作表明对于具有有利结构的特定近函数，无法实现加速。
-
新的镜像下降框架将优化扩展到黎曼流形
研究人员开发了一个广义的黎曼流形上镜像下降（MD）框架，将其适用性扩展到复杂的优化问题。这个新的黎曼镜像下降（RMD）框架包含一个随机变体，并提供非渐近收敛保证。当应用于Stiefel流形时，RMD框架简化为曲边梯度下降（CGD），其随机扩展有效地解决了大规模流形优化问题。
-
新框架将群论与灵活的机器学习优化联系起来
研究人员开发了一个新框架，将群论和群熵与机器学习相结合，创建了一系列灵活的Mirror Descent优化算法。该方法使用由群组合律控制的广义熵泛函，扩展了现有的如Shannon和Tsallis熵等方法。通过利用群论的Mirror Maps和调整超参数，新方法可以实现针对不同数据几何和统计分布的自适应更新。