PulseAugur
实时 19:45:06
English(EN) Local LMO: Constrained Gradient Optimization via a Local Linear Minimization Oracle

新的优化方法 Local LMO 绕过了投影

研究人员引入了 Local LMO,一种用于约束优化问题的新型无投影梯度方法。该方法用当前迭代点周围小球内的局部线性最小化步骤替换了 Frank-Wolfe 的全局线性最小化步骤。Local LMO 在各种情况下提供了与投影梯度下降相当的收敛速度,包括约束集无界的场景,并为光滑强凸函数实现了线性收敛速度。 AI

影响 引入了一种新的优化技术,可以提高具有约束的机器学习模型的训练效率。

排序理由 该集群包含一篇详细介绍约束优化新算法方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv stat.ML 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

新的优化方法 Local LMO 绕过了投影

报道来源 [1]

  1. arXiv stat.ML TIER_1 English(EN) · Hanmin Li ·

    Local LMO: Constrained Gradient Optimization via a Local Linear Minimization Oracle

    We design Local LMO - a new projection-free gradient-type method for constrained optimization. The key algorithmic idea is to replace the global linear minimization oracle over the constraint set used by Frank-Wolfe (FW) with a local linear minimization oracle over the intersecti…