研究人员开发了一种使用布罗伊登方法的新型拟牛顿方法,用于高效评估非线性状态空间模型。该方法通过从轨迹割线导出的雅可比块的对角加低秩近似来捕获耦合项。该方法避免了自动微分,并且通过秩压缩与并行扫描兼容,证明了有限步内精确轨迹恢复。经验上,该方法在RNN、并行MCMC算法和去噪扩散模型等模型的收敛速度和并行执行方面显示出优势,尤其是在雅可比评估成本高或状态维度大的情况下。 AI
影响 这种新方法通过提高计算效率,有可能加速RNN和扩散模型等复杂AI模型的训练和推理。
排序理由 关于评估非线性状态空间模型的新算法方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
- arXiv
- Broyden's method
- denoising diffusion models
- Hugging Face
- Ian-Christopher Tanoh
- Newton's method
- Recurrent Neural Networks
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →