PulseAugur
实时 14:27:21
English(EN) Mitigating Compiler Fusion-Induced Power Bursts in Mobile NPU Inference as the Battery Depletes

编译器重写缓解移动NPU功率突发

一篇新的研究论文详细介绍了一种在移动NPU推理过程中缓解功率突发的方法,尤其是在设备电池电量低时。该研究在搭载MobileNetV4的Snapdragon 8 Gen 3处理器上进行,发现激进的编译器融合可能导致执行集中和显著的峰值电流突发。提出的解决方案涉及一种预编译图重写,通过插入屏障来防止有害的超级层合并,将峰值电流从3.12 A降低到1.94 A,同时延迟开销极小。 AI

影响 提高了移动设备上AI推理的效率和稳定性,可能支持更复杂的设备端AI任务。

排序理由 学术论文,详细介绍了针对硬件性能问题的技术缓解措施。[lever_c_demoted from research: ic=1 ai=1.0]

在 arXiv cs.AI 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

编译器重写缓解移动NPU功率突发

报道来源 [1]

  1. arXiv cs.AI TIER_1 English(EN) · Ryoga Yuzawa, Masayoshi Tomizuka ·

    缓解移动NPU推理中编译器融合引起的功耗突增问题,尤其是在电池电量下降时

    arXiv:2607.16555v1 Announce Type: cross Abstract: Mobile devices increasingly rely on real-time NPU inference for camera and perception workloads. Under low-voltage conditions, however, a single inference can induce an instantaneous voltage droop in the power-delivery network, ca…