研究人员开发了NANQ,一个新颖的量化框架,旨在提高神经网络模拟内存计算(CIM)系统的效率和准确性。与以往关注理想量化误差的方法不同,NANQ考虑了CIM阵列固有的硬件噪声和器件变异。通过模拟噪声分布,NANQ自适应地为噪声较小的区域分配更高的分辨率,并确定最优的层级比特宽度,从而在视觉和语言模型中显著提高准确性并降低困惑度。 AI
影响 NANQ的噪声感知方法可能在专用硬件上实现更节能、更准确的AI推理。
排序理由 该集群包含一篇详细介绍AI硬件新技术框架的研究论文。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →