研究人员为 Wan2.2-I2V-A14B 模型开发了一种新颖的 W4A4 量化技术,旨在提高低比特宽度硬件上的推理效率。他们的方法将激活值异常的混合精度与逐通道平滑和前馈层的块状打包相结合。该方法在 VBench I2V 指标上取得了接近 FP16 的 2-3.5% 的结果,优于原生的 HiFloat4 基线。 AI
影响 提高了低比特宽度硬件的推理效率,可能有助于在资源受限设备上更广泛地部署大型模型。
排序理由 这是一篇研究论文,详细介绍了一种针对特定 AI 模型的新颖量化技术。 [lever_c_demoted from research: ic=1 ai=1.0]
- FP16
- HiF4
- HiFloat4
- ICME 2026
- MXFP4
- OpenS2V-5M
- SmoothQuant
- VBench-I2V
- W4A4 Quantization
- Wan2.2-I2V-A14B
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →