PrismML 发布了 Bonsai 2 27B,这是阿里巴巴 Qwen3.8-27B 模型的高度压缩版本。该新模型使用三元权重,达到了原始模型基准性能的 98.2%,同时将其大小从 54GB 减少到 5.9GB。与以往会降低推理能力的低比特量化方法不同,据报道 Bonsai 2 27B 在数学和编码基准等复杂任务上保持了强大的性能。 AI
影响 这一发展可能显著降低在本地运行强大 AI 模型的门槛,从而可能减少对付费云订阅的依赖。
排序理由 该条目详细介绍了一种现有开源模型的新颖压缩技术,重点关注其技术优势和基准性能。[lever_c_demoted from research: ic=1 ai=1.0]
- AIME26
- Alibaba Group
- Apache Software License 2.0
- Bonsai 2 27B
- LiveCodeBench
- MMLU-Redux
- PrismML
- Qwen3.8-27B
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →