llama.cpp 的最新版本 b9994 在 macOS 和 iOS 上引入了对 Q2_0 量化的支持。此次更新专门针对 Apple Silicon 硬件,并提供了标准配置和 KleidiAI 启用配置的选项。 AI
影响 提高在 Apple 设备上运行大型语言模型的效率。
排序理由 这是对一个开源工具的软件更新,而不是前沿模型发布或重要的行业事件。
在 Mastodon — sigmoid.social 阅读 →
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →