llama.cpp 项目发布了 b11633 版本,其中包括对其 ggml-cpu 组件的更新。这些更改解决了 SET_ROWS 转换缓冲区在多个线程之间如何处理的问题,通过确保 SET_ROWS 以单个任务执行,并且每个线程使用自己的转换缓冲区,来防止线程写入超出分配的缓冲区。 AI
影响 对 CPU 推理库的次要更新,改进了线程安全性和缓冲区管理。
排序理由 这是项目特定组件的软件更新,不是新模型发布或重大的行业事件。
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →