实体 Q2_0

Q2_0

PulseAugur coverage of Q2_0 — every cluster mentioning Q2_0 across labs, papers, and developer communities, ranked by signal.

总计 · 30天

1

90 天内 1

发布 · 30天

0

90 天内 0

论文 · 30天

0

90 天内 0

层级分布 · 90 天

主题

情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条

TOOL · CL_132335 · Jul 8 · 14:45

llama.cpp 为 CPU 添加 Q2_0 量化以支持 Ternary Bonsai 模型

一项针对 llama.cpp 项目的拉取请求引入了对 CPU 的 Q2_0 量化支持，主要目的是启用 Ternary Bonsai 模型的使用。此更新完成了 CPU 的 Q1_0、Q2_0、Q4_0 和 Q8_0 量化系列，并计划提交对 x86、Metal、CUDA 和 Vulkan 的额外后端支持。此增强的动机是促进各种 Ternary Bonsai 模型（包括 1.7B、4B 和 8B 参数版本）的部署。