实体
Q4_K
Q4_K
PulseAugur coverage of Q4_K — every cluster mentioning Q4_K across labs, papers, and developer communities, ranked by signal.
总计 · 30天
1
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 1
层级分布 · 90 天
主题
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
ExTernD 技术在较低比特宽度下为 LLM 提供接近 bf16 的精度 · 跟踪 4 个来源
研究人员开发了 ExTernD，一种用于大型语言模型 (LLM) 的新型训练后量化技术。该方法将 LLM 权重矩阵分解为三元因子和一个对角缩放向量，从而扩展了内部秩以纠正量化误差。ExTernD 在 Gemma-4-E2B 和 Qwen3.5-4B 等模型上，展示了与 Q4_K 和 Q5_K 等更高比特宽度量化方法相当的精度，同时保持了高效的内存和计算使用。
-
LLaMA subreddit 用户询问 GGUF 量化精度
一位 r/LocalLLaMA subreddit 的用户正在寻求关于大型语言模型不同 GGUF 量化格式所提供精度的澄清。他们正在特别比较 NVFP4 与 Q4_K 和 Q6_K，并注意到网上存在相互矛盾的信息。用户根据其研究得出的当前理解表明，精度等级为 Q6_K 优于 NVFP4，而 NVFP4 又优于 Q4_K。