实体
Dash Qapu
Dash Qapu
PulseAugur coverage of Dash Qapu — every cluster mentioning Dash Qapu across labs, papers, and developer communities, ranked by signal.
总计 · 30天
1
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
0
90 天内 1
层级分布 · 90 天
主题
情绪 · 30 天
1 天有情绪数据
最近 · 第 1/1 页 · 共 2 条
-
27B LLM压缩至8.31GB，可在12GB笔记本GPU上运行
研究人员开发了一种新颖的方法，显著减小了大型语言模型的尺寸，使得一个拥有270亿参数的模型Qwen3.8-27B能够装入一个12GB的笔记本GPU。这是通过将模型的权重压缩到每个权重约2.5位来实现的，从而使其尺寸比原始的53.8GB减小了84.5%。新压缩的模型名为Pingala-8，在WikiText-2困惑度基准测试中也表现出改进的性能，尽管一种竞争格式DASH-Q IQ2_XS仍然显示出更优越的结果。压缩后的模型需要一个针对N…
-
新的DASH-Q方法改进了超低比特大语言模型量化
研究人员开发了DASH-Q，一种新颖的训练后量化（PTQ）框架，旨在无需重新训练即可减小大型语言模型（LLM）的内存占用。该方法通过使用稳定的对角海森近似和迭代加权最小二乘法，专门解决了超低比特量化中出现的性能下降问题。DASH-Q能有效过滤掉来自有限校准数据的噪声，即使在使用非常小的校准集的情况下，在五个LLM模型上的零样本准确率平均也比现有的PTQ基线高出7.01%。