PulseAugur
中
实时 07:38:28
实体 2-bit LLM Weights

2-bit LLM Weights

PulseAugur coverage of 2-bit LLM Weights — every cluster mentioning 2-bit LLM Weights across labs, papers, and developer communities, ranked by signal.

Show in brief
总计 · 30天
1
90 天内 1
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 1
层级分布 · 90 天
主题
情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条
  1. TOOL · CL_233519 ·

    新方法提升2位LLM权重解码效率

    研究人员开发了一种新颖的2位LLM权重多壳解码方法，旨在提高效率和质量。所提出的方法包括离线扩展到GPU布局以及一个融合的解量化加矩阵向量乘内核，以最小化warp发散。该方法与各种位精确布局进行了测试，在恒定带宽下展示了在大小和速度方面的性能提升，并与FP16等更高精度格式相比显示出有竞争力的结果。