实体 Groot-19B

Groot-19B

PulseAugur coverage of Groot-19B — every cluster mentioning Groot-19B across labs, papers, and developer communities, ranked by signal.

总计 · 30天

1

90 天内 1

发布 · 30天

0

90 天内 0

论文 · 30天

0

90 天内 0

层级分布 · 90 天

主题

情绪 · 30 天

1 天有情绪数据

最近 · 第 1/1 页 · 共 1 条

TOOL · CL_358913 · Nov 15 · 06:38

在 24GB GPU 上自托管 Nanbeige4.3-33B：权重优化与 Bug 修复

Nanbeige4.3-33B 是一款开源的代理编码模型，通过仔细管理模型权重和“思考模式”，可以在单块 24GB GPU 上运行。运行这个拥有 330 亿参数的密集型模型需要将其权重完全加载到 GPU 的 VRAM 中以保持速度，因为卸载到较慢的系统 RAM 会显著降低性能。开发者发现，在 16GB GPU 上使用 3 位量化权重文件（约 14.7GB）可以实现超过 13 tokens/秒的最佳速度，而 2 位文件对于编码任务来说精…