实体
SM121
SM121
PulseAugur coverage of SM121 — every cluster mentioning SM121 across labs, papers, and developer communities, ranked by signal.
总计 · 30天
2
90 天内 2
发布 · 30天
0
90 天内 0
论文 · 30天
1
90 天内 1
层级分布 · 90 天
主题
最近 · 第 1/1 页 · 共 2 条
-
MiniMax H3模型发布,可在单台DGX Spark上运行
MiniMax H3模型现已公开可用,相关详情已在Hugging Face和Arint.info上分享。一位用户成功地在单台DGX Spark系统上运行了该模型,并指出需要对SM121兼容性和在线FP8进行实验。
-
推测解码研究提升消费级硬件上LLM的推理速度
研究人员正在探索推测解码技术以加速大型语言模型(LLM)的推理。两篇论文,一篇来自arXiv,另一篇来自dev.to,详细介绍了在消费级硬件和高并发场景下提高效率的方法。arXiv论文《Lossless but Not Free》对Apple Silicon上的推测解码进行了实证分析,强调加速效果取决于并行验证以及草稿模型和目标模型之间显著的延迟差距。D-Cut论文(也来自arXiv)提出了一种用于批处理推测解码的自适应剪枝方法,该方…