Cursor 已开源 Mixture-of-Kittens (MoK),这是一个专为 NVL72s 设计的 MoE 训练超级内核。该内核融合了专家混合模型的通信和计算,与现有基线相比,性能最高可提升 2.37 倍。MoK 目前支持 Cursor 上数万个 GPU 的模型训练,将端到端训练吞吐量提高了 1.41 倍。 AI
影响 此次开源旨在降低人工智能研究的门槛,使更多实验室能够更高效地训练模型。
排序理由 AI IDE Cursor 开源了训练超级内核。
AI 生成摘要 · Google Gemini · 来自 3 个来源。 我们如何撰写摘要 →