Megatron
PulseAugur coverage of Megatron — every cluster mentioning Megatron across labs, papers, and developer communities, ranked by signal.
2 天有情绪数据
-
Blackwell 上的 MXFP8 强化学习：速度、一致性和失败模式的探讨
一篇新的研究论文探讨了在 NVIDIA Blackwell 平台上，将 MXFP8 精度用于端到端强化学习（RL）与大型语言模型（LLM）的应用。该研究使用各种框架和模型（包括 Qwen3），在 B200 GPU 上实现并测量了这种方法。研究结果表明，MXFP8 可以提高某些模型的稳定性和缩短步长和生成时间，但它可能会减慢短序列密集型工作负载的速度，并引入必须保留的权重同步特定条件，以避免静默失败。
-
阿里巴巴 Qwen 发布 QwenGyre 用于超长周期智能体训练
阿里巴巴的 Qwen 团队推出 QwenGyre，一个新颖的弹性强化学习框架，用于在超长周期任务上训练 AI 智能体。该系统通过在 rollout 和训练阶段之间动态重新分配 GPU 来解决智能体训练中的挑战，确保连续执行并实现显著的加速。QwenGyre 还将复杂的、分支的智能体历史处理成高效的训练样本，提高了在 NL2RepoBench 等基准测试上的性能。
-
孩之宝发布带有“The Touch”的详细领导力矩阵玩具
孩之宝发布了一款新的、专用的领导力矩阵玩具复制品，取材自《变形金刚：电影版》。这款大型、精细的复制品具有模仿电影能量效果的明亮脉冲灯光，并包含各种音效。值得注意的是，打开时会播放标志性的歌曲“The Touch”，并且可以通过USB-C或3节AA电池供电。该玩具售价139.99美元，推荐给粉丝，将于今年8月上市。
-
孩之宝推出标志性角色AI版本，伴随安全担忧
孩之宝推出了12个知名角色的AI驱动版本，例如变形金刚系列的擎天柱和威震天。该公司将其标志性人物引入人工智能领域，专家们在警告潜在的儿童风险的同时，也肯定了其娱乐价值。
-
中国AI创造AI：ForgeTrain框架训练MiniCPM5-1B模型
中国AI公司MiniMax开发了ForgeTrain，一个完全由AI生成的全新预训练框架，并成功训练了一个名为MiniCPM5-1B的新型小型模型。该框架据称在训练速度上比NVIDIA的Megatron快10%，并提供了一种名为Forge Engineering的新软件范式，强调为特定模型和硬件定制代码生成。拥有10亿参数的MiniCPM5-1B模型，在其尺寸下展现出高智能密度，并专为边缘设备的有效部署而设计，展示了向更小、更强大AI…
-
新型运行时提升流水线并行AI训练效率
研究人员开发了一个名为“就绪性优先流水线运行时”（RRFP）的新型运行时系统，旨在提高使用流水线并行进行大模型训练的效率。当任务就绪性偏离预设计划时，传统系统可能会出现空闲时间和利用率降低的问题。RRFP通过将计划视为灵活的提示而非严格的指令来解决这个问题，使各个阶段能够更早地执行可用工作。在多达128个GPU上的评估显示，RRFP在多模态工作负载上的训练速度比现有方法快2.77倍，实现了显著的加速。