NVIDIA 推出了 NVRx,这是一个 Python 库,旨在增强 Amazon EKS 上大规模分布式 AI 训练的容错能力。NVRx 与 PyTorch 的 Fully Sharded Data Parallel (FSDP) 集成,支持异步检查点,将 I/O 操作与训练重叠,从而显著减少空闲时间。它还提供进程内重启功能,可在几秒钟内从故障中恢复,而无需重启容器,并提供作业内重启机制来处理严重崩溃。 AI
影响 提高了大规模 AI 模型训练的可靠性和效率,可能降低成本并加速开发周期。
排序理由 这是一篇技术博客文章,详细介绍了用于改进现有基础设施 (Amazon EKS) 和框架 (PyTorch) 的新软件扩展 (NVRx),而不是核心模型发布或重要的行业事件。
在 AWS Machine Learning Blog 阅读 →
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →