新工具 GPUAlert 高精度诊断 GPU 训练作业失败

研究人员开发了 GPUAlert，一个新设计的命令行工具，用于诊断 GPU 训练作业中的失败。该工具无需修改训练脚本，通过监视进程边界，在作业完成或失败时发送详细的电子邮件通知。GPUAlert 对失败原因进行分类，包含日志和输出工件，并围绕可靠性原语进行组织，以确保即使电子邮件服务不可用也能可靠地传递通知。该系统在一个包含 15 个失败类别的 474 个 GPU 训练日志的标记语料库上实现了 0.997 的宏 F1 分数，显著优于更简单的方法。 AI

影响 提高了大规模 AI 模型训练基础设施的可靠性和调试能力。

排序理由 该项目是一篇学术论文，详细介绍了一个用于诊断 GPU 训练作业失败的新工具。[lever_c_demoted from research: ic=1 ai=0.7]

在 arXiv cs.AI 阅读 →

• alphaXiv
• arXiv
• CatalyzeX
• Connected Papers
• CORE Recommender
• DagsHub
• Gotit.pub
• GPUAlert
• Hugging Face
• Litmaps
• ScienceCast
• scite Smart Citations

• 基础设施
• 论文

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →