研究人员开发了一种新颖的两层进化调度方法EVO-GP,旨在优化多集群GPU环境中机器学习作业的分配。该方法通过最小化平均和最大加权排队时间并最大化GPU利用率,解决了当前启发式调度器的局限性。该系统将作业到集群的分配与集群内的资源分配分离开来,采用进化算法进行负载均衡,并使用遗传编程来指导集群内的GPU分配。实验表明,EVO-GP在适应性和可扩展性方面优于现有方法。 AI
影响 这种新的调度方法可以提高分布式GPU系统上大规模机器学习任务的效率并减少等待时间。
排序理由 关于机器学习作业新调度方法的学术论文。[lever_c_demoted from research: ic=1 ai=1.0]
在 arXiv cs.NE (Neural & Evolutionary) 阅读 →
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →