AI 基础设施市场日益受到网络和数据调度的瓶颈制约,焦点从原始 GPU 算力转向系统效率。数据处理单元(DPU)正成为关键组件,尤其是在 Agent 时代,用于优化 GPU 利用率、管理推理的大上下文窗口以及提高整体系统性能。尽管 Nvidia 早期战略性投资了 DPU,但市场直到最近才开始关注它们,像云豹智能(Cloud Leopard Intelligence)这样的公司现在正崭露头角,提供高性能 DPU,这对于大规模 AI 部署至关重要。 AI
影响 DPU 正成为高效 AI 运营的必需品,有可能在大型模型部署中释放新的性能水平和成本降低。
排序理由 文章讨论了 DPU 在 AI 基础设施中日益增长的重要性以及市场潜力,并重点介绍了某公司在该细分领域成为领导者的努力。[lever_c_demoted from significant: ic=1 ai=0.7]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →