Azure 推出了一项新解决方案,通过在每个应用程序的基础上实施令牌速率限制来管理 AI 支出。此功能利用 Application Network 和 agent gateway 来提供对 AI 使用情况和相关成本的精细控制。该系统旨在与 Kubernetes 环境集成,为监控和限制特定应用程序中的 AI 消耗提供了一种方式。 AI
影响 为控制应用程序中的 AI 令牌消耗和成本提供了基础设施。
排序理由 这是关于一个特定基础设施工具的产品公告,该工具可帮助管理 AI 成本。
在 Mastodon — fosstodon.org 阅读 →
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →