PulseAugur
实时 04:42:36
English(EN) How to Track Per-User OpenAI Costs in Your Next.js App

开发者被敦促跟踪每个用户的 LLM 成本,以避免意外账单

构建集成 OpenAIGPT-4o 等大型语言模型 (LLM) 的应用程序的开发者需要跟踪每个用户的成本,以避免意外账单。一种常见的方法是在应用程序后端(例如 Next.js API 路由)中检测 API 调用,以记录用户 ID、使用的模型、令牌计数和相关成本等使用情况详细信息。这些数据可以存储在 Supabase 等数据库中以供后续分析。对于希望简化此过程的开发者,LLMeter 等工具提供了一个开源解决方案,可自动计算成本、记录日志并为多个 LLM 提供商提供仪表板。 AI

影响 对于开发者管理运营成本和了解 LLM 驱动的应用程序的用户行为至关重要。

排序理由 该项目描述了一个工具 (LLMeter),可帮助开发者跟踪其应用程序中与 LLM 使用相关的成本。

在 dev.to — LLM tag 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

开发者被敦促跟踪每个用户的 LLM 成本,以避免意外账单

报道来源 [1]

  1. dev.to — LLM tag TIER_1 English(EN) · John Medina ·

    如何在你的 Next.js 应用中跟踪每个用户的 OpenAI 成本

    <p>So you've integrated the OpenAI API into your Next.js app. Your users love it. But then you get the bill, and you have no idea who's costing you what. A single "power user" could be driving 90% of your costs, and you'd be flying blind.</p> <p>Let's fix that. Tracking per-user …