OpenAI 将停用其 Evals 服务,只读访问将于 10 月 31 日结束,完全无法访问将于 11 月 30 日结束。Agent Builder 和 v1/prompts API 也将于后者日期停用。建议用户将他们的 evals 迁移到 Promptfoo,导出结果,或通过 Evals API 检索数据以重建测试。作者介绍了 LLMShift,这是一个旨在帮助用户导出其 OpenAI Evals 并针对任何 LLM(包括来自 Anthropic 的模型)运行它们的工具。 AI
影响 用户必须将他们的 LLM 评估工作流迁移到 Promptfoo 或 LLMShift 等替代工具,才能继续测试模型。
排序理由 文章描述了一个用于从已停用的服务(OpenAI Evals)迁移的工具(LLMShift)。
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →