Hugging Face 发布 olmo-eval 以支持 LLM 开发

Hugging Face 发布了 olmo-eval，这是一个旨在简化大型语言模型开发迭代过程的新工作台。olmo-eval 以开放语言模型评估标准 (OLMES) 为基础，简化了基准测试的实现和执行，并灵活支持评估的运行方式和地点。它支持代理式和多轮评估，并提供增强的分析工具，以区分有意义的改进和噪声。 AI

影响 通过简化基准测试的实现和执行，简化了 LLM 开发循环。

排序理由 发布用于 LLM 开发的新软件工具。

在 Hugging Face Blog 阅读 →

• Harbor
• Hugging Face
• Olmo
• olmo-eval
• Open Language Model Evaluation Standard
• Tulu

• 产品
• 基础设施

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →