根据独立测量,Seed-OSS-36B-Instruct 的每美元智能点成本效益达到了 40.3。该模型在 GPQA 基准测试中得分 72.6%,在 MMLU-Pro 中得分 81.5%。这些结果表明,Seed-OSS-36B-Instruct 相对于其成本提供了具有竞争力的性能,有可能挑战更大、更昂贵的模型。 AI
影响 展示了大型语言模型成本效益的新基准,可能影响未来的模型开发和部署策略。
排序理由 该集群报告了一个开源模型的基准测试结果,属于研究范畴。[lever_c_demoted from research: ic=1 ai=1.0]
在 Mastodon — mastodon.social 阅读 →
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →