对五个本地AI模型进行的自行测试显示,Gemma4:31b表现最佳,得分为160分中的145分,其次是Qwen3.8-27b,得分为139分。研究指出,一些模型得分较低,例如Muse-Glimmer-30b、Qwen3.6:35b和Qwen3-coder-30b,并非由于智力不足,而是提示词不匹配、响应不完整、占位符答案或在遵循泰语指令方面存在困难。创建者开发了一个新的“高级”基准来更好地区分高性能模型,因为标准基准已变得不那么有效。 AI
影响 强调了AI模型评估中潜在的陷阱以及超越标准基准进行细致测试的必要性。
排序理由 该条目详细介绍了对本地AI模型进行的自行基准测试,并分析了结果,包括新基准的设计。[lever_c_demoted from research: ic=1 ai=1.0]
AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →