PulseAugur
实时 04:16:16
English(EN) 📊 Mistral Medium 3 — the actual numbers GPQA: 57.8% MMLU-Pro: 76% Humanity's Last Exam: 4.3% Long Context Reasoning: 28% ⚡ 49.2 tokens/sec 💰 15.6 intelligence p

Mistral Medium 3 基准测试显示 MMLU-Pro 为 76%,Humanity's Last Exam 为 4.3%

Mistral Medium 3 已获得独立基准测试,揭示了其在多项关键指标上的表现。该模型在 GPQA 上达到 57.8%,在 MMLU-Pro 上达到 76%,在 Humanity's Last Exam 上达到 4.3%。其长上下文推理能力为 28%,处理速度为每秒 49.2 个 token。 AI

影响 提供了 Mistral Medium 3 的关键性能数据,有助于模型选择和比较。

排序理由 LLM 的独立基准测试结果。 [lever_c_demoted from research: ic=1 ai=1.0]

在 Mastodon — fosstodon.org 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

Mistral Medium 3 基准测试显示 MMLU-Pro 为 76%,Humanity's Last Exam 为 4.3%

报道来源 [1]

  1. Mastodon — fosstodon.org TIER_1 English(EN) · [email protected] ·

    📊 Mistral Medium 3 — 实际数字 GPQA: 57.8% MMLU-Pro: 76% Humanity's Last Exam: 4.3% Long Context Reasoning: 28% ⚡ 49.2 tokens/秒 💰 15.6 intelligence p

    📊 Mistral Medium 3 — the actual numbers GPQA: 57.8% MMLU-Pro: 76% Humanity's Last Exam: 4.3% Long Context Reasoning: 28% ⚡ 49.2 tokens/sec 💰 15.6 intelligence points per dollar Measured independently, not self-reported → https:// opensourceai.tech/leaderboard. html # LLM # Benchm…