PulseAugur
实时 19:34:05
English(EN) Adding Benchmaxxer Repellant to the Open ASR Leaderboard

Hugging Face 增加私有数据集到 ASR 排行榜,以防止刷榜

Hugging Face 通过整合来自 Appen Inc. 和 DataoceanAI 的新的、高质量的英语自动语音识别 (ASR) 数据集,增强了其 Open ASR 排行榜。为防止“刷榜”或测试集污染,这些数据集将保持私有,但用户可以选择包含它们以进行更全面的性能评估。此举旨在为 ASR 模型在不同条件(包括不同口音和语音类型)下的性能提供更强大、更值得信赖的衡量标准。 AI

影响 增强了 ASR 基准的完整性,可能导致更可靠的模型开发和为实际应用选择模型。

排序理由 该集群描述了对开源 ASR 模型基准的更新,包括添加私有数据集以提高评估的稳健性。[lever_c_demoted from research: ic=1 ai=1.0]

在 Hugging Face Blog 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。 我们如何撰写摘要 →

Hugging Face 增加私有数据集到 ASR 排行榜,以防止刷榜

报道来源 [1]

  1. Hugging Face Blog TIER_1 English(EN) ·

    Adding Benchmaxxer Repellant to the Open ASR Leaderboard