English(EN) I benchmarked whether ASR captures a dictated phone number exactly, in German and French. Whisper: 34% exact. Same text written down: 91% [P]

新的基准测试显示，像 Whisper 这样的 ASR 系统在精确数据捕获方面存在困难

作者 PulseAugur 编辑部 · [1 个来源] · 2026-10-15 09:14

一项新的基准测试 VoxEntity-EU 被开发出来，用于评估自动语音识别（ASR）系统在捕获德语和法语中的电话号码和电子邮件等特定实体时的准确性。该基准测试显示，Whisper large-v3-turbo 在这些关键数据点的准确率仅为 34%，而 Voxtral Mini 3B 的表现相似，为 37%。作为对比，直接转录相同的文本准确率高达 91%，这凸显了 ASR 在精确信息提取方面，尤其是在模拟电话线路上的性能差距。 AI

影响 ASR 系统需要在可靠提取电话号码和电子邮件等关键数据方面进行显著改进，这将影响下游应用。

排序理由该条目描述了一个新的基准测试及其评估 ASR 系统的结果。[lever_c_demoted from research: ic=1 ai=1.0]

在 r/MachineLearning 阅读 →

AI 生成摘要 · Google Gemini · 来自 1 个来源。我们如何撰写摘要 →

新的基准测试显示，像 Whisper 这样的 ASR 系统在精确数据捕获方面存在困难

本文如何被排名

Signal score: 9 / 100; Composite score across the factors below. Higher = stronger signal that this story matters right now.
Newsworthiness bucket: Tool; 该条目描述了一个新的基准测试及其评估 ASR 系统的结果。[lever_c_demoted from research: ic=1 ai=1.0]
Source corroboration: Single-source cluster; Only one publisher covered this so far. Single-source stories can still rank when the publisher is high-authority, but they lack cross-source corroboration.
Topics: paper, other; Editorial topic classification. Feeds into how the story surfaces on /topic/<slug> hub pages and into the per-entity coverage mix.
AI-industry relevance: High; Clearly on-topic for AI-industry coverage.
Story freshness: Breaking (< 6h); Fresh story with cross-source coverage still developing. Ranking may shift as more sources report.

完整方法见我们的编辑标准。

报道来源 [1]

r/MachineLearning TIER_1 English(EN) · /u/Gjuesev · 2026-10-15 09:14

我测试了ASR能否准确转录口述的电话号码，分别用德语和法语。Whisper：34%准确。同一文本写下来：91% [P]

<div class="md"><p>A transcript can read perfectly and still carry the wrong phone number. The caller says +33 6 05 36 23 71, Whisper writes +33 6 75 36 23 71 on a simulated phone line, the sentence looks fine, and every form downstream now stores a wrong number. W…

本文如何被排名

报道来源 [1]

我测试了ASR能否准确转录口述的电话号码，分别用德语和法语。Whisper：34%准确。同一文本写下来：91% [P]

相关实体

相关话题