← All examples

ModelEthio-ASR Amharic (600M)4Ethio-ASR Multi (300M)10Ethio-ASR Multi (600M)9Ethio-ASR Multi (94M)8Meta MMS-1B12OmniASR-CTC (1B)2OmniASR-CTC (300M)4OmniASR-CTC (3B)1OmniASR-LLM (1B)1OmniASR-LLM (300M)2OmniASR-LLM (3B)1OpenAI Whisper-small217
Audio qualityClean Studio12Ambient Room Noise19Harsh Environment217Distant / Low-Volume Mic16Wideband Phone (VoLTE)9Randomized Phone Channel19Narrowband 2G + Packet Loss12

What did the model get wrong?

OpenAI Whisper-small Harsh Environment   Example 9 of 20  ·  speaker: Female

🎧 Listen — Harsh Environment
Very heavy background noise — much harder than typical audio.
✅ What was actually said
ቁጥሩ ዜሮ ዘጠኝ አንድ ሁለት አምስት ስድስት ሰባት ስምንት ዘጠኝ ዜሮ ነው
🤖 What this model heard
ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ አምስት ዜሮ ዜሮ አምስት ዜሮ አምስት ዜሮ ዜሮ ዜሮ አምስት ዜሮ አምስት ዜሮ ዜሮ ዜሮ አምስት ዜሮ ዜሮ ዜሮ አምስት ዜሮ ዜሮ ዜሮ አምስት ዜሮ ዜሮ ዜሮ ዜሮ ዜሮ ዜሮ አምስት ዜሮ ዜሮ ዜሮ ዜሮ
Correct
Wrong (different word)
Missed (skipped)
Extra (added)
3
Correct
9
Wrong
0
Missed
208
Extra
25%
Words right
Out of 12 spoken words, this model got 3 right (25%). Errors: 9 words wrong; 208 extra.

Try switching Audio quality — see the same model degrade as the audio gets noisier.