मंगोलियन स्पीच-टू-टेक्स्ट लीडरबोर्ड
Common Voice 20 (MN)
या संग्रहावर मोजलेल्या प्रत्येक प्रणालीची कामगिरी: 54 नमुने, एकाच ऑडिओवर 26 प्रणालींची तुलना.
| # | प्रदाता | WER ↑ | CER | वेग | नमुने | ओपन सोर्स | |
|---|---|---|---|---|---|---|---|
| 1 | Moonshine MNआच्छादन | 2.7% | 1.8% | 7.33× | 54/54 | ✓ | तपशील › |
| 2 | Speechmatics | 7.7% | 2.7% | 0.47× | 54/54 | ✗ | तपशील › |
| 3 | Chimege | 9.4% | 3.7% | 1.11× | 54/54 | ✗ | तपशील › |
| 4 | Azure Speech | 12.7% | 4.9% | 0.39× | 54/54 | ✗ | तपशील › |
| 5 | Duudlaga Flowआमचे | 16.6% | 9.1% | 1.33× | 54/54 | ✗ | तपशील › |
| 6 | Whisper large-v2 MN | 16.7% | 5.1% | 0.51× | 54/54 | ✓ | तपशील › |
| 7 | Whisper turbo MNआच्छादन | 19.1% | 6.8% | 1.99× | 54/54 | ✓ | तपशील › |
| 8 | Google STT | 21.3% | 8.7% | 1.44× | 54/54 | ✗ | तपशील › |
| 9 | SeamlessM4T v2 | 21.7% | 7.9% | 0.14× | 54/54 | ✓ | तपशील › |
| 10 | ElevenLabs Scribe v2 | 29.4% | 11.4% | 1.41× | 54/54 | ✗ | तपशील › |
| 11 | Gemma 4 | 30.8% | 15.3% | 0.84× | 54/54 | ✓ | तपशील › |
| 12 | ElevenLabs Scribe v1 | 31.3% | 13.1% | 2.41× | 54/54 | ✗ | तपशील › |
| 13 | wav2vec2 XLSR-53 MNआच्छादन | 31.7% | 9.6% | 37.72× | 54/54 | ✓ | तपशील › |
| 14 | Whisper medium MNआच्छादन | 32.3% | 10.5% | 2.33× | 54/54 | ✓ | तपशील › |
| 15 | OmniASR LLM-1B | 37.2% | 18% | 0.29× | 54/54 | ✓ | तपशील › |
| 16 | Whisper large-v3 MNआच्छादन | 41.3% | 15.8% | 1.34× | 54/54 | ✓ | तपशील › |
| 17 | MMS-1B-all | 45.2% | 12.2% | 17.98× | 54/54 | ✓ | तपशील › |
| 18 | Dolphin small | 46.3% | 15.6% | 1.41× | 54/54 | ✓ | तपशील › |
| 19 | OmniASR CTC-1B | 51.4% | 14.5% | 0.79× | 54/54 | ✓ | तपशील › |
| 20 | GPT-4o Transcribe | 65.9% | 36.4% | 2.01× | 54/54 | ✗ | तपशील › |
| 21 | Whisper large-v3 | 94% | 41% | 1.13× | 54/54 | ✓ | तपशील › |
| 22 | Gladia | 96.9% | 42.6% | 0.6× | 54/54 | ✗ | तपशील › |
| 23 | Whisper large-v3-turbo | 101% | 58.1% | 0.55× | 54/54 | ✓ | तपशील › |
| 24 | VibeVoice ASR | 103.8% | 62.2% | 0.57× | 52/54 | ✓ | तपशील › |
| 25 | Qwen3-ASR-Flash | 104.5% | 90.4% | 2.71× | 54/54 | ✗ | तपशील › |
| 26 | OpenAI Whisper | 111.6% | 69.7% | 1.96× | 54/54 | ✗ | तपशील › |
मुख्य क्रमवारीसारखेच गुणांकन (विरामचिन्हे काढून, लहान अक्षरांत). क्रम लावण्यासाठी स्तंभावर क्लिक करा; „तपशील“ प्रत्येक नमुन्याचे संपूर्ण विश्लेषण उघडते.
नमुना निहाय निकाल
ट्रान्सक्रिप्ट शेजारी ठेवून तुलना करा: एकाच वाक्यासाठी निवडलेल्या प्रत्येक प्रणालीचे आउटपुट, चुका लाल रंगात. चिप्सने प्रणाली जोडा किंवा काढा; तक्ता आडवा सरकतो.
Moonshine MNSpeechmaticsChimege
| # | अपेक्षित (ग्राउंड ट्रुथ) | Moonshine MN निकाल(2.7%) | Speechmatics निकाल(7.7%) | Chimege निकाल(9.4%) |
|---|---|---|---|---|
| 1 | Хаанаас хаа хүрэх хар шувуу вэ? | хаанаас хаа хүрэх хар шувуу вэ WER 0.0% | Хаанаас хаа хүрэх хар шувуу вэ? WER 0.0% | Хаанаас хаа хүрэх хар шувуу вэ? WER 0.0% |
| 2 | Чамайг ч үе үе санах л юм даа. | чамайг ч үе үе санах л юм даа WER 0.0% | Чамайг үе үе санах л юм даа. WER 12.5% | Чамайг үе үе санах л юм даа. WER 12.5% |
| 3 | Ах нь өөрийгөө аргалаад байж дөнгөнө. | ах нь өөрийгөө аргалаад байж дөнө WER 16.7% | Ах нь өөрийгөө аргалаад байж дөнгөнө. WER 0.0% | Ах нь өөрийгөө аргалаад байж дөнгөнө. WER 0.0% |
| 4 | Албан бичгээр нэхэмжлээд олдоогүй энэхүү цолд хүрэх амаргүй замыг Хунтайж эхлүүлсэн. | албан бичгээр нэхэмжлээд олдоогүй энэхүү цолд хүрэх амаргүй замыг хунтайж эхлүүлсэн WER 0.0% | Албан бичгээр нэхэмжлээд олдоогүй. Энэхүү цолд хүрэх амаргүй замыг хунтайж эхлүүлсэн. WER 0.0% | Албан бичгээр нэхэмжлээд олдоогүй энэхүү талд хүрэх амаргүй замыг хунж эхэлүүлсэн. WER 27.3% |
| 5 | Балдан нь малч, ажилч, бас хичээл дугуйланд идэвхтэй. | балдан нь малч ажилч бас хичээл дугуйланд идэвхтэй WER 0.0% | Балдан нь малч ажиллаж, бас хичээл дугуйланд идэвхтэй. WER 12.5% | Балдан нь мал ч ажиллаж бас хичээл дугуйланд идэвхтэй. WER 37.5% |
| 6 | Намайг Геркулес гэж нэрлэдэг нь дэмий хэрэг биш. | намайг геркулес гэж нэрлэдэг нь дэмий хэрэг биш WER 0.0% | Намайг Геркулес гэж нэрлэдэг нь дэмий хэрэг биш. WER 0.0% | Намайг Геркулес гэж нэрлэдэг нь дэмий хэрэг биш. WER 0.0% |
| 7 | Бид хийсэн ажил, дэвшүүлсэн саналуудаа олон улсын байгууллагуудад илгээгээд явж байгаа. | бид хийсэн ажил дэвшүүлсэн саналуудаа олон улсын байгууллагуудад илгээгээд явж байгаа WER 0.0% | Бид хийсэн ажил дэвшүүлсэн саналуудаа олон улсын байгууллагуудад илгээгээд явж байгаа. WER 0.0% | Бид хийсэн ажилд дэвшүүлсэн саналуудаа олон улсын байгууллагуудад илгээгээд явж байгаа. WER 9.1% |
| 8 | Дахин нэг мин дэлбэрч дараа нь гурван мин зэрэг дэлбэрлээ. | дахин нэг мин дэлбэрч дараа нь гурван мин зэрэг дэлгэрүүллээ WER 10.0% | Дахин нийгмийн дэлбэрч, дараа Гурван мин зэрэг дэлбэрлээ. WER 30.0% | Дахин нэг мин дэлбэрч дараа 3 минжээр дэлбэрлээ. WER 40.0% |
| 9 | Шунал нь барагддаггүй монгол ноёдын аманд манж нар бас нэгэн чулуу зохиогоод зуулгачихсан. | шунал нь барагддаггүй монгол ноёдын аманд манж нар бас нэгэн чулуу зохиогоод зуулгачихсан WER 0.0% | Шунал барагддаггүй Монгол ноёдын аманд манж нар бас нэг чулуу зохиоход суулгачихсан. WER 30.8% | Шунал барагддаггүй. Монгол, ноёдын Ананд манж нар бас нэг чулууг цоход суулгачихсан. WER 46.2% |
| 10 | Гэхдээ хэл нь харьцангуй хязгаарлагдмал нөхцөлд үүргээ биелүүлж чаддаг. | гэхдээ хэл нь харьцангуй хязгаарлагдмал нөхцөлд үүргээ биелүүлж чаддаг WER 0.0% | Гэхдээ эхлэх нь харьцангуй хязгаарлагдмал нөхцөлд үүргээ биелүүлж чаддаг. WER 11.1% | Гэхдээ хэлэх нь харьцангуй хязгаарлагдмал нөхцөлд үүргээ биелүүлж чаддаг. WER 11.1% |
पृष्ठ 1 / 6