Cockatoo V4-Pro のエラー率が最も低い言語(同率を含む)
V4-Pro の登場:過去最高精度の文字起こし
公開ベンチマークと社内の実環境録音で、36 言語における Cockatoo V4-Pro を比較できます。
Cockatoo V4-Pro のエラー率が最も低い言語(同率を含む)
アクセントや雑音を含む人手ラベル付きの録音で、厳しい実環境条件における堅牢性を検証します。単語誤り率が 5% 未満の言語
ブルガリア語, カタルーニャ語, チェコ語, デンマーク語, 英語, ドイツ語, インドネシア語, ノルウェー語, スロバキア語, スペイン語, トルコ語, ウクライナ語人々が実際に話す話し方に合わせて設計
Cockatoo V4-Pro の登場です。当社で最も先進的な文字起こし体験は、より高い精度、明確な話者ラベル、洗練されたフォーマットを兼ね備え、文字起こしの修正に費やす時間を減らし、その活用に多くの時間を充てられるよう支援します。
私たちはあえて Cockatoo V4-Pro を 36 言語に絞り込み、90 言語や 100 言語の対応をうたうサービスよりも範囲を狭くしています。私たちが優先しているのは、各言語で品質の水準を引き上げることです。
朗読音声だけでは測らない理由
学術ベンチマークは有用ですが、必ずしも人々が文字起こしを必要とする録音の実態を反映しているわけではありません。たとえば FLEURS は、人が準備された文章を声に出して読む音声に焦点を当てています。一貫した比較には役立ちますが、朗読音声では自発的な会話の複雑さをとらえきれません。そうした録音での低い単語誤り率は、インタビューや会議、不完全な日常音声での性能について、過度に楽観的な印象を与える可能性があります。 FLEURS データセットのドキュメント
日常の音声と難しい条件でのテスト
さらに踏み込むため、私たちはさまざまな地域の実際の録音を人手で文字起こししたデータを用いて、社内の Internal Realworld Benchmark を構築しました。このデータセットでは、最も難しい条件やアクセント、地域にわたる性能を測定することを目指し、学術データセットの分布には表れない難しい失敗事例もとらえながら、日常的な性能を評価するベンチマークとしています。
私たちは、見栄えのよい平均値だけでむらのある性能を覆い隠すことなく、最も弱い結果も含めて、言語ごと、録音ごとに結果を検証しています。目的は、文字起こしがどこで崩れるのかを把握し、最も重要な場面で体験を改善することです。
Cockatoo V4-Proの36言語への重点
アラビア語、ブルガリア語、カタルーニャ語、中国語、クロアチア語、チェコ語、デンマーク語、オランダ語、英語、フィリピノ語/タガログ語、フィンランド語、フランス語、ドイツ語、ギリシャ語、ヘブライ語、インドネシア語、イタリア語、日本語、クメール語、韓国語、リトアニア語、マレー語、ノルウェー語、ペルシャ語/ファルシ語、ポーランド語、ポルトガル語、ルーマニア語、ロシア語、スロバキア語、スロベニア語、スペイン語、スワヒリ語、タイ語、トルコ語、ウクライナ語、ベトナム語.
より良い文字起こしは、実際にお手元にある録音でその実力を示すべきです。それが、Cockatoo V4-Proが満たすべき基準です。
Cockatoo V4-Pro との比較
言語別に集計したエラー率を、同じ音声クリップで比較しています。平均値は各言語を均等に重み付けしています。
FLEURS
公開ベンチマーク、朗読音声
実際の録音
通話、会議、インタビュー、講義
Scribe V2
ElevenLabs
Cockatoo V4-Pro を上回る
15.2% vs17.8% · WERブルガリア語 · FLEURS
Cockatoo V4-Pro を上回る
2.9% vs4.0% · WERカタルーニャ語 · FLEURS
同等
4.0% vs4.0% · WER中国語 · FLEURS
Cockatoo V4-Pro を上回る
2.8% vs4.2% · CERクロアチア語 · FLEURS
Cockatoo V4-Pro を上回る
5.4% vs6.5% · WERチェコ語 · FLEURS
Cockatoo V4-Pro を上回る
4.6% vs5.1% · WERデンマーク語 · FLEURS
Cockatoo V4-Pro を下回る
4.3% vs3.9% · WERオランダ語 · FLEURS
Cockatoo V4-Pro を上回る
5.6% vs6.0% · WER英語 · FLEURS
Cockatoo V4-Pro を上回る
3.9% vs4.7% · WERフィリピノ語(タガログ語) · FLEURS
Cockatoo V4-Pro を上回る
7.8% vs9.8% · WERフィンランド語 · FLEURS
Cockatoo V4-Pro を下回る
9.2% vs7.8% · WERフランス語 · FLEURS
Cockatoo V4-Pro を上回る
7.8% vs8.2% · WERドイツ語 · FLEURS
Cockatoo V4-Pro を上回る
2.4% vs3.4% · WERギリシャ語 · FLEURS
Cockatoo V4-Pro を下回る
7.4% vs6.6% · WERヘブライ語 · FLEURS
Cockatoo V4-Pro を上回る
6.0% vs7.7% · WERインドネシア語 · FLEURS
同等
4.9% vs4.9% · WERイタリア語 · FLEURS
Cockatoo V4-Pro を上回る
6.2% vs6.5% · WER日本語 · FLEURS
Cockatoo V4-Pro を上回る
6.5% vs6.7% · CERクメール語 · FLEURS
Cockatoo V4-Pro を上回る
19.7% vs20.1% · CER韓国語 · FLEURS
Cockatoo V4-Pro を上回る
7.6% vs9.0% · WERリトアニア語 · FLEURS
Cockatoo V4-Pro を上回る
5.8% vs6.4% · WERマレー語 · FLEURS
同等
6.6% vs6.6% · WERノルウェー語 · FLEURS
Cockatoo V4-Pro を下回る
4.9% vs4.5% · WERペルシア語(ファルシ語) · FLEURS
Cockatoo V4-Pro を下回る
9.6% vs8.7% · WERポーランド語 · FLEURS
Cockatoo V4-Pro を上回る
5.7% vs6.7% · WERポルトガル語 · FLEURS
同等
11.1% vs11.1% · WERルーマニア語 · FLEURS
同等
8.0% vs8.0% · WERロシア語 · FLEURS
Cockatoo V4-Pro を上回る
7.8% vs8.9% · WERスロバキア語 · FLEURS
同等
4.7% vs4.7% · WERスロベニア語 · FLEURS
同等
5.4% vs5.4% · WERスペイン語 · FLEURS
同等
1.0% vs1.0% · WERスワヒリ語 · FLEURS
Cockatoo V4-Pro を上回る
14.9% vs17.9% · WERタイ語 · FLEURS
Cockatoo V4-Pro を下回る
6.9% vs6.5% · CERトルコ語 · FLEURS
Cockatoo V4-Pro を下回る
2.6% vs1.3% · WERウクライナ語 · FLEURS
同等
2.8% vs2.8% · WERベトナム語 · FLEURS
Cockatoo V4-Pro を下回る
6.9% vs6.3% · WER
36 言語中 19 で上回り、9 が同等、8 が下回る
Cockatoo V4-Pro を上回る
36.3% vs43.9% · WERブルガリア語 · 実環境
Cockatoo V4-Pro を上回る
22.8% vs29.4% · WERカタルーニャ語 · 実環境
Cockatoo V4-Pro を上回る
12.6% vs13.9% · WER中国語 · 実環境
Cockatoo V4-Pro を下回る
31.9% vs31.9% · CERクロアチア語 · 実環境
Cockatoo V4-Pro を上回る
19.1% vs21.2% · WERチェコ語 · 実環境
Cockatoo V4-Pro を上回る
14.5% vs15.0% · WERデンマーク語 · 実環境
Cockatoo V4-Pro を上回る
16.8% vs19.7% · WERオランダ語 · 実環境
Cockatoo V4-Pro を上回る
13.9% vs16.5% · WER英語 · 実環境
Cockatoo V4-Pro を下回る
10.6% vs10.6% · WERフィリピノ語(タガログ語) · 実環境
Cockatoo V4-Pro を上回る
21.6% vs23.7% · WERフィンランド語 · 実環境
Cockatoo V4-Pro を上回る
24.9% vs28.0% · WERフランス語 · 実環境
Cockatoo V4-Pro を下回る
21.0% vs21.0% · WERドイツ語 · 実環境
Cockatoo V4-Pro を下回る
11.1% vs10.9% · WERギリシャ語 · 実環境
Cockatoo V4-Pro を上回る
16.4% vs18.8% · WERヘブライ語 · 実環境
Cockatoo V4-Pro を上回る
22.0% vs22.8% · WERインドネシア語 · 実環境
Cockatoo V4-Pro を下回る
27.7% vs27.6% · WERイタリア語 · 実環境
Cockatoo V4-Pro を上回る
17.4% vs20.3% · WER日本語 · 実環境
Cockatoo V4-Pro を上回る
19.4% vs20.0% · CERクメール語 · 実環境
Cockatoo V4-Pro を下回る
22.6% vs22.5% · CER韓国語 · 実環境
Cockatoo V4-Pro を上回る
31.9% vs33.1% · WERリトアニア語 · 実環境
Cockatoo V4-Pro を上回る
11.0% vs11.7% · WERマレー語 · 実環境
Cockatoo V4-Pro を上回る
37.4% vs40.7% · WERノルウェー語 · 実環境
Cockatoo V4-Pro を上回る
28.7% vs30.6% · WERペルシア語(ファルシ語) · 実環境
Cockatoo V4-Pro を上回る
21.9% vs22.0% · WERポーランド語 · 実環境
Cockatoo V4-Pro を上回る
18.9% vs19.3% · WERポルトガル語 · 実環境
Cockatoo V4-Pro を下回る
14.8% vs13.4% · WERルーマニア語 · 実環境
Cockatoo V4-Pro を上回る
24.3% vs25.8% · WERロシア語 · 実環境
Cockatoo V4-Pro を下回る
22.3% vs22.2% · WERスロバキア語 · 実環境
Cockatoo V4-Pro を上回る
27.6% vs29.1% · WERスロベニア語 · 実環境
Cockatoo V4-Pro を上回る
25.2% vs27.3% · WERスペイン語 · 実環境
Cockatoo V4-Pro を上回る
14.5% vs14.6% · WERスワヒリ語 · 実環境
Cockatoo V4-Pro を上回る
42.6% vs47.5% · WERタイ語 · 実環境
Cockatoo V4-Pro を下回る
23.2% vs23.2% · CERトルコ語 · 実環境
Cockatoo V4-Pro を上回る
16.4% vs17.6% · WERウクライナ語 · 実環境
Cockatoo V4-Pro を下回る
16.1% vs15.0% · WERベトナム語 · 実環境
Cockatoo V4-Pro を上回る
8.5% vs10.0% · WER
36 言語中 26 で上回り、0 が同等、10 が下回る
Universal-3.5 Pro
AssemblyAI
Cockatoo V4-Pro を上回る
15.2% vs22.5% · WERブルガリア語 · FLEURS
結果なし
— vs— · WERカタルーニャ語 · FLEURS
結果なし
— vs— · WER中国語 · FLEURS
Cockatoo V4-Pro を上回る
2.8% vs4.2% · CERクロアチア語 · FLEURS
結果なし
— vs— · WERチェコ語 · FLEURS
結果なし
— vs— · WERデンマーク語 · FLEURS
Cockatoo V4-Pro を上回る
4.3% vs12.1% · WERオランダ語 · FLEURS
Cockatoo V4-Pro を上回る
5.6% vs9.1% · WER英語 · FLEURS
Cockatoo V4-Pro を下回る
3.9% vs3.1% · WERフィリピノ語(タガログ語) · FLEURS
結果なし
— vs— · WERフィンランド語 · FLEURS
Cockatoo V4-Pro を上回る
9.2% vs9.9% · WERフランス語 · FLEURS
Cockatoo V4-Pro を下回る
7.8% vs6.2% · WERドイツ語 · FLEURS
Cockatoo V4-Pro を上回る
2.4% vs3.4% · WERギリシャ語 · FLEURS
結果なし
— vs— · WERヘブライ語 · FLEURS
Cockatoo V4-Pro を上回る
6.0% vs208.9% · WERインドネシア語 · FLEURS
結果なし
— vs— · WERイタリア語 · FLEURS
Cockatoo V4-Pro を上回る
6.2% vs6.5% · WER日本語 · FLEURS
Cockatoo V4-Pro を上回る
6.5% vs8.1% · CERクメール語 · FLEURS
結果なし
— vs— · CER韓国語 · FLEURS
結果なし
— vs— · WERリトアニア語 · FLEURS
結果なし
— vs— · WERマレー語 · FLEURS
結果なし
— vs— · WERノルウェー語 · FLEURS
Cockatoo V4-Pro を上回る
4.9% vs8.2% · WERペルシア語(ファルシ語) · FLEURS
結果なし
— vs— · WERポーランド語 · FLEURS
結果なし
— vs— · WERポルトガル語 · FLEURS
Cockatoo V4-Pro を上回る
11.1% vs13.2% · WERルーマニア語 · FLEURS
結果なし
— vs— · WERロシア語 · FLEURS
結果なし
— vs— · WERスロバキア語 · FLEURS
結果なし
— vs— · WERスロベニア語 · FLEURS
結果なし
— vs— · WERスペイン語 · FLEURS
Cockatoo V4-Pro を下回る
1.0% vs0.7% · WERスワヒリ語 · FLEURS
結果なし
— vs— · WERタイ語 · FLEURS
結果なし
— vs— · CERトルコ語 · FLEURS
Cockatoo V4-Pro を上回る
2.6% vs5.2% · WERウクライナ語 · FLEURS
結果なし
— vs— · WERベトナム語 · FLEURS
Cockatoo V4-Pro を上回る
6.9% vs10.7% · WER
16 言語中 13 で上回り、0 が同等、3 が下回る
Cockatoo V4-Pro を上回る
36.3% vs63.4% · WERブルガリア語 · 実環境
結果なし
— vs— · WERカタルーニャ語 · 実環境
結果なし
— vs— · WER中国語 · 実環境
Cockatoo V4-Pro を上回る
31.9% vs94.8% · CERクロアチア語 · 実環境
結果なし
— vs— · WERチェコ語 · 実環境
結果なし
— vs— · WERデンマーク語 · 実環境
Cockatoo V4-Pro を上回る
16.8% vs27.7% · WERオランダ語 · 実環境
Cockatoo V4-Pro を上回る
13.9% vs20.5% · WER英語 · 実環境
Cockatoo V4-Pro を上回る
10.6% vs15.1% · WERフィリピノ語(タガログ語) · 実環境
結果なし
— vs— · WERフィンランド語 · 実環境
Cockatoo V4-Pro を上回る
24.9% vs44.8% · WERフランス語 · 実環境
Cockatoo V4-Pro を上回る
21.0% vs36.5% · WERドイツ語 · 実環境
Cockatoo V4-Pro を上回る
11.1% vs17.3% · WERギリシャ語 · 実環境
結果なし
— vs— · WERヘブライ語 · 実環境
Cockatoo V4-Pro を上回る
22.0% vs150.9% · WERインドネシア語 · 実環境
結果なし
— vs— · WERイタリア語 · 実環境
Cockatoo V4-Pro を上回る
17.4% vs26.2% · WER日本語 · 実環境
Cockatoo V4-Pro を上回る
19.4% vs22.0% · CERクメール語 · 実環境
結果なし
— vs— · CER韓国語 · 実環境
結果なし
— vs— · WERリトアニア語 · 実環境
結果なし
— vs— · WERマレー語 · 実環境
結果なし
— vs— · WERノルウェー語 · 実環境
Cockatoo V4-Pro を上回る
28.7% vs41.7% · WERペルシア語(ファルシ語) · 実環境
結果なし
— vs— · WERポーランド語 · 実環境
結果なし
— vs— · WERポルトガル語 · 実環境
Cockatoo V4-Pro を上回る
14.8% vs19.2% · WERルーマニア語 · 実環境
結果なし
— vs— · WERロシア語 · 実環境
結果なし
— vs— · WERスロバキア語 · 実環境
結果なし
— vs— · WERスロベニア語 · 実環境
結果なし
— vs— · WERスペイン語 · 実環境
Cockatoo V4-Pro を上回る
14.5% vs19.7% · WERスワヒリ語 · 実環境
結果なし
— vs— · WERタイ語 · 実環境
結果なし
— vs— · CERトルコ語 · 実環境
Cockatoo V4-Pro を上回る
16.4% vs24.6% · WERウクライナ語 · 実環境
結果なし
— vs— · WERベトナム語 · 実環境
Cockatoo V4-Pro を上回る
8.5% vs15.4% · WER
16 言語中 16 で上回り、0 が同等、0 が下回る
Nova-3
Deepgram
Cockatoo V4-Pro を上回る
15.2% vs34.0% · WERブルガリア語 · FLEURS
Cockatoo V4-Pro を上回る
2.9% vs11.4% · WERカタルーニャ語 · FLEURS
Cockatoo V4-Pro を上回る
4.0% vs9.1% · WER中国語 · FLEURS
Cockatoo V4-Pro を上回る
2.8% vs3.4% · CERクロアチア語 · FLEURS
Cockatoo V4-Pro を上回る
5.4% vs13.0% · WERチェコ語 · FLEURS
Cockatoo V4-Pro を上回る
4.6% vs13.3% · WERデンマーク語 · FLEURS
Cockatoo V4-Pro を上回る
4.3% vs16.8% · WERオランダ語 · FLEURS
Cockatoo V4-Pro を上回る
5.6% vs12.9% · WER英語 · FLEURS
Cockatoo V4-Pro を上回る
3.9% vs6.3% · WERフィリピノ語(タガログ語) · FLEURS
Cockatoo V4-Pro を上回る
7.8% vs17.9% · WERフィンランド語 · FLEURS
Cockatoo V4-Pro を上回る
9.2% vs15.6% · WERフランス語 · FLEURS
Cockatoo V4-Pro を上回る
7.8% vs13.2% · WERドイツ語 · FLEURS
Cockatoo V4-Pro を上回る
2.4% vs5.8% · WERギリシャ語 · FLEURS
Cockatoo V4-Pro を上回る
7.4% vs18.0% · WERヘブライ語 · FLEURS
Cockatoo V4-Pro を上回る
6.0% vs15.5% · WERインドネシア語 · FLEURS
Cockatoo V4-Pro を上回る
4.9% vs11.0% · WERイタリア語 · FLEURS
Cockatoo V4-Pro を上回る
6.2% vs8.5% · WER日本語 · FLEURS
Cockatoo V4-Pro を上回る
6.5% vs15.2% · CERクメール語 · FLEURS
結果なし
— vs— · CER韓国語 · FLEURS
Cockatoo V4-Pro を上回る
7.6% vs20.0% · WERリトアニア語 · FLEURS
Cockatoo V4-Pro を上回る
5.8% vs19.2% · WERマレー語 · FLEURS
Cockatoo V4-Pro を上回る
6.6% vs12.7% · WERノルウェー語 · FLEURS
Cockatoo V4-Pro を上回る
4.9% vs11.9% · WERペルシア語(ファルシ語) · FLEURS
Cockatoo V4-Pro を上回る
9.6% vs15.4% · WERポーランド語 · FLEURS
Cockatoo V4-Pro を上回る
5.7% vs13.4% · WERポルトガル語 · FLEURS
Cockatoo V4-Pro を上回る
11.1% vs13.8% · WERルーマニア語 · FLEURS
Cockatoo V4-Pro を上回る
8.0% vs18.6% · WERロシア語 · FLEURS
Cockatoo V4-Pro を上回る
7.8% vs16.8% · WERスロバキア語 · FLEURS
Cockatoo V4-Pro を上回る
4.7% vs11.8% · WERスロベニア語 · FLEURS
Cockatoo V4-Pro を上回る
5.4% vs16.3% · WERスペイン語 · FLEURS
Cockatoo V4-Pro を上回る
1.0% vs4.9% · WERスワヒリ語 · FLEURS
結果なし
— vs— · WERタイ語 · FLEURS
Cockatoo V4-Pro を上回る
6.9% vs12.9% · CERトルコ語 · FLEURS
Cockatoo V4-Pro を上回る
2.6% vs14.4% · WERウクライナ語 · FLEURS
Cockatoo V4-Pro を上回る
2.8% vs4.4% · WERベトナム語 · FLEURS
Cockatoo V4-Pro を上回る
6.9% vs9.1% · WER
34 言語中 34 で上回り、0 が同等、0 が下回る
Cockatoo V4-Pro を上回る
36.3% vs62.9% · WERブルガリア語 · 実環境
Cockatoo V4-Pro を上回る
22.8% vs34.4% · WERカタルーニャ語 · 実環境
Cockatoo V4-Pro を上回る
12.6% vs21.1% · WER中国語 · 実環境
Cockatoo V4-Pro を上回る
31.9% vs59.1% · CERクロアチア語 · 実環境
Cockatoo V4-Pro を上回る
19.1% vs39.2% · WERチェコ語 · 実環境
Cockatoo V4-Pro を上回る
14.5% vs28.5% · WERデンマーク語 · 実環境
Cockatoo V4-Pro を上回る
16.8% vs33.0% · WERオランダ語 · 実環境
Cockatoo V4-Pro を上回る
13.9% vs21.1% · WER英語 · 実環境
Cockatoo V4-Pro を上回る
10.6% vs19.6% · WERフィリピノ語(タガログ語) · 実環境
Cockatoo V4-Pro を上回る
21.6% vs43.2% · WERフィンランド語 · 実環境
Cockatoo V4-Pro を上回る
24.9% vs44.7% · WERフランス語 · 実環境
Cockatoo V4-Pro を上回る
21.0% vs58.8% · WERドイツ語 · 実環境
Cockatoo V4-Pro を上回る
11.1% vs42.7% · WERギリシャ語 · 実環境
Cockatoo V4-Pro を上回る
16.4% vs33.4% · WERヘブライ語 · 実環境
Cockatoo V4-Pro を上回る
22.0% vs27.4% · WERインドネシア語 · 実環境
Cockatoo V4-Pro を上回る
27.7% vs40.0% · WERイタリア語 · 実環境
Cockatoo V4-Pro を上回る
17.4% vs25.5% · WER日本語 · 実環境
Cockatoo V4-Pro を上回る
19.4% vs29.0% · CERクメール語 · 実環境
結果なし
— vs— · CER韓国語 · 実環境
Cockatoo V4-Pro を上回る
31.9% vs45.5% · WERリトアニア語 · 実環境
Cockatoo V4-Pro を上回る
11.0% vs26.0% · WERマレー語 · 実環境
Cockatoo V4-Pro を上回る
37.4% vs59.9% · WERノルウェー語 · 実環境
Cockatoo V4-Pro を下回る
28.7% vs28.0% · WERペルシア語(ファルシ語) · 実環境
Cockatoo V4-Pro を上回る
21.9% vs39.8% · WERポーランド語 · 実環境
Cockatoo V4-Pro を上回る
18.9% vs20.2% · WERポルトガル語 · 実環境
Cockatoo V4-Pro を上回る
14.8% vs21.0% · WERルーマニア語 · 実環境
Cockatoo V4-Pro を上回る
24.3% vs47.0% · WERロシア語 · 実環境
Cockatoo V4-Pro を上回る
22.3% vs26.3% · WERスロバキア語 · 実環境
Cockatoo V4-Pro を上回る
27.6% vs39.2% · WERスロベニア語 · 実環境
Cockatoo V4-Pro を上回る
25.2% vs33.2% · WERスペイン語 · 実環境
Cockatoo V4-Pro を上回る
14.5% vs21.6% · WERスワヒリ語 · 実環境
結果なし
— vs— · WERタイ語 · 実環境
Cockatoo V4-Pro を上回る
23.2% vs37.9% · CERトルコ語 · 実環境
Cockatoo V4-Pro を上回る
16.4% vs23.4% · WERウクライナ語 · 実環境
Cockatoo V4-Pro を上回る
16.1% vs38.7% · WERベトナム語 · 実環境
Cockatoo V4-Pro を上回る
8.5% vs26.5% · WER
34 言語中 33 で上回り、0 が同等、1 が下回る
Whisper Large V2
OpenAI
Cockatoo V4-Pro を上回る
15.2% vs27.2% · WERブルガリア語 · FLEURS
Cockatoo V4-Pro を上回る
2.9% vs14.9% · WERカタルーニャ語 · FLEURS
Cockatoo V4-Pro を上回る
4.0% vs7.7% · WER中国語 · FLEURS
Cockatoo V4-Pro を上回る
2.8% vs6.7% · CERクロアチア語 · FLEURS
Cockatoo V4-Pro を上回る
5.4% vs9.8% · WERチェコ語 · FLEURS
Cockatoo V4-Pro を上回る
4.6% vs17.9% · WERデンマーク語 · FLEURS
Cockatoo V4-Pro を上回る
4.3% vs17.6% · WERオランダ語 · FLEURS
Cockatoo V4-Pro を上回る
5.6% vs8.6% · WER英語 · FLEURS
Cockatoo V4-Pro を上回る
3.9% vs4.7% · WERフィリピノ語(タガログ語) · FLEURS
Cockatoo V4-Pro を上回る
7.8% vs16.6% · WERフィンランド語 · FLEURS
Cockatoo V4-Pro を上回る
9.2% vs14.2% · WERフランス語 · FLEURS
Cockatoo V4-Pro を上回る
7.8% vs11.5% · WERドイツ語 · FLEURS
Cockatoo V4-Pro を上回る
2.4% vs3.9% · WERギリシャ語 · FLEURS
Cockatoo V4-Pro を上回る
7.4% vs19.5% · WERヘブライ語 · FLEURS
Cockatoo V4-Pro を上回る
6.0% vs26.8% · WERインドネシア語 · FLEURS
Cockatoo V4-Pro を上回る
4.9% vs10.4% · WERイタリア語 · FLEURS
Cockatoo V4-Pro を上回る
6.2% vs7.5% · WER日本語 · FLEURS
Cockatoo V4-Pro を上回る
6.5% vs10.3% · CERクメール語 · FLEURS
Cockatoo V4-Pro を上回る
19.7% vs146.6% · CER韓国語 · FLEURS
Cockatoo V4-Pro を上回る
7.6% vs15.9% · WERリトアニア語 · FLEURS
Cockatoo V4-Pro を上回る
5.8% vs29.5% · WERマレー語 · FLEURS
Cockatoo V4-Pro を上回る
6.6% vs11.7% · WERノルウェー語 · FLEURS
Cockatoo V4-Pro を上回る
4.9% vs9.7% · WERペルシア語(ファルシ語) · FLEURS
Cockatoo V4-Pro を上回る
9.6% vs34.1% · WERポーランド語 · FLEURS
Cockatoo V4-Pro を上回る
5.7% vs7.7% · WERポルトガル語 · FLEURS
Cockatoo V4-Pro を上回る
11.1% vs11.6% · WERルーマニア語 · FLEURS
Cockatoo V4-Pro を上回る
8.0% vs18.1% · WERロシア語 · FLEURS
Cockatoo V4-Pro を上回る
7.8% vs8.4% · WERスロバキア語 · FLEURS
Cockatoo V4-Pro を上回る
4.7% vs17.2% · WERスロベニア語 · FLEURS
Cockatoo V4-Pro を上回る
5.4% vs22.1% · WERスペイン語 · FLEURS
Cockatoo V4-Pro を上回る
1.0% vs1.4% · WERスワヒリ語 · FLEURS
Cockatoo V4-Pro を上回る
14.9% vs46.7% · WERタイ語 · FLEURS
Cockatoo V4-Pro を上回る
6.9% vs13.5% · CERトルコ語 · FLEURS
Cockatoo V4-Pro を上回る
2.6% vs5.2% · WERウクライナ語 · FLEURS
Cockatoo V4-Pro を上回る
2.8% vs10.6% · WERベトナム語 · FLEURS
Cockatoo V4-Pro を上回る
6.9% vs17.9% · WER
36 言語中 36 で上回り、0 が同等、0 が下回る
Cockatoo V4-Pro を上回る
36.3% vs77.9% · WERブルガリア語 · 実環境
Cockatoo V4-Pro を上回る
21.3% vs58.0% · WERカタルーニャ語 · 実環境
Cockatoo V4-Pro を上回る
12.6% vs33.4% · WER中国語 · 実環境
Cockatoo V4-Pro を上回る
30.0% vs58.4% · CERクロアチア語 · 実環境
結果なし
— vs— · WERチェコ語 · 実環境
Cockatoo V4-Pro を上回る
14.5% vs47.0% · WERデンマーク語 · 実環境
結果なし
— vs— · WERオランダ語 · 実環境
Cockatoo V4-Pro を上回る
11.8% vs46.6% · WER英語 · 実環境
結果なし
— vs— · WERフィリピノ語(タガログ語) · 実環境
Cockatoo V4-Pro を上回る
16.1% vs81.6% · WERフィンランド語 · 実環境
結果なし
— vs— · WERフランス語 · 実環境
Cockatoo V4-Pro を上回る
11.1% vs49.1% · WERドイツ語 · 実環境
Cockatoo V4-Pro を上回る
11.1% vs40.4% · WERギリシャ語 · 実環境
Cockatoo V4-Pro を上回る
16.4% vs40.6% · WERヘブライ語 · 実環境
Cockatoo V4-Pro を上回る
20.2% vs28.6% · WERインドネシア語 · 実環境
Cockatoo V4-Pro を上回る
24.3% vs55.1% · WERイタリア語 · 実環境
Cockatoo V4-Pro を上回る
17.4% vs50.4% · WER日本語 · 実環境
Cockatoo V4-Pro を上回る
8.5% vs52.5% · CERクメール語 · 実環境
Cockatoo V4-Pro を上回る
21.4% vs109.0% · CER韓国語 · 実環境
Cockatoo V4-Pro を上回る
24.1% vs64.7% · WERリトアニア語 · 実環境
Cockatoo V4-Pro を上回る
11.0% vs51.1% · WERマレー語 · 実環境
Cockatoo V4-Pro を上回る
36.5% vs78.3% · WERノルウェー語 · 実環境
Cockatoo V4-Pro を上回る
28.7% vs44.3% · WERペルシア語(ファルシ語) · 実環境
Cockatoo V4-Pro を上回る
21.9% vs76.0% · WERポーランド語 · 実環境
Cockatoo V4-Pro を上回る
18.9% vs31.1% · WERポルトガル語 · 実環境
Cockatoo V4-Pro を上回る
14.8% vs37.1% · WERルーマニア語 · 実環境
Cockatoo V4-Pro を上回る
18.2% vs42.7% · WERロシア語 · 実環境
Cockatoo V4-Pro を上回る
20.6% vs38.2% · WERスロバキア語 · 実環境
Cockatoo V4-Pro を上回る
9.2% vs31.0% · WERスロベニア語 · 実環境
Cockatoo V4-Pro を上回る
25.2% vs50.1% · WERスペイン語 · 実環境
Cockatoo V4-Pro を上回る
14.5% vs43.9% · WERスワヒリ語 · 実環境
Cockatoo V4-Pro を上回る
30.8% vs136.9% · WERタイ語 · 実環境
Cockatoo V4-Pro を上回る
16.2% vs63.1% · CERトルコ語 · 実環境
Cockatoo V4-Pro を上回る
16.4% vs50.0% · WERウクライナ語 · 実環境
Cockatoo V4-Pro を上回る
16.1% vs49.4% · WERベトナム語 · 実環境
結果なし
— vs— · WER
31 言語中 31 で上回り、0 が同等、0 が下回る
各マスが1言語に対応(A〜Z)
36言語のエラー率
統合単語誤り率(WER)。*付きの言語は文字誤り率(CER)。数値が低いほど優れています。
Cockatoo V4-Pro15.2%
Scribe V217.8%
AssemblyAI22.5%
Deepgram34.0%
Whisper27.2%
Cockatoo V4-Pro36.3%
Scribe V243.9%
AssemblyAI63.4%
Deepgram62.9%
Whisper77.9%
Cockatoo V4-Pro2.9%
Scribe V24.0%
AssemblyAI—
Deepgram11.4%
Whisper14.9%
Cockatoo V4-Pro22.8%
Scribe V229.4%
AssemblyAI—
Deepgram34.4%
Whisper58.0%
Cockatoo V4-Pro4.0%
Scribe V24.0%
AssemblyAI—
Deepgram9.1%
Whisper7.7%
Cockatoo V4-Pro12.6%
Scribe V213.9%
AssemblyAI—
Deepgram21.1%
Whisper33.4%
Cockatoo V4-Pro2.8%
Scribe V24.2%
AssemblyAI4.2%
Deepgram3.4%
Whisper6.7%
Cockatoo V4-Pro31.9%
Scribe V231.9%
AssemblyAI94.8%
Deepgram59.1%
Whisper58.4%
Cockatoo V4-Pro5.4%
Scribe V26.5%
AssemblyAI—
Deepgram13.0%
Whisper9.8%
Cockatoo V4-Pro19.1%
Scribe V221.2%
AssemblyAI—
Deepgram39.2%
Whisper—
Cockatoo V4-Pro4.6%
Scribe V25.1%
AssemblyAI—
Deepgram13.3%
Whisper17.9%
Cockatoo V4-Pro14.5%
Scribe V215.0%
AssemblyAI—
Deepgram28.5%
Whisper47.0%
Cockatoo V4-Pro4.3%
Scribe V23.9%
AssemblyAI12.1%
Deepgram16.8%
Whisper17.6%
Cockatoo V4-Pro16.8%
Scribe V219.7%
AssemblyAI27.7%
Deepgram33.0%
Whisper—
Cockatoo V4-Pro5.6%
Scribe V26.0%
AssemblyAI9.1%
Deepgram12.9%
Whisper8.6%
Cockatoo V4-Pro13.9%
Scribe V216.5%
AssemblyAI20.5%
Deepgram21.1%
Whisper46.6%
Cockatoo V4-Pro3.9%
Scribe V24.7%
AssemblyAI3.1%
Deepgram6.3%
Whisper4.7%
このグループのデータセットはありません
このグループのデータセットはありません
Cockatoo V4-Pro10.4%
Scribe V210.3%
AssemblyAI16.5%
Deepgram22.0%
Whisper—
このグループのデータセットはありません
Cockatoo V4-Pro10.9%
Scribe V210.9%
AssemblyAI13.8%
Deepgram17.3%
Whisper—
Cockatoo V4-Pro7.8%
Scribe V29.8%
AssemblyAI—
Deepgram17.9%
Whisper16.6%
Cockatoo V4-Pro21.6%
Scribe V223.7%
AssemblyAI—
Deepgram43.2%
Whisper81.6%
Cockatoo V4-Pro9.2%
Scribe V27.8%
AssemblyAI9.9%
Deepgram15.6%
Whisper14.2%
Cockatoo V4-Pro24.9%
Scribe V228.0%
AssemblyAI44.8%
Deepgram44.7%
Whisper—
Cockatoo V4-Pro7.8%
Scribe V28.2%
AssemblyAI6.2%
Deepgram13.2%
Whisper11.5%
Cockatoo V4-Pro21.0%
Scribe V221.0%
AssemblyAI36.5%
Deepgram58.8%
Whisper49.1%
Cockatoo V4-Pro2.4%
Scribe V23.4%
AssemblyAI3.4%
Deepgram5.8%
Whisper3.9%
Cockatoo V4-Pro11.1%
Scribe V210.9%
AssemblyAI17.3%
Deepgram42.7%
Whisper40.4%
Cockatoo V4-Pro7.4%
Scribe V26.6%
AssemblyAI—
Deepgram18.0%
Whisper19.5%
Cockatoo V4-Pro16.4%
Scribe V218.8%
AssemblyAI—
Deepgram33.4%
Whisper40.6%
Cockatoo V4-Pro6.0%
Scribe V27.7%
AssemblyAI208.9%
Deepgram15.5%
Whisper26.8%
Cockatoo V4-Pro22.0%
Scribe V222.8%
AssemblyAI150.9%
Deepgram27.4%
Whisper28.6%
Cockatoo V4-Pro4.9%
Scribe V24.9%
AssemblyAI—
Deepgram11.0%
Whisper10.4%
Cockatoo V4-Pro27.7%
Scribe V227.6%
AssemblyAI—
Deepgram40.0%
Whisper55.1%
Cockatoo V4-Pro6.2%
Scribe V26.5%
AssemblyAI6.5%
Deepgram8.5%
Whisper7.5%
Cockatoo V4-Pro17.4%
Scribe V220.3%
AssemblyAI26.2%
Deepgram25.5%
Whisper50.4%
Cockatoo V4-Pro6.5%
Scribe V26.7%
AssemblyAI8.1%
Deepgram15.2%
Whisper10.3%
Cockatoo V4-Pro19.4%
Scribe V220.0%
AssemblyAI22.0%
Deepgram29.0%
Whisper52.5%
Cockatoo V4-Pro19.7%
Scribe V220.1%
AssemblyAI—
Deepgram—
Whisper146.6%
Cockatoo V4-Pro22.6%
Scribe V222.5%
AssemblyAI—
Deepgram—
Whisper109.0%
Cockatoo V4-Pro7.6%
Scribe V29.0%
AssemblyAI—
Deepgram20.0%
Whisper15.9%
Cockatoo V4-Pro31.9%
Scribe V233.1%
AssemblyAI—
Deepgram45.5%
Whisper64.7%
Cockatoo V4-Pro5.8%
Scribe V26.4%
AssemblyAI—
Deepgram19.2%
Whisper29.5%
Cockatoo V4-Pro11.0%
Scribe V211.7%
AssemblyAI—
Deepgram26.0%
Whisper51.1%
Cockatoo V4-Pro6.6%
Scribe V26.6%
AssemblyAI—
Deepgram12.7%
Whisper11.7%
Cockatoo V4-Pro37.4%
Scribe V240.7%
AssemblyAI—
Deepgram59.9%
Whisper78.3%
Cockatoo V4-Pro4.9%
Scribe V24.5%
AssemblyAI8.2%
Deepgram11.9%
Whisper9.7%
Cockatoo V4-Pro28.7%
Scribe V230.6%
AssemblyAI41.7%
Deepgram28.0%
Whisper44.3%
Cockatoo V4-Pro9.6%
Scribe V28.7%
AssemblyAI—
Deepgram15.4%
Whisper34.1%
Cockatoo V4-Pro21.9%
Scribe V222.0%
AssemblyAI—
Deepgram39.8%
Whisper76.0%
Cockatoo V4-Pro5.7%
Scribe V26.7%
AssemblyAI—
Deepgram13.4%
Whisper7.7%
Cockatoo V4-Pro18.9%
Scribe V219.3%
AssemblyAI—
Deepgram20.2%
Whisper31.1%
Cockatoo V4-Pro11.1%
Scribe V211.1%
AssemblyAI13.2%
Deepgram13.8%
Whisper11.6%
Cockatoo V4-Pro14.8%
Scribe V213.4%
AssemblyAI19.2%
Deepgram21.0%
Whisper37.1%
Cockatoo V4-Pro8.0%
Scribe V28.0%
AssemblyAI—
Deepgram18.6%
Whisper18.1%
Cockatoo V4-Pro24.3%
Scribe V225.8%
AssemblyAI—
Deepgram47.0%
Whisper42.7%
Cockatoo V4-Pro7.8%
Scribe V28.9%
AssemblyAI—
Deepgram16.8%
Whisper8.4%
Cockatoo V4-Pro22.3%
Scribe V222.2%
AssemblyAI—
Deepgram26.3%
Whisper38.2%
Cockatoo V4-Pro4.7%
Scribe V24.7%
AssemblyAI—
Deepgram11.8%
Whisper17.2%
Cockatoo V4-Pro27.6%
Scribe V229.1%
AssemblyAI—
Deepgram39.2%
Whisper31.0%
Cockatoo V4-Pro5.4%
Scribe V25.4%
AssemblyAI—
Deepgram16.3%
Whisper22.1%
Cockatoo V4-Pro25.2%
Scribe V227.3%
AssemblyAI—
Deepgram33.2%
Whisper50.1%
Cockatoo V4-Pro1.0%
Scribe V21.0%
AssemblyAI0.7%
Deepgram4.9%
Whisper1.4%
Cockatoo V4-Pro14.5%
Scribe V214.6%
AssemblyAI19.7%
Deepgram21.6%
Whisper43.9%
Cockatoo V4-Pro14.9%
Scribe V217.9%
AssemblyAI—
Deepgram—
Whisper46.7%
Cockatoo V4-Pro42.6%
Scribe V247.5%
AssemblyAI—
Deepgram—
Whisper136.9%
Cockatoo V4-Pro6.9%
Scribe V26.5%
AssemblyAI—
Deepgram12.9%
Whisper13.5%
Cockatoo V4-Pro23.2%
Scribe V223.2%
AssemblyAI—
Deepgram37.9%
Whisper63.1%
Cockatoo V4-Pro2.6%
Scribe V21.3%
AssemblyAI5.2%
Deepgram14.4%
Whisper5.2%
Cockatoo V4-Pro16.4%
Scribe V217.6%
AssemblyAI24.6%
Deepgram23.4%
Whisper50.0%
Cockatoo V4-Pro2.8%
Scribe V22.8%
AssemblyAI—
Deepgram4.4%
Whisper10.6%
Cockatoo V4-Pro16.1%
Scribe V215.0%
AssemblyAI—
Deepgram38.7%
Whisper49.4%
Cockatoo V4-Pro6.9%
Scribe V26.3%
AssemblyAI10.7%
Deepgram9.1%
Whisper17.9%
Cockatoo V4-Pro8.5%
Scribe V210.0%
AssemblyAI15.4%
Deepgram26.5%
Whisper—
実際に聴いてみましょう
再生しながら Cockatoo V4-Pro の文字起こしをお読みいただけます。言語を選ぶと、さらに多くの例を確認できます。
FLEURS · 読み上げ音声
Expertos de la Universidad de Princeton, de Estados Unidos, y de la Uppsala, en Suecia, dieron a conocer que la nueva especie logró evolucionar en tan solo dos generaciones, aun cuando se estimaba que demoraría mucho más, a causa de la reproducción entre un pinzón de Darwin endémico, *Geospiza fortis*, y un pinzón de cactus migrante, *Geospiza conirostris*.
FLEURS · 読み上げ音声
イタリアのリグーリア州にあるチンクエ・テッレは五つの土地を意味し、オマッジョーレ、マナローラ、コルニリア、ヴェルナッツァ、モンテロッソという五つの小さな村が寄り添うようにできた沿岸沿いの地域です。
FLEURS · 読み上げ音声
على الرغم من تكهّن بعض العلماء بأنه نظراً لوجودها أيضاً في أحواض نهر سرسواتي الجاف الآن، فيجب أن تسمى "حضارة السند وسرسواتي" بدلاً من "حضارة نهر السند"، بينما يطلق عليها البعض "الحضارة الهارابية" نسبة لقرية هارابا حيث تم التنقيب عن أول مواقع تلك الحضارة في العشرينات.
測定方法
すべてのモデルに同じ音声と同じ採点ルールを使用しています。
- データセット
- FLEURS と社内収録の各データセットで36言語をカバーしています。実世界の英語(米国)とグローバルグループは別々に表示されています。
- 指標
- プールされた単語誤り率:ある言語における置換・欠落・余分な単語を、その参照文字起こしの単語数で割った値です。中国語、日本語、クメール語、タイ語は文字誤り率を使用します。比較には両モデルが完了したクリップのみを使用し、各言語を均等に平均します。欠落した結果はゼロとして数えません。
- スコアリング
- 生の参照と仮説はどちらも固定バージョンの OpenAI Whisper ノーマライザーで正規化されます。英語は EnglishTextNormalizer、その他の言語はデフォルトの BasicTextNormalizer を使用します。CER では正規化後に空白を除去します。同点の場合は丸めていないスコアで判定します(許容差 0.000000001 パーセントポイント)。
- モデル
- Cockatoo V4-Pro、Scribe V2、AssemblyAI Universal-3.5 Pro、Deepgram Nova-3、Whisper Large V2。サポート対象外および利用不可の結果は未計上のままです。表には言語別の Cockatoo V4-Pro エラー率を示しています。
- 検証日
- 2026年10月27日更新
ベンチマークの質問
数値の意味と、その算出方法。
人間が作成した参照用の文字起こしと比較して、モデルが誤った単語の割合のことです。置換された単語、抜け落ちた単語、余分に加わった単語を数えます。単語誤り率が5%というのは、およそ20語に1語の修正が必要になるという意味です。
実際の録音には、声の重なり、なまり、背景ノイズが含まれます。通話、会議、インタビューは、FLEURS の読み上げ音声よりも難しい条件です。
この比較は36言語を対象としています。 サポートされているすべての言語は、対応言語一覧をご覧ください。
FLEURSは公開ベンチマークです。 上記の方法論では、この比較で使用したデータセット、モデル、スコアリングについて説明しています。
ここに表示されている結果は2026年10月時点のものです。モデルのバージョンを比較する際は、方法論に記載されたテスト実施日をご確認ください。