ロシア語会議の文字起こし精度：4つのAIツールを検証（2026年）

ロシア語会議の文字起こしと正確性

当社のテストでは、「文字起こしと正確性」のセクションが最も高い比重を占めています。なぜなら、すべてはこの項目に起因するからです。合計65点満点中、tl;dv 52tl;dv 、Fathom わずか14Fathom 。

これらはLLM（Anthropic ChatGPT）によって採点され、その後、ツール名を伏せた状態で、ネイティブスピーカーによるブラインド評価に基づいて確認されました。

固有名詞検出

スコアにおける最大の差が見られたのは、エンティティ検出の項目でした。tl;dv 5点満点中5点を獲得tl;dv 、Fathom 0Fathom 。

ロシア語の固有名詞は、英語の場合よりも扱いが難しい。例えば、ブランド名はキリル文字に音訳する必要があり、ツールは認識した内容を文字で書き出すという手段に頼ることはできない。tl;dv うまくtl;dv 一方で、他のツールが苦戦した例として、Проктер энд Гэмблを正しく認識したことや、CBDを「Customer Business Development」と展開したことが挙げられる。他のツールでは、いずれもこれを処理できなかった。

最も大きな見落としの一つは、ブランド名「Wrike」でした。tl;dv これを正しく名指しtl;dv 。他の3人は、ユーザー数3万人の製品について説明したものの、その製品名を文中に一切盛り込んでいませんでした。もし誰かがこれらの書き起こしを読んで、話者がどのツールを推奨していたのか判断しようとしても、その具体的な詳細を見つけることはできないでしょう。

カザンでのセッションでは、МЕГА、Баухауз、Проспект Универсиадыでも同様の事態が発生しました。tl;dv 、3つのテストすべてにおいて、この一連の問題で満点を獲得した唯一のツールtl;dv 。

言語の正確性

この項目（満点20点）で満点を取った人はいませんでした。これは、会議の内容のうち、文字起こしの過程でどれほどが残ったかを示すものです。tl;dv 15点で最高得点tl;dv 。

Fathom 5点Fathom 、これは単なる聞き間違いではなく、具体的な不具合が明らかになったものです。clip 音声には一切含まれていない英語の文章をclip 、音声で全く言及されていないエンティティを作成clip 。ネイティブスピーカーからは、転写された内容自体は妥当であるとの評価もありましたが、結局のところ、実際には存在しない内容を大量に追加してしまっていたのです。

Fireflies 合計7点を獲得し、やや危険度の高い出力を示した。このモデルが犯した誤りは、スペルは正しいものの、ロシア語の単語が間違った場所に配置されていたことだった。例えば、「главы региона」（地方自治体の長）を「главного демона」（大悪魔）に変えてしまった。同じ文章の中で、「Проспект Универсиады」が「Проспект Грузиады」となり、これはカザンでも他のどこでも存在しない通り名である。

つまり、Fathom 読んだ人は「これは間違っている」とすぐに気づくことができる一方で、Fireflies 一見すると一貫性があるようにFireflies 、実際には重大な誤りを含んでいるということです。

言語ごとの処理

tl;dv ここでも15点をtl;dv 、トップに立った

前述したように、ロシア語のビジネス会話では、文の途中で英語に切り替わる（コードスイッチング）ことが時々あります。各ツールは、こうした状況において、何を文字起こしし、どのように処理すべきか、また、キリル文字の文の中に英語の単語を配置すべきかどうかを判断する必要がありました。Tl;dv Fathom Tl;dv ラテン文字で書かれた部分はそのまま保持Fathom 一方、Fireflies 「вот эвер」のように発音通りにFireflies 、これはネイティブスピーカーによって誤りと判定されました。

単語エラー率

tl;dv ここで5tl;dv 、Fathom 0点だった。

今回のテストでは、話者の発言を逐語的に記録した検証済みのトランスクリプトがなかったため、各ツールがどのように処理したか、また明らかに間違っている単語がいくつあるかを確認しました。具体的には、ロシア語以外の文字、繰り返しのループ、その他単に誤っている部分などです。最初のclip tl;dv、実質的にそのような誤りは一切clip 。一方、Fathom、約8語に1語の割合で誤りが含まれていました。

数字、日付、通貨

データが正確でなければ、その後の工程で深刻なエラーを引き起こしかねない分野において、tl;dv 4点という最高得点をtl;dv 。

このコホートにおける最大の誤りの一つは、HappyScribeによるものでした。ある講演者が特定の期間について「десять лет（10年）」と述べたところ、HappyScribeは誤って「десять миллионов（1,000万）」と記録してしまいました。テキストをざっと目を通しただけでは、文字起こしの誤りとしてすぐには気づかないかもしれませんが、10年と1,000万との差はかなり大きいものです。

企業コミュニケーションに関するパネルでは、4つのツールすべてが、数値、日付、パーセンテージを含むすべての数字を正しく表示することができました。

専門用語の「Raw」の認識

tl;dv 4tl;dv 、HappyScribeは2点、Fireflies 、Fathom tl;dv 。

tl;dv 、独自の語彙を一切入力しなくても、この行の技術用語や専門用語を最も的確に捉えるtl;dv 。他のツールは、「персонализация（パーソナライゼーション）」という特定の単語の処理に少し苦戦していました。

HappyScribeは「реализация」（実現または実装）と聞き取りました。Fireflies 「кристаллизация」（結晶化）Fireflies 。これらはどちらもロシア語の実際の単語ですが、どちらも誤りであり、互いに異なる意味を持っています。