別の言語で行われた会議のノートを、ご自身の言語に翻訳して

要点

SozAIは、会議の録音で話されている言語を99言語の中から自動で判定し、その言語で文字起こしと議事録のノートを書きます。そのあと、アプリまたはWebで、文字起こしとノートをご自身の言語に翻訳できます。所要時間はおよそ一分で、文字起こしの分数は消費しません。計画に入れておくべき制約は、一つの録音が一つの言語として文字起こしされることです。会議の途中で言語が切り替わると、二つ目の言語の部分がうまく書き起こせないことがあります。切り替わるとわかっているときは、言語ごとに録音を分けてください。

SozAIが言語を選ぶしくみ

間違えようのある言語設定は、ありません。録音が当社のサーバーに届くと、音声認識がその音声を聞いて言語を判定し、ファイル全体をその言語で文字起こしします。Webでは、文字起こしの上のメニューに判定結果が「Original · Polish」のように表示されます。

判定は、話者の多い言語では信頼できますが、そうでない言語では精度が下がります。当社が公開した精度テストでは、十言語のうち九言語で、20本すべてのクリップの言語を正しく判定しました。カザフ語は20本中5本を取り違え、アゼルバイジャン語として聞き取り、その部分はアゼルバイジャン語として文字起こしされました。使用頻度の低い言語で会議をされる場合は、最初の文字起こしを開いて、頼る前に確認してください。

言語ごとの精度

以下はそのテストの数値です。静かな部屋で読み上げた短い文200文を、言語ごとに20文ずつ、アプリと同じ方法で文字起こししました。値は低いほど良好です。背景ノイズがあり、人が遮り合う会議では、これより悪くなります。会議そのものは、まだ測定していません。

残りの89言語は対応していますが、このテストには含まれていません。

言語が切り替わる会議

ここが正直な弱点です。一つの録音には一つの言語が割り当てられます。プロジェクト会議がドイツ語で始まり、最後の二十分が英語になった場合、英語の部分はドイツ語を想定したシステムで文字起こしされ、うまく書き起こせないことがあります。ノートは、その損なわれた文字起こしから書かれることになります。

有効な対処は、言語の混ざり方によります。

• ブロック単位の切り替え。切り替わりが一、二回で、場所がわかっているなら、そこで録音を止めて新しく始めてください。各部分は、それぞれ別に判定されます。
• 借用語のある一つの言語。英語の製品名だらけのスペイン語の会議も、スペイン語の会議です。ただし、文字起こしの中の名前は確認してください。借用語がどう書き起こされるかは、測定していません。
• 絶えず交互に切り替わる場合。通訳が入る会議や、全員が文ごとに自分の言語で話す会議は、SozAIが最も苦手とする場面です。その用途はおすすめしませんし、それを直す設定も見つかっていません。

文字起こしとノートをご自身の言語で得る

ノートは会議の言語で作られるので、ポーランド語の会議ならポーランド語のノートになります。英語など別の言語で読むには、あとから録音を翻訳します。Webでは次のとおりです。

1. web.sozai.appで録音を開きます。
2. 文字起こしの上にある「Original」メニューを開き、「Translate into…」を選びます。
3. 言語を選びます。テキストとノートの両方が翻訳され、たいていおよそ一分で終わり、文字起こしの分数は使いません。
4. 同じメニューで、翻訳と原文を切り替えられます。翻訳したあとにノートを作った場合は、「Update」を押すとノートも翻訳されます。

iPhone、iPad、Android、Macのアプリでも、文字起こしとそのノートを翻訳できます。

会議ノートの機械翻訳は、何が合意されたかを理解するのには十分です。契約書など、署名するものについては、人に翻訳してもらってください。

会議を録音する

別の言語の会議でも、録音のしかたは変わりません。会議室なら、スマートフォンのアプリかノートPCのマイクを使います(対面会議のノート)。ChromeまたはEdgeのビデオ通話は、Web版で通話のタブを録音します(ボットなしの議事録)。

Macアプリの会議モードは別です。Mac上で文字起こしし、言語を選ばなければ「Automatic」になります。当社の精度テストの対象外で、ノートも自動では作られません。読み慣れない言語の会議には、当社のサーバーを通る録音のほうが、使える材料が多くなります。

SozAIが向かない場合

• 数文ごとに二つの言語が入れ替わる会議。通訳つきの会議も含みます。
• 会議の最中に通訳が必要。SozAIが翻訳するのは、録音を終えたあとです。
• 話された内容の認証翻訳が必要。
• テストの結果が悪かった言語(今のところカザフ語)で、自分で文字起こしを確認できない。

録音は、ドイツ(Hetzner)にある当社のサーバーに保存されます。音声認識と翻訳は、サブプロセッサー一覧に記載のパートナーが処理します。議事録のノートがどう作られるかは、AI議事録のページに詳しく書いています。