フランス語 - イタリア語音声翻訳ツール：フレーズと会話のために

話されたフランス語をイタリア語に、あるいはイタリア語をフランス語に翻訳する必要がある場合、1つの検索の背後には2つの全く異なる状況が隠れており、それぞれに適したツールは異なります。

フレーズ — ミラノで道を尋ねる、リヨンでメニューを読む、店員との一度きりのやり取り。どんなスマートフォンの音声翻訳ツールでもこれらはうまくこなせます。話しかけて、再生されて、完了です。過剰な投資は不要です。

会話 — フランス語チームとイタリア語チーム間の通話、交渉、インタビュー、双方向のやり取りがあり参加者が3人以上の場合など。ここではスマートフォンアプリのモデルは破綻します。なぜなら、それはリレー方式だからです。あなたが話し、翻訳され、再生され、その後もう一方の人が同じデバイスに向かって答え、逆方向にリレーされます。2人でスマートフォンを渡し合うのはギリギリ管理できますが、本物の会話では不可能です。

会話において「音声翻訳ツール」が異なる動作をする理由

スマートフォンアプリとイヤーバッドのモデルは、1つの前提を共有しています。2人、1つのデバイスまたは1組のイヤーバッドで、順番に話すということです。フランス語とイタリア語の場合、旅行者と地元の人のやり取りであればこれで問題ありません。しかし、そのやり取りがミーティングになった瞬間に破綻します。

3人以上の参加者 — フランス語話者が数名、イタリア語話者が数名 — 場合、回すべき単一のデバイスが存在しません。
全員が話し、割り込み、考えを口に出す — リレー方式は毎ターンにテンポの遅れをもたらし、会話の流れが止まってしまいます。
共有ハードウェアがない — Zoomの通話にイヤーバッドを手渡すことはできません。

会話においては、翻訳が個人のスマートフォンではなく通話自体の属性である必要があります。すべてのフランス語話者はイタリア語話者の言葉をフランス語で聞き、すべてのイタリア語話者はフランス語話者の言葉をイタリア語で、同時に、リアルタイムで聞きます。これがリアルタイムミーティング翻訳です。これは異なるアーキテクチャであり、音声翻訳ツール：リアルタイムの会話を実際に翻訳するもので詳しく解説しています。

優れたフランス語 - イタリア語リアルタイム翻訳の条件

双方向の同時実行。 フランス語 → イタリア語とイタリア語 → フランス語を同時に、誰もモードを切り替えたりデバイスを回したりすることなく行います。
リスナーごと。 各人は1秒未満のラグで自分の言語で部屋の音声を聞きます。「話し終わった後に翻訳が読み上げられる」わけではありません。
英語を経由しない直接翻訳。 2つの言語間でフランス語 ↔ イタリア語を翻訳し、ニュアンスが2回失われるフランス語 → 英語 → イタリア語のような翻訳は行いません。
検証可能な品質。 フランス語とイタリア語のようなロマンス語派のペアにおいて翻訳は強力です。精度を主張するのではなく、実際のトラフィックに基づく言語ペアごとのスコアを/benchmarkで公開しています。

InterMINDの役割

InterMINDは会話のケースのために構築された音声翻訳ツールです。フランス語話者とイタリア語話者が同じ通話に参加し、それぞれが相手の言葉を自分の言語でリアルタイムに聞くことができます。

フランス語とイタリア語はどちらもリアルタイム音声言語です — 音声対応の22言語の一部であり、チャットや共有メモも対応。任意の組み合わせで、英語のアンカーも地域の制限もありません。
リスナーごとのオーディオ、1秒未満のラグ。（内部の仕組みについては、4つの翻訳パイプラインの内部をご覧ください。）
ミーティング、ウェビナー、カンファレンス — 最大1,500名の参加者がそれぞれ自身の聴取言語を使用可能：ブースのない同時通訳。
ドキュメントも対応 — PDFやDOCXを共有すると、各サイドが自身の言語で読むことができます。

ニースのメニューやトリノのタクシーにおいては、スマートフォンアプリで十分です。しかし、フランス語とイタリア語の会話においては、それがInterMINDのために構築された目的です。

試してみる

/demo — 自身の音声でリアルタイム音声パイプラインを実行し、リスナーごとに翻訳されるフランス語 ↔ イタリア語を聞いてください。
/benchmark — 実際のトラフィックに基づく言語ペアごとの品質。方法論も含まれています。
全体像：音声翻訳ツール：リアルタイムの会話を実際に翻訳するもの。

— Mind.com チーム