Timekettleが英語のオフライン音声翻訳を導入

Timekettleチームは、2020年12月に完全オフライン翻訳機能の公式バージョンをリリースしました。これは、7言語間（11の言語ペア）での世界初の双方向同時音声翻訳です。現在、Google PlayおよびiOSアプリストアで最新のTimekettleアプリバージョン1.7.0をダウンロードして、ネットワーク接続なしで効率的なオフライン翻訳をお楽しみいただけます。オフライン 特徴 すべてのTimekettleデバイスに対応しており、WT2 Plus翻訳イヤホン、ZERO翻訳機、M2翻訳イヤホン、WT2 Edge翻訳イヤホンが含まれます。

M2オフラインアドオンパックを入手ここ

利用可能な11のオフライン言語ペアのリスト：

英語 <->スペイン語、日本語、フランス語、ロシア語、韓国語、中国語

中国語<->スペイン語,  日本語、フランス語、ロシア語、韓国語

V1.7.0以前は、オフラインデータパッケージのリソースが大きすぎて読み込みが困難なため、クラウドサーバー上でのみ実行可能でした。

長い間、人工知能による音声認識と翻訳のプロセスはクラウドサーバー上で完了していました。これは、これら二つのタスクが膨大な計算量を必要とし、モバイル端末へのダウンロードがストレージ容量を占有するためです。例えば、過去には単一の中国語用音声認識モデルのサイズが1GBを超え、動作中には2GB以上のメモリを消費し、多くの携帯電話では容量オーバーとなっていました。そのため、過去にアプリや翻訳製品が提供していたオフライン翻訳のほとんどはテキスト翻訳に限られていました。音声翻訳であっても対応言語は非常に少なく、認識および翻訳の品質も低いものでした。この種のオフライン翻訳が実際にカバーできるシーンは、「こんにちは」などの特定の文に限られていました。

5Gは高速なカバレッジを持っていますが、それでもネットワークが不安定だったり、オンラインリソースへのアクセスが不便な場所がまだ多くあります。

遠隔地に向かうとき、飛行機で移動するとき、または地下駐車場にいるとき、電波が届かないかネットワークが遅いと、特に外国人とすぐに連絡を取りたい場合には非常に困ってしまいます。このような状況は緊急であり、良好なネットワーク環境のある場所へ移動することは不可能です。そこで、オフラインの言語リソースがこの瞬間にあなたを救うかもしれません。

ほぼ1年かかりましたが、以前の10分の1に圧縮しました。

Timekettleチームとそのパートナーは、約1年の歳月と60万ドル以上の投資を経て、単一言語認識モデルをそれぞれ100MB、2言語ペアの双方向翻訳モデルを200MB、音声合成モデルを10MB未満に最適化することに成功しました。これにより、認識・翻訳・発音の3つのプロセスが完全にオフラインで実行可能となりました。チームはモデルの圧縮だけでなく、主流のスマートフォンモデルに対応するためのエンジニアリング調整も継続的に行っています。同時に、グローバルなダウンロードネットワークのカバーも必要です。記事の冒頭で述べたように、これは世界初の幅広いモデルと多数の言語に対応したオフライン翻訳機能であり、その効果も他製品と比べて大幅に向上しています。Timekettleチームは、オフラインモードとオンラインモードの差を可能な限り縮めており、特に中国語-英語のバイリンガルレベルはオンラインに近く、他の言語も急速に進化しています。

なぜオフライン音声翻訳機能を開発したのですか？

Timekettleに詳しい方ならご存知かもしれませんが、当チームは常にユーザーに多様なシーンで没入型のコミュニケーション体験を提供し、単一の技術に特化したツールではなく、コミュニケーション対応の翻訳製品となることに注力しています。そのため、翻訳製品に適したマルチチャネル通信技術、ウェイクアップ技術、ノイズリダクション技術を開発しました。これらの技術により、WT2翻訳イヤホン、ZERO翻訳機、M2翻訳イヤホンは世界中で多くのユーザーに支持されています。そしてWT2は長らく米国Amazon.comの電子外国語翻訳機カテゴリーでベストセラーNo.1を占めています。最新製品であるM2は、発売後すぐに顧客の選択肢トップ3の一つとなり、メディアからも高い評価を受けており、ビジネス、教育、旅行などに活用されています。翻訳製品が海外旅行時だけでなく、人々の日常生活に初めて成功裏に浸透した事例です。

オフライン音声翻訳も、突破すべき重要な技術の一つです。

しかし、「マルチシナリオで没入型」の翻訳マップを実現するにはまだ長い道のりがあることを私たちは十分に認識しており、業界のボトルネックを突破し続けていきます。まさにあるユーザーが言ったように：

翻訳者が必要なとき、Timekettleがあなたのそばにいます！

注意：

APP Timekettleでオフラインパッケージが事前にダウンロードされていることを確認してください。  オフライン機能を有効にするには、FISH CARD（製品パッケージに含まれています）に記載されているPINコードを取得して入力してください。

チュートリアルビデオ：

M2（オフライン）https://youtu.be/8Ow9geQUNls

WT2 Plus（オフライン）https://youtu.be/w9RdKfFdlI8