世界の『言葉の壁』をなくす
多言語音声翻訳技術〜逐次翻訳から同時通訳へ〜

ユニバーサルコミュニケーション研究所
先進的音声翻訳研究開発推進センター

内元 清貴
2022/11/22

1

多言語音声翻訳アプリ VoiceTra

2022/11/22

2

多言語音声翻訳アプリ VoiceTra（ボイストラ）•••

NICTが研究開発した音声翻訳技術の実証実験として公開。利用無料。
31言語間の翻訳に対応。
短文の旅行会話が得意。

入力した文

累計 約718万ダウンロード
利⽤状況（2022年10⽉31⽇時点）

約14万発話／日

ダウンロード数（累計）

利⽤数（累計）iOS版：

3,659,768

⾳声認識：400,844,960

Android版：

3,518,616

翻訳：555,679,292

合計

7,178,384

⾳声合成：

517,890,785

シリーズ累計ダウンロード数

8,512,626（旧VoiceTraシリーズを合わせた累計ダウンロード数）

翻訳結果
逆翻訳結果
（翻訳結果を 自分の言語で確認！ ）重点12＋3言語（※）＋5言語（R3補正）を強化中
日、英、中（中国語・台湾華語）、韓、スペイ ン、フランス、タイ、インドネシア、ベトナム、ミャンマー、フィリピン、ポルトガル（ブラジル）＋
ネパール、クメール、モンゴル（※）＋
ロシア、ヒンディ、アラビア、ドイツ、イタリア（R3補正）
2022/11/22

ダウンロード数(2022/10/31現在)※総務省のグローバルコミュニケーション計画2025の重点言語

3多言語音声翻訳アプリ VoiceTra（ボイストラ）•••

NICTが研究開発した音声翻訳技術の実証実験として公開。利用無料。
31言語間の翻訳に対応。
短文の旅行会話が得意。

入力した文

累計 約718万ダウンロード
利⽤状況（2022年10⽉31⽇時点）

約14万発話／日

ダウンロード数（累計）

利⽤数（累計）iOS版：

3,659,768

⾳声認識：400,844,960

Android版：

3,518,616

翻訳：555,679,292

合計

7,178,384

⾳声合成：

517,890,785

シリーズ累計ダウンロード数

8,512,626（旧VoiceTraシリーズを合わせた累計ダウンロード数）

翻訳結果
逆翻訳結果
（翻訳結果を 自分の言語で確認！ ）重点12＋3言語（※）＋5言語（R3補正）を強化中
日、英、中（中国語・台湾華語）、韓、スペイン、＋ウクライナ語について緊急的な初期対応済
フランス、タイ、インドネシア、ベトナム、•ミャンマー、フィリピン、ポルトガル（ブラジル）
8/2に公開＋ネパール、クメール、モンゴル（※）• 日常生活用語等の最低限の翻訳レベル＋（短文での日常会話等に対応）
ロシア、ヒンディ、アラビア、ドイツ、イタリア（R3補正）
2022/11/22

ダウンロード数(2022/10/31現在)※総務省のグローバルコミュニケーション計画2025の重点言語

4

NICT多言語音声翻訳技術の社会展開例(一部)-NICTのVoiceTra技術が社会に広まり言葉の壁を感じない社会が実現しつつある（ https://gcp.nict.go.jp/news/products_and_services_GCP.pdf より）
アプリ「はなして翻訳｣
NTTドコモ専用端末「eTalk5APP
みらいPFモデル」
RemoSpace消防観光地「ポケトーク｣アプリ版
ポケトーク･「PIT/スマホと腕時計型端末」
岡⼭県警･「VoiceTra」 ※実証実験中
道府県警(NICT)「救急ボイストラ」
消防庁｢eTalk5「POCKETALK® S｣
みらいPFモデル｣
ポケトーク
RemoSpaceタクシー「mimi ® ⾳声翻訳
powered by NICT｣
Fairy Devices

警察「BRIDGE」（native.heart）
BRICKʼs

自治体「対⾯ホンヤク」
パナソニック コネクト

｢Fairy I/O ®
Tumbler T-01｣
Fairy Devices

VoiceTra「接客⾳声翻訳」
三菱地所(凸版印刷）「みらい翻訳プラットフォーム
⾳声翻訳APIサービス」 「mimi ® Cloud API Service」
Fairy Devices
みらい翻訳

オフィス・会議「多⾔語業務向けシステム」
住友ゴム⼯業(ATR-Trek)「ポケトーク字幕」
ポケトーク※特定のユーザ向け「多⾔語⾳声APIサービス」
⽇本電気「ハイブリッド式多⾔語通訳サービス KOTOBAL」
コニカミノルタ

建設・工場

APIサービス（2022年9⽉現在）「⾼度警察情報通信基盤システム(PⅢ)」
搭載機能
警察庁

交通機関

「TOTTRA｣⿃取県ハイヤータクシー協会(Fairy Devices)「SmaLingualシリーズ
多⾔語⾳声翻訳サービス｣
IP DREAM、スマートカルチャーゲートウェイ

公的機関

病院
｢FUJITSU ハンズフリー多⾔語⾳声会話システム｣ 富⼠通Japan「VoiceBiz ®」
凸版印刷

ビジネス

医療機関
「医療通訳タブレットMELON｣
コニカミノルタ5ネットワーク型

多言語音声翻訳の仕組み!
"#$%&'($2022/11/226

自治体

新型コロナワクチン接種会場での活用例
翻訳機・翻訳アプリの活用
n VoiceBiz（凸版印刷）：専用定型文（17言語対応）を新規搭載。接種会場の運営公的機関を対象に、無償で提供。

n 医療通訳タブレットMELON（コニカミノルタ）：接種会場に利用提供。専門的な内容も表示可能。

2022/11/22

n POCKETALK S（ポケトーク）：
東村山市の接種会場に配備。

7

「 FUJITSU ハンズフリー多言語音声会話システム」

医療機関
病院

・富士通はハンズフリーで日本語と12言語間のAI音声翻訳を可能にする新ソリューション「 FUJITSU ハンズフリー多言語音声会話システム」（名称変更）を開発
・外国人とのコミュニケーションが不可欠、かつ音声翻訳時の端末操作が困難な医療や観光分野などの現場向けに、2021年5月13日より提供開始
特徴◆独自開発の研究技術により、ハンズフリーで高精度な翻訳を実現
１．ハンズフリー技術を搭載することで、タブレット端末に接続された指向性マイクで話者の音声や位置を認識し、音声翻訳するとともに、翻訳開始や終了などの操作も自動化
２．医療現場のような、周囲の雑音が定常的に発生する状況でも高精度に音声を認識するため、当社が独自に研究開発した雑音を抑制する技術を搭載し、空調機器や検査機器などの定常雑音を判別した上で雑音を抑制◆12言語に対応し、かつ医療分野にも対応したAI翻訳エンジンを採用
１．英語、中国語、台湾語、韓国語、ベトナム語、フランス語、スペイン語、
ブラジルポルトガル語、ミャンマー語、インドネシア語、タイ語、タガログ語
２．総務省の情報通信技術に関する研究開発「グローバルコミュニケーション計画の推進 」の成果とNICTの研究成果を利用。
富士通は医療現場での多言語音声翻訳の実証実験を推進
2022/11/22

令和3年5月13日
富士通 プレスリリース（抜粋）

8

公的機関

「救急ボイストラ」全国の消防本部への導入

消防• 消防研究センターと共同で、救急隊用の多言語音声翻訳アプリ「救急ボイストラ」を開発し、平成29年4月18日より、全国の消防本部に対して提供を開始。
• 令和4年1月1日現在､724本部中671本部(92.7％)が導入。
◆対応言語(15言語）◆開発のポイント

英語・中国語・韓国語・スペイン語・フランス語・タイ語・インドネシア語・ベトナム語・ミャンマー語・台湾華語・マレー語・ロシア語・ドイツ語・ネパール語・ブラジルポルトガル語

１．救急現場で必要となる辞書/対訳例文の充実
２．救急現場で使用頻度が高い会話内容を「定型文」として登録（15言語）
３．定型文での質問/確認に対して外国人傷病者が返答できるユーザインタフェースを追加

出典：報道発表資料（Ｈ29/4/18）

2022/11/22

9

公的機関

警察庁のシステムに正式採用

警察・ NICTの多言語音声翻訳技術が警察庁に採用
・ 公的機関において全国規模で音声翻訳の独自サーバ・アプリが運用されるのは初めて
・ 民生分野に加えて､公的分野におけるNICT音声翻訳技術の､より一層の活用拡大に期待特長◆警察庁は、近年の訪日外国人旅行者数の増加を受け、令和元年度、独自の音声翻訳サーバを構築し、本技術を用いた多言語音声翻訳機能を｢高度警察
情報通信基盤システム(ＰⅢ)｣に搭載◆本システムの端末（スマートフォン及びタブレット）は、全国47都道府県警察に約７万台配備されている。
◆本音声翻訳機能は、日本語と29言語との間の翻訳機能を備える。
また、14言語での音声入出力が可能【翻訳機能】日本語と29言語との間の翻訳
日本語⇔英語、中国語（簡体字）、中国語（繁体字）、韓国語、インドネシア語、ベトナム語、タイ語、ミャンマー語、フランス語、スペイン語、フィリピン語、ブラジルポルトガル語、アラビア語、イタリア語、ウルドゥ語、オランダ語、クメール語、シンハラ語、デンマーク語、ドイツ語、トルコ語、ネパール語、ハンガリー語、ヒンディ語、ポルトガル語、マレー語、モンゴル語、ラーオ語、ロシア語【音声入出力】14言語
日本語、英語、中国語（簡体字）、中国語（繁体字）、韓国語、インドネシア語、ベトナム語、タイ語、ミャンマー語、クメール語、フランス語、スペイン語、フィリピン語、ブラジルポルトガル語

多言語音声翻訳機能の画面イメージ

2022/11/22

令和2年6月25日 情報通信研究機構
プレスリリース（抜粋）https://www.nict.go.jp/press/2020/06/25-1.html

10ネットワーク型

2022/11/22

多言語音声翻訳11言語識別技術
翻訳装置はあるのに何語で話をしているのか分からないので使えない！
（例）カスタマーサービスの現場

1.5秒で何の言語かを識別何語で話しているの？
何語なのかわからないよ…

タイのお客様か、千鳥が淵の桜をご案内しよう！

何語分かれば翻訳装置が使えるのに…

タイ語

言語識別
技術の導入

○×△#$%&’()0?????????

ดอกซากุระบานถึงเมื1อไหร่ ครับ!

言語識別技術桜はいつまで咲いていますか？

タイ語

多言語音声認識技術

多言語翻訳技術

多言語音声認識技術○×△#$%&’()0?????????

ดอกซากุระบานถึงเมื1อไหร่ ครับ!

2022/11/22

多言語翻訳技術
桜はいつまで咲いていますか？

12言語識別機能付き多言語音声翻訳技術

2022/11/22

13

ネットワーク型

2022/11/22

多言語音声翻訳14ユニバーサルモデルによる省コスト化
多言語を１モデル化
N言語

N言語

日本語
英語
中国語
韓国語
タイ語
インドネシア語
ベトナム語
ミャンマー語
フランス語
スペイン語
ブラジルポルトガル語
フィリピン語
ネパール語
クメール語
モンゴル語
ロシア語

5言語

順
次拡
張中

5言語

10言語

旅行、医療、防災、生活の４分野対応

アラビア語
ヒンディ語
ドイツ語
イタリア語

N（N-1）➡ 1つのユニバーサルモデル
サーバのコスト削減
15

みんなの自動翻訳@TexTra
https://mt-auto-minhon-mlt.ucri.jgn-x.jp

2022/11/22•

NICTの汎用長文翻訳エンジン(TexTra)を用いた実証実
験のために公開している多言語翻訳Webサイト•

TexTraを技術移転した多く企業が商用サービスを開始

16

TexTra技術を活用した商用サービス（株）みらい翻訳（株）十印（株）川村インターナショナル

Mirai Translator

T-tact AN-ZIN

みんなの自動翻訳＠KI（商用版）

https://miraitranslate.com

https://to-in.com/service/mt/an-zin

https://www.k-intl.co.jp/minna-mt

2022/11/22

17

多分野化：翻訳バンクプロジェクト
https://h-bank.nict.go.jp

参加組織:92者（2022年3月末）
翻訳データの拠出と高精度自動翻訳エンジンの提供のポジティブ・ループの促進

製薬

NICTの翻訳システムを下訳に利用
アストラゼネカ社からの報道発表（2018/4/17）
https://www.astrazeneca.co.jp/media/pressreleases1/2018/2018041701.html

2022/11/22

翻訳業務の労力を半分にする画期的な効果
18

アクセス

お問い合わせスマホ専用サイト

English翻訳バンクの広がり（一部例）
English

トップ > 広報 > プレスリリース > 2022年 > 金融分野向けの高精度AI翻訳システムを開発

印刷

金融分野向けの高精度AI翻訳システムを開発

金融

特許〜金融庁による翻訳文書の大量収集と、NICTによる深層学習の連携で高精度化〜

金融専業翻訳者レベルに達した
訳文の割合が2割から5割に向上

2022年3月11日
国立研究開発法人情報通信研究機構
金融庁

特許庁でも業務で利用ポイント

https://www.nict.go.jp/press/2020/01/15-1.html

自動車

https://www.toshiba-sol.co.jp/news/detail/20190531.htm• 金融分野の文書を日本語と英語の間で双方向に高精度に翻訳できるAI翻訳システムを開発

茶道• 金融庁などから文書を大量収集したことで金融専業翻訳者レベルに達した訳文の割合が2割から5割に向上• 専門性が高い金融分野での翻訳効率の改善により、日本の国際金融センター機能の強化への貢献に期待

国立研究開発法人情報通信研究機構（

54
いいね！

NICT、理事長: 徳田 英幸）とトヨタ自動車からの自動車法規分野の英日・中日対訳データの提供
1/5

https://www.nict.go.jp/press/2019/04/23-1.html
2022/11/22

日越茶道・文化交流協会が「翻訳バンク」活動を支援

シェアツイート

2022/03/29 11:20

日越茶道・文化交流協会パンフレットより抜粋
https://sites.google.com/view/vjca2023/
19

アクセス

お問い合わせスマホ専用サイト

English翻訳バンクの広がり（一部例）
English

トップ > 広報 > プレスリリース > 2022年 > 金融分野向けの高精度AI翻訳システムを開発

印刷

金融分野向けの高精度AI翻訳システムを開発

金融

特許〜金融庁による翻訳文書の大量収集と、NICTによる深層学習の連携で高精度化〜

金融専業翻訳者レベルに達した
訳文の割合が2割から5割に向上

2022年3月11日
国立研究開発法人情報通信研究機構
金融庁

特許庁でも業務で利用ポイント

https://www.nict.go.jp/press/2020/01/15-1.html

自動車

https://www.toshiba-sol.co.jp/news/detail/20190531.htm• 金融分野の文書を日本語と英語の間で双方向に高精度に翻訳できるAI翻訳システムを開発

茶道• 金融庁などから文書を大量収集したことで金融専業翻訳者レベルに達した訳文の割合が2割

日越茶道・文化交流協会が情報セキュリティマネジメントシステム「翻訳バンク」活動を支援の国際規格「ISO 27001」の認証を取得（2022/3/14）
トヨタ自動車からの自動車法規分野から5割に向上• 専門性が高い金融分野での翻訳効率の改善により、日本の国際金融センター機能の強化への貢献に期待

国立研究開発法人情報通信研究機構（

54

いいね！

NICT、理事長: 徳田 英幸）と1/5の英日・中日対訳データの提供

https://www.nict.go.jp/press/2019/04/23-1.html
2022/11/22

シェア

ツイート

2022/03/29 11:20

日越茶道・文化交流協会パンフレットより抜粋
https://sites.google.com/view/vjca2023/
20

NICT テキスト翻訳技術の社会展開例（※実証実験含む）
特許
・知的財産・特許事務所対応
日本特許翻訳｢ProTranslator｣

翻訳エンジン
構築サービス製薬

金融・新薬申請書類 ・市販後調査
・医薬品や化粧品の添付文書
ＮＩＣＴ­アストラゼネカ【H30.4.17リリース】※実証実験

・投資情報対応・カスタマイズした翻訳エンジン

ＮＩＣＴ-ＳＭＢＣ日興証券｢金融特化型AI自動翻訳システム」

マインドワード｢カスタム翻訳エンジン構築･運用サービス｣

NICT×アストラゼネカ、AIを活用した医薬業界向け自動翻訳システムを共同開発 （R3年3月末まで）【R2.3.31〜】

凸版印刷｢PharmaTra」【R2.9〜】

出願明細書や特許公報、医薬文書、サイエンス文献いずれの分野でも業界トップレベルの高精度なドメイン適応型機械翻訳が可能

臨床開発ドキュメントの翻訳に適した機械翻訳サービス。
蓄積した翻訳データからAI学習することでさらなる機械翻訳の精度UPも可能【R2.1.15リリース】※共同開発「翻訳バンク」を活用した投資情報のAI自動翻訳システムを共同開発【R2.4〜】

対訳資産を有効活用した専用の翻訳エンジンの構築から運用までをワンストップで実施

翻訳性能アップ
対訳資産
活⽤

みらい翻訳｢Mirai Translator 」

工業･技術･法務など【H29.12〜】

TOEIC960点レベルのカスタマイズ可能なニューラル機械翻訳エンジンを搭載し、高速で翻訳処理する企業向けのサービス

・製品カタログ ・製品マニュアル ・機械仕様書
・各種契約書 ・ビジネス資料

ＮＴＴコミュニケーションズ 川村インターナショナル｢COTOHA Translator｣ ｢みんなの自動翻訳＠KI」【H30.3〜】(商用版)【H30.5〜】

富士通【H30.9~】
ビジネスにおける実用性を追求し「Zinrai Translation Service」 た、AI による超高精度な翻訳
一般的なテキスト翻訳に加え､PDFファイルやMicrosoft Officeの各種ファイルをそのままのレイアウトで翻訳ソリューションを提供

ビジネス仕様で高セキュア。分野特化型エンジンが特長（汎用/特許/金融/法令契約）ISO27017認証取得

川村インターナショナル｢XMAT® （トランスマット）」【R4.4〜】

八楽｢ヤラクゼン｣【H27.10〜】

AI翻訳から編集、管理、コラボレーションまでを1つにする翻訳プラット
フォーム

十印｢T-tact AN-ZIN ｣利⽤・蓄積

ＣＭＣエクスマニコム｢ATOM KNOWLEDGE｣【R1.11〜】

高品質翻訳、使いやすさとセキュリティを兼ね備えた法人向けAI翻訳サービス。
用語や翻訳データの登録、独自開発の校正チェック機能を備える【H30.7〜】

企業内の翻訳業務を効率化。
翻訳会社が運用をサポート。
リーガルエンジンをはじめ独自の専門エンジンを提供

東芝デジタルソリューションズ「DOCCAI翻訳」【R3.10〜】
NICT-NMTエンジンを核に東芝の自然言語処理技術、AI-OCRを組み合わせることで、多様な専門文書に対する高精度な機械翻訳処理を提供

ファイル翻訳からカスタマイズまで、簡単操作で文字数無制限を定額利用。業務効率化を実現。
（2022年10⽉現在）

21

言語を超えたつながりの展開
言葉の壁のない、誰もが分かり合える社会

多分野化
2025

ビジネス・会議への対応

言葉の壁がない世界同時通訳

バーチャル多人数会議

同時通訳システム

外国人材への対応

メガネ型

2020

「VoiceBiz ®」
凸版印刷

1986

〜〜

シースルーパネル型

逐次
翻訳

訪日外国人対応｢eTalk5
みらいPFモデル｣
RemoSpace「対⾯ホンヤク」
パナソニック コネクト

2022/11/22「POCKETALK® S｣
ポケトーク「FUJITSU
ハンズフリー
多⾔語⾳声会話「医療通訳タブレットシステム｣
MELON｣
富⼠通Japan
コニカミノルタ「⾼度警察情報通信基盤システム(ＰⅢ)」
搭載機能
警察庁

22

逐次翻訳から同時通訳へ〜グローバルコミュニケーション計画2025〜

https://www.soumu.go.jp/menu_news/s-news/01tsushin03_02000298.html

研究開発

同時通訳の要である文より短い翻訳単位である「チャンク」をデータ化
⼊⼒

W1

Wo

⽂

W1

チャンク

W1 Wl

Wm
Wl+1Wm

Wm+1
Wm+1WnWo
Wn+1Wol入力には切れ目がないが、これを適切な単位で区切って翻訳
l人間による切れ目をデータ化し深層学習
入力分割点検出技術

文とチャンクで翻訳する同時通訳実現技術を新たに創出
チャンク区切り文区切り

l日英先行で、多言語化中

あと、 | 社長が来るからには | 始球式をやってもらわないといけないかな|
チャンクで：

Also,

if the president comes,

we ,,,,
文で：And if the president comes, I
think he'll have to play the first ball.

23英⇒日AI同時通訳プロトタイプ
研究開発• 講演の入力をチャンク分割して訳出• 文分割して訳出した結果を字幕表示
入力分割点検出技術

2022/11/22

24

英⇒日AI同時通訳プロトタイプ
汎用のCPUのみを使用し、リアルタイムで動作可能な音声合成モデルを開発
テキスト
テキスト解析処理
高速・高品質ニューラルネットワーク
音響モデル
音響特徴量
高速・高品質ニューラルネットワーク
波形生成モデル• 講演の入力をチャンク分割して訳出• 文分割して訳出した結果を字幕表示
改良前

改良後

音声波形

l 肉声に近い合成音を音声時間長の0.15倍の時間で合成
l 話速を変化させても品質が劣化しにくい
2022/11/22

25

AI同時通訳の実現に向けてhttps://www.soumu.go.jp/menu_news/s-news/01tsushin03_02000298.html

研究開発



()(

I.

入力分割点検出技術

文脈に応じて語彙も統一

In the beginningof the seventeenthcentury･･･

江戸時代初期に･･･
話者の意図も補完Push the left button)))･･･「携帯電話会社」に･･･「携帯電話事業者」間の･･･「ケータイ会社」は･･･

文脈処理・マルチモーダル技術

観光ガイド（１対Nの⽚⽅向通訳）

ビジネス会議（N対Nの双⽅向通訳）･･･to ”the mobile phone operators” ･･･between “the mobilephone operators” ･･･”the mobile phone operators” are･･･(((５G

社会実証・サービスイメージIPush
the button
Don’t touch

そのボタンを押してリアルタイム性が必要な業務に活用

講演・プレゼン（１対Nの⽚⽅向通訳）

2025年⼤阪・関⻄万博での利活⽤（想定イメージ）

遠隔協業（他のデバイスと組み合わせユーザインタフェースを⾼度化）

26

AI同時通訳の実現に向けてhttps://www.soumu.go.jp/menu_news/s-news/01tsushin03_02000298.html

研究開発



()(

I.

入力分割点検出技術

I

文脈処理・マルチモーダル技術• 自動分割のさらなる高度化、要約により低遅延へ• 文脈等の考慮により高精度へ• 多言語化へ

2022/11/22

27

2022/11/22

28