【手続補正書】
【提出日】平成30年4月11日(2018.4.11)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
通信システムにおいて実施されるコンピュータ実装される方法であって、前記通信システムが少なくともソース言語を話すソースユーザとターゲット言語を話すターゲットユーザとの間の音声またはビデオの通話を行うためのものであり、前記方法が、
前記通話の通話音声を受信することであって、前記通話音声が前記ソース言語の前記ソースユーザの発話を含む、受信することと、
発話翻訳モジュールによって、自動翻訳手順を前記通話音声に行って、前記ソースユーザの発話の前記ターゲット言語への音声翻訳を生成し、前記ターゲットユーザに出力することと、
前記発話翻訳モジュールによって、前記自動翻訳手順の挙動の変化を伝達し、前記変化が前記自動翻訳の生成に関連し、それによって通知を前記ターゲットユーザへ出力させて、前記ターゲットユーザに前記変化を通知することと
を備え、
前記通知は、前記翻訳手順の挙動の前記変化に対応し、人間の視覚的合図を模倣するアニメ化されたアバターによる視覚的行為として具現化される合成ビデオを含む、コンピュータ実装される方法。
【請求項２】
前記挙動の前記変化が、
前記翻訳手順が、前記ソースユーザによる現在の発話非活動の区間中に前記ソースユーザによる今後の発話活動を現在待機している、傾聴状態に入ることと、
である、請求項１に記載のコンピュータ実装される方法。
【請求項３】
前記挙動の前記変化が、
前記翻訳手順が、前記ソースユーザが発話活動の期間を開始したことに応答して、前記翻訳手順が前記通話音声における前記ソースユーザによる現在の発話活動を監視している、パッシブ翻訳状態に入ることである、請求項１に記載のコンピュータ実装される方法。
【請求項４】
前記挙動の前記変化が、
前記翻訳手順が、前記ソースユーザが発話活動の区間を終了したことに応答して、生成が完了したときに出力されるその区間における前記ソースユーザの発話の音声翻訳を前記翻訳手順が現在生成している、アクティブ翻訳状態に入ることである、請求項１に記載のコンピュータ実装される方法。
【請求項５】
前記挙動の前記変化が、
前記翻訳手順が、先のソースユーザの発話活動の区間中の前記ソースユーザの発話の音声翻訳の生成を前記翻訳手順が完了したことに応答して、その生成された音声翻訳が前記ターゲットユーザへの出力のために前記翻訳手順により現在出力されている、出力状態に入ることである、請求項１に記載のコンピュータ実装される方法。
【請求項６】
前記挙動の前記変化が、
前記翻訳手順が、前記手順が前記翻訳の生成時にエラーに遭遇したことに応答して、エラー状態に入ることである、請求項１に記載のコンピュータ実装される方法。
【請求項７】
前記翻訳された音声が生成時に通信ネットワークを介して前記ターゲットユーザのターゲットデバイスに送信され、受信時にそのデバイスの１つまたは複数の音声出力コンポーネントを介して出力される請求項１に記載のコンピュータ実装される方法。
【請求項８】
前記通知は、前記ターゲットユーザのターゲットユーザデバイスにおいて表示するための視覚通知、および／または前記ターゲットユーザデバイスにおいて再生するための音声通知、および／または前記ターゲットユーザデバイスの機械コンポーネントを作動させることにより出力される触覚通知を含む、請求項１に記載のコンピュータ実装される方法。
【請求項９】
通信システムで使用するためのコンピュータシステムであって、前記通信システムが少なくともソース言語を話すソースユーザとターゲット言語を話すターゲットユーザとの間の音声またはビデオの通話を行うためのものであり、前記コンピュータシステムが、
前記ターゲットユーザが利用可能な１つまたは複数の音声出力コンポーネントと、
前記ソースユーザの発話のターゲット言語への音声翻訳を前記ターゲットユーザに前記音声出力コンポーネントを介して出力するように構成された翻訳出力コンポーネントであって、前記翻訳が、前記ソース言語の前記ソースユーザの発話を含む前記通話の通話音声に自動翻訳手順を行うことで生成される、翻訳出力コンポーネントと、
通知を前記ターゲットユーザに出力して、前記翻訳手順の前記挙動の変化を前記ターゲットユーザに通知するように構成された通知出力コンポーネントであって、前記変化が前記翻訳の前記生成に関連する、通知出力コンポーネントと
を備え、
前記通知は、人間の視覚的合図を模倣するアニメ化されたアバターによる視覚的行為として具現化される合成ビデオを含む、コンピュータシステム。
【請求項１０】
前記通話音声が、前記ソースユーザが話していない発話非活動の区間が散在するソースユーザの発話活動の区間中の前記ソース言語の前記ソースユーザの発話を含み、
少なくとも１つのソースユーザの発話活動の区間について、前記翻訳出力コンポーネントが、その区間中の前記ソースユーザの発話の音声翻訳を、前記音声出力コンポーネントを介して出力するように構成され、前記通知出力コンポーネントが、その翻訳の前記出力が実質的に終了したときに、前記通知を出力して、前記ターゲットユーザが前記ソースユーザに自由に返答できることを示すように構成される、請求項９に記載のコンピュータシステム。
【請求項１１】
前記コンピュータシステムが、前記ターゲットユーザのターゲットユーザデバイスにより、または前記ターゲットユーザデバイスと、前記ターゲットユーザデバイスが通信ネットワークを介して接続された少なくとも１つの他のコンピュータデバイスとの組み合わせにより、具現化される、請求項９に記載のコンピュータシステム。
【請求項１２】
翻訳手順の前記挙動の前記変化を伝達する信号を受信するように構成された入力と、
前記受信された信号に応じて前記通知を生成するように構成された通知生成コンポーネントと
を備える、請求項９に記載のコンピュータシステム。
【請求項１３】
前記通知出力コンポーネントが、前記通知が前記ターゲットユーザに出力される様態を定義する出力関連情報を生成するように構成され、
前記通知生成コンポーネントが、前記出力関連情報に応じて前記通知を生成するように構成される、請求項１２に記載のコンピュータシステム。
【請求項１４】
前記ターゲットユーザが利用可能なディスプレイを備え、前記視覚的行為として具現化される前記合成ビデオが、前記ディスプレイに表示され、前記出力関連情報が、関連するレイアウト情報を含む、請求項１３に記載のコンピュータシステム。
【請求項１５】
前記通知生成コンポーネントが、前記視覚的行為として具現化され、前記通知を具現化する前記合成ビデオを生成するように構成され、前記合成ビデオが前記レイアウト情報に応じて生成される、請求項１４に記載のコンピュータシステム。
【請求項１６】
前記人間の視覚的合図を模倣するアニメ化されたアバターが、前記レイアウト情報に応じて制御される、請求項１５に記載のコンピュータシステム。
【請求項１７】
少なくともソース言語を話すソースユーザとターゲット言語を話すターゲットユーザとの間の音声またはビデオの通話を確立する動作と、
前記ソースユーザの発話の前記ターゲット言語への音声翻訳を前記ターゲットユーザに出力する動作であって、前記翻訳が、前記ソース言語の前記ソースユーザの発話を含む前記通話の通話音声に自動翻訳手順を行うことで生成される、出力する動作と、
通知を前記ターゲットユーザに出力して、前記翻訳手順の前記挙動の変化を前記ターゲットユーザに通知する動作であって、前記変化が前記翻訳の前記生成に関連する、通知する動作と
を、プロセッサ上で実行された場合に引き起こすように構成された、コンピュータ可読ストレージに格納されるコンピュータコードを備え、
前記通知は、人間の視覚的合図を模倣するアニメ化されたアバターによる視覚的行為として具現化される合成ビデオを含む、コンピュータプログラム製品。
【請求項１８】
前記挙動の前記変化が、
前記翻訳手順が、前記ソースユーザが発話活動の期間を開始したことに応答して、前記翻訳手順が前記通話音声における前記ソースユーザによる現在の発話活動を監視している、パッシブ翻訳状態に入ることである、請求項１７に記載のコンピュータプログラム製品。
【請求項１９】
前記挙動の前記変化が、
前記翻訳手順が、前記ソースユーザが発話活動の区間を終了したことに応答して、生成が完了したときに出力されるその区間における前記ソースユーザの発話の音声翻訳を前記翻訳手順が現在生成している、アクティブ翻訳状態に入ることである、請求項１７に記載のコンピュータプログラム製品。
【請求項２０】
前記挙動の前記変化が、
前記翻訳手順が、先のソースユーザの発話活動の区間中の前記ソースユーザの発話の音声翻訳の生成を前記翻訳手順が完了したことに応答して、その生成された音声翻訳が前記ターゲットユーザへの出力のために前記翻訳手順により現在出力されている、出力状態に入ることである、請求項１７に記載のコンピュータプログラム製品。