【手続補正書】
【提出日】平成16年12月1日(2004.12.1)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】特許請求の範囲
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
コンピュータで発生した可視像に音声信号を同期するためのコンピュータ化された方法において、
音声信号を分析して、時間整列された音響−発音単位の流れを発生し、発音的に異なると決定された音声信号の各部分ごとに１つの音響−発音単位が存在するようにし、各音響−発音単位は、音声信号の発音的に異なる部分の開始時間及び終了時間を有し、
各音響−発音単位を、その音響−発音単位を表す対応する時間整列された像単位に変換し、そして
上記時間整列された像単位を含む像を、音声信号に同期しながら表示するという段階を備えたことを特徴とする方法。
【請求項２】
上記音声信号は、連続するアナログの自然スピーチ信号であり、上記分析する段階は、上記連続する自然スピーチ信号を分析する前に、上記音声信号をデジタルスピーチ信号に変換することを更に含む請求項１に記載の方法。
【請求項３】
上記音響−発音単位は、可変時間巾を有する請求項１に記載の方法。
【請求項４】
上記音響−発音単位は、基本的な語学エレメントとして解釈できる請求項１に記載の方法。
【請求項５】
上記音声信号を一連のフレームに区分化し、そして
それらフレームをパターン分類及び発音認識装置によって処理するという段階を更に備える請求項１に記載の方法。
【請求項６】
上記フレームを処理しながら統計学的軌道モデルを適用するという段階を更に備える請求項５に記載の方法。
【請求項７】
像素が顔の動きに対応する請求項１に記載の方法。
【請求項８】
第１クライエントコンピュータシステムにより音声信号を収集し、
上記音声信号及び像を第２クライエントコンピュータシステムにおいてレンダリングするという段階を更に備える請求項１に記載の方法。
【請求項９】
第１及び第２クライエントコンピュータシステム間で発音記録を通信するという段階を更に備え、各発音記録は、特定の音響−発音単位の識別と、その音響−発音単位の開始及び終了時間とを含む請求項８に記載の方法。
【請求項１０】
上記音声信号を音声データファイルにおいてフォーマットし、そして
上記発音記録を音声データファイルに付加するという段階を更に備える請求項９に記載の方法。
【請求項１１】
上記第１及び第２クライエントコンピュータは、ネットワークにより接続され、そして更に、上記ネットワークに接続されたサーバコンピュータシステムにおいて音声信号を分析するという段階を備える請求項９に記載の方法。
【請求項１２】
上記分析、変換及び表示段階をリアルタイムで同期して実行する請求項１に記載の方法。
【請求項１３】
コンピュータで発生した可視像に音声信号を同期するための方法において、
音声信号を分析して、時間整列された音響−発音単位を発生し、
上記時間整列された音響−発音単位の各々を、その各々を表す時間整列された像単位に変換して時間整列された像単位の流れを発生し、そして
上記時間整列された像単位の流れを表示するという段階を備え、上記時間整列された像単位の流れは、上記音声信号に同期させられることを特徴とする方法。
【請求項１４】
１組の異なる音響−発音単位のうちの１つが、上記分析により発音的に異なると決定された音声信号の各々の部分に対して発生される請求項１３に記載の方法。
【請求項１５】
上記時間整列された音響−発音単位の各々は、開始時間及び終了時間を有する請求項１４に記載の方法。
【請求項１６】
上記音声信号は、連続するアナログの自然スピーチ信号である請求項１５に記載の方法。
【請求項１７】
上記音声信号は、連続するアナログの自然スピーチ信号であり、上記分析する段階は、上記連続するアナログの自然スピーチ信号を、分析する前に、デジタルスピーチ信号に変換することを含む請求項１３に記載の方法。
【請求項１８】
上記音響-発音単位の各々は、可変時間巾を有する請求項１３に記載の方法。
【請求項１９】
上記音響-発音単位の各々は、基本的な語学エレメントを表す請求項１３に記載の方法。
【請求項２０】
上記分析する段階は、上記音声信号を一連のフレームに区分化し、そして該一連のフレームをパターン分類及び発音認識装置によって処理する段階を更に含む請求項１３に記載の方法。
【請求項２１】
上記処理する段階は、上記一連のフレームに統計学的軌道モデルを適用することを含む請求項２０に記載の方法。
【請求項２２】
上記時間整列された像単位の各々は、顔の動きに対応する請求項２０に記載の方法。
【請求項２３】
上記顔の動きは、基本的な語学エレメントに対応する請求項２２に記載の方法。
【請求項２４】
第１クライエントプロセッサから音声信号を収集し、
上記音声信号を再生し、上記第１クライエントプロセッサに接続された第２クライエントプロセッサにおいて時間整列された像単位の流れをレンダリングするという段階を更に備え、上記時間整列された像単位の流れは、上記音声信号に同期されている請求項１３に記載の方法。
【請求項２５】
上記再生及びレンダリングする段階は、上記第１及び第２クライエントプロセッサ間で発音記録を通信することを含み、各発音記録は、特定の音響−発音単位の識別と、その特定の音響−発音単位の開始及び終了時間とを含む請求項２４に記載の方法。
【請求項２６】
上記収集する段階は、上記音声信号を音声データファイルにおいてフォーマットし、そして上記通信する前に、上記発音記録を上記音声データファイルに付加することを含む請求項２５に記載の方法。
【請求項２７】
上記第１及び第２クライエントプロセッサは、ネットワークによって接続されており、上記分析する段階は、上記ネットワークに接続されたサーバプロセッサにて行われる請求項２６に記載の方法。
【請求項２８】
上記分析する段階及び付加する段階は、リアルタイムにて同期して行われる請求項２７に記載の方法。
【請求項２９】
上記収集する段階及び再生及びレンダリングする段階は、更にリアルタイムにて同期して行われる請求項２８に記載の方法。
【請求項３０】
コンピュータで発生した可視像に音声信号を同期するためのコンピュータ装置において、
音声信号と、
該音声信号に結合されるプロセッサとを備えており、該プロセッサは、上記音声信号を分析して、時間整列された音響−発音単位を発生し、該時間整列された音響−発音単位の各々を、その音響−発音単位を表す時間整列された像単位に変換して時間整列された像単位の流れを発生し、そして上記時間整列された像単位の流れを表示するように構成されており、上記時間整列された像単位の流れは、上記音声信号に同期されることを特徴とするコンピュータ装置。
【請求項３１】
１組の異なる音響−発音単位のうちの１つが、上記分析により発音的に異なると決定された音声信号の各々の部分に対して発生される請求項３０に記載のコンピュータ装置。
【請求項３２】
上記時間整列された音響−発音単位の各々は、開始時間及び終了時間を有する請求項３１に記載のコンピュータ装置。
【請求項３３】
上記音声信号は、連続するアナログの自然スピーチ信号である請求項３２に記載のコンピュータ装置。
【請求項３４】
上記音声信号は、連続するアナログの自然スピーチ信号であり、上記分析する段階は、上記連続するアナログの自然スピーチ信号を、分析する前に、デジタルスピーチ信号に変換することを含む請求項３０に記載のコンピュータ装置。
【請求項３５】
上記音響-発音単位の各々は、可変時間巾を有する請求項３０に記載のコンピュータ装置。
【請求項３６】
上記音響-発音単位の各々は、基本的な語学エレメントを表す請求項３０に記載のコンピュータ装置。
【請求項３７】
上記プロセッサは、上記音声信号を一連のフレームに区分化し、そして該一連のフレームをパターン分類及び発音認識装置によって処理するように更に構成されている請求項３０に記載のコンピュータ装置。
【請求項３８】
上記プロセッサは、上記一連のフレームに統計学的軌道モデルを適用するように更に構成されている請求項３７に記載のコンピュータ装置。
【請求項３９】
上記時間整列された像単位の各々は、顔の動きに対応する請求項３０に記載のコンピュータ装置。
【請求項４０】
上記顔の動きは、基本的な語学エレメントに対応する請求項３９に記載のコンピュータ装置。
【請求項４１】
第１クライエントプロセッサと、
該第１クライエントプロセッサに接続された第２クライエントプロセッサとを更に備え、上記第１クライエントプロセッサは、入力装置から音声信号を収集し上記音声信号を上記第２クライエントプロセッサへ通信するように構成されており、上記第２クライエントプロセッサは、上記通信された音声信号を再生し上記第２クライエントプロセッサにおいて時間整列された像単位の流れをレンダリングするように構成されており、上記時間整列された像単位の流れは、上記通信された音声ファイルと同期される請求項３０に記載のコンピュータ装置。
【請求項４２】
上記第１クライエントプロセッサは、上記第１及び第２クライエントプロセッサ間で発音記録を通信するように更に構成されており、各発音記録は、特定の音響−発音単位の識別と、その特定の音響−発音単位の開始及び終了時間とを含む請求項４１に記載のコンピュータ装置。
【請求項４３】
上記第１クライエントプロセッサは、上記音声信号を音声データファイルにおいてフォーマットし、そして上記音声信号を上記第２クライエントプロセッサへ通信する前に、上記発音記録を上記音声データファイルに付加するように更に構成されている請求項４２に記載のコンピュータ装置。
【請求項４４】
上記第１及び第２クライエントプロセッサは、ネットワークによって接続されており、上記ネットワークに接続されるサーバプロセッサを更に備えており、該サーバプロセッサは、上記第１クライエントプロセッサから収集される音声信号を分析して時間整列された音響-発音単位を発生し、上記時間整列された音響-発音単位から１組の発音記録を発生し、上記音声データファイルに上記１組の発音記録を付加し、上記音声データファイルを上記第２クライエントプロセッサへ通信するように構成されており、上記第２クライエントプロセッサは、上記音声データファイルを再生し上記付加された組の発音記録を使用して上記時間整列された像単位の流れをレンダリングして該時間整列された像単位の流れを上記音声信号に同期させるように構成されている請求項４３に記載のコンピュータ装置。