(57)【特許請求の範囲】
【請求項１】
複数の動画像情報を同時に表示装置に表示するマルチチャネル情報処理装置であって、
前記複数の動画像情報を取得し、前記複数の動画像情報の表示装置上での表示位置に関する動画像位置情報を決定して前記複数の動画像情報を前記動画像位置情報に基づいて出力する動画像情報制御手段と、
入力デバイスを介して入力されるカーソル指示情報に基づいてカーソル位置情報を算出し前記カーソル位置情報に基づいてカーソル画像情報を生成してこれを出力するカーソル位置制御手段と、
前記動画像表示制御手段が出力する複数の動画像情報と、前記カーソル位置制御手段が出力するカーソル画像情報とを合成して前記表示装置上に表示する表示画像生成手段と、
前記複数の動画像情報に対応する動画像位置情報と、前記カーソル位置制御手段で算出されたカーソル位置情報とに基づいて、各動画像情報の表示位置とカーソルの表示位置との距離を算出し距離情報を生成する距離情報生成手段と、
前記距離情報生成手段で生成された距離情報に基づいて前記複数の動画像情報に対応する音声データの音量を決定して音声出力装置に出力する音声出力制御手段と、
を備え、前記距離情報生成手段で生成された距離情報は、カーソルの表示位置から見た各動画像情報の表示位置の方向に関する方向情報を含み、前記音声出力制御手段は前記音声出力装置が形成する音像空間に前記複数の動画像情報に対応する音声データが定位するように前記距離情報に基づいて前記音声出力装置に出力を行うことを特徴とするマルチチャネル情報処理装置。
【請求項２】
前記音声出力制御手段は、前記距離情報生成手段で生成された距離情報のうち距離の値が最も小さい動画像情報に対応する音声データの音量を予め定められた音量Ｖａに設定し、他の動画像情報に対応する音声データの音量を前記音量Ｖａよりも小さな音量Ｖｂに設定することを特徴とする、請求項１に記載のマルチチャネル情報処理装置。
【請求項３】
前記音声出力制御手段は、前記複数の動画像情報に対応する音声データの音量を、前記距離情報生成手段で生成された距離情報中の距離の値に反比例するように設定することを特徴とする、請求項１に記載のマルチチャネル情報処理装置。
【請求項４】
前記複数の動画像情報に対応する音声データに含まれる言葉を認識する音声データ認識手段と、
前記音声データ認識手段で認識した言葉を文字情報に変換して前記表示装置に表示する文字情報表示手段と、
をさらに備える請求項１に記載のマルチチャネル情報処理装置。
【請求項５】
インターネット接続手段と、
前記音声データ認識手段で認識した言葉をキーワードとしてインターネット上に存在する関連ホームページを検索するホームページ検索手段と、
前記ホームページ検索手段で検索されたホームページを前記表示装置上に表示するホームページ表示手段と、
を備える、請求項４に記載のマルチチャネル情報処理装置。
【請求項６】
前記表示装置に表示される複数の動画像情報から所定のアルゴリズムに基づいて特定の動画像情報を選択する動画像選択手段をさらに備え、前記音声出力制御手段は前記動画像選択手段が選択した動画像情報に対応する音声データを音声出力装置に出力することを特徴とする、請求項１に記載のマルチチャネル情報処理装置。
【請求項７】
前記動画像選択手段は、所定時間毎に選択する動画像情報を切り換えることを特徴とする、請求項６に記載のマルチチャネル情報処理装置。
【請求項８】
複数の動画像情報を同時に表示装置に表示する際のマルチチャネル情報処理方法であって、
前記表示装置上に表示を行う動画像情報の表示装置上での表示位置を決定する段階と、
決定した表示位置に基づいて前記複数の動画像情報を出力する段階と、
前記入力デバイスから入力されるカーソル指示情報を受け付ける段階と、
前記カーソル指示情報に基づいてカーソルを表示するカーソル位置情報を算出する段階と、
前記カーソル位置情報に基づいてカーソル画像情報を生成する段階と、
前記複数の動画像情報と前記カーソル画像情報とを合成して表示画像を生成しこれを前記表示装置上に出力する段階と、
前記複数の動画像情報の表示位置と前記カーソル位置情報との間の距離を算出し距離情報を生成する段階と、
カーソルの表示位置から見た各動画像情報の表示位置の方向に関する方向情報を生成する段階と、
前記距離情報に基づいて複数の動画像情報に対応する音声データの音量を決定し、前記複数の動画像情報に対応する音声データが、前記音声出力装置の音像空間における前記距離情報および方向情報に応じた音像位置に定位するように音声出力装置に出力する段階と、
を含むマルチチャネル情報処理方法。
【請求項９】
複数の動画像情報について生成された距離情報のうち距離の値が最も小さい動画像情報に対応する音声データの音量を予め定められた音量Ｖａに設定し、他の動画像情報に対応する音声データの音量を前記音量Ｖａよりも小さな予め定められた音量Ｖｂに設定することを特徴とする、請求項８に記載のマルチチャネル情報処理方法。
【請求項１０】
前記複数の動画像情報に対応する音声データの音量を、各距離情報中の距離の値に反比例するように設定することを特徴とする、請求項８に記載のマルチチャネル情報処理方法。
【請求項１１】
前記複数の動画像情報に対応する音声データに含まれる言葉を音声認識する段階と、
音声認識した言葉を文字情報に変換して前記表示装置に表示する段階と、
をさらに備える請求項８に記載のマルチチャネル情報処理方法。
【請求項１２】
インターネットに接続する段階と、
音声認識した言葉をキーワードとしてインターネット上に存在する関連ホームページを検索する段階と、
検索された関連ホームページを前記表示装置上に表示する段階と、
を備える、請求項１１に記載のマルチチャネル情報処理方法。
【請求項１３】
前記表示装置に表示される複数の動画像情報から所定のアルゴリズムに基づいて特定の動画像情報を選択する段階と、
選択した動画像情報に対応する音声データを前記音声出力装置に出力する段階と、
をさらに備える、請求項８に記載のマルチチャネル情報処理方法。
【請求項１４】
複数の動画像情報を同時に表示装置に表示する際のマルチチャネル情報処理方法のプログラムであって、
前記複数の動画像情報の表示装置上での表示位置を決定する段階と、
決定した表示位置に基づいて前記複数の動画像情報を出力する段階と、
前記入力デバイスから入力されるカーソル指示情報を受け付ける段階と、
前記カーソル指示情報に基づいてカーソルを表示するカーソル位置情報を算出する段階と、
前記カーソル位置情報に基づいてカーソル画像情報を生成する段階と、
前記複数の動画像情報と前記カーソル画像情報とを合成して表示画像を生成しこれを前記表示装置上に出力する段階と、
前記複数の動画像情報の表示位置と前記カーソル位置情報との間の距離を算出し距離情報を生成する段階と、
カーソルの表示位置から見た各動画像情報の表示位置の方向に関する方向情報を生成する段階と、
前記距離情報に基づいて複数の動画像情報に対応する音声データの音量を決定し、前記複数の動画像情報に対応する音声データが、前記音声出力装置の音像空間における前記距離情報および方向情報に応じた音像位置に定位するように、前記音声出力装置に出力を行う段階と、
を含むマルチチャネル情報処理方法をコンピュータに実行させるためのプログラム。
【請求項１５】
前記複数の動画像情報について生成された距離情報のうち距離の値が最も小さい動画像情報に対応する音声データの音量を予め定められた音量Ｖａに設定し、他の動画像情報に対応する音声データの音量を前記音量Ｖａよりも小さな予め定められた音量Ｖｂに設定し音声出力装置に出力する段階をさらに含む、請求項１４に記載のマルチチャネル情報処理方法をコンピュータに実行させるためのプログラム。
【請求項１６】
前記複数の動画像情報に対応する音声データの音量を、各距離情報中の距離の値に反比例するように設定し音声出力装置に出力する段階をさらに含む、請求項１４に記載のマルチチャネル情報処理方法をコンピュータに実行させるためのプログラム。
【請求項１７】
前記複数の動画像情報に対応する音声データに含まれる言葉を音声認識する段階と、
音声認識した言葉を文字情報に変換してこれを出力する段階と、
前記複数の動画像情報、前記カーソル画像情報および前記文字情報とを合成して表示画像を生成しこれを前記表示装置上に出力する段階と、
をさらに備える、請求項１４に記載のマルチチャネル情報処理方法をコンピュータに実行させるためのプログラム。
【請求項１８】
前記距離情報に基づいて複数の動画像情報のうちから特定の動画像情報を選択し、この動画像情報に対応する音声データを音声出力装置に出力する段階と、
前記音声出力装置に出力する音声データに含まれる言葉を音声認識する段階と、
音声認識した言葉を文字情報に変換してこれを出力する段階と、
前記複数の動画像情報、前記カーソル画像情報および前記文字情報とを合成して表示画像を生成しこれを前記表示装置上に出力する段階と、
をさらに備える、請求項１４に記載のマルチチャネル情報処理方法をコンピュータに実行させるためのプログラム。
【請求項１９】
前記音声出力装置に出力する音声データに含まれる言葉を音声認識する段階と、
インターネットに接続する段階と、
音声認識した言葉をキーワードとしてインターネット上に存在する関連ホームページを検索する段階と、
前記複数の動画像情報、前記カーソル画像情報および前記検索された関連ホームページを合成して表示画像を生成しこれを前記表示装置上に出力する段階と、
をさらに備える、請求項１４に記載のマルチチャネル情報処理方法をコンピュータに実行させるためのプログラム。
【請求項２０】
前記表示装置に表示される複数の動画像情報から所定のアルゴリズムに基づいて特定の動画像情報を選択する段階と、
選択した動画像情報に対応する音声データを前記音声出力装置に出力する段階と、
をさらに備える、請求項１４に記載のマルチチャネル情報処理方法をコンピュータに実行させるためのプログラム。
【請求項２１】
請求項１４〜２０のプログラムを記憶したコンピュータが読み取り可能な記憶媒体。
【発明の詳細な説明】
【０００１】
【技術分野】
本発明は、音声データを伴う複数の動画像情報を同時に表示装置上に表示可能なマルチチャネル情報処理に関し、特に、表示装置上に表示された複数の動画像の中から特定の動画像の内容を容易に把握することができるマルチチャネル情報処理装置、マルチチャネル情報処理方法、マルチチャネル情報処理方法のプログラムおよびこのプログラムを記憶するコンピュータ読み取り可能な記憶媒体に関する。
【０００２】
【背景技術】
近年、ＡＤＳＬ（Ａｓｙｍｍｅｔｒｉｃ Ｄｉｇｉｔａｌ Ｓｕｂｓｃｒｉｂｅｒ Ｌｉｎｅ）やＣＡＴＶモデムなどのインターネットに高速にアクセスする手段が普及しており、これに伴ってＴＶ番組などの動画像情報を家庭からインターネットを通じてダウンロードする機会が増えている。また、ディジタルビデオカメラとパーソナルコンピュータ（以下、ＰＣと称す）との間のインターフェイスが普及しており、ユーザが自分で撮影した動画像情報をＰＣに取り込んで処理することも盛んに行われている。
【０００３】
また、ＰＣの性能が向上していることやハードディスクの容量が拡大していることから、大量の動画像情報をハードディスクに格納して再生表示することも容易になってきており、複数の動画像情報を表示装置上に同時に表示できる環境にも容易に対応可能となっている。このような複数の動画像情報の表示には、ＣＲＴや液晶ディスプレイなどの表示装置上に複数のウィンドウを任意の位置に配置し、これらの動画像情報を同時に表示させることが可能である。
【０００４】
このような複数の動画像を表示する場合に、これら動画像に付随している音声データは、全ての音声データを出力しないか、あるいは全ての音声データを同一の音量で合成して出力することが行われている。音声データを出力しない場合には、各動画像情報の内容を把握するために音声データを利用することができず、表示装置上に表示された画像のみでその内容を判断する必要がある。また、全ての音声データを同一の音量で合成して出力する場合には、それぞれの音声データが干渉しあって音声を認識することが困難であり、またどの音声データがどの動画像情報に対応しているかを認識することも困難であるという問題を包含している。
【０００５】
本発明は、複数の動画像情報を表示装置上に表示する際に、特定の動画像情報に対応する音声データを認識することを容易にし、表示されている動画像情報の内容を容易に把握することを可能にすることを目的とする。
【０００６】
【発明の開示】
本発明の請求項１に係るマルチチャネル情報処理装置は、複数の動画像情報を同時に表示装置に表示するマルチチャネル情報処理装置であって、複数の動画像情報を取得し、複数の動画像情報の表示装置上での表示位置に関する動画像位置情報を決定して複数の動画像情報を前記動画像位置情報に基づいて出力する動画像情報制御手段と、入力デバイスを介して入力されるカーソル指示情報に基づいてカーソル位置情報を算出しカーソル位置情報に基づいてカーソル画像情報を生成してこれを出力するカーソル位置制御手段と、動画像表示制御手段が出力する複数の動画像情報とカーソル位置制御手段が出力するカーソル画像情報とを合成して表示装置上に表示する表示画像生成手段と、複数の動画像情報に対応する動画像位置情報とカーソル位置制御手段で算出されたカーソル位置情報とに基づいて、各動画像情報の表示位置とカーソルの表示位置との距離を算出し距離情報を生成する距離情報生成手段と、距離情報生成手段で生成された距離情報に基づいて複数の動画像情報に対応する音声データの音量を決定して音声出力装置に出力する音声出力制御手段とを備え、距離情報生成手段で生成された距離情報は、カーソルの表示位置から見た各動画像情報の表示位置の方向に関する方向情報を含み、音声出力制御手段は音声出力装置が形成する音像空間に複数の動画像情報に対応する音声データが定位するように距離情報に基づいて音声出力装置に出力を行うことを特徴とする。
【０００７】
本発明の請求項２に係るマルチチャネル情報処理装置は、請求項１に記載のマルチチャネル情報処理装置であって、音声出力制御手段が、距離情報生成手段で生成された距離情報のうち距離の値が最も小さい動画像情報に対応する音声データの音量を予め定められた音量Ｖａに設定し、他の動画像情報に対応する音声データの音量を音量Ｖａよりも小さな予め定められた音量Ｖｂに設定することを特徴としている。
【０００８】
本発明の請求項３に係るマルチチャネル情報処理装置は、請求項１に記載のマルチチャネル情報処理装置であって、音声出力制御手段が、複数の動画像情報に対応する音声データの音量を、距離情報生成手段で生成された距離情報中の距離の値に反比例するように設定することを特徴としている。
本発明の請求項４に係るマルチチャネル情報処理装置は、請求項１に記載のマルチチャネル情報処置装置であって、複数の動画像情報に対応する音声データに含まれる言葉を認識する音声データ認識手段と、音声データ認識手段で認識した言葉を文字情報に変換して表示装置に表示する文字情報表示手段とをさらに備えている。
【０００９】
本発明の請求項５に係るマルチチャネル情報処理装置は、請求項５に記載のマルチチャネル情報処理装置であって、インターネット接続手段と、音声データ認識手段で認識した言葉をキーワードとしてインターネット上に存在する関連ホームページを検索するホームページ検索手段と、ホームページ検索手段で検索されたホームページを前記表示装置上に表示するホームページ表示手段とを備えている。
【００１０】
本発明の請求項６に係るマルチチャネル情報処理装置は、請求項１に記載のマルチチャネル情報処理装置であって、表示装置に表示される複数の動画像情報から所定のアルゴリズムに基づいて特定の動画像情報を選択する動画像選択手段をさらに備え、音声出力制御手段は動画像選択手段が選択した動画像情報に対応する音声データを音声出力装置に出力することを特徴としている。
【００１１】
本発明の請求項７に係るマルチチャネル情報処理装置は、請求項６に記載のマルチチャネル情報処理装置であって、動画像選択手段は、所定時間毎に選択する動画像情報を切り換えることを特徴としている。
本発明の請求項８に係るマルチチャネル情報処理方法は、複数の動画像情報を同時に表示装置に表示する際のマルチチャネル情報処理方法であって、表示装置上に表示を行う動画像情報表示装置上での表示位置を決定する段階と、決定した表示位置に基づいて複数の動画像情報を出力する段階と、入力デバイスから入力されるカーソル指示情報を受け付ける段階と、カーソル指示情報に基づいてカーソルを表示するカーソル位置情報を算出する段階と、カーソル位置情報に基づいてカーソル画像情報を生成する段階と、複数の動画像情報とカーソル画像情報とを合成して表示画像を生成しこれを表示装置上に出力する段階と、複数の動画像情報の表示位置とカーソル位置情報との間の距離を算出し距離情報を生成する段階と、距離情報に基づいて複数の動画像情報に対応する音声データの音量を決定し音声出力装置に出力する段階と、カーソルの表示位置から見た各動画像情報の表示位置の方向に関する方向情報を生成する段階と、複数の動画像情報に対応する音声データが、音声出力装置の音像空間における距離情報および方向情報に応じた音像位置に定位するように、音声出力装置に出力を行う段階とを含んでいる。
【００１２】
本発明の請求項９に係るマルチチャネル情報処理方法は、請求項８に記載のマルチチャネル情報処理方法であって、複数の動画像情報について生成された距離情報のうち距離の値が最も小さい動画像情報に対応する音声データの音量を予め定められた音量Ｖａに設定し、他の動画像情報に対応する音声データの音量を音量Ｖａよりも小さな予め定められた音量Ｖｂに設定することを特徴としている。
【００１３】
本発明の請求項１０に係るマルチチャネル情報処理方法は、請求項８に記載のマルチチャネル情報処理方法であって、複数の動画像情報に対応する音声データの音量を、各距離情報中の距離の値に反比例するように設定することを特徴としている。
本発明の請求項１１に係るマルチチャネル情報処理方法は、請求項８に記載のマルチチャネル情報処理方法であって、複数の動画像情報に対応する音声データに含まれる言葉を音声認識する段階と、音声認識した言葉を文字情報に変換して表示装置に表示する段階とをさらに備えている。
【００１４】
本発明の請求項１２に係るマルチチャネル情報処理方法は、請求項１１に記載のマルチチャネル情報処理方法であって、インターネットに接続する段階と、音声認識した言葉をキーワードとしてインターネット上に存在する関連ホームページを検索する段階と、検索された関連ホームページを前記表示装置上に表示する段階とを備えている。
【００１５】
本発明の請求項１３に係るマルチチャネル情報処理方法は、請求項８に記載のマルチチャネル情報処理方法であって、表示装置に表示される複数の動画像情報から所定のアルゴリズムに基づいて特定の動画像情報を選択する段階と、選択した動画像情報に対応する音声データを音声出力装置に出力する段階とをさらに備えている。
【００１６】
本発明の請求項１４に係るプログラムは、複数の動画像情報を同時に表示装置に表示する際のマルチチャネル情報処理方法のプログラムであって、複数の動画像情報の表示装置上での表示位置を決定する段階と、決定した表示位置に基づいて複数の動画像情報を出力する段階と、入力デバイスから入力されるカーソル指示情報を受け付ける段階と、カーソル指示情報に基づいてカーソルを表示するカーソル位置情報を算出する段階と、カーソル位置情報に基づいてカーソル画像情報を生成する段階と、複数の動画像情報とカーソル画像情報とを合成して表示画像を生成しこれを表示装置上に出力する段階と、複数の動画像情報の表示位置とカーソル位置情報との間の距離を算出し距離情報を生成する段階と、カーソルの表示位置から見た各動画像情報の表示位置の方向に関する方向情報を生成する段階と、距離情報に基づいて複数の動画像情報に対応する音声データの音量を決定し、複数の動画像情報に対応する音声データが、音声出力装置の音像空間における距離情報および方向情報に応じた音像位置に定位するように、音声出力装置に出力を行う段階とを含むマルチチャネル情報処理方法をコンピュータに実行させるためのプログラムである。
【００１７】
本発明の請求項１５に係るプログラムは、請求項１４に記載のプログラムであって、複数の動画像情報について生成された距離情報のうち距離の値が最も小さい動画像情報に対応する音声データの音量を予め定められた音量Ｖａに設定し、他の動画像情報に対応する音声データの音量を音量Ｖａよりも小さな予め定められた音量Ｖｂに設定し音声出力装置に出力する段階をさらに含むマルチチャネル情報処理方法をコンピュータに実行させるためのプログラムである。
【００１８】
本発明の請求項１６に係るプログラムは、請求項１４に記載のプログラムであって、複数の動画像情報に対応する音声データの音量を、各距離情報中の距離の値に反比例するように設定し音声出力装置に出力する段階をさらに含むマルチチャネル情報処理方法をコンピュータに実行させるためのプログラムである。
本発明の請求項１７に係るプログラムは、請求項１４に記載のプログラムであって、複数の動画像情報に対応する音声データに含まれる言葉を音声認識する段階と、音声認識した言葉を文字情報に変換してこれを出力する段階と、複数の動画像情報、カーソル画像情報および文字情報とを合成して表示画像を生成しこれを表示装置上に出力する段階とをさらに備えるマルチチャネル情報処理方法をコンピュータに実行させるためのプログラムである。
【００１９】
本発明の請求項１８に係るプログラムは、請求項１４に記載のプログラムであって、距離情報に基づいて複数の動画像情報のうちから特定の動画像情報を選択し、この動画像情報に対応する音声データを音声出力装置に出力する段階と、音声出力装置に出力する音声データに含まれる言葉を音声認識する段階と、音声認識した言葉を文字情報に変換してこれを出力する段階と、複数の動画像情報、カーソル画像情報および文字情報とを合成して表示画像を生成しこれを表示装置上に出力する段階とを備えるマルチチャネル情報処理方法をコンピュータに実行させるためのプログラムである。
【００２０】
本発明の請求項１９に係るプログラムは、請求項１４に記載のプログラムであって、距離情報に基づいて複数の動画像情報のうちから特定の動画像情報を選択し、この動画像情報に対応する音声データを音声出力装置に出力する段階と、音声出力装置に出力する音声データに含まれる言葉を音声認識する段階と、インターネットに接続する段階と、音声認識した言葉をキーワードとしてインターネット上に存在する関連ホームページを検索する段階と、複数の動画像情報、カーソル画像情報および検索された関連ホームページを合成して表示画像を生成しこれを表示装置上に出力する段階とを備えるマルチチャネル情報処理方法をコンピュータに実行させるためのプログラムである。
【００２１】
本発明の請求項２０に係るプログラムは、請求項１４に記載のプログラムであって、表示装置に表示される複数の動画像情報から所定のアルコリズムに基づいて特定の動画像情報を選択する段階と、選択した動画像情報に対応する音声データを音声出力装置に出力する段階とを備えるマルチチャネル情報処理方法をコンピュータに実行させるためのプログラムである。
【００２２】
本発明の請求項２１に係る記憶媒体は、請求項１４〜２０のプログラムを記憶したコンピュータが読み取り可能な記憶媒体である。
【００２３】
【発明の効果】
本発明によれば、表示装置に表示される複数の動画像情報から特定の動画像情報に対応する音声データを容易に認識することができ、その動画像情報の内容の把握が容易になる。
【００２４】
【発明を実施するための最良の形態】
〔基本構成〕
本発明の１実施形態が採用される情報処理装置のハード構成を図１に示す。
情報処理装置１０は、通常のパーソナルコンピュータで構成することが可能であり、ＰＣ本体１、ＣＲＴや液晶表示装置などで構成されるディスプレイ２、スピーカ３、マウスやトラックボール、タッチパッド、キーボードなどの入力デバイス４、インターネット接続が可能なモデム５などを備えている。モデム５は、たとえば公衆回線を通じてインターネット接続を行うＡＤＳＬモデムなどが採用される。
【００２５】
ＰＣ本体１は、モデム５および公衆回線を介してＩＳＰ（Ｉｎｔｅｒｎｅｔ Ｓｅｒｖｉｃｅｓ Ｐｒｏｖｉｄｅｒ）２０に接続を行い、ＩＳＰ２０に用意されているストリーミングデータから複数の動画像情報をダウンロードすることが可能な構成となっている。ダウンロードされた複数の動画像情報は、ディスプレイ２上の予めプログラムで設定されている表示位置に表示される。もちろん、プログラム上に用意されたツールを用いてユーザが表示位置を設定するように構成することも可能である。
【００２６】
動画像情報の表示位置に関する位置情報テーブルの一例を図２に示す。
この位置情報テーブルは、チャネル番号、中心の位置、左右の幅、上下の高さなどの項目を備えており、各チャネル番号ＣＨｉ（ｉ＝１〜ｎ）の動画像情報の中心の座標位置（ＣＸｉ，ＣＹｉ）、左右の幅Ｗｉ、上下の高さＨｉがそれぞれ格納される。この位置情報テーブルは、表示されるチャネル数ｎ毎に設定されており、ＰＣ本体１で処理可能な最大チャネル数またはディスプレイ２上に表示可能な最大チャネル数まで用意されている。
【００２７】
このような位置情報テーブルで設定された表示位置に基づいて動画像情報の表示を行う場合の表示画面の一例を図３に示す。ここでは、表示チャネル数が３の場合を示しており、それぞれ中心の座標位置（ＣＸｉ，ＣＹｉ）、左右の幅Ｗｉ、上下の高さＨｉによって、各動画像情報の表示位置を決定することができる。
〔第１実施形態〕
本発明の第１実施形態の制御ブロック図を図４に示す。
【００２８】
この情報処理装置１００は、動画像源２００から複数の動画像情報を取得する動画像表示制御手段１０１を備えている。動画像情報表示制御手段１０１は、たとえば、図２に示されるような位置情報テーブルにしたがって各動画像情報の表示位置を決定し、この動画像位置情報と動画像情報とを出力する。
カーソル位置決定手段１０２は、マウス、トラックボール、タッチパッド、キーボード、その他のポインティングデバイスで構成される入力デバイス１４０により入力されるカーソル指示情報を受け付け、このカーソル指示情報と現在のカーソルの表示位置とに基づいて次のカーソル位置情報を算出しこれを出力する。
【００２９】
カーソル位置決定手段１０２から出力されるカーソル位置情報はカーソル画像生成手段１０３に入力される。カーソル画像生成手段１０３は、カーソル位置情報に基づいてカーソル画像情報を生成しこれを出力する。
動画像表示制御手段１０１から出力される動画像情報と動画像位置情報およびカーソル画像生成手段１０３から出力されるカーソル画像情報は、表示画像生成手段１０４に入力される。表示画像生成手段１０４は、ＶＲＡＭなどの画像出力用バッファを備え、複数の動画像情報をその位置情報に基づいて配置するとともに、カーソル画像を合成して表示装置１２０に出力する。
【００３０】
動画像表示制御手段１０１から出力される動画像位置情報とカーソル位置決定手段１０２から出力されるカーソル位置情報は距離情報生成手段１０５に入力される。距離情報生成手段１０５は、動画像位置情報とカーソル位置情報に基づいて各動画像情報の表示位置とカーソルの表示位置との距離を算出する。この各動画像情報の表示位置とカーソルの表示位置との距離は、動画像情報の中心位置とカーソルの中心位置との間の距離とすることができる。また、カーソルが動画像情報のウィンドウ内に位置する場合には、その距離を”０”に設定するように構成できる。
【００３１】
距離情報生成手段１０５で生成された距離情報は動画像選択手段１０６に入力される。動画像選択手段１０６では、距離情報生成手段１０５で生成された距離情報に基づいて、どの動画像情報に対応する音声データを出力するかを決定する。たとえば、各動画像情報の距離情報のうち最も距離の値が小さい動画像情報を選択するように構成できる。
【００３２】
動画像選択手段１０６は、選択された動画像情報に基づいて音声出力選択情報を音声出力選択手段１０７に出力する。音声出力選択手段１０７は、動画像源２００からの複数の動画像情報のうち、音声出力選択情報で設定される動画像情報に対応する音声データを選択的に取得し、これを音声出力装置１３０に出力する。
【００３３】
この構成における動作を図５のフローチャートに基づいて説明する。
ステップＳ１１では、変数ｉの値を初期化する。
ステップＳ１２では、カーソル位置情報の読み込みを行う。
ステップＳ１３では、カーソルの表示位置がチャネル番号ＣＨｉの動画像情報の表示枠内に入っているか否かを判別する。動画像情報の位置情報テーブルとして、図６に示すような、チャネル番号、中心の位置、表示幅、表示高さの各項目に加えて、近傍幅、近傍高さの項目を備えるものを用いることができる。カーソルの表示位置が、チャネル番号ＣＨｉの動画像情報の中央位置座標（ＣＸｉ，ＣＹｉ）および近傍幅ＮＷｉ、近傍高さＮＨｉで規定される範囲内にある場合には、この動画像情報の表示枠に入っていると判断する。この場合、動画像情報を表示しているウィンドウの周囲に所定の距離範囲で表示枠を設定し、この表示枠内にカーソルが入った場合にその動画像情報が選択されたと判断するように構成できる。カーソルの表示位置がチャネル番号ＣＨｉの動画像情報の表示枠内に入っていると判断した場合にはステップＳ１６に移行する。
【００３４】
ステップＳ１６では、チャネル番号ＣＨｉの動画像情報に対応する音声データを音声出力装置１３０に出力する。
ステップＳ１３において、カーソルの表示位置がチャネル番号ＣＨｉの動画像情報の表示枠内に入っていないと判断した場合には、ステップＳ１４に移行する。
【００３５】
ステップＳ１４では、変数ｉの値が表示されている動画像情報数ｎに到達したか否かを判別する。変数ｉ＝表示チャネル数ｎである場合にはステップＳ１１に移行し、そうでない場合にはステップＳ１５に移行する。
ステップＳ１５では変数ｉの値をインクリメントしステップＳ１３に移行する。
【００３６】
このように構成した場合、たとえばマウスカーソルの表示位置が動画像情報のウィンドウ上にない場合であっても、ウィンドウの近傍にあることを認識して、その動画像情報に対応する音声データを出力するように構成できる。ユーザは、マウスやトラックボール、その他のポインティングデバイスを用いてカーソルを移動させ、希望する動画像情報のウィンドウにカーソルを近づけることで、その音声データを聞くことができ、動画像情報の内容を容易に認識することが可能となる。
〈変形例１〉
カーソルの表示位置に最も近い動画像情報を選択して音声データを出力するように構成することも可能である。この場合のフローチャートを図７に示す。
【００３７】
ステップＳ２１では、変数ｉの値を初期化する。
ステップＳ２２では、カーソル位置情報の読み込みを行う。
ステップＳ２３では、カーソルの表示位置とチャネル番号ＣＨｉの動画像情報の表示位置との距離ｄｉを算出する。この距離ｄｉは、動画像情報を表示しているウィンドウの中心座標とカーソルの中心座標との間の距離とすることも可能であり、また動画像情報を表示しているウィンドウ枠とカーソルの中心座標との最短距離とすることも可能である。
【００３８】
ステップＳ２４では、変数ｉの値が表示されている動画像情報数ｎに到達したか否かを判別する。変数ｉ＝表示チャネル数ｎである場合にはステップＳ２６に移行し、そうでない場合にはステップＳ２５に移行する。
ステップＳ２５では、変数ｉの値をインクリメントしステップＳ２３に移行する。
【００３９】
ステップＳ２６では、動画像情報の表示位置とカーソルの表示位置との間の距離ｄｉのうち最小値を判定し、これに対応するチャネルＣＨｉの動画像情報を選択画像に決定する。
ステップＳ２７では、選択された動画像情報に対応する音声データの出力を行う。
【００４０】
このように構成した場合、動画像情報を表示するウィンドウの近傍に表示枠を設けるためのテーブルを用意する必要がなく、カーソルの表示位置に最も近い動画像情報に対応する音声データを出力するように構成できる。
〈変形例２〉
音声データの出力を行っている動画像情報について、その表示ウィンドウの枠の色を変更したり、選択されていない動画像情報の色調を変更するなどにより、選択されたチャネルを認識できるように構成することも可能である。
〈変形例３〉
動画像情報の表示位置とカーソルの表示位置との間の距離ｄｉに反比例するように、各動画像情報に対応する音声データを増幅し、各音声データを合成して￥出力するように構成することも可能である。
【００４１】
カーソルの表示位置の中心座標を（ＣｕＸ，ＣｕＹ）、チャネルＣＨｉの動画像情報の中心座標（ＣＸｉ，ＣＹｉ）としこれらの座標間の距離ｄｉとすると、
ｄｉ＝（（ＣｕＸ−ＣＸｉ）２＋（ＣｕＹ−ＣＹｉ）２）１／２
で計算することができる。この距離ｄｉを用いてその動画像情報に対応する音声データの増幅率ＣＨｉｇ［ｄＢ］を、
ＣＨｉｇ［ｄＢ］＝ａ・ｄｉ（ただし、ａ＜０の定数）
で設定する。
【００４２】
このことにより、カーソル表示位置に近い動画像情報の音声データは大きな音量で出力され、カーソル表示位置から遠い動画像情報の音声データは小さい音量で出力されることとなる。したがって、マウスなどのポインティングデバイスを用いてカーソルを近づけた動画像情報の音声データの音量が大きくなり、その動画像情報の内容把握を容易にするとともに、他の動画像情報についても音量が小さいながらも音声データの出力を行っているため、内容把握の助けとすることが可能である。
〈変形例４〉
カーソルの表示位置から見た動画像情報の表示位置の方向に関する方向情報を算出し、音声出力装置１３０が生成する音像空間内に方向情報と距離情報に基づいて動画像情報に対応する音声データの音像を定位するように構成することも可能である。
【００４３】
前述したように、カーソルの表示位置および動画像情報の表示位置は、それぞれ表示装置上の座標で表すことが可能であり、この座標を用いてカーソルから見た動画像情報の表示位置の方向情報を算出することが可能である。このような方向情報と距離情報ｄｉを用いて、音声出力装置１３０が生成する音像空間内に音声データの音像を定位することが可能となる。ただし、この場合、音声出力装置１３０は２以上のスピーカを備え、各スピーカから出力される音声による音像空間が生成されるように各スピーカからの出力が制御される必要がある。
【００４４】
たとえば、カーソルの中心座標（ＣｕＸ，ＣｕＹ）、チャネルＣＨｉの中心座標（ＣＸｉ，ＣＹｉ）とし、Ｘ軸方向の距離ＣＸｉｄを、
ＣＸｉｄ＝ＣｕＸ−ＣＸｉ
として算出する。このＸ軸方向の距離ＣＸｉｄを用いて、左右のスピーカに出力する音量を決定して出力することにより、音像の定位を行うことが可能となる。
【００４５】
このような構成とすることにより、表示装置１２０の動画像情報の表示位置と音声出力装置１３０から出力される音声データの位置との間に整合性を持たせることができ、動画像情報の内容把握を促すことが容易になる。
〔第２実施形態〕
本発明の第２実施形態の制御ブロック図を図８に示す。
【００４６】
この情報処理装置１５０は、動画像源２００から複数の動画像情報を取得する動画像表示制御手段１０１を備えている。動画像情報表示制御手段１０１は、第１実施形態と同様に、予め設定された位置情報テーブルにしたがって各動画像情報の表示位置を決定し、この動画像位置情報と動画像情報とを出力する。
表示画像生成手段１０４は、第１実施形態と同様に、ＶＲＡＭなどの画像出力用バッファを備え、複数の動画像情報をその位置情報に基づいて配置し画像出力を行う。
【００４７】
動画像表示制御手段１０１からの動画像位置情報は動画像選択手段１０８に入力される。動画像選択手段１０８は、複数のチャネルの動画像情報を所定の周期で選択するようなアルゴリズムを有している。たとえば、ひとつのチャネル番号を選択してこの動画像情報に対応する音声データを選択するための音声選択情報を出力し、一定時間経過する毎にチャネル番号順に選択するチャネル番号を切り換えていくように構成できる。
【００４８】
動画像選択手段１０８から出力される音声出力選択情報は音声出力選択手段１０７に入力される。音声出力選択手段１０７は、音声出力選択情報に基づいて選択されているチャネルの動画像情報に対応する音声データを音声出力装置１３０に出力する。
表示されている動画像情報を順に選択し、選択された動画像情報に対応する音声データを一定時間出力するような構成のアルゴリズムを図９のフローチャートに示す。
【００４９】
ステップＳ３１では、変数ｉの値を初期化する。
ステップＳ３２では、タイマを初期化してこのタイマによる経過時間のカウントを開始する。このタイマは、選択されたチャネルの動画像情報に対応する音声データを出力する時間を計時するものである。
ステップＳ３３では、チャネルＣＨｉの画像情報に対応する音声データを音声出力装置１３０に出力する。
【００５０】
ステップＳ３４では、タイマのカウント値が所定値に達したか否かを判別する。タイマのカウント値が予め設定されている所定値に到達したと判断した場合にはステップＳ３５に移行する。
ステップＳ３５では、変数ｉの値をインクリメントし、次のチャネル番号の動画像情報を選択する。
【００５１】
ステップＳ３６では、変数ｉの値が表示を行っているチャネル数ｎを超えたか否かを判別する。変数ｉの値がチャネル数ｎを超えていないと判断した場合にはステップＳ３２に移行し、変数ｉの値がチャネル数ｎを超えたと判断した場合にはステップＳ３１に移行する。
動画像選択手段１０８がこのようなアルゴリズムにしたがって動画像情報を選択し、選択した動画像情報に対応する音声データを出力するように構成することで、周期的に選択する動画像情報を切り換えてそれに対応する音声データを一定時間出力することができる。ユーザは、各動画像情報をポインティングデバイスなどで指定する作業なしで、各動画像情報に対応する音声データを周期的に認識することが可能であり、各動画像情報の内容を把握することが容易となる。
〔第３実施形態〕
本発明の第３実施形態の制御ブロック図を図１０に示す。
【００５２】
この情報処理装置１６０は、動画像源２００から複数の動画像情報を取得する動画像表示制御手段１０１を備えている。動画像情報表示制御手段１０１は、第１実施形態と同様にして各動画像情報の表示位置を決定し、この動画像位置情報と動画像情報とを出力する。
カーソル位置決定手段１０２は、マウス、トラックボール、タッチパッド、キーボード、その他のポインティングデバイスで構成される入力デバイス１４０により入力されるカーソル指示情報を受け付け、このカーソル指示情報と現在のカーソルの表示位置とに基づいて次のカーソル位置情報を算出しこれを出力する。
【００５３】
カーソル位置決定手段１０２から出力されるカーソル位置情報はカーソル画像生成手段１０３に入力される。カーソル画像生成手段１０３は、カーソル位置情報に基づいてカーソル画像情報を生成しこれを出力する。
動画像表示制御手段１０１から出力される動画像位置情報とカーソル位置決定手段１０２から出力されるカーソル位置情報は距離情報生成手段１０５に入力される。距離情報生成手段１０５は、動画像位置情報とカーソル位置情報に基づいて各動画像情報の表示位置とカーソルの表示位置との距離を算出する。この各動画像情報の表示位置とカーソルの表示位置との距離は、動画像情報の中心位置とカーソルの中心位置との間の距離とすることができる。また、カーソルが動画像情報のウィンドウ内に位置する場合には、その距離を”０”に設定するように構成できる。
【００５４】
距離情報生成手段１０５で生成された距離情報は動画像選択手段１０６に入力される。動画像選択手段１０６では、距離情報生成手段１０５で生成された距離情報に基づいて、どの動画像情報に対応する音声データを出力するかを決定する。たとえば、各動画像情報の距離情報のうち最も距離の値が小さい動画像情報を選択するように構成できる。
【００５５】
動画像選択手段１０６は、選択された動画像情報に基づいて音声出力選択情報を音声出力選択手段１０７に出力する。音声出力選択手段１０７は、動画像源２００からの複数の動画像情報のうち、音声出力選択情報で設定される動画像情報に対応する音声データを選択的に取得し、これを音声出力装置１３０に出力する。
【００５６】
音声出力選択手段１０７から出力される音声データは、音声認識手段１０９に入力される。音声認識手段１０９は、入力される音声データから意味のある言葉を認識してこれを抽出し文字情報に変換するものである。
音声認識手段１０９で変換された文字情報は認識文字表示手段１１０に入力される。認識文字表示手段１１０は、音声認識手段１０９から入力される文字情報に基づいて表示装置１２０上に表示する文字データを生成し表示画像生成手段１０４に出力する。
【００５７】
動画像表示制御手段１０１から出力される動画像情報と動画像位置情報、カーソル画像生成手段１０３から出力されるカーソル画像情報および認識文字表示手段１１０から出力される文字データは、表示画像生成手段１０４に入力される。表示画像生成手段１０４は、ＶＲＡＭなどの画像出力用バッファを備え、複数の動画像情報をその位置情報に基づいて配置し、カーソル画像および文字データを合成して表示装置１２０に出力する。
【００５８】
ここで、認識文字表示手段１１０から出力される文字データは、対応する動画像情報の近傍に表示するように構成することが可能であり、どの動画像情報から得た文字データであるかを示す情報を表示装置１２０上に明示するような構成とすることも可能である。
また、選択されたチャネルの動画像情報に対応する音声データから取得した文字データを表示し、音声出力装置１３０から音声データの出力を行わない構成とすることも可能である。
【００５９】
この場合の動作について図１１に示すフローチャートに基づいて説明する。
ステップＳ４１では、変数ｉの値を初期化する。
ステップＳ１２では、カーソル位置情報の読み込みを行う。
ステップＳ１３では、カーソルの表示位置がチャネル番号ＣＨｉの動画像情報の表示枠内に入っているか否かを判別する。この場合、第１実施形態と同様に、動画像情報を表示しているウィンドウの周囲に所定の距離範囲で表示枠を設定し、この表示枠内にカーソルが入った場合にその動画像情報が選択されたと判断するように構成できる。カーソルの表示位置がチャネル番号ＣＨｉの動画像情報の表示枠内に入っていると判断した場合にはステップＳ４４に移行する。
【００６０】
ステップＳ４４では、チャネル番号ＣＨｉの動画像情報に対応する音声データを音声出力装置１３０に出力する。
ステップＳ４５では、チャネル番号ＣＨｉの動画像情報に対応する音声データから意味のある言葉を認識し文字データに変換する。
ステップＳ４６では、認識した文字データを表示画像生成手段１０４に送出し、表示装置１２０上に表示する。
【００６１】
ステップＳ４３において、カーソルの表示位置がチャネル番号ＣＨｉの動画像情報の表示枠内に入っていないと判断した場合には、ステップＳ４７に移行する。
ステップＳ４７では、変数ｉの値が表示されている動画像情報数ｎに到達したか否かを判別する。変数ｉ＝表示チャネル数ｎである場合にはステップＳ４１に移行し、そうでない場合にはステップＳ４８に移行する。
【００６２】
ステップＳ４８では変数ｉの値をインクリメントしステップＳ４３に移行する。
このように構成した場合には、選択されたチャネルの動画像情報に対応する音声データに含まれる意味のある言葉を視覚的に認識することが可能となり、動画像情報の内容把握を容易にすることができる。
〈変形例〉
第３実施形態の変形例のブロック図を図１２に示す。
【００６３】
この情報処理装置１７０では、音声認識手段１０９および認識文字表示手段１１０が表示するチャネル数だけ設けられており、それぞれ各チャネルの動画像情報に対応する音声データから意味のある言葉を抽出して文字データに変換しこれを表示画像生成手段１０４に入力し、表示装置１２０上に表示する構成となっている。
【００６４】
各文字データはそれぞれ対応する動画像情報の表示位置の近傍に表示されるように構成することが可能であり、文字データのみをリスト表示するように構成することも可能である。
この場合には、各動画像情報に対応する音声データから抽出された言葉を表示装置１２０上にそれぞれ表示することが可能となり、各動画像情報の内容把握を容易にすることができる。
〔第４実施形態〕
本発明の第４実施形態の制御ブロック図を図１３に示す。
【００６５】
この情報処理装置１８０は、動画像源２００から複数の動画像情報を取得する動画像表示制御手段１０１を備えている。動画像情報表示制御手段１０１は、第１実施形態と同様にして各動画像情報の表示位置を決定し、この動画像位置情報と動画像情報とを出力する。
カーソル位置決定手段１０２は、マウス、トラックボール、タッチパッド、キーボード、その他のポインティングデバイスで構成される入力デバイス１４０により入力されるカーソル指示情報を受け付け、このカーソル指示情報と現在のカーソルの表示位置とに基づいて次のカーソル位置情報を算出しこれを出力する。
【００６６】
カーソル位置決定手段１０２から出力されるカーソル位置情報はカーソル画像生成手段１０３に入力される。カーソル画像生成手段１０３は、カーソル位置情報に基づいてカーソル画像情報を生成しこれを出力する。
動画像表示制御手段１０１から出力される動画像位置情報とカーソル位置決定手段１０２から出力されるカーソル位置情報は距離情報生成手段１０５に入力される。距離情報生成手段１０５は、動画像位置情報とカーソル位置情報に基づいて各動画像情報の表示位置とカーソルの表示位置との距離を算出する。この各動画像情報の表示位置とカーソルの表示位置との距離は、動画像情報の中心位置とカーソルの中心位置との間の距離とすることができる。また、カーソルが動画像情報のウィンドウ内に位置する場合には、その距離を”０”に設定するように構成できる。
【００６７】
距離情報生成手段１０５で生成された距離情報は動画像選択手段１０６に入力される。動画像選択手段１０６では、距離情報生成手段１０５で生成された距離情報に基づいて、どの動画像情報に対応する音声データを出力するかを決定する。たとえば、各動画像情報の距離情報のうち最も距離の値が小さい動画像情報を選択するように構成できる。
【００６８】
動画像選択手段１０６は、選択された動画像情報に基づいて音声出力選択情報を音声出力選択手段１０７に出力する。音声出力選択手段１０７は、動画像源２００からの複数の動画像情報のうち、音声出力選択情報で設定される動画像情報に対応する音声データを選択的に取得し、これを音声出力装置１３０に出力する。
【００６９】
音声出力選択手段１０７から出力される音声データは、音声認識手段１０９に入力される。音声認識手段１０９は、入力される音声データから意味のある言葉を認識してこれを抽出し文字情報に変換するものである。
音声認識手段１０９で変換された文字情報は認識文字表示手段１１０に入力される。認識文字表示手段１１０は、音声認識手段１０９から入力される文字情報に基づいて表示装置１２０上に表示する文字データを生成し表示画像生成手段１０４に出力する。
【００７０】
音声認識手段１０９から出力される文字情報はホームページ検索手段１１１に入力される。ホームページ検索手段１１１はインターネット接続手段１１３を介してインターネットにアクセスを行い、音声認識手段１０９から取得した文字情報をキーワードとしてインターネット上で検索可能なホームページを検索する。ホームページの検索には、ＹＡＨＯＯ、ｇｏｏ、ｇｏｏｇｌｅなどの検索サイトに接続して検索結果を受信するように構成することが可能である。検索結果はインターネット接続手段１１３を介してホームページ検索手段１１１で受信され、ホームページ表示手段１１２に送出される。
【００７１】
ホームページ表示手段１１２は、検索結果から得られたホームページのＵＲＬにアクセスを行い、ホームページの情報を取得して表示画像生成手段１０４に出力する。ホームページ表示手段１１２は、ＩｎｔｅｒｎｅｔＥｘｐｌｏｒｅｒやＮｅｔｓｃａｐｅ Ｎａｖｉｇａｔｏｒなどのウェブブラウザで構成することが可能である。また、ホームページ情報の取得はインターネット接続手段１１３を介してインターネットにアクセスを行うことで可能となる。
【００７２】
動画像表示制御手段１０１から出力される動画像情報と動画像位置情報、カーソル画像生成手段１０３から出力されるカーソル画像情報、認識文字表示手段１１０から出力される文字データおよびホームページ表示手段１１２から出力されるホームページ情報は、表示画像生成手段１０４に入力される。表示画像生成手段１０４は、ＶＲＡＭなどの画像出力用バッファを備え、複数の動画像情報をその位置情報に基づいて配置し、カーソル画像、文字データおよびホームページ情報を合成して表示装置１２０に出力する。
【００７３】
この場合の動作について、図１４に示すフローチャートに基づいて説明する。
ステップＳ５１では、変数ｉの値を初期化する。
ステップＳ５２では、カーソル位置情報の読み込みを行う。
ステップＳ５３では、カーソルの表示位置がチャネル番号ＣＨｉの動画像情報の表示枠内に入っているか否かを判別する。この場合、第１実施形態と同様に、動画像情報を表示しているウィンドウの周囲に所定の距離範囲で表示枠を設定し、この表示枠内にカーソルが入った場合にその動画像情報が選択されたと判断するように構成できる。カーソルの表示位置がチャネル番号ＣＨｉの動画像情報の表示枠内に入っていると判断した場合にはステップＳ５４に移行する。
【００７４】
ステップＳ５４では、チャネル番号ＣＨｉの動画像情報に対応する音声データを音声出力装置１３０に出力する。
ステップＳ５５では、チャネル番号ＣＨｉの動画像情報に対応する音声データから意味のある言葉を認識し文字データに変換する。
ステップＳ５６では、認識した文字データを表示画像生成手段１０４に送出し、表示装置１２０上に表示する。
【００７５】
ステップＳ５７では、音声認識により得られた文字データからホームページ検索を行う。
ステップＳ５８では、ホームページ検索を行った検索結果に基づいて、ホームページ情報を取得し、これを表示装置１２０上に表示する。
ステップＳ５３において、カーソルの表示位置がチャネル番号ＣＨｉの動画像情報の表示枠内に入っていないと判断した場合には、ステップＳ５９に移行する。
【００７６】
ステップＳ５９では、変数ｉの値が表示されている動画像情報数ｎに到達したが否かを判別する。変数ｉ＝表示チャネル数ｎである場合にはステップＳ５１に移行し、そうでない場合にはステップＳ６０に移行する。
ステップＳ６０では変数ｉの値をインクリメントしステップＳ５３に移行する。
【００７７】
このように構成した場合には、動画像情報に対応する音声データから得られる言葉から関連ホームページの情報を取得してこれを表示装置上に表示させることが可能となる。このことにより、各動画像情報の関連情報を容易に取得することができ、種々のデータを簡単に取得することができる。
【００７８】
【産業上の利用可能性】
本発明によれば、表示装置に表示される複数の動画像情報から特定の動画像情報に対応する音声データを容易に認識することができ、その動画像情報の内容の把握が容易になる。
【図面の簡単な説明】
【図１】  本発明の概略構成を示すブロック図である。
【図２】  動画像位置情報テーブルの一例を示す説明図である。
【図３】  画面構成の一例を示す説明図である。
【図４】  第１実施形態の制御ブロック図である。
【図５】  第１実施形態の制御フローチャートである。
【図６】  動画像一情報テーブルの他の例を示す説明図である。
【図７】  第１実施形態の変形例の制御フローチャートである。
【図８】  第２実施形態の制御ブロック図である。
【図９】  第２実施形態の制御フローチャートである。
【図１０】  第３実施形態の制御ブロック図である。
【図１１】  第３実施形態の制御フローチャートである。
【図１２】  第３実施形態の変形例の制御ブロック図である。
【図１３】  第４実施形態の制御ブロック図である。
【図１４】  第４実施形態の制御フローチャートである。
【図１】
0003910537.tif 000002
【図２】
0003910537.tif 000003
【図３】
0003910537.tif 000004
【図４】
0003910537.tif 000005
【図５】
0003910537.tif 000006
【図６】
0003910537.tif 000007
【図７】
0003910537.tif 000008
【図８】
0003910537.tif 000009
【図９】
0003910537.tif 000010
【図１０】
0003910537.tif 000011
【図１１】
0003910537.tif 000012
【図１２】
0003910537.tif 000013
【図１３】
0003910537.tif 000014
【図１４】
0003910537.tif 000015