(57)【要約】インタラクティブ・ビデオ装置、及びその装置によって用いられる画像に字幕を付ける方法が開示される。字幕ソフトウェアモジュールは、必要な字幕像を作成し、この字幕像をビデオ画像に重ねる。このソフトウェアは、制御部によって選択された字幕内容、字体、及び色に関する情報に応じて字幕のドットマトリックス像を事前に作成し、この得られた像を選択的にローカル端末又は遠隔端末において画像に重ねることによって、単一最終画像信号を形成する。
2005506771.tif 000002
【特許請求の範囲】
【請求項１】
ユーザによって設定される作成する字幕の情報が制御層によって受信される、インタラクティブ・ビデオ装置において用いられる字幕付け方法であって、
Ａ．字幕作成モジュールを設け、前記制御層から前記字幕情報を受信し、受信した前記情報に応じて透明な背景を備えた字幕画像を作成することと、
Ｂ．字幕付けモジュールを設け、前記字幕画像をデジタルサービス画像上に重ね、ローカル側で表示されるか遠隔側へ送信される字幕の付いた画像を得ることと、
を含む、前記字幕付け方法。
【請求項２】
前記作成する字幕の情報が、前記字幕の全ての文字の地域コードと、前記字幕の位置情報と、前記字幕のサイズ情報と、前記字幕の色情報とを含む、請求項１に記載の字幕付け方法。
【請求項３】
前記作成する字幕の情報が、前記作成する字幕の全ての文字の地域コードを含み、該地域コードが、
文字データベースを作成するためのソフトウェアを用いるステップと、ベクトルフォントを選択するステップと、必要な文字サイズに応じてソフトウェアによって文字を１つずつＰＣスクリーン上に表示するステップと、表示結果をドットマトリックス画像として記録し、該ドットマトリックス画像を文字データベースファイルとして特定形式で格納するステップと、
によって作成される、請求項１に記載の字幕付け方法。
【請求項４】
前記作成する字幕の情報が、前記字幕の色情報を含み、
前記字幕作成モジュールが、前記字幕の該色情報に応じて文字の色を設定又は変更し、前記字幕画像の背景を透明のままにする、
請求項１に記載の字幕付け方法。
【請求項５】
前記ステップＡが、前記字幕作成モジュールが前記制御層から前記字幕情報を受信した後、全ての文字のドットマトリックス画像を読み取り、前記制御層において選択された字幕の表示位置及び内容に応じて、該ドットマトリックス画像を前記透明な背景と組み合わせることを含む、請求項１に記載の字幕付け方法。
【請求項６】
前記制御層によってローカル側又は遠隔側において前記字幕画像を選択して重ねることをさらに含み、
前記制御層によって該ローカル側において前記字幕画像を重ねる場合には、ローカルに受信されたサービスの復号画像上に前記字幕画像を重ね、該ローカル側に出力して表示することを含み、
前記制御層によって該遠隔側において前記字幕画像を重ねる場合には、ローカルに送信されたサービスの符号化前の画像上に前記字幕画像を重ね、符号化した後、該遠隔側に送信することを含む、
請求項１に記載の字幕付け方法。
【請求項７】
ユーザによって設定される作成する字幕の情報を受信するための制御層を有するインタラクティブ・ビデオ装置であって、字幕作成モジュール及び字幕付けモジュールを含み、
前記字幕作成モジュールが、前記制御層から前記字幕情報を受信し、受信した前記情報に応じて透明な背景を備えた字幕画像を作成し、
前記字幕付けモジュールが、前記字幕画像をデジタルサービス画像上に重ね、ローカル側で表示されるか遠隔側へ送信される字幕の付いた画像を得る、
前記インタラクティブ・ビデオ装置。
【請求項８】
前記字幕作成モジュールが、前記制御層から前記字幕情報を受信した後、全ての文字のドットマトリックス画像を読み取り、前記制御層において選択された字幕の表示位置及び内容に応じて、該ドットマトリックス画像を前記透明な背景と組み合わせる、請求項７に記載のインタラクティブ・ビデオ装置。
【請求項９】
前記字幕付けモジュールが、ＣＯＤＥＣ（コーダ・デコーダ）ユニット内で且つ画像ＣＯＤＥＣモジュールの前にあり、前記字幕作成モジュールが、該ＣＯＤＥＣユニット内にあると共に前記字幕付けモジュールと接続している、請求項７に記載のインタラクティブ・ビデオ装置。
【請求項１０】
前記字幕付けモジュールが、第１の字幕付けモジュール及び第２の字幕付けモジュールを含み、前記字幕作成モジュールが、第１の字幕作成モジュール及び第２の字幕作成モジュールを含み、
前記第１の字幕付けモジュールが、エンコーダ内にあり、画像符号化モジュールの前にあるサービスチャネルに沿って位置し、
前記第１の字幕作成モジュールが、前記エンコーダ内にあり、前記第１の字幕付けモジュールと接続しており、
前記第２の字幕付けモジュールが、デコーダ内にあり、画像復号モジュールの後ろにあるサービスチャネルに沿って位置し、
前記第２の字幕作成モジュールが、前記デコーダ内にあり、前記第２の字幕付けモジュールと接続している、
請求項７に記載のインタラクティブ・ビデオ装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、広く、インタラクティブ（双方向）・ビデオ装置に対する字幕（キャプション）付け方法に関し、より具体的には、インタラクティブ・ビデオ装置、及びこのインタラクティブ・ビデオ装置において用いられるソフトウェア字幕付け方法に関する。この方法によれば、テレビ会議システムにおける字幕を簡単に作成することができ、字幕信号を送信のための画像信号と合わせることができる。
【背景技術】
【０００２】
テレビ会議システムでは、通常、画像上に文字を重ねる必要があり、会合場所名などのようなこの文字のことを字幕と呼ぶ。従来、図１に示されているように、字幕作成装置のようなハードウェア回路が用いられてきた。この字幕付け装置は、テレビ会議装置とテレビセットとの間に直列に接続し、必要な字幕を作成し、この字幕を画像信号に重ねてテレビセットに表示する。
【０００３】
この方法の欠点は、以下のとおりである。余分な字幕付けハードウェア装置を追加する必要があり、システムの複雑性及びコストが高くなる。また、重ねた字幕は、その場所の（ローカルな）テレビセットにのみ表示することができ、テレビ会議システムにおける他の遠隔のテレビセットには送信して表示することができない。従って、不便である。
【発明の開示】
【発明が解決しようとする課題】
【０００４】
本発明の目的は、インタラクティブ・ビデオシステムにおいて字幕を作成して重ねる方法を提供することである。この方法によれば、ハードウェア装置を減らしシステムのコストを下げることができると共に、字幕をより簡単に作成して重ねることができる。また、この字幕は、遠隔送信のためのサービス画像と合わせることができる。
【課題を解決するための手段】
【０００５】
本発明の基本的な考えは、以下のとおりである。字幕付けソフトウェアが、作成する字幕の情報を制御層から受信し、この字幕情報を用いて、透明な背景を備えた字幕画像を作成し、この字幕画像をサービス画像上に重ねることにより、字幕の付いた画像を得て表示又は送信する。
【０００６】
本発明は、ユーザによって設定される作成する字幕の情報が制御層によって受信される、インタラクティブ・ビデオ装置において用いられる字幕付け方法であって、
Ａ．字幕作成モジュールを設け、前記制御層から前記作成する字幕の情報を受信し、受信した前記情報に応じて透明な背景を備えた字幕画像を作成することと、
Ｂ．字幕付けモジュールを設け、前記字幕画像をデジタルサービス画像上に重ね、ローカル側で表示されるか遠隔側へ送信される字幕の付いた画像を得ることと、
を含む、前記字幕付け方法を提供する。
【０００７】
前記制御層が前記字幕作成モジュールに送信する前記作成する字幕の情報は、前記字幕の全ての文字の地域コードと、前記字幕の位置情報と、前記字幕のサイズ情報と、前記字幕の色情報とを含むのが良い。
【０００８】
前記制御層が前記字幕作成モジュールに送信する前記作成する字幕の情報は、前記作成する字幕の全ての文字の地域コードを含み、該地域コードは、文字データベースを作成するためのソフトウェアを用いるステップと、ベクトルフォントを選択するステップと、必要な文字サイズに応じてソフトウェアによって文字を１つずつＰＣスクリーン上に表示するステップと、表示結果をドットマトリックス画像として記録し、該ドットマトリックス画像を文字データベースファイルとして特定形式で格納するステップと、によって作成されるのが良い。
【０００９】
前記制御層が前記字幕作成モジュールに送信する前記作成する字幕の情報は、前記字幕の色情報を含み、
前記字幕作成モジュールは、前記字幕の該色情報に応じて文字の色を設定又は変更し、前記字幕画像の背景を透明のままにするのが良い。
【００１０】
前記ステップＡは、前記字幕作成モジュールが前記制御層から前記字幕情報を受信した後、全ての文字のドットマトリックス画像を読み取り、前記制御層において選択された字幕の表示位置及び内容に応じて、該ドットマトリックス画像を前記透明な背景と組み合わせることを含むのが良い。
【００１１】
前記制御層は、ローカル側又は遠隔側において前記字幕画像を選択して重ねるのが良い。該ローカル側において選択する場合には、ローカルに受信されたサービス画像を復号後、その上に前記字幕画像を重ね、該ローカル側に出力して表示する。該遠隔側において選択する場合には、ローカルに送信されたサービス画像を符号化する前に、その上に前記字幕画像を重ね、符号化した後、該遠隔側に送信する。
【００１２】
また、本発明は、ユーザによって設定される作成する字幕の情報を受信するための制御層を有するインタラクティブ・ビデオ装置も提供する。このインタラクティブ・ビデオ装置は、字幕作成モジュール及び字幕付けモジュールを含む。前記字幕作成モジュールは、前記制御層から前記作成する字幕の情報を受信し、受信した前記情報に応じて透明な背景を備えた字幕画像を作成し、前記字幕付けモジュールは、前記字幕画像をデジタルサービス画像上に重ね、ローカル側で表示されるか遠隔側へ送信される字幕の付いた画像を得る。
【００１３】
前記字幕作成モジュールは、前記制御層から前記字幕情報を受信した後、全ての文字のドットマトリックス画像を読み取り、前記制御層において選択された字幕の表示位置及び内容に応じて、該ドットマトリックス画像を前記透明な背景と組み合わせるのが良い。
【００１４】
前記字幕付けモジュールは、ＣＯＤＥＣ（コーダ・デコーダ）ユニット内で且つ画像ＣＯＤＥＣモジュールの前にあり、前記字幕作成モジュールは、該ＣＯＤＥＣユニット内にあると共に前記字幕付けモジュールと接続しているのが良い。
【００１５】
前記字幕付けモジュールは、第１の字幕付けモジュール及び第２の字幕付けモジュールを含み、前記字幕作成モジュールは、第１の字幕作成モジュール及び第２の字幕作成モジュールを含み、
前記第１の字幕付けモジュールは、エンコーダ内にあり、画像符号化モジュールの前にあるサービスチャネルに沿って位置し、
前記第１の字幕作成モジュールは、前記エンコーダ内にあり、前記第１の字幕付けモジュールと接続しており、
前記第２の字幕付けモジュールは、デコーダ内にあり、画像復号モジュールの後ろにあるサービスチャネルに沿って位置し、
前記第２の字幕作成モジュールは、前記デコーダ内にあり、前記第２の字幕付けモジュールと接続しているのが良い。前記第２の字幕作成モジュールは、前記デコーダ内にセットされ、第２の字幕追加モジュールと接続されている。
【発明の効果】
【００１６】
本発明の利点は、以下のとおりである。
１．字幕作成装置が字幕付けソフトウェアに換わるので、明らかにハードウェア装置が減りシステムのコストが下がる。
２．字幕画像は第１フレームが表示されるときにのみ作成され、同じ字幕を付けるその後のその他全てのフレームに関しては、単純な字幕重ね作業のみが必要とされ、フレーム画像毎に走査する必要はないため、特にフルスクリーン字幕の場合には、処理が高速化される。
３．この方法によれば、重ねる字幕とサービス画像とが合わされて字幕画像付き画像とされて送信されるので、海外の端末でも中国語字幕を表示することができる。
４．この字幕付けソフトウェアは、テレビ会議ハードウェア・プラットフォームにセットされるので、字幕重ね作業は、ローカル側でも遠隔側でも自由に選択して行うことができる。これにより、字幕を遠隔側に送信して表示することができない、という欠点が解決される。
【発明を実施するための最良の形態】
【００１７】
図面及び実施形態を参照しながら、本発明をより詳細に説明する。
【００１８】
図２において、字幕付けソフトウェアモジュールによって作成された字幕画像はそれぞれ、スイッチを介して、エンコーダの字幕付け部又はデコーダの字幕付け部に送信される。ローカル側が選択された場合、スイッチはデコーダに接続され、字幕画像はスイッチを介してデコーダの字幕付け部に送信される。その後、この字幕画像は、デコーダによって復号されたサービス画像に重ねられ、この合わされた画像は、テレビセットに送信されて表示される。遠隔側が選択された場合、スイッチはエンコーダに接続され、字幕画像はスイッチを介してエンコーダの字幕付け部に送信される。その後、この字幕画像は、カメラから得られた画像に重ねられ、字幕画像と重ねられたこの画像は、エンコーダに送信されて符号化され、次に、伝送チャネルに送信されて遠隔側に送信される。
【００１９】
きれいで大きなフォントにするために、字幕は、通常の格子文字データベースではなく、ベクトル文字データベースから作成される。必要に応じて、文字フォント（ウィンドウズ（登録商標）の制御層におけるどんな種類のベクトルフォントを用いてもよい）及び文字サイズが選択される。文字は、ソフトウェアによって、１つずつＰＣのスクリーン上に表示することができる。次に、この表示結果はドットマトリックス画像として記録され、異なるフォントの文字と異なるサイズの文字を含む文字データベースが形成される。
【００２０】
制御層において選択された色に応じて、字幕画像の色は直接変更することができるが、字幕画像の背景は透明のままとされる。字幕の色を制御層において配置する場合、色の種類が豊富なカラーパレットを用いて色を選択することができる。字幕の色を変更するソフトウェアは、シンプルで柔軟性がある。
【００２１】
字幕の内部コード及び色情報を設定すると、制御層はこの情報を字幕付けソフトウェアモジュールに送信する。付ける必要のある字幕の数とサイズに応じて、字幕付けソフトウェアモジュールは、まず、サイズがその字幕にぴったりであるＹＵＶ４２０形式画像を作成し、この画像を透明色にする。次に、ドットマトリックス画像の字幕内容と設定した色に応じて、字幕付けソフトウェアモジュールは、順にドットをこのＹＵＶ４２０形式画像に付与し、透明な背景をベースにしたカラー字幕画像を作成する。作成されたこの字幕ドットマトリックス画像は、入力又は出力デジタル画像に重ねられる。字幕画像は、第１フレームが表示されるときにのみ、作成される必要があることは明らかであり、その後のフレームに関しては、単純な重ね作業のみが必要とされ、フレーム毎に字幕ドットマトリックス画像を走査する必要はない。従って、処理が高速化され、特にフルスクリーン字幕の場合には、この方法がより重要である。本発明では重ねる字幕とサービス画像とが合わされるので、中国語字幕（中国における会合場所を含む）を海外の端末に表示することができる。
【００２２】
字幕付けソフトウェアモジュールが字幕の重ね作業を行う際、この重ね作業は、ローカル側で行っても遠隔側で行ってもよい。ローカル側が選択された場合、字幕画像はデコーダに送信され、デコーダは、この字幕画像を復号画像に重ね、この合わされた画像をテレビセットに出力して表示する。遠隔側が選択された場合、字幕画像はエンコーダに送信され、エンコーダは、この字幕画像をサービス画像に重ね、字幕画像と合わされたこの画像を符号化して遠隔側に送信することによって、字幕を遠隔表示することができる。
【００２３】
図３は、字幕付けソフトウェアを利用するシングル・デジタル信号プロセッサ（ＤＳＰ）プラットフォームを備えたテレビ会議端末のブロック図であり、図４は、字幕付けソフトウェアを利用するデュアル・ＤＳＰプラットフォームを備えたテレビ会議端末のブロック図である。基本的な原理は同じである。図３及び図４において、音声処理部及びデータ処理部は、本発明に関係しないので省略されている。
【００２４】
シングル・ＤＳＰプラットフォームの場合には、符号化と復号が１つのＤＳＰによって行われ、デュアル・ＤＳＰプラットフォームの場合には、符号化と復号が別々の２つのＤＳＰによって行われる。
【００２５】
上記は、本発明の単なる実施形態に過ぎず、本発明を制限することを意図したものではない。本発明の精神及び主義を逸脱しない限り、どんな変更物、置換物、及び改良物なども添付の特許請求の範囲内に含まれる。
【図面の簡単な説明】
【００２６】
【図１】従来技術の字幕付け装置及びテレビ会議システムへの接続を示す図である。
【図２】本発明の字幕付け原理を示す図である。
【図３】シングル・ＤＳＰプラットフォームを用いた、本発明の実施形態を示す図である。
【図４】デュアル・ＤＳＰプラットフォームを用いた、本発明の実施形態を示す図である。
【図１】
2005506771.tif 000003
【図２】
2005506771.tif 000004
【図３】
2005506771.tif 000005
【図４】
2005506771.tif 000006
【国際公開パンフレット】
2005506771.tif 000007
2005506771.tif 000008
2005506771.tif 000009
2005506771.tif 000010
2005506771.tif 000011
2005506771.tif 000012
2005506771.tif 000013
2005506771.tif 000014
2005506771.tif 000015
2005506771.tif 000016
2005506771.tif 000017
2005506771.tif 000018
2005506771.tif 000019
【国際調査報告】
2005506771.tif 000020
2005506771.tif 000021
2005506771.tif 000022
2005506771.tif 000023