【手続補正書】
【提出日】平成20年1月31日(2008.1.31)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【書類名】      明細書
【発明の名称】  画像表示装置
【特許請求の範囲】
【請求項１】  画像を記憶する画像メモリと、
文字情報を記憶するファイル画面メモリと、
所定の背景色上に上記文字情報を表したファイル画像を生成するファイル画像生成手段と、
上記画像及び上記ファイル画像を合成して合成画像を生成する画像合成部と、
この画像合成部で生成した合成画像を表示する表示部とを備え、
上記画像合成部は、上記ファイル画像の背景色領域の各画素データおよび該背景色領域が配置される座標と同一座標にある上記画像の各画素データを混合してそれぞれ新たな画素データを生成し、これら新たな画素データと上記文字情報とを合成して上記合成画像を生成することを特徴とする画像表示装置。
【請求項２】  画像は動画像であることを特徴とする請求項１に記載の画像表示装置。
【請求項３】  画像は外部からの受信中の動画像であることを特徴とする請求項１に記載の画像表示装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
この発明は、テレビ電話機能を有する携帯電話等において、画像と文字情報とを合成して表示するための画像表示装置に関するものである。
【０００２】
【従来の技術】
映像のデジタル圧縮技術が普及し、電話回線を用いたテレビ電話装置が実用化されている。電話回線を用いたテレビ電話装置では、特開平６−２５３３０１号公報のように、通話中に通信相手の画像の他に通信中の自画像を同時に表示するものがある。また、特開２０００−２３１２３号公報に記載のテレビ電話装置では、あらかじめ格納された背景画像データを合成表示し、ユーザはテレビ電話通信中に相手画像以外の情報を同時に閲覧することができる。
【０００３】
一方、無線技術を利用した携帯電話において、テレビ電話機能を有する携帯電話が存在する。また、携帯電話の利用形態に関しては、インターネットアクセス機能付き携帯電話の普及により、従来の音声通話のみの利用ではなく、電子メールやＷｅｂブラウザなどの機能を利用した、情報端末としての性格が今後ますます強くなるものと予想される。
【０００４】
【発明が解決しようとする課題】
テレビ電話や、電子メールといった機能を統合した携帯電話の利用形態として、例えば、テレビ電話を使用しながら電子メールにより発信された情報を閲覧することが考えられる。しかし、携帯電話の表示装置は、画面あたりの表示領域が限られているため、特開平６−２５３３０１号公報に記載のテレビ電話装置の画面分割による複数画面の表示方法を行った場合、画像が縮小され、見にくくなる。また、特開２０００−２３１２３号公報記載のテレビ電話装置の画像合成は、背景画像に動画像を貼り付けるため、背景画像に文字情報を表示した場合、これを容易に視認することができない。
【０００５】
本発明は上記の問題に鑑みてなされたもので、限られた画像表示領域を有する情報端末等において、文字情報の視認性を損なうことなく、画像情報と文字情報とを合成して表示するための画像表示装置を提供することを目的とする。
【０００６】
【課題を解決するための手段】
本発明は、画像を記憶する画像メモリと、
文字情報を記憶するファイル画面メモリと、
所定の背景色上に上記文字情報を表したファイル画像を生成するファイル画像生成手段と、
上記画像及び上記ファイル画像を合成して合成画像を生成する画像合成部と、
この画像合成部で生成した合成画像を表示する表示部とを備え、
上記画像合成部は、上記ファイル画像の背景色領域の各画素データおよび該背景色領域が配置される座標と同一座標にある上記画像の各画素データを混合してそれぞれ新たな画素データを生成し、これら新たな画素データと上記文字情報とを合成して上記合成画像を生成するものである
【０００７】
また、画像は動画像であることを特徴とするものである。
【０００８】
さらに、画像は外部からの受信中の動画像であることを特徴とするものである。
【０００９】
【発明の実施の形態】
実施の形態１．
図１は、実施の形態１による画像処理装置を用いて動画像と文字情報とを合成して表示する携帯電話の構成を示すブロック図である。カメラ部１１０は、テレビ電話による通話を行う際、送信側の動画像を撮影する。カメラ部１１０により撮影された動画像は、動画像処理部１９により符号化される。送信側の音声は、マイク１６を介して入力される。入力された音声データは、音声処理部１７により符号化される。符号化された動画像データ、および音声データは、テレビ電話制御部１３により多重化され、通信制御部１１１により通信用ヘッダ情報を付加された後、無線アンテナ１１２により無線網へ送出される。
【００１０】
通信相手から送信されたデータは、無線アンテナ１１２により受信される。通信制御部１１１は、受信データの通信用ヘッダの解析を行う。テレビ電話制御部１３は、受信データから動画像データ、および音声データを多重分離する。分離された動画像データは、動画像処理部１９により復調され、復調された動画像データは動画像メモリ１１に書き込まれる。画像表示部１４は、動画像メモリ１１から動画像データを読み出し、動画像の表示を行う。音声データは音声処理部１７により復調された音声データはスピーカ１５により出力される。
以上の動作を基本動作としてレビ電話通信が行われる。
【００１１】
ファイル画面メモリ１２には、携帯電話間で送信・受信される電子メールや、電話帳などのアプリケーションによって作成されたファイルが保存されている。電子メールや電話帳の内容を閲覧するための操作は、ユーザー操作部１１３において行われる。また、アプリケーション用のアイコン等の簡単な画像もファイル画面メモリ１２に保存される。ここで、ファイル画面メモリ１２から読み出される電子メールや電話帳等の文字情報、およびこれらのアプリケーションにおいて表示されるアイコン等の図形情報を含んだ画像をファイル画像と称す。
【００１２】
上記のように、本実施の形態による携帯電話の画像表示装置において、テレビ電話中に受信される動画像については動画像メモリ１１に記憶され、電子メールなどのファイル画像についてはファイル画面メモリ１２に記憶される。
【００１３】
ユーザー操作部１１３には、ファイル画面メモリ１２に保存されたファイル画像を閲覧する際、ファイル画像のみを表示（非混合）するか、またはファイル画像と動画像とを合成して表示（混合）するかを選択するための混合／非混合選択手段が設けられている。この混合／非混合選択手段は、図２に示すような端末の設定メニュー２１を設けることにより構成するか、または、選択用のキーを端末に設置することにより構成することができる。設定メニュー２１により、混合表示を選択した場合は、動画像とファイル画像とが合成して表示され、ファイルのみを選択した場合は文字情報のみが表示される。
【００１４】
画像合成部１８は、動画像メモリ１１から読み出される動画像と、ファイル画面メモリ１２から読み出されるファイル画像とを合成して表示するための混合処理を行う。混合処理は、同一座標にある動画像、およびファイル画像の画素データとの平均値をＲ，Ｇ，Ｂの各色データ毎に算出し、後述するように、ＲＧＢ１６ビットの画素データを生成することにより行われる。ここで、平均値とは重み付け平均値を含むものであり、所定の重み付けを行うことにより動画像とファイル画像との混合比を調整してもよい。動画像とファイル画像との混合処理は、後述の混合可否情報に基づいて行われる。
【００１５】
図３は、ファイル画像を構成する画素データのデータ構造を示す図である。図３に示すように、１画素は１６ビットで表され、Ｒ，Ｇ，Ｂの各色にそれぞれ５ビットが割り当てられている。最上位ビットＦは、画像合成部４３において、画素データの混合処理を行うか否かを指定する混合可否情報である。ファイル画像の画素データにおいて、最上位ビットＦが１にセットされた場合、これと同一座標上にある動画像の画素データとの混合処理が行われる。これに対し、最上位ビットＦが０の場合、混合処理は行われずファイル画像の画素データのみが表示される。これにより、画像合成部１８において、ファイル画像の画素データの混合可否情報Ｆに基づいて、動画像とファイル画像との合成が画素毎に行われる。
【００１６】
以下、テレビ電話中、動画像上に文字情報を混合表示する際の動作について説明する。
ユーザ操作部１１３において、混合表示が選択されるとファイル画面メモリ１２のファイル画像の全画素データが所定の背景色を表す画素データによっていったん初期化され、背景色の画素データの最上位ビットＦが１にセットされる。背景色の画素データの最上位ビットＦが１にセットされた後、この背景色上に、最上位ビットＦが０にセットされた画素データにより文字情報や図形情報が表される。つまり、ファイル画像においては、Ｆが１にセットされた画素データにより背景色領域が表され、Ｆが０にセットされた画素データにより文字情報が表される。
上記の動作により、背景色領域の画素データの最上位ビットＦが１、文字情報の部分に対応する画素データの最上位ビットＦが０にセットされたファイル画像が生成される。
【００１７】
背景色領域の画素データの最上位ビットＦが１、文字情報部分の画素データの最上位ビットＦが０にセットされたファイル画像は、動画像とともに画像合成部１８に入力される。図４は、動画像とファイル画像との合成方法について説明するための説明図である。図４において、４１は動画像であり、４２は動画像４１に合成されるファイル画像である。
【００１８】
画像合成部１８は、ファイル画像４２の各画素データの最上位ビットＦにより表される混合可否情報に基づいて、動画像とファイル画像との混合処理を行う。ここで、ファイル画像の背景色領域については画素データの最上位ビットＦが１にセットされているため、動画像と混合されるが、文字情報部分については画素データの最上位ビットが０にセットされているため混合処理は行われない。これにより、図４に示すように、背景色と混合されトーンダウンした動画像中に文字情報を表示した画像が出力されるので、動画像とともに文字情報を容易に視認することができる。
【００１９】
一方、図２の端末設定メニュー２１でファイルのみ、つまり非混合表示を選択した場合、ファイル画像の画素データの最上位ビットＦは全て０にセットされ、動画像との混合処理を行うことなくテキスト情報のみが画面表示部１４に表示される。
【００２０】
ファイル画像は、透明色を指定することが可能な透過ＧＩＦファイルにより表された文字情報、または図形情報を背景色上に重ね合わせることにより生成することもできる。ＧＩＦ画像の透過色の部分は描画されないため、この部分については背景色が有効となり、透過色の部分において、動画像とファイル画像の背景色が混合される。
【００２１】
尚、ファイル画像に表示するファイルとして、１画素あたり１ビットの情報をもつ、２階調の１ビットインデックスカラーファイルを選択した場合、ビットがセットされていない部分は描画されないため、初期化された背景色が有効となる。このため、動画像とファイル画像の背景色が混合される。
【００２２】
尚、動画像とファイル画像を混合した際、動画像をトーンダウンし、テキスト情報を視認し易くするため、背景色としては白色、または白色（あるいはグレー）成分を含んだ色を用いることが望ましい。
【００２３】
実施の形態２．
実施の形態２による携帯電話の画像表示装置は、図５に示すように、実施の形態１による携帯電話の画像表示装置において、ファイル画像と合成された動画像（図４に示す）の濃度を調整するための混合比入力手段をユーザ操作部５１３に設けたものである。
【００２４】
本実施の形態による携帯テレビ電話端末において、ユーザはユーザー操作部５１３に設けられた混合比入力手段を介して画素データの混合比を入力することにより、ファイル画像に合成されて表示される動画像の濃度を調整することができる。画像合成部５３は、入力された混合比に基づいて、動画像メモリ５１およびファイル画面メモリ５２により出力される動画像と、ファイル画像との混合処理を行う。
【００２５】
図６に、動画像とファイル画像との混合比を、１：０、３：１、１：１、１：３、０：１とした場合の合成画像６４，６５，６６，６７，６８を示す。ユーザーは、混合比入力手段５１３により上記の混合比を指定する。画像合成部１８は、指定された混合比に対応する重み係数を用いて、ファイル画像、および動画画像の画素データの重み付け平均値を算出することにより混合処理を行う。
いずれの場合においてもファイル画像の文字部分の画素は混合されないため、文字情報を容易に視認することができる。
【００２６】
【発明の効果】
本発明による画像表示装置は、文字情報を所定の背景色上に表したファイル画像を生成するとともに、前記背景領域に対応する各画素データに、前記背景色の領域に前記画像を合成するための情報を与え、前記情報に基づいて前記ファイル画像の画素データと、前記画像の画素データとの平均値を算出することにより新たな画素データを生成するするので、画像上に合成された文字情報を容易に視認することができる。
【図面の簡単な説明】
【図１】  実施の形態１による携帯電話の構成を示すブロック図である。
【図２】  混合／非混合選択手段の構成の一例を示す図である。
【図３】  画素データのデータ構成を示す図である。
【図４】  実施の形態１による画像の合成方法について説明するための説明図である。
【図５】  実施の形態２による携帯電話の構成を示すブロック図である。
【図６】  実施の形態２による画像の合成方法について説明するための説明図である。
【符号の説明】
１１，５１  動画像メモリ、  １２，５２  ファイル画面メモリ、  １３，５３  ユーザ操作部、  １４，５４  画像表示部、  １５，５５  スピーカ、  １６，５６  マイク、  １７，５７  音声処理部、  １８，５８  画像合成部、  １９，５９  動画像処理部、  １１０，５１０  カメラ部、  １１１，５１１  通信制御部、  １１２，５１２  アンテナ。