(57)【要約】【課題】ＴＶカメラで取得した画像データを、人物領域外の高周波成分を除くことで情報量を削減して符号化し、人物領域は高画質化して符号化して、通信先に送信し、通信先において画質処理を行うことなく画像を表示させる事ができるためのＴＶ電話システムを提供する。【解決手段】ＴＶ１に入力された画像に画質調整部１３で人物領域の高画質化と、人物領域外の高周波成分の除去を行い、選択部１４を経由して、エンコード部１５で符号化し、画質処理を行ったことをしめす情報を付加の上、ネットワークＩ／Ｆ１２で送信する。ネットワークＩ／Ｆ１２で受信された画像はデコード部１６で復号化し、画質処理を行ったことをしめす情報が付加されていた場合は、画質調整部１７を経由しないデータを選択部１８で選択し、表示部１９で表示する。【選択図】図２
2011234067.tif 000002
【特許請求の範囲】
【請求項１】
ＴＶカメラと、前記ＴＶカメラと外部バスでつながるＴＶで構成されるシステムであって、前記ＴＶは前記ＴＶカメラから入力される画像に画質処理を行い出力する画質調整部と前記画質調整部から出力される画像を符号化するエンコード部で構成され、前記画質調整部は入力画像中の肌色領域を検出する肌色領域検出部と、検出した前記肌色領域を記録する検出結果記憶部と、前記肌色領域に基づき補正を行う補正部と、平滑化フィルタをかける領域を記録している領域設定記憶部と、前記領域設定記憶部の前記領域に基づいて平滑化フィルタをかけ高周波成分を除去する平滑化フィルタ部と、前記検出結果記憶部に記録された前記肌色領域の肌色領域開始ラインと、前記肌色領域が最大の画素幅から求められる領域の倍のサイズの矩形領域を前記領域設定記憶部に設定する制御部を備えることを特徴とするＴＶ電話システム。
【請求項２】
伝送路を介して双方向に通信を行うＴＶで構成されるシステムであって、前記ＴＶは、送信する画像に画質処理を行う画質調整部と、前記画質調整部で画質調整を行った画像と行っていない画像のどちらかを選択送信し、送信する画像が既に画質調整を行った画像であるかの情報を前記画像とともに送信する選択部と、受信した画像に画質処理を行う画質調整部と、前記画質調整部で画質処理を行った画像と受信した画像のどちらかを、送信側が既に画質を調整したかどうかの情報に基づき選択し出力する選択部と、選択部からの画像を表示する表示部を備えることを特徴とするＴＶ電話システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えば、映像及び音声を送受信するＴＶ電話システムに関するものである。
【背景技術】
【０００２】
近年、遠距離でのコミュニケーションを可能にする電話において、音声の送受信に加えて、お互いの顔や表情・ジェスチャーを画像で送受信する事が出来るＴＶ電話の需要が高まっている。ＴＶ電話では、画像情報の伝送により情報量が飛躍的に増えるため、画像情報を効率的に符号化し、送受信する事が求められる。
【０００３】
これに対して画像を送信時に圧縮伝送し受信側で復元する手法や、コミュニケーションには必要のない背景部を削減して伝送する手法が提案されている。具体的には、画像を圧縮伝送する手法としては、信号の輝度信号・色差信号をそれぞれ一画素おきに間引いて配列し、1/２の情報量に圧縮して伝送し、受信側にて前記間引かれた画素の周辺画素から前記間引かれた画素を補完して復元する手法があげられる（特許文献1参照）。
【０００４】
また、画像中の背景を削減して伝送する手法としては、ＴＶカメラからの画像データの人物が存在すると仮定された予め決められた領域と疑似背景画像データと合成することで背景情報を簡易に削減し、フレーム内符号化・フレーム間予測符号化での符号化において背景領域の情報量を削減し、動領域である人物の表情やジェスチャーの情報量を高めて高画質に伝送する手法があげられる（特許文献２参照）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開平０８−１６３５９３号公報
【特許文献２】特開２００３−１８９３１０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１に開示された手法では、画像中の全データに送信時の間引き、受信時の復元処理が入るため、ＴＶ電話にて主として伝送を行いたい人物領域の情報量も欠落してします。
【０００７】
また、前記特許文献２に開示された手法では、予め決められた領域が削減され、削減領域は疑似背景データに置換されるため、人物が移動し領域外に出てしまった際に、伝送を行いたい人物の情報が欠落してします。
【０００８】
そこで、本発明は、前記従来の課題を解決するものであり、必要な情報量を欠落させることなく、情報を転送可能なＴＶ電話システムを提供することを目的とするものである。
【課題を解決するための手段】
【０００９】
上記の目的を達成するために、本発明の第一の発明に係るＴＶ電話システムは、ＴＶカメラと、前記ＴＶカメラと外部バスでつながるＴＶで構成されるシステムであって、前記ＴＶは前記ＴＶカメラから入力される画像に画質処理を行い出力する画質調整部と前記画質調整部から出力される画像を符号化するエンコード部で構成され、前記画質調整部は入力画像中の肌色領域を検出する肌色領域検出部と、検出した前記肌色領域を記録する検出結果記憶部と、前記肌色領域に基づき補正を行う補正部と、平滑化フィルタをかける領域を記録している領域設定記憶部と、前記領域設定記憶部の前記領域に基づいて平滑化フィルタをかけ高周波成分を除去する平滑化フィルタ部と、前記検出結果記憶部に記録された前記肌色領域の肌色領域開始ラインと、前記肌色領域が最大の画素幅から求められる領域の倍のサイズの矩形領域を前記領域設定記憶部に設定する制御部を備えるものである。
【００１０】
また、本発明に係るＴＶ電話システムのＴＶにおいては、ＴＶカメラで取得した画像の肌色領域を、画質調整部の肌色領域検出部で検出し、補正部で高画質化する際に使用するとともに、人物領域を推定するためにも使用し、推定された人物領域外に平滑化フィルタ部にて平滑化フィルタをかけて高周波成分を除去した上で、エンコード部でエンコードすることで、人物領域外の情報量を削減し、人物領域の情報量を高めた符号化を行う事が出来る。このため、ユーザーは高画質な自分の映像を送信する事が出来る。
【００１１】
次に、第二の発明に係るＴＶ電話システムは、伝送路を介して双方向に通信を行うＴＶで構成されるシステムであって、前記ＴＶは、送信する画像に画質処理を行う画質調整部と、前記画質調整部で画質調整を行った画像と行っていない画像のどちらかを選択送信し、送信する画像が既に画質調整を行った画像であるかの情報を前記画像とともに送信する選択部と、受信した画像に画質処理を行う画質調整部と、前記画質調整部で画質処理を行った画像と受信した画像のどちらかを、送信側が既に画質を調整したかどうかの情報に基づき選択し出力する選択部と、選択部からの画像を表示する表示部を備えるものである。
【００１２】
本発明にかかるＴＶ電話システムのＴＶにおいては、画質調整部で画質調整をした画像を送る際に、画質調整を既に行ったかどうかの情報をあわせて送ることで、相手側にて再度画質調整が行われることを防ぐ事が出来る。このため、ユーザーは自分が送った画像を相手先にそのまま表示させる事が出来る。
【発明の効果】
【００１３】
本発明のＴＶ電話システムは、ＴＶカメラで取得した画像を高画質化するとともに、高画質化に用いる肌色領域検出結果を元に人物領域を推定し、人物領域外の高周波成分を除去しエンコードするため、ユーザーは高画質化した自分の映像を情報量豊かに送信する事が出来る。
【００１４】
また、本発明にかかるＴＶ電話システムは、画質調整をした画像を送る際に、画質調整を既に行ったかどうかの情報を送ることで、相手側にて再度画質調整が行われることを防ぐ事が出来る。
【図面の簡単な説明】
【００１５】
【図１】本発明の実施例１における全体システム構成図
【図２】本発明のシステム構成図
【図３】本発明の画質調整部構成図
【図４】本発明のＴＶの受信処理フローチャート
【図５】本発明のＴＶの送信処理フローチャート
【図６】本発明の画質調整部・制御部の毎ライン処理フローチャート
【図７】本発明の肌色領域検出結果を示す図
【図８】本発明の平滑化フィルタ除外領域を示す図
【発明を実施するための形態】
【００１６】
以下では、当該発明にかかる実施するための最良の形態について、図面を参照しつつ説明を行う。
（実施の形態１）
図１は本発明ＴＶ電話システムに関する全体システム構成図である。画像の高画質・高効率送信システムの構成を説明する。システムは、ＴＶ1、ＴＶ2、カメラ３、カメラ４から構成される。ＴＶ１とＴＶ２はインターネット網で接続されている。カメラ３とＴＶ１は外部バスで接続されている。カメラ４とＴＶ２は外部バスで接続されている。カメラ３からは、画像データがＴＶ１に送信される。カメラ４からは画像データがＴＶ２に送信される。
【００１７】
ＴＶ１とＴＶ２はインターネット網を介して通信を行う。ＴＶ１は、カメラ３から受信した前記画像データを符号化し、ＴＶ２に送信する。ＴＶ２は、ＴＶ１から前記符号化データを受信し、復号の上、表示する。一方、ＴＶ２は、カメラ４から受信した前記画像データを符号化し、ＴＶ１に送信する。ＴＶ１はＴＶ２から受信した前記符号化データを復号し表示再生する。ＴＶ１とＴＶ２の送受信動作は同様である。
【００１８】
なお、上述した説明では、ＴＶ１、２とカメラ３、４とが外部バスで接続されている構成について説明したが、本発明はこれに限定されるものではなく、ＴＶ１、２にカメラ３、４が内蔵される構成を採用することも可能である。
【００１９】
次に画像データの送受信に関するＴＶ１の構成について、図２を用いてさらに詳細に説明する。ＴＶ1は、CPU１１、ネットワークＩ／Ｆ１２、画質調整部１３、選択部１４、エンコード部１５、デコード部１６、画質調整部１７、選択部１８、表示部１９で構成される。
【００２０】
CPU１１と選択部１４はバスで接続されている。画質調整部１３と選択部１４はバスで接続されている。選択部１４とエンコード部１５はバスで接続されている。エンコード部１５とネットワークＩ／Ｆ１２はバスで接続されている。ネットワークＩ／Ｆ１２とデコード部１６はバスで接続されている。デコード部１６と選択部１８はバスで接続されている。デコード部１６と画質調整部１７はバスで接続されている。画質調整部１７と選択部１８はバスで接続されている。選択部１８と表示部１９はバスで接続されている。以下、各構成について詳細に説明する。
【００２１】
画質調整部１３と画質調整部１７は、入力画像に画質処理を行う回路である。画質調整部１３は、カメラ３で撮像した映像データに対して画質調整を行い、一方、画質調整部１７は、ネットワークＩ／Ｆ１２を経由して送信された映像に対して画質調整を行う。
【００２２】
次に、選択部１４と選択部１８は、２つの入力画像のうちどちらかを出力する回路である。具体的には、選択部１４は、ＴＶ１に入力された映像データとＴＶ１に入力された映像データに画質調整部１３において画質調整を行った映像データのいずれかをエンコード部１５に出力する選択を行う。一方、選択部１８は、ネットワークＩ／Ｆ１２を介してＴＶ１に入力された映像データをデコード部１６でデコードし、デコードした映像データか、そのデコードした映像データに対して画質調整部１７において画質調整を行った映像データのいずれかを表示部１９に出力する選択を行う。
【００２３】
次に、エンコード部１５は、画像のフレーム内符号化・フレーム間予測符号化を行い、ヘッダ情報に情報付加を行う回路である。一方、デコード部１６は、符号化された映像データのヘッダ情報から情報を抽出し、符号化された画像データを復号化する回路である。表示部１９は画像を表示するデバイスである。
【００２４】
次に、画質調整部１３は、外部バスからＴＶ１に入力された入力画像データに画質処理を行い、選択部１４に送信する。CPU１１は、画質処理済の前記画像データと、前記入力画像データのうち、どちらをネットワークＩ／Ｆで送信するかを示すユーザーの画質処理ＯＮ／ＯＦＦ選択情報を、選択部１４に送信する。選択部１４はＣＰＵ１１より受信した前記選択情報に基づき、画質調整部１３から受信した前記画像データと前記入力画像データのうち片方をエンコード部１５に送信する。
【００２５】
さらに、選択部１４においては、画質処理済フラグをエンコード部１５に送信する。画質処理済フラグとは、送信した前記画像データが前記画質処理済の画像データか、画質処理を行っていない前記入力画像データかを示す選択信号である。エンコード部１５は、選択部１４から受信した、前記画像データを符号化し、選択部１４から受信した前記画質処理済フラグを前記符号化した画像データのヘッダに付加し、ネットワークＩ／Ｆ１２に送信する。
【００２６】
次に、ネットワークＩ／Ｆ１２は、エンコード部１５から受信した前記符号化データを外部ネットワークに送信する。また、外部ネットワークから符号化データを受信する。デコード部１６はネットワークＩ／Ｆ１２から受信した前記符号化データを復号し、選択部１８と画質調整部１７に送信する。また、前記受信した符号化データのヘッダ情報から画質処理済フラグを抽出し、選択情報として選択部１８に送信する。画質調整部１７は、デコード部１６から受信した前記画像データに画質処理を行い、選択部１８に送信する。選択部１８はデコード部１６から受信した前記画質処理済フラグの選択情報に基づき、デコード部１６から受信した前記画像データと、画質調整部１７から受信した画質調整済みの前記画像データのどちらかを表示部１９に送信する。
【００２７】
なお、上述した説明においては、選択部１８は、画質処理済フラグに基づいて、画質調整部１７から出力された画像データ又はデコーダ部１６から出力された画像データのいずれかの画像データを選択する構成について説明したが、本願発明は、これに限定されるものではない。例えば、画質処理済フラグに基づいて、画質処理がなされている場合には、デコード部１６からの画像データを表示部１９のみに出力し、一方、画質処理がなされていない場合には、デコード部１６からの画像データを画質調整部１７にのみ出力する構成を採用することも可能である。この構成により、デコード部１６からの出力を一方にのみ出力すればよく、バス配線を有効に活用することが可能になるものである。
【００２８】
次に画質調整部１３について、図３を用いてさらに詳細に説明する。画質調整部１３は肌色領域検出部１３１、補正部１３２、平滑化フィルタ部１３３、検出結果記憶部１３４、制御部１３５、領域設定記憶部１３６で構成される。
【００２９】
ここで、肌色領域検出部１３１と補正部１３２はバスで接続されている。補正部１３２と平滑化フィルタ部１３３はバスで接続されている。肌色領域検出部１３１と検出結果記憶部１３４はバスで接続されている。補正部１３２と検出結果記憶部１３４はバスで接続されている。検出結果記憶部１３４と制御部１３５はバスで接続されている。平滑化フィルタ部１３３と領域設定記憶部１３６はバスで接続されている。制御部１３５と領域設定記憶部１３６はバスで接続されている。
【００３０】
画質調整部１３への入力画像データは、画像の上部のラインから下部のラインの順で入力され、各ラインは画像の左画素から右画素の順で入力される。肌色領域検出部１３１は、入力画像データの肌色領域の開始画素と終了画素を検出する。補正部１３２は、前記肌色領域の検出結果に基づき、前記画像データの補正を行う。
【００３１】
次に、制御部１３５は前記肌色領域の検出結果から、画像全体で最も肌色領域の画素幅（前記肌色領域の終了画素−前記肌色領域の開始画素）が大きいラインを導出し、前記肌色領域の開始画素と終了画素を記録している。肌色領域の検出が始まった肌色領域開始ラインを記録している。入力画像の最終ラインにて、前記肌色領域最大時の画素幅と前記肌色領域開始ラインから、平滑化除外領域（平滑化フィルタをかけない領域）の開始ラインと、前記領域の開始画素と終了画素を作成、記録する。画質調整部１３が処理しているラインが前記平滑化除外領域である場合は、前記平滑化除外領域の開始画素と終了画素を平滑化フィルタ部で用いる領域設定に設定する。なお、画面内に複数人が存在する場合には、その各人に対して肌色領域を検出し、前記肌色領域最大時の画素幅と前記肌色領域開始ラインを設定することにより、同様の処理を行うことが可能である。
【００３２】
次に、平滑化フィルタ部１３３は、前記平滑化除外領域の開始画素・終了画素に基づき、前記開始画素までの画素と、前記終了画素以降の画素に対して平滑化フィルタをかけ高周波成分を除去し、映像をぼかさせる。次に、肌色領域検出部１３１は、前記画質調整部１３への入力画像データから検出した肌色領域を検出結果記憶部１３４に記録する。前記入力画像データを補正部１３２に送信する。
【００３３】
次に、補正部１３２は検出結果記憶部１３４から前記肌色領域を読み出す。肌色領域検出部１３１から受信した前記画像データに補正を行い、平滑化フィルタ部１３３に送信する。次に、平滑化フィルタ部１３３は、領域設定記憶部１３６から前記平滑化除外領域の開始画素と終了画素を読み出す。補正部１３２から受信した前記画像データに平滑化フィルタをかけた上で、出力する。次に、制御部１３５は、肌色領域検出部１３１から読み出した前記肌色領域から平滑化除外領域を作成し、領域設定記憶部１３６に記録する。
【００３４】
次に、図４〜図５を用いて、本発明ＴＶ電話システムの制御および動作を説明する。図４はＴＶ１がネットワークＩ／Ｆ１２で外部ネットワークからデータを受信した際の動作を示したフローチャートである。図５はＴＶ１がカメラ３から入力された画像データを、ネットワークＩ／Ｆ１２で外部ネットワークに送信する際の動作を示したフローチャートである。
【００３５】
図4の処理フローは、ＴＶ１がネットワークＩ／Ｆ１２で外部ネットワークからデータを受信した場合に開始する。ネットワークＩ／Ｆ１２より受信した画像データを表示部で表示する場合（Ｓ４０１）、デコード部１６にて受信した前記画像データを復号し（Ｓ４０２）、画質調整部１７で前記画像データに対して画質調整を行う（Ｓ４０３）。選択部１８は、受信した前記画像データのヘッダ情報に前記画質処理済フラグがたっている、つまり、送信側にて画質処理が行われている場合には（Ｓ４０４）、デコード部１６にて復号化した前記画像データを表示部に送信する（Ｓ４０５）。前記画質処理済フラグが立っていなかったら、つまり送信側にて画質処理が行われていない場合には、画質調整部１７で画質調整を行った前記画像データを表示部１９に送信する（Ｓ４０６）。表示部１９にて表示を行い（Ｓ４０７）、終了する。
【００３６】
図５の処理フローは、ＴＶ１がカメラ３から外部バスを介して、画像を受信した場合に開始する。外部バスより受信した画像データをネットワーク送信する場合（Ｓ５０１）、画質調整部１３で前記画像データに対して画質調整を行い（Ｓ５０２）選択部１４に送信する。選択部１４は、前記ユーザーの画質処理ＯＮ／ＯＦＦ選択情報がＯＮの場合（Ｓ５０３）、画質調整部１３の出力する前記画像データをエンコード部１５に送信する（Ｓ５０４）。また、前記画質処理済フラグをＯＮにして、エンコード部１５に送信する（Ｓ５０５）。
【００３７】
前記画質処理のＯＮ／ＯＦＦ設定がＯＦＦの場合（Ｓ５０３）、前記外部バスより受信した画像データをエンコード部１５に送信する（Ｓ５０６）。また、前記画質処理済フラグをＯFFにして、エンコード部１５に送信する（Ｓ５０７）。エンコード部１５は前記画像データを符号化し、選択部１４から受信した前記画質処理済フラグをヘッダ情報に付加する（Ｓ５０８）。ネットワークＩ／Ｆ１２で送信し（Ｓ５０９）、終了する。
【００３８】
このような処理により、画質調整部で画質調整をした画像を送る際に、画質調整を既に行ったかどうかの情報をあわせて送ることで、相手側にて再度画質調整が行われることを防ぐ事が可能となり、ユーザーは自分が送った画像を相手先にそのまま表示させる事が可能となる。
【００３９】
次に、図６〜８を用いて、画質処理部１３の動作について更に詳細に説明する。まず、図７、図８を用いて、画質調整部１３の肌色領域検出部１３１によって検出される検出結果と、平滑化フィルタ部１３３が使用する平滑化フィルタ除外領域を説明する。
【００４０】
図７の肌色領域検出結果は、画像中の人物７０１、背景７０２、肌色領域検出領域７０３、肌色領域検出開始ライン７０４、肌色領域検出最大幅開始画素７０５、肌色領域検出最大幅終了画素７０６によって構成される。
【００４１】
ここで、画像中の人物７０１と背景７０２は画質処理部１３に入力された画像である。また、肌色領域検出結果７０３は、肌色領域検出部１３１によって検出される肌色領域である。また、肌色領域検出開始ライン７０４は肌色領域検出部１３１によって最初に前記肌色領域が検出されたラインである。また、肌色領域検出最大幅開始画素７０５と肌色領域検出最大幅終了画素７０６は、肌色領域検出部１３１によって検出された前記肌色領域で開始画素と終了画素の間の画素数が最も大きかったラインの開始画素と、終了画素である。
【００４２】
次に、図８の平滑化フィルタ除外領域は、画像中の人物８０１、背景８０２、平滑化フィルタ除外領域８０３によって構成される。ここで、画像中の人物８０１と背景８０２は画質処理部１３から出力する画像である。背景８０２は、背景７０２が平滑化フィルタ部１３３によって平滑化された結果である。また、平滑化フィルタ除外領域８０３は、制御部１３５によって平滑化フィルタ部１３３が各ラインで平滑化を行う際に平滑化を行わないように設定される領域である。
【００４３】
次に、図６を用いて画質調整部１３の動作について説明する。図６の処理フローは、画質調整部１３の入力画像データの毎ラインで開始する。現在のラインが、制御部１３５の保持している平滑化除外領域開始ラインよりも大きい場合（Ｓ６０１）は、Ｓ６０２に入り、それ以外はＳ６０３に入る。Ｓ６０２では、平滑化除外領域開始画素・終了画素を領域設定記憶部１３６に設定し、Ｓ６０３に入る。
【００４４】
次に、Ｓ６０３では、肌色領域検出結果が、肌色領域検出結果記憶部１３４にある場合は、Ｓ６０４に入り、ない場合はＳ６０８に入る。Ｓ６０４では、制御部１３５が現在のラインまで肌色領域検出結果を保持していない場合は、Ｓ６０５に入り、ある場合はＳ６０６に入る。Ｓ６０５では、制御部１３５は現在のライン番号を肌色領域開始ラインとして保持し、Ｓ６０７に入る。Ｓ６０６では、現在のラインの前記肌色領域検出結果の領域幅である肌色領域終了画素-肌色領域開始画素が、制御部１３５が保持している肌色領域検出最大幅終了画素-領域開始よりも大きい場合、Ｓ６０７に入る。それ以外はＳ６０８に入る。Ｓ６０７では、前記肌色領域開始画素と終了画素を、制御部１３５にて前記肌色領域検出最大幅開始画素・前記領域終了画素として保持し、現在のライン番号を、最大幅ラインとして保持し、Ｓ６０８に入る。
【００４５】
次に、Ｓ６０８では、現在のラインが画像の最終ラインである場合、Ｓ６０９に入り、それ以外では終了する。Ｓ６０９では、前記肌色領域検出領域より倍のサイズの平滑化除外領域を作成するため、制御部１３５が保持している値を用いた下記計算にて、平滑化除外領域開始ラインを求め、保持し、Ｓ６１０に入る。
【００４６】
平滑化除外領域開始ライン＝前記肌色領域開始ライン−（前記最大幅ライン−前記肌色領域開始ライン）
Ｓ６１０では、前記肌色領域検出領域より倍のサイズの平滑化除外領域を作成するため、制御部１３５が保持している値を用いた下記計算にて、平滑化除外領域開始画素と前記平滑化除外領域終了画素を求め、保持の上、終了する。
【００４７】
平滑化除外領域開始画素＝前記肌色領域開始画素−（前記肌色領域終了画素−前記肌色領域開始画素）／２
なお、前記肌色領域検出結果からの前記平滑化除外領域の求め方は、一意に定められるものではなく、ユーザーによって前記平滑化除外領域開始ライン・開始画素・終了画素の調整が可能である。
【００４８】
以上のように本発明のＴＶ電話システムは、カメラ３によって取得した画像をＴＶ１の画質調整部１３に通し、肌色領域検出部１３１の肌色領域検出結果から人物領域外の領域を求め、平滑化フィルタ部１３３で平滑化フィルタをかける。このため、エンコード部１５で符号化する際に、前記平滑化フィルタによって前記人物領域外の領域の高周波成分が除去されているため、情報量を削減して符号化することが可能である。ユーザーは、ＴＶ電話の相手に、自分の画像に画質補正をかけ、背景領域をぼやかした、画像を送信することが出来る。
【００４９】
また、本発明のＴＶ電話システムは、送信するデータに画質処理がされている画像か、そうでないかの画質処理済フラグを付加し、データを受信した側が画質調整部を通して表示するか通さないで表示するかを制御する。このため、送信側で既に画質調整を行っている画像データに対して2重に画質処理をかけることを回避できる。ユーザーは、ＴＶ電話で、送信したデータをそのまま相手に表示させることが出来る。
【００５０】
なお、上述した実施の形態においては、画質の調整について主に説明したが、本発明は、これ以外にも音声の調整についても適用することが可能である。
【産業上の利用可能性】
【００５１】
本発明にかかるＴＶ電話システムは、ＴＶカメラで取得した画像を高画質化するとともに、高画質化に用いる肌色領域検出結果を元に人物領域を推定し、人物領域外の高周波成分を除去しエンコードするため、ユーザーは高画質化された自分の映像を情報量豊かに送信する事が実現可能で有り、画質調整をした画像を送る際に、画質調整を既に行ったかどうかの情報を送ることで、相手側にて再度画質調整が行われることを防ぐ事が実現可能であるので、ＴＶカメラで取得した画像データを双方向で送受信するＴＶ電話システム等として有用である。
【符号の説明】
【００５２】
１、２    ＴＶ
３、４    カメラ
１１    ＣＰＵ
１２    ネットワークＩ／Ｆ
１３、１７    画質調整部
１４、１８    選択部
１５    エンコード部
１６    デコード部
１９    表示部
１３１    肌色領域検出部
１３２    補正部
１３３    平滑化フィルタ部
１３４    検出結果記憶部
１３５    制御部
１３６    領域設定記憶部
７０１、８０１    画像中の人物
７０２、８０２    画像中の背景
７０３    肌色領域検出領域
７０４    肌色領域検出開始ライン
７０５    肌色領域検出最大幅開始画素
７０６    肌色領域検出最大幅終了画素
８０３    平滑化フィルタ除外領域
【図１】
2011234067.tif 000003
【図２】
2011234067.tif 000004
【図３】
2011234067.tif 000005
【図４】
2011234067.tif 000006
【図５】
2011234067.tif 000007
【図６】
2011234067.tif 000008
【図７】
2011234067.tif 000009
【図８】
2011234067.tif 000010