(57)【特許請求の範囲】
【請求項１】
画像表示装置により実行される画像表示方法であって、
前記画像表示装置が、
複数の所定の画像が動画像の上に重なり且つ前記動画像の一部を隠すように、前記複数の所定の画像及び前記動画像を表示部に表示するステップと、
前記動画像中から、人物の手の部分を特定対象物として検出する検出ステップと、
前記動画像中の前記特定対象物が前記複数の所定の画像の内のいずれかの表示領域内に位置するか判定する判定ステップと、
前記特定対象物が前記複数の所定の画像の内の第１の画像の表示領域内に位置し、第２の画像の表示領域内には位置しないと判定された場合に、前記特定対象物が前記第１の画像の表示領域内に位置することを視認できるように、前記第１の画像と前記動画像を１−α：α（ただし、０＜α＜１とする）の合成比率でブレンドして前記表示部に表示し、前記第２の画像と前記動画像を１：０の合成比率でブレンドして前記表示部に表示する合成表示ステップと、
を実行することを特徴とする画像表示方法。
【請求項２】
前記検出ステップにおいて、前記画像表示装置は、前記動画像中から、人物が物を指差す特定の形の手を前記特定対象物として検出することを特徴とする請求項１に記載の画像表示方法。
【請求項３】
請求項１または請求項２に記載の画像表示方法の各ステップを画像表示装置に実行させることを特徴とするプログラム。
【請求項４】
表示部と、
複数の所定の画像が動画像の上に重なり且つ前記動画像の一部を隠すように、前記複数の所定の画像及び前記動画像を表示する信号を生成し前記表示部に出力する表示合成部と、
前記動画像中から、人物の手の部分を特定対象物として検出する検出部と、
前記動画像中の特定対象物が前記複数の所定の画像の内のいずれかの表示領域内に位置するか判定する判定部と、を備え、
前記特定対象物が前記複数の所定の画像の内の第１の画像の表示領域内に位置し、第２の画像の表示領域内には位置しないと判定された場合に、前記特定対象物が前記第１の画像の表示領域内に位置することを視認できるように、前記表示合成部は、前記第１の画像と前記動画像を１−α：α（ただし、０＜α＜１とする）の合成比率でブレンドして表示し、前記第２の画像と前記動画像を１：０の合成比率でブレンドして表示する映像信号を生成することを特徴とする画像表示装置。
【請求項５】
前記画像表示装置は、さらに、他の画像表示装置から、ネットワークを介して前記所定の画像及び前記動画像を受信する受信部を有することを特徴とする請求項４に記載の画像表示装置。
【請求項６】
前記画像表示装置は、さらに、他の画像表示装置に対して、ネットワークを介して前記所定の画像及び前記動画像を送信する送信部を有することを特徴とする請求項４に記載の画像表示装置。
【請求項７】
請求項４に記載の画像表示装置と、撮像デバイスと、を有し、前記動画像は前記撮像デバイスから取り込まれる映像であることを特徴とする画像表示システム。
【請求項８】
ネットワークを介して接続された第１の画像表示装置と第２の画像表示装置からなるコミュニケーションシステムで実行される画像表示方法であって、
前記第１の画像表示装置が、前記ネットワークを介して、複数の所定の画像及び動画像を前記第２の画像表示装置に送信するステップを実行し、
前記第１及び第２の画像表示装置がそれぞれ、
前記複数の所定の画像が前記動画像の上に重なり且つ前記動画像の一部を隠すように、前記複数の所定の画像及び前記動画像を表示部に表示するステップと、
前記動画像中から、人物の手の部分を特定対象物として検出する検出ステップと、
前記動画像中の前記特定対象物が前記複数の所定の画像の内のいずれかの表示領域内に位置するか判定する判定ステップと、
前記特定対象物が前記複数の所定の画像の内の第１の画像の表示領域内に位置し、第２の画像の表示領域内には位置しないと判定された場合に、前記特定対象物が前記第１の画像の表示領域内に位置することを視認できるように、前記第１の画像と前記動画像を１−α：α（ただし、０＜α＜１とする）の合成比率でブレンドして前記表示部に表示し、前記第２の画像と前記動画像を１：０の合成比率でブレンドして前記表示部に表示する合成表示ステップと、
を実行し、
前記第１及び第２の画像表示装置の両方に、前記第１および第２の画像と前記動画像がブレンドされた合成画像が表示されることを特徴とする画像表示方法。
【請求項９】
ネットワークを介して接続された第１の画像表示装置と第２の画像表示装置からなるコミュニケーションシステムで実行される画像表示方法であって、
前記第１の画像表示装置が、
複数の所定の画像が動画像の上に重なり且つ前記動画像の一部を隠すように、前記複数の所定の画像及び前記動画像を表示部に表示するステップと、
前記動画像中から、人物の手の部分を特定対象物として検出する検出ステップと、
前記動画像中の前記特定対象物が前記複数の所定の画像の内のいずれかの表示領域内に位置するか判定する判定ステップと、
前記特定対象物が前記複数の所定の画像の内の第１の画像の表示領域内に位置し、第２の画像の表示領域内には位置しないと判定された場合に、前記特定対象物が前記第１の画像の表示領域内に位置することを視認できるように、前記第１の画像と前記動画像を１−α：α（ただし、０＜α＜１とする）の合成比率でブレンドして前記表示部に表示し、前
記第２の画像と前記動画像を１：０の合成比率でブレンドして前記表示部に表示する合成表示ステップと、
前記第１の画像と前記動画像を１−α：α（ただし、０＜α＜１とする）の合成比率でブレンドして表示し、前記第２の画像と前記動画像を１：０の合成比率でブレンドして表示する映像信号を、前記ネットワークを介して、前記第２の画像表示装置に送信するステップと、
を実行し、
前記第１及び第２の画像表示装置の両方に、前記第１および第２の画像と前記動画像がブレンドされた合成画像が表示されることを特徴とする画像表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像表示方法、プログラム、画像表示装置及び画像表示システムに関するものである。
【背景技術】
【０００２】
人物の映像とコンピュータが生成する画像とを、合成して表示し、さらにユーザーの手などの特定被写体の動きに合わせて、コンピュータが生成する画像を動かしたり、サイズを変えたりする技術が特許文献１に開示されている。
【０００３】
しかし、この技術では、所望の画像を指差しながら会話することは可能であるが、画像の中の一部分を指差しながら会話することはできなかった。
【０００４】
写真を見ながら家族や友人と楽しくコミュニケーションをするためには、写真に写っている人や物など、一部分を指差して、「この人は・・・」、「ここに移っている建物は・・・」といった会話ができることが望ましい。
【０００５】
その他に関連する公知技術として、実映像を取り込み、該実映像から特定の形状を検出し、仮想画像が実映像の手前になるように重ねられた合成画面を表示する技術が、特許文献２に開示されている。
【０００６】
また、入力映像のフレームの各画素について、その画素が被写体の内部である確率を算出し、この確率をもとにした各画素の値を透明度として入力映像と背景画像と合成する技術が、特許文献３に開示されている。
【特許文献１】特開平８−１３９９９４号公報
【特許文献２】特開平６−３０１４７６号公報
【特許文献３】特開２００３−１２５３６９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
本発明は、画像の中の一部を特定することができる新規な表示方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
本発明の第１は、画像表示装置により実行される画像表示方法であって、前記画像表示装置が、複数の所定の画像が動画像の上に重なり且つ前記動画像の一部を隠すように、前記複数の所定の画像及び前記動画像を表示部に表示するステップと、前記動画像中から、人物の手の部分を特定対象物として検出する検出ステップと、前記動画像中の前記特定対象物が前記複数の所定の画像の内のいずれかの表示領域内に位置するか判定する判定ステップと、前記特定対象物が前記複数の所定の画像の内の第１の画像の表示領域内に位置し、第２の画像の表示領域内には位置しないと判定された場合に、前記特定対象物が前記第１の画像の表示領域内に位置することを視認できるように、前記第１の画像と前記動画像を１−α：α（ただし、０＜α＜１とする）の合成比率でブレンドして前記表示部に表示し、前記第２の画像と前記動画像を１：０の合成比率でブレンドして前記表示部に表示する合成表示ステップと、
を実行することを特徴とする。
【０００９】
本発明の第２は、表示部と、複数の所定の画像が動画像の上に重なり且つ前記動画像の一部を隠すように、前記複数の所定の画像及び前記動画像を表示する信号を生成し前記表示部に出力する表示合成部と、前記動画像中から、人物の手の部分を特定対象物として検出する検出部と、前記動画像中の特定対象物が前記複数の所定の画像の内のいずれかの表示領域内に位置するか判定する判定部と、を備え、前記特定対象物が前記複数の所定の画像の内の第１の画像の表示領域内に位置し、第２の画像の表示領域内には位置しないと判定された場合に、前記特定対象物が前記第１の画像の表示領域内に位置することを視認できるように、前記表示合成部は、前記第１の画像と前記動画像を１−α：α（ただし、０＜α＜１とする）の合成比率でブレンドして表示し、前記第２の画像と前記動画像を１：０の合成比率でブレンドして表示する映像信号を生成することを特徴とする画像表示装置である。
【００１０】
本発明の第３は、ネットワークを介して接続された第１の画像表示装置と第２の画像表示装置からなるコミュニケーションシステムで実行される画像表示方法であって、前記第１の画像表示装置が、前記ネットワークを介して、複数の所定の画像及び動画像を前記第２の画像表示装置に送信するステップを実行し、前記第１及び第２の画像表示装置がそれぞれ、前記複数の所定の画像が前記動画像の上に重なり且つ前記動画像の一部を隠すように、前記複数の所定の画像及び前記動画像を表示部に表示するステップと、前記動画像中から、人物の手の部分を特定対象物として検出する検出ステップと、前記動画像中の前記特定対象物が前記複数の所定の画像の内のいずれかの表示領域内に位置するか判定する判定ステップと、前記特定対象物が前記複数の所定の画像の内の第１の画像の表示領域内に位置し、第２の画像の表示領域内には位置しないと判定された場合に、前記特定対象物が前記第１の画像の表示領域内に位置することを視認できるように、前記第１の画像と前記動画像を１−α：α（ただし、０＜α＜１とする）の合成比率でブレンドして前記表示部に表示し、前記第２の画像と前記動画像を１：０の合成比率でブレンドして前記表示部に表示する合成表示ステップと、を実行し、前記第１及び第２の画像表示装置の両方に、前記第１および第２の画像と前記動画像がブレンドされた合成画像が表示されることを特徴とする画像表示方法である。
本発明の第４は、ネットワークを介して接続された第１の画像表示装置と第２の画像表示装置からなるコミュニケーションシステムで実行される画像表示方法であって、前記第１の画像表示装置が、複数の所定の画像が動画像の上に重なり且つ前記動画像の一部を隠すように、前記複数の所定の画像及び前記動画像を表示部に表示するステップと、前記動画像中から、人物の手の部分を特定対象物として検出する検出ステップと、前記動画像中の前記特定対象物が前記複数の所定の画像の内のいずれかの表示領域内に位置するか判定する判定ステップと、前記特定対象物が前記複数の所定の画像の内の第１の画像の表示領域内に位置し、第２の画像の表示領域内には位置しないと判定された場合に、前記特定対象物が前記第１の画像の表示領域内に位置することを視認できるように、前記第１の画像と前記動画像を１−α：α（ただし、０＜α＜１とする）の合成比率でブレンドして前記表示部に表示し、前記第２の画像と前記動画像を１：０の合成比率でブレンドして前記表示部に表示する合成表示ステップと、前記第１の画像と前記動画像を１−α：α（ただし、０＜α＜１とする）の合成比率でブレンドして表示し、前記第２の画像と前記動画像を１：０の合成比率でブレンドして表示する映像信号を、前記ネットワークを介して、前記第２の画像表示装置に送信するステップと、を実行し、前記第１及び第２の画像表示装置の両方に、前記第１および第２の画像と前記動画像がブレンドされた合成画像が表示されることを特徴とする画像表示方法である。
【発明の効果】
【００１１】
本発明によれば、画像の中の一部を特定することができる新規な表示方法を提供することができる。
【発明を実施するための最良の形態】
【００１２】
以下、実施例を参照して説明する。
【実施例１】
【００１３】
はじめに、本発明に係る画像表示方法を好適に採用することができるテレビコミュニケーションシステムについて説明する。図１は実施例１に係るテレビコミュニケーションシステムの構成を示した図である。
【００１４】
画像表示装置であるデジタルテレビ１００とデジタルテレビ１０１とはインターネット回線１０４を介して接続されている。また、デジタルテレビ１００には撮像デバイスであるユーザー撮影用のカメラ（以下人物カメラ）１０５及びマイク１０７が、デジタルテレビ１０１には撮像デバイスである人物カメラ１０６及びマイク１０８が、それぞれ接続されている。また、一方のデジタルテレビ１００にはユーザーが視聴しようとしているデジタル写真が記録されたデジタルカメラ１０３が接続されている。
【００１５】
（各部の説明）
図２は実施例１に係るデジタルテレビ１００、１０１のブロック図である。
【００１６】
図２において、不図示のアンテナにより受信された信号はＴＶチューナ２１６に入力される。ＴＶチューナ２１６は、入力された信号に対して、復調、誤り訂正等の処理を施し、トランスポートストリーム（ＴＳ）データと呼ばれる形式のデジタルデータを生成する。さらに、ＴＶチューナ２１６は、生成したＴＳデータに対しデスクランブル解除処理を行い、デマルチプレクサ２１７に出力する。
【００１７】
デマルチプレクサ２１７は、ＴＶチューナ２１６より入力された複数チャンネル分の映像データ、音声データ、電子番組ガイド（ＥＰＧ）データ、データ放送データ等が時分割多重化されているＴＳデータの中から、映像データ及び音声データを取り出し、バス２０６を介して映像・音声デコーダ２０８に送る。映像・音声デコーダ２０８で処理された映像データはバス２０６を介してグラフィックメモリ２１０に書き込まれ、表示合成部２１３を介して、表示器２１４へと出力される。またマイク１０７、１０８から入力された音声データは、音声インターフェース２１２を介して音声信号に変換され、スピーカー２１５より出力される。
【００１８】
一方、デジタルカメラ１０３に記録された画像データはシリアルインターフェース２０
３を介して読み出され、メモリ２０２に記録される。そして映像・音声デコーダ２０８でデコード処理され、グラフィックメモリ２１０に書き込まれる。
【００１９】
ビデオキャプチャ部２１１は、人物カメラ１０５及び１０６からのユーザーの映像を取り込み、合成表示を行うための信号を生成する信号生成回路である表示合成部２１３へ送る。表示部である表示器２１４は表示合成部２１３からの信号に基づいて表示を行い、結果として合成された画像が表示される。
【００２０】
さらにユーザーの映像はバス２０６を介して映像音声エンコーダ２０７にてデータ圧縮処理が施された後、ネットワークインターフェース２０４へと送られ、インターネット１０４を通じて他のデジタルテレビに対して送信される。マイク１０７、１０８からの音声も映像音声エンコーダ２０７で圧縮処理が施された後、音声インターフェース２１２、バス２０６、ネットワークインターフェース２０４を介して他の（相手の）デジタルテレビに送信される。
【００２１】
被写体検出部２０９は、人物カメラ１０５、１０６からのユーザーの映像、もしくはネットワークインターフェース２０４で受信した相手側テレビのユーザーの映像に含まれる特定被写体を検出するものである。
【００２２】
ユーザーがリモコン４００に対して操作を行うと、リモコンインターフェース２０５を介して入力情報が取得される。
【００２３】
ＣＰＵ２０１は、上述したデジタルテレビ内部の処理を制御する。具体的には、メモリ２０２に格納された特定のプログラムに従って以下に説明する信号処理の実行及びその制御を行う。
【００２４】
図４は実施例１において使用するリモコン４００の外観を示す模式図である。ただし図４に示すリモコン４００は、実施例１を説明するために必要な機能を実現するための操作を行うボタンのみを表しているが、実際の受信装置に必要なボタンの数や配置はこれらに限定されるものではない。
【００２５】
図４において、赤外線発光部４０１は、リモコン４００と図２に示すリモコンインターフェース２０５との間で赤外線通信を行う。電源キー４０２はリモコン４００の電源をＯＮ／ＯＦＦする。カーソル＆決定キー４０３は、上下左右ボタンの真中に決定キーを配した一群のキーである。アップダウンキー４０４、４０５はＵｐ／Ｄｏｗｎ２つのキーからなる。数字キー４０６は１〜９、０の数字がマトリクス上に配置されている。カラーキー４０７は、青、赤、緑、黄の４色のボタンが横一列に配列されている。また、フォトチャットキー４０９は画像を見ながら他のテレビユーザーとコミュニケーションを行う「フォトチャット機能」を呼出すためのキーである。
【００２６】
本実施例において用いたデジタル画像データは、デジタルカメラにて撮影された静止画像データであり、静止画像データはデジタルカメラにてＪＰＥＧ圧縮処理を施された後、静止画像データファイルとしてメモリカードに記録されたものを用いている。以後の説明で「画像ファイル」は静止画像データの事を示すとする。ただし、本発明における画像データは必ずしも静止画像データに限られるものではなく、動画像データであってもよい。例えば、デジタルカメラ、デジタルビデオカメラ、携帯機器（携帯電話等）に付属しているカメラ等により撮影された静止画像データや動画像データを用いることができる。
【００２７】
（処理動作説明）
次に本発明に係る画像表示方法が実施される「フォトチャット」アプリケーションにお
けるＣＰＵ２０１の処理動作を図３を用いて説明する。図３は実施例１に係るＣＰＵの処理動作を示すフローチャートである。
【００２８】
（フォトチャットの開始）
デジタルテレビ１００及び１０１の双方のユーザーが図４に示すリモコン４００の「フォトチャット」キー４０９を押下すると、ＣＰＵ２０１では図３に示す処理を開始する。
【００２９】
先ずＣＰＵ２０１は予め登録されていた相手のデジタルテレビとの通信接続処理を行う（Ｓ３０１）。その後、人物カメラ１０５（１０６）により映された映像が、表示合成部２１３を介して左右反転してから表示器２１４に表示され、マイク１０７（１０８）からの音声と共にネットワークインターフェース２０４を介して相手のデジタルテレビへ送信される（Ｓ３０２）。
【００３０】
また相手のデジタルテレビから送られてきた映像、音声情報をネットワークインターフェース２０４にて受信を開始し、映像音声デコーダ２０８にてデコードを行った後、映像に関してはグラフィックメモリ２１０に描画して（左右反転して）表示器２１４に表示し、音声に関しては音声インターフェース２１２を介してスピーカー２１５で再生する（Ｓ３０３）。
【００３１】
前記のように、複数のデジタルテレビにおいてそれぞれ映像や音声が入力された後、特定被写体検出処理が開始される。
【００３２】
次に、デジタルテレビ１００のユーザーがデジタルカメラ１０３を接続したことを検出すると（Ｓ３０５）、ＣＰＵ２０１はシリアルインターフェース２０３を介して画像データを読み込み（Ｓ３１０）、相手のデジタルテレビへと送信する（Ｓ３１１）。そしてグラフィックメモリに対して描画を行い、画像の一覧表示を行う（Ｓ３１２）。一方、相手のデジタルテレビ１０１から送られてきた画像を受信すると、同様にグラフィックメモリ２１０に対して描画を行い、画像の一覧表示を行う（Ｓ３１３）。
【００３３】
図５はユーザーがフォトチャット機能を開始した直後の一覧表示状態の表示画面を示した模式図である。図５に示す領域５０１及び領域５０３にはユーザー（本人）の映像が表示され、領域５０２及び領域５０４のところには相手のユーザーの映像が表示される。このとき自ユーザー、相手ユーザーの映像共に、左右反転した状態で表示される。
【００３４】
また、相手ユーザーの映像の一部を隠すような形で図５に示す領域５０５、領域５０６にはデジタルカメラ１０３から取得した所定の画像の一覧（２枚）が表示されている。
【００３５】
図５に示す状態で、ユーザーＡ又はユーザーＢはリモコン４００のカーソル＆決定キー４０３を操作して、所望の画像を選択し表示することができる。リモコン４００からの入力を取得するとＣＰＵ２０１は相手のデジタルテレビに対し、取得したリモコン操作情報を送信する（Ｓ３１４）。また、相手のデジタルテレビからリモコン操作情報を受信した場合（Ｓ３２０）も同様に、操作に応じた描画処理を行い、選択画像の変更や、一覧表示から一枚表示への切替などを行う（Ｓ３１５）。
【００３６】
（特定被写体検出処理）
被写体検出部２０９では、ユーザーの映像を常に解析し予め決められた特定被写体（特定対象物）が映像中に存在するか否かの判定を行っている。実施例１では図８に示す手の形８０１〜８０４のように、物を指差す時の手の形を特定被写体と定めており、映像中に特定被写体に類似する画像が存在しているかの判定、及び存在している場合には映像中のどの部分に存在しているかを判定結果として出力する。特定被写体検出処理では画像中か
ら対象物に近いパターンを見つけ出し、見つかった場合には、さらに色や輪郭の類似度を判定するようにしている。
【００３７】
（一覧表示時の検知結果に応じた合成制御）
自デジタルテレビ側のユーザー映像において、被写体検出部２０９にて特定被写体の存在が検出されると（Ｓ３０８）、人物カメラの映像を表示中の画像一覧と重なる位置に移動する（Ｓ３１７）。つまり、ユーザー映像の少なくとも一部が画像の表示領域内に位置するように、両者の位置の関係を調整する。ここで、画像の表示領域とは、表示される所定の画像の外周によって囲まれる領域の全てを指す。また、同時に相手の人物映像を画面右端に移動する。
【００３８】
そしてユーザー映像中の特定被写体と画像とが重なりを持つとき、すなわち、特定被写体が画像の表示領域内に位置するとき、特定被写体とその画像とが視認されるように、特定被写体とその画像とを合成処理する。特定被写体が画像の表示領域内に位置するかどうか判定する判定部は、ＣＰＵ２０１によって構成される。
【００３９】
合成の手法としては動画像（の全体もしくは一部）の比率をアルファとし、画像を少なくとも含む合成対象画像の比率を１−アルファとして合成するアルファブレンドを好適に採用できる。また、特定被写体の輪郭を抽出し、特定被写体の輪郭と所定の画像とを合成処理する方法も適用することができる。
【００４０】
ここでアルファブレンドとは、重なった位置にある複数の画像を一定の割合（アルファ値）で合成処理するものである。つまり、アルファ値は合成比率を意味する。アルファ値は０〜１.０の値をとり、０又は１.０の時はどちらか一方の画像が表示されることになる。アルファ値が０＜α＜１.０のときは、表示中の画像とユーザー映像との、双方が合成
された表示となる。
【００４１】
本実施例においては、特定被写体領域と重なりを持つ画像に関しては、ユーザー映像とのアルファブレンドのアルファ値を
０＜α＜１とし、
特定被写体領域と重なりを持たない画像に関しては、ユーザー映像とのアルファブレンドのアルファ値を
α＝０（画像のみ表示）
となるように制御する（Ｓ３１７）。
【００４２】
一方、相手から送られてきた人物映像中に特定被写体が検知された場合には（もともと相手の人物映像は画像一覧と重なる位置にあるため、画像の表示位置は変化しない）、ユーザー映像中の特定被写体と重なりを持つ画像に関しては、ユーザー映像とのアルファブレンドのアルファ値を
０＜α＜１とし、
特定被写体領域と重なりを持たない画像に関しては、ユーザー映像とのアルファブレンドのアルファ値を
α＝０（画像のみ表示）
となるように制御する（Ｓ３１８）。
【００４３】
図６はユーザー映像において特定被写体が検知された後の表示例を示した模式図である。被写体検出部２０９にて特定被写体が検出されると、双方の画面の画像一覧と重なる位置に、指差そうとしているユーザー（ユーザーＡ）の映像が表示され、さらに一覧表示された２枚の画像６０１、６０２のうち、検知された特定被写体と重なる場所にある画像６０１に関しては、ユーザー映像とのαブレンド（０＜α＜１）が行われ、特定被写体と重
ならない位置にある画像６０２に関しては、α＝０、つまりユーザー映像は表示せずに画像のみが表示されるようになる。
【００４４】
また、被写体検出部２０９にて特定被写体が消滅したと判定した場合（Ｓ３０９）、ＣＰＵ２０１はグラフィックメモリ２１０及び表示合成部２１３を制御して、再び図５の表示状態にもどす（Ｓ３１９）。
【００４５】
（一枚表示時の動作）
次にユーザーＡ又はＢがリモコン４００を操作して画像を一枚だけ表示したときの動作について説明する。図７はユーザーがリモコン操作にて一枚表示に切り替えた場合の表示例を示した模式図である。
【００４６】
このように一方のユーザーがリモコン操作を行い表示画像や表示形態（一覧表示と一枚表示）を切り替えると、双方のデジタルテレビの表示が同期して変更される（Ｓ３１４、Ｓ３１５）。実施例１においては、ユーザーＡ、ユーザーＢが、デジタルテレビ１００、１０１の表示部の中の左方に縦に並んで表示され、その右側に外部から読み込まれた画像７０１が表示されている。
【００４７】
この状態でユーザーＡが画像７０１を指差すようなポーズをとったとすると、デジタルテレビ１００では、被写体検出部２０９にて特定被写体の存在が検出され（Ｓ３０８）、人物カメラの映像が表示中の画像７０１と重なる位置に移動すると共に、人物カメラの映像と表示中の画像とを表示合成部２１３にてアルファブレンド処理を行う（０＜α＜１）（Ｓ３１７）。
【００４８】
一方、デジタルテレビ１０１では、送られてきたユーザー映像に特定被写体が検出され、表示中の画像と同じ位置に送られてきた相手のユーザー映像を表示して、アルファブレンド処理を行う（０＜α＜１）（Ｓ３１８）。
【００４９】
図９は合成処理が施され、画像データとユーザーＡの映像がアルファブレンド処理されて表示された状態を示している。
【００５０】
図１０に実際にユーザー映像と画像を合成した場合の一例を示す。ユーザーＡが指を指すようなポーズをとると、画像７１０のように左右反転された人物映像と表示中の画像とがアルファブレンド処理されて表示されるので、画像が転写された鏡を見ているかのようにユーザーは手を動かすだけで簡単に画像中の一部分を指差すことができる。
【００５１】
一方、相手のデジタルテレビにおいても、ユーザーＡの映像と表示中の画像がアルファブレンド処理されるので、画像が転写されたガラス板の向こうでユーザーＡが画像の一部を指差しているかのように見え、どの部分を示しているのかが直感的に認識できるようになる。
【００５２】
なおここではもっとも好適な例として、デジタルテレビ１００とデジタルテレビ１０１の双方が以上述べた表示合成の機能を備えた例を説明したが、これに限るものではない。
【００５３】
例えば、デジタルテレビ１０１は表示合成の機能を備えていなくても人物カメラ１０６で生成した動画像データと、合成対象の静止画像とをデジタルテレビ１０１以外の装置であるデジタルテレビ１００において上述のように合成し、その合成した結果をデジタルテレビ１００からデジタルテレビ１０１に伝送して、デジタルテレビ１００とデジタルテレビ１０１の双方で同じ合成画像を表示するようにしてもよい。
【００５４】
また人物カメラ１０５と人物カメラ１０６はそれぞれデジタルテレビ１００とデジタルテレビ１０１を介して動画像データを相手方のデジタルテレビに伝送するように構成した例を示したが、通信回路を備えた人物カメラ１０５や人物カメラ１０６を用いて、直接接続されるデジタルテレビ（人物カメラ１０５はデジタルテレビ１００に直接接続され、人物カメラ１０６はデジタルテレビ１０１に直接接続される）を介さずに、動画像データを送信できるように構成してもよい。
【実施例２】
【００５５】
次に、本発明に係る実施例２について説明する。前述の実施例１では特定被写体を検出すると、ユーザー映像を表示中の画像と同じ場所に表示し、かつ画像全体とユーザー映像とでのアルファブレンドを行っていた。本実施例では、特定被写体部分のアルファ値が他の部分のアルファ値と異なる点が実施例１と大きく異なる。
【００５６】
本実施例においてもＣＰＵ２０１は図３に示す動作をするが、Ｓ３１７及びＳ３１８の処理におけるアルファ値の制御に関して処理が異なる。
【００５７】
具体的には、ユーザー映像中に特定被写体を検出すると、ユーザー映像中の
特定被写体領域は  α＝１.０
特定被写体領域以外は  ０＜α＜１
となるように制御する。
【００５８】
図１１は、実施例２において特定被写体領域７２０だけアルファ値が１として表示された場合の一例を示した図である。上述したように特定被写体のアルファ値を１とすることで、特定被写体である指差すような形をしたユーザーの手の部分だけが、画像の最前面に表示され、その他の部分は、実施例１と同様に、画像とユーザー映像とが合成されて表示されるようになる。そのため、より一層、ユーザーが画像の中の一部を特定しやすくなる。
【００５９】
本実施例においては、特定被写体領域のアルファ値を１としたが、特定被写体領域のアルファ値は１未満でもよい。この場合、ユーザーが画像の中の一部を特定しやすくするために、ユーザー映像中の特定被写体領域のアルファ値より、特定被写体領域を除く領域のアルファ値が小さくなるようにすることが好ましい。
【実施例３】
【００６０】
次に、本発明に係る実施例３について説明する。本実施例では、特定被写体部分を予め用意した他の画像に置き換える点が実施例１と異なる。
【００６１】
本実施例においてもＣＰＵ２０１は図３に示す動作をするが、Ｓ３１７及びＳ３１８のアルファブレンド処理においては処理が異なり、ユーザー映像中に特定被写体を検出すると、ユーザー映像中の特定被写体領域は予め用意していた画像に置き換え、
特定被写体領域以外は  α＜１
となるように制御する。
【００６２】
図１２は実施例３において特定被写体領域を他の画像に置換した場合の一例を示した図である。上述したように特定被写体の部分は、予め用意しておいた矢印型のポインタ７３０などのマーク画像に置き換えられ、その他の部分は、実施例１と同様に、画像とユーザー映像とが合成されて表示されるようになる。そのため、より一層、ユーザーが画像の中
の一部を特定しやすくなる。
【００６３】
なお、特定被写体の部分とマーク画像とを同時に表示させることもできる。例えば特定被写体がユーザーの手の画像であるとき、その画像に加えて、例えば人差し指の先端の部分に高輝度点をマークとして表示させる構成を採用することができる。
【００６４】
以上詳記したように、本発明の画像表示方法によれば、ユーザーが画像の一部を指差すようなポーズをすると、デジタルテレビがこれを検知すると共に、ユーザーの指と重なる位置にある画像のアルファブレンドを制御して、ユーザーの指と画像が合成された表示をすることにより、簡単かつ直感的に画像の一部を指差しながら会話ができるようになる。
【００６５】
上記実施例の説明の中では本発明の一実施形態としてデジタルテレビ受信装置を例としたが、本発明の主旨からすれば、これに限ることなく、例えばデジタルカメラで撮影した画像を再生するセットトップボックスのような形態や、パソコンのソフトウェアという形態でも利用可能である。
【００６６】
以上述べた表示方法を実行するプログラムは、画像表示装置に該プログラムを記憶させておく構成や、画像表示装置に外部からプログラムとして供給する構成を好適に採用することができる。
【図面の簡単な説明】
【００６７】
【図１】実施例１に係るテレビコミュニケーションシステムの構成を示した図である。
【図２】実施例１に係るデジタルテレビ１００、１０１のブロック図である。
【図３】実施例１に係るＣＰＵ２０１の処理動作を示すフローチャートである。
【図４】各実施例において使用したリモコンの外観を示す模式図である。
【図５】ユーザーがフォトチャット機能を開始した直後の一覧表示状態の例を示した模式図である。
【図６】ユーザー映像において特定被写体が検知された後の表示例を示した模式図である。
【図７】ユーザーがリモコン操作にて一枚表示に切り替えた場合の表示例を示した模式図である。
【図８】各実施例で用いた特定被写体の例を示した模式図である。
【図９】ユーザー映像において特定被写体が検知された後に画像データとユーザーの映像がアルファブレンド処理されて表示された状態を示した図である。
【図１０】実際にユーザー映像と画像を合成した場合の一例を示した図である。
【図１１】実施例２において特定被写体領域だけがアルファ値が１として表示された場合の表示例を示した図である。
【図１２】実施例３において特定被写体領域を他の画像に置換した場合の表示例を示した図である。
【符号の説明】
【００６８】
１００、１０１  デジタルテレビ
１０３  デジタルカメラ
１０４  インターネット
１０５、１０６  人物カメラ
１０７、１０８  マイク
２０２  メモリ
２０３  シリアルインターフェース
２０４  ネットワークインターフェース
２０５  リモコンインターフェース
２０６  バス
２０７  映像音声エンコーダ
２０８  映像音声デコーダ
２０９  被写体検出部
２１０  グラフィックメモリ
２１１  ビデオキャプチャ部
２１２  音声インターフェース
２１３  表示合成部
２１４  表示器
２１５  スピーカー
２１６  チューナ
２１７  デマルチプレクサ
４００  リモコン
４０１  赤外線発光部
４０２  電源キー
４０３  決定キー
４０４  アップダウンキー
４０６  数字キー
４０７  カラーキー
４０９  フォトチャットキー
７１０  画像
７２０  特定被写体領域
７３０  ポインタ
８０１〜８０４  手の形（特定被写体領域）
【図１】
0004677245.tif 000002
【図２】
0004677245.tif 000003
【図３】
0004677245.tif 000004
【図４】
0004677245.tif 000005
【図５】
0004677245.tif 000006
【図６】
0004677245.tif 000007
【図７】
0004677245.tif 000008
【図８】
0004677245.tif 000009
【図９】
0004677245.tif 000010
【図１０】
0004677245.tif 000011
【図１１】
0004677245.tif 000012
【図１２】
0004677245.tif 000013