(57)【要約】【課題】目視者との距離に応じて画面の表示サイズを適切に制御することを実現した表示装置を提供する。【解決手段】距離測定部１６は、カメラ１２で撮影されたユーザの画像を使って、この被写体であるユーザまでの距離を計算する。そして、映像表示制御部１７は、この距離測定部１６により計算された距離に対応した表示サイズを計算し、通信部１５が受信する通話相手の画像を、この計算した表示サイズに変換してディスプレイ１１に表示する。【選択図】      図２
2006235307.tif 000002
【特許請求の範囲】
【請求項１】
表示手段と、
前記表示手段の表示面と当該表示面の目視者との距離を取得する取得手段と、
前記取得手段により取得された距離に基づき、前記表示手段における画面の表示サイズを算出する算出手段と、
前記算出手段により算出された表示サイズに画面を変換し、この変換後の画面を前記表示手段に表示させる制御手段と
を具備することを特徴とする表示装置。
【請求項２】
前記算出手段は、前記取得された距離が小さくなるに従って、前記画面の表示サイズが小さくなり、前記取得された距離が大きくなるに従って、前記画面の表示サイズが大きくなるように算出を行うことを特徴とする請求項１記載の表示装置。
【請求項３】
前記算出手段は、前記画面の表示サイズが予め定められたｎ種類の表示サイズ間で段階的に縮小・拡大されるように算出を行うことを特徴とする請求項１記載の表示装置。
【請求項４】
前記算出手段は、目視者からの見た目の大きさを一定に保つべく前記画面の表示サイズを変換させるように算出を行うことを特徴とする請求項１記載の表示装置。
【請求項５】
表示手段と、
前記表示手段の表示面周辺部に設けられ、当該表示面の目視者を被写体とする画像を撮像するための撮像手段と、
前記撮像手段により撮像された画像内における被写体像のサイズおよび当該画像を撮像した際の前記撮像手段のズーム倍率に基づき、前記表示手段における画面の表示サイズを算出する算出手段と、
前記算出手段により算出された表示サイズに画面を変換し、この変換後の画面を前記表示手段に表示させる制御手段と
を具備することを特徴とする表示装置。
【請求項６】
前記制御手段は、前記算出手段により算出された表示サイズに変換すべく画面を縮小した場合、その縮小画面が前記表示手段の表示面上において前記撮像手段のより近傍に位置するように前記表示手段に表示させることを特徴とする請求項５記載の表示装置。
【請求項７】
前記算出手段は、前記撮像された画面内における被写体像が小さくなるに従って、前記画面の表示サイズが大きくなり、前記撮像された画像内における被写体像が大きくなるに従って、前記画面の表示サイズが小さくなるように算出を行うことを特徴とする請求項５記載の表示装置。
【請求項８】
前記算出手段は、前記画面の表示サイズが予め定められたｎ種類の表示サイズ間で段階的に縮小・拡大されるように算出を行うことを特徴とする請求項５記載の表示装置。
【請求項９】
前記算出手段は、目視者からの見た目の大きさを一定に保つべく前記画像の表示サイズを変換させるように算出を行うことを特徴とする請求項５記載の表示装置。
【請求項１０】
表示面と当該表示面の目視者までの距離を取得し、
前記取得した距離に基づき、画面の表示サイズを算出し、
前記算出した表示サイズに画面を変換して表示を行う
ことを特徴とする表示装置の表示制御方法。
【請求項１１】
表示面の目視者を被写体とする画像を撮像し、
前記撮像した画像内における被写体像のサイズおよび当該画像を撮像した際のズーム倍率に基づき、画面の表示サイズを算出し、
前記算出した表示サイズに画面を変換して表示を行う
ことを特徴とする表示装置の表示制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、例えば通話相手の画像を話者に提示するテレビ電話機などに適用して好適な表示制御技術に関する。
【背景技術】
【０００２】
近年の画像処理技術および通信技術の向上に伴い、離れた場所にいる者同士が、カメラで撮影した画像を互いに送受信し合い、それぞれが相手からの画像を見ながら会話を楽しむことのできるテレビ電話システムが普及し始めている。また、この種の画像を表示するために利用される表示装置のサイズの多様化、特に、大型化および小型化の両極化も進んでいる。
【０００３】
このようなことから、最近では、送信側で撮影された画像を受信側で表示する際、受信側の表示面の大きさや表示面とユーザとの距離を考慮し、適切なサイズに被写体像を補正するといった提案もなされている（例えば特許文献１等参照）。
【特許文献１】特開２００１−５７６７１公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
ところで、画像を目視する場合に、視野に占める画像の割合（画角）が一定以上を越えると、画像によっては目眩などの乗り物酔いに類似した症状（映像酔い）を起こすことがあるので、大画面の表示装置を利用する際には注意が必要である。特に、焦点の周辺部にちらつきがあると、この傾向が顕著となる。
【０００５】
これを解消するためには、例えば至近距離での目視時には、視野に示す画像の割合が一定以上を越えないように画面の表示サイズを縮小することが好ましい。ここで、前述の特許文献１の手法の適用を考える。
【０００６】
この特許文献１の手法によれば、視聴者が至近距離にいる場合、送信者の被写体像は縮小されて提示されることになる。しかしながら、これは、その画像内に占める被写体像の領域が小さくなるだけのことであって、画面の表示サイズ自体は変化しない。つまり、例えば被写体像の周辺部にちらつきがある画像などに対しては、映像酔いを起こす恐れが依然として残ってしまう。
【０００７】
この発明は、このような事情を考慮してなされたものであり、目視者との距離に応じて画面の表示サイズを適切に制御することを実現した表示装置および同装置の表示制御方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
前述した目的を達成するために、この発明の表示装置は、表示手段と、前記表示手段の表示面と当該表示面の目視者との距離を取得する取得手段と、前記取得手段により取得された距離に基づき、前記表示手段における画面の表示サイズを算出する算出手段と、前記算出手段により算出された表示サイズに画面を変換し、この変換後の画面を前記表示手段に表示させる制御手段とを具備することを特徴とする。
【０００９】
また、この発明の表示装置は、表示手段と、前記表示手段の表示面周辺部に設けられ、当該表示面の目視者を被写体とする画像を撮像するための撮像手段と、前記撮像手段により撮像された画像内における被写体像のサイズおよび当該画像を撮像した際の前記撮像手段のズーム倍率に基づき、前記表示手段における画面の表示サイズを算出する算出手段と、前記算出手段により算出された表示サイズに画面を変換し、この変換後の画面を前記表示手段に表示させる制御手段とを具備することを特徴とする。
【００１０】
また、この発明の表示装置の表示制御方法は、表示面と当該表示面の目視者までの距離を取得し、前記取得した距離に基づき、画面の表示サイズを算出し、前記算出した表示サイズに画面を変換して表示を行うことを特徴とする。
【００１１】
また、この発明の表示装置の表示制御方法は、表示面の目視者を被写体とする画像を撮像し、前記撮像した画像内における被写体像のサイズおよび当該画像を撮像した際のズーム倍率に基づき、画面の表示サイズを算出し、前記算出した表示サイズに画面を変換して表示を行うことを特徴とする。
【発明の効果】
【００１２】
この発明によれば、目視者との距離に応じて画面の表示サイズを適切に制御することを実現した表示装置および同装置の表示制御方法を提供できる。
【発明を実施するための最良の形態】
【００１３】
以下、図面を参照してこの発明の実施形態について説明する。図１は、本発明の一実施形態に係るテレビ電話端末を正面から見た外観図である。
【００１４】
このテレビ電話端末１は、それぞれが相手からの画像を見ながら会話を楽しむことのできる装置であり、図示のように、その正面には、ディスプレイ１１の表示面が設置されている。また、このディスプレイ１１の表示面の上部中央にはカメラ１２、下部中央にはマイク１３、両側面部にはスピーカ１４がそれぞれ設置されている。
【００１５】
図２には、このテレビ電話端末１の内部構成が示されている。図２に示すように、テレビ電話端末１は、前述したディスプレイ１１、カメラ１２、マイク１３およびスピーカ１４のほか、通信部１５、距離測定部１６および映像表示制御部１７を有している。
【００１６】
通信部１５は、通話相手が利用する他のテレビ電話端末１との間で通信網を介して画像および音声を送受信し合うための通信を実行する。距離測定部１６は、カメラ１２で撮像された画像の大きさを用いてユーザまでの距離を測定する。そして、映像表示制御部１７は、この距離測定部１６で測定された距離に基づき、通信部１５で受信された相手側の画面の表示サイズを変換してディスプレイ１１に表示制御する。
【００１７】
図３は、このテレビ電話端末１で実行される、ユーザまでの距離に応じた画面の表示サイズ変換についての基本原理を説明するための概念図である。
【００１８】
いま、ユーザＸとユーザＹとがテレビ電話端末１を使って映像付きの通話を行っているものと想定する。ここでは、ユーザＸ側のテレビ電話端末１に着目する。つまり、カメラ１２はユーザＸを被写体とする画像を撮像し、ディスプレイ１１には、通話相手であるユーザＹを被写体とする画像が表示されているわけである。
【００１９】
このテレビ電話端末１では、テレビ電話端末１との距離（標準利用距離）と、その距離での画面サイズ（標準表示サイズ）とをユーザが自分の好みで任意に登録することができるようになっている。この登録で保持される情報は、標準利用距離にユーザがいる時にズームしていないカメラ１２によって撮影されたユーザ自身の映像サイズと画面上での映像サイズである。
【００２０】
この登録がなされたテレビ電話端末１では、カメラ１２によって撮影されたユーザの画像と、その時点でのカメラ１２のズーム倍率とから、標準映像サイズを基準とした際の表示倍率が（１）式により計算される。
【００２１】
（表示倍率）＝（カメラズーム倍率）／（映像サイズ比率）    …  （１）式
ここで、カメラズーム倍率は、ズームしない状態に対して、映像中の対象物の長さが何倍になるかを表す数値である。また、映像サイズ比率は、カメラ１２で撮影された映像中のユーザの映像サイズが、標準利用距離でカメラをズームしていない場合の標準映像サイズに比べて、長さで何倍になっているかを表す数値である。
【００２２】
例えば、図３（Ａ）の状態、つまり距離Ｌ１にユーザＸがいた時にユーザＹの表示サイズをｈ２１とした状態が標準として登録されていた場合に、図３（Ｂ）のように、ユーザＸが距離Ｌ１の２倍の距離Ｌ２に移動した場合を考える。この場合、カメラ１２の倍率が等倍であれば、ユーザＸの映像サイズは、移動前のｈ１１からその半分のｈ１２となるので、（１）式で計算される表示倍率は２となり、ディスプレイ１１上のユーザＹの表示サイズは移動前のｈ２１からその２倍のｈ２２になる。従って、見かけ上の画面サイズは同じものとなる。逆に、ユーザＸが距離Ｌ２から１／２の距離Ｌ１まで接近すると、ディスプレイ１１上のユーザＹの画面サイズは半分になる。これは、図３（Ｂ）の状態が標準として登録された場合も同様である。つまり、登録を適切に行うことで、視野に占める画像の割合（画角）を一定の範囲内に収めることができる。画像内に占める被写体像の領域を小さくするのではなく、画面サイズそのものを小さくするので、映像酔いの要因を排除することができる。
【００２３】
この登録は、ユーザ毎に行えるようにすることが好ましい。また、利用中でも、表示サイズの自動調整の有効／無効の設定や、この自動調整された表示サイズに対する拡大／縮小をユーザの操作により指定できるようにしても良い。
【００２４】
なお、テレビ電話端末１では、その性格上、画面の近くにユーザの視線が集中する傾向にある。そこで、例えば図４（Ａ）に示すように、ディスプレイ１１の表示面ａ１と比べて表示サイズが小さくなる場合には、その画面ａ２をなるべくカメラ１２の近くに寄せるように表示する。図４（Ｂ）に示すように、ディスプレイ１１の中央部に画面ａ２を確保するのが一般的であるが、これでは、結果的に、画面ａ２に視線が向けられた際ユーザの視線がずれて撮像されるので、視線を合せて会話できないという問題がある。なるべくカメラに近づけて画面ａ２を確保する。
【００２５】
また、実際のテレビ電話の画像には、相手側の画像が必ずしも適切な大きさで表示されているとは限らない。例えば背景画像の占める割合が大きい場合には、表示サイズを小さくした場合には、相手人物の画像が小さくなりすぎて見づらくなる。逆に、拡大する場合にも、背景画像の部分が邪魔になって十分な大きさで表示できない場合がある。
【００２６】
そこで、このテレビ電話端末１では、表示すべき画像に対して、動き検出や人物像の切り出し等の処理を施し、表示の必要な部分と背景部分を切り分けてトリミングし、トリミング後の画像を必要な表示サイズで表示することで、このような問題を解決する。
【００２７】
図５は、このテレビ電話端末１で実行される、視聴者までの距離に応じた画面の表示サイズ変換の動作手順を示すフローチャートである。
【００２８】
まず、距離測定部１６が、カメラ１２で撮影されるユーザの画像を使って、この被写体であるユーザまでの距離を計算する（ステップＳ１）。そして、前回の計算時との間に距離の変化があるかどうかを調べ（ステップＳ２）、変化が認められたら（ステップＳ２のＹＥＳ）、映像表示制御部１７が、新たに計算された距離に対応した表示サイズを計算する（ステップＳ３）。
【００２９】
この時、映像表示制御部１７は、通信部１５で受信される通話相手側の画像がトリミング可能な画像かどうかを調べ（ステップＳ４）、可能であれば、被写体像を適切な大きさにするためのトリミング処理を実行する（ステップＳ５）。
【００３０】
そして、映像表示制御部１７は、計算した表示サイズがディスプレイ１１の表示面サイズ以下かどうかを調べ（ステップＳ６）、以下であれば（ステップＳ６のＹＥＳ）、計算した画面サイズに画像を変換してディスプレイ１１に表示する（ステップＳ７）。一方、計算した表示サイズがディスプレイ１１の表示面サイズより大きかった場合には（ステップＳ６のＮＯ）、その画像をディスプレイ１１の表示面サイズで表示する（ステップＳ８）。
【００３１】
以上の処理は、例えば予め定められた期間毎に周期的に繰り返し、または、予め定められたタイミング毎に繰り返し実行される。
【００３２】
このように、このテレビ電話端末１によれば、目視者との距離に応じて画像を表示する画面サイズを適切に制御することが実現される。
【００３３】
なお、ここでは、カメラ１２で撮像された画像からユーザまでの距離を計算する例を説明したが、本発明はこれに限られず、例えば赤外線を照射してその反射状況により距離を測定する等、距離を取得するための種々の手法が適用可能である。つまり、テレビ電話端末１に限らず、カメラ１２を持たないテレビジョン装置等にも本発明は応用することが可能である。
【００３４】
また、画面サイズの縮小・拡大は、計算された距離の短縮・延長に対応させてリニアに行う必要はなく、段階的に切り換えるようにしても良い。例えば、ある距離内にユーザがいる場合とその距離以上視聴者が離れている場合との２段階で表示サイズを切り換えることも有効である。また、表示サイズの最小値として０、つまり表示を行わないようにすることを切り換えの一形態とすることも可能である。これにより、例えば子供が必要以上に画面に近づいた場合は表示を消去するといった制御も行うことができる。
【００３５】
つまり、本発明は上記実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
【図面の簡単な説明】
【００３６】
【図１】本発明の一実施形態に係るテレビ電話端末を正面から見た外観図
【図２】同実施形態のテレビ電話端末の内部構成を示す図
【図３】同実施形態のテレビ電話端末で実行される、ユーザまでの距離に応じた画面の表示サイズ変換についての基本原理を説明するための概念図
【図４】同実施形態のテレビ電話端末において表示サイズを縮小した場合の表示領域の確保方法を説明するための図
【図５】同実施形態のテレビ電話端末で実行される、ユーザまでの距離に応じた画面の表示サイズ変換の動作手順を示すフローチャート
【符号の説明】
【００３７】
１…テレビ電話端末、１１…ディスプレイ、１２…カメラ、１３…マイク、１４…スピーカ、１５…通信部、１６…距離測定部、１７…映像表示制御部。
【図１】
2006235307.tif 000003
【図２】
2006235307.tif 000004
【図３】
2006235307.tif 000005
【図４】
2006235307.tif 000006
【図５】
2006235307.tif 000007