(57)【要約】【課題】対話を行う相手側の利用者が顔の位置を動かした場合でも、違和感なく利用者同士の視線を合致させる効果が得られる撮像装置付き表示装置を提供すること。【解決手段】撮像装置付き表示装置は、表示パネル１０２とその背面に設けた撮像装置を備える。送受信回路５６は、相手側表示装置からの画像信号を受信し、システム制御回路５０は表示処理回路５２を介して表示パネル１０２に相手の画像を表示させる制御を行う。演算回路５７は、受信した相手の利用者の顔画像の位置を検出し、顔画像の位置の変化量に基づいて顔画像の表示位置を決定する。表示処理回路５２はシステム制御回路５０の制御指令にしたがって、演算回路５７が算出した顔画像の表示位置に基づいて表示パネル１０２の画面上に顔画像を表示させる。【選択図】  図２
2015109557.tif 000002
【特許請求の範囲】
【請求項１】
表示部と該表示部の背面に配置された撮像部を備える表示装置であって、
画像信号の入力および前記撮像部による撮像信号の出力を行う入出力手段と、
前記入出力手段により得られた画像信号から顔画像の位置情報を取得し、該顔画像の位置の変化量を算出して該変化量が閾値以下となる顔画像の表示位置を決定する演算手段と、
前記演算手段が決定した前記顔画像の表示位置に前記顔画像を表示させる制御を行う表示制御手段と、を備えることを特徴とする表示装置。
【請求項２】
前記演算手段は、前記顔画像の位置の変化量と受信画像のフレーム周期から時間変化量を算出して前記顔画像の表示位置を決定することを特徴とする請求項１に記載の表示装置。
【請求項３】
前記演算手段は、前記顔画像の位置の変化量を予測して前記顔画像の表示位置を決定することを特徴とする請求項１に記載の表示装置。
【請求項４】
前記演算手段は、前記表示部の観察距離の情報を取得し、該観察距離および前記顔画像の表示位置から視線振れ角を算出して前記顔画像の表示位置を決定することを特徴とする請求項１乃至３のいずれか１項に記載の表示装置。
【請求項５】
前記演算手段は、前記撮像部により撮像された顔画像の位置と前記撮像部との相対位置を検出して前記表示部の表示画面における画像の非表示領域を決定し、
前記表示制御手段は、前記顔画像および前記演算手段が決定した非表示領域を前記表示部に表示させる制御を行うことを特徴とする請求項１乃至４のいずれか１項に表示装置。
【請求項６】
表示部と該表示部の背面に配置された撮像部を備える表示装置にて実行される制御方法であって、
入出力手段により画像信号の入力および前記撮像部の撮像信号の出力を行う入出力ステップと、
前記入出力手段により得られた画像信号から顔画像の位置を演算手段が検出し、当該顔画像の位置の変化量を算出して該変化量が閾値以下となる顔画像の表示位置を決定する演算ステップと、
前記演算手段が決定した前記顔画像の表示位置に前記顔画像を表示させる制御を表示制御手段が行う表示制御ステップと、を有することを特徴とする表示装置の制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、有機ＥＬ（エレクトロルミネッセンス）、液晶、プラズマ方式などの比較的薄型の表示機器と一体的に撮像機器を備えた表示装置に関する。さらに詳しくは、テレビ会議などのリアルタイム双方向通信などに好適な撮像機能を有する表示装置に関する。
【背景技術】
【０００２】
近年、通信網が発達し、テレビ会議などのリアルタイム双方向通信が可能となった。テレビ会議は、被写体像を電気的な画像信号に変換する撮像手段と、電気的な画像信号を光信号に変換して表示する表示手段を備える。テレビ会議の利用者は、表示画面に映った相手の顔画像を見ながら会話をし、同時に利用者の顔は、撮像手段により撮影され電気信号に変換されて相手に送られる。
【０００３】
従来のテレビ会議などの双方向通信用装置では、撮像手段が表示装置の周辺部に配置されるか、または表示装置とは別の独立した撮像装置として設置する構成である。このため、表示画面を見ている観察者の撮影は、斜め方向から行われることになる。表示画面に映った相手の顔は視線が別のところを向いており、相互に話していてもぎこちなくなる可能性がある。相手と面と向かって話をする場合に比較して違和感をもたらすという問題がある。また撮像装置と表示装置とを別々に製造する形態ではコストが嵩み、別個の装置として取り扱う必要があるため、システムの構築が煩雑になるという問題がある。
【０００４】
これらの問題を解決するために、特許文献１は撮像装置付き表示装置を開示している。この装置は、複数の表示画素と複数の表示画素の各表示画素間に配置された遮光部材とを備えた表示手段と、表示手段の背部に配置された撮像手段とを具備する。遮光部材は一部に撮像手段に光を導くための開口部を備え、撮像手段は開口部に対応した位置に結像手段を備える。表示手段を見ながらの撮像ができ、かつ表示手段に表示される相手と自分の視線を一致させることが可能となる。その結果、テレビ会議等で対話する相手に対して利用者が自分を見て話しているように認識してもらえるようになり、コミュニケーション力が向上する。利用者同士の視線を合致させる際、利用者がカメラの場所を注視するように、カメラの配設されている位置に相手側の顔画像を重畳する表示制御が行われる。
【０００５】
図８は従来の装置の画像表示方法の説明図である。撮像装置付き表示装置１の表示パネル２の背面にて、表示画面の中央部にカメラ１０が配設されている。図８（Ａ）は表示画像を例示し、表示パネル２には利用者αの顔画像がカメラ１０の位置に重なって表示される。利用者αの顔画像の背景として、例えば窓枠γが映り込んでいる。図８（Ｂ）は図８（Ａ）に示す状態から利用者αが動いた場合を示している。撮像装置付き表示装置１は、利用者αの顔画像とカメラ１０の位置とが重畳するように表示制御を行う。その結果、図８（Ｃ）に示すように、利用者αの顔画像は画面中央の位置に表示される。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００５−１７６１５１号公報
【特許文献２】特開２０００−４８１８４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
従来の装置では、相手側の利用者が顔の位置を動かした場合、顔画像の位置は、例えばカメラの配設された画面中央に固定された状態となり、背景だけが動いてしまう。よって、いわゆる流し撮りをしているかのような表示画像となり、利用者が違和感をもつ可能性がある。
本発明の目的は、対話を行う相手側の利用者が顔の位置を動かした場合でも、違和感なく利用者同士の視線を合致させる効果が得られる撮像装置付き表示装置を提供することである。
【課題を解決するための手段】
【０００８】
上記課題を解決するために、本発明に係る装置は、表示部と該表示部の背面に配置された撮像部を備える表示装置であって、画像信号の入力および前記撮像部による撮像信号の出力を行う入出力手段と、前記入出力手段により得られた画像信号から顔画像の位置情報を取得し、該顔画像の位置の変化量を算出して該変化量が閾値以下となる顔画像の表示位置を決定する演算手段と、前記演算手段が決定した前記顔画像の表示位置に前記顔画像を表示させる制御を行う表示制御手段と、を備える。
【発明の効果】
【０００９】
本発明によれば、対話を行う相手側の利用者が顔の位置を動かした場合でも、違和感なく利用者同士の視線を合致させる効果が得られる。
【図面の簡単な説明】
【００１０】
【図１】本発明の実施形態に係る撮像装置付き表示装置の正面図（Ａ）および上面図（Ｂ）である。
【図２】撮像装置付き表示装置の構成例を示すブロック図である。
【図３】撮像装置付き表示装置の表示例を示す説明図である。
【図４】撮像装置付き表示装置の動作を説明するフローチャートである。
【図５】表示位置の制御例を説明するグラフである。
【図６】顔の追尾処理を説明するグラフである。
【図７】本発明の変形実施形態に係る撮像装置付き表示装置の正面図（Ａ）および上面図（Ｂ）である。
【図８】従来技術による表示方法の説明図である。
【発明を実施するための形態】
【００１１】
以下に、本発明の実施形態について、添付図面を参照して説明する。本実施形態に係る表装置は、表示部と該表示部の背面に配置された撮像部を備える。図１から図７を参照して、本実施形態に係る撮像装置付き表示装置（以下、単に表示装置という）を用いて、複数の利用者がテレビ会議を行う例を説明する。本実施形態では、第１空間（以下、空間１という）で利用者βがテレビ会議を利用し、空間１とは異なる第２空間（以下、空間２という）で利用者αがテレビ会議を利用する例を示す。
【００１２】
図１（Ａ）は、空間１のテレビ会議システム等で使用される表示装置１０１の正面図である。表示装置１０１の表示画面には空間２の利用者αが映し出される。また、図１(Ｂ)は表示装置１０１の上面図であり、空間１で表示装置１０１を観察する利用者βとの位置関係を示す。以下、表示装置１０１の表示面に垂直な方向をｚ方向（背面側を正方向）とする。ｚ方向に直交する左右方向をｘ方向（右側を正方向）とし、上下方向をｙ方向（上側を正方向）と定義する。図１（Ｂ）にて、利用者βと表示面との距離をＺβとし、撮影光軸を基準とした利用者βのｘ方向のずれ量をＸβとする。
【００１３】
表示パネル１０２は光を透過可能な表示手段である。表示パネル１０２の背面（図中＋ｚ方向）には、表示パネル１０２を観察する利用者を撮影するための撮像部として、カメラ１１が配置されている。カメラ１１は撮像光学系を構成するレンズ群と、撮像素子および撮像素子駆動回路から構成される。カメラ１１は、表示パネル１０２の画面中央よりもやや上方（図中＋ｙ方向）に配設され、表示パネル１０２の一部の表示画素部を通して利用者βを撮影する。表示パネル１０２は有機ＥＬで構成され、カメラ１１の撮影光路にて光が透過するように構成されている。また表示パネル１０２の周囲には、利用者の音声を検出する音声検出手段としてのマイク１２１、１２２、１２３および１２４と、空間２で検出された音声を伝えるスピーカ１３１および１３２が配置されている。なお、相手側の空間２で使用される表示装置についても同様の構成であるため、説明を省略する。
【００１４】
次に、図２から図４を参照して、表示装置１０１の制御動作を説明する。表示装置１０１を、異なる空間でテレビ会議に使用することで、利用者同士の視線を合致させる効果が得られるとともに、動きに違和感のない画像を表示することができる。空間１で利用者βがテレビ会議に参加し、空間２で利用者αがテレビ会議に参加している場合を想定する。
【００１５】
図２は表示装置１０１の構成例を示すブロック図である。撮像素子１１０は撮像光学系を通過して結像される被写体からの光を受光して光電変換する。撮像素子駆動回路５１はシステム制御回路５０からの制御指令に従って撮像素子１１０を駆動する。表示処理回路５２は表示パネル１０２の表示制御手段であり、表示パネル１０２は表示画像信号に従って画像を表示する。マイク１２０（図１（Ａ）：１２１〜１２４参照）は、検出信号を音声処理回路５３に出力する。スピーカ１３０（図１（Ａ）：１３１，１３２参照）は駆動回路５４に接続されており、音声を出力する。
【００１６】
表示装置１０１の各部を制御するシステム制御回路５０はＣＰＵ（中央演算処理装置）を備え、メモリから制御プログラムを読み出して実行し、撮像素子駆動回路５１、表示処理回路５２、音声処理回路５３、駆動回路５４などを制御する。操作スイッチ（ＳＷ）４０は、テレビ会議システムを起動させる際に利用者が使用する操作部材であり、操作信号をシステム制御回路５０に出力する。リモートコントロール回路５５は表示装置１０１を操作する際に利用者が使用し、操作信号をシステム制御回路５０に出力する。送受信回路５６は相手側表示装置との間で画像信号や音声信号を送受し合う信号入出力手段である。つまり、送受信回路５６は相手側表示装置からの画像信号の入力処理、およびカメラ１１の撮像信号を相手側表示装置の出力する出力処理を行う。演算回路５７は、カメラ１１で撮影された画像情報を取得して、利用者の顔認識等の演算処理を行う。記憶回路５８はシステムで使用する各種情報や、制御プログラム等を記憶する。送受信回路５６、演算回路５７、記憶回路５８はシステム制御回路５０に接続されている。
【００１７】
図４は表示装置１０１の動作を説明するフローチャートである。
空間１にてテレビ会議の利用者βが表示装置１０１の操作スイッチ４０を操作すると、テレビ会議システムが起動する（Ｓ１００）。システム制御回路５０は、送受信回路５６を通して空間２の表示装置との通信状態を設定する（Ｓ１０１）。相手側表示装置との通信状態が設定されると、システム制御回路５０は相手側表示装置のシステム情報を確認する（Ｓ１０２）。システム情報とは、表示装置が有するカメラの数、カメラの焦点距離情報および位置情報、送信される信号の形態等の情報である。送信される信号の形態の情報とは、例えば送信される画像信号のフレーム周期の情報である。
【００１８】
さらに、システム制御回路５０は空間１の利用者情報を初期設定する（Ｓ１０３）。本実施形態での利用者情報は、利用者の人数、会話を行っている話者の目の位置、話者以外の利用者の目の位置等の情報であり、記憶回路５８に記憶される。次に、カメラ１１が空間１の利用者βを撮影する（Ｓ１０４）。このとき、システム制御回路５０は撮像素子駆動回路５１を介して撮像素子１１０に撮影指示を行う。同時に、音声処理回路５３はマイク１２１〜１２４にて検出した音声信号を相手側表示装置に送信可能な所定の信号形態に処理する。
【００１９】
カメラ１１によって空間１の撮影が行われると、システム制御回路５０は送受信回路５６を介して画像信号および音声信号、利用者情報の信号を相手側表示装置に送信する（Ｓ１０５）。つまり、カメラ１１で撮影した画像信号と、音声処理回路５３で処理された音声信号と併せて、記憶回路５８に記憶された空間１の利用者情報の送信処理が実行される。カメラ１１で撮影した画像信号は時系列にしたがって順次に送信される。
【００２０】
次に演算回路５７は、カメラ１１で撮影された空間１の画像から、利用者βの顔認識処理を行う（Ｓ１０６）。このとき、演算回路５７は顔領域の目の位置を検出して（Ｓ１０７）、カメラ１１の撮影光軸に対する、利用者βの顔の中心位置の変位量Ｉｘβを算出する。システム制御回路５０は算出結果を利用者情報として記憶回路５８に記憶する（Ｓ１０８）。画像から利用者の顔を認識する方法は、本出願人より特許文献２に開示されている。この顔領域抽出処理では、肌色領域を検出し、肌色領域の射影分布を作成する作成工程の後、作成された射影分布から放物線を探索する探索工程を行う。探索された放物線の位置から顔領域候補が抽出され、顔領域候補に対して知識処理により顔領域かどうかが判断される。
【００２１】
また演算回路５７は、撮影された利用者βの顔画像の目の間隔から、利用者βが表示装置１０１を観察している位置までの距離Ｚβを算出する。成人の目の間隔はおおよそ６５ｍｍであるため、カメラ１１の撮影倍率に基づいて観察距離Ｚβを算出可能である。
次にシステム制御回路５０は送受信回路５６を介して、テレビ会議の相手側表示装置から送信されてきた画像信号、音声信号および利用者情報を受信する（Ｓ１０９）。空間２の利用者情報は利用者αの顔の位置Ｉｘαを含む。この位置情報については、表示装置１０１の表示パネル１０２の画面サイズが考慮され、記憶回路５８に記憶される。
【００２２】
演算回路５７は、受信画像における空間２の利用者αの顔画像について、表示パネル１０２での表示位置Ｄｘαを、空間１の利用者βの観察位置に応じて設定する（Ｓ１１０）。受信画像の表示位置の設定処理については、図４（Ｂ）を用いて後述する。
システム制御回路５０は表示処理回路５２を介して表示パネル１０２の画面上に空間２の利用者αの画像を表示する（Ｓ１２０）。図３は、表示パネル１０２に表示される空間２の利用者αの画像を例示する。表示画像については、あたかもカメラが小さくパンニングしたかのように、顔や背景が滑らかな動きで表示が行われる。空間１の利用者βは、空間２の利用者αと視線が合致しているので、コミュニケーションが向上するとともに、表示の変化に対しても違和感をもつことがない。
【００２３】
表示パネル１０２に空間２の利用者αの画像が表示されると、音声処理回路５３はマイク１２１、１２２、１２３および１２４にて検出した音声信号から、空間１で会話を行っている話者を検出する（Ｓ１２１）。複数の音声信号から話者を検出する方法には、例えば遅延和方式等がある。会話を行っている話者の位置が検出されると、記憶回路５８に記憶された利用者の目の位置データが、話者の目の位置データとして更新される（Ｓ１２２）。そしてシステム制御回路５０は操作スイッチ４０の状態を確認して通信の終了判定を行う（Ｓ１２３）。テレビ会議システムが使用中である場合、Ｓ１０５に処理を戻して撮影画像等の送受信を続行する。
【００２４】
一方、利用者によって操作スイッチ４０のオフ操作が行われたことをシステム制御回路５０が判定すると（Ｓ１２３でｙｅｓ）、相手側表示装置との送受信を終了させる（Ｓ１２４）。さらに、システム制御回路５０はカメラ１１による利用者の撮影を終了させるとともに、表示パネル１０２の画像表示を終了させる（Ｓ１２５）。
【００２５】
次に、図４（Ｂ）のフローチャートを参照して、図４（Ａ）のＳ１１０の定義済み処理、すなわち相手側表示装置から送られてきた画像の利用者αの顔を、表示パネル１０２で表示位置Ｄｘα（図１（Ａ）参照）に設定する処理を説明する。
まずシステム制御回路５０は空間２の利用者情報を用いて、利用者αの目の位置から顔の中心位置を認識し、利用者αの顔の中心位置と表示画面の中心との距離Ｉｘαを確認する（Ｓ１１１）。図１（Ａ）には、相手側表示装置から送られてきた画像を、表示装置１０１の画面にそのまま表示した状態を例示している。図１（Ａ）では、利用者αの顔の中心位置と表示画面の中心との距離Ｉｘαが、表示パネル１０２での利用者αの顔の表示位置Ｄｘαと一致している例を示す。
【００２６】
演算回路５７は、空間２の利用者αの目の位置と、既に確認した空間２の表示装置のシステム情報より、受信した画像信号の特性を判定する（Ｓ１１２）。即ち、演算回路５７は、記憶回路５８に記憶された空間２の利用者αの顔の中心位置情報Ｉｘαと、受信画像のフレーム周期Δｔとに基づいて、利用者αの顔の位置の時間変化量ΔＩｘαを計算する。前回の受信画像における空間２の利用者αの顔の位置をＩｘα０とし、今回の受信画像における空間２の利用者αの顔の位置をＩｘα１とする。位置の時間に対する変化量を示す時間変化量ΔＩｘαは、
ΔＩｘα＝（Ｉｘα１−Ｉｘα０）／Δｔ                              （１）式
と表される。
【００２７】
システム制御回路５０は、記憶回路５８に記憶された空間１の利用者βの位置情報Ｚβを確認する（Ｓ１１３）。システム制御回路５０は、演算回路５７が（１）式により算出した時間変化量ΔＩｘαを確認する（Ｓ１１４）。空間２の利用者αの顔の位置が変化している場合、演算回路５７は表示パネル１０２の画面上にて、空間２の利用者αの顔の表示位置Ｄｘαを算出する（Ｓ１１５）。Ｓ１１４で空間２の利用者αの顔の位置が変化していない場合、Ｓ１１６に移行する。
【００２８】
本実施形態では、相手側の利用者の顔の位置が動いた場合でも、利用者同士の視線を合致させるとともに、顔や背景が滑らかに動くように制御することで、違和感のない表示制御を行う。演算回路５７は（１）式の時間変化量ΔＩｘαに応じて、利用者αの表示位置Ｄｘαを決定する。図１（Ｂ）の上面図では、相手側表示装置から送られてきた利用者αの画像を表示装置１０１の画面にそのまま表示した場合を例示し、空間１の利用者βの注視位置とカメラ１１とのなす視線振れ角θβを示している。空間１の利用者βは、空間２の利用者αの顔の表示位置Ｄｘαを注視するので、視線振れ角θβは、
tan（θβ）≒Ｄｘα／Ｚβ                                          （２）式
の関係式を満たす。tan(θβ)は視線振れ角θβの正接関数を表す。
【００２９】
また、利用者βの注視位置とカメラ１１とのなす角度θβは、視線が合致していると認識できる角度の限界θβｔｈ内に収まるように制御される。本実施形態では、限界角度θβｔｈは２[°]に設定している。
ここで、前回の受信画像における利用者αの顔の、表示パネル１０２上での表示位置をＤｘα0とし、観察者の位置を基準として表示位置Ｄｘα0とカメラ１１とのなす角度をθβ0とする。さらに、今回の受信画像における利用者αの顔の、表示パネル１０２上での表示位置をＤｘα１とし、観察者の位置を基準として表示位置Ｄｘα１とカメラ１１とのなす角度をθβ１とする。時間変化量をΔθβとすると、視線振れ角は、
θβ１  ＝  θβ0  ＋  Δθβ  ＜  θβｔｈ                        （３）式
を満足する。
【００３０】
図５は顔画像の表示位置の制御を説明する図である。横軸は、空間２で撮影された利用者αの顔の位置の時間変化量ΔＩｘα（単位：ｍｍ）を示し、縦軸は、空間１の利用者βに対する、表示装置１０１に表示される利用者αの顔の位置とカメラ１１とのなす角度の制御量Δθβ（単位：degree）を示す。
図５(Ａ)は、前回における利用者αの顔の位置ＤＸα０とカメラ１１とのなす角度θβ0が零の場合の制御例を示す。すなわち、前回の受信画像ではカメラ１１の光軸上に空間２の利用者αの顔画像が位置する場合の制御例を示している。
本実施形態では、利用者αの顔の位置の時間変化量ΔＩｘαが所定の閾値以下の場合（例えば、制御量Δθβ≦１[°]の範囲）、時間変化量ΔＩｘαに対して線形に変換するように制御量Δθβが設定される。また、時間変化量ΔＩｘαが所定の閾値よりも大きい場合には、受信画像をそのまま表示せずに、表示位置が大きく変化しないように補正してから画像表示が行われる。このときの角度制御量Δθβは、視線が合致していると認識できる角度の限界値以内（θβｔｈ以下）に入るように設定される。
【００３１】
以上のように、空間２で撮影された利用者αの顔の位置の時間変化量ΔＩｘαに対して、空間１の利用者βが視認する表示装置１０１の画面に表示される利用者αの顔の位置とカメラ１１とのなす角度の制御量Δθβが決定される。角度制御量Δθβは、表示の変化量が大きくなり過ぎないように、所定値以下になるように演算回路５７が決定する。角度制御量Δθβが決定されると、演算回路５７は上式（２）および（３）を用いて、空間２の利用者αの、表示パネル１０２上での顔の表示位置Ｄｘα１を算出（Ｓ１１５）し、顔の表示位置を決定する（Ｓ１１６）。その後、図４（Ａ）のメインルーチンに戻る（Ｓ１１７）。
図５（Ａ）では、前回の受信画像にてカメラ１１の光軸上に空間２の利用者αの顔画像が位置する場合の制御例を示した。図５（Ｂ）では、前回の受信画像にて利用者αの顔画像がカメラ１１の光軸上に位置しない場合の制御例を示す。利用者αの顔の表示位置ＤＸα０とカメラ１１とのなす角度θβ0が、例えば１[°]の場合を例示する。
【００３２】
図５（Ｂ）にて、利用者αの顔の表示位置ＤＸα０とカメラ１１とのなす角度θβ0が所定値以上の場合、表示位置が大きく変化しないように補正してから画像が表示される。顔の位置の時間変化量ΔＩｘαが小さい場合でも受信画像をそのまま表示せずに、表示位置が補正される。このときの角度制御量Δθβは、視線が合致していると認識できる角度の限界値以内（θβｔｈ以下）に入るように設定される。
【００３３】
本実施形態では、演算回路５７が受信画像から、空間２の利用者αの顔の位置Iｘαを取得し、表示パネル１０２上での利用者αの顔の表示位置Ｄｘαを決定する例を示した。一方、顔の動きを事前に予測することにより、画像を遅延無く滑らかに表示可能である。図６は顔の追尾の説明図であり、横軸に時間を示し、縦軸に顔画像の動きに対応する角度を示す。演算回路５７は顔の位置の時間的変化（図中の実線領域）を監視し、将来的な顔の位置を外挿することで、顔画像の動きを予測（図中の点線領域）し、顔画像の表示位置を決定する。これにより、画像を遅延無く滑らかに表示可能となる。
本実施形態では、対話を行う相手側の利用者が顔の位置を動かした場合、顔画像の位置を撮像部の配置された画面中央部に固定しようとして背景だけが動いてしまうことがないので、違和感なく利用者同士の視線を合致させる効果が得られる。
【００３４】
なお本実施形態では、表示装置１０１を観察する利用者βの観察距離Ｚβを、利用者βの目の間隔に基づいて算出する例を説明した。これに限らず、表示パネル１０２の大きさによって概ね観察距離は決まるため、表示パネル１０２の大きさに従った観察距離Ｚβを自動的に設定しても構わない。
【００３５】
［変形実施形態］
次に本発明の変形実施形態を説明する。
図７(Ａ)は、空間２でのテレビ会議システムに使用する表示装置２０１の正面図である。表示装置２０１の表示画面には空間１の利用者βが映し出されている。また、図７(Ｂ)は表示装置２０１の上面図である。空間２での表示装置２０１を観察する利用者αとの位置関係を示している。表示装置２０１は空間１で使用する表示装置１０１と同様の構成である。
図７(Ａ)に示すように、表示パネル２０２の画面に表示される、空間１の画像の一部には非表示領域２０３が設定されている。図７(Ｂ)に示すように、利用者αがカメラ２１１の撮影光軸から離れた位置Ｘαにて表示パネル２０２を注視する場合、表示パネル２０２の表示画面に非表示領域２０３が設定される。非表示領域２０３の設定目的は、観察者に対して観察位置をカメラ２１１の撮影光軸寄りに誘導することである。表示パネル２０２に非表示領域２０３を設定するか否かの判定処理は、以下のように行われる。
【００３６】
システム制御回路５０は、表示パネル２０２の背面に配設されたカメラ２１１で利用者αを撮影する。次に演算回路５７は、カメラ２１１で撮影された画像から空間２での利用者αの顔認識処理を実行する。このとき、演算回路５７は利用者αの顔領域の目の位置を検出し、カメラ２１１の撮影光軸に対する利用者αの顔の中心位置の変位量Ｘαを算出する。実空間上でのカメラ２１１の撮影光軸に対する、利用者αの顔の中心位置の変位量Ｘαは、カメラ２１１の撮影倍率から換算される。この変位量Ｘαが所定値（判定基準値）以上である場合、演算回路５７は利用者αをカメラ２１１の撮影光軸寄りに誘導するために、表示パネル２０２の非表示領域２０３を設定する。システム制御回路５０は表示処理回路５２を介して表示パネル２０２の画面上に、空間１の利用者βの画像を非表示領域２０３とともに表示させる。図７（Ａ）の表示画面を見た利用者αは、非表示領域２０３のない画面が表示される観察位置へと移動する。
変形実施形態によれば、利用者の顔画像の位置と撮像部との相対位置を検出して利用者をカメラ２１１の撮影光軸寄りに誘導することで、利用者同士の視線を合致させる効果を奏する。
【符号の説明】
【００３７】
１１，２１１  カメラ
１０１，２０１  表示装置
１０２，２０２  表示パネル
１２１〜１２４  マイク
１３１〜１３２  スピーカ
【図１】
2015109557.tif 000003
【図２】
2015109557.tif 000004
【図３】
2015109557.tif 000005
【図４】
2015109557.tif 000006
【図５】
2015109557.tif 000007
【図６】
2015109557.tif 000008
【図７】
2015109557.tif 000009
【図８】
2015109557.tif 000010