(57)【特許請求の範囲】
【請求項１】
通信を介して異なる一方の地点および他方の地点に位置する第１の端末装置および第２の端末装置の間で映像および音声情報の交換がなされる双方向通信システムにおいて、
一方の地点の利用者の顔の位置および視線方向を検出する一の検出方法と、上記利用者の顔の位置を検出し、検出された顔の位置とカメラおよび上記一方の地点の利用者との距離に応じて視線方向を推定する他の検出方法の一方によって得られた顔の位置および視線方向に応じて、上記他方の地点のカメラの光軸を制御する制御情報を出力する第１の検出手段と、上記一の検出方法と上記他の検出方法との一方を選択する第１の設定手段と、上記第２の端末装置から送られてくる制御情報に応じて、上記一方の地点のカメラの光軸を制御する第１の制御手段と、上記他方の地点のカメラによる映像を映し出す第１の表示手段とを備えた第１の端末装置と、
他方の地点の利用者の顔の位置および視線方向を検出する一の検出方法と、上記利用者の顔の位置を検出し、検出された顔の位置とカメラおよび上記他方の地点の利用者との距離に応じて視線方向を推定する他の検出方法の一方によって得られた顔の位置および視線方向に応じて、上記一方の地点のカメラの光軸を制御する制御情報を出力する第２の検出手段と、上記一の検出方法と上記他の検出方法との一方を選択する第２の設定手段と、上記第１の端末装置から送られてくる制御情報に応じて、上記他方の地点のカメラの光軸を制御する第２の制御手段と、上記一方の地点のカメラによる映像を映し出す第２の表示手段とを備えた第２の端末装置とにより構成されることを特徴とする双方向通信システム。
【請求項２】
通信を介して異なる一方の地点および他方の地点に位置する複数の端末装置の間で映像および音声情報の交換がなされる双方向通信システムにおける一方の地点に位置する端末装置において、
一方の地点の利用者の顔の位置および視線方向を検出する一の検出方法と、上記利用者の顔の位置を検出し、検出された顔の位置とカメラおよび上記一方の地点の利用者との距離に応じて視線方向を推定する他の検出方法の一方によって得られた顔の位置および視線方向に応じて、上記他方の地点のカメラの光軸を制御する制御情報を出力する検出手段と、
上記一の検出方法と上記他の検出方法との一方を選択する設定手段と、
上記他方の地点の端末装置から送られてくる制御情報に応じて、上記一方の地点のカメラの光軸を制御する制御手段と、
上記他方の地点のカメラによる映像を映し出す表示手段とを備えたことを特徴とする端末装置。
【請求項３】
通信を介して異なる一方の地点および他方の地点に位置する複数の端末装置の間で映像および音声情報の交換を行う制御方法において、
一方の地点の利用者の顔の位置および視線方向を検出する一の検出方法と、上記利用者の顔の位置を検出し、検出された顔の位置とカメラおよび上記一方の地点の利用者との距離に応じて視線方向を推定する他の検出方法の一方によって得られた顔の位置および視線方向に応じて、上記他方の地点のカメラの光軸を制御する制御情報を出力する検出ステップと、
上記一の検出方法と上記他の検出方法との一方を選択する設定ステップと、
上記他方の地点の端末装置から送られてくる制御情報に応じて、上記一方の地点のカメラの光軸を制御する制御ステップと、
上記他方の地点のカメラによる映像を映し出す表示ステップとを有することを特徴とする制御方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
この発明は、例えば、異なる複数の地点間においてなされる遠隔テレビ会議等に用いて好適な双方向通信システム、端末装置および制御方法に関する。
【０００２】
【従来の技術】
従来、映像表示装置と撮影装置と通信手段とを用いて、遠隔地において相互にコミニュケーションを図ることが可能な装置が種々提案されている。このような装置を実際に用いる場合には、映像表示装置の上や隣接箇所に別体の撮影装置を設置するか、あるいは、映像表示装置と撮影装置とが一体化され、映像表示装置の縁部に撮影装置が内蔵されたものが用いられる。例えば、Ａ地点に人物ａが位置し、Ｂ地点に人物ｂが位置しているものとし、Ａ地点およびＢ地点の間でコミニュケーションを図る場合について説明すると、Ａ地点の撮影装置による映像は、Ｂ地点の映像表示装置の画面上に映し出され、Ｂ地点の撮影装置による映像は、Ａ地点の映像表示装置の画面上に映し出される。このようにそれぞれ互いに相手側の映像を映し出すことで、離れている２者ａ，ｂがあたかもお互いの目の前にいるような視覚的な状況が形成され、コミニュケーションが図られる。
【０００３】
【発明が解決しようとする課題】
しかしながら、上述した装置においては、撮影装置の光軸と表示画面を見る目線がずれているため、コミニュケーションが不自然になってしまうことがある。このため、表示画面を十分に大きくしたものを用いて臨場感を高めることでコミニュケーションを図り易くすることが考えられるが、表示画面を大きくすればする程、目線が合いにくくなる問題点があった。このような問題を解決するため、一つの方法としてハーフミラーを用いて撮影装置の光軸と表示画面とを一致させることが考えられるが、構造上表示画面を大きくしにくく、また、コストや設置面積が大きくなるという問題点がある。また、他の方法として、網のようなスクリーンとプロジェクタを用いて表示画面の裏側から撮影するように構成された装置も提案されているが、投影された映像が暗くなってしまうため、明るい部屋等では、かえって使いにくくなる欠点を有していた。
【０００４】
従って、この発明の目的は、利用者の視線と顔の位置に応じて相手側の撮影装置を制御し、表示画面と視線を一致させることで臨場感を高めることができると共に、円滑にコミュニケーションを図ることができる双方向通信システム、端末装置および制御方法を提供することにある。
【０００５】
【課題を解決するための手段】
以上の問題を達成するために、請求項１の発明は、通信を介して異なる一方の地点および他方の地点に位置する第１の端末装置および第２の端末装置の間で映像および音声情報の交換がなされる双方向通信システムにおいて、
一方の地点の利用者の顔の位置および視線方向を検出する一の検出方法と、利用者の顔の位置を検出し、検出された顔の位置とカメラおよび一方の地点の利用者との距離に応じて視線方向を推定する他の検出方法の一方によって得られた顔の位置および視線方向に応じて、他方の地点のカメラの光軸を制御する制御情報を出力する第１の検出手段と、一の検出方法と他の検出方法との一方を選択する第１の設定手段と、第２の端末装置から送られてくる制御情報に応じて、一方の地点のカメラの光軸を制御する第１の制御手段と、他方の地点のカメラによる映像を映し出す第１の表示手段とを備えた第１の端末装置と、
他方の地点の利用者の顔の位置および視線方向を検出する一の検出方法と、利用者の顔の位置を検出し、検出された顔の位置とカメラおよび他方の地点の利用者との距離に応じて視線方向を推定する他の検出方法の一方によって得られた顔の位置および視線方向に応じて、一方の地点のカメラの光軸を制御する制御情報を出力する第２の検出手段と、一の検出方法と他の検出方法との一方を選択する第２の設定手段と、第１の端末装置から送られてくる制御情報に応じて、他方の地点のカメラの光軸を制御する第２の制御手段と、一方の地点のカメラによる映像を映し出す第２の表示手段とを備えた第２の端末装置とにより構成されることを特徴とする双方向通信システムである。
【０００６】
請求項２の発明は、通信を介して異なる一方の地点および他方の地点に位置する複数の端末装置の間で映像および音声情報の交換がなされる双方向通信システムにおける一方の地点に位置する端末装置において、
一方の地点の利用者の顔の位置および視線方向を検出する一の検出方法と、利用者の顔の位置を検出し、検出された顔の位置とカメラおよび一方の地点の利用者との距離に応じて視線方向を推定する他の検出方法の一方によって得られた顔の位置および視線方向に応じて、他方の地点のカメラの光軸を制御する制御情報を出力する検出手段と、
一の検出方法と他の検出方法との一方を選択する設定手段と、
他方の地点の端末装置から送られてくる制御情報に応じて、一方の地点のカメラの光軸を制御する制御手段と、
他方の地点のカメラによる映像を映し出す表示手段とを備えたことを特徴とする端末装置である。
【０００７】
さらに、請求項３の発明は、通信を介して異なる一方の地点および他方の地点に位置する複数の端末装置の間で映像および音声情報の交換を行う制御方法において、
一方の地点の利用者の顔の位置および視線方向を検出する一の検出方法と、利用者の顔の位置を検出し、検出された顔の位置とカメラおよび一方の地点の利用者との距離に応じて視線方向を推定する他の検出方法の一方によって得られた顔の位置および視線方向に応じて、他方の地点のカメラの光軸を制御する制御情報を出力する検出ステップと、
一の検出方法と他の検出方法との一方を選択する設定ステップと、
他方の地点の端末装置から送られてくる制御情報に応じて、一方の地点のカメラの光軸を制御する制御ステップと、
他方の地点のカメラによる映像を映し出す表示ステップとを有することを特徴とする制御方法である。
【０００８】
この発明では、例えば、地点Ａおよび地点Ｂに位置するそれぞれの利用者に対して検出部、表示部、撮影部、および光軸制御部を有した同一構成の端末装置が設けられる。地点Ａの端末装置の検出部において利用者の顔の位置および視線方向が検出され、この検出結果に応じて形成された制御情報が相手先となる地点Ｂの端末装置の光軸制御部に供給される。光軸制御部において制御情報に応じた制御信号が形成され、この制御信号により撮影部が制御されてカメラの光軸が所定位置に変位されると共に、所定方向に向けられる。地点Ｂの撮影部のカメラにより撮影された映像情報が表示部に供給され、表示部には、地点Ａの利用者の顔の位置および視線方向に応じて撮影された地点Ｂの利用者の映像が映し出される。同様な動作が地点Ｂの端末装置においてもなされ、このことで、利用者のそれぞれの目の前には、互いに先方の利用者を所望の位置と方向から見ているような状況がハーフミラーを介して形成される。
【０００９】
【発明の実施の形態】
以下、この発明の一実施形態について図面を参照して説明する。図１は、この発明による双方向通信システムの構成を示し、図２は、この発明による端末装置の主要な部分の構成を示す。なお、図１および図２において対応する箇所に関しては、同一の参照符号が付されている。
【００１０】
図１に示すように２つの異なる地点Ａおよび地点Ｂに位置する１ａおよび１ｂで示される利用者の間において双方向に映像および音声情報の交換を行うものとして説明する。この場合においては、利用者１ａ，１ｂのそれぞれに対して同一の構成の端末装置２ａ，２ｂが設置される。なお、他の地点に利用者が存在する場合や、同一箇所に複数人の利用者が存在する場合には、全ての利用者の組み合わせ毎に端末装置が設置され、端末装置の正面に一人の利用者のみが位置するように用いられる。
【００１１】
端末装置２ａは、本体ユニット１１ａと、検出部１２ａと、図示せずも音声処理部および伝送処理部等により構成され、本体ユニット１１ａには、表示部１４ａ、光軸制御部１５ａ、およびカメラ１６ａを有した撮影部１７ａ等が設けられている。また、端末装置２ｂは、本体ユニット１１ｂと、検出部１２ｂと、図示せずも音声処理部および伝送処理部等により構成され、本体ユニット１１ｂには、表示部１４ｂ、光軸制御部１５ｂ、およびカメラ１６ｂを有した撮影部１７ｂ等が設けられている。
【００１２】
端末装置２ａ，２ｂのそれぞれがネットワーク／電話回線３に接続され、地点Ａ，Ｂにおいてネットワーク／電話回線３を介して互いに映像および音声情報と制御情報との交換が可能な状態とされる。具体的には、端末装置２ａにおいて形成された映像情報ＤＡと、制御情報ＣＡと、音声情報等とが端末装置２ｂに供給されると共に、端末装置２ｂにおいて形成された映像情報ＤＢと、制御情報ＣＢと音声情報等とが端末装置２ａに供給される。地点Ａおよび地点Ｂのいずれの地点の端末装置１ａ，１ｂも同一の構成とされているため、利用者１ａ側の端末装置２ａを例に挙げてその構成と動作について以下に説明する。
【００１３】
図２に示すように端末装置２ａを構成する本体ユニット１１ａの略々中央上側には、ハーフミラー１３が配設され、ハーフミラー１３の下側に表示部１４ａが配設され、ハーフミラー１３の背面にカメラ１６ａと機構部等を有した撮影部１７ａが配設されている。また、撮影部１７ａに対して光軸制御部１５ａが配設されている。さらに、本体ユニット１１ａのハーフミラー１３に近接した上端部には、検出部１２ａが取り付けられている。
【００１４】
表示部１４ａは、例えば、ＣＲＴ等により構成されており、表示部１４ａには、Ｂ地点のカメラ１６ｂにより撮影された映像情報ＤＢが供給される。従って、表示部１４ａにおいて、映像情報ＤＢに基づいて映像信号が形成され、この映像信号により表示画面上にＢ地点において撮影された映像が映し出される。なお、この時、表示部１４ａの表示画面上においては、ハーフミラーを介して利用者１ａが図２中において矢印３１で示されるように映像を見ることを考慮し、例えば、反転されると共に、所定の比率で縦方向に伸長処理された映像が映し出される。また、表示部１４ａとしてＣＲＴ以外の例えば液晶表示板等を用いても良い。
【００１５】
撮影部１７ａは、カメラ１６ａおよび機構部等により構成されおり、機構部には、図２に示すようにＹ軸直線軌道２３と、Ｘ軸直線軌道２４と、駆動モータ等からなる位置決め用のＸＹステージが配設されており、Ｙ軸直線軌道２３上にカメラ１６ａが取り付けられている。カメラ１６ａは、チルト／パン機能を有し、制御信号に応じてチルト角（垂直方向）およびパン角（水平方向）が自在に制御される。従って、撮影部１７ａ全体としては、制御信号により４軸制御が可能とされ、カメラ１６ａの光軸の位置と方向が自在に制御される。
【００１６】
光軸制御部１５ａには、Ｂ地点の検出部１２ｂにおいて形成された制御情報ＣＢが供給され、光軸制御部１５において、制御情報ＣＢに基づいて各部への制御信号が形成され、この制御信号が撮影部１７ａの各部に供給される。このことで、撮影部１７ａのカメラ１６ａの光軸の位置と方向とがＢ地点の利用者１ｂの所望する状態に変位する。この状態でカメラ１６ａにより図２中において矢印３２で示されるように利用者１ａが撮影され、カメラ１６ａの映像信号が伝送処理部を介されることで映像情報ＤＡとされる。この映像情報ＤＡがネットワーク／電話回線３を介して端末装置２ｂの表示部１４ｂに供給される。
【００１７】
本体ユニット１１ａのハーフミラー１３に近接した上端部に取り付けられた検出部１２ａは、カメラ２１および検出器２２により構成されている。図２中において矢印３３で示されるようにカメラ２１により利用者１ａの姿が撮影され、カメラ２１の映像出力が検出器２２に供給される。検出器２２は、所定の処理を行い、利用者１ａの顔の位置と視線方向とを検出し、得られた検出結果に基づいて利用者１ａの見たい方向を推定して地点Ｂ側の端末装置２ｂの撮影部１６ｂを４軸制御するための制御信号を形成する。
【００１８】
検出器２２においてなされる顔の位置の検出処理は、例えば、映像信号から肌色成分の分布を計測し、面積の大きい肌色成分部分を顔と判定する。そして、面積の大きい肌色成分部分の重心を顔の中心位置と判定し、重心の変動を顔の動きとして検出する。なお、端末装置２ａ，２ｂの間における情報交換に先立って、利用者の顔の登録および較正処理が予めなされ、顔の位置の検出が精度良く行われる。
【００１９】
また、検出器２２においてなされる視線方向を検出処理は、例えば、先ず、テンプレートマッチング等により顔の幅や黒目、目頭の位置を検出し、大まかな顔の方向を推定する。そして、眼球の回転角度を計算し、得られた顔の方向と加算することで視線方向を検出する。なお、幅や黒目、目頭の位置以外に眉毛、白目、鼻、口等の位置情報を用いるようにしても良い。
【００２０】
このように検出器２２において利用者１ａの顔の位置と視線方向とが検出され、得られた検出結果に応じた制御信号が検出器２２において形成される。この制御信号が伝送処理部を介されることで制御情報ＣＡとされ、この制御情報ＣＡがネットワーク／電話回線３を介して端末装置２ｂの光軸制御部１５ｂに供給される。
【００２１】
なお、図示されていない端末装置２ａに内蔵された音声処理部は、アンプ、スピーカおよびマイクロホン等により構成されており、音声信号の入出力処理を行う。また、伝送処理部は、ネットワークインターフェース回路、伝送符号／復号器等により構成されており、映像信号および音声信号と制御信号とを伝送媒体等に応じた伝送形態となるように変換し、得られた情報を伝送路上に送出すると共に、その逆に供給される先方からの所定の伝送形態の情報から元の情報を復元し、各部に供給する。
【００２２】
上述した端末装置１ａと同様に他方の端末装置１ｂ側が構成される。従って、システム全体の動作としては、端末装置２ａの検出部１２ａにおいて利用者１ａの顔の位置および視線方向が検出され、この検出結果に応じて形成された制御情報ＣＡが端末装置２ｂの光軸制御部１５ｂに供給されると共に、端末装置２ｂの検出部１２ｂにおいて利用者１ｂの顔の位置および視線方向が検出され、この検出結果に応じて形成された制御情報ＣＢが端末装置２ａの光軸制御部１５ａに供給される。
【００２３】
端末装置２ａの光軸制御部１５ａにおいて制御情報ＣＢに応じた制御信号が形成され、この制御信号により撮影部１７ａが制御されてカメラ１６ａの光軸が所定位置に変位されると共に、所定方向に向けられる。一方、端末装置２ｂの光軸制御部１５ｂにおいて制御情報ＣＡに応じた制御信号が形成され、この制御信号により撮影部１７ｂが制御されてカメラ１６ｂの光軸が所定位置に変位されると共に、所定方向に向けられる。
【００２４】
端末装置２ａの撮影部１７ａのカメラ１６ａにより撮影された映像情報ＤＡが端末装置２ｂの表示部１４ｂに供給されると共に、端末装置２ｂの撮影部１７ｂのカメラ１６ｂにより撮影された映像情報ＤＢが端末装置２ａの表示部１４ａに供給される。このため、表示部１４ａには、利用者１ａの顔の位置および視線方向に応じ、Ｂ地点において撮影された利用者１ｂの映像が映し出される。一方、表示部１４ｂには、利用者１ｂの顔の位置および視線方向に応じ、Ａ地点において撮影された利用者１ａの映像が映し出される。従って、利用者１ａ，１ｂは、互いに先方の利用者を所望の位置と方向から見ているような映像をハーフミラー１３を介して目の前にすることができ、あたかも窓を介して会話しているような臨場感でコミニュケーションを図ることができる。
【００２５】
上述した利用者の顔の位置および視線方向に応じたカメラの制御動作について図３および図４を用いてさらに詳細に説明する。図３は、端末装置２ａ側からのの相手側のカメラの制御動作の処理手順を示し、各ステップには、Ｓ１〜Ｓ６の参照符号が付されている。
【００２６】
先ず、ステップＳ１において、Ｂ地点の端末装置２ｂのカメラ１６ｂを正面に向ける処理がなされる。つまり、撮影部１７ｂの制御状態が初期化され、カメラ１６ｂの光軸の位置および方向が原点位置に戻される。
【００２７】
そして、ステップＳ２において、Ａ地点の利用者１ａの顔の位置の検出がなされる。例えば、映像信号から肌色成分の分布を計測し、面積の大きい肌色成分部分を顔と判定する。そして、面積の大きい肌色成分部分の重心を顔の中心位置と判定し、重心の変動を顔の動きとして検出する。
【００２８】
次に、ステップＳ３において、Ａ地点の利用者１ａの顔の位置の検出が終了したかどうかの判定がなされる。検出結果がカメラの移動範囲を越えた場合や、処理が不可能だった場合には、ステップＳ２に戻り、引き続いてＡ地点の利用者１ａの顔の位置の検出がなされる。また、Ａ地点の利用者１ａの顔の位置の検出が終了したと判定される場合には、ステップＳ４に移行する。
【００２９】
Ａ地点の利用者１ａの顔の位置の検出が終了すると、ステップＳ４において、Ａ地点の利用者１ａの視線方向の検出がなされる。例えば、先ず、テンプレートマッチング等により顔の幅や黒目、目頭の位置を検出し、大まかな顔の方向を推定する。そして、眼球の回転角度を計算し、得られた顔の方向と加算することで視線方向を検出する。なお、テンプレートマッチングにおいては、画像中でマッチングをとる領域をＩT とし、テンプレートをＴとし、分散をσで表し、平均を＜＞で表すとすると、下記(1) 式によって計算される相関値Ｃを最大にするような領域を求めることでなされる。
【００３０】
Ｃ＝（＜ＩT Ｔ＞−＜ＩT ＞＜Ｔ＞）／σ（ＩT ）σ（Ｔ）  ・・・(1)
次に、ステップＳ５において、Ａ地点の利用者１ａの視線方向の検出が終了したかどうかの判定がなされる。検出結果がカメラの移動範囲を越えた場合や、処理が不可能だった場合には、ステップＳ４に戻り、引き続いてＡ地点の利用者１ａの視線方向の検出がなされる。また、Ａ地点の利用者１ａの視線方向の検出が終了したと判定される場合には、ステップＳ６に移行する。
【００３１】
Ａ地点の利用者１ａの視線方向の検出が終了すると、ステップＳ６において、Ａ地点の利用者１ａの顔の位置と視線方向の検出結果に基づいてＢ地点のカメラ１６Ｂの光軸の位置および方向が決定され、制御信号が形成される。つまり、ステップＳ２において検出されたＡ地点の利用者１ａの顔の位置の結果に応じて端末装置２ｂの撮影部１７ｂのＸＹステージが制御され、カメラ１６ｂの光軸が所定位置に変位する。また、ステップＳ２において検出されたＡ地点の利用者１ａの視線方向の結果に応じて端末装置２ｂの撮影部１７ｂのカメラ１６ｂのチルト角およびパン角が制御され、カメラ１６ｂの光軸が所定角度に変位する。
【００３２】
具体的には、例えば、地点Ａの利用者１ａが下から見上げるような恰好をしたとすると、検出器２２において利用者１ａの顔の位置と視線方向とが検出され、得られた検出結果に応じた制御信号が検出器２２において形成される。この制御信号が伝送処理部を介されることで制御情報ＣＡとされ、この制御情報ＣＡがネットワーク／電話回線３を介して端末装置２ｂの光軸制御部１５ｂに供給される。従って、地点Ｂの撮影部１７Ｂのカメラ１６ｂは、Ａ地点の利用者１ａの顔の位置の結果に応じて端末装置２ｂの撮影部１７ｂのＸＹステージが制御されることにより、図４においてDropで示される分だけ降下し、１６ｘで示される位置に変位する。また、カメラ１６ｂの光軸は、Ａ地点の利用者１ａの視線方向の結果に応じてチルト角およびパン角が制御され、図２においてθにて示される分だけチルトアップする。
【００３３】
このように端末装置２ｂ側の撮影部１７ｂのカメラ１６ｂを制御することで利用者１ａは、利用者１ｂを所望の位置と方向から見ているような映像をハーフミラー１３を介して目の前にすることができ、この状態で以て端末装置２ａ側の一連の処理が完了する。また、この時、端末装置２ｂ側においても同様の処理がなされ、利用者１ｂは、利用者１ａを所望の位置と方向から見ているような映像をハーフミラー１３を介して目の前にすることができ、この状態で以て端末装置２ｂ側の一連の処理が完了する。
【００３４】
なお、上述した一実施形態の説明においては、検出器２２において利用者の顔の位置と視線方向とを検出する場合について説明したが、利用者から端末装置までのそれぞれ距離が略々一定でお互いの顔が主に端末装置側に向いている場合には、検出器２２において顔の位置の検出のみを行うようにしても良い。この場合においては、カメラの制御動作の処理手順は、図３において破線の矢印ＪＰ１で示されるようにステップＳ４およびステップＳ５を飛ばしてステップＳＳ３からステップＳ６に移行して処理がなされる。
【００３５】
また、検出器２２において顔の位置の検出のみを行う場合には、顔の位置の検出結果に基づいて検出結果に応じたカメラを変位させる量をａとし、利用者から端末装置までの距離ｂとして、下記(2) 式の演算によりカメラの光軸の方向を決定し、その数値と顔の位置に応じて制御信号を形成するようにしても良い。
【００３６】
tan θ＝ａ／ｂ  ・・・(2)
例えば、上述した光軸の方向を決定する数値の算出を前述した地点Ａの利用者１ａが下から見上げるような恰好をした図４の場合に当てはめてみると、（tan θ＝ａ／ｂ＝Drop／Distance）となる。このように利用者から端末装置までのそれぞれ距離が略々一定でお互いの顔が主に端末装置側に向いている場合には、視線の方向を検出せずとも、良好に制御することが可能となる。
【００３７】
さらに、設定手段を設けて、検出器２２において利用者の顔の位置と視線方向とを検出する場合と、検出器２２において顔の位置の検出のみを行う場合とを選択的に行うようにしても良い。
【００３８】
また、上述した一実施形態の説明においては、検出部１２ａ，１２ｂを本体ユニット１１ａ，１１ｂの上端部に設ける場合について説明したが、本体ユニット１１ａ，１１ｂのハーフミラー１３の背面側に検出部１２ａ，１２ｂを固定して設けるようにしても良い。
【００３９】
【発明の効果】
従って、この発明に依れば、利用者の視線と顔の位置に応じて相手側の撮影装置を制御し、表示画面の映像と視線を一致させることで臨場感を高めることができると共に、円滑にコミュニケーションを図ることができる。また、この発明に依れば、１組毎に独立して使用可能な構成とされているため、各地において任意独立に通信先を拡張することができ、全体として柔軟性の高いシステムを構築することが可能となる。さらに、この発明の一実施形態の場合には、ハーフミラーとＣＲＴを用いる構成とされているため、特に設置面積、画質、明るさの点で有利な端末装置を提供することができる。よりさらに、この発明では、顔の位置と視線方向の両者を検出する一の検出方法と、顔の位置のみを検出し、視線方向を顔の位置とカメラとの距離に基づいて推定する他の検出方法との一方を選択的に設定可能としているので、実際の状況に適した検出方法を設定することができる。
【図面の簡単な説明】
【図１】この発明による双方向通信システムの構成を示すブロック図である。
【図２】この発明による表示端末装置の主要な部分の構成を示すブロック図である。
【図３】この発明の一実施形態の動作説明に用いるフローチャートである。
【図４】この発明の一実施形態の動作説明に用いる略線図である。
【符号の説明】
１ａ，１ｂ・・・利用者、２ａ，２ｂ・・・端末装置、３・・・ネットワーク／電話回線、１１ａ，１１ｂ・・・本体ユニット、１２ａ，１２ｂ・・・検出部、１３・・・ハーフミラー、１４ａ，１４ｂ・・・表示部、１５ａ、１５ｂ・・・光軸制御部、１６ａ，１６ｂ・・・カメラ、１７ａ，１７ｂ・・・撮影部
【図１】
0004089027.tif 000002
【図２】
0004089027.tif 000003
【図３】
0004089027.tif 000004
【図４】
0004089027.tif 000005