(57)【特許請求の範囲】
【請求項１】
撮像手段を有する被制御撮影装置と、該被制御撮影装置と伝送路を介して接続される端末装置とからなる通信システムにおいて、
上記端末装置は、
上記撮像手段に対して遠隔から上記画像内の上記所定領域の位置を指定する位置指定手段と、
上記撮像手段に対して遠隔から上記画像内の上記所定領域の画角を指定する画角指定手段と
を備え、
上記被制御撮影装置は、
広角レンズを有する撮像手段と、
上記撮像手段により撮像される範囲の略々全てを集音範囲とするように、複数の指向性を有する複数の音声入力手段と、
上記撮像手段により撮像される画像を所定時間間隔で更新されながら一時的に記憶する記憶手段と、
上記位置指定手段および画角指定手段の少なくとも一方により指定される上記画像内の所定領域に従って上記複数の音声入力手段を切り換えるか、または、上記複数の音声入力手段の各々の音量レベルを調整する音声制御手段と、
上記位置指定手段によって上記画像内の所定領域の位置が指定された場合には、既に設定されている上記画像内の上記所定領域の画角と新たに設定された所定領域の位置とに基づいて、切り出された所定領域の画像の歪みを補正した画像情報を出力し、上記画角指定手段によって上記画像内の所定領域の画角が指定された場合には、既に設定されている上記画像内の所定領域の位置と新たに設定された所定領域の画角とに基づいて、切り出された所定領域の画像の歪みを補正した画像情報を出力する歪み補正手段と、
上記歪み補正手段より出力された画像情報、および上記音声制御手段により制御された音声情報を遠隔の端末装置に対して転送する転送手段と
を備える
ことを特徴とする通信システム。
【請求項２】
上記端末装置が、音声入力手段および音声出力手段を備え、
上記被制御撮影装置が、上記撮像手段により撮像される範囲の略々全てを拡声範囲とするように、複数の指向性を有する複数の音声出力手段を備え、
上記端末装置の上記音声出力手段が、上記被制御撮影装置の上記音声入力手段から入力された音声に対応する音声情報を出力し、
上記被制御撮影装置の上記音声出力手段が、上記端末装置の上記音声入力手段から入力された音声に対応する音声情報を出力する
ことを特徴とする請求項１に記載の通信システム。
【請求項３】
上記音声制御手段が、上記端末装置により指定される画像内の所定領域に応じて上記被制御撮影装置の複数の音声出力手段を切り換える
ことを特徴とする請求項２に記載の通信システム。
【請求項４】
広角レンズを有する撮像手段と、
上記撮像手段により撮像される範囲の略々全てを集音範囲とするように、複数の指向性を有する複数の音声入力手段と、
上記撮像手段により撮像される画像を所定時間間隔で更新されながら一時的に記憶する記憶手段と、
遠隔の端末装置により指定される上記画像内の所定領域に応じて上記複数の音声入力手段を切り換えるか、または、上記複数の音声入力手段の各々の音量レベルを調整する音声制御手段と、
上記端末装置によって上記画像内の所定領域の位置が指定された場合には、既に設定されている上記画像内の上記所定領域の画角と新たに設定された所定領域の位置とに基づいて、切り出された所定領域の画像の歪みを補正した画像情報を出力し、上記端末装置によって上記画像内の所定領域の画角が指定された場合には、既に設定されている上記画像内の所定領域の位置と新たに設定された所定領域の画角とに基づいて、切り出された所定領域の画像の歪みを補正した画像情報を出力する歪み補正手段と、
上記歪み補正手段より出力された画像情報、および上記音声制御手段により制御された音声情報を上記端末装置へ転送する転送手段と
を備える
ことを特徴とする被制御撮影装置。
【請求項５】
広角レンズを有する撮像手段により撮像することによって画像情報を収集するステップと、
複数の指向性を有する複数の音声入力手段によって、上記撮像手段により撮像される範囲の略々全てを集音範囲として、音声情報を収集するステップと、
上記撮像手段により撮像される画像を所定時間間隔で更新されながら一時的に記憶するステップと、
遠隔の端末装置により指定される上記画像内の所定領域に従って上記複数の音声入力手段を切り換えるか、または、上記複数の音声入力手段の各々の音量レベルを調整する音声制御のステップと、
上記端末装置によって上記画像内の所定領域の位置が指定された場合には、既に設定されている上記画像内の上記所定領域の画角と新たに設定された所定領域の位置とに基づいて、切り出された所定領域の画像の歪みを補正した画像情報を出力し、上記端末装置によって上記画像内の所定領域の画角が指定された場合には、既に設定されている上記画像内の所定領域の位置と新たに設定された所定領域の画角とに基づいて、切り出された所定領域の画像の歪みを補正した画像情報を出力する歪みを補正するステップと、
上記歪みを補正するステップにおいて補正された上記画像情報、および上記音声制御のステップにおいて制御された音声情報を遠隔の端末装置に対して転送するステップと
からなる
ことを特徴とする通信方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
この発明は、遠隔のビデオカメラにより撮影された映像とマイクロフォンにより集音された音声とを通信を介して他地点に転送する通信システムおよび方法、被制御撮影装置並びに端末装置に関する。
【０００２】
【従来の技術】
従来、遠隔操作が可能なカメラ装置が知られている。このカメラ装置は、チルト／パン機能およびズーム機能を有し、チルト角（垂直方向）／パン角（水平方向）およびズームが遠隔からの制御信号に応じて自在に制御され、任意の方向にカメラが向けられると共に、所定の拡大率にて得られた所望の映像を遠隔地に転送することが可能とされている。また、コミュニケーションを目的とし、遠隔地に音声や映像を伝送することが可能な各種装置およびシステムが提案されている。さらに、近年、通信方式のディジタル化に伴い、電話装置においても各種サービスを受けることができ、然も、画像等が送れる高機能な電話装置が実用化されている。
【０００３】
【発明が解決しようとする課題】
しかしながら、従来の遠隔操作可能なカメラ装置においては、制御信号により所定の方向にカメラを向けるのに時間遅れが発生すると共に、カメラ制御の高速化を図っても構造的な限界があり、また、機構部を作動させるための電力が必要とされるばかりか、保守等の人手と手間が必要とされる問題点があった。さらに、従来のカメラ装置においては、制御系統が１系統とされているため、一度に１箇所からの映像しか入手することができず、複数箇所の映像を同時に入手するためには、複数セットのカメラ装置を設置すると共に、制御に関しても複数系統を用意する必要があり、制御系が複雑となるばかりか、大規模なシステムとなってしまう問題点があった。また、複数系統の音声を一度に再生することに関しては従来の装置においても可能とされているが、円滑に意思の疎通を図るためには、複数の入力音声に対して選択あるいは音量制御して再生することが望ましく、選択あるいは音量制御することが可能とされた通信システムが要望されている。
【０００４】
従って、この発明の目的は、機構部等の制御を伴うことなく、電子的に同時に多方向の映像と音声を複数の遠隔地からの要求に応じて転送することが可能とされ、音声に関しても円滑にコミュニケーションを図ることが可能とされた通信システムおよび方法、被制御撮影装置並びに端末装置を提供することにある。
【０００５】
【課題を解決するための手段】
以上の問題を解決するために、第１の発明は、撮像手段を有する被制御撮影装置と、被制御撮影装置と伝送路を介して接続される端末装置とからなる通信システムにおいて、端末装置は、撮像手段に対して遠隔から画像内の所定領域の位置を指定する位置指定手段と、撮像手段に対して遠隔から画像内の所定領域の画角を指定する画角指定手段とを備え、被制御撮影装置は、広角レンズを有する撮像手段と、撮像手段により撮像される範囲の略々全てを集音範囲とするように、複数の指向性を有する複数の音声入力手段と、撮像手段により撮像される画像を所定時間間隔で更新されながら一時的に記憶する記憶手段と、位置指定手段および画角指定手段の少なくとも一方により指定される画像内の所定領域に従って複数の音声入力手段を切り換えるか、または、複数の音声入力手段の各々の音量レベルを調整する音声制御手段と、位置指定手段によって画像内の所定領域の位置が指定された場合には、既に設定されている画像内の所定領域の画角と新たに設定された所定領域の位置とに基づいて、切り出された所定領域の画像の歪みを補正した画像情報を出力し、画角指定手段によって画像内の所定領域の画角が指定された場合には、既に設定されている画像内の所定領域の位置と新たに設定された所定領域の画角とに基づいて、切り出された所定領域の画像の歪みを補正した画像情報を出力する歪み補正手段と、歪み補正手段より出力された画像情報、および音声制御手段により制御された音声情報を遠隔の端末装置に対して転送する転送手段とを備えることを特徴とする通信システムである。
【０００６】
なお、上述の端末装置には、音声入力手段および音声出力手段が備えられており、また、被制御撮影装置にも、撮像手段により撮像される範囲の略々全てを拡声範囲とするように、複数の指向性を有する複数の音声出力手段が備えられている。端末装置の音声出力手段は、被制御撮影装置の音声入力手段から入力された音声に対応する音声情報を出力し、被制御撮影装置の音声出力手段は、端末装置の音声入力手段からされた音声に対応する音声情報を出力するように構成されている。上述の音声制御手段は、端末装置により指定される画像内の所定領域に応じて複数の音声出力手段を切り換えるようになされている。
【０００７】
第２の発明は、広角レンズを有する撮像手段と、撮像手段により撮像される範囲の略々全てを集音範囲とするように、複数の指向性を有する複数の音声入力手段と、撮像手段により撮像される画像を所定時間間隔で更新されながら一時的に記憶する記憶手段と、遠隔の端末装置により指定される画像内の所定領域に応じて複数の音声入力手段を切り換えるか、または、複数の音声入力手段の各々の音量レベルを調整する音声制御手段と、端末装置から画像内の所定領域の位置が指定された場合には、既に設定されている画像内の所定領域の画角と新たに設定された所定領域の位置とに基づいて、切り出された所定領域の画像の歪みを補正した画像情報を出力し、端末装置から画像内の所定領域の画角が指定された場合には、既に設定されている画像内の所定領域の位置と新たに設定された所定領域の画角とに基づいて、切り出された所定領域の画像の歪みを補正した画像情報を出力する歪み補正手段と、歪み補正手段より出力された画像情報、および音声制御手段により制御された音声情報を端末装置へ転送する転送手段とを備えることを特徴とする被制御撮影装置である。
【０００８】
第３の発明は、広角レンズを有する撮像手段により撮像することによって画像情報を収集するステップと、複数の指向性を有する複数の音声入力手段によって、撮像手段により撮像される範囲の略々全てを集音範囲として、音声情報を収集するステップと、撮像手段により撮像される画像を所定時間間隔で更新されながら一時的に記憶するステップと、遠隔の端末装置により指定される画像内の所定領域に従って複数の音声入力手段を切り換えるか、または、複数の音声入力手段の各々の音量レベルを調整する音声制御のステップと、端末装置によって画像内の所定領域の位置が指定された場合には、既に設定されている画像内の所定領域の画角と新たに設定された所定領域の位置とに基づいて、切り出された所定領域の画像の歪みを補正した画像情報を出力し、端末装置によって画像内の所定領域の画角が指定された場合には、既に設定されている画像内の所定領域の位置と新たに設定された所定領域の画角とに基づいて、切り出された所定領域の画像の歪みを補正した画像情報を出力する歪みを補正するステップと、歪みを補正するステップにおいて補正された画像情報、および音声制御のステップにおいて制御された音声情報を遠隔の端末装置に対して転送するステップとからなることを特徴とする通信方法である。
【０００９】
この発明では、広角レンズを有する撮像手段と、広角レンズの視野角全体を集音範囲とする各々異なる指向性を有する音声入力手段と、複数の音声入力手段を切り換えるか、または、複数の音声入力手段の各々の音量レベルを調整する音声制御手段と、画像の歪みを補正した画像情報を出力する歪み補正手段と、転送手段とを有する被制御撮影装置が設けられる。端末装置に設けられる要求手段において、画像領域を指定する操作ボタンと、画面の拡大／縮小率を指定する操作ボタンとの操作状態に応じて形成された操作情報と、その要求手段の周辺の音声情報とが制御手段に供給される。このように指定された所定領域の画像情報が記憶手段から読み出され、この画像情報に対して光学歪みを補正する処理がなされると共に、拡大もしくは縮小処理がなされて所定領域の画像情報とされる。得られた画像情報と、その領域の音声情報とが選択されて端末装置側に送信される。このことで、撮像手段が一つしか設置されていないにもかかわらず、複数の端末装置に対して並列処理がなされていずれの端末装置においても撮像手段の設置地点のそれぞれ別個の所定領域の画像情報と音声情報とが入手できる。また、端末装置側に表示させたい所望の領域のみを、その位置および画角に基づいて歪み補正するため、実時間で所望の領域に対応する画像情報を被制御撮影装置から端末装置に転送することが可能となる。
【００１０】
【発明の実施の形態】
以下、この発明の一実施形態について図面を参照して説明する。図１は、この発明の一実施形態の構成を示す。また、図２は、この発明の一実施形態における遠隔操作端末の外観を示す。なお、図１および図２において対応する箇所に関しては、同一の参照符号が付されている。
【００１１】
図１に示すようにこの発明による通信システムの被制御撮影部が撮影部１、バッファメモリ２、光学歪み補正部３、制御ユニット４、伝送路５および遠隔操作端末群６により構成される。撮影部１は、広角レンズ１１を前面に有したカメラ１２と、マイクロフォン群１３と、アンプ群１４，１７と、Ａ／Ｄ変換器群１５と、Ｄ／Ａ変換器群１６と、スピーカ群１８と、図示せずも各部を収納する筐体等とにより構成されている。
【００１２】
例えば、撮影部１の筐体には、アンプ群１４，１７と、Ａ／Ｄ変換器群１５と、Ｄ／Ａ変換器群１６等とが収納される。また、筐体の上部には、広角レンズ１１を前面に有したカメラ１２が取り付けられ、さらに、筐体の外周面には、マイクロフォン群１３と、スピーカ群１８とが広角レンズ１１の視野角に応じて放射状に取り付けられて一体化されている。つまり、各々異なる指向性を有するマイクロフォン群１３でカメラ１２の広角レンズ１１の視野角全体から集音できるように構成されると共に、各々異なる指向性を有するスピーカ群１８でカメラ１２の広角レンズ１１の視野角全体に音声を発するように構成されている。
【００１３】
広角レンズ１１を前面に有したカメラ１２は、設置位置での略々１８０°にわたる映像を常に撮影し、ディジタル画像信号を形成する。カメラ１２において形成されたディジタル画像信号がバッファメモリ２に供給され、例えば、所定時間間隔で更新されながら一時的に蓄積される。
【００１４】
バッファメモリ２には、後述するように制御ユニット４において形成された制御情報が供給される。バッファメモリ２は、この制御情報に応じて所定領域の画像を切り出す。バッファメモリ２において切り出された所定領域の画像情報が光学歪み補正部３に供給される。
【００１５】
光学歪み補正部３にも、後述するように制御ユニット４において形成された制御情報が供給される。光学歪み補正部３は、この制御情報に応じて所定領域の画像に対して光学歪みの補正処理と拡大／縮小処理を行う。つまり、制御ユニット４からの制御情報により指示される画像の切り出し位置と切り出し寸法から歪みの補正方法が決定され、この補正方法に則って補正処理と拡大／縮小処理がなされる。従って、画像の拡大／縮小処理によってあたかもズームイン／アウトがなされたような画像が形成されると共に、補正する画像のオフセット値を変えることによってあたかもパン／チルトされたような画像が形成され、擬似的に所望の画像が再現される。光学歪み補正回路３において形成された所望の画像情報が制御ユニット４に供給される。
【００１６】
また、カメラ１２の広角レンズ１１の視野角全体を集音範囲とする各々異なる指向性を有するマイクロフォン群１３は、例えば、ｍ個のマイクロフォン１３１，１３２，・・・１３ｍにより構成されている。マイクロフォン１３１，１３２，・・・１３ｍで集音されたｍチャンネルの入力音声信号は、マイクロフォン１３１，１３２，・・・１３ｍに対応して設けられたアンプ１４１，１４２，・・・１４ｍを介されることで増幅され、この増幅出力がＡ／Ｄ変換器１５１，１５２，・・・１５ｍのそれぞれに供給される。
【００１７】
Ａ／Ｄ変換器１５１，１５２，・・・１５ｍのそれぞれにおいて、ディジタル・アナログ変換がなされることでディジタルの音声信号が形成され、ｍチャンネルのディジタル音声信号が制御ユニット４に供給される。
【００１８】
さらに、カメラ１２の広角レンズ１１の視野角全体に音声を発する各々異なる指向性を有するスピーカ群１８は、例えば、ｍ個のスピーカ１８１，１８２，・・・１８ｍにより構成されており、このスピーカ群１８に対応してアンプ１７１，１７２，・・・１７ｍおよびＤ／Ａ変換器１６１，１６２，・・・１６ｍが設けられている。後述するようにこれらｍチャンネルの音声再生系の中で所定のチャンネルにのみ制御ユニット４からのディジタル音声信号が供給され、所定範囲に再生音声が出力される。
【００１９】
一方、遠隔操作端末群６は、同一構成の例えばｎ個の遠隔操作端末６１，６２，・・・６ｎにより構成されている。遠隔操作端末６１，６２，・・・６ｎのそれぞれには、図２に示すように正面の上側略々中央には、例えば液晶表示板等からなる表示部７１が設けられおり、正面の下側には、画像領域を指定する４個の操作ボタン７６，７７，７８，７９と、画面の拡大／縮小率を指定する操作ボタン７４，７５とが配設されている。具体的には、操作ボタン７６が画像領域を上方向に移動させるＵボタンであり、操作ボタン７７が画像領域を下方向に移動させるＤボタンであり、操作ボタン７８が画像領域を左方向に移動させるＬボタンであり、操作ボタン７９が画像領域を右方向に移動させるＲボタンである。また、操作ボタン７４がズームアウトして画像を縮小するＴボタンであり、操作ボタン７５がズームインして画像を拡大するＷボタンである。こられの操作ボタン７４，７５，７６，７７，７８，７９が利用者により任意に操作されることにより撮影部１の設置地点における所望の画像が指定される。
【００２０】
また、遠隔操作端末６１，６２，・・・６ｎの上側縁部には、図２に示すようにマイクロフォン７２およびスピーカ７３が配設されている。図示せずも遠隔操作端末６１，６２，・・・６ｎのそれぞれは、その内部に音声処理部、映像処理部および伝送処理部等を有している。なお、音声処理部は、アンプ、Ａ／Ｄ変換器およびＤ／Ａ変換器等により構成されており、音声信号の入出力処理を行う。また、映像処理部は、Ｄ／Ａ変換器および信号処理回路等により構成されており、制御ユニット４からの映像情報から表示信号を形成して表示部７１に供給し、所定の領域の画像を画面上に表示する。さらに、伝送処理部は、ネットワークインターフェース回路、伝送符号／復号器等により構成されており、マイクロフォン７２を介して得られる音声信号と、画像領域を指定する４個の操作ボタン７６，７７，７８，７９と、画面の拡大／縮小率を指定する操作ボタン７４，７５との操作状態を検出して形成された操作情報とを伝送媒体等に応じた伝送形態となるように変換し、得られた情報を伝送路上に送出すると共に、その逆に供給される制御ユニット４からの所定の伝送形態の情報から元の情報を復元し、各部に供給する。
【００２１】
上述した遠隔操作端末６１，６２，・・・６ｎのそれぞれが例えばネットワーク／電話回線等の伝送路５１，５２，・・・５ｎと接続され、ｎ地点の遠隔地と被制御撮影装置の制御ユニット４との間において互いに情報の交換が可能な状態とされる。具体的には、遠隔操作端末６１，６２，・・・６ｎのそれぞれにおいて、画像領域を指定する４個の操作ボタン７６，７７，７８，７９と、画面の拡大／縮小率を指定する操作ボタン７４，７５との操作状態に応じて形成された操作情報と、その遠隔操作端末６１，６２，・・・６ｎの周辺の音声情報とが制御ユニット４に供給される。一方、制御ユニット４からは、利用者によって指定された撮影部１の設置箇所における所定領域の画像情報と、その領域の音声情報とが遠隔操作端末６１，６２，・・・６ｎのそれぞれに供給される。つまり、撮影部１が一つしか設置されていないにも係わらず、ｎ個の遠隔操作端末６１，６２，・・・６ｎに対して並列処理がなされ、いずれの端末においても撮影部１の設置地点のそれぞれ別個の所定領域の画像情報と音声情報とが入手される。
【００２２】
上述したように情報交換処理を行う制御ユニット４は、例えば、映像処理部４１、音声処理部４２および伝送処理部４３等により構成されている。映像処理部４１は、遠隔操作端末群６からの各々の要求に対応して制御情報を形成し、この制御情報をバッファメモリ２および光学歪み補正部３のそれぞれに供給することで、所望の画像情報を複数入手し、この画像情報を伝送処理部４３に供給する。つまり、映像処理部４１において遠隔操作端末群６からの操作情報に応じ、画像の切り出し位置と切り出し寸法を指示する制御情報が形成される。この映像処理部４１において形成された制御情報がバッファメモリ２および光学歪み補正部３のそれぞれに供給されることで、光学歪み補正回路３において擬似的に所望の画像が再現され、この所望の画像情報が制御ユニット４に供給される。
【００２３】
また、音声処理部４２は、遠隔操作群６からの操作情報に応じて遠隔操作端末群６からのそれぞれの音声情報を再生するスピーカをスピーカ群１８の中から決定し、その選択されたスピーカに対して音声情報を出力すると共に、ｍチャンネルのディジタル音声信号の中から遠隔操作群６からの操作情報に応じた所定の音声信号を選択して、この選択したディジタル音声信号を伝送処理部４３に供給する。従って、音声処理部４２において撮影部１の設置箇所の音声情報と、遠隔操作端末群６の複数の設置箇所からの音声情報の交換がなされる。なお、音声処理部４２から出力されたディジタル音声信号は、Ｄ／Ａ変換器群１６、アンプ群１７およびスピーカ群１８の経路を介されることで音声として再生される。
【００２４】
伝送処理部４３は、ネットワークインターフェース回路、伝送符号／復号器等により構成されており、音声処理部４２からの音声情報と、映像処理部４１からの画像情報とを伝送媒体等に応じた伝送形態となるように変換し、得られた情報を要求先である遠隔操作端末群６のいずれかに転送するように伝送路上に送出する。また、その逆に供給される遠隔操作端末群６からの所定の伝送形態とされた情報から元の操作情報と音声情報とを復元し、操作情報を映像処理部４１および音声処理４２に供給すると共に、音声情報を音声処理部４２に供給する。
【００２５】
上述したようになされる遠隔操作に応じた処理について更に詳細に説明する。図３にこの発明の一実施形態における遠隔操作に応じた処理手順を概略化して示す。一例として遠隔操作端末６１を用いてカメラ１２を右にパンする場合を例に挙げ、その処理について説明する。なお、画像の切り出し位置および切り出し寸法に応じた光学歪みの値は、初期値が設定されているものとする。
【００２６】
遠隔操作端末６１は、単位時間毎に操作情報を制御ユニット４に送出する。先ず、Ｒボタン７９が押された場合（ステップＳ１）には、例えば、遠隔操作端末６１において「１０００００」といった６ビットの操作情報が形成され、この操作情報が制御ユニット４に供給される。
【００２７】
制御ユニット４の映像処理部４１において、端末側からの操作情報から操作者の押したボタンの検出がなされ、それに応じた処理がなされる。この場合においては、Ｒボタン７９が押されているため、先ず、ステップＳ１１において現在のカメラ１２の水平位置が読み出される。
【００２８】
そして、ステップＳ２１において、画像の切り出し位置を更新する必要があるかどうかが判定される。画像の切り出し位置を更新する必要がある場合には、ステップＳ３１に移行し、既に切り出し位置が限度一杯の右の端にあり画像の切り出し位置を更新する必要がない場合には、ステップＳ３４に移行する。
【００２９】
ステップＳ２１において、画像の切り出し位置を更新する必要があると判定された場合には、ステップＳ３１において、画像の切り出し位置が右に移動され、更新処理がなされる。画像の切り出し位置の更新が完了すると、ステップＳ３３において、光学歪みの補正方法が決定される。つまり、カメラのレンズ固有の光学歪みは、画角中の位置によって一義的に決定されるため、この場合においては、前回操作により設定されている切り出し寸法と新たな画像の切り出し位置に基づいて所望の切り出し画像を形成するための歪み補正係数が決定される。ステップＳ３３の処理が完了すると、ステップＳ３４に移行する。
【００３０】
一方、ステップＳ３５において、カメラ１２において形成されたディジタル画像信号がバッファメモリ２に供給され、例えば、所定時間間隔で更新されながら一時的に蓄積されている。従って、ステップＳ３５における初期段階の画像の更新処理が完了する度にステップＳ３４に移行し、所望の画像を形成するための歪み補正係数に基づいた補正処理が光学歪み補正部３においてなされる。補正後の画像情報が新たな切り出し画像情報として取り出され、この画像情報が制御部４の伝送処理部４３を介して端末側に転送される。なお、操作がなされなかった場合（ステップＳ７）には、そのままステップＳ３４に移行し、前回と同様に所望の画像を形成するための歪み補正係数に基づいた補正処理が光学歪み補正部３においてなされ、以下、同様とされる。
【００３１】
画像情報を受け取った遠隔操作端末６１において、表示部７１の表示画面の更新がなされる（ステップＳ３６）。このように遠隔操作端末６１を操作することで利用者は、撮影部１の設置箇所の所望の領域の画像をその表示画面に表示することができ、この状態で以て一連の処理が完了する。
【００３２】
なお、Ｌボタン７８が押された場合（ステップＳ２）に関しても上述したＲボタン７８が押された場合と同様の処理がなされ、左方向の画像情報が新たな切り出し画像情報として取り出される。
【００３３】
また、Ｕボタン７６およびＤボタン７７押された場合（ステップＳ３およびステップＳ４）には、先ず、ステップＳ１２において現在のカメラ１２の垂直位置が読み出される。そして、ステップＳ２２において、画像の切り出し位置を更新する必要があるかどうかが判定される。画像の切り出し位置を更新する必要がある場合には、ステップＳ３１に移行し、画像の切り出し位置を更新する必要がない場合には、ステップＳ３４に移行し、上述したＲボタン７８が押された場合と同様の処理がなされる。
【００３４】
さらに、Ｔボタン７４およびＷボタン７５押された場合（ステップＳ５およびステップＳ６）には、先ず、ステップＳ１３において現在のカメラ１２の画角が読み出される。そして、ステップＳ２３において、画像の切り出し寸法を更新する必要があるかどうかが判定される。画像の切り出し寸法を更新する必要がある場合には、ステップＳ３２に移行し、画像の切り出し寸法を更新する必要がない場合には、ステップＳ３４に移行して上述したＲボタン７８が押された場合と同様の処理がなされる。
【００３５】
ステップＳ２３において、画像の切り出し寸法を更新する必要があると判定された場合には、ステップＳ３２において、画像の切り出し寸法が拡大もしくは縮小され、更新処理がなされる。画像の切り出し寸法の更新が完了すると、ステップＳ３３において、光学歪みの補正方法が決定される。つまり、カメラのレンズ固有の光学歪みは、画角中の位置によって一義的に決定されるため、この場合においては、前回操作により設定されている切り出し位置と新たな画像の切り出し寸法に基づいて所望の切り出し画像を形成するための歪み補正係数が決定される。ステップＳ３３の処理が完了すると、ステップＳ３４に移行し、上述したＲボタン７８が押された場合と同様の処理がなされる。
【００３６】
上述した一実施形態における制御ユニット４の動作について更に詳細に説明する。図４Ａにこの発明の一実施形態における撮影部１の一例としての構成とその設置状況を示す。なお、図４Ａに示す例の場合には、５個のマイクロフォン１３１〜１３５とスピーカ１８１〜１８５とがそれぞれに組み合わされて撮影部１の筐体に等間隔に配設されている。
【００３７】
図４Ａにおいて８１で示されるのが撮影部１が設置された被制御撮影装置側の利用者である。例えば、利用者８１が地点ａ近傍に位置し、その領域の画像が遠隔操作端末群６で指定された場合には、図中矢印９１で示すように広角レンズ１１を介して得られる領域の画像が補正処理され、遠隔操作端末群６の要求先に転送される。この時、マイクロフォン１３２およびスピーカ１８２が制御ユニット４により選択される。従って、マイクロフォン１３２を介して取り込まれた音声情報も画像情報と合わせて遠隔操作端末群６の要求先に転送されると共に、遠隔操作端末群６からの音声情報がスピーカ１８２から再生される。このことにより撮影部１の設置地点と、遠隔操作端末群６の前の複数の利用者との間において円滑にコミニュケーションが図られる。
【００３８】
なお、地点ｂ近傍の領域の画像が遠隔操作端末群６で指定された場合には、図中矢印９２で示すように広角レンズ１１を介して得られる領域の画像が補正処理され、遠隔操作端末群６の要求先に転送される。この時においては、マイクロフォン１３４およびスピーカ１８４が制御ユニット４により選択される。
【００３９】
また、図４Ｂにこの発明の一実施形態における撮影部１の他の例としての構成とその設置状況を示す。なお、図４Ｂに示す例の場合には、スピーカ１８１〜１８５のみが撮影部１の筐体に等間隔に配設されている。
【００４０】
図４Ｂにおいて８１で示されるのが撮影部１の設置側の利用者であり、また、図４において８２で示されるのが別体に設けられた操作ユニットである。操作ユニット８２には、マイクロフォンが配設されると共に、スピーカの選択用のスイッチが配設されている。例えば、利用者８１が地点ａ近傍に位置し、その領域の画像が遠隔操作端末群６で指定された場合には、図中矢印９１で示すように広角レンズ１１を介して得られる領域の画像が補正処理され、遠隔操作端末群６の要求先に転送される。この時、上述した例の場合においては、自動的に制御ユニット４によりマイクロフォン１３１〜１３５およびスピーカ１８１〜１８５のいずれかが選択される。この例の場合においては、利用者８１が手動にてマイクロフォンおよびスピーカの選択を行う。従って、操作ユニット８２の指定したマイクロフォンを介して取り込まれた音声情報が画像情報と合わせて遠隔操作端末群６に転送されると共に、遠隔操作端末群６からの音声情報が利用者８１により選択された所定のスピーカから再生される。このことにより撮影部１の設置地点の利用者８１と、遠隔操作端末群６の前の複数の利用者の中の特定の利用者との間において円滑にコミニュケーションが図られる。
【００４１】
以下、この発明の一実施形態の実際の利用方法について簡単に説明する。上述したように遠隔操作端末群６の前の複数の利用者は、お互いを意識することなく撮影部１の設置箇所のカメラ１２による所望の領域の画像をみることができ、また、撮影部１の設置箇所の利用者とお互いのマイクロフォンとスピーカを介して会話することが可能とされているため、例えば、この発明の一実施形態を通信販売に応用すれば遠隔地の利用者は、カメラを操作して商品を自由に見ることができると共に、必要に応じて店員などに話かけて商品の案内を容易に受けることができ、効率化および簡素化が図られる。
【００４２】
また、音声切り換えスイッチを設ける図４Ｂに示す場合においては、撮影部１の設置地点の利用者は、必要に応じて音声の接続に制限を加えることかでき、遠隔操作端末群６側の複数の利用者の中で特定の利用者以外が会話に参加できないようにできる。従って、この発明の一実施形態を通信販売に応用すれば、撮影部１の設置箇所の利用者は、必要に応じてカメラ１２の前で商品を手に取りながら効率良く、詳しく説明することが可能となる。
【００４３】
なお、上述した一実施形態の説明においては、音声情報に関して異なる地点の情報を交換することが可能とされているが、遠隔操作端末群６側においても、撮影部１、バッファメモリ２、光学歪み補正部３および制御ユニット４を設けて双方向に映像情報に関しても交換するようにして双方向通信システムを構成するようにしても良い。
【００４４】
また、上述した一実施形態の説明においては、マイクロフォン群１３およびスピーカ群１８の中で所定のものを選択して用いる場合について説明したが、ゲインコントロール手段と加算手段等を用いて指定される所定領域に応じて音声の強調もしくは抑制処理を行うようにしても良い。
【００４５】
さらに、上述した図４Ａの例の説明においては、マイクロフォン群１３およびスピーカ群１８を撮影部１の筐体に取り付ける場合について説明したが、図４Ｂに示すようにマイクロフォンを他の場所に設置しても良く、また、スピーカに関しても分散配置しても良い。
【００４６】
【発明の効果】
この発明に依れば、機構部等の制御を伴うことなく、電子的に同時に多方向の映像と音声を複数の遠隔地からの要求に応じて転送することが可能とされ、音声に関しても円滑にコミュニケーションを図ることが可能とされる。
【図面の簡単な説明】
【図１】この発明の一実施形態の全体の構成を示すブロック図である。
【図２】この発明の一実施形態における遠隔操作端末装置の外観と情報交換の様子を示す略線図である。
【図３】この発明の一実施形態の動作説明に用いる略線図である。
【図４】この発明の一実施形態における音声処理の一例および他の例の説明に用いる略線図である。
【符号の説明】
１・・・撮影部、２・・・バッファメモリ、３・・・光学歪み補正部、４・・・制御ユニット、１１・・・広角レンズ、１２・・・カメラ、５１，５２，５ｎ・・・伝送路、６１，６２，６ｎ・・・遠隔操作端末、１３１，１３２，１３ｎ・・・マイクロフォン、１８１，１８２，１８ｎ・・・スピーカ
【図１】
0004182569.tif 000002
【図２】
0004182569.tif 000003
【図３】
0004182569.tif 000004
【図４】
0004182569.tif 000005