(57)【特許請求の範囲】
【請求項１】
カメラからの映像信号を圧縮符号化して送出する映像伝送装置と、該映像伝送装置から受信した圧縮符号化映像信号を復号化して映像表示部に表示すると共に前記カメラを制御する操作端末とを含む映像伝送システムに於いて、
前記映像伝送装置は、前記カメラからの映像信号を入力してイントラフレームを用いて圧縮符号化する高品質モード符号化部と、前記カメラの映像信号を入力して、該カメラの撮像方向及び撮像範囲の制御による画面の動き方向に対してイントラブロックを多く分布させて圧縮符号化する低遅延モード符号化部と、該低遅延モード符号化部と前記高品質符号化部とを切替えるモード選択部と、前記操作端末から前記カメラの撮像方向及び撮像範囲を制御する制御信号を受信して前記モード選択部により前記低遅延モード符号化部を選択させる制御信号処理部とを備えた
ことを特徴とする映像伝送システム。
【請求項２】
前記低遅延モード符号化部は、イントラスライスを単位としてイントラブロックの分布を制御する構成を有することを特徴とする請求項１記載の映像伝送システム。
【請求項３】
操作端末からカメラを制御し、該カメラからの映像信号を映像伝送装置により圧縮符号化して前記操作端末へ伝送し、該操作端末に於いて復号化して表示させる映像信号伝送制御方法に於いて、
前記操作端末から前記カメラの撮像方向及び撮像範囲を制御する過程に於ける前記カメラからの映像信号を、前記カメラの撮像方向及び撮像範囲の制御による画面の動き方向に対してイントラブロックを多く分布させて圧縮符号化する低遅延モード符号化部により圧縮符号化して前記操作端末へ送出し、その後にイントラフレームを用いて圧縮符号化する高品質モード符号化部により圧縮符号化して前記操作端末へ送出する過程を含む
ことを特徴とする映像伝送制御方法。
【請求項４】
前記低遅延モード符号化部により圧縮符号化する過程に於いて、イントラスライスを単位として前記イントラブロックの分布を多くする制御過程を含むことを特徴とする請求項３記載の映像伝送制御方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、被監視部分を撮像するカメラを旋回，ズーム，ピント合わせ等の操作を行うと共に、カメラからの映像信号を圧縮符号化して、カメラを操作する操作端末に伝送して表示する映像伝送システム及び映像伝送制御方法に関する。
【０００２】
【従来の技術】
監視，観測システムとして、例えば、河川氾濫の監視、道路の渋滞や事故の監視、群衆の事故の監視、地震等の災害監視等のシステムが知られている。それらのシステムに於いては、単一又は複数のカメラにより被監視部分を撮像し、撮像した映像信号を例えば圧縮符号化して監視部等に伝送し、その監視部に於いて復号化して表示画面に被監視部分の映像を表示し、又その監視部等からカメラを遠隔操作する構成が一般的である。その場合、カメラを遠隔操作して、広範囲にわたり順次監視する為の旋回制御や、詳細な再生画像とする為のズームアップ制御等を行う手段を備えている。又カメラからの映像信号を伝送する場合、圧縮符号化する場合が一般的であり、この圧縮符号化の手段として、標準化されたＭＰＥＧ（Ｍｏｖｉｎｇ  Ｐｉｃｔｕｒｅ  Ｅｘｓｐｅｒｔｓ  Ｇｒｏｕｐ）−２を適用することができる。
【０００３】
このＭＰＥＧ−２は、Ｉピクチャ（Ｉｎｔｒａ−ｃｏｄｅｄ  Ｐｉｃｔｕｒｅ）と、Ｐピクチャ（Ｐｒｅｄｉｃｔｉｖｅ−ｃｏｄｅｄ  Ｐｉｃｔｕｒｅ）と、Ｂピクチャ（Ｂｉ−ｄｉｒｅｃｔｏｎａｌ  Ｐｒｅｄｉｃｔｉｖｅ−ｃｏｄｅｄＰｉｃｔｕｒｅ）との３タイプのピクチャ構造を有し、固定ビットレート（ＣＢＲ；Ｃｏｎｓｔａｎｔ  Ｂｉｔ  Ｒａｔｅ）の符号化と、可変ビットレート（ＶＢＲ；Ｖａｒｉａｂｌｅ  Ｂｉｔ  Ｒａｔｅ）の符号化と、スライス層にイントラブロックを分散するイントラスライス符号化とが定められている。
【０００４】
ＣＢＲ符号化とＶＢＲ符号化とに於いては、最も符号化情報量が多くなるＩピクチャに対応した受信バッファ領域を用意する必要がある。又双方向予測によるＢピクチャ生成の為に、約３フレーム分の時間を必要とする。従って、カメラにより撮像した被監視部分の状態を、操作端末の表示部に表示するまでに要する遅延時間が大きくなる要因となっている。これに対して、イントラピクチャをフレーム内にスライス状に挿入するイントラスライス符号化は、ピクチャサイズを小さくし、且つ変動が少ないことから、受信バッファ領域を小さくすることが可能であり、又遅延時間も小さくすることが可能である。
【０００５】
【発明が解決しようとする課題】
圧縮符号化として、前述のイントラスライス符号化は、Ｂピクチャを求める双方向予測符号化を行わない為、ＣＢＲ符号化やＶＢＲ符号化に比較して、遅延時間を小さく抑えることが可能であるが、同一ビットレートとした場合に、相対的に再生画質が劣る問題がある。又操作端末側では、動画像として表示するものであるが、静止画像を抽出して保存することがある。その場合に、イントラスライス符号化は、孤立したＩピクチャが存在しない為に、静止画像として抽出することが困難である問題がある。
【０００６】
又操作端末からカメラを、前述のように、旋回制御やズーミング制御等を行った場合に、フレーム間差分が大きくなるから、前述のＣＢＲ符号化やＶＢＲ符号化に於いては発生情報量が多くなって、遅延時間が更に大きくなる。即ち、カメラ制御を行ってから被監視部分の画像が表示されるまでに要する時間が長くなる問題がある。
本発明は、前述の従来の問題点を解決するもので、カメラ操作に基づいて高品質モードと低遅延モードとに切替えることにより、被監視部分を高画質で再生表示及びカメラ操作時に迅速に被監視部分の異なる撮像領域を迅速に表示させることを目的とする。
【０００７】
【課題を解決するための手段】
本発明の映像伝送システムは、図１を参照して説明すると、カメラ１からの映像信号を圧縮符号化して送出する映像伝送装置２と、この映像伝送装置２から受信した圧縮符号化映像信号を復号化して映像表示部１１に表示すると共に前記カメラ１を制御する操作端末３とを含む映像伝送システムであって、映像伝送装置２は、カメラ１からの映像信号を入力してイントラフレームを用いて圧縮符号化する高品質モード符号化部８と、カメラ１の映像信号を入力して、このカメラ１の撮像方向及び撮像範囲の制御による画面の動き方向に対してイントラブロックを多く分布させて圧縮符号化する低遅延モード符号化部７と、これらの低遅延モード符号化部７と高品質符号化部８とを切替えるモード選択部６と、操作端末３からカメラ１の撮像方向及び撮像範囲を制御する制御信号を受信して、モード選択部６により低遅延モード符号化部７を選択させる制御信号処理部９とを備えている。
【０００８】
又映像伝送装置２の制御信号処理部９は、操作端末３のカメラ操作部１３からのカメラ１を制御する制御信号を受信識別して、モード選択部６を制御し、高品質モード符号化部８から低遅延モード符号化部７に切替え、且つカメラ１の一連の制御終了後に、低遅延モード符号化部７から高品質モード符号化部８へ切替える構成を有するものであり、又映像伝送装置２の低遅延モード符号化部７は、カメラの上下左右等の撮像方向及びズーミング等の撮像範囲の制御による画面の動きの方向に従ったイントラブロックの発生分布を制御する構成を備えることができる。
【０００９】
又本発明の映像伝送制御方法は、操作端末３からカメラ１を制御し、このカメラ１からの映像信号を映像伝送装置２に於いて圧縮符号化して、操作端末３へ伝送して表示させる映像信号伝送制御方法であって、操作端末３からカメラ１の撮像方向及び撮像範囲を制御する過程に於いては、カメラ１からの映像信号を低遅延モードにより圧縮符号化して操作端末３へ送出し、その後に高品質モードにより圧縮符号化して操作端末３へ送出する過程を含むものである。
【００１０】
又カメラ１の上下左右等の撮像方向及びズーミング等の撮像範囲を制御する過程に於いて低遅延モードによる圧縮符号化を行い、且つ画面の動きの方向に従ってイントラブロックの発生分布を制御する過程を含むことができる。
【００１１】
【発明の実施の形態】
以下図面を参照して本発明の実施の形態について説明する。図１は本発明の実施の形態の説明図であり、１はカメラ、２は映像伝送装置、３は操作端末、４は制御機構部、５は画像符号化部、６はモード選択部、７は低遅延モード符号化部、８は高品質モード符号化部、９は制御信号処理部、１０は画像復号化部、１１は映像表示部、１２は静止画蓄積部、１３はカメラ操作部を示す。
【００１２】
カメラ１は、制御機構部４によって広範囲にわたる被監視部分を監視する為の上下左右の撮像方向の制御及びズームインやズームアウト等による撮像範囲の制御更には遠景又は近景に対するピント合わせ等の制御が行われるもので、制御機構部４は、旋回台を回転させる為のモータ、カメラ１のレンズのズーミングの為のモータ、又は遠景や近景に対するピント合わせの為のモータ等を含むものであり、既に知られている各種の構成を適用することができる。
【００１３】
又映像伝送装置２は、カメラ１からの映像信号（アナログ映像信号）をモード選択部６を介して低遅延モード符号化部７又は高品質モード符号化部８に入力し、圧縮符号化を行った映像信号（ディジタル映像信号）を操作端末３に送出する。又映像伝送装置２は、制御信号処理部９を備え、操作端末３からの制御信号に従ってモード選択部６を制御し、又カメラ１の制御機構部４にカメラ制御信号を送出する。
【００１４】
画像符号化部５の低遅延モード符号化部７は、前述のＭＰＥＧ２に於けるイントラスライス符号化を適用することにより遅延時間を小さくして、カメラ１からの映像信号を圧縮符号化するものであり、又高品質モード符号化部８は、ＣＢＲ符号化又はＶＢＲ符号化を適用して、遅延時間が多少大きくなっても、再生画質を向上することができる符号化を行うものである。
【００１５】
又各種の監視システムや観測システム等に於いては、カメラ１と操作端末３とを離れた位置に配置し、又映像伝送装置２は、カメラ１側に配置する場合が一般的である。この映像伝送装置２と操作端末３との間をディジタル伝送路で接続し、映像伝送装置２に於いて圧縮符号化したディジタルの映像信号を操作端末３へ送出する。又操作端末３は、画像復号化部１０と映像表示部１１と静止画蓄積部１２とカメラ操作部１３とを備えた場合を示し、又図示を省略した各部を制御するプロセッサ等による制御手段を備えている。そして、画像復号化部１０により受信ディジタル映像信号を復号化して、映像表示部１１にカメラ１の撮像画像を表示し、又一定時間間隔等により、復号した映像信号から抽出した静止画を静止画蓄積部１２に蓄積する。この静止画は、被監視部分の詳細状態を解析する場合等に於いて再生表示される。
【００１６】
又操作端末３のカメラ操作部１３は、スイッチやボタン等による構成、又は映像表示部１１の表示画面上の一部のエリアを利用した操作部とし、その操作に従ったカメラ１に対する旋回制御信号やズーミング制御信号等を送出する。このような制御信号は、操作端末３と映像伝送装置２との間の信号線を介して伝送する場合が一般的であるが、ディジタルの映像信号を伝送する伝送路を利用して伝送する構成とすることも可能である。
【００１７】
又映像伝送装置２の制御信号処理部９は、操作端末３からのカメラ１の旋回制御やズーミング制御等の制御信号を受信していない場合に、モード選択部６に対して高品質モード符号化部８を選択するモード切替制御信号を加える。即ち、カメラ１の操作を行っていない状態では、高品質モードにより再生画質が良い高品質モードにより圧縮符号化される。又操作端末１３からの制御信号を受信した時は、モード選択部６に対して低遅延モード符号化部７を選択するモード切替制御信号を加える。
【００１８】
従って、カメラ１を操作しない状態に於いては、カメラ１からの映像信号を高品質モードとなる前述のＣＢＲ符号化やＶＢＲ符号化により圧縮符号化し、又カメラ１を旋回制御又はズーミング制御等を行う時は、低遅延モードとなるイントラスライス符号化により圧縮符号化を行うものである。それにより、カメラ１を旋回やズーミングの制御を行わない場合に、一定の被監視部分を撮像した高画質の再生画面とすることができ、又カメラ１の旋回やズーミングの制御を行っている時は、被監視部分の撮像範囲の変化した撮像画面を、低遅延時間で再生表示し、カメラ操作中の被監視部分の状態を迅速に監視することができる。
【００１９】
図２は高品質モードから低遅延モードへの切替時の説明図であり、画像符号化部に入力されるビデオ入力フレームとして、フレームＶ１，Ｖ２，Ｖ３，・・・が順次入力される状態に対して、モード切替タイミングと、高品質モード遅延時間と、高品質モード符号化データと、低遅延モード遅延時間と、低遅延モード符号化データと、受信側切替時間と、表示映像データとを示す。
【００２０】
又送信側、即ち、映像伝送装置２に於ける切替えに要する時間Ｔｓ、高品質モード符号化に於ける遅延時間Ｔｈ、低遅延モード符号化に於ける遅延時間Ｔｌ、高品質モード符号化と低遅延モード符号化とに於ける遅延時間の差Ｔｄ＝Ｔｈ−Ｔｌ、受信側、即ち、操作端末３に於ける切替えに要する時間Ｔｒとすると、高品質モードに於ける遅延時間Ｔｈは、前後のフレームを参照して符号化する過程を含むことにより、少なくとも３フレーム分の遅延時間となる。例えば、ビデオ入力フレームのＶ１に対応する高品質モード符号化データは、遅延時間Ｔｈ後のＶ１で示すものとなる。
【００２１】
これに対して、低遅延モード符号化に於いては、前後のフレームを参照することなく符号化する過程を含むことにより、Ｔｌ＜Ｔｈの遅延時間となる。例えば、ビデオ入力フレームのＶ４に対応する低遅延モード符号化データは、遅延時間Ｔｌ後のＶ４で示すものとなる。受信側に於いては、高品質モード符号化データの復号化から低遅延モード符号化データの復号化に切替えることになり、この切替えに要する時間Ｔｒは、Ｔｒ＝Ｔｓ−Ｔｄで表すことできる。従って、切替えに要する時間Ｔｓが遅延時間の差Ｔｄに等しいか又は小さい場合には、受信側の切替えに要する時間Ｔｒはほぼ零となる。即ち、高品質モード符号化から低遅延モード符号化に切替える場合、受信側の復号再生表示画面の切替えの過程はスムーズに行われることになる。
【００２２】
これに対して、低遅延モードから高品質モードへの切替えは、図２に対応して示す図３を参照すると、低遅延モード符号化に於いては、ビデオ入力フレームのＶ１に対応した低遅延モード符号化データは、遅延時間Ｔｌ後のＶ１として示すように出力される。そして、低遅延モード符号化から高品質モード符号化へ切替えると、ビデオ入力フレームの例えばＶ４に対応するフレームについては、遅延時間Ｔｈ後に高品質モード符号化データとして出力される。
【００２３】
従って、画像復号化部に於ける復号再生された表示映像データは、低遅延モード符号化データを復号再生した後、高品質モード符号化データを復号再生することになり、例えば、低遅延モード符号化データを復号したＶ２のフレーム後、高品質モード符号化データを復号再生して表示する為には、Ｔｒの切替時間を必要とするから、その間は、例えばＶ２のフレームについて静止画像として表示を続ける等の対策を必要とする。その為に、低遅延モード符号化から高品質モード符号化に切替える要因発生の時間間隔は、動画像表示を行う為には、少なくともＴｒより大きいことが必要となる。
【００２４】
図４は制御信号の説明図であり、操作端末３のカメラ操作部１３からの制御信号を、映像伝送装置２の制御信号処理部９を介して、モード選択部６と制御機構部４とに送出するシーケンスを示す。カメラ操作部１３によりカメラ１の旋回やズーミングの制御入力を行うことにより、先ず、低遅延モード符号化へ切替える為の切替指示信号を、映像伝送装置２の制御信号処理部９に転送する。制御信号処理部９は、その切替指示信号によりモード選択部６に、高品質モード符号化から低遅延モード符号化へ切替えるモード切替制御信号を加える。そして、カメラ操作部１３から、カメラ１の制御入力に従ったカメラ制御信号を送出する。
【００２５】
制御信号処理部９は、カメラ制御信号を制御機構部４に送出する。それによって、制御機構部４は、カメラ１の旋回やズーミングを行う。このカメラ１の制御操作が終了すると、カメラ操作部１３から高品質モード符号化への切替指示信号を送出する。映像伝送装置２の制御信号処理部９は、モード選択部６に、低遅延モード符号化から高品質モード符号化に切替える為のモード切替制御信号を加える。
【００２６】
図５はカメラ操作部の説明図であり、映像表示部１１（図１参照）の画面を利用したカメラ操作部の機能を示し、（Ａ）は動画表示部として示す被監視部分の表示領域の上下左右と中央との何れかをカーソルで指示して例えばクリックすることにより、右の領域であれば、カメラ１を右に旋回させる入力であり、中央の領域であれば、ズーミングの入力とすることができる。又（Ｂ）は動画表示部の横に、上下左右のボタンとズームのボタンとを表示させて、カーソル指示によるクリックで旋回やズーミングの入力を行う場合を示す。このようにモニタ画面内に各種の入力操作用のエリアを形成し、カーソル指示等により入力操作を行う制御手段は、既に知られているコンピュータの技術により容易に実現することができる。
【００２７】
図６はカメラ操作部の処理の概要フローチャートであり、マウス等の操作により、図５の（Ａ）の動画表示部のエリア又は（Ｂ）の操作ボタンのエリアにカーソルを移動させて、クリックすると（Ａ５）、低遅延モードへの遷移を開始する（Ａ４）。即ち、図４に示すように、カメラ操作部から制御信号処理部へ低遅延モード符号化に切替える切替指示信号を送出する。そして、クリック内容に従ったカメラ制御信号を送出する。例えば、操作ボタンの「左」をクリックすると、左旋回制御信号を送出する。
【００２８】
又図５の（Ａ）の動画表示部のエリア又は（Ｂ）の操作ボタンのエリアにカーソルを移動させても、クリックしない場合（Ａ１）、ｎ秒間のタイマを起動する（Ａ２）。ｎ秒後にカーソル位置を判定し（Ａ３）、カーソルがエリア外へ移動した場合は、元のステップに移行し、エリア内の場合は、カメラ制御入力を行うことを予想して、低遅延モードへの遷移開始（Ａ４）、即ち、カメラ操作部から制御信号処理部へ低遅延モード符号化に切替える切替指示信号を送出する。
【００２９】
又操作端末３に於いて、高品質モードと低遅延モードへの遷移中と低遅延モードとの状態を、マウスポインタの形状を変更して表示することができる。マウスポインタの形状としては、例えば、矢印、十字状、処理中を示す砂時計等の各種の形状が知られているが、高品質モードを表示する形状と、低遅延モードへの遷移中を表示する形状と、低遅延モードを表示する形状とをそれぞれ用意し、モード識別によってマウスポインタ形状を切替えることができる。
【００３０】
例えば、図７のマウスポインタ形状制御の説明図に示すように、映像伝送装置２（図１参照）から高品質モード映像データを受信している時は、マウスポインタ形状を高品質モード表示形状とし、カメラ制御の操作入力に従って前述の切替指示信号送出を行った時は、低遅延モードへの遷移中表示形状とし、映像伝送装置２からモード切替えによる低遅延モード映像データを受信すると、低遅延モード表示形状に変更することができる。
【００３１】
それにより、図５の（Ａ），（Ｂ）に示すように、モニタ画面中のカーソル位置及びクリックによるカメラ操作入力に於けるマウスポインタの形状によって、現在、高品質モードか、低遅延モード遷移中か、低遅延モードかを識別することができる。従って、高品質モードに於いてのみ、カメラ操作入力を可能とすることができる。又低遅延モード遷移中の場合には、カメラ操作ボタンのクリック受付を無効にする処理とすることができる。このようなマウスポインタの形状やクリック受付無効処理等は容易に実現することができる。
【００３２】
又映像伝送装置２と操作端末３とをローカルエリアネットワーク（ＬＡＮ）により接続した場合、その伝送フォーマットは、所定長のデータにヘッダを付加したパケットとするもので、例えば、図８に示すように、所定長のＭＰＥＧデータ（前述の高品質モード符号化データ又は低遅延モード符号化データ）のヘッダとして、モード識別ヘッダを付加し、そのモード識別ヘッダに、高品質モードと低遅延モードとの何れかを識別する情報を付加することにより、操作端末３に於いて、例えば、画像復号化部１０に於いて又はその前段（図示せず）に於ける受信処理部に於いてモード識別ヘッダを抽出し、高品質モード映像データの受信中か、低遅延モード映像データの受信中かを判定して、図７に於いて説明したマウスポインタ形状を変更することができる。
【００３３】
図９はＭＰＥＧ−２ビデオストリームの説明図であり、シーケンスヘッダ、シーケンス拡張等と共に、拡張＆ユーザの領域にモード情報を付加することも可能である。それによって、ビデオストリームとして伝送する場合に、前述の高品質モード符号化と低遅延モード符号化との何れの符号化によるデータかを、画像復号化部１０又はその前段に於ける図示を省略した受信処理部に於いて識別し、マウスポインタの形状を切替えることができる。
【００３４】
図１０は高品質モードと低遅延モードとのビデオストリームの概要説明図であり、図９に示すＭＰＥＧ−２ビデオストリームの要点のみを示し、（Ａ）は高品質モード、（Ｂ）は低遅延モードを示す。図１０の（Ａ）の高品質モードの場合のグループオブピクチャヘッダ（ＧＯＰヘッダ）が、図１０の（Ｂ）の低遅延モードの場合に省略されている。従って、映像伝送装置２と操作端末３との間に、ＭＰＥＧ−２ビデオストリームとして伝送する場合に於いても、操作端末３に於いて、図示を省略した制御処理手段によって、ビデオストリームに於けるグループオブピクチャヘッダの有無によってモード判定を行うことができる。それによって、高品質モードか低遅延モードかの状態を、前述のマウスポインタの形状の切替えを行うことができる。
【００３５】
図１１は低遅延モードから高品質モードへ切替える遷移開始のフローチャートを示し、前述のモニタ画面上の操作ボタンをマウスポインタ（又はカーソル）により指示してクリックすると（Ｂ１）、計測を開始し、操作ボタンのクリック終了（Ｂ２）により計測終了を行い、計測開始から計測終了までの操作量を計測する（Ｂ３）。即ち、操作ボタンをクリックすることにより、カメラ１の旋回、ズーム、ピント合わせ等の操作を行うものであり、カメラ操作部１３に於いては、１回の操作による旋回量、ズーム量、ピント遠近移動量を求める。
【００３６】
そして、求めた操作量に対応したタイマ値を算出する（Ｂ４）、即ち、カメラの旋回制御量やズーミング制御量に従って機械的な動作が完了するまでの時間を算出することになる。そして、タイマを起動し（Ｂ５）、別の操作があった否かを判定し（Ｂ６）、タイマのタイムアウト前に別の操作があった場合は、ステップ（Ｂ１）に移行する。又別の操作がなかった場合は、高品質モードへの遷移を開始する（Ｂ７）。例えば、図４に示す高品質モードへの切替指示信号の送出制御等を開始する。
【００３７】
図１２はマウスポインタ形状制御の説明図であり、低遅延モード表示形状と、高品質モードへ間もなく切替えることを示す表示形状と、高品質モードへの遷移中表示形状と、高品質モード表示形状との４段階に切替える場合を示す。映像伝送装置２から低遅延モード映像データを受信中は、マウスポインタ形状を、低遅延モード表示形式とするものであるが、最終操作から一定時間経過後に、高品質モードへ間もなく切替えることを示す表示形状とする。
【００３８】
又映像伝送装置２から低遅延モード映像データを受信中は、前述のように、低遅延モード表示形状とし、カメラ操作部１３によるカメラ旋回やズーミング等の入力操作の終了から一定時間後に、高品質モードへ間もなく切替えることを示すマウスポインタ表示形状に変更する。そして、切替信号送出により高品質モードへの遷移中表示形状に変更し、映像伝送装置２から高品質モード映像データの受信により、高品質モード表示形状に変更する。
【００３９】
図１３は静止画像取得処理のフローチャートを示し、操作端末３に於いては、一定時間間隔で静止画像を静止画蓄積部１２に蓄積するものであり、この静止画像保存のタイミングまでの残りをｍ秒とすると（Ｃ１）、現在のモードを判定し（Ｃ２）、高品質モードの場合は、静止画像取得まで低遅延モードへの遷移を抑止し（Ｃ３）、ｍ秒経過か否かを判定し（Ｃ４）、経過すると、静止画像の取得を行う（Ｃ５）。即ち、画像復号化部１０に於ける高品質モード符号化データを復号化して映像表示部１１に表示する１画面分の静止画像を静止画蓄積部１２に蓄積する。
【００４０】
又ステップ（Ｃ２）に於いて、現在のモードが低品質モードの場合は、切替指示等による高品質モードの遷移を促進し（Ｃ６）、それによる現在のモードを判定し（Ｃ７）、低遅延モードの場合は、ステップ（Ｃ６）に移行し、高品質モードに以降した場合は、ステップ（Ｃ３）に移行して、静止画像取得まで低遅延モードへの遷移を抑止する。
【００４１】
図１４は制御信号処理部の処理フローチャートを示し、図１の映像伝送装置２の制御信号処理部９に於ける処理の要部を示す。制御信号処理部９は、操作端末３のカメラ操作部１３からのカメラ操作信号を受信すると（Ｄ１）、現在のモードを判定し（Ｄ２）、高品質モードの場合は、低遅延モードへの切替信号をモード選択部６に送出し（Ｄ３）、所定時間のタイマを起動する（Ｄ４）。又ステップ（Ｄ２）に於ける判定で、現在低遅延モードの場合は、ステップ（Ｄ４）に移行する。
【００４２】
起動されたタイマのタイムアウトにより、現在のモードを判定し（Ｄ５）、低遅延モードの場合は、高品質モードへの切替信号をモード選択部６に送出し（Ｄ６）、又カメラ制御信号をカメラ１の制御機構部４に送出する。又ステップ（Ｄ５）に於いて現在高品質モードであると、モード選択部６をそのままの状態として、カメラ制御信号をカメラ１の制御機構部４に送出する。
【００４３】
図１５はカメラ旋回時の説明図であり、（Ａ）に示す被監視部分をカメラ１で撮像して、操作端末３の映像表示部１１に表示し、カメラ１を左にパンした場合の表示状態を時間の経過に従って示し、その場合、左側を注視部位として、左パンを行うことが一般的であるから、（Ｂ）に時間の経過に従って示す画面内の左側の量子化スケールを小さくして表示品質の向上を図る。この場合、低遅延モード符号化部７がモード選択部６により選択されて、カメラ１からの映像信号を符号化するものであるが、画面の左半分については、量子化ステップを小さくしたイントラブロックを多く分布させ、右半分については、量子化ステップを大きくしたノンイントラブロックを分布させる制御を行う。このような制御についても、１画面内の所定のブロックについての量子化スケール制御が可能であるから、カメラ制御信号の内容を判定して制御することができる。それにより、操作者が注視する部分の画質を向上することができる。
【００４４】
図１６はイントラスライスの更新の説明図であり、（Ａ）は上から下に向かって時間の経過に従ったイントラスライスＩＳの更新方向を示す。このイントラスライスＩＳの更新が１画面分について行われると、Ｉピクチャに相当する画面を構成することになる。又（Ｂ）は左から右に向かって時間の経過に従ったイントラスライスＩＳの更新方向とした場合を示す。
【００４５】
又（Ｃ）は、イントラスライスの前方参照から作成するノンイントラブロックの動き補償に於ける動きベクトルの大半は、イントラスライスの更新方向と一致した右方向であることを示す。このように、動きベクトルとイントラスライスの更新方向とを一致させると、ＩＤＣＴ（逆離散コサイン変換）のミスマッチ回数を低減することできるから、カメラの旋回方向に合わせて、動的にイントラスライスの更新方向を変化させる制御を行うものである。更に、操作者の注視部分に相当する領域についてのイントラスライスの更新回数を増加するように制御することができる。
【００４６】
図１７はズーミング操作時の説明図であり、（Ａ）は、ズームインを行う場合の操作者の注視部位が時間が経過しても、画面の中央部分であることを示す。そこで、（Ｂ）に示すように、画面の中央部分の領域に対しては量子化スケールの細かいイントラブロックを多く分布させ、周辺部分の領域に対しては量子化スケールの粗いノンイントラブロックを多く分布させる。それにより、画面の中央部分の画質を向上させる。又（Ｃ）はズームアウトを行う場合について示すもので、（Ｂ）のズームインの場合と反対に、画面の中央部分の領域に対しては量子化スケールの粗いノンイントラブロックを多く分布させ、画面の周辺部分の領域に対してはは量子化スケールの細かいイントラブロックを多く分布させる。
【００４７】
図１８はイントラスライス更新の説明図であり、Ｐは予測符号化ピクチャを示し、（Ａ）は図１６の（Ａ）の場合のイントラスライスの更新の場合と類似するものであるが、更にこの更新の回数を上側に多くした場合を示す。この場合は、カメラを下から上に向かって動かした場合に、画面の上側が注視部位となることにより、画面の上側の領域の画質を向上することができる。又（Ｂ）は、図１８の（Ａ）と反対にカメラを上から下に向かって動かした場合に対応したイントラスライスの更新の例を示す。この場合、画面の下側の更新回数を多くして、画面の下側の注視部位を画質を向上する。
【００４８】
又図１８の（Ｃ）は、図１６の（Ｂ）の場合にイントラスライスの更新の場合と類似してカメラを左旋回した場合を示し、注目部位に相当する画面の左側の更新回数を多くして、画面の左側の画質を向上する。又図１８の（Ｄ）は、図１８の（Ｃ）と反対にカメラを右旋回した場合を示し、注目部位に相当する画面の右側の更新回数を多くして、画面の右側の画質を向上する。
【００４９】
図１９はズーミング時のイントラスライス更新の説明図であり、（Ａ）はズームインの場合を示し、斜線の領域で示すイントラスライスを、中央部分に於いて多くなるように制御して、注視部位の画質を向上する。又（Ｂ）はズームアウトの場合を示し、周辺部分を注視部位とするから、その周辺部分のイントラスライス更新を多くして、周辺部分の画質を向上する。
【００５０】
本発明は、前述の各実施の形態のみに限定されるものではなく、種々付加変更することが可能であり、複数のカメラを設けたシステムに於いても、操作端末からカメラを指定して撮像方向や撮像範囲の制御を行う場合にも適用可能であり、又映像表示部１１は、カメラ対応の分割画面で表示することも可能である。
【００５１】
（付記１）カメラからの映像信号を圧縮符号化して送出する映像伝送装置と、該映像伝送装置から受信した圧縮符号化映像信号を復号化して映像表示部に表示すると共に前記カメラを制御する操作端末とを含む映像伝送システムに於いて、前記映像伝送装置は、前記カメラからの映像信号を圧縮符号化する低遅延モード符号化部と、高品質モード符号化部と、前記低遅延モード符号化部と前記高品質モード符号化部とを切替えるモード選択部と、前記操作端末からのカメラ制御信号を受信した時に前記モード選択部を制御して低遅延モード符号化部を選択させる制御信号処理部とを備えたことを特徴とする映像伝送システム。
（付記２）前記映像伝送装置の前記制御信号処理部は、前記操作端末の前記カメラ操作部からの前記カメラを制御する制御信号を受信識別して、前記モード選択部を制御し、高品質モード符号化部から低遅延モード符号化部に切替え、且つ前記カメラの一連の制御終了後に、前記低遅延モード符号化部から前記高品質モード符号化部へ切替える構成を有することを特徴とする付記１記載の映像伝送システム。
【００５２】
（付記３）前記操作端末の前記カメラ操作部は、カメラ操作入力動作を解析して予測し、該予測結果により高品質モードから低遅延モードへの切替えの指示信号を送出する構成を備えたことを特徴とする付記１又は２記載の映像伝送システム。
（付記４）前記操作端末の前記カメラ操作部は、モニタ画面上に形成した入力操作部に於けるマウスポインタ形状により高品質モードか低遅延モードか又は遷移中かのモード表示を行う構成を有することを特徴とする付記１又は２又は３記載の映像伝送システム。
（付記５）前記映像伝送装置の前記低遅延モード符号化部は、前記カメラの撮像方向及び撮像範囲の制御による画面の動きの方向に従ったイントラブロックの発生分布を制御する構成を有することを特徴とする付記１〜４の何れかに記載の映像伝送システム。
（付記６）前記映像伝送装置の前記低遅延モード符号化部は、前記カメラの撮像方向及び撮像範囲の制御による画面の動きの方向に従ったイントラスライス更新の頻度を制御する構成を有することを特徴とする付記１〜５の何れかに記載の映像伝送システム。
【００５３】
（付記７）操作端末からカメラを制御し、該カメラからの映像信号を映像伝送装置に於いて圧縮符号化して前記操作端末へ伝送して表示させる映像信号伝送制御方法に於いて、前記操作端末から前記カメラの撮像方向及び撮像範囲を制御する過程に於いては、前記カメラからの映像信号を低遅延モードにより圧縮符号化して前記操作端末へ送出し、その後に高品質モードにより圧縮符号化して前記操作端末へ送出する過程を含むことを特徴とする映像伝送制御方法。
（付記８）前記高品質モードか又は前記低遅延モードか又はモード遷移中かを、それぞれ異なるマウスポインタ形状を切替えて、前記カメラを制御するモニタ画面上の入力操作画面に表示する過程を含むことを特徴とする付記７記載の映像伝送制御方法。
（付記９）前記カメラの撮像方向及び撮像範囲を制御する過程に於いて前記低遅延モードによる圧縮符号化を行い、且つ画面の動きの方向に従ってイントラブロックの発生分布を制御する過程を含むことを特徴とする付記７又は８記載の映像伝送制御方法。
（付記１０）前記カメラの撮像方向及び撮像範囲の制御による画面の動きの方向に従ったイントラスライス更新の頻度を、前記画面の動きの方向と反対側の領域について高くする制御を行う過程を含むことを特徴とする付記９記載の映像伝送制御方法。
【００５４】
【発明の効果】
以上説明したように、本発明は、カメラ１を操作する時に、高品質モード符号化から自動的に低遅延モード符号化に切替えることにより、カメラ１の撮像方向又は撮像範囲を変更する過程に於ける画面を、操作端末３の映像表示部１１に少ない遅延時間で表示することができる。それにより、カメラ１の制御を適切に行うことが可能となる。又カメラ１の一連の操作が終了すると、自動的に高品質モード符号化に切替えることができるから、被監視部分を高画質で表示して監視することができる利点がある。
【００５５】
又カメラ操作過程に於ける符号化として、イントラスライス更新方向を、カメラの撮像方向又は撮像範囲の制御内容に従って制御することにより、例えば、左旋回の場合は、左側からイントラスライス更新を行うことにより、注視部分の左側の画面の画質を改善することができる利点がある。又その更新頻度を制御することにより、注視部分の画質を更に改善することができる利点がある。
【図面の簡単な説明】
【図１】本発明の実施の形態の説明図である。
【図２】高品質モードから低遅延モードへの切替時の説明図である。
【図３】低遅延モードから高品質モードへの切替時の説明図である。
【図４】制御信号の説明図である。
【図５】カメラ操作部の説明図である。
【図６】カメラ操作部の処理の概要フローチャートである。
【図７】マウスポインタ形状制御の説明図である。
【図８】ＬＡＮの伝送フォーマットの説明図である。
【図９】ＭＰＥＧ−２ビデオストリームの説明図である。
【図１０】高品質モードと低遅延モードとのビデオストリームの概要説明図である。
【図１１】高品質モードへの遷移のフローチャートである。
【図１２】マウスポインタ形状制御の説明図である。
【図１３】静止画像取得処理のフローチャートである。
【図１４】制御信号処理部の処理フローチャートである。
【図１５】カメラ旋回時の説明図である。
【図１６】イントラスライスの更新の説明図である。
【図１７】ズーミング操作時の説明図である。
【図１８】イントラスライス更新の説明図である。
【図１９】ズーミング時のイントラスライス更新の説明図である。
【符号の説明】
１  カメラ
２  映像伝送装置
３  操作端末
４  制御機構部
５  画像符号化部
６  モード選択部
７  低遅延モード符号化部
８  高品質モード符号化部
９  制御信号処理部
１０  画像復号部
１１  映像表示部
１２  静止画蓄積部
１３  カメラ操作部
【図１】
0003956010.tif 000002
【図２】
0003956010.tif 000003
【図３】
0003956010.tif 000004
【図４】
0003956010.tif 000005
【図５】
0003956010.tif 000006
【図６】
0003956010.tif 000007
【図７】
0003956010.tif 000008
【図８】
0003956010.tif 000009
【図９】
0003956010.tif 000010
【図１０】
0003956010.tif 000011
【図１１】
0003956010.tif 000012
【図１２】
0003956010.tif 000013
【図１３】
0003956010.tif 000014
【図１４】
0003956010.tif 000015
【図１５】
0003956010.tif 000016
【図１６】
0003956010.tif 000017
【図１７】
0003956010.tif 000018
【図１８】
0003956010.tif 000019
【図１９】
0003956010.tif 000020