(57)【要約】【課題】同時撮像された複数の撮像映像信号に対応する機器の構成の簡略化【解決手段】複数の撮像手段１０１，１０２で得られた複数のインターレース方式の撮像映像信号Ｐ１，Ｐ２を、垂直同期タイミングで選択（１０４）することで１系統のノンインターレース方式の合成映像信号Ｐｍｉｘ０とする。合成映像信号Ｐｍｉｘ０を圧縮手段１０５で圧縮し、記録又は送信する。さらに、記録媒体から再生された、或いは受信された圧縮合成映像信号Ｐｍｉｘ２については、伸長手段１０７で圧縮を解除し、また映像分配処理として単に垂直同期タイミングで選択（１０９）していくことで、元の複数系統の映像信号とする。合成時のフィールド単位での選択によって失われたフィールドについては、補間処理を行う。【選択図】        図１
2004320442.tif 000002
【特許請求の範囲】
【請求項１】
同一の同期信号に基づいて同期して供給される複数のインターレース方式の映像信号を、上記同期信号における垂直同期タイミングで順次選択することで、上記複数の映像信号を合成したノンインターレース方式の合成映像信号を得る合成手段と、
上記合成手段で得られた合成映像信号に対して圧縮処理を行う圧縮手段と、
を備えたことを特徴とする映像信号処理装置。
【請求項２】
上記圧縮手段は、上記合成映像信号において合成された状態の上記各映像信号に対して、異なる圧縮率で圧縮処理を行うことを特徴とする請求項１に記載の映像信号処理装置。
【請求項３】
上記圧縮手段で圧縮された圧縮合成映像信号を記録媒体に記録する記録手段を、さらに備えたことを特徴とする請求項１に記載の映像信号処理装置。
【請求項４】
上記圧縮手段で圧縮された圧縮合成映像信号を送信出力する送信手段を、さらに備えたことを特徴とする請求項１に記載の映像信号処理装置。
【請求項５】
同一の同期信号に基づいて同期して供給された複数のインターレース方式の映像信号を、上記同期信号における垂直同期タイミングで順次選択することでノンインターレース方式の合成映像信号とし、さらに上記合成映像信号を圧縮処理した圧縮合成映像信号に対して、
上記圧縮処理に対する伸長処理を行い、圧縮を解かれた合成映像信号を得る伸長手段と、
上記伸長手段から出力された合成映像信号を、垂直同期に基づくタイミングで順次選択していくことで、上記複数のインターレース方式の映像信号に対応する複数の映像信号を得る映像分配手段と、
を備えたことを特徴とする映像信号処理装置。
【請求項６】
上記映像分配手段によって出力された映像信号に対して補間処理を行う補間手段を、さらに備えたことを特徴とする請求項５に記載の映像信号処理装置。
【請求項７】
記録媒体に対する再生手段をさらに備え、
上記伸長手段に入力される圧縮合成映像信号は、上記再生手段によって記録媒体から再生された信号であることを特徴とする請求項５に記載の映像信号処理装置。
【請求項８】
受信手段をさらに備え、
上記伸長手段に入力される圧縮合成映像信号は、上記受信手段によって受信された信号であることを特徴とする請求項５に記載の映像信号処理装置。
【請求項９】
同一の同期信号に基づいて同期して供給される複数のインターレース方式の映像信号を、上記同期信号における垂直同期タイミングで順次選択することで、上記複数の映像信号を合成したノンインターレース方式の合成映像信号を得、
上記合成映像信号に対して圧縮処理を行い、
上記圧縮された圧縮合成映像信号について、記録媒体への記録、又は送信出力を行うことを特徴とする映像信号処理方法。
【請求項１０】
上記圧縮処理では、上記合成映像信号において合成された状態の上記各映像信号に対して、異なる圧縮率で圧縮処理を行うことを特徴とする請求項９に記載の映像信号処理方法。
【請求項１１】
同一の同期信号に基づいて同期して供給された複数の映像信号を、上記同期信号における垂直同期タイミングで順次選択することでノンインターレース方式の合成映像信号とし、さらに上記合成映像信号を圧縮処理した圧縮合成映像信号に対して、
上記圧縮処理に対する伸長処理を行い、圧縮を解かれた合成映像信号を得、
上記合成映像信号を、垂直同期に基づくタイミングで順次選択していくことで、複数の映像信号を出力することを特徴とする映像信号処理方法。
【請求項１２】
さらに、上記出力された映像信号に対して補間処理を行うことを特徴とする請求項１１に記載の映像信号処理方法。
【請求項１３】
同期信号発生手段と、
上記同期信号発生手段からの同期信号に基づいて撮像を行ってインターレース方式の撮像映像信号を出力する複数の撮像手段と、
上記複数の撮像手段によって得られた複数の撮像映像信号を、上記同期信号における垂直同期に基づくタイミングで順次選択することで、上記複数の撮像映像信号を合成したノンインターレース方式の合成映像信号を得る合成手段と、
上記合成手段で得られた合成映像信号に対して圧縮処理を行う圧縮手段と、
を備えたことを特徴とする撮像装置。
【請求項１４】
上記圧縮手段は、上記合成映像信号において合成された状態の上記各撮像映像信号に対して、異なる圧縮率で圧縮処理を行うことを特徴とする請求項１３に記載の撮像装置。
【請求項１５】
上記圧縮手段で圧縮された圧縮合成映像信号を記録媒体に記録する記録手段を、さらに備えたことを特徴とする請求項１３に記載の撮像装置。
【請求項１６】
上記圧縮手段で圧縮された圧縮合成映像信号を送信出力する送信手段を、さらに備えたことを特徴とする請求項１３に記載の撮像装置。
【請求項１７】
同一の同期信号に基づいて撮像を行う複数の撮像手段によって得られた複数のインターレース方式の撮像映像信号を、上記同期信号における垂直同期タイミングで順次選択することでノンインターレース方式の合成映像信号とし、さらに上記合成映像信号を圧縮処理した圧縮合成映像信号を、記録媒体から再生する再生手段と、
上記再生手段によって記録媒体から再生された圧縮合成映像信号について、上記圧縮処理に対する伸長処理を行い、圧縮を解かれた合成映像信号を得る伸長手段と、
上記伸長手段から出力された合成映像信号を、垂直同期に基づくタイミングで順次選択していくことで、上記複数のインターレース方式の撮像映像信号に対応する複数の映像信号を得る映像分配手段と、
を備えたことを特徴とする再生装置。
【請求項１８】
上記映像分配手段によって出力された映像信号に対して補間処理を行う補間手段を、さらに備えたことを特徴とする請求項１７に記載の再生装置。
【請求項１９】
同一の同期信号に基づいて撮像を行う複数の撮像手段によって得られた複数のインターレース方式の撮像映像信号を、上記同期信号における垂直同期タイミングで順次選択することでノンインターレース方式の合成映像信号とし、さらに上記合成映像信号を圧縮処理した圧縮合成映像信号を、受信する受信手段と、
上記受信手段によって受信された圧縮合成映像信号について、上記圧縮処理に対する伸長処理を行い、圧縮を解かれた合成映像信号を得る伸長手段と、
上記伸長手段から出力された合成映像信号を、垂直同期に基づくタイミングで順次選択していくことで、上記複数のインターレース方式の撮像映像信号に対応する複数の映像信号を得る映像分配手段と、
を備えたことを特徴とする受信装置。
【請求項２０】
上記映像分配手段によって出力された映像信号に対して補間処理を行う補間手段を、さらに備えたことを特徴とする請求項１９に記載の受信装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、映像信号処理装置、映像信号処理方法、撮像装置、再生装置、受信装置に関し、特に複数の同期した映像信号に対する処理に係るものである。
【０００２】
【従来の技術】
【特許文献１】特開平７−２１２７４８
例えば携帯用ビデオカメラなどとして撮像装置が普及しており、業務用や一般家庭用途などに用いられている。
また、上記特許文献１のように監視用カメラとしての各種技術も提案されている。
【０００３】
【発明が解決しようとする課題】
ところで近年、例えば１台の撮像装置（ビデオカメラ）において、２つのカメラ部を搭載し、同時に２系統の撮像映像信号を得ることができるようにしたものが提案されている。例えばメインカメラとサブカメラを搭載し、異なる被写体方向や異なるズーム状態などで撮像したり、前方と後方を同時に撮像できるような撮像装置である。
このように複数系統の撮像映像信号を得ることができる撮像装置では、当然ながら撮像信号の処理回路系も複数系統搭載されていた。
例えば撮像映像信号を圧縮してディスクその他の記録媒体に記録するようにした撮像装置の構成例を図１８に示す。
【０００４】
図１８の撮像装置は、第１カメラ部２０１，第２カメラ部２０２を備える。
第１、第２カメラ部２０１，２０２は、それぞれレンズ系、ＣＣＤ撮像素子、映像信号処理回路などを搭載し、それぞれ撮像に応じて撮像映像信号Ｐ１，Ｐ２を出力する。
また、この第１，第２カメラ部２０１，２０２は、同期信号発生部２０３からの共通の同期信号ＳＹに基づいて撮像映像信号処理を行う。つまり、各カメラ部２０１，２０２は、同期して撮像を行う。
【０００５】
第１カメラ部２０１からの撮像映像信号Ｐ１は、第１圧縮系２０４としての回路部で圧縮処理される。例えばＭＰＥＧ方式などの圧縮処理である。
また第２カメラ部２０２からの撮像映像信号Ｐ２は、第２圧縮系２０５としての回路部で同様に圧縮処理される。
第１圧縮系２０４で圧縮された撮像映像信号と、第２圧縮系２０５で圧縮された撮像映像信号は、それぞれ記録系回路に供給され、各々独立した映像データとして記録メディア９０に記録される。
これら同時的に得られる２つの映像信号は、記録に際して時分割的に交互に記録処理されたり、或いは複数の記録ヘッドを備えた記録機構が構成されていれば、同時進行的に記録される。
【０００６】
記録した映像信号の再生時には、第１カメラ部２０１で撮像された映像信号は、記録メディア９０から再生されると第１伸長系２０７としての回路に供給され、上記圧縮処理に対する伸長処理が行われる。
また、第２カメラ部２０２で撮像された映像信号は、記録メディア９０から再生されると第２伸長系２０８としての回路に供給され、上記圧縮処理に対する伸長処理が行われる。
そして第１、第２伸長系２０７，２０８でそれぞれ圧縮が解かれた映像信号とされ、それぞれ表示部２０９、２１０に供給されて表示される。
【０００７】
このような複数のカメラ部を備えた撮像装置では、２系統の撮像映像信号に対する処理系として、例えば図のように第１、第２圧縮系２０４，２０５、及び第１，第２伸長系２０７，２０８として、同様の信号処理回路が２系統必要になる。また、同時に供給される２系統の映像信号の記録のために、記録メディア９０に対する記録系においては高速記録処理、時分割記録処理などの高機能化が求められ、或いは複数ヘッド機構など構成の複雑化が必要となる。
このため、構成の複雑化、大幅なコストアップ、回路規模の大型化などの問題が生ずる。
【０００８】
【課題を解決するための手段】
そこで本発明は、複数系統の同期した映像信号、例えば同期した撮像映像信号を同時的に処理する機器において、回路規模の小型化、簡略化、コストダウン等を実現することを目的とする。
【０００９】
このため本発明の映像信号処理装置は、同一の同期信号に基づいて同期して供給される複数のインターレース方式の映像信号を、上記同期信号における垂直同期タイミングで順次選択することで、上記複数の映像信号を合成したノンインターレース方式の合成映像信号を得る合成手段と、上記合成手段で得られた合成映像信号に対して圧縮処理を行う圧縮手段とを備える。
また上記圧縮手段は、上記合成映像信号において合成された状態の上記各映像信号に対して、異なる圧縮率で圧縮処理を行う。
上記圧縮手段で圧縮された圧縮合成映像信号については、記録手段により記録媒体に記録する。或いは送信手段により送信する。
【００１０】
また本発明の映像信号処理装置は、上記圧縮合成映像信号に対して、上記圧縮処理に対する伸長処理を行い、圧縮を解かれた合成映像信号を得る伸長手段と、上記伸長手段から出力された合成映像信号を、垂直同期に基づくタイミングで順次選択していくことで、上記複数のインターレース方式の映像信号に対応する複数の映像信号を得る映像分配手段とを備える。
また、上記映像分配手段によって出力された映像信号に対して補間処理を行う補間手段をさらに備える。
これらの場合、上記圧縮合成映像信号は、再生手段によって記録媒体から再生された信号、或いは受信手段によって受信された信号である。
【００１１】
本発明の映像信号処理方法は、同一の同期信号に基づいて同期して供給される複数のインターレース方式の映像信号を、上記同期信号における垂直同期タイミングで順次選択することで、上記複数の映像信号を合成したノンインターレース方式の合成映像信号を得、上記合成映像信号に対して圧縮処理を行い、上記圧縮された圧縮合成映像信号について、記録媒体への記録、又は送信出力を行う。
この場合、上記圧縮処理では、上記合成映像信号において合成された状態の上記各映像信号に対して、異なる圧縮率で圧縮処理を行うようにもする。
また本発明の映像信号処理方法は、上記圧縮合成映像信号に対して、上記圧縮処理に対する伸長処理を行い、圧縮を解かれた合成映像信号を得、上記合成映像信号を、垂直同期に基づくタイミングで順次選択していくことで、複数の映像信号を出力する。さらに、上記出力された映像信号に対して補間処理を行うようにもする。
【００１２】
本発明の撮像装置は、同期信号発生手段と、上記同期信号発生手段からの同期信号に基づいて撮像を行ってインターレース方式の撮像映像信号を出力する複数の撮像手段と、上記複数の撮像手段によって得られた複数の撮像映像信号を、上記同期信号における垂直同期タイミングで順次選択することで、上記複数の撮像映像信号を合成したノンインターレース方式の合成映像信号を得る合成手段と、上記合成手段で得られた合成映像信号に対して圧縮処理を行う圧縮手段とを備える。
【００１３】
本発明の再生装置は、同一の同期信号に基づいて撮像を行う複数の撮像手段によって得られた複数のインターレース方式の撮像映像信号を、上記同期信号における垂直同期タイミングで順次選択することでノンインターレース方式の合成映像信号とし、さらに上記合成映像信号を圧縮処理した圧縮合成映像信号を、記録媒体から再生する再生手段と、上記再生手段によって記録媒体から再生された圧縮合成映像信号について、上記圧縮処理に対する伸長処理を行い、圧縮を解かれた合成映像信号を得る伸長手段と、上記伸長手段から出力された合成映像信号を、垂直同期に基づくタイミングで順次選択していくことで、上記複数のインターレース方式の撮像映像信号に対応する複数の映像信号を得る映像分配手段とを備える。
【００１４】
本発明の受信装置は、同一の同期信号に基づいて撮像を行う複数の撮像手段によって得られた複数のインターレース方式の撮像映像信号を、上記同期信号における垂直同期タイミングで順次選択することでノンインターレース方式の合成映像信号とし、さらに上記合成映像信号を圧縮処理した圧縮合成映像信号を、受信する受信手段と、上記受信手段によって受信された圧縮合成映像信号について、上記圧縮処理に対する伸長処理を行い、圧縮を解かれた合成映像信号を得る伸長手段と、上記伸長手段から出力された合成映像信号を、垂直同期に基づくタイミングで順次選択していくことで、上記複数のインターレース方式の撮像映像信号に対応する複数の映像信号を得る映像分配手段とを備える。
【００１５】
以上のような本発明では、複数系統の同期したインターレース方式の映像信号（例えば撮像映像信号）について垂直同期タイミングで順次選択することで合成し、ノンインターレース方式の合成映像信号とする。具体的には、例えば映像信号のフィールド単位で各系統の撮像映像信号を選択していくことで、１フレーム内で映像が垂直方向に分割されたような合成映像信号とすることができる。そしてこれにより、圧縮手段は１系統の合成映像信号に対応すればよい。
また、この合成映像信号は、例えば画面上の上と下に複数の映像が合成されたような信号（画面分割表示されるような映像信号）となる。従って、フレーム内相関、及びフレーム間相関が保たれた信号となる。さらに、元の複数の各映像信号の情報はフレーム領域内で上下に分かれているため、元の各映像信号に対して異なった圧縮率で圧縮処理を行うこともできる。
また、このように合成され圧縮された圧縮合成映像信号については、伸長処理した後、垂直同期に基づくタイミング、例えばｎ系統の映像を合成した合成映像信号であった場合は、そのノンインターレース方式のフレームの１／ｎ期間のタイミング（フィールド相当タイミング）で順次選択していくことで、元の複数系統の映像信号とすることができる。さらに、合成時のフィールド単位での選択によって失われたフィールドについては、補間処理を行えばよい。
【００１６】
【発明の実施の形態】
以下、本発明の実施の形態について次の順序で説明していく。
１．実施の形態の基本構成
２．ビデオカメラの態様及びシステム構成
３．ビデオカメラの構成及び動作
４．圧縮レート切換に関する動作
４−１．撮像動作モード
４−２  操作又は指示によるレート切換
４−３  音声検査によるレート切換
４−４  画像解析によるレート切換
４−５  位置検出によるレート切換
４−６  他のレート切換制御例
５．多数映像信号源の例
６．変形例
【００１７】
１．実施の形態の基本構成
まず、図１〜図５で、実施の形態に適用される基本的な構成について説明する。
本例の場合、例えば１台の撮像装置（ビデオカメラ）においては、図１に示すように、第１カメラ部１０１，第２カメラ部１０２として２つのカメラ部を備える。例えば第１カメラ部１０１がメインカメラ、第２カメラ部１０２がサブカメラとされたり、一方が前方、他方が後方を撮像するように形成される。２つのカメラ部１０１，１０２の撮像方向、撮像範囲（視野角度）、ズーム・パン等の機能などは、それぞれ実際の機器において任意に設定される。
【００１８】
第１、第２カメラ部１０１，１０２は、それぞれレンズ系、ＣＣＤ撮像素子、映像信号処理回路などを搭載し、それぞれ撮像に応じてインターレース方式の撮像映像信号Ｐ１，Ｐ２を出力する。
また、この第１，第２カメラ部１０１，１０２は、同期信号発生部１００からの共通の同期信号ＳＹに基づいて撮像映像信号処理を行う。つまり、各カメラ部１０１，１０２は、同期して撮像を行う。
【００１９】
ここで、第１，第２カメラ部１０１，１０２から出力される各撮像映像信号Ｐ１，Ｐ２は、それぞれ選択部１０３に供給される。
選択部１０３は、同期信号発生部１００から同期信号ＳＹが供給されており、同期信号ＳＹに基づいて切換を行う回路とされる。具体的には、垂直同期タイミング毎に接続端子を切り換えていくことで映像選択を行う。
撮像映像信号Ｐ１，Ｐ２が、インターレース方式の映像信号であるため、選択部１０３はフィールド単位で撮像映像信号Ｐ１，Ｐ２を選択し、出力するものとなる。
選択部１０３で選択された出力は、合成部１０４に供給される。合成部１０４には、撮像映像信号Ｐ１の或るフィールドと、撮像映像信号Ｐ２の或るフィールドが順次連続して供給されることになる。
例えば合成部１０４はフレームメモリを備え、このフレームメモリにフィールド単位で順次供給されてくる映像信号を記憶していく。これによって、フレームメモリに２フィールド分の映像信号が記憶された時点で、そのフレームメモリに記憶された１フレーム分の映像信号は、撮像映像信号Ｐ１，Ｐ２を垂直方向に分割して合成した合成映像信号となる。
合成部１０４は、フレームメモリに記憶された映像信号を、ノンインターレース方式の合成映像信号として順次出力していく。従って、合成部１０４には、最低限１フレーム分のフレームメモリを備えればよい。
【００２０】
図２、図３により、その映像合成の様子を模式的に示す。
図２（ａ）においては同期信号ＳＹにおける垂直同期タイミングを、その垂直期間毎にＯｄｄ／Ｅｖｅｎとして示している。即ちこれは、映像信号の奇数フィールドと偶数フィールドに相当するタイミングである。
第１カメラ部１０１からは図２（ｂ）のようにインターレース方式の撮像映像信号Ｐ１が出力される。撮像映像信号Ｐ１の奇数フィールドをＯ１＃０、Ｏ１＃１・・・とし、偶数フィールドをＥ１＃０、Ｅ１＃１・・・として示している。
フィールドＯ１＃０、Ｅ１＃０がインターレース方式のフレームＦ１＃０となる。同様にフィールドＯ１＃１、Ｅ１＃１がフレームＦ１＃１、フィールドＯ１＃２、Ｅ１＃２がフレームＦ１＃２・・・となる。
【００２１】
また第２カメラ部１０２からは図２（ｃ）のようにインターレース方式の撮像映像信号Ｐ２が出力される。撮像映像信号Ｐ２の奇数フィールドをＯ２＃０、Ｏ２＃１・・・とし、偶数フィールドをＥ２＃０、Ｅ２＃１・・・として示している。
フィールドＯ２＃０、Ｅ２＃０がインターレース方式のフレームＦ２＃０となる。同様にフィールドＯ２＃１、Ｅ２＃１がフレームＦ２＃１、フィールドＯ２＃２、Ｅ２＃２がフレームＦ２＃２・・・となる。
【００２２】
例えば選択部１０３では、奇数フィールドのタイミングで撮像映像信号Ｐ１を選択し、偶数フィールドのタイミングで撮像映像信号Ｐ２を選択するように、切換動作を行う。
すると、選択部１０３で選択され、合成部１０４においてフレームメモリに取り込まれながら、順次出力される合成映像信号は、図２（ｄ）のように、Ｏ１＃０とＥ２＃０によるフレームＦｍ＃１、Ｏ１＃１、Ｅ２＃１によるフレームＦｍ＃１、Ｏ１＃２、Ｅ２＃２によるフレームＦｍ＃２・・・というように各フレームが連続する信号となる。つまり、撮像映像信号Ｐ１の奇数フィールドと、撮像映像信号Ｐ２の偶数フィールドが１フレームとされ、かつこれがノンインターレース方式のフレームとされた合成映像信号Ｐｍｉｘ０とされる。
例えば撮像映像信号Ｐ１，Ｐ２をＮＴＳＣ方式のインターレース信号であるとすると、合成映像信号Ｐｍｉｘ０は、フレーム３０Ｈｚのプログレッシブビデオ信号とできる。
【００２３】
図３には、撮像映像信号Ｐ１の奇数フィールドと、撮像映像信号Ｐ２の偶数フィールドによって形成されるノンインターレース方式の合成映像信号Ｐｍｉｘ０の様子を示している。
図のように、合成映像信号Ｐｍｉｘ０は、例えばフレームＦｍ＃０で言えば、内の上半分が撮像映像信号Ｐ１の奇数フィールドＯ１＃０、下半分が撮像映像信号Ｐ２の偶数フィールドＥ２＃０となる。つまり、２つの映像が垂直方向に合成された映像信号となるものである。
【００２４】
このように合成された合成映像信号Ｐｍｉｘ０は、圧縮部１０５に供給され、例えばＭＰＥＧ方式、ＪＰＥＧ方式などの圧縮処理が施されて圧縮合成映像信号Ｐｍｉｘ１とされる。
この圧縮合成映像信号Ｐｍｉｘ１は、記録再生部１０６に供給され、所定の記録メディア９０に記録される。つまり、撮像映像信号Ｐ１，Ｐ２が合成され、圧縮された圧縮合成映像信号Ｐｍｉｘ１が、１つの映像コンテンツとして記録されるものとなる。
なお記録メディア９０としては、例えばビデオカメラに装填されたディスクやメモリカード、磁気テープ、或いは内蔵されたＨＤＤ（ハードディスクドライブ）、半導体メモリなど、各種のものが考えられる。
【００２５】
記録再生部１０６により記録メディア９０から映像信号を再生する場合、再生される映像信号Ｐｍｉｘ２は、上記映像信号Ｐｍｉｘ１の状態であり、即ち圧縮合成映像信号である。
この再生された圧縮合成映像信号Ｐｍｉｘ２は、伸長部１０７に供給される。伸長部１０７は、上記圧縮部１０５での圧縮処理に対する伸長処理を行い、圧縮の解除された映像信号、即ち上記の合成映像信号Ｐｍｉｘ０と同様の合成映像信号Ｐｍｉｘ３を出力し、映像分配部１０９に供給する。
また伸長部１０７は、伸長処理タイミングをタイミング発生部１０８に伝える。タイミング発生部１０８では、伸長部１０７が出力した映像信号の垂直同期期間の１／２（元の撮像映像信号Ｐ１，Ｐ２のフィールド期間）に相当する伸長タイミング信号ＴＭを発生させ、映像分配部１０９に供給する。
【００２６】
映像分配部１０９は、伸長タイミング信号ＴＭに基づいて出力切換を行うことで、合成映像信号Ｐｍｉｘ３を個々の映像信号に分離させる。即ち元の撮像映像信号Ｐ１，Ｐ２のフィールド期間に相当するタイミング毎に出力端子を選択することで、ノンインターレース方式の合成映像信号Ｐｍｉｘ３について、例えばフレーム内の前半の映像信号を補間部１１１側に出力し、またフレーム内の後半の映像信号を補間部１１２側に出力する。
【００２７】
上記図２，図３で説明した例によれば、合成映像信号Ｐｍｉｘ３のフレーム内の前半の映像信号とは、元の撮像映像信号Ｐ１の奇数フィールドの信号である。
この奇数フィールドが供給される補間部１１１は、その供給される映像信号には偶数フィールドのデータが存在しないため、補間処理によりこれを生成する。そして補間処理した映像信号Ｐ１’を出力する。この映像信号Ｐ１’は、即ち撮像映像信号Ｐ１に相当する再生映像信号である。
また、合成映像信号Ｐｍｉｘ３のフレーム内の後半の映像信号とは、元の撮像映像信号Ｐ２の偶数フィールドの信号である。
この偶数フィールドが供給される補間部１１２は、その供給される映像信号には奇数フィールドのデータが存在しないため、補間処理によりこれを生成する。そして補間処理した映像信号Ｐ２’を出力する。この映像信号Ｐ２’は、即ち撮像映像信号Ｐ２に相当する再生映像信号である。
【００２８】
ここまでの処理の様子を図４に示す。
記録メディア９０から再生され、伸長部１０７で伸長された合成映像信号Ｐｍｉｘ３は図４（ｂ）のようになる。即ち図２（ｄ）の合成映像信号Ｐｍｉｘ０と同様に、撮像映像信号Ｐ１の奇数フィールドと、撮像映像信号Ｐ２の偶数フィールドが順番に連続されたフレームＦｍ＃０，Ｆｍ＃１・・・によるノンインターレース方式の合成映像信号である。
図示するようにフレームＦｍ＃０はＯ１＃０とＥ２＃０の映像により、フレームＦｍ＃１はＯ１＃１とＥ２＃１の映像により・・・というように構成されている。
タイミング発生部１０８では、伸長部１０７の伸長処理出力に同期して、図４（ａ）のようにフレーム期間の１／２の期間を示す伸長タイミング信号ＴＭを出力する。
そして映像分配部１０９は、伸長タイミング信号ＴＭがフレーム前半を示す期間は、合成映像信号Ｐｍｉｘ３を補間部１１１に出力し、一方伸長タイミング信号ＴＭがフレーム後半を示す期間は、合成映像信号Ｐｍｉｘ３を補間部１１２に出力する。
従って補間部１１１には、合成映像信号Ｐｍｉｘ３における元の撮像映像信号Ｐ１の偶数フィールドのデータＯ１＃０、Ｏ１＃１、Ｏ１＃２・・・が供給される。そして補間部１１１は、例えば偶数フィールドのデータをコピーして奇数フィールドを生成する補間処理を行い、図４（ｃ）のようにインターレース方式の映像信号Ｐ１’を生成する。
また補間部１１２には、合成映像信号Ｐｍｉｘ３における元の撮像映像信号Ｐ２の奇数フィールドのデータＥ１＃０、Ｅ１＃１、Ｅ１＃２・・・が供給される。そして補間部１１２は、例えば奇数フィールドのデータをコピーして偶数フィールドを生成する補間処理を行い、図３（ｄ）のようにインターレース方式の映像信号Ｐ２’を生成する。
なお、補間部１１１，１１２での補間処理は、フィールドデータのコピーによる補間だけでなく、他の補間処理、例えば前後フィールドの相関や動き予測等を用いた補間処理を行っても良いことはいうまでもない。
【００２９】
このようにして、記録メディア９０から再生された圧縮合成映像信号Ｐｍｉｘ２は、最終的に撮像映像信号Ｐ１に相当する映像信号Ｐ１’、及び撮像映像信号Ｐ２に相当する映像信号Ｐ２’とされ、それぞれ所定の表示部１２１，１２２で表示させることができる。
【００３０】
ところで、撮像映像信号Ｐ１，Ｐ２を合成及び圧縮して記録メディア９０に記録するほかに、送信出力することも考えられる。
その場合、送信部１１５が設けられ、圧縮部１０５で得られた圧縮合成映像信号Ｐｍｉｘ１が送信部１１５に供給されるようにする。
送信部１１５は、圧縮合成映像信号Ｐｍｉｘ１について所定の伝送フォーマットのエンコードを行い、有線又は無線の伝送路により他の機器に送信する。
【００３１】
また、上記送信部１１５により圧縮合成映像信号Ｐｍｉｘ１が送信されてきた機器においては、受信部１１６が設けられる。
当該受信機器側では、受信部１１６で受信した圧縮合成映像信号Ｐｍｉｘ２（＝Ｐｍｉｘ１）を伸長部１０７に供給する。そして受信機器側も、伸長部１０７、タイミング発生部１０８、映像分配部１０９、補間部１１１，１１２を備えていることで、上記同様に映像信号Ｐ１’，Ｐ２’を得ることができ、所定の表示部１２１，１２２で表示させることができる。
なお、送信部１１５と受信部１１６の間の伝送路としては多様に考えられる。例えば公衆回線、専用回線、衛星通信、ＬＡＮ、インターネット等のネットワーク、無線通信、赤外線通信、光通信、光ファイバ網、近距離無線通信、放送通信などである。
【００３２】
本発明の実施の形態は以上のような基本構成を備える。
そしてこのような構成により、２系統の撮像映像信号Ｐ１，Ｐ２に対する処理系として、１つの圧縮部１０５で対応でき、また記録再生部では１系統の圧縮合成映像信号の記録及び再生を行うものであればよい。つまり通常の記録再生処理でよい。送信部１１５、受信部１１６も同様に、２系統の映像信号の通信を通常の１系統の映像信号の通信処理により実現できる。
また、記録メディア９０への記録については２系統分のデータ量が１系統分となるため、記録メディア９０の容量を節約でき、長時間の撮像にも好適である。さらにこのことは通信に関してもデータ量の削減を実現することになり、通信速度の向上、あるいは低レートの伝送路での通信の可能性等をもたらす。
【００３３】
また再生又は受信した圧縮合成映像信号Ｐｍｉｘ２については、１つの伸長部１０７で圧縮を解くことができる。
さらに、選択部１０３はフィールドタイミングの切換を行うのみでよく、また映像分配部１０９は、上記フィールドタイミングに相当する１／２フレームタイミングでの切換を行うのみであるため、非常に簡易な回路構成で実現できる。
また、合成部１０４での合成処理としては、単に選択部１０３から出力される各フィールドを順に取り込んでいくだけで、そのままノンインターレース方式の１フレームデータとすることができるため、例えばラスタブロック変換などの処理が不要であり、処理回路は簡易化できる。
これらのことから、２系統の同時の撮像映像信号Ｐ１，Ｐ２を処理する機器として、構成を簡略化でき、コストダウンや小型化に好適となる。
【００３４】
また、ノンインターレース方式の合成映像信号Ｐｍｉｘ０を圧縮部１０５で圧縮する際には、フレーム内相関やフレーム間相関を利用した圧縮処理が可能となる。
合成映像信号Ｐｍｉｘ０は、図３に示したように、例えば上半分（フレーム前半）と下半分（フレーム後半）として、撮像映像信号Ｐ１，Ｐ２が合成されたものである。
フレーム内相関とは、例えば図５（ａ）に一例を示すように、フレーム内の所定数のピクセル（例えば斜線部の８×８ピクセル等）において映像の相関性をさし、既に公知の通り、これを利用することで効率的且つ高品位な圧縮を行うことができる。本例の合成映像信号Ｐｍｉｘ０の場合、上半分は撮像映像信号Ｐ１、下半分は撮像映像信号Ｐ２による映像データであるため、例えば図のような８×８ピクセルでは映像データの相関性が維持されている。他の８×８ピクセルも同様である。このためフレーム内相関を利用した圧縮処理が可能となる。
またフレーム間相関とは、例えば図５（ｂ）に一例を示すように、或るフレームとその前後のフレームにおいて対応する画素（又は画素ブロック）の相関性をさし、これも公知の通り、これを利用することで効率的且つ高品位な圧縮を行うことができる。本例の合成映像信号Ｐｍｉｘ０の場合、全てのフレームにおいて上半分は撮像映像信号Ｐ１、下半分は撮像映像信号Ｐ２による映像データであるため、フレーム間の対応画素の映像データの相関性が維持されており、従ってフレーム間相関を利用した圧縮処理も可能となる。
このようにフレーム内相関、フレーム間相関を利用した圧縮処理が可能であるため、圧縮効率が高まると共に高品位な圧縮処理が可能となる。換言すれば、複数の映像信号を合成した映像信号に対する圧縮処理でありながら、単独の映像信号に対する圧縮処理と同等の圧縮が可能となる。
【００３５】
さらに、合成映像信号Ｐｍｉｘ０において、元の撮像映像信号毎に異なる圧縮レートでの圧縮処理が可能となる。
即ち合成映像信号Ｐｍｉｘ０においては、元の撮像映像信号Ｐ１，Ｐ２の情報はフレーム領域内で上下（前半と後半）に分かれているため、１／２フレーム毎にデータを抽出して圧縮を行うことで、元の撮像映像信号Ｐ１，Ｐ２について独自に圧縮できる。そしてこのことは、元の各撮像映像信号Ｐ１，Ｐ２の映像データに対して異なった圧縮率で圧縮処理を行うこともできる。
そして異なる圧縮率で圧縮処理可能なことは、圧縮率を異なるようにすることで各映像信号の重要度に合わせた映像を得ることができるようにもなり、多様且つ有効な処理が実行できる。
なお、圧縮率を各種条件で変化させる動作及びそれによる効果については、後述する。
【００３６】
ところで、図１において一点鎖線で示すように、伸長部１０７で伸長した合成映像信号Ｐｍｉｘ３を、そのまま表示部１２１等で表示出力するようにしてもよい。なお、この場合、合成映像信号Ｐｍｉｘ３はノンインターレース方式の映像信号であるため、表示部１２１はノンインターレース方式に対応できるモニタ装置であるとする。
そして、合成映像信号Ｐｍｉｘ３は、図３に示した合成映像信号Ｐｍｉｘ０と同様の信号、即ち画面上部と下部で２系統の映像を表示する映像信号であるため、表示部１２１等において、図３に示したような垂直方向に画面分割された映像が表示されることになる。
これは、２系統の映像を同時に見ることができるものとなり、映像の検査、所望の映像のサーチ、１つのモニタによる複数映像の同時監視などの各種用途に好適なものとなる。
【００３７】
以上のような図１の構成に沿っていえば、本発明の映像信号処理装置の実施の形態としては、少なくとも選択部１０３、合成部１０４、圧縮部１０５を備えればよい。またさらに記録再生部１０６、もしくは送信部１１５を備えてもよい。
また本発明の映像信号処理装置の実施の形態としては、少なくとも伸長部１０７、タイミング発生部１０８、映像分配部１０９を備えればよい。また、さらに記録再生部１０６、もしくは受信部１１６を備えてもよい。さらには、補間部１１１，１１２を備えてもよい。
本発明の撮像装置の実施の形態としては、第１、第２カメラ部１０１、１０２、同期信号発生部１００、選択部１０３、合成部１０４、圧縮部１０５を備えればよい。またさらに記録再生部１０６、もしくは送信部１１５を備えてもよい。
本発明の再生装置の実施の形態としては、記録再生部１０６、伸長部１０７、タイミング発生部１０８、映像分配部１０９を備えればよい。さらには、補間部１１１，１１２を備えてもよい。
本発明の受信装置の実施の形態としては、受信部１１６、伸長部１０７、タイミング発生部１０８、映像分配部１０９を備えればよい。さらには、補間部１１１，１１２を備えてもよい。
本発明の映像信号処理方法としては、図１及び図２、図３で説明した処理が行われればよい。
また本発明の映像信号処理方法としては、図１及び図４で説明した処理が行われればよい。
【００３８】
２．ビデオカメラの態様及びシステム構成
続いて、より具体的な実施の形態の例を説明する。
図６に本実施の形態のビデオカメラの外観例を示す。
このビデオカメラは、カメラユニット１とコントロールユニット１０から構成される。カメラユニット１とコントロールユニット１０はケーブル３１により信号伝送可能に接続される。
【００３９】
カメラユニット１は、例えば図７に示すように使用者の肩に装着される。一方、コントロールユニット１０は使用者の腰、或いは衣服のポケット等に装着又は保持される形態とし、即ち使用者が手を使用せずに、携帯しながらの撮像が可能な状態とされる。
カメラユニット１を肩に装着する手法は多様に考えられ、ここでは詳述しないが、使用者の衣服（警備用のジャケット等）に、カメラユニット１の台座部６を保持する機構が形成されたり、或いは装着用ベルトなどによって肩部分に装着されるようにすればよい。
なお、カメラユニット１が例えば使用者がかぶるヘルメットの上部や側面に固定されたり、或いは胸部、腕部に装着されるなども考えられるが、肩部分は、使用者が歩行している場合でも最も揺れが少ない部分であり、従って撮像を行うカメラユニット１を装着する部位としては最適である。
【００４０】
図１に示すように、カメラユニット１には、前方カメラ部２ａと後方カメラ部２ｂの２つのカメラ部が設けられる。また前後カメラ部２ａ，２ｂに対応して前方マイクロフォン３ａ、後方マイクロフォン３ｂも設けられる。
前方カメラ部２ａは、図７の装着状態において使用者の前方の光景を撮像するものとされ、後方カメラ部２ｂは使用者の後方の光景を撮像するものとされる。前方カメラ部２ａと後方カメラ部２ｂは、それぞれ広角レンズを搭載しており、その撮像視野角は図８に示すように比較的広角とされ、前方カメラ部２ａと後方カメラ部２ｂを合わせることで、使用者の周囲をほぼ全周にわたって撮像できるようにしている。
前方マイクロフォン３ａは、図７の状態で使用者の前方方向に高い指向性を有するマイクロフォンとされ、前方カメラ部２ａで撮像する光景に対応する音声を集音する。
後方マイクロフォン３ｂは、図７の状態で使用者の後方に高い指向性を有するマイクロフォンとされ、後方カメラ部２ｂで撮像する光景に対応する音声を集音する。
【００４１】
なお、前方カメラ部２ａと後方カメラ部２ｂの各撮像範囲としての前方視野角及び後方視野角をどの程度とするかは、採用するレンズ系の設計などにより各種設定できることは言うまでもない。当該ビデオカメラの使用が想定される状況に応じて視野角が設定されればよい。もちろん、前方視野角と後方視野角を同角度とする必要もなく、また機種によっては、視野角をあえて狭く設計することも考えられる。
前方マイクロフォン３ａ、後方マイクロフォン３ｂの指向性についても同様であり、用途に応じて各種の設計が考えられる。例えば無指向性のマイクロフォンを１つ配置するような構成も考えられる。
【００４２】
カメラユニット１の上部には発光部４が形成される。例えばＬＥＤ素子などにより発光を行う。この発光部４は、前後カメラ部２ａ、２ｂにより撮像が行われている際に発光を行う。発光態様は連続的な発光でも点滅動作でも良い。
発光部４が発光することにより、周囲の人に、当該ビデオカメラが撮像動作を行っていることを明示する。これは、当該ビデオカメラが盗撮目的で使用されているものではないことを周囲に知らしめるものとなる。また、例えば警備員や警察官が使用している際においては、発光部４により撮像実行中であることが提示されることで、防犯効果を高めるものともなる。
【００４３】
コントロールユニット１０は、カメラユニット１で撮像された映像信号（及び音声信号）をメモリカード３０に記録する記録機能や、アンテナ１２から後述する管理局に送信出力する機能、さらに表示・操作などのユーザーインターフェース機能等を備える。
【００４４】
例えばコントロールユニット１０の前面には、液晶パネル等による表示部１１が設けられる。
また所要位置に通信用のアンテナ１２が形成される。
またメモリカード３０を装着するカードスロット１３が形成される。
さらにスピーカ部１４やヘッドホン端子１９として電子音や音声を出力する部位が形成される。
また例えばＵＳＢ、ＩＥＥＥ１３９４など、所定の伝送規格により情報機器との間でデータ伝送を行うためのケーブル接続端子１５が設けられる。
その他、図示していないが、映像信号や音声信号の入出力端子（デジタル入出力、ライン入出力等）なども設けられる。
【００４５】
使用者が操作を行うための操作子としては、電源スイッチ１６，各種操作キー１８，エマージェンシースイッチ１７などが形成される。
操作キー１８は、例えばカーソルキー、エンターキー、キャンセルキーなどとして、表示部１１での表示上でカーソル操作を行って操作入力を行うものとして、多様な操作入力が可能なものとしてもよいし、撮像開始、停止、モード設定その他の基本操作のための専用キーが設けられても良い。
また電源スイッチ１６や操作キー１８については、図示するようにスライドスイッチ形態や押圧スイッチとする以外に（或いはこれらと併用して）、例えばジョグダイヤル、トラックボールなどの操作子を採用しても良い。
【００４６】
エマージェンシースイッチ１７は、特に緊急時に使用者が操作することを想定したもので、操作余裕のない状態などにおいて視認しなくても確実に操作できるように大型の操作ボタンを採用することが好適である。
また、平常時に誤って操作することがないように、或る程度の押圧力を必要とするようにしたり、図示するようにボタン表面をコントロールユニット１０の表面より一段低く設定するなどの工夫がされると良い。
もちろん押圧ボタン形態でなく、使用者がコントロールユニット１０を叩くことを検出するようにしたり、使用者の声を認識してエマージェンシー操作と認識するなど、多様な形態が考えられる。
【００４７】
本例のビデオカメラの構成については、後に図１０で述べるが、例えばこのようにカメラユニット１とコントロールユニット１０によって形成される本例のビデオカメラを図７のように使用者が装着することで、ハンズフリーかつほぼ無意識での撮像が可能となる。従って、何らかの作業をしながらその作業光景を撮像したり、イベント等を楽しみながら撮像したり、警備員や警察官のパトロール中に撮像を行うことに好適となる。
【００４８】
本例のビデオカメラは、撮像した映像データをメモリカード３０に記録する機能と、送信出力する機能を有するが、これらの機能を例えば警備・警察用途を想定した場合により有効化するシステム例を図９に示す。
【００４９】
ビデオカメラのコントロールユニット１０は、例えば公衆回線３２を介して管理局４０とデータ通信が可能とされる。このために例えばコントロールユニット１０には携帯電話或いはＰＨＳ等の通信機能が備えられる。なお、公衆回線３２ではなく、専用回線によって通信可能とされても良い。
【００５０】
管理局４０は、例えば本例のビデオカメラを装着してパトロールを行う一人又は複数人の警察官・警備員を指揮・管理する組織等とする。
管理局には、コントローラ４１，モニタ部４２，操作部４３，ストレージ部４４、リモートアクセスサーバ４５，メモリカードスロット４６等が備えられる。
【００５１】
コントローラ４１は管理局４０内のシステムを制御する。
モニタ部４２は、例えばディスプレイやスピーカ等で構成され、オペレータに映像や音声を出力する。
操作部４３はキーボード等の操作、マイクロホン、カメラ等を備え、オペレータが各種操作入力や情報入力を行うことができるようにされている。
ストレージ部４４はＨＤＤ（ハードディスクドライブ）や光ディスクドライブ、磁気テープドライブなどとされ、記録媒体に対して情報の記録再生を行う。
リモートアクセスサーバ４５は、公衆回線３２を介した管理局４０とビデオカメラのコントロールユニット１０との間の通信動作を行う。
メモリカードスロット４６は、ビデオカメラのコントロールユニット１０において記録媒体とされているメモリカード３０に対するスロットであり、コントローラ４１によってメモリカード３０にアクセス可能とされる。
【００５２】
警備員等が所持するコントロールユニット１０には、カメラユニット１で撮像した映像データ（及び音声データ）を送信する機能が備えられるが、その映像データは公衆回線３２を介して管理局４０に送信される。
管理局４０では、コントローラ４１の制御に基づいて、当該送信されてきた映像データをストレージ部４４に蓄積させたり、モニタ部４２に映像・音声として出力させることができる。
即ち管理局４０においては、警備員等がビデオカメラを所持してパトロールを行うことで、管理局側のオペレータも警備員等がパトロールしている場所の映像や音声を確認でき、また、パトロール中の映像・音声をデータとして蓄積することで、後の捜査、分析、証拠資料などとして利用することができる。
さらに警備員等が使用しているビデオカメラにより撮像されている映像（及び音声）が、このように管理局４０によってもモニタリングされていることが一般に周知されるようにすれば、犯罪抑制効果や警備員等の安全性向上効果も、より増大する。
【００５３】
警備員等がビデオカメラで撮像した映像（及び音声）は、コントロールユニット１０に装填されているメモリカード３０に記録することもできるが、警備員等はパトロール後においてメモリカード３０を管理局４０に受け渡すことで、パトロール報告資料ともなる。管理局４０では、警備員等から受け渡されたメモリカード３０をメモリカードスロット４６に装填し、コントローラ４１の制御によって、メモリカード３０に記録された映像や音声を読み出すことで、当該映像・音声をモニタ部４２に出力させたり、ストレージ部４４に蓄積することができる。
【００５４】
管理局４０からビデオカメラ（コントロールユニット１０）に対しては各種指示情報やデータを送信することができる。
後述するが、操作部４３によるオペレータの操作や、コントローラ４１の動作プログラム等に基づいて、撮像時の圧縮レート切換を指示する指示情報をコントロールユニット１０に対して送信できる。
また、警備上の指示を音声データ、画像データ、テキストデータとして送信したり、地図、犯人の写真やモンタージュなどとしての画像や音声をパトロール用の資料として送信できる。
さらに後述するが、ターゲット音声、ターゲット画像などとしての圧縮レート変更条件のデータをビデオカメラのコントロールユニット１０に送信し、セットさせることもできる。
【００５５】
ビデオカメラのコントロールユニット１０では、オペレータの指示や資料としての音声をスピーカ１４やヘッドホン端子１９から出力して使用者に出力する。また指示や資料として送信されてきた画像データやテキストデータを表示部１１に表示させて使用者に提示する。
【００５６】
なお、ここではビデオカメラと管理局４０の間の通信を述べたが、例えば複数の警備員等が直接的にデータ通信を行うようにしても良い。
例えばコントロールユニット１０が備える通信機能を携帯電話やＰＨＳの通信機能とすることで、一般公衆回線を介して通信が可能となる。またその際に、管理局４０が、いわゆる中継局として機能しても良い。
【００５７】
また、図９のシステムを警備・警察用途として述べたが、一般ユーザーの利用するシステムとしても適用できる。
例えば管理局４０に相当する機能をユーザーの自宅のパーソナルコンピュータが備えるようにし、ビデオカメラで撮像した映像・音声を伝送できるようにする。すると、ユーザーが撮像している映像データは自宅のパーソナルコンピュータにおけるＨＤＤ等に保存できることになる。
このようにすれば、例えばユーザーが撮像時にメモリカード３０を持っていなかった場合や、メモリカード容量の余裕のないときなどでも、それを気にしないで撮像できることとなる。
【００５８】
３．ビデオカメラの構成及び動作
図１０にビデオカメラの要部の構成例を示す。
上述したようにカメラユニット１には前方カメラ部２ａ、後方カメラ部２ｂが設けられる。
前方カメラ部２ａによる撮像光はＣＣＤ部５ａによって電気信号に変換され、ゲイン調整、Ａ／Ｄ変換器その他の所定の信号処理を経てインターレース方式の撮像映像信号ＰＦとされる。そして、ケーブル３１によりコントロールユニット１０に供給される。
同様に後方カメラ部２ｂによる撮像光はＣＣＤ部５ｂによって電気信号に変換され、ゲイン調整、Ａ／Ｄ変換器その他の所定の信号処理を経てインターレース方式の撮像映像信号ＰＲとされる。そしてケーブル３１によりコントロールユニット１０に供給される。
コントロールユニット１０側（或いはカメラユニット１側でもよい）には、同期信号発生部５４が設けられ、前方カメラ部２ａ、後方カメラ部２ｂに対して共通の同期信号ＳＹを供給する。
従って前方カメラ部２ａ、後方カメラ部２ｂは同期して撮像処理を行い、同期したインターレース方式の撮像映像信号ＰＦ、ＰＲを出力するものとなる。
【００５９】
前方マイクロフォン３ａ、後方マイクロフォン３ｂによって得られた音声信号もケーブル３１によりコントロールユニット１０に供給される。
またカメラユニット１内には方位センサ７が設けられる。方位センサ７はカメラユニット１の方位を検出する。例えばカメラユニット１が向いている方向（前方カメラ部２ａの撮像方向）が東西南北のいずれの方向かを検出し、その方位検出信号をコントロールユニット１０に供給する。
【００６０】
コントロールユニット１０において、コントローラ５１は全体の動作制御を行う。コントローラ５１はＣＰＵ、ＲＡＭ、ＲＯＭ、フラッシュＲＯＭ等を備えたマイクロコンピュータにより形成される。
【００６１】
ケーブル３１によりカメラユニット１から伝送されてきた前方カメラ部２ａによる撮像映像信号ＰＦ、及び後方カメラ部２ｂによる撮像映像信号ＰＲは、選択部５０の各端子に供給される。
なお、前方マイクロフォン３ａ、後方マイクロフォン３ｂによって得られた音声信号もコントロールユニット１０において撮像映像信号ＰＦ、ＰＲとともに処理されるが、以降の説明では、撮像映像信号ＰＦ、ＰＲの合成について述べ、音声信号については省略する。
撮像映像信号ＰＦ、ＰＲが合成される際には、例えば各音声信号については、それぞれ別チャンネルの音声信号とされればよい。
【００６２】
選択部５０には、同期信号発生部５４からの同期信号ＳＹが供給されており、同期信号ＳＹに基づいて切換を行う。つまり、図１〜図３で説明したように、垂直同期タイミング（フィールドタイミング）で接続端子を切り換えていくことで、例えば撮像映像信号ＰＦの奇数フィールドと、撮像映像信号ＰＲの偶数フィールドを順番に出力する。そしてそれら出力された撮像映像信号ＰＦの奇数フィールドと、撮像映像信号ＰＲの偶数フィールドの信号は、合成部５５においてフレームメモリに取り込まれながら出力される。即ち上述の通り、合成部５５から出力される信号は、ノンインターレース方式の合成映像信号Ｐｍｉｘ０となる。
【００６３】
合成映像信号Ｐｍｉｘ０は、圧縮部５６に供給され、例えばＭＰＥＧ方式、ＪＰＥＧ方式などの圧縮処理が施されて圧縮合成映像信号Ｐｍｉｘ１とされ、記録再生部５２に供給される。
なお、圧縮部５６においては、フレーム間相関、フレーム内相関を利用した圧縮処理を行う。
また圧縮部５６では、フレーム前半データ（撮像映像信号ＰＦのデータ）とフレーム後半データ（撮像映像信号ＰＲのデータ）について、互いに異なった圧縮レートで圧縮処理を行うことができる。各圧縮レートについては、コントローラ５１によって指示される。
【００６４】
記録再生部５２は、図６に示したメモリカードスロット１３に装填されているメモリカード３０に対して記録及び再生を行う。そのアクセス動作はコントローラ５１からのリード／ライト制御信号により制御される。
記録再生部５２はコントローラ５１の制御に基づいて、圧縮部５６から供給された圧縮合成映像信号Ｐｍｉｘ１をメモリカード３０に記録する。
つまり、記録再生部５２は、撮像映像信号ＰＦ，ＰＲが合成され、圧縮された圧縮合成映像信号Ｐｍｉｘ１について、メモリカード３０に対して記録する際の記録フォーマットへのエンコード処理を行い、圧縮合成映像信号Ｐｍｉｘ１を１つの映像コンテンツとして記録するものとなる。
【００６５】
また記録再生部５２は、コントローラ５１の制御に基づいて、メモリカード３０に記録されている映像データを読み出す動作を行う。
メモリカード３０から再生される映像信号Ｐｍｉｘ２は、上記映像信号Ｐｍｉｘ１の状態、即ち圧縮合成映像信号である。
この再生された圧縮合成映像信号Ｐｍｉｘ２は、伸長部５７に供給される。伸長部５７は、上記圧縮部５６での圧縮処理に対する伸長処理を行い、圧縮の解除された映像信号、即ち上記の合成映像信号Ｐｍｉｘ０と同様の合成映像信号Ｐｍｉｘ３を出力し、映像分配部５９に供給する。
また伸長部５７は、伸長処理タイミングをタイミング発生部５８に伝える。タイミング発生部５８では、伸長部５７が出力した映像信号のフレーム期間の１／２（＝撮像映像信号ＰＦ、ＰＲのフィールド期間）に相当する伸長タイミング信号ＴＭを発生させ、映像分配部５９に供給する。
【００６６】
映像分配部５９は、伸長タイミング信号ＴＭに基づいて出力切換を行うことで、合成映像信号Ｐｍｉｘ３を個々の映像信号に分離させる。即ちノンインターレース方式の合成映像信号Ｐｍｉｘ３の１／２フレーム期間毎に出力端子を選択していくことで、合成映像信号Ｐｍｉｘ３のフレームの前半の映像信号、つまり元の撮像映像信号ＰＦの奇数フィールドの映像信号を補間部１１１側に出力し、またフレームの後半の映像信号、つまり元の撮像映像信号ＰＲの偶数フィールドの映像信号を補間部１１２側に出力する。
奇数フィールドが供給される補間部６０は、その供給される映像信号には偶数フィールドのデータが存在しないため、補間処理によりこれを生成する。そして補間処理した映像信号ＰＦ’、即ち撮像映像信号ＰＦに相当するインターレース方式の再生映像信号を出力する。
偶数フィールドが供給される補間部６１は、その供給される映像信号には奇数フィールドのデータが存在しないため、補間処理によりこれを生成する。そして補間処理した映像信号ＰＲ’、即ち撮像映像信号ＰＲに相当するインターレース方式の再生映像信号を出力する。
この映像分配部５９，補間部６０，６１の処理は、上記図１，図４で説明したとおりである。
【００６７】
このようにしてメモリカード３０から再生された映像信号ＰＦ’、ＰＲ’は、表示部１１で表示させることができる。
コントローラ５１は、例えば操作部１８によるユーザーの操作に応じて、表示部１１への再生映像表示を行う。
【００６８】
この場合、１つの表示部１１に対して、同時的に２系統の映像信号ＰＦ’、ＰＲ’が供給されるが、その表示態様は各種考えられる。
例えば、ユーザーの操作に応じて選択的に一方を表示させても良い。つまりユーザーが任意に前方映像、後方映像を選択して表示させるものである。もちろん再生中にユーザーが前後切換操作を行えば、表示を他方の映像信号による表示に切り換えればよい。
また、表示部１１の表示領域を２つに分割し、いわゆる画面分割して２つの映像を同時に表示させるようにしてもよい。また画面分割の態様としては、１：１の分割だけでなく、いわゆるピクチャーインピクチャーと呼ばれる親子画面表示を行うようにしてもよい。
さらに、コントロールユニット１０に２つの表示部を形成するようにすれば、それぞれの表示部で前方映像（映像信号ＰＦ’）と後方映像（映像信号ＰＲ’）を表示させればよい。
なお、表示部１１がノンインターレース方式の映像信号に対応する場合、伸長部５７から出力される合成映像信号Ｐｍｉｘ３をそのまま表示部１１に供給して表示しても良い。この場合、図３に示したように垂直方向に分割された前方映像と後方映像が１画面内で表示されることになる。
【００６９】
なお、ここでは表示部１１に再生映像を表示させる場合について述べたが、もちろん表示部１１は撮像中のモニタ表示部としても使用できる。
モニタ表示を行うための構成については示していないが、その場合は、前方カメラ部２ａによる撮像映像信号ＰＦと、後方カメラ部２ｂによる撮像映像信号ＰＲが、直接表示部１１に供給される構成を採ればよい。
また、表示部１１がノンインターレース方式の映像信号に対応する場合、合成部５５から得られる合成映像信号Ｐｍｉｘ０を表示部１１に供給して、図３に示したように垂直方向に分割された前方映像と後方映像を１画面内でモニタリングできるようにしてもよい。
【００７０】
また、メモリカード３０から再生され、補間部６０，６１から出力される映像信号ＰＦ’、ＰＲ’は、上述した外部インターフェース、例えばＵＳＢ、ＩＥＥＥ１３９４など、所定の伝送規格により情報機器との間でデータ伝送を行うためのケーブル接続端子１５や、映像信号の出力端子（デジタル出力、ライン出力等）などから外部機器に出力することもできる。
この場合、外部の表示装置によって再生された各映像（前方映像と後方映像）を表示させることができる。
さらにノンインターレース方式のモニタ装置等に対して伸長部５７から出力される合成映像信号Ｐｍｉｘ３を出力してもよい。
【００７１】
また上述のように本例のビデオカメラは通信機能を備え、例えば図９で説明したように管理局４０（或いはユーザの自宅端末など）に対してデータ送信可能とされる。
このためコントロールユニット１０には通信部５３が設けられる。通信部５３はコントローラ５１の制御に基づいて、送信のためのエンコードや送信用の変調処理、高周波変調・増幅などの処理を行って、アンテナ１２からデータ送信を行う。この送信データは例えば管理局４０によって受信される。
また管理局等からの送信データの受信処理、デコード処理もおこない、受信データをコントローラ５１等に供給する。
【００７２】
この通信部５３に対しては、撮像時において、例えば圧縮部５６からの圧縮合成映像信号Ｐｍｉｘ１が供給される。またメモリカード３０の再生時には、通信部５３に対して、記録再生部５２で再生された圧縮合成映像信号Ｐｍｉｘ２が供給される。
通信部５３は、この圧縮合成映像信号Ｐｍｉｘ１（Ｐｍｉｘ２）について送信処理を行い、管理局４０等に送信する。
つまり、２系統の撮像映像信号を合成し圧縮した状態の映像データを送信することになる。
【００７３】
この場合、受信側となる管理局４０等では、例えばリモートアクセスサーバ４５において図１で説明した受信側の構成を備えていればよい。
例えばリモートアクセスサーバ４５には、図１の受信部１１６，伸長部１０７、タイミング発生部１０８、映像分配部１０９、補間部１１１，１１２を備えるようにする。
すると、リモートアクセスサーバ４５は、受信した圧縮合成映像信号Ｐｍｉｘ１（Ｐｍｉｘ２）について、図４で説明した処理を行うことで、２系統の映像信号ＰＦ’，ＰＲ’を得ることができる。
この映像信号ＰＦ’，ＰＲ’をモニタ４２で表示させることで、管理局４０等においてビデオカメラで撮像された前方映像及び後方映像を見ることができる。もちろん、前方映像及び後方映像をそれぞれ別の映像コンテンツとしてストレージ部４４において記録媒体に記録することもできる。
【００７４】
また、受信側となる管理局４０等では、ストレージ部４４において、図１で説明した再生側の構成を備えていても良い。
即ち、ストレージ部４４の再生系において、図１の伸長部１０７、タイミング発生部１０８、映像分配部１０９、補間部１１１，１１２を備えるようにする。
その場合、リモートアクセスサーバ４５で受信された圧縮合成映像信号Ｐｍｉｘ１（Ｐｍｉｘ２）は、そのままストレージ部４４において記録媒体に１つの映像コンテンツとして記録するようにする。そして当該映像コンテンツの再生時に、伸長部１０７、タイミング発生部１０８、映像分配部１０９、補間部１１１，１１２により図４で説明した処理を行うことで、２系統の映像信号ＰＦ’，ＰＲ’を得ることができる。
この映像信号ＰＦ’，ＰＲ’をモニタ４２で表示させることで、管理局４０等においてビデオカメラで撮像された前方映像及び後方映像を見ることができる。また、ストレージ４４において再生時に２系統に分離した前方映像及び後方映像をそれぞれ別の映像コンテンツとして記録媒体に再記録することもできる。
【００７５】
また、図９の説明の際には、ビデオカメラにおいて映像データを記録したメモリカード３０を管理局側に受け渡す場合も述べた。図１０の説明からわかるようにメモリカード３０には圧縮合成映像信号Ｐｍｉｘ１が記録されている。
従ってその場合、管理局４０のメモリカードスロット４６の再生処理系において、図１の再生系、即ち伸長部１０７、タイミング発生部１０８、映像分配部１０９、補間部１１１，１１２を設け、図３で説明した処理を行うようにすることで、メモリカード３０を再生した際に２系統の映像信号ＰＦ’，ＰＲ’を得ることができる。これによって、映像信号ＰＦ’，ＰＲ’をモニタ４２で表示させることができ、管理局４０等においてビデオカメラで撮像された前方映像及び後方映像を見ることができる。また、ストレージ部４４において前方映像及び後方映像をそれぞれ別の映像コンテンツとして記録媒体に再記録することもできる。
【００７６】
なお、図８の構成のビデオカメラにおいて、例えば補間部６０，６１から出力される映像信号ＰＦ’又はＰＲ’を通信部５３に供給し、管理局４０等に送信することも考えられる。この場合、２系統の映像信号の送信であるため、受信側の機器は通常のものでよい。
また、映像合成部５５から出力され圧縮処理される前の合成映像信号Ｐｍｉｘ０や、伸長部５７から出力される伸長処理後の合成映像信号Ｐｍｉｘ３を、通信部５３に供給して送信することも考えられる。
合成映像信号Ｐｍｉｘ０、Ｐｍｉｘ３を送信した場合、受信側の管理局４０等では上記のような受信系、再生系が備えられて、映像信号ＰＦ’，ＰＲ’を得るようにするものでも良いが、受信した合成映像信号Ｐｍｉｘ０、Ｐｍｉｘ３をノンインターレース方式のモニタ装置でそのまま表示させれば、図３に示したように垂直方向に分割された前方映像と後方映像を１画面内でモニタリングできる。
【００７７】
さらに、通信部５３において、同様の構成の他のビデオカメラや管理局４０等から送信されてきた圧縮合成映像信号Ｐｍｉｘ１（Ｐｍｉｘ２）が受信された場合は、その受信した圧縮合成映像信号Ｐｍｉｘ１（Ｐｍｉｘ２）を記録再生部５２に供給してメモリカード３０に１つの映像コンテンツとして記録することができる。また、受信した圧縮合成映像信号Ｐｍｉｘ１（Ｐｍｉｘ２）を伸長部５７に供給して伸長処理させ、さらに映像分配部５９，補間部６０，６１の処理で２系統の映像信号ＰＦ’，ＰＲ’を生成することも可能である。
【００７８】
ここまでの構成及び動作によれば、上記図１〜図５の説明の際に述べた効果、即ち装置構成の簡略化、コストダウン、メモリカード３０への記録容量の節約による長時間撮像の対応、通信データ量の削減、効率的な圧縮処理、等の効果が得られることが理解される。
また本例の場合、上述したように管理局４０等において図１の再生系又は受信系の構成を備えることで、図６のビデオカメラによる圧縮合成撮像映像をより有効に利用できる。
【００７９】
ところで、図１０に示すように、ビデオカメラには、さらに他の構成要素や機能を備える。
まず、コントローラ５１は、撮像又は再生した映像・音声データ以外に、管理局４０に対する通知情報を送信できる。例えばエマージェンシースイッチ１７が操作された際には、緊急発生通知、現在位置情報、ＩＤ等の通知情報を通信部５３に供給し、これらの通知情報を管理局４０に送信させる。
なお、現在位置情報とは、ＧＰＳデコーダ６５によって得られる位置情報である。またＩＤとは、当該ビデオカメラに固有に付与されたＩＤであり、コントローラ５１が内部のフラッシュＲＯＭ等に記憶している情報である。
【００８０】
管理局４０から送信されてくる指示情報や各種データは、アンテナ１２によって受信され通信部５３で高周波復調、増幅、デコード等が行われ、コントローラ５１又は記録再生部５２に供給される。
コントローラ５１は、管理局４０からの指示情報が受信されることに応じて、その指示情報に応じた制御を行う。
また、管理局４０から画像データ、音声データ、テキストデータ等が送信されてきた場合は、受信されたそれらの情報を、表示部１１やスピーカ１４等により使用者に対して出力したり、記録再生部５２においてメモリカード３０に記録させることができる。
【００８１】
なお、これらの通信機能によるデータ送信先、データ受信元は管理局４０ではない場合も考えられる。例えば他の警備員等が所持する本例のビデオカメラのコントロールユニット１０との間で通信を行うようにすることも当然可能である。
【００８２】
操作キー１８は、図６で説明したようにコントロールユニット１０の筐体上に設けられる操作子である。例えばコントローラ５１は表示部１１に各種操作メニューを表示させ、使用者は操作キー１８によるカーソル操作やエンター操作により、メニュー上で操作入力を行う。コントローラ５１は操作キー１８を用いた使用者の操作に応じて所定の制御を行う。例えば撮像動作の開始／停止、動作モード、記録・再生、通信、レート制御などのための各種制御を使用者の操作に応じて実行する。もちろん操作キー１８は表示部１１での操作メニューに対応する操作子でなくてもよく、例えば撮像開始キー、停止キー、モードキーなどとして用意されてもよい。
【００８３】
コントロールユニット１０にはＧＰＳアンテナ６６及びＧＰＳデコーダ６５が搭載される。ＧＰＳアンテナ６６は、ＧＰＳ（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｎｇ  Ｓｙｓｔｅｍ）衛星からの信号を受信し、ＧＰＳデコーダは当該受信信号をデコードして、現在位置情報としての緯度、経度を出力する。
コントローラ５１はＧＰＳデコーダからの緯度、経度のデータにより現在位置を把握でき、現在位置が所定の地区内であるか否かの判断を行ったり、現在位置情報を送信出力することができる。
【００８４】
さらに上述したようにカメラユニット１内には方位センサ７が設けられており、コントローラ５１は方位情報が入力される。
これによってコントローラ５１は、現在の前方カメラ部２ａの撮像方向、後方カメラ部２ｂの撮像方向の方角を検出することができる。
また上述のようにエマージェンシースイッチ１７が設けられるが、エマージェンシースイッチ１７が操作された場合は、コントローラ５１は緊急処理を行う。例えば管理局４０等に対して緊急通知、ＩＤ通知、ＧＰＳデコーダ６５から得られた現在位置情報の通知のための送信制御を行う。
【００８５】
コントロールユニット１０には衝撃センサ６７が搭載される。衝撃センサ６７は使用者又はコントロールユニット１０自体に外部から加えられた衝撃が所定以上であった場合にコントローラ５１に検出信号を出力する。
衝撃検出時も、緊急事態として、コントローラ５１は例えば管理局４０等に対して緊急通知、ＩＤ通知、ＧＰＳデコーダ６５から得られた現在位置情報の通知のための送信制御を行うようにしてもよい。
【００８６】
表示部１１は、コントローラ５１の制御により各種表示動作を行う。即ち操作メニュー表示や、動作状態の表示、管理局４０等から受信された画像、テキスト等の表示、上述したように記録再生部５２においてメモリカード３０から再生された映像の表示や撮像時のモニタ表示が行われる。
【００８７】
スピーカ部１４（及びヘッドホン端子１９）からは、コントローラ５１の制御によって各種音声が出力される。
例えば管理局４０等から受信された音声データに基づく音声出力、アラーム音の出力、データ受信を使用者に伝える着信音出力などが行われる。また、例えばメモリカード３０から読み出された映像データに付随する音声データや、通信部５３で受信した音声データの出力が行われる。さらに、前方マイクロフォン３ａ、後方マイクロフォン３ｂで集音された音声信号が供給されて出力されることで、撮像時の音声モニタ出力も可能である。
【００８８】
ケーブル接続端子１５においては、外部情報機器との間でのケーブル接続により、所定のインターフェース規格によるデータ伝送が可能とされる。例えばコントローラ５１の動作プログラムのバージョンアップのためのアップロードや、メモリカード３０から再生されるデータの外部機器への伝送、さらには後述するターゲット音声やターゲット画像としてのデータのデータロードなども可能である。
【００８９】
コントロールユニット１０には画像解析部６３が設けられる。
画像解析部６３には、前方カメラ部２ａ、後方カメラ部２ｂで撮像された撮像映像信号が供給され、供給された各撮像映像信号に対して各種の解析処理を行う。例えば撮像映像信号としての各フレームの比較処理から被写体の動きを検出したり、特定の画像、例えば特定の色、建物、光景、人物がターゲット画像としてコントローラ５１によりセットされることで、そのターゲット画像に一致又は類似する画像が撮像されたか否かを検出するなどの処理を行う。
画像解析部６３の検出情報はコントローラ５１に出力され、コントローラ５１は検出情報に応じてレート制御などの所定の制御を行う。
【００９０】
またコントロールユニット１０には音声検査部６４が設けられる。
音声検査部６４には、前方マイクロフォン３ａ、後方マイクロフォン３ｂで集音された音声信号が供給される。そして供給された音声信号に対して検査処理を行う。
例えば前方マイクロフォン３ａ、後方マイクロフォン３ｂからのそれぞれの音声信号について、音量レベルが所定値以上であるか否かの検査処理を行う。この場合、前方／後方の音量差や遅延状態などから、前方、後方のどちらで大音量が発生したかの検出も行う。
また特定の音声、例えば非常ベル等の警報音、爆発音、事故発生音、車両音、特定の人物の声紋などがターゲット音声としてコントローラ５１によりセットされることで、そのターゲット音声に一致又は類似する音声が入力されたか否かを検出するような処理が行われる。特にこの場合も、前方マイクロフォン３ａ、後方マイクロフォン３ｂからのそれぞれの音声信号について検出されるターゲット音声についての音量差や遅延状態などから、前方、後方のどちらでターゲット音声が発生したかの検出も行う。
これらの検査処理による検出情報はコントローラ５１に供給され、コントローラ５１は検出情報に応じてレート制御などの所定の制御を行う。
【００９１】
４．圧縮レート切換に関する動作
４−１．撮像動作モード
上述したように合成映像信号Ｐｍｉｘ０を圧縮する圧縮部５６では、合成映像信号Ｐｍｉｘ０のフレーム前半データ（撮像映像信号ＰＦのデータ）とフレーム後半データ（撮像映像信号ＰＲのデータ）について、互いに異なった圧縮レートで圧縮処理を行うことができる。そして各圧縮レートについては、コントローラ５１によって可変制御可能とされる。
以下では、前方映像（撮像映像信号ＰＦ）と後方映像（撮像映像信号ＰＲ）に関し、合成映像信号Ｐｍｉｘ０において圧縮レートを変化させる動作について述べる。
【００９２】
本例のビデオカメラでは撮像時の動作モードとして、図１１に示すストレージモード、伝送モード、マルチモードの３つのモード動作が可能とされる。
ストレージモードは、撮像データ（例えば撮像映像信号ＰＦ、ＰＲに基づく圧縮合成映像信号Ｐｍｉｘ１）のメモリカード３０への記録のみを行い、管理局４０への送信は実行しないモードである。
伝送モードは撮像データの管理局４０への送信出力のみを行い、メモリカード３０への記録を実行しないモードである。
マルチモードは、撮像データのメモリカード３０への記録と、管理局４０への送信の両方を実行するモードである。
本例では、基本的にはマルチモードで動作を行い、状況に応じてストレージモードや伝送モードに切り換えることができるものとする。
【００９３】
モードの切換は、使用者が操作キー１８を操作して行うことの他、例えば管理局４０がモード制御の指示情報を送信することでコントローラ５１にモード切換を実行させるようにしてもよい。
なおもちろん、マルチモードのみ、ストレージモードのみ、或いは伝送モードのみが実行可能な機器として本例のビデオカメラを構成することもできる。
或いはマルチモードと伝送モード、マルチモードとストレージモード、ストレージモードと伝送モードという２つのモードの動作が可能な機器としてもよい。
何れのモードの場合でも、本例ではコントローラ５１によって圧縮部５６に対する圧縮レート制御が行われる。
【００９４】
圧縮レート制御とは、圧縮部５６で処理する合成映像信号Ｐｍｉｘ０について、その全体の圧縮レートを可変制御することも可能であるが、特に以下では、合成映像信号Ｐｍｉｘ０における撮像映像信号ＰＦに関するデータ（前方映像としてのフレーム内の前半データ）と、撮像映像信号ＰＲに関するデータ（後方映像としてのフレーム内の後半データ）について、それぞれ個別に圧縮率を切換制御し、圧縮処理させる制御について述べる。
ここでは説明上、圧縮レート切換として、ノーマルレート、前方優先レート、後方優先レートの３つのレート切換が行われるものとする。
【００９５】
ノーマルレートとは、前方カメラ部２ａで撮像される映像データと、後方カメラ部２ｂで撮像される映像データとを、同品質のデータとするレート状態である。
即ちノーマルレートとは、圧縮部５６による、前方カメラ部２ａからの撮像映像信号ＰＦに対するデータ圧縮処理の圧縮レートを、後方カメラ部２ｂからの撮像映像信号ＰＲに対するデータ圧縮処理の圧縮レートと同レートに制御している状態である。これは換言すれば、合成映像信号Ｐｍｉｘ０について、特にフレーム内のデータを区別せずに通常に圧縮する場合である。
従って、マルチモード及びストレージモードの際において、ノーマルレートの状態とされているときは、前方カメラ部２ａで撮像される映像データと、後方カメラ部２ｂで撮像される映像データとが、同品質のデータとしてメモリカード３０に記録されるものとなる。
またマルチモード及び伝送モードの際において、ノーマルレートの状態とされているときは、前方カメラ部２ａで撮像される映像データと、後方カメラ部２ｂで撮像される映像データとが、同品質のデータとして管理局４０等に送信出力されるものとなる。
【００９６】
前方優先レートとは、前方カメラ部２ａで撮像される映像データを、後方カメラ部２ｂで撮像される映像データよりも、高品質のデータとするレート状態である。
即ち前方優先レートとは、圧縮部５６による、前方カメラ部２ａからの撮像映像信号ＰＦに対するデータ圧縮処理の圧縮レートを、後方カメラ部２ｂからの撮像映像信号ＰＲに対するデータ圧縮処理の圧縮レートより低いレートに制御している状態である。つまり合成映像信号Ｐｍｉｘ０について、フレーム内の前半のデータ（画面において上半分となるデータ）と、フレーム内の後半のデータ（画面において下半分となるデータ）とについて別々に圧縮処理し、フレーム内の前半のデータの方が低圧縮率となるようにする場合である。
従って、マルチモード及びストレージモードの際において、前方優先レートの状態とされているときは、前方カメラ部２ａで撮像される映像データの方が、後方カメラ部２ｂで撮像される映像データよりも高品質のデータとしてメモリカード３０に記録される。
またマルチモード及び伝送モードの際において、前方優先レートの状態とされているときは、前方カメラ部２ａで撮像される映像データの方が、後方カメラ部２ｂで撮像される映像データよりも高品質のデータとして管理局４０等に送信出力される。
【００９７】
後方優先レートとは、後方カメラ部２ｂで撮像される映像データを、前方カメラ部２ａで撮像される映像データよりも、高品質のデータとするレート状態である。
即ち後方優先レートとは、圧縮部５６による、前方カメラ部２ａからの撮像映像信号ＰＦに対するデータ圧縮処理の圧縮レートを、後方カメラ部２ｂからの撮像映像信号ＰＲに対するデータ圧縮処理の圧縮レートより高いレートに制御している状態である。つまり合成映像信号Ｐｍｉｘ０について、フレーム内の前半のデータ（画面において上半分となるデータ）と、フレーム内の後半のデータ（画面において下半分となるデータ）とについて別々に圧縮処理し、フレーム内の前半のデータの方が高圧縮率となるようにする場合である。
従って、マルチモード及びストレージモードの際において、後方優先レートの状態とされているときは、後方カメラ部２ｂで撮像される映像データの方が、前方カメラ部２ａで撮像される映像データよりも高品質のデータとしてメモリカード３０に記録される。
またマルチモード及び伝送モードの際において、後方優先レートの状態とされているときは、後方カメラ部２ｂで撮像される映像データの方が、前方カメラ部２ａで撮像される映像データよりも高品質のデータとして管理局４０等に送信出力される。
【００９８】
ノーマルレート、前方優先レート、後方優先レートでの具体的な圧縮レートの切換については多様に考えられる。図１２にレート制御方式の各種態様を示した。
図１２の「ｍ１」〜「ｍ５」は前方優先レートと後方優先レートにおける圧縮レートについての制御態様例を示す。
なお、図示する各態様における「アップ」「ダウン」「変更せず」とは、ノーマルレートでのレートを基準として、「レートを上げる」「レートを下げる」「レートを変更しない」ことを意味している。
また「前方の圧縮レート」とは合成映像信号Ｐｍｉｘ０における撮像映像信号ＰＦのデータに対する圧縮処理レート、「後方の圧縮レート」とは合成映像信号Ｐｍｉｘ０における撮像映像信号ＰＲのデータに対する圧縮処理レートを意味する。
【００９９】
圧縮レートの制御態様例は以下のようになる。
＜ｍ１＞
前方優先レート時は、前方の圧縮レートをダウンさせ、後方の圧縮レートをアップさせる。
後方優先レート時は、前方の圧縮レートをアップさせ、後方の圧縮レートをダウンさせる。
つまり高品質化させたい方のレートダウン（圧縮率低下による高品質化）を行い、他方をレートアップ制御する例である。
＜ｍ２＞
前方優先レート時は、前方の圧縮レートをダウンさせ、後方の圧縮レートは変更しない。
後方優先レート時は、前方の圧縮レートは変更せず、後方の圧縮レートをダウンさせる。
つまり高品質化させたい方のレートダウンのみを制御する例である。
＜ｍ３＞
前方優先レート時は、前方の圧縮レートを変更せず、後方の圧縮レートはアップさせる。
後方優先レート時は、前方の圧縮レートはアップさせ、後方の圧縮レートは変更しない。
つまり他方を低品質化させることで、相対的に一方を高品質化させるようにする例である。
＜ｍ４＞
前方優先レート時は、前方の圧縮レートと、後方の圧縮レートは共にダウンさせるが、前方の圧縮レートの方が低くなるようにする。
後方優先レート時は、前方の圧縮レートと、後方の圧縮レートは共にダウンさせるが、後方の圧縮レートの方が低くなるようにする。
つまり高品質化させたい方についてレートのダウン率を低く（大幅ダウン）するように制御する例である。
＜ｍ５＞
前方優先レート時は、前方の圧縮レートと、後方の圧縮レートは共にアップさせるが、前方の圧縮レートの方が低くなるようにする。
後方優先レート時は、前方の圧縮レートと、後方の圧縮レートは共にアップさせるが、後方の圧縮レートの方が低くなるようにする。
つまり高品質化させたい方についてレートのアップ率を低く（他方を大幅アップ）するように制御する例である。
【０１００】
このように圧縮レート制御としてｍ１〜ｍ５の制御態様が考えられるが、どのレート制御方式にしても、前方と後方のうちで、優先される方の圧縮レートが他方の圧縮レートより低くなるように制御されるものとなる。
【０１０１】
４−２  操作又は指示によるレート切換
上記のようにコントローラ５１は、圧縮部５６に対して圧縮レートを切り換えるレート制御を行なう。
このため、コントローラ５１は、各種のレート変更条件を判別し、そのレート変更条件の検出に応じてレート変更制御を行うものとなる。
以下では、コントローラ５１によるレート変更制御に関する処理としての各例を述べていく。
【０１０２】
まず図１３により、コントローラ５１が使用者の操作、又は管理局４０からの指示によりレート変更制御を行う処理を説明する。
なお、図１３及び後述する図１４，図１５，図１６の処理は、撮像実行時、つまり撮像データがメモリカード３０に記録され、及び／又は、撮像データが送信出力されている動作状態におけるコントローラ５１のレート変更制御に関する処理である。
【０１０３】
図１３において、撮像（記録／送信）が開始される時点では、コントローラ５１はステップＦ１０１として圧縮部５６に対してノーマルレートを指示している状態となる。つまり合成映像信号Ｐｍｉｘ０の前後の映像データ部分について同等のレートに制御している状態である。
【０１０４】
この場合コントローラ５１は、レート変更条件としてステップＦ１０２〜Ｆ１０５の監視処理を行う。
ステップＦ１０２では、使用者が前方優先レートへの切換操作を行ったか否かを監視し、またステップＦ１０３では管理局４０から前方優先レートへ切り換える旨のレート切換指示が受信されたか否かを監視している。
またステップＦ１０４では、使用者が後方優先レートへの切換操作を行ったか否か監視し、またステップＦ１０５では管理局４０から後方優先レートへ切り換える旨のレート切換指示が受信されたか否かを監視している。
これらのレート変更条件が検出されない期間は▲１▼として示すようにステップＦ１０１に戻り、ノーマルレートでの撮像動作を継続する。
【０１０５】
ステップＦ１０２又はＦ１０３で、使用者の切換操作、或いは管理局４０からのレート切換指示として前方優先レートへの移行の操作又は指示を検出すると、コントローラ５１はステップＦ１０６に進み、前方優先レートで圧縮が行われるようにする。即ち、圧縮部５６において、合成映像信号Ｐｍｉｘ０のうちで前方映像データ部分（撮像映像信号ＰＦ部分）の圧縮レートが後方映像データ部分（撮像映像信号ＰＲ部分）の圧縮レートより低くなるように制御する。
これによって前方カメラ部２ａで撮像される映像データが、後方カメラ部２ｂで撮像される映像データよりも高品位な映像データとされて、メモリカード３０への記録、又は管理局４０への送信出力が行われる状態となる。
【０１０６】
前方優先レートで撮像が行われている期間は、コントローラ５１はステップＦ１０７〜Ｆ１１０の監視処理を行う。
ステップＦ１０７では、使用者がノーマルレートへの切換操作を行ったか否かを監視し、またステップＦ１０８では管理局４０からノーマルレートへ切り換える旨のレート切換指示が受信されたか否かを監視している。
またステップＦ１０９では、使用者が後方優先レートへの切換操作を行ったか否か監視し、またステップＦ１１０では管理局４０から後方優先レートへ切り換える旨のレート切換指示が受信されたか否かを監視している。
これらのレート変更条件が検出されない期間は▲２▼として示すようにステップＦ１０６に戻り、前方優先レートでの撮像動作を継続する。
【０１０７】
ノーマルレート状態において、上記ステップＦ１０４又はＦ１０５で、使用者の切換操作、或いは管理局４０からのレート切換指示として後方優先レートへの移行の操作又は指示を検出すると、コントローラ５１はステップＦ１１１に進み、後方優先レートで圧縮が行われるようにする。即ち、圧縮部５６において、合成映像信号Ｐｍｉｘ０のうちで後方映像データ部分（撮像映像信号ＰＲ部分）の圧縮レートが前方映像データ部分（撮像映像信号ＰＦ部分）の圧縮レートより低くなるように制御する。
これによって後方カメラ部２ｂで撮像される映像データが、前方カメラ部２ａで撮像される映像データよりも高品位な映像データとされて、メモリカード３０への記録、又は管理局４０への送信出力が行われる状態となる。
【０１０８】
後方優先レートで撮像が行われている期間は、コントローラ５１はステップＦ１１２〜Ｆ１１５の監視処理を行う。
ステップＦ１１２では、使用者がノーマルレートへの切換操作を行ったか否かを監視し、またステップＦ１１３では管理局４０からノーマルレートへ切り換える旨のレート切換指示が受信されたか否かを監視している。
またステップＦ１１４では、使用者が前方優先レートへの切換操作を行ったか否か監視し、またステップＦ１１５では管理局４０から前方優先レートへ切り換える旨のレート切換指示が受信されたか否かを監視している。
これらのレート変更条件が検出されない期間は▲３▼として示すようにステップＦ１１１に戻り、後方優先レートでの撮像動作を継続する。
【０１０９】
ステップＦ１０７，Ｆ１０８，Ｆ１１２，Ｆ１１３のいずれかでノーマルレートへの切換操作又は管理局４０からの切換指示が検出された場合は、▲１▼として示すようにステップＦ１０１に進み、コントローラ５１はノーマルレートに切り換える制御を行う。つまり圧縮部５６において合成映像信号Ｐｍｉｘ０の前後の映像データ部分について同等のレートで圧縮を行うように制御する。
【０１１０】
ステップＦ１０９又はＦ１１０で、後方優先レートへの切換操作又は管理局４０からの切換指示が検出された場合は、▲３▼として示すようにステップＦ１１１に進み、コントローラ５１は後方優先レートに切り換える制御を行う。
ステップＦ１１４又はＦ１１５で、前方優先レートへの切換操作又は管理局４０からの切換指示が検出された場合は、▲２▼として示すようにステップＦ１０６に進み、コントローラ５１は前方優先レートに切り換える制御を行う。
【０１１１】
以上のように基本的にユーザーの操作や管理局４０からのレート切換指示に応じて、コントローラ５１は、ノーマルレート、後方優先レート、前方優先レートを切り換えるように、圧縮部５６を制御する。
従って、使用者は、前方の光景について高品位な映像データを記録／送信したいと思った場合は、操作キー１８により前方優先レートへの切換操作を行えばよいし、後方の光景について高品位な映像データを記録／送信したいと思った場合は、操作キー１８により後方優先レートへの切換操作を行えばよい。
例えば使用者が操作を行う余裕がある場合は、このように任意にモード切換を行って望んだ撮像動作を行うことができる。
【０１１２】
また例えば当該ビデオカメラから送信されてくる映像データをモニタリングしている管理局４０のオペレータも、所望の時点で前方優先レート又は後方優先レートに切換えさせて、前方又は後方について、より高品位な映像をモニタリングできるようにすることができる。
例えば警備員等の前方を重点的に確認したい場合や、警備員が気がついていないがオペレータの注意をひいた映像が後方映像としてモニタリングされたときに、管理局４０のオペレータが、前方優先レートや後方優先レートを指示できるようにすることで、管理局４０でより詳細な映像情報を得ることができ、警備効果を大きく向上できる。
【０１１３】
また、本例のビデオカメラには、上述したようにエマージェンシースイッチ１７が設けられている。そして例えば警備員・警察官等は、事件・事故・犯人追跡などの事態が発生した際には、エマージェンシースイッチ１７を押すようにしている。上述したようにエマージェンシースイッチ１７は大型のスイッチとされ、使用者が殆どコントロールユニット１０に注意を払うことなく操作ができるようなスイッチとされている。
そしてコントローラ５１は、エマージェンシースイッチ１７が操作された場合には、緊急発生通知データ、当該ビデオカメラのＩＤ、及びＧＰＳデコーダ６５で検出されている現在位置情報のそれぞれを送信データとしてエンコーダ５９に供給し、送信信号処理部６０及び通信部６２の処理により管理局４０に送信させる。
このエマージェンシー状態の通知データの送信により、管理局４０では警備員等の緊急状態を知ることができ、オペレータはそのエマージェンシー状態となった警備員等のビデオカメラから送信されてくる映像に注意を払うことになる。
そしてこのような場合、警備員等がビデオカメラの撮像方向を気にかけることは殆ど不可能であるが、管理局４０のオペレータは、前方／後方のどちらの映像をしっかり確認したいかに応じて、ビデオカメラに指示を出して前方優先レート、後方優先レートを切り換えさせることができるため、オペレータにとって重要と判断された方向の映像が高画質でモニタリングできることになる。
従って管理局４０での事態の把握や対応指揮に好適となる。
【０１１４】
さらに、複数の警備員・警察官でパトロールを行っている場合に、一人がエマージェンシースイッチ１７を操作し、緊急通知が送信されてくることに応じて、管理局４０は他の各人のビデオカメラに緊急発生を通知することも可能である。
特に管理局４０では、緊急事態の発生、緊急事態に遭遇した警備員等（ビデオカメラＩＤ）、及び発生場所を特定できる。これに応じて、管理局４０は、その緊急事態発生場所近辺の警備員等或いは共同で警備に当たる全員のビデオカメラに対して、緊急指示を送信する。これによって各人が事態に対応できると共に、各人のビデオカメラに対して、緊急状態となった警備員等からの映像を送信することで、より正確な情報を伝えることができる。
また、管理局４０では、全てのビデオカメラに対してレート切換指示が可能であるため、周辺各区域で所望の方向の映像を高品質でモニタリングできる。
【０１１５】
ところで、ビデオカメラのコントローラ５１は、他の警備員等或いは管理局４０からの緊急指示があった場合は、スピーカ部１４から緊急着信音を出力させたり、管理局４０からの音声による指示を出力させることが好適である。
さらに管理局４０等から発生現場をＧＰＳ現在位置情報として送信するようにし、各警備員等が事件等の発生現場を正確に把握できるように、表示部１１に地図表示などを行うようにしてもよい。
【０１１６】
また、使用者がエマージェンシースイッチ１７が操作した時点において、ビデオカメラがストレージモードで動作しており、撮像した映像データを管理局４０に送信していない場合もあり得る。その場合、緊急発生通知だけでは管理局４０（或いは他の警備員）が現場の状況を正確に把握できないことがあるため、コントローラ５１は自動的に伝送モード或いはマルチモードに切り換えるようにし、映像データを管理局４０に送信するようにするとよい。
【０１１７】
また、本例のビデオカメラは、衝撃センサ６７を備えており、例えば使用者が暴漢に襲われたり、或いは使用者自身が事故に遭遇するなどして、ビデオカメラに外部より衝撃が加わった際に、衝撃を検出する。
そして、これは使用者がエマージェンシースイッチ１７を押せない状態にあることも考えられる。従って、コントローラ５１は衝撃検出時も、上記エマージェンシースイッチ１７が操作された際と同様に、緊急発生通知の送信を行うようにするとよい。
【０１１８】
４−３  音声検査によるレート切換
次に、コントローラ５１が音声検査部６４の処理からレート変更条件を判別し、レート状態を切り換えるレート制御を図１４で説明する。
この場合、音声検査部６１は、前方マイクロフォン３ａ及び後方マイクロフォン３ｂから供給される音声信号を、予め設定された所定の音量レベルとしてのしきい値と比較し、マイクロフォン３ａ、３ｂから入力された音声信号の音量がしきい値を越えた場合（大音量検出時）に、その検出信号をコントローラ５１に出力するものとしている。またそのときに、マイクロフォン３ａ、３ｂから入力された各音声信号の音量差や遅延状態などから、大音量が前方／後方のどちらで発生したかも判別し、その情報をコントローラ５１に出力する。
【０１１９】
図１４において、撮像（記録／送信）が開始される時点では、コントローラ５１はステップＦ２０１として圧縮部５６に対してノーマルレートを指示している状態となる。
またコントローラ５１は、音声検査部６４からの検出信号を監視している。
【０１２０】
この場合コントローラ５１は、レート変更条件としてステップＦ２０２、Ｆ２０３、Ｆ２０４、Ｆ２０６の監視処理を行う。
ステップＦ２０２では、使用者が前方優先レートへの切換操作を行ったか否か、或いは、管理局４０から前方優先レートへ切り換える旨のレート切換指示が受信されたか否かを監視している。
ステップＦ２０３では、使用者が後方優先レートへの切換操作を行ったか否か、或いは管理局４０から後方優先レートへ切り換える旨のレート切換指示が受信されたか否かを監視している。
ステップＦ２０４では、レート変更条件として音声検査部６４から前方での大音量の検出信号があったか否か判別する。
ステップＦ２０６では、レート変更条件として音声検査部６４から後方での大音量の検出信号があったか否か判別する。
これらのレート変更条件が検出されない期間は▲１▼として示すようにステップＦ２０１に戻り、ノーマルレートでの撮像動作を継続する。
【０１２１】
ステップＦ２０２で使用者の切換操作、或いは管理局４０からのレート切換指示として前方優先レートへの移行の操作又は指示を検出すると、コントローラ５１はステップＦ２０８に進み、圧縮部５６を前方優先レートとするように制御する。
これによって前方カメラ部２ａで撮像される映像データが、後方カメラ部２ｂで撮像される映像データよりも高品位な映像データとされて、メモリカード３０への記録、又は管理局４０への送信出力が行われる状態となる。
またコントローラ５１は、音声検査部６４からの検出信号の監視を継続する。
【０１２２】
前方優先レートで撮像が行われている期間は、コントローラ５１はステップＦ２０９、Ｆ２１０，Ｆ２１１，Ｆ２１３，Ｆ２１５の監視処理を行う。
ステップＦ２０９では、使用者がノーマルレートへの切換操作を行ったか否か、又は管理局４０からノーマルレートへ切り換える旨のレート切換指示が受信されたか否かを監視している。
ステップＦ２１０では、使用者が後方優先レートへの切換操作を行ったか否か、又は管理局４０から後方優先レートへ切り換える旨のレート切換指示が受信されたか否かを監視している。
ステップＦ２１１では音声検査部６４から後方での大音量の検出信号があったか否か判別する。
【０１２３】
ステップＦ２１３では音声検査部６４から前方での大音量の検出信号があったか否か判別する。この検出があった場合はステップＦ２１４に進み、コントローラ５１における内部タイマとして、前方での大音量が検出されない時間としての継続時間をカウントする前方音量タイマをリセットし、再スタートさせる処理を行う。
ステップＦ２１５では、前方での大音量が検出されない継続時間が所定時間に達した、つまり前方音量タイマがタイムオーバとなったか否かを判別する。
これらの検出がなされない期間は▲２▼として示すようにステップＦ２０８に戻り、前方優先レートでの撮像動作を継続する。
【０１２４】
ノーマルレート状態において上記ステップＦ２０３で、或いは前方優先レートにおいて上記ステップＦ２１０で、使用者の切換操作、或いは管理局４０からのレート切換指示として後方優先レートへの移行の操作又は指示を検出した場合、コントローラ５１はステップＦ２１７に進み、圧縮部５６において後方優先レートで圧縮が行われるようにする。
これによって後方カメラ部２ｂで撮像される映像データが、前方カメラ部２ａで撮像される映像データよりも高品位な映像データとされて、メモリカード３０への記録、又は管理局４０への送信出力が行われる状態となる。
またコントローラ５１は、音声検査部６４からの検出信号の監視を継続する。
【０１２５】
後方優先レートで撮像が行われている期間は、コントローラ５１はステップＦ２１８、Ｆ２１９，Ｆ２２０，Ｆ２２２，Ｆ２２４の監視処理を行う。
ステップＦ２１８では、使用者がノーマルレートへの切換操作を行ったか否か、又は管理局４０からノーマルレートへ切り換える旨のレート切換指示が受信されたか否かを監視している。
ステップＦ２１９では、使用者が前方優先レートへの切換操作を行ったか否か、又は管理局４０から前方優先レートへ切り換える旨のレート切換指示が受信されたか否かを監視している。
ステップＦ２２０では音声検査部６４から前方での大音量の検出信号があったか否か判別する。
【０１２６】
ステップＦ２２２では音声検査部６４から後方での大音量の検出信号があったか否か判別する。この検出があった場合はステップＦ２２３に進み、コントローラ５１における内部タイマとして、後方での大音量が検出されない時間としての継続時間をカウントする後方音量タイマをリセットし、再スタートさせる処理を行う。
ステップＦ２２４では、後方での大音量が検出されない継続時間が所定時間に達した、つまり前方音量タイマがタイムオーバとなったか否かを判別する。
これらの検出がなされない期間は▲３▼として示すようにステップＦ２１７に戻り、後方優先レートでの撮像動作を継続する。
【０１２７】
ステップＦ２０９，Ｆ２１８のいずれかでノーマルレートへの切換操作又は管理局４０からの切換指示が検出された場合は、▲１▼として示すようにステップＦ２０１に進み、コントローラ５１は圧縮部５６の処理をノーマルレートに切り換える制御を行う。
ステップＦ２１９で、前方優先レートへの切換操作又は管理局４０からの切換指示が検出された場合は、▲２▼として示すようにステップＦ２０８に進み、コントローラ５１は圧縮部５６を前方優先レートに切り換える制御を行う。
【０１２８】
ノーマルレート時にステップＦ２０４で前方での大音量が検出された場合は、コントローラ５１はステップＦ２０５で前方音量タイマをリセット／スタートさせた上で、▲２▼として示すようにステップＦ２０８に進み、前方優先レートに切り換える制御を行う。
また後方優先レート時にステップＦ２２０で前方での大音量が検出された場合は、コントローラ５１はステップＦ２２１で前方音量タイマをリセット／スタートさせた上で、▲２▼として示すようにステップＦ２０８に進み、前方優先レートに切り換える制御を行う。
【０１２９】
このようにして前方大音量検出によって前方優先レートに移行した場合は、ステップＦ２１５で前方音量タイマのタイムオーバーが検出されることがある。
前方音量タイマは、前方優先レート中に前方での大音量検出があればステップＦ２１３，Ｆ２１４によりリセット／スタートされるため、前方音量タイマのタイムオーバとは、前方で大音量が発生しない状態がタイムオーバとして設定されている所定時間以上継続した場合である。
前方音量タイマがタイムオーバーとなった場合は、ステップＦ２１６に進み、前方優先レートへの移行時の条件に応じてレート切換を行い、又は前方優先レートを維持する。
例えばステップＦ２０４での前方大音量検出で前方優先レートに移行した後、ステップＦ２１５でタイムオーバーが検出された場合は、▲１▼としてステップＦ２０１に戻り、ノーマルレートに移行する。
またステップＦ２２０での前方大音量検出で前方優先レートに移行した後、ステップＦ２１５でタイムオーバーが検出された場合は、▲３▼としてステップＦ２１７に戻り、後方優先レートに移行する。
また、ステップＦ２０２，Ｆ２１９での操作又は指示の検出によって前方優先レートした後、ステップＦ２１３の前方大音量検出によってステップＦ２１４で前方音量タイマがスタートされ、その後ステップＦ２１５でタイムオーバーが検出された場合は、▲２▼としてステップＦ２０８に戻る。つまり前方優先レートを継続する。
【０１３０】
ノーマルレート時にステップＦ２０６で前方での大音量が検出された場合は、コントローラ５１はステップＦ２０７で後方音量タイマをリセット／スタートさせた上で、▲３▼として示すようにステップＦ２１７に進み、後方優先レートに切り換える制御を行う。
また前方優先レート時にステップＦ２１１で後方での大音量が検出された場合は、コントローラ５１はステップＦ２１２で後方音量タイマをリセット／スタートさせた上で、▲３▼として示すようにステップＦ２１７に進み、後方優先レートに切り換える制御を行う。
【０１３１】
このようにして後方大音量検出によって後方優先レートに移行した場合は、ステップＦ２２４で後方音量タイマのタイムオーバーが検出されることがある。
後方音量タイマは、後方優先レート中に後方での大音量検出があればステップＦ２２２，Ｆ２２３によりリセット／スタートされるため、後方音量タイマのタイムオーバとは、後方で大音量が発生しない状態がタイムオーバとして設定されている所定時間以上継続した場合である。
後方音量タイマがタイムオーバーとなった場合は、ステップＦ２２５に進み、後方優先レートへの移行時の条件に応じてレート切換を行い、又は後方優先レートを維持する。
例えばステップＦ２０６での後方大音量検出で後方優先レートに移行した後、ステップＦ２２４でタイムオーバーが検出された場合は、▲１▼としてステップＦ２０１に戻り、ノーマルレートに移行する。
またステップＦ２１１での後方大音量検出で後方優先レートに移行した後、ステップＦ２２４でタイムオーバーが検出された場合は、▲２▼としてステップＦ２０８に戻り、前方優先レートに移行する。
また、ステップＦ２０３，Ｆ２１０での操作又は指示の検出によって後方優先レートした後、ステップＦ２２２の後方大音量検出によってステップＦ２２３で後方音量タイマがスタートされ、その後ステップＦ２２４でタイムオーバーが検出された場合は、▲３▼としてステップＦ２１７に戻る。つまり後方優先レートを継続する。
【０１３２】
以上のようにコントローラ５１は、ユーザーの操作や管理局４０からのレート切換指示をレート変更条件としてモード変更制御を行うことに加えて、前方での大音量検出を前方優先レートへのレート変更条件とし、動作モードがノーマルレート或いは後方優先レートの場合であったら前方優先レートに切り換えるようにしている。また、後方での大音量検出を後方優先レートへのレート変更条件とし、動作モードがノーマルレート或いは前方優先レートの場合であったら後方優先レートに切り換えるようにしている。
【０１３３】
このような図１２の処理によれば、例えばパトロール中などに、警報音、爆発音、事故音、怒声、その他の異常事態を予想させる大音量の音声があった場合に、自動的にその大音量の発生した方向について高品位の映像データが撮像され、メモリカード３０に記録されたり管理局４０に送信されるようになる。特に異常事態が発生した時点であったとすると、警備員等はビデオカメラを操作する余裕はないが、このように音量検出によって大音量発生方向の映像データのレートが自動的に切り換えられることで、緊急時に対応した高画質映像の記録／送信が可能となる。従って記録データとして重要な映像の保存や、管理局４０による状況把握、指揮等に好適である。
また、一般用途においても、例えばイベントなどで大歓声が沸いたときに、その方向の映像として高画質の映像撮像を行えることなどの点で有用である。
【０１３４】
また前方優先レート、或いは後方優先レートでの撮像中は、使用者の操作、管理局４０からのレート切換指示に応じて、ノーマルレートに戻されるようにすることで、使用者や管理局４０のオペレータが、前方又は後方の高画質映像の記録／送信を要しないと判断した場合に対応できる。
特に大音量発生は必ずしも異常事態発生とは限らないため、使用者或いは管理局４０のオペレータが異常事態ではないと判断した場合に、使用者の操作や管理局４０からの指示によってノーマルレートに復帰できるようにすることは好適である
【０１３５】
さらに前方優先レートでの撮像中は、前方で大音量が発生しない状態が所定時間を越えた場合は、元々異常事態ではなかったか、或いは異常事態が収束したとして元のレート状態に戻るようにしているため、使用者は大音量検出によって自動的に切り換えられたモード状態を意識する必要はない。
同様に、後方優先レートでの撮像中は、後方で大音量が発生しない状態が所定時間を越えた場合も、元のレート状態に戻るようにしているため、使用者は大音量検出によって自動的に切り換えられたモード状態を意識する必要はない。
タイムオーバとなる所定時間については固定値でもよいし、使用者が任意に設定・選択できるようにしてもよい。
なお、このように大音量検出によって前方優先レート又は後方優先レートに移行した後に、大音量無しの継続時間に応じて元のレート状態に戻す処理は行われないようにしてもよいし、使用者が選択的に実行を設定できる処理としてもよい。
【０１３６】
ところで、使用環境によっては異常事態でない大音量検出が頻発する場合もある。そこで、音声検査部６４では例えば周波数成分、周波数毎のレベル特性、減衰パターンなどで音声信号を分析し、特定の音声であると判別した場合には、大音量であったとしても検出信号を発生させない、つまり前方優先レート又は後方優先レートに切り換えないようにしてもい。
例えば空港警備を想定すると、航空機の発着音が大音量として検出されてしまうが、予め発着音の周波数特性等をセットしておき、入力された音声が、信号分析により発着音と同一又は類似していると判別される場合は、異常事態としての大音量ではないとして前方優先レート又は後方優先レートに切り換えないようにすることが考えられる。
【０１３７】
また、大音量検出のしきい値は、予め設定された固定値でもよいが、使用者が任意にしきい値レベルを設定できるようにしてもよい。例えば騒音の多い場所の警備などに用いる場合では、しきい値を高くしておくことで、異常事態としての大音量をより的確に判別できるものとなる。
【０１３８】
図１４の処理では、前方又は後方での音量レベルを検出して前方優先レート又は後方優先レートに移行するものとしたが、音量ではなく、所定のターゲット音声を検出した場合に、前方優先レート又は後方優先レートに移行するようにすることもできる。
即ち音声検査部６４はターゲット音声としての音声の周波数成分、周波数特性、減衰パターンなどをセットしておく。そしてマイクロフォン３ａ、３ｂからの入力音声について周波数成分、周波数特性、減衰パターンなどを分析するようにし、ターゲット音声と一致又は類似しているか否かを判別するようにする。また、その際にマイクロフォン３ａ、３ｂからの各入力音声の音量レベルや時間遅延などから、ターゲット音声が前方、後方のどちらで発生したかを判別するようにする。
そして前方からのターゲット音声の入力があったと判別された際に、音声検査部６４はその検出信号をコントローラ５１に供給するようにし、コントローラ５１は図１４のステップＦ２０４（又はＦ２２０）・・・→Ｆ２０８の処理として、前方優先レートに切り換える。
また後方からのターゲット音声の入力があったと判別された際に、音声検査部６４はその検出信号をコントローラ５１に供給するようにし、コントローラ５１は図１４のステップＦ２０６（又はＦ２１１）・・・→Ｆ２１７の処理として、後方優先レートに切り換える。
【０１３９】
例えば、警備する地区や建物の警報音、車両等の衝突音、爆発音などをターゲット音声としてセットしておけば、それらの音が発生した場合に、発生方向に応じて前方優先レート又は後方優先レートにより、必要な方向の映像について高品位な映像データの記録／送信が実行されるものとなる。
また、音声検査部６４に声紋分析の機能を備えるようにし、特定の人物の声紋をセットしておくことで、警察官の職務質問などの際に、特定の人物であった場合に前方優先レート又は後方優先レートで、その人物の写っている方向について高品位な映像を記録／送信するといったことも可能となる。
【０１４０】
ターゲット音声のセットとしては、例えば使用者がビデオカメラをターゲット音声設定モードとして、ターゲット音声を発生させて、マイクロフォン３ａ、３ｂから入力させ、音声検査部６４がこれを分析した結果を記憶するようにすればよい。或いは、警報音、衝突音等のパターンがプリセットされ、使用者がどれをターゲット音声として用いるかを選択できるようにしてもよい。
また管理局４０が、ターゲット音声としてのデータ、即ち特定の警報音や指名手配犯人の声紋等のデータをビデオカメラに送信し、コントローラ５１がそれを受信して音声検査部６４にセットするようにしてもよい。
【０１４１】
４−４  画像解析によるレート切換
次に、コントローラ５１が画像解析部６３の処理からレート変更条件を判別し、そのレート変更条件の検出に応じて圧縮部５６の圧縮レートを切り換えるレート制御を図１５で説明する。
ここでは、画像解析部６３は、前方カメラ部２ａ及び後方カメラ部２ｂから供給される撮像映像信号について、画像解析を行い、動き検出、或いはターゲット画像の入力があったか否かチェックする。
【０１４２】
動き検出については、例えば順次入力される撮像映像信号のフレームを時系列方向に比較処理を行うことで、異常事態等と考えられる動きがあったか否かを検出できる。
ターゲット画像については、画像解析部６３はターゲット画像としてのデータを予めセットしておく。例えば特定の建物、人物、車両等の画像、特定の色などとしてのターゲット画像をセットする。そして画像解析処理により、入力された撮像映像信号として、これらのターゲット画像が含まれているか否かを判別する処理を行う。
画像解析部６３は、所定の動き状態、或いはターゲット画像が検出されることに応じて、その検出信号をコントローラ５１に供給するようにしている。
またこのとき、所定の動き状態、或いはターゲット画像が、前方カメラ部２ａ、後方カメラ部２ｂのどちらでとらえられたものであるかの情報もコントローラ５１に供給する。
【０１４３】
ターゲット画像のセットとしては、例えば使用者が予め、ビデオカメラをターゲット画像設定モードとして、特定の写真や、実際にその場所での撮像を行い、画像解析部６３がその撮像した画像を記憶するようにすればよい。或いは、ターゲット画像としての色や明るさ、車種、建物等のデータがプリセットされ、使用者がどれをターゲット画像として用いるかを選択できるようにしてもよい。
また管理局４０が、ターゲット画像としてのデータ、即ち犯人や建物、車種等の画像や、特定の色等のデータをビデオカメラに送信し、コントローラ５１がそれを受信して画像解析部６３にセットするようにしてもよい。
【０１４４】
図１５において、撮像（記録／送信）が開始される時点では、コントローラ５１はステップＦ３０１として圧縮部５６に対してノーマルレートを指示している状態となる。
またコントローラ５１は、画像解析部６３からの検出信号を監視している。
【０１４５】
この場合コントローラ５１は、レート変更条件としてステップＦ３０２、Ｆ３０３、Ｆ３０４、Ｆ３０５の監視処理を行う。
ステップＦ３０２では、使用者が前方優先レートへの切換操作を行ったか否か、或いは、管理局４０から前方優先レートへ切り換える旨のレート切換指示が受信されたか否かを監視している。
ステップＦ３０３では、使用者が後方優先レートへの切換操作を行ったか否か、或いは管理局４０から後方優先レートへ切り換える旨のレート切換指示が受信されたか否かを監視している。
ステップＦ３０４では、レート変更条件として画像解析部６３から前方での画像条件、即ち前方カメラ部２ａからの撮像映像信号において動き検出やターゲット画像の検出がなされたか否か判別する。
ステップＦ３０５では、レート変更条件として画像解析部６３から後方での画像条件、即ち後方カメラ部２ｂからの撮像映像信号において動き検出やターゲット画像の検出がなされたか否か判別する。
これらのレート変更条件が検出されない期間は▲１▼として示すようにステップＦ３０１に戻り、ノーマルレートでの撮像動作を継続する。
【０１４６】
ステップＦ３０２で使用者の切換操作、或いは管理局４０からのレート切換指示として前方優先レートへの移行の操作又は指示を検出すると、コントローラ５１はステップＦ３０６に進み、圧縮部５６で前方優先レートで圧縮が行われるようにする。
これによって前方カメラ部２ａで撮像される映像データが、後方カメラ部２ｂで撮像される映像データよりも高品位な映像データとされて、メモリカード３０への記録、又は管理局４０への送信出力が行われる状態となる。
またコントローラ５１は、画像解析部６３からの検出信号の監視を継続する。
【０１４７】
前方優先レートで撮像が行われている期間は、コントローラ５１はステップＦ３０７、Ｆ３０８，Ｆ３０９，Ｆ３１０の監視処理を行う。
ステップＦ３０７では、使用者がノーマルレートへの切換操作を行ったか否か、又は管理局４０からノーマルレートへ切り換える旨のレート切換指示が受信されたか否かを監視している。
ステップＦ３０８では、使用者が後方優先レートへの切換操作を行ったか否か、又は管理局４０から後方優先レートへ切り換える旨のレート切換指示が受信されたか否かを監視している。
ステップＦ３０９では画像解析部６３から後方での画像条件、即ち後方カメラ部２ｂからの撮像映像信号において動き検出やターゲット画像の検出がなされたか否か判別する。
ステップＦ３１０では前方について優先させる画像条件が解消されたか否かを判別する。画像条件の解消判断については後述する。
これらの検出がなされない期間は▲２▼として示すようにステップＦ３０６に戻り、前方優先レートでの撮像動作を継続する。
【０１４８】
ノーマルレート状態において上記ステップＦ３０３で、或いは前方優先レートにおいて上記ステップＦ３０８で、使用者の切換操作、或いは管理局４０からのレート切換指示として後方優先レートへの移行の操作又は指示を検出した場合、コントローラ５１はステップＦ３１１に進み、圧縮部５６で後方優先レートで圧縮が行われるようにする。
これによって後方カメラ部２ｂで撮像される映像データが、前方カメラ部２ａで撮像される映像データよりも高品位な映像データとされて、メモリカード３０への記録、又は管理局４０への送信出力が行われる状態となる。
またコントローラ５１は、画像解析部６３からの検出信号の監視を継続する。
【０１４９】
後方優先レートで撮像が行われている期間は、コントローラ５１はステップＦ３１２、Ｆ３１３，Ｆ３１４，Ｆ３１５の監視処理を行う。
ステップＦ３１２では、使用者がノーマルレートへの切換操作を行ったか否か、又は管理局４０からノーマルレートへ切り換える旨のレート切換指示が受信されたか否かを監視している。
ステップＦ３１３では、使用者が前方優先レートへの切換操作を行ったか否か、又は管理局４０から前方優先レートへ切り換える旨のレート切換指示が受信されたか否かを監視している。
ステップＦ３１４では画像解析部６３から前方での画像条件、即ち前方カメラ部２ａからの撮像映像信号において動き検出やターゲット画像の検出がなされたか否か判別する。
ステップＦ３１５では後方について優先させる画像条件が解消されたか否かを判別する。
これらの検出がなされない期間は▲３▼として示すようにステップＦ３１１に戻り、後方優先レートでの撮像動作を継続する。
【０１５０】
ステップＦ３０７，Ｆ３１２のいずれかでノーマルレートへの切換操作又は管理局４０からの切換指示が検出された場合は、▲１▼として示すようにステップＦ３０１に進み、コントローラ５１は圧縮部５６をノーマルレートに切り換える制御を行う。
ステップＦ３１３で、前方優先レートへの切換操作又は管理局４０からの切換指示が検出された場合は、▲２▼として示すようにステップＦ３０６に進み、コントローラ５１は圧縮部５６を前方優先レートに切り換える制御を行う。
【０１５１】
ノーマルレート時にステップＦ３０４で、又は後方優先レート時にステップＦ３１４で、前方での画像条件が検出された場合は、コントローラ５１はステップＦ３０６に進み、圧縮部５６を前方優先レートに切り換える制御を行う。
ノーマルレート時にステップＦ３０５で、又は前方優先レート時にステップＦ３０９で、後方での画像条件が検出された場合は、コントローラ５１はステップＦ３１１に進み、圧縮部５６を後方優先レートに切り換える制御を行う。
前方優先レート時にステップＦ３１０で前方優先の画像条件の解消が検出された場合、或いは後方優先レート時にステップＦ３１５で後方優先の画像条件の解消が検出された場合は、ステップＦ３０１に戻って圧縮部５６をノーマルレートに切り換える制御を行う。
【０１５２】
このような図１５の処理によれば、高品質の映像を取得したい光景が撮像範囲（前方又は後方）に入った場合に、その光景を撮像している方向の映像が高画質化されるように圧縮レートが自動的に切り換えられて、映像データの記録・送信が行われる。
例えばパトロール中などに、暴漢に襲われるなどで激しい動きが検出された場合に、暴漢等が撮像されている方向の様子を高画質で記録・送信できる。もちろんこの場合、使用者は操作の余裕はないため、自動的に前後でのレート切換が行われることが非常に好適である。
また、重点的に警備を行いたい建物の近辺や、指名手配犯人に似た人物、その他、逃走犯人が着ていた衣服の色、などに反応して、それらが撮像されている方向の映像データが高画質で取得できることになるため、警備や捜査に有用である。
【０１５３】
また、一般用途においても、例えば散策やハイキングにおいて、特定の地区などで高画質撮像を行いたい場合などに、その場所（建物）などの写真等をターゲット画像としてセットしておくことで、ユーザーが操作を意識することなく所望の撮像が可能となる。
【０１５４】
また前方優先レート又は後方優先レートでの撮像中は、使用者の操作、管理局４０からのレート切換指示に応じて、ノーマルレートに戻されるようにすることで、使用者や管理局４０のオペレータが前方又は後方で高画質撮像を要しないと判断した場合に対応できる。
また、前方優先レート時に前方優先の画像条件が解消されたと判断された場合や、後方優先レート時に後方優先の画像条件が解消されたと判断された場合に、自動的にノーマルレートに戻ることで、ユーザーはレート状態・切換操作を意識しなくてもよいものとなる。
【０１５５】
画像条件の解消は、例えばタイムカウントで判断することができる。
例えば前方での画像条件検出によって前方優先レートに移行した場合に、前方での動きやターゲット画像の検出がない状態が所定時間継続した場合に画像条件の解消と判別することができる。なお、この場合、単にノーマルレートに戻るのではなく、画像条件検出によってレート切換が行われた直前のレート状態に戻すようにしても良い。
後方優先の画像条件の解消も同様に判断できる。
【０１５６】
或いは、前方と後方で同時に動きやターゲット画像が検出された場合に、画像条件の解消とすることもできる。即ち、前後で同等の品質で撮像した方がよい状況が発生した場合などである。
【０１５７】
４−５  位置検出によるレート切換
次に、コントローラ５１がＧＰＳデコーダ６５からの現在位置情報に基づいてレート変更条件を判断し、レート切換を行う例を図１６で説明する。なお、図１６では使用者の操作又は管理局４０の指示によってレート切換を行う処理は省略している。
【０１５８】
図１６において、撮像（記録／送信）が開始される時点では、コントローラ５１はステップＦ４０１として圧縮部５６に対してノーマルモードを指示している状態となる。
この場合コントローラ５１には、予め地区を指定する情報、例えば緯度範囲及び経度範囲としての情報が判断基準としてセットされている。
そしてコントローラ５１は常時ＧＰＳデコーダ６５からの現在位置情報としての緯度・経度と、上記指定地区の情報を比較し、ステップＦ４０２で現在位置が指定された区域内であるか否かを判断している。
指定区域内でない期間は、ノーマルレートの制御を継続する。
【０１５９】
指定区域の情報については、例えば使用者が予め、ビデオカメラを操作して指定地区を入力する。入力形態については多様に考えられるが、例えば表示部１１に地図表示を行ってユーザーがその地図内で範囲指定したり、或いは使用者が地名等を入力又は選択することで、その地名に相当する緯度経度範囲が指定地区の情報としてセットされるようにすればよい。
また管理局４０が、指定地区としての緯度経度範囲のデータをビデオカメラに送信し、コントローラ５１がそれを受信して指定地区の情報とするようにしてもよい。
【０１６０】
さらにコントローラ５１では、指定地区内において、特定の場所、建物等が重点的に撮像すべき対象としてセットされる。例えばユーザー或いは管理局４０によって、地域名として指定区域が指定され、さらにその指定区域内の特定のポイント（建物や場所）が重点撮像対象としてセットされればよい。
或いは、特定の建物の名称や番地などを入力することで、それが重点撮像対象とされ、その周辺区域が指定区域として自動的にセットされるようにしてもよい。
【０１６１】
ステップＦ４０２において、現在位置が指定区域内であることが判別されたら、コントローラ５１の処理はステップＦ４０２からＦ４０３に進み、カメラユニット１における方位検出部７からの方位情報を確認する。
そしてステップＦ４０４として、現在の撮像の方向状態において、前方と後方のどちらが重点的に撮像すべき方向かを判断する。つまり重点撮像対象の方向を向いているカメラ部が前方カメラ部２ａであるのか後方カメラ部２ｂであるのかを判断する。
【０１６２】
そして重点撮像対象の方向を向いているカメラ部が前方カメラ部２ａであった場合は、ステップＦ４０５に進み、前方優先レートで圧縮部５６の処理が行われるように制御する。
これによって前方カメラ部２ａで撮像される映像データ、即ち重点撮像対象の方向を撮像している映像データが、後方カメラ部２ｂで撮像される映像データよりも高品位な映像データとされて、メモリカード３０への記録、又は管理局４０への送信出力が行われる状態となる。
【０１６３】
前方優先レートで撮像が行われている期間も、コントローラ５１は現在位置情報と指定区域の情報を比較しており、ステップＦ４０６では、現在位置が指定区域外となったか否かを判別している。
ステップＦ４０６で指定区域外となったことが判別された場合には、ステップＦ４０１に進み、圧縮部５６がノーマルレートでの処理を行うように制御する。
またステップＦ４０６で指定区域外となっていないと判断された場合は、ステップＦ４０７で、方位検出部７からの方位情報を確認する。そしてステップＦ４０８で、重点撮像対象の方向を向いているカメラ部が依然として前方カメラ部２ａであるのか否かを判断する。
重点撮像対象の方向を向いているカメラ部が依然として前方カメラ部２ａであればステップＦ４０５に戻り、前方優先レートの状態を継続する。
【０１６４】
上記のように指定区域に入った時点でステップＦ４０４において、重点撮像対象の方向を向いているカメラ部が後方カメラ部２ｂであると判断された場合は、ステップＦ４０９に進み、圧縮部５６で後方優先レートで圧縮が行われるように制御する。
これによって後方カメラ部２ｂで撮像される映像データ、即ち重点撮像対象の方向を撮像している映像データが、前方カメラ部２ａで撮像される映像データよりも高品位な映像データとされて、メモリカード３０への記録、又は管理局４０への送信出力が行われる状態となる。
【０１６５】
後方優先レートで撮像が行われている期間も、コントローラ５１は現在位置情報と指定区域の情報を比較しており、ステップＦ４１０では、現在位置が指定区域外となったか否かを判別している。
ステップＦ４１０で指定区域外となったことが判別された場合には、ステップＦ４０１に進み、圧縮部５６がノーマルレートでの処理を行うように制御する。
またステップＦ４１０で指定区域外となっていないと判断された場合は、ステップＦ４１１で、方位検出部７からの方位情報を確認する。そしてステップＦ４１２で、重点撮像対象の方向を向いているカメラ部が依然として後方カメラ部２ｂであるのか否かを判断する。
重点撮像対象の方向を向いているカメラ部が依然として後方カメラ部２ｂであればステップＦ４０９に戻り、後方優先レートの状態を継続する。
【０１６６】
前方優先レートにおいてステップＦ４０８で、重点撮像対象の方向を向いているカメラ部が後方カメラ部２ｂになったと判断された場合は、ステップＦ４０９に進み、後方優先レートに切り換える処理を行う。
また後方優先レートにおいてステップＦ４１２で、重点撮像対象の方向を向いているカメラ部が前方カメラ部２ａになったと判断された場合は、ステップＦ４０５に進み、前方優先レートに切り換える処理を行う。
【０１６７】
このような図１６の処理によれば、指定区域内で、自動的に重点撮像対象の方向を向いている映像について高品質の映像データの記録／送信出力が行われる。
従って、例えばパトロール中に警備重点地や危険地域などが含まれる場合であって、その区域、さらには区域内の特定の場所を監視していたい場合や様子を記録しておきたい場合などに好適である。
もちろん、指定区域内において、方位判別に応じて前方優先レートと後方優先レートが切り換えられることで、常に重点撮像対象について高品質な撮像が可能となる。
また、一般用途においても、例えば散策やハイキングにおいて、特定の場所について高画質撮像を行いたい場合などに、その場所を重点撮像対象としてセットしておくことで、ユーザーが操作を意識することなく所望の撮像が可能となる。
【０１６８】
また指定地区において前方優先レート又は後方優先レートに移行した後、指定区域外となることに応じて自動的にノーマルレートに戻ることで、使用者がレート操作の意識を持つことは不要であるため、操作に気を使わなくてもよく、警備中などにおいて好適である。
【０１６９】
４−６  他のレート切換制御例
以上、圧縮レートの切換制御処理として各例を説明したが、レート切換制御としては更に多様な例が考えられる。
上記各フローチャートの処理は、最初にノーマルレートで開始されるようにしたが、最初に前方優先レート又は後方優先レートにより撮像が行われるようにし、所定のレート変更条件によってレート切換が行われるようにしてもよい。
【０１７０】
またレート制御によって、ノーマルレート、前方優先レート、後方優先レートの３つの状態が切り換えられるとしたが、ノーマルレートを無くし、前方優先レートと後方優先レートの間で切り換えられるようにしてもよい。その場合、最初に前方優先レートとされて撮像動作が開始され、所定のレート変更条件に応じて後方優先レートに切り換えられるようにしたり、或いは逆に、最初に後方優先レートとされて撮像動作が開始され、所定のレート変更条件に応じて前方優先レートに切り換えられるようにする。
【０１７１】
また、例えば前方優先レートにおいて、さらに段階的にフレームレート又は圧縮レートが切り換えられることで、段階的に前方の映像データの品質を向上させることもできる。即ち前方優先レートの状態において複数段階にレート切換を行うものである。
この場合、複数のレート変更条件の検出状態や検出数によって制御するレートを決定したり、どのレート変更条件が検出されたかによってレートを決定することなどが考えられる。いま、前方優先レート内での前方映像に対するレートとして第１レート、第２レートが切り換えられ、かつ第２レートは第１レートより高画質となるレートであるとして、レート切換の例を挙げる。
【０１７２】
・ノーマルレート又は後方優先レートにおいて、前方優先のレート変更条件の１つが検出された場合に前方優先レートの第１レートに移行し、さらに第１レート中に前方優先のレート変更条件の１つが検出された場合に第２レートに移行する。
・ノーマルレート又は後方優先レートにおいて、前方優先の１つのレート変更条件が検出された場合に前方優先レート第１レートに移行し、またノーマルレート又は後方優先レート中に前方優先の複数のレート変更条件が検出された場合に前方優先レート第２レートに移行する。
・前方優先のレート変更条件として、例えば使用者の操作や指定区域内の重点撮像対象方向による場合などは前方優先レート第１レートに移行し、大音量検出、音声ターゲット検出、画像動き検出、画像ターゲット検出などの場合は前方優先レート第２レートに移行するなど、検出されたレート変更条件の種別に応じてレートを決定する。
【０１７３】
もちろんこれ以外にも各種の処理例は考えられる。
また、後方優先レートの場合においても、同様に上記第１レート、第２レートのように複数段階のレート切換を行うことも考えられる。
【０１７４】
また、レート切換を実行するためレート変更条件は、上記各例として示したレート変更条件を複合的に用いることは当然に想定される。
例えばレート変更条件として、使用者操作、管理局４０からの指示、大音量検出、音声ターゲット検出、画像動き検出、画像ターゲット検出、指定区域内での重点撮像対象方向について述べたが、これらの全部又は一部を常にチェックしていてもよい。
さらに前後の温度センサや、加速度センサなどを設けて温度状況や加速度状況などを前方優先レート又は後方優先レートへのレート変更条件として検出することも考えられる。
また衝撃センサ６７によって衝撃が検出された際に、その衝撃が加えられた方向を判別して、前方優先レート又は後方優先レートに切り換えることも考えられる。
【０１７５】
また、レート変更条件のそれぞれについて、重み付けを行っておき、後方優先の条件と前方優先の条件が重複して検出された場合に、どちらが重要なレート変更条件かによって前方優先レート・後方優先レートを選択するようにしてもよい。
【０１７６】
また、前方と後方の２つの方向について撮像を行う例を述べたが、３方向、４方向など、より多数の方向を撮像することも考えられる。その場合も同様に、各方向の撮像映像信号について、圧縮レートが、レート切換条件に応じて切り換えられるようにする。即ち、重要とされる光景が撮像されている方向について、高画質の映像データが得られるようにすればよい。
【０１７７】
また上記例では、動作モードとしてストレージモード、伝送モード、マルチモードが行われるとしたが、レート変更条件或いは他の条件の検出に応じて動作モードの変更も自動的に行われるようにしてもよい。
例えば指定地区内では自動的にマルチモード又は伝送モードとされて、必ず映像データが管理局４０に送信されるようにしたり、或いはメモリ容量が残り少なくなることで、ストレージモード又はマルチモードから伝送モードに切り換えられたり、或いはマルチモード時にバッテリー容量が所定以下となったら伝送モード又はストレージモードとするなどの処理である。
【０１７８】
５．多数映像信号源の例
以上の実施の形態では、ビデオカメラにおいて２つのカメラ部を有する例を述べた。しかしながら本発明の実施の形態としては、ビデオカメラにおいて３以上のカメラ部を有する構成も考えられる。
例えば図１７（ａ）は、同期信号発生部１５０からの同期信号ＳＹに基づいて、同期した映像信号を出力を行う４つの映像信号源１５０Ａ〜１５０Ｄを示している。
映像信号源１５０Ａ〜１５０Ｄは、それぞれが例えばカメラ部である。その場合、図１７（ａ）は４つのカメラ部を備えたビデオカメラの構成となる。
【０１７９】
各映像信号源１５０Ａ〜１５０Ｄからの同期した各映像信号ＰＡ、ＰＢ、ＰＣ、ＰＤは、切換部１０３で選択されて合成部１０４に供給される。
各映像信号ＰＡ、ＰＢ、ＰＣ、ＰＤは、例えば１２０Ｈｚスキャンのインターレース方式の映像信号であるとする。
すると、この場合において切換部１０３がフィールドタイミングで各端子を切り換えていき、それを合成部１０４で順次フレームメモリに記憶していけば、３０Ｈｚフレームのノンインターレース方式の合成映像信号Ｐｍｉｘ０を得ることができる。
この合成映像信号Ｐｍｉｘ０は、図１７（ｂ）のようにフレームデータとして垂直方向に４つの映像データが合成された信号となる。
【０１８０】
このように４つの映像データを合成した合成映像信号Ｐｍｉｘ０についても、上述の実施の形態と同様、１つの圧縮部で圧縮処理すること、１つの映像コンテンツとして記録媒体に記録、又は送信することで、装置構成の簡易化、コストダウン、記録又は通信の際のデータ容量の削減を実現でき、もちろん、これらの効果は、元の映像信号の系統数が多いほど大きなものとなる。
また、圧縮処理の際には、フレーム間相関、フレーム内相関を用いた高効率の処理が可能である。
さらに、元の各映像信号ＰＡ、ＰＢ、ＰＣ、ＰＤのそれぞれの部分に対して異なる圧縮率で圧縮を行うことも可能となる。
即ち本発明としては、３系統以上の同期した映像信号についても好適となるものである。
【０１８１】
また、より多数の映像が合成されることで、その合成映像信号Ｐｍｉｘ０（又は図１等に示したように圧縮合成映像信号Ｐｍｉｘ２を伸長した合成映像信号Ｐｍｉｘ３）をそのまま表示すると、図１７（ｂ）のような映像として、１画面内で多数の映像を同時に見ることができる。これは、映像閲覧、検索などにとって有用なものとなる。
【０１８２】
なお本発明において、複数系統（２系統以上）の同期した映像信号を発生させる部位、例えば上記図１７の各映像信号源１５０Ａ〜１５０Ｄは、カメラ部（撮像手段）とするのみでなく、例えば映像受信機等の受信手段や、映像データを記録した記録媒体を再生する再生手段などと構成されてもよい。
【０１８３】
例えば複数の映像再生装置が同期動作を行い、これらによって複数の記録媒体から同時再生された複数系統の同期した再生映像信号について、選択部１０３、合成部１０４、圧縮部１０５の処理が行われるようにすることも考えられる。
この場合、既に記録媒体に記録された複数の映像コンテンツを、合成して記録媒体に記録したり、送信することが可能となる。
さらには、複数系統の同期した映像信号を受信した場合に、各受信映像信号について、選択部１０３、合成部１０４、圧縮部１０５の処理が行われるようにすることも考えられる。
即ち、複数の映像信号としては、あくまで同期した映像信号であればよく、それら映像信号によって本発明は多様な用途が考えられる。
【０１８４】
６．変形例
【０１８５】
以上、実施の形態について説明してきたが本発明としてはさらに多様な例が考えられる。
例えば図６〜図１０で説明したようなカメラユニット１、コントロールユニット１０の外観は一例であることはもちろんであり、実際のユーザインターフェースのための操作子や表示のための配置、筐体形状などは限定されない。もちろん構成の差異によっても多様な形状が想定される。
カメラユニット１とコントロールユニット１０はケーブル３１で接続されるものとしたが、電波或いは赤外線などを利用したトランスミッタにより撮像映像信号や音声信号が無線伝送されるようにしてもよい。
或いは、カメラユニット１とコントロールユニット１０が図６のように別体ではなく、一体的に形成されてもよい。
【０１８６】
また、複数個設けられるカメラ部の全部又は一部に対しては、パン・チルト機構を形成し、撮像方向を上下左右に変更できるようにしてもよい。
パン・チルト動作はユーザーの操作に応じたものとしても良いし、コントローラ５１が自動制御するようにしてもよい。
【０１８７】
図６〜図１０の例では記録媒体はメモリカード３０としたが、コントロールユニット１０に例えば光ディスク、光磁気ディスクに対応するディスクドライブ装置を設け、ディスク記録媒体に撮像映像を記録するようにしてもよい。もちろん記録媒体として磁気テープメディアを用いるようにしても良い。
【０１８８】
図１０に示した構成要素としての各ブロックは、全てが必須のものではなく、またこれ以外に構成要素が追加されても良い。
例えば、記録機能を設けず、撮像された映像データは送信出力されるのみとしてもよいし、或いは逆に通信機能を設けず、撮像された映像データは記録処理されるのみとしてもよい。
画像解析部６３、音声検査部６４、エマージェンシースイッチ１７、ＧＰＳアンテナ６６及びＧＰＳデコーダ６５、衝撃センサ６７は、それぞれ前述したようにレート制御のトリガとなるレート変更条件を検出する機能を有するが、これらの全部が設けられる必要はない。
また、温度センサ、加速度センサなどを設けてレート変更条件を検出することも考えられる。
また、警備・警察用途ではなく、一般用途を目的とする場合は、エマージェンシースイッチ１７を不要とすることが考えられる。
さらに、図示していない構成要素として、例えばブルートゥースなど近距離無線通信機能や、他の機器インターフェース機能、ユーザーインターフェース機能などを備えるようにしてもよい。
【０１８９】
また図１又は図１０の例では補間部１１１，１１２（又は補間部６０，６１）により、フィールドデータの補間を行うことで、撮像時と同一レートのインターレース方式の映像信号を得るようにした。しかしながら、再生された映像の出力先、表示態様、その他の事情に応じては、補間を行わなくても良い場合もある。
例えば図１０の例で言えば、補間を行わない場合、映像信号ＰＦ’ＰＲ’は、撮像映像信号ＰＦ’ＰＲ’に比べてフィールド数が半分となり、インターレース方式のデータである場合は、フレーム単位で見れば走査線数が半分のデータとなる。そのまま表示すれば横長の画像となってしまう。換言すれば、そのような画像を表示させるので良い場合は、補間を行わなくても良い。
また、例えば再生映像を縮小表示や画面分割表示をさせたい場合は、走査線数としては既に１／２となっているため都合がよい場合もあり、その場合、補間ではなく、例えば水平方向のデータの間引き処理などが行われることも考えられる。
また、例えばＣＣＴＶ（Ｃｌｏｓｅｄ  Ｃｉｒｃｕｉｔ  ＴＶ）システムのように、映像信号のフィールド信号のみを使用できるシステムの場合、補間処理は不要とすることもできる。
【０１９０】
なお、本発明では、図１，図１０の例からもわかるように、合成映像信号Ｐｍｉｘ０については圧縮処理を行って圧縮合成映像信号Ｐｍｉｘ１とし、記録媒体に記録したり、送信処理するものとしている。
但し、記録媒体の記録容量、通信レート、映像データ量やその他の事情によっては、圧縮（及び伸長）を行わないで、合成映像信号Ｐｍｉｘ０の段階で記録媒体に記録したり、送信処理するシステムも考えられる。
【０１９１】
【発明の効果】
以上の説明から理解されるように本発明によれば、例えば複数の同期した撮像手段で得られた複数のインターレース方式の撮像映像信号などの、同期した複数のインターレース方式の映像信号を、垂直同期タイミングで選択することで１系統のノンインターレース方式の合成映像信号とする。これにより、圧縮手段としては１系統の合成映像信号に対応すればよいものとなる。記録手段、送信手段も同様に、複数系統の映像信号（撮像映像信号）が合成された後、圧縮された圧縮合成映像信号について、記録又は送信を行えばよい。
さらに、記録媒体から再生された、或いは受信された圧縮合成映像信号については、１系統の伸長手段で圧縮を解除し、また映像分配処理として単に垂直同期に基づくタイミング（ｎ系統の映像を合成した合成映像信号であった場合は、そのノンインターレース方式のフレームの１／ｎ期間のタイミング：フィールド単位期間）で選択していくことで、元の複数系統のインターレース方式のフィールドによる映像信号とすることができる。さらに、合成時のフィールド単位での選択によって失われたフィールドについては、補間処理を行えばよい。
さらに、合成処理の際には、単にインターレース方式の複数の映像信号をフィールド毎に選択していけば、そのままノンインターレース方式の１フレームデータとすることができるため、例えばラスタブロック変換などの処理が不要であり、処理回路は簡易化できる。
これらのことから、複数系統の同期した映像信号（撮像映像信号）についての、圧縮、記録、送受信、再生、伸長等の処理を行う各部の構成は非常に簡略化され、従って複数系統の同期した映像信号（撮像映像信号）を同時的に処理する信号処理装置、撮像装置、再生装置、受信装置等において、回路規模の小型化、簡略化、コストダウンを実現することができる。また、記録や送信に関しても、そのデータ量を削減でき、長時間記録や通信速度向上等に好適である。
【０１９２】
また、複数系統の同期したインターレース方式の映像信号（撮像映像信号）を合成した、ノンインターレース方式の合成映像信号は、フレーム内相関、及びフレーム間相関が保たれた信号となる。従って、フレーム内相関やフレーム間相関を利用した圧縮処理が可能となり、圧縮効率が高まると共に高品位な圧縮処理が可能となる。換言すれば、複数の映像信号を合成した映像信号に対する圧縮処理として、単独の映像信号に対する圧縮処理と同等の圧縮が可能となる。
さらに、合成映像信号においては、元の複数の各映像信号の情報はフレーム領域内で上下に分かれているため、元の各映像信号に対して異なった圧縮率で圧縮処理を行うこともできる。
そして異なる圧縮率で圧縮処理可能なことは、圧縮率を異なるようにすることで各映像信号の重要度に合わせた映像を得ることができるようにもなり、多様且つ有効な処理が実行できる。
【図面の簡単な説明】
【図１】本発明の実施の形態の基本的な構成概念の説明図である。
【図２】本発明の実施の形態の合成処理の説明図である。
【図３】本発明の実施の形態の合成処理によるノンインターレース方式の合成映像信号の説明図である。
【図４】本発明の実施の形態の映像分配処理の説明図である。
【図５】本発明の実施の形態におけるフレーム間相関、フレーム内相関の説明図である。
【図６】本発明の実施の形態のビデオカメラの外観の説明図である。
【図７】実施の形態のビデオカメラの使用態様の説明図である。
【図８】実施の形態のビデオカメラの撮像視野角の説明図である。
【図９】実施の形態のビデオカメラを用いたシステム構成の説明図である。
【図１０】実施の形態のビデオカメラの構成のブロック図である。
【図１１】実施の形態のビデオカメラの動作モードの説明図である。
【図１２】実施の形態のビデオカメラの圧縮レート制御態様の説明図である。
【図１３】実施の形態の操作又は指示による圧縮レート切換処理のフローチャートである。
【図１４】実施の形態の音声検査による圧縮レート切換処理のフローチャートである。
【図１５】実施の形態の画像解析による圧縮レート切換処理のフローチャートである。
【図１６】実施の形態の現在位置検出及び方位検出による圧縮レート切換処理のフローチャートである。
【図１７】実施の形態の多数の同期した映像信号の合成の説明図である。
【図１８】複数系統の撮像映像信号を得る撮像装置の説明図である。
【符号の説明】
１  カメラユニット、２ａ  前方カメラ部、２ｂ  後方カメラ部、３ａ  前方マイクロフォン、３ｂ  後方マイクロフォン、５ａ，５ｂ  ＣＣＤ部、１０  コントロールユニット、１１，１２１，１２２  表示部、１２  アンテナ、１３  メモリカードスロット、１８  操作キー、３０  メモリカード、３１  ケーブル、３２  公衆回線、４０  管理局、４１  コントローラ、４２  モニタ部、４３操作部、４４  ストレージ部、４５  リモートアクセスサーバ、４６  メモリカードスロット、５０，１０３  選択部、５１  コントローラ、５２，１０６  記録再生部、５３  通信部、５４，１００  同期信号発生部、５５，１０４  合成部、５６，１０５  圧縮部、５７，１０７  伸長部、５８、１０８  タイミング発生部、５９、１０９  映像分配部、６０，６１、１１１，１１２  補間部、１０１  第１カメラ部、１０２  第２カメラ部、
【図１】
2004320442.tif 000003
【図２】
2004320442.tif 000004
【図３】
2004320442.tif 000005
【図４】
2004320442.tif 000006
【図５】
2004320442.tif 000007
【図６】
2004320442.tif 000008
【図７】
2004320442.tif 000009
【図８】
2004320442.tif 000010
【図９】
2004320442.tif 000011
【図１０】
2004320442.tif 000012
【図１１】
2004320442.tif 000013
【図１２】
2004320442.tif 000014
【図１３】
2004320442.tif 000015
【図１４】
2004320442.tif 000016
【図１５】
2004320442.tif 000017
【図１６】
2004320442.tif 000018
【図１７】
2004320442.tif 000019
【図１８】
2004320442.tif 000020