(57)【要約】【課題】撮影方向に応じて利用目的に合った適切な画像データを生成し、出力もしくは記録することができる撮像装置及び画像処理装置を提供する。【解決手段】撮像装置は、入力画像の撮影方向を示す方向情報を取得する方向情報取得手段と、方向情報取得手段により取得された方向情報から、撮像部１０１が監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定手段とを備える。また、方向判定手段の判定の結果に基づいて、カメラ画像処理部１０２を制御する処理制御手段を備える。各手段は、システム制御部１１０がその機能を有する。【選択図】図１
2009033629.tif 000002
【特許請求の範囲】
【請求項１】
撮像手段と画像処理手段と出力手段とを備える撮像装置において、
入力画像の撮影方向を示す方向情報を取得する方向情報取得手段と、
前記方向情報取得手段により取得された前記方向情報から、前記撮像手段が監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定手段と、
前記方向判定手段の判定の結果に基づいて、前記監視目的の方向に対応づけられた画像処理及び前記観賞目的の方向に対応づけられた画像処理のうち一方の画像処理を実行するように前記画像処理手段を制御する処理制御手段と、
を備えることを特徴とする撮像装置。
【請求項２】
撮像手段と画像処理手段と圧縮符号化手段と出力手段とを備える撮像装置において、
入力画像の撮影方向を示す方向情報を取得する方向情報取得手段と、
前記方向情報取得手段により取得された前記方向情報から、前記撮像手段が監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定手段と、
前記方向判定手段の判定の結果に基づいて、前記監視目的の方向に対応づけられた圧縮符号化及び前記観賞目的の方向に対応づけられた圧縮符号化のうち一方の圧縮符号化を実行するように前記圧縮符号化手段を制御する処理制御手段と、
を備えることを特徴とする撮像装置。
【請求項３】
撮像手段と画像処理手段と圧縮符号化手段と記録手段と出力手段とを備える撮像装置において、
入力画像の撮影方向を示す方向情報を取得する方向情報取得手段と、
前記方向情報取得手段により取得された前記方向情報から、前記撮像手段が監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定手段と、
前記方向判定手段の判定の結果に基づいて、前記圧縮符号化手段の圧縮符号化方式を切り替え、かつ前記記録手段へ記録を行うか否かを切り替える制御を行う処理制御手段と、
を備えることを特徴とする撮像装置。
【請求項４】
撮像手段と画像処理手段と出力手段とを備える撮像装置の制御方法において、
入力画像の撮影方向を示す方向情報を取得する方向情報取得ステップと、
前記方向情報取得ステップにより取得された前記方向情報から、前記撮像手段が監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定ステップと、
前記方向判定ステップの判定の結果に基づいて、前記監視目的の方向に対応づけられた画像処理及び前記観賞目的の方向に対応づけられた画像処理のうち一方の画像処理を実行するように前記画像処理手段を制御する処理制御ステップと、
を備えることを特徴とする撮像装置の制御方法。
【請求項５】
撮像手段と画像処理手段と圧縮符号化手段と出力手段とを備える撮像装置の制御方法において、
入力画像の撮影方向を示す方向情報を取得する方向情報取得ステップと、
前記方向情報取得ステップにより取得された前記方向情報から、前記撮像手段が監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定ステップと、
前記方向判定ステップの判定の結果に基づいて、前記監視目的の方向に対応づけられた圧縮符号化及び前記観賞目的の方向に対応づけられた圧縮符号化のうち一方の圧縮符号化を実行するように前記圧縮符号化手段を制御する処理制御ステップと、
を備えることを特徴とする撮像装置の制御方法。
【請求項６】
撮像手段と画像処理手段と圧縮符号化手段と記録手段と出力手段とを備える撮像装置の制御方法において、
入力画像の撮影方向を示す方向情報を取得する方向情報取得ステップと、
前記方向情報取得ステップにより取得された前記方向情報から、前記撮像手段が監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定ステップと、
前記方向判定ステップの判定の結果に基づいて、前記圧縮符号化手段の圧縮符号化方式を切り替え、かつ前記記録手段へ記録を行うか否かを切り替える制御を行う処理制御ステップと、
を備えることを特徴とする撮像装置の制御方法。
【請求項７】
撮像手段と画像処理手段と出力手段とを備える撮像装置の制御方法をコンピュータに実行させるプログラムにおいて、
前記撮像装置の制御方法は、
入力画像の撮影方向を示す方向情報を取得する方向情報取得ステップと、
前記方向情報取得ステップにより取得された前記方向情報から、前記撮像手段が監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定ステップと、
前記方向判定ステップの判定の結果に基づいて、前記監視目的の方向に対応づけられた画像処理及び前記観賞目的の方向に対応づけられた画像処理のうち一方の画像処理を実行するように前記画像処理手段を制御する処理制御ステップと、
を備えることを特徴とするプログラム。
【請求項８】
撮像手段と画像処理手段と圧縮符号化手段と出力手段とを備える撮像装置の制御方法をコンピュータに実行させるプログラムにおいて、
前記撮像装置の制御方法は、
入力画像の撮影方向を示す方向情報を取得する方向情報取得ステップと、
前記方向情報取得ステップにより取得された前記方向情報から、前記撮像手段が監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定ステップと、
前記方向判定ステップの判定の結果に基づいて、前記監視目的の方向に対応づけられた圧縮符号化及び前記観賞目的の方向に対応づけられた圧縮符号化のうち一方の圧縮符号化を実行するように前記圧縮符号化手段を制御する処理制御ステップと、
を備えることを特徴とするプログラム。
【請求項９】
撮像手段と画像処理手段と圧縮符号化手段と記録手段と出力手段とを備える撮像装置の制御方法をコンピュータに実行させるプログラムにおいて、
前記撮像装置の制御方法は、
入力画像の撮影方向を示す方向情報を取得する方向情報取得ステップと、
前記方向情報取得ステップにより取得された前記方向情報から、前記撮像手段が監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定ステップと、
前記方向判定ステップの判定の結果に基づいて、前記圧縮符号化手段の圧縮符号化方式を切り替え、かつ前記記録手段へ記録を行うか否かを切り替える制御を行う処理制御ステップと、
を備えることを特徴とするプログラム。
【請求項１０】
請求項７乃至９の何れかに記載のプログラムを格納するコンピュータで読み取り可能な記憶媒体。
【請求項１１】
入力された画像データに対して所定の画像処理を施す画像処理手段と、
画像処理した画像データを圧縮符号化する圧縮符号化手段と、
圧縮符号化された画像データを出力もしくは記録媒体に記録する出力・記録手段と、
を備える画像処理装置において、
入力画像の撮影方向を示す方向情報を取得する方向情報取得手段と、
前記方向情報取得手段により取得された前記方向情報から、監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定手段と、
前記方向判定手段の判定の結果に応じて、前記監視目的の方向に対応づけられた動作及び前記観賞目的の方向に対応づけられた動作のうち一方の動作を実行するように、前記画像処理手段、前記圧縮符号化手段、前記出力・記録手段のうち何れか１つ以上を制御するシステム制御手段と、
を備えることを特徴とする画像処理装置。
【請求項１２】
画像データを撮像する撮像手段を備え、
前記画像処理手段は、前記撮像手段から出力された画像データを入力とすることを特徴とする請求項１１記載の画像処理装置。
【請求項１３】
前記システム制御手段は、前記画像処理手段の画像処理パラメータを制御することを特徴とする請求項１または２記載の画像処理装置。
【請求項１４】
前記画像処理パラメータとは、フレームレートであることを特徴とする請求項１３記載の画像処理装置。
【請求項１５】
前記方向判定手段により、撮影方向が前記監視目的の方向を向いていると判定された場合、前記観賞目的の方向を向いていると判定された場合よりもフレームレートを高くすることを特徴とする請求項１３記載の画像処理装置。
【請求項１６】
前記画像処理パラメータとは、ガンマ処理のパラメータであることを特徴とする請求項３に記載の画像処理装置。
【請求項１７】
前記方向判定手段により、撮影方向が前記監視目的の方向を向いていると判定された場合、前記観賞目的の方向を向いていると判定された場合よりも暗部が明るくなるガンマ処理のパラメータを用いてガンマ処理を行うことを特徴とする請求項１６記載の画像処理装置。
【請求項１８】
前記方向判定手段により、撮影方向が前記監視目的の方向を向いていると判定された場合、前記観賞目的の方向を向いていると判定された場合よりも明部の諧調が残るガンマ処理のパラメータを用いてガンマ処理を行うことを特徴とする請求項１６記載の画像処理装置。
【請求項１９】
前記画像処理パラメータとは、色補正のパラメータであることを特徴とする請求項１３記載の画像処理装置。
【請求項２０】
前記方向判定手段により、撮影方向が前記監視目的の方向を向いていると判定された場合、前記観賞目的の方向を向いていると判定された場合よりも彩度、色相の補正を弱くかけることを特徴とする請求項１９記載の画像処理装置。
【請求項２１】
前記画像処理パラメータとは、輪郭強調処理のパラメータであることを特徴とする請求項１３記載の画像処理装置。
【請求項２２】
前記方向判定手段により、撮影方向が前記監視目的の方向を向いていると判定された場合、前記観賞目的の方向を向いていると判定された場合よりも輪郭強調処理を弱くかけることを特徴とする請求項１９記載の画像処理装置。
【請求項２３】
前記画像処理パラメータとは、ノイズ除去処理のパラメータであることを特徴とする請求項１３記載の画像処理装置。
【請求項２４】
前記方向判定手段により、撮影方向が前記監視目的の方向を向いていると判定された場合、前記観賞目的の方向を向いていると判定された場合よりもノイズ除去処理を弱くかけることを特徴とする請求項２３記載の画像処理装置。
【請求項２５】
前記システム制御手段は、前記圧縮符号化処理手段のパラメータを制御することを特徴とする請求項１１または１２記載の画像処理装置。
【請求項２６】
前記圧縮符号化処理のパラメータとは、フレーム内とフレーム間の符号化のピクチャの割合であることを特徴とする請求項１６記載の画像処理装置。
【請求項２７】
前記方向判定手段により、撮影方向が前記監視目的の方向を向いていると判定された場合、前記観賞目的の方向を向いていると判定された場合よりもフレーム内の符号化のピクチャの割合を多くすることを特徴とする請求項２３記載の画像処理装置。
【請求項２８】
前記圧縮符号化処理のパラメータとは、目標ビットレートであることを特徴とする請求項２５記載の画像処理装置。
【請求項２９】
前記方向判定手段により、撮影方向が前記監視目的の方向を向いていると判定された場合、前記観賞目的の方向を向いていると判定された場合よりも目標ビットレートを高くすることを特徴とする請求項２８記載の画像処理装置。
【請求項３０】
前記圧縮符号化処理のパラメータとは、１フレーム内での符号量の割り当てであることを特徴とする請求項２５記載の画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置及び画像処理装置に関し、特に、入力画像の撮影方向情報に基づく各種制御技術に特徴のある撮像装置及び画像処理装置に関する。
【背景技術】
【０００２】
従来、カメラ（カメラ本体）とカメラの回転台とを一体化させたカメラ（カメラシステム）が市販されている。このカメラは、回転台の動作により、水平方向の回転（パン）と垂直方向の回転（チルト）とを合わせて行うことが可能であり、パンチルトカメラと呼ばれている（例えば特許文献１を参照）。
【０００３】
パンチルトカメラの動作例を図１４に示す。図１４（ａ）はカメラの水平方向の動きを示したものである。水平方向の動きとしては、例えば３６０度のエンドレスな回転が可能なものが存在する。また、図１４（ｂ）は、カメラの垂直方向の動きを示したものであり。例えば１８０度回転することが可能である。
【０００４】
このパンチルトカメラは、公共施設の天井等に設置され、コントローラの操作によって、所望の方向を撮影することができる。また、ケーブルやネットワークを介して遠隔地の利用者が制御端末を通じて、カメラで撮影した画像を観賞することや、カメラの動きをコントロールすることが可能である。
【特許文献１】特開平９−２０５５７４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
従来のパンチルトカメラは、公共の施設に設置され、遠隔地の利用者に対して現地のリアルタイムの様子を伝える観賞用途のライブカメラとして、あるいは、遠隔地を監視する監視カメラ等として利用されている。
【０００６】
ここで、観賞用途として例えば風景を撮影する場合も、監視用途として人物等の監視対象を撮影する際も、画像データに対しては同様の処理がされていた。
【０００７】
しかしながら、監視用途と観賞用途では求められる画質やフォーマットが異なっており、従来のカメラでは用途に応じた所望の画像を得ることが困難であった。
【０００８】
例えば、観賞用途の画像データに特に要求される項目として、
（１）見た目として好ましい画像であること、
（２）記録容量を少なくすること、
等が挙げられる。
【０００９】
一方、監視用途の画像データに対しては、
（１）情報が損なわれることなく記録されていること、
（２）記録後にサーチし易いフォーマットになっていること、
等が要求される。
【００１０】
また、同一の場所に固定されたカメラであっても、撮影する方向によって用途が異なることがあり得る。
【００１１】
例えば、通常は屋外の風景を撮影する観賞用途のカメラとして一般に公開されているが、一定時間間隔で監視員が監視目的で室内等を確認する場合がある。このときに、監視員が確認するたびにカメラを監視向けの設定に変更するのは煩雑であった。
【００１２】
本発明の目的は、撮影方向に応じて利用目的に合った適切な画像データを生成し、出力もしくは記録することができる撮像装置及び画像処理装置を提供することにある。
【課題を解決するための手段】
【００１３】
上記目的を達成するために、請求項１記載の撮像装置は、撮像手段と画像処理手段と出力手段とを備える撮像装置において、入力画像の撮影方向を示す方向情報を取得する方向情報取得手段と、前記方向情報取得手段により取得された前記方向情報から、前記撮像手段が監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定手段と、前記方向判定手段の判定の結果に基づいて、前記監視目的の方向に対応づけられた画像処理及び前記観賞目的の方向に対応づけられた画像処理のうち一方の画像処理を実行するように前記画像処理手段を制御する処理制御手段とを備えることを特徴とする。
【００１４】
請求項２記載の撮像装置は、撮像手段と画像処理手段と圧縮符号化手段と出力手段とを備える撮像装置において、入力画像の撮影方向を示す方向情報を取得する方向情報取得手段と、前記方向情報取得手段により取得された前記方向情報から、前記撮像手段が監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定手段と、前記方向判定手段の判定の結果に基づいて、前記監視目的の方向に対応づけられた圧縮符号化及び前記観賞目的の方向に対応づけられた圧縮符号化のうち一方の圧縮符号化を実行するように前記圧縮符号化手段を制御する処理制御手段とを備えることを特徴とする。
【００１５】
請求項３記載の撮像装置は、撮像手段と画像処理手段と圧縮符号化手段と記録手段と出力手段とを備える撮像装置において、入力画像の撮影方向を示す方向情報を取得する方向情報取得手段と、前記方向情報取得手段により取得された前記方向情報から、前記撮像手段が監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定手段と、前記方向判定手段の判定の結果に基づいて、前記圧縮符号化手段の圧縮符号化方式を切り替え、かつ前記記録手段へ記録を行うか否かを切り替える制御を行う処理制御手段とを備えることを特徴とする。
【００１６】
請求項４記載の撮像装置の制御方法は、撮像手段と画像処理手段と出力手段とを備える撮像装置の制御方法において、入力画像の撮影方向を示す方向情報を取得する方向情報取得ステップと、前記方向情報取得ステップにより取得された前記方向情報から、前記撮像手段が監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定ステップと、前記方向判定ステップの判定の結果に基づいて、前記監視目的の方向に対応づけられた画像処理及び前記観賞目的の方向に対応づけられた画像処理のうち一方の画像処理を実行するように前記画像処理手段を制御する処理制御ステップとを備えることを特徴とする。
【００１７】
請求項５記載の撮像装置の制御方法は、撮像手段と画像処理手段と圧縮符号化手段と出力手段とを備える撮像装置の制御方法において、入力画像の撮影方向を示す方向情報を取得する方向情報取得ステップと、前記方向情報取得ステップにより取得された前記方向情報から、前記撮像手段が監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定ステップと、前記方向判定ステップの判定の結果に基づいて、前記監視目的の方向に対応づけられた圧縮符号化及び前記観賞目的の方向に対応づけられた圧縮符号化のうち一方の圧縮符号化を実行するように前記圧縮符号化手段を制御する処理制御ステップとを備えることを特徴とする。
【００１８】
請求項６記載の撮像装置の制御方法は、撮像手段と画像処理手段と圧縮符号化手段と記録手段と出力手段とを備える撮像装置の制御方法において、入力画像の撮影方向を示す方向情報を取得する方向情報取得ステップと、前記方向情報取得ステップにより取得された前記方向情報から、前記撮像手段が監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定ステップと、前記方向判定ステップの判定の結果に基づいて、前記圧縮符号化手段の圧縮符号化方式を切り替え、かつ前記記録手段へ記録を行うか否かを切り替える制御を行う処理制御ステップとを備えることを特徴とする。
【００１９】
請求項７記載のプログラムは、撮像手段と画像処理手段と出力手段とを備える撮像装置の制御方法をコンピュータに実行させるプログラムにおいて、前記撮像装置の制御方法は、入力画像の撮影方向を示す方向情報を取得する方向情報取得ステップと、前記方向情報取得ステップにより取得された前記方向情報から、前記撮像手段が監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定ステップと、前記方向判定ステップの判定の結果に基づいて、前記監視目的の方向に対応づけられた画像処理及び前記観賞目的の方向に対応づけられた画像処理のうち一方の画像処理を実行するように前記画像処理手段を制御する処理制御ステップとを備えることを特徴とする。
【００２０】
請求項８記載のプログラムは、撮像手段と画像処理手段と圧縮符号化手段と出力手段とを備える撮像装置の制御方法をコンピュータに実行させるプログラムにおいて、前記撮像装置の制御方法は、入力画像の撮影方向を示す方向情報を取得する方向情報取得ステップと、前記方向情報取得ステップにより取得された前記方向情報から、前記撮像手段が監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定ステップと、前記方向判定ステップの判定の結果に基づいて、前記監視目的の方向に対応づけられた圧縮符号化及び前記観賞目的の方向に対応づけられた圧縮符号化のうち一方の圧縮符号化を実行するように前記圧縮符号化手段を制御する処理制御ステップとを備えることを特徴とする。
【００２１】
請求項９記載のプログラムは、撮像手段と画像処理手段と圧縮符号化手段と記録手段と出力手段とを備える撮像装置の制御方法をコンピュータに実行させるプログラムにおいて、前記撮像装置の制御方法は、入力画像の撮影方向を示す方向情報を取得する方向情報取得ステップと、前記方向情報取得ステップにより取得された前記方向情報から、前記撮像手段が監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定ステップと、前記方向判定ステップの判定の結果に基づいて、前記圧縮符号化手段の圧縮符号化方式を切り替え、かつ前記記録手段へ記録を行うか否かを切り替える制御を行う処理制御ステップとを備えることを特徴とする。
【００２２】
請求項１０記載のコンピュータで読み取り可能な記憶媒体は、請求項７乃至９の何れか記載のプログラムを格納する。
【００２３】
請求項１１記載の画像処理装置は、入力された画像データに対して所定の画像処理を施す画像処理手段と、画像処理した画像データを圧縮符号化する圧縮符号化手段と、圧縮符号化された画像データを出力もしくは記録媒体に記録する出力・記録手段とを備える画像処理装置において、入力画像の撮影方向を示す方向情報を取得する方向情報取得手段と、前記方向情報取得手段により取得された前記方向情報から、監視目的の方向を向いているか、観賞目的の方向を向いているかを判定する方向判定手段と、前記方向判定手段の判定の結果に応じて、前記監視目的の方向に対応づけられた動作及び前記観賞目的の方向に対応づけられた動作のうち一方の動作を実行するように、前記画像処理手段、前記圧縮符号化手段、前記出力・記録手段のうち何れか１つ以上を制御するシステム制御手段とを備えることを特徴とする。
【発明の効果】
【００２４】
本発明の撮像装置及び画像処理装置によれば、撮影方向に応じて適切な画像データを生成し、出力もしくは記録することが可能となる。
【発明を実施するための最良の形態】
【００２５】
以下、本発明の実施の形態を図面を参照しながら詳細に説明する。
【００２６】
（第１の実施の形態）
本発明を適応できる第１の実施の形態として、撮影方向に応じて、画像処理の方式を変更する撮像装置について説明する。第１の実施の形態について図１乃至図８に基づき説明する。
【００２７】
図１は、本発明の第１の実施の形態に係る撮像装置のブロック図である。
【００２８】
図１において、撮像装置は、レンズ等の光学系及びＣＭＯＳやＣＣＤ等の撮像素子を含む撮像部１０１、撮像された画像データを処理するカメラ画像処理部１０２、画像データを出力する出力部（出力・記録手段構成要素）１０３を備える。また、撮像装置は、システム全体を制御するシステム制御部１１０、パンチルト駆動するパンチルト駆動部１１１を備える。
【００２９】
カメラ画像処理部１０２は、画像データから輝度信号と色信号を生成する輝度・色信号生成部１２１、輪郭強調処理を行う輪郭強調処理部１２２、輝度信号に対してガンマ処理（補正）を施す輝度ガンマ処理部１２３を備える。
【００３０】
また、カメラ画像処理部１０２は、白色のバランスを制御するホワイトバランス処理部１２４、色信号に対してガンマ処理を施す色ガンマ処理部１２５、色差信号（Ｒ−Ｙ、Ｂ−Ｙ）を生成する色差信号生成部１２６を備える。また、カメラ画像処理部１０２は、色再現を補正する色補正処理部１２７、ノイズ成分を除去するノイズ除去処理部１２８を備える。
【００３１】
図２は、図１の撮像装置と外部の情報端末との接続関係を示す図である。
【００３２】
図２において、図１のパンチルト制御可能な撮像装置２０１と、ネットワークを介してＰＣ（Ｐｅｒｓｏｎａｌ  Ｃｏｍｐｕｔｅｒ）等の情報端末２０２（２０２ａ、２０２ｂ、２０２ｃ）が接続されている。
【００３３】
情報端末２０２には、撮像装置２０１と通信するためのアプリケーションソフトがインストールされており、ユーザはアプリケーションソフトを操作することで、撮像装置２０１の各種操作を行うことや、撮像装置２０１で撮影した画像を見ることが可能である。
【００３４】
図３は、図２における撮像装置を操作するアプリケーションの例を示す図である。
【００３５】
図３において、画像表示領域３０１は、撮像装置２０１が出力した画像を表示する。パンチルト制御ボタン３０２は、撮像装置２０１のパンチルトを操作する。ズーム制御ボタン３０３は、撮像装置２０１のズームを制御する。
【００３６】
情報端末２０２は、アプリケーションソフトを通じてユーザによる操作を受け付けると、その操作情報を撮像装置２０１へ送信する。
【００３７】
次に、図１に戻り上記の構成の撮像装置の動作について説明する。
【００３８】
撮像部１０１は、光学系を介した被写体の光学像を撮像素子の撮像面に結像し、画像データを生成する。また、撮像部１０１は、フレームレート（例えば、３０フレーム／秒と６０フレーム／秒）を切り替えることが可能である。生成した画像データは、カメラ画像処理部１０２に出力される。
【００３９】
カメラ画像処理部１０２では、まず輝度・色信号生成部１２１において、輝度信号（Ｙ）と色信号（ＲＧＢ）が生成される。輝度信号に対しては、輪郭強調処理部１２２で輪郭強調処理を行い、輝度ガンマ処理部１２３においてガンマ処理（補正）を行う（これらの処理の詳細は後述する）。
【００４０】
一方、色信号に対しては、ホイトバラスン処理部１２４において、ＲＧＢの信号にゲインをかけ、無彩色の被写体が正しく無彩色に再現できるように補正する。次に、色ガンマ処理部１２５においてガンマ処理を行い、色差信号生成部１２６においてＲＧＢ信号を色差信号（Ｒ−Ｙ、Ｂ−Ｙ）に変換する。色補正処理部１２７は、生成された色差信号に対して色相・彩度を変化させる補正処理を行う。
【００４１】
上記のようにして処理された輝度信号及び色差信号（Ｙ、Ｒ−Ｙ、Ｂ−Ｙ）に対して、ノイズ除去処理部１２８でローパスフィルタ等によるフィルタ処理を行い。画像のノイズ成分を除去する（色補正処理及びノイズ除去の詳細については後述する）。
【００４２】
以上のように処理した画像信号を出力部１０３に出力する。出力部１０３は、外部の情報端末２０２等に画像データを出力する。
【００４３】
システム制御部１１０は、外部からの操作要求に応じて撮像装置全体を制御する。前述のように情報端末２０２から操作要求を受け付けると、システム制御部１１０はパンチルト駆動部１１１を制御する。
【００４４】
パンチルト駆動部１１１は、システム制御部１１０からの制御に基づきパンチルト駆動を行う。即ち、図１４に示したように撮影する方向を変更することが可能である。パンチルト駆動部１１１は、パンチルト駆動した結果、撮像部１０１がどの方向を向いているかという方向情報（撮影方向情報）を取得してシステム制御部１１０へ出力する。
【００４５】
方向情報とは、撮像部１０１の水平・垂直の回転角を示す情報である。システム制御部１１０は取得した方向情報に基づいて、撮像部１０１及びカメラ画像処理部１０２を制御する。
【００４６】
次に、方向情報に基づくシステム制御部１１０の制御について詳細に説明する。
【００４７】
図４は、図１におけるシステム制御部によって実行される方向情報に基づく制御処理の手順を示すフローチャートである。
【００４８】
図４において、ステップＳ４０１では、前述のようにパンチルト駆動部１１１から、入力画像の撮影方向を示す方向情報（撮影方向情報）を取得する（方向情報取得手段）。ここでは説明の簡略化のため、水平方向の回転角のみを方向情報として取得するものとする。
【００４９】
ステップＳ４０２では、方向情報から撮像装置２０１が観賞目的の方向を向いているのか、監視目的の方向を向いているのかを判定する（方向判定手段）。
【００５０】
図５は、図２における撮像装置の水平方向の判定境界を示す図である。
【００５１】
図５において、角度の基準（０°）Ｌ５００、観賞目的の方向と監視目的の方向の境界角度Ｌ５０１（１８０°）及びＬ５０２（３０°）を示している。即ち境界角度Ｌ５０１、Ｌ５０２を基準として３０°〜１８０°の方向を向いているときは監視目的と判断し、０°〜３０°及び１８０°〜３６０°の方向を向いているときは観賞目的と判断する。境界角度Ｌ５０１及びＬ５０２はユーザが情報端末２０２から任意に設定できるものである。
【００５２】
図４に戻り、Ｓ４０３では、上記のようにして判定した方向に基づき分岐する（方向判定手段）。即ち、監視目的の方向を向いていると判断した場合は、対応するステップＳ４０４〜Ｓ４０８の制御を行い（処理制御手段）、観賞目的の方向を向いていると判断した場合は、対応するステップＳ４０９〜Ｓ４１３の制御を行う（処理制御手段）。
【００５３】
ステップＳ４０４またはＳ４０９では、撮像部１０１を制御してフレームレートを変更する。ステップＳ４０２において、監視目的の方向と判定した場合は、ステップＳ４０４において、フレームレートが高くする（例えば６０フレーム／秒）ように設定する。一方、観賞目的の方向と判定した場合は、ステップＳ４０９において、フレームレートが監視と判定した場合よりも低く（例えば３０フレーム／秒）なるように制御する。
【００５４】
このように制御する理由は、監視用途の場合は、高速に移動する物体等を確実に撮影することを重視するためであり、一方、観賞用途の場合は、伝送帯域の負荷を低く抑えることを重視するためである。
【００５５】
ステップＳ４０５またはＳ４１０では、輪郭強調処理部１２２を制御する。輪郭強調処理について簡単に説明する。
【００５６】
図６は、図１における輪郭強調処理部による輝度信号の輪郭強調処理の過程の波形例を示す図である。
【００５７】
図６（ａ）は、輪郭強調の対象となる輝度信号を示す。図６（ａ）に示す輝度信号の高周波成分を増幅して、図６（ｂ）に示すような輪郭補償信号を生成する。図６（ａ）に示す輝度信号に図６（ｂ）に示す輪郭補償信号を加算すると、図６（ｃ）に示すように、輪郭を強調した輝度信号が得られる。
【００５８】
即ち、図６（ｃ）に示す輝度信号は、図６（ａ）に示す元の輝度信号と比較して、波形の立ち上がりと立ち下がりの振幅差が大きくなっており、輪郭が強調されている。
【００５９】
ステップＳ４０３において、監視目的の方向と判定した場合は、ステップＳ４０５において輪郭強調処理をＯＦＦにする。一方、観賞目的の方向と判定した場合は、ステップＳ４１０において輪郭強調処理をＯＮにする。
【００６０】
このように制御する理由は、監視用途の場合は撮影画像に対して後で詳細に解析できるように、できるだけ元の画像データを加工しないことが望まれるが、観賞用途の場合は、見易くなるように輪郭を強調した方が良いと考えられるからである。
【００６１】
ステップＳ４０６またはＳ４１１では、輝度ガンマ処理部１２３を制御して、ガンマ処理の特性を切り替える。
【００６２】
図７は、図１における輝度ガンマ処理部によるガンマ処理の特性図である。
【００６３】
図７のグラフにおいて、横軸が入力信号、縦軸が出力信号を示している。図７の（ａ）、（ｂ）２つのグラフは異なる入出力特性を示している。信号が黒（０％）に近い部分（Ｐ７０１ａ、Ｐ７０１ｂ）においては（ａ）の方が急角度になっている、そのためガンマ処理後の暗部の出力画像としては（ａ）の方が（ｂ）よりも明るく表現される。
【００６４】
一方、信号が白（１００％）に近い部分（Ｐ７０２ａ、Ｐ７０２ｂ）においても（ａ）の方が急角度になっている。そのため、ガンマ処理後の明部の出力画像としては（ａ）の方が諧調を多く割り当てられており、明部の物体を認識し易くなる。逆に（ｂ）の特性は、黒が引き締まり、明部だけでなく中間諧調の再現を重視した特性である。
【００６５】
システム制御部１１０は、ステップＳ４０３において、監視目的と判定した場合は、ステップＳ４０６で、図７の（ａ）の特性のガンマ処理を行う。一方、観賞目的と判定した場合は、ステップＳ４１１で図７の（ｂ）の特性のガンマ処理を行う。
【００６６】
このように制御する理由は、監視用途の場合は、暗部をやや明るくすることで、監視者が暗部に存在する物体や人物等を見つけ易い画像を生成するためである。また、明部にも多くの諧調を割り当てることで、明部にある物体が飽和して情報がなくなってしまうことを防ぐためである。一方、観賞用途の場合は、暗部を引き締め、中間諧調に多くの諧調を割り当てることで、見た目として好ましい画像特性とするためである。
【００６７】
ステップＳ４０７またはＳ４１２では、色補正処理部１２７を制御して色再現の特性を変更する。
【００６８】
図８は、図１における色補正処理部による色補正の特性図である。
【００６９】
具体的には、図８は、色差（Ｒ−Ｙ、Ｂ−Ｙ）平面を示すベクトル図である。例として、基準となるカラーバーのチャートを撮影した場合について説明する。カラーバーの有彩色６色（赤、黄、青、緑、マゼンタ、シアン）８０１ａ乃至８０１ｆが示してある。
【００７０】
図８（ａ）は、色補正処理部１２７への入力信号を示している。図８（ｂ）は、色補正後の色信号を示している。図８（ｂ）では（ａ）と比較して、色相及び彩度を変更している。具体的には、見た目に好ましくなるように全体に彩度を上げ鮮やかにし、赤８０１ａの色相をαからβへ変更している。
【００７１】
システム制御部１１０はステップＳ４０３において、監視目的の方向と判定した場合は、ステップＳ４０７において色補正処理をＯＦＦにする。一方、観賞目的の方向と判定した場合は、ステップＳ４１２において色補正処理をＯＮにする。
【００７２】
このように制御する理由は、監視用途の場合は、例えば、不審な物体の色を正確に見分けるため被写体の色をできるだけ実物に忠実に再現することが望まれるが、観賞用途の場合は、より好ましくなるように色を強調した方が良いと考えられるためである。
【００７３】
ステップＳ４０８またはＳ４１３では、ノイズ除去処理部１２８を制御する。ノイズ除去処理部１２８では、画像の空間的、時間的な高周波成分を除去するローパスフィルタ処理を行う。
【００７４】
ステップＳ４０３において、監視目的の方向と判定した場合は、ステップＳ４０８においてノイズ除去処理をＯＦＦにする。一方、観賞目的の方向と判定した場合は、ステップＳ４１３においてノイズ除去処理をＯＮにする。
【００７５】
このように制御する理由は、監視用途の場合は、記録後の画像を詳細に解析できるようにノイズ除去による信号の変化を防ぐためである。一方、観賞用途の場合は、見た目に好ましくなるようにノイズを除去した方が良いと考えられるため、ノイズ除去処理をＯＮにする。
【００７６】
上記のように、システム制御部１１０は、入力画像の撮影方向情報に基づきカメラ画像処理部１０２の画像処理パラメータを制御し、画像データを生成する。生成された画像データは出力部１０３へ出力され、出力部１０３から外部の情報端末２０２に出力される。
【００７７】
以上説明したように、本実施の形態における撮像装置（画像処理装置）は、カメラ画像処理部１０２と、撮影方向情報を取得するバンチルト駆動部１１１及びその撮影方向情報を入力するシステム制御部１１０を備える。そして、撮影方向に応じてカメラ画像処理部１０２を制御する構成とした。
【００７８】
このように構成することで、撮像装置２０１が監視目的の方向を向いている場合は、暗部や明部にある被写体が見易くなるように処理するとともに、余分な画像処理を防ぐことで、後で詳細に解析可能な画像を出力することが可能となる。
【００７９】
一方、撮像装置２０１が観賞目的の方向を向いている場合は、輪郭強調や色補正等の各種処理を行うことで、観賞用途として見た目に好ましい画像を生成することが可能となる。
【００８０】
尚、上記システムでは、システム制御部１１０は方向情報に応じて、撮像部１０１及びカメラ画像処理部１０２を制御していたが、上記に加えて出力部１０３を制御する構成をとることも可能である。
【００８１】
例えば、監視目的の方向を撮影していると判定した場合には、不特定多数のユーザに画像を出力しないように制限してもよい。例えば、図２の情報端末２０２ａだけに画像を出力し、情報端末２０２ｂ、２０２ｃには出力しないような制限を加えることも可能である。
【００８２】
また、上記例では、図２に示した情報端末２０２ａ〜２０２ｃの３台が接続される場合を例に示したが、接続可能な情報端末２０２の数はこの台数に限定したものでない。また、情報端末２０２がネットワークを介して接続されている場合を例に説明したが、有線ケーブル等、他の手段を利用して接続している構成をとることも可能である。
【００８３】
また、上記例では、システム制御部１１０が撮像部１０１及びカメラ画像処理部１０２の各処理（輪郭強調、ガンマ色補正、ノイズ除去）、出力部１０３をすべて制御する場合について説明した。しかし、これらの処理のうちどれか一部だけを制御する構成をとることも可能である。
【００８４】
また、上記例では、監視目的の方向と判定した場合は、輪郭強調及び色補正、ノイズ除去をＯＦＦする場合を例に説明したが、完全にＯＦＦにしなくともよい。この場合、観賞目的の方向と判定した場合よりも、各補正を弱めにかける。これにより、余分な画像処理を防ぎ、監視目的として劣化の少ない画像を得ることが可能となる。
【００８５】
また、上記例では、パンチルト駆動部１１１と撮像装置が一体となった装置を例に説明したが、雲台に撮像装置を設置し、雲台から方向情報を取得する等、方向情報を取得できればどのような形態で実現しても差し支えない。
【００８６】
また、上記例では、説明の簡略化のために、水平の方向のみを利用する例について説明したが、垂直方向も加味して、監視目的の方向と観賞目的の方向を判定する構成をとることも可能である。
【００８７】
（第２の実施の形態）
本発明を適応できる第２の実施の形態として、撮影方向に応じて、圧縮符号化の制御を変更する撮像装置について説明する。
【００８８】
図９は、本発明の第２の実施の形態に係る撮像装置のブロック図である。
【００８９】
第２の実施の形態に係る撮像装置は、撮影した画像をＭＰＥＧ２方式で圧縮符号化して出力する。この撮像装置は、図２に示すように外部の情報端末２０２と接続されている点は第１の実施の形態の撮像装置と同様である。本実施の形態の撮像装置は、第１の実施の形態の撮像装置に加えて圧縮符号化処理を行う圧縮符号化部９０４を備え、方向情報に基づき圧縮符号化部９０４を制御する点が第１の実施の形態の撮像装置と異なる。
【００９０】
図９において、撮像部１０１、カメラ画像処理部１０２、出力部１０３、パンチルト駆動部１１１は、第１の実施の形態と同じである。本実施の形態では、画像データをＭＰＧＥ２方式で圧縮符号化する圧縮符号化部９０４と、第１の実施の形態とは機能が異なるシステム制御部９１０を備える。
【００９１】
圧縮符号化部９０４は、画像データを蓄積し並び替えを行うための画像フレームバッファ９２１、入力画像とローカルデコード画像の差分をとる減算部９２２、画像データの特徴を抽出する特徴抽出部９２３、ＤＣＴ変換部９２４、量子化部９２５を備える。また、圧縮符号化部９０４は、逆量子化部９２６、逆ＤＣＴ変換部９２７、動き予測・補償部９２８、可変長符号化部９２９、出力バッファ９３０、量子化制御部９３１を備える。
【００９２】
次に上記構成の撮像装置の動作について説明する。
【００９３】
撮像部１０１は、被写体画像データを生成し、カメラ画像処理部１０２において画像処理を行う動作は第１の実施の形態と同様のため詳細な説明は省略する。
【００９４】
カメラ画像処理部１０２は、画像データを画像フレームバッファ９２１に出力し、画像フレームバッファ９２１に画像データが蓄積される。画像フレームバッファ９２１はピクチャタイプに応じて符号化する順番に画像フレームの並べ替えを行う。
【００９５】
ここで、符号化ピクチャタイプについて説明する。ＭＰＥＧ２方式では画像データはＩ、Ｐ、Ｂの３種類のピクチャタイプで符号化される。Ｉピクチャは、１フレーム内の情報のみで符号化され、ＰピクチャはＩまたはＰピクチャからの予測を行うことで符号化され、Ｂピクチャは双方向予測によって符号化される画像である。
【００９６】
Ｂピクチャは、時間的に後のピクチャを参照するために、符号化順としては参照するピクチャが符号化された後になる。符号化順に並び替えられた画像は、所定の大きさを有する小領域であるマクロブロック単位に分割され、Ｉピクチャの場合はＤＣＴ変換部９２４へ、Ｂ及びＰピクチャの場合は減算部９２２へ出力される。
【００９７】
減算部９２２は、後述するフレーム間予測による予測画像と現画像との差分をとり、差分画像をＤＣＴ変換部９２４へ出力する。ＤＣＴ変換部９２４では、ＤＣＴブロック単位にＤＣＴ変換を行い、周波数成分に変換する。
【００９８】
量子化部９２５では、入力された周波数成分のデータを後述する量子化パラメータに応じて量子化する。量子化部９２５において量子化した画像データは、可変長符号化部９２９及びローカルデコードするため逆量子化部９２６へ出力する。
【００９９】
可変長符号化部９２９では、出現頻度がより高いデータに対して、より短い符号を割り当てるように可変長符号化し、出力バッファ９３０に一旦蓄積した後、符号化データとして出力する。
【０１００】
一方、逆量子化部９２６では、量子化部９２５で量子化した画像データを逆量子化し、周波数成分に復号化する。逆ＤＣＴ変換部９２７では、周波数成分の画像データを逆直交変換によって、予測誤差画像（差分画像）に復号する。
【０１０１】
動き予測・補償部９２８は、ローカルデコード画像から、入力画像と差分が最も小さい参照画像をサーチし、動きベクトルを算出する。また、動きベクトル及び参照方向情報で示される演算を行い、動き補償画像を減算部９２２に出力する。
【０１０２】
特徴抽出部９２３は、マクロブロック毎の画像データの複雑度を算出し、複雑度情報を量子化制御部９３１へ出力する。量子化制御部９３１は、出力バッファ９３０を監視することにより、符号量を把握し、目標ビットレートに合わせた量子化パラメータ（量子化スケール）を決定している。
【０１０３】
この量子化スケールを大きくすると、荒く量子化し（符号量を少なく割り当てる）、小さくすると細かく量子化する（符号量を多く割り当てる）ことが可能である。
【０１０４】
また、符号量制御で決められた量子化スケールを、特徴抽出部９２３から出力される複雑度に応じて補正する。具体的には、複雑度が高い絵柄は劣化が目立ちにくいため、量子化スケールが大きくなるように補正する。一方、複雑度が低い平坦部等の絵柄は劣化が目立ち易いため、符号量を多く割り当てるように補正する。
【０１０５】
以上が、圧縮符号化部９０４における基本的な動作の流れである。本実施の形態ではシステム制御部９１０が、撮影方向情報に基づき圧縮符号化部９０４を制御する。
【０１０６】
パンチルト駆動部１１１の動作は第１の実施の形態と同じであり、撮影方向情報をシステム制御情報９１０に出力する。システム制御部９１０は、撮影方向情報に基づき圧縮符号化部９０４を制御する。システム制御部９１０が制御する処理の流れについて図１０を用いて説明する。
【０１０７】
図１０は、図９におけるシステム制御部によって実行される方向情報に基づく制御処理の手順を示すフローチャートである。
【０１０８】
図１０において、ステップＳ１００１では、第１の実施の形態と同様にパンチルト駆動部１１１から方向情報を取得する。ステップＳ１００２では、方向情報から撮像装置が観賞目的の方向を向いているのか、監視目的の方向を向いているのかを判定する。これも第１の実施の形態と同様である。
【０１０９】
Ｓ１００３では、上記のようにして判定した方向に基づき分岐する。監視目的の方向を向いていると判定した場合は、ステップＳ１００４、Ｓ１００５の制御を行い、観賞目的の方向を向いていると判定した場合は、ステップＳ１００６、Ｓ１００７の制御を行う。
【０１１０】
ステップＳ１００４またはＳ１００６では、ピクチャタイプを制御する。ステップＳ１００３において、監視目的の方向と判定した場合は、ステップＳ１００４において、Ｉピクチャのみを用いて符号化する。
【０１１１】
図１１は、図９における圧縮符号化部による符号化時のピクチャの構成例を示す図である。
【０１１２】
図１１において（ａ）はＩピクチャのみで符号化する例である。一方、観賞目的の方向と判定した場合はステップＳ１００６において、Ｉ、Ｂ、Ｐのピクチャを用いて符号化する。ＩＢＰピクチャを用いて符号化する場合の構成例は図１１（ｂ）のようになる。
【０１１３】
このように、ピクチャタイプの構成を変更する理由について説明する。双方向予測を用いるＢピクチャはバッファリングの必要があるため遅延が生じる。また、フレーム間予測を用いると参照関係が複雑になるため、サーチ速度を低下させる原因にもなる。
【０１１４】
そのため、監視目的の場合は、リアルタイム性と、サーチ速度を重視するためフレーム内符号化であるＩピクチャのみで符号化する。一方、観賞目的の場合は、符号化効率を重視するためＢ及びＰピクチャを用いて符号化する。
【０１１５】
次に、ステップＳ１００５またはＳ１００７では目標ビットレートを制御する。ステップＳ１００３において、監視目的の方向と判定した場合は、ステップＳ１００５において、目標ビットレートを相対的に高くなるように設定する。一方、観賞目的の方向と判定した場合は、ステップＳ１００７において、目標ビットレートを相対的に低くなるように設定する。
【０１１６】
即ち、ステップ監視目的の方向と判定した場合のビットレートをＢ１、観賞目的の方向と判定した場合のビットレートをＢ２とすると、Ｂ１＞Ｂ２、となるように目標ビットレートを制御する。
【０１１７】
目標ビットレートを高くすることで、量子化制御部９３１で設定する量子化スケールが小さくなり、結果として発生する符合量は多くなるが劣化の少ない画像が得られる。
【０１１８】
上記のようにして、システム制御部９１０は、圧縮符号化部９０４を制御し、圧縮符号化された画像データは出力部１０３へ出力される。出力部１０３は外部の情報端末２０２等に対して符号化された画像データを出力する。
【０１１９】
以上説明したように、本実施の形態における撮像装置（画像処理装置）は、画像を圧縮符号化処理する圧縮符号化部９０４と、撮影方向情報を取得するバンチルト駆動部１１１及びその撮影方向情報を入力するシステム制御部１１０を備える。そして、撮影方向に応じて圧縮符号化部９０４を制御する構成とした。
【０１２０】
ここで、圧縮符号化処理のパラメータとは、フレーム内とフレーム間の符号化のピクチャの割合である。また、圧縮符号化処理のパラメータとは目標ビットレートである。
【０１２１】
撮像装置が監視目的の方向を向いている場合は、Ｉピクチャのみで符号化することで、後からサーチし易く、また双方向予測を使わないため遅延のない出力を可能とした。また、観賞目的の方向を向いている場合は、ＩＢＰピクチャを用いることで発生符号量を低減させることが可能となる。
【０１２２】
また、撮像装置が監視目的の方向を向いている場合は、観賞目的の方向を向いている場合と比較して目標ビットレートを上げることで、被写体の劣化が少ない画像データを生成することが可能となる。その結果、監視用途として劣化が少なく、詳細に解析できる画像を得ることが可能となる。
【０１２３】
尚、上記システムでは、システム制御部９１０が撮影方向に応じてピクチャタイプ及び目標ビットレートを共に制御する例について説明したが、ピクチャタイプまたは目標ビットレートどちらかだけを制御する構成をとることも可能である。
【０１２４】
また、システム制御部９１０が制御する処理は、ピクチャタイプ及び目標ビットレートに限定するものではない。撮影方向に応じて量子化制御部９３１を制御する処理を加えることも可能である。
【０１２５】
例えば、特徴抽出部９２３において、処理対象のマクロブロックが人物の顔を含んでいるか（または人物の顔の一部であるか）を判断する。撮影方向が監視目的の方向を向いている場合は、人物の顔を含むマクロブロックにより多くの符号量を割り当てるように（量子化ステップを小さくする）量子化制御部９３１を制御する。
【０１２６】
これにより、監視目的の方向を向いている場合は、人物の顔が符号化により劣化することを抑えることが可能となり、後で撮影画像から不審人物等を探す場合等に有効となる。
【０１２７】
また、上記例では、ピクチャタイプを制御する際に、監視目的の方向を向いている場合は、Ｉピクチャのみで符号化する制御を例に説明した。しかし、遅延を少なくすることを目的とするのであれば、遅延の大きな原因となる双方向予測のＢピクチャだけを利用せず、Ｉピクチャ及びＰピクチャを用いて符号化する構成をとることも可能である。
【０１２８】
また、上記例では、システム制御部９１０が圧縮符号化部９０４のみを制御する場合を例に説明したが、第１の実施の形態と同様に、撮影方向に応じてカメラ画像処理部１０２を制御することも可能である。
【０１２９】
（第３の実施の形態）
本発明を適応できる第３の実施の形態として、撮影方向に応じて、圧縮符号化の方式と記録制御を変更する撮像装置について説明する。
【０１３０】
図１２は、本発明の第３の実施の形態に係る撮像装置のブロック図である。
【０１３１】
第３の実施の形態に係る撮像装置は、図２で示すように、外部の情報端末２０２と接続されている点は第１の実施の形態、第２の実施の形態と同様である。本実施の形態は、複数方式の圧縮符号化手段を備え、方向情報に基づき圧縮符号化方式を切り替える点が第２の実施の形態と異なる。
【０１３２】
図１２において、撮像部１０１、カメラ画像処理部１０２、出力部１０３、パンチルト駆動部１１１は、第１の実施の形態と同じである。本実施の形態の撮像装置は、さらに、画像データを圧縮符号化する圧縮符号化部１２０４、ハードディスクドライブ等の画像データを蓄積する記録部（出力・記録手段構成要素）１２０５、システム全体を制御するシステム制御部１２１０を備える。
【０１３３】
圧縮符号化部１２０４は、ＭｏｔｉｏｎＪＰＥＧ方式で圧縮するＭｏｔｉｏｎＪＰＥＧ圧縮部１２２１及び画像データをＭＰＥＧ２方式で圧縮符号化するＭＰＥＧ２圧縮部１２２２から構成されている。
【０１３４】
次に、上記構成の撮像装置の動作について説明する。
【０１３５】
撮像部１０１において被写体画像データを生成し、カメラ画像処理部１０２において画像処理を行う動作は、第１の実施の形態と同様のため詳細な説明は省略する。
【０１３６】
カメラ画像処理部１０２で処理された画像データは、圧縮符号化部１２０４へ入力される。圧縮符号化部１２０４は、ＭｏｔｉｏｎＪＰＥＧ方式もしくはＭＰＥＧ２方式で画像データを圧縮符号化し、出力部１０３及び記録部１２０５へ出力する。出力部１０３は外部の情報端末２０２等に対して画像データを出力する。記録部１２０５は、画像データを蓄積（記録）する。
【０１３７】
パンチルト駆動部１１１の動作は、第１の実施の形態と同じであり、撮影の方向情報をシステム制御部１２１０に出力する。システム制御部１２１０は、撮影の方向情報に基づき圧縮符号化部９０４及び記録部１２０５を制御する。システム制御部１２１０の処理の流れについて図１３を用いて説明する。
【０１３８】
図１３は、図１２におけるシステム制御部によって実行される方向情報に基づく制御処理の手順を示すフローチャートである。
【０１３９】
図１３において、ステップＳ１３０１では、第１の実施の形態と同様に、パンチルト駆動部１１１から方向情報を取得する。ステップＳ１３０２で、方向情報から撮像装置が観賞目的の方向を向いているのか、監視目的の方向を向いているのかを判定する点も第１の実施の形態と同様である。
【０１４０】
Ｓ１３０３では、上記のようにして判定した方向に基づき分岐する。監視目的の方向を向いていると判定した場合は、ステップＳ１３０４、Ｓ１３０５の制御を行い、観賞目的の方向を向いていると判定した場合は、ステップＳ１３０６、Ｓ１３０７の制御を行う。
【０１４１】
ステップＳ１３０４またはＳ１３０６では、撮影方向に応じて圧縮符号化部１２０４の符号化方式を切り替える。ステップＳ１３０３において、監視目的の方向と判定した場合は、ステップＳ１３０４において、ＭｏｔｉｏｎＪＰＥＧ方式を用いて圧縮符号化する。ＭｏｔｉｏｎＪＰＥＧ方式は、動画像の各フレームがＪＰＥＧ形式で圧縮されており、フレーム間の相関を利用していないという特徴がある。
【０１４２】
一方、ステップＳ１３０３において、観賞目的の方向と判定した場合は、ステップＳ１３０６において、ＭＰＥＧ２方式を用いて圧縮符号化する。ＭＰＥＧ２方式は、第２の実施の形態で説明した圧縮符号化部９０４と同様のものであり、フレーム間の相関を利用して画像データを圧縮符号化する。
【０１４３】
ステップＳ１３０５またはＳ１３０７では、撮影方向に応じて記録部１２０５を切り替える。ステップ１３０３において、監視目的の方向と判定した場合は、ステップＳ１３０５において、記録部１２０５が撮影中、常に記録媒体に画像データを記録するように記録部１２０５を制御する。
【０１４４】
また、ステップＳ１３０３において、観賞目的の方向と判定した場合は、ステップＳ１３０７において、利用者等から記録の要求があった場合のみ、記録媒体に画像データの記録を行うように記録部１２０５を制御する。
【０１４５】
以上説明したように、本実施の形態における撮像装置（画像処理装置）は、画像を圧縮符号化する圧縮符号化部１２０４と、撮影方向情報を取得するバンチルト駆動部１１１及びその撮影方向情報を入力するシステム制御部１１０を備える。そして、撮影方向に応じて圧縮符号化方式を切り替える構成とした。
【０１４６】
撮像装置が監視目的の方向を向いている場合は、フレーム間相関を利用しないＭｏｔｉｏｎＪＰＥＧ方式で符号化した。これにより、後からサーチし易く、また双方向予測を使わないため遅延のない形式での出力を可能とした。また、観賞目的の方向を向いている場合は、フレーム間相関を利用するＭＰＥＧ２方式で符号化した。これにより、監視目的の場合よりも符号化効率を向上させること可能となる。
【０１４７】
また、撮像装置が監視目的の方向を向いている場合は、常に記録媒体（記録部１２０５）に画像データを記録する構成とすることで、監視目的の場合に重要な被写体の記録漏れを防ぐことが可能となる。
【０１４８】
尚、上記説明では、システム制御部１２１０が圧縮符号化部１２０４及び記録部１２０５を共に制御する構成としたが、どちらか一方のみを制御する構成をとることも可能である。
【０１４９】
また、上記説明では、フレーム間相関を利用しない圧縮符号化方式としてＭｏｔｉｏｎＪＰＥＧを例に説明したが、フレーム間相関を利用しない方式であれば、ＭｏｔｉｏｎＪＰＥＧ２０００や、ＤＶ方式等他の方式を利用しても構わない。また、フレーム間相関を利用する形式もＭＰＥＧ２方式に限定するものではなく、Ｈ．２６４やＶＣ１方式等を利用しても構わない。
【０１５０】
また、本発明の目的は、以下の処理を実行することによって達成される。即ち、上述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体を、システム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）が記憶媒体に格納されたプログラムコードを読み出す処理である。
【０１５１】
この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施の形態の機能を実現することになり、そのプログラムコード及び該プログラムコードを記憶した記憶媒体は本発明を構成することになる。
【０１５２】
また、プログラムコードを供給するための記憶媒体としては、次のものを用いることができる。例えば、フロッピー（登録商標）ディスク、ハードディスク、光磁気ディスク、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＤＶＤ−ＲＷ、ＤＶＤ＋ＲＷ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等である。または、プログラムコードをネットワークを介してダウンロードしてもよい。
【０１５３】
また、コンピュータが読み出したプログラムコードを実行することにより、上記実施の形態の機能が実現される場合も本発明に含まれる。加えて、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯＳ（オペレーティングシステム）等が実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれる。
【０１５４】
更に、前述した実施形態の機能が以下の処理によって実現される場合も本発明に含まれる。即ち、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれる。その後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行う場合である。
【図面の簡単な説明】
【０１５５】
【図１】本発明の第１の実施の形態に係る撮像装置のブロック図である。
【図２】図１の撮像装置と外部の情報端末との接続関係を示す図である。
【図３】図２における撮像装置を操作するアプリケーションの例を示す図である。
【図４】図１におけるシステム制御部によって実行される方向情報に基づく制御処理の手順を示すフローチャートである。
【図５】図２における撮像装置の水平方向の判定境界を示す図である。
【図６】図１における輪郭強調処理部による輝度信号の輪郭強調処理の過程の波形例を示す図である。
【図７】図１における輝度ガンマ処理部によるガンマ処理の特性図である。
【図８】図１における色補正処理部による色補正の特性図である。
【図９】本発明の第２の実施の形態に係る撮像装置のブロック図である。
【図１０】図９におけるシステム制御部によって実行される方向情報に基づく制御処理の手順を示すフローチャートである。
【図１１】図９における圧縮符号化部による符号化時のピクチャの構成例を示す図である。
【図１２】本発明の第３の実施の形態に係る撮像装置のブロック図である。
【図１３】図１２におけるシステム制御部によって実行される方向情報に基づく制御処理の手順を示すフローチャートである。
【図１４】パンチルトカメラの動きを示す図である。
【符号の説明】
【０１５６】
１０１  撮像部
１０２  カメラ画像処理部
１０３  出力部
１１０  システム制御部
１１１  パンチルト駆動部
１２１  輝度・色信号生成部
１２２  輪郭強調処理部
１２３  輝度ガンマ処理部
１２４  ホワイトバランス処理部
１２５  色ガンマ処理部
１２６  色差信号生成部
１２７  色補正処理部
１２８  ノイズ除去処理部
【図１】
2009033629.tif 000003
【図２】
2009033629.tif 000004
【図３】
2009033629.tif 000005
【図４】
2009033629.tif 000006
【図５】
2009033629.tif 000007
【図６】
2009033629.tif 000008
【図７】
2009033629.tif 000009
【図８】
2009033629.tif 000010
【図９】
2009033629.tif 000011
【図１０】
2009033629.tif 000012
【図１１】
2009033629.tif 000013
【図１２】
2009033629.tif 000014
【図１３】
2009033629.tif 000015
【図１４】
2009033629.tif 000016