(57)【特許請求の範囲】
【請求項１】
画像データから目的物の位置を検出する目的物検出部と、
前記目的物検出部により検出された目的物が現在の高画質化領域に収まっている場合には、画像データ上の高画質化を行う領域に関する情報の更新は不要と判断し、当該検出された目的物が現在の高画質化領域に収まっていない場合には、前記目的物検出部により検出された目的物の位置に基づいて、前記画像データ上の高画質化を行う領域に関する情報を更新し、この更新された、画像データ上の高画質化を行う領域に関する情報を、保持する高画質化領域更新部と、
前記高画質化領域更新部により更新された、画像データ上の高画質化を行う領域に関する情報に基づいて、前記画像データ上の前記高画質化を行う領域に対して、高画質化を行う高画質化部と
を備えた動画像処理装置。
【請求項２】
画像データから目的物の位置を検出する目的物検出部と、
前記目的物検出部により検出された目的物の位置に基づいて、前記画像データ上の高画質化を行う領域に関する情報を更新する高画質化領域更新部と、
前記高画質化領域更新部により更新された情報に基づいて、前記画像データ上の前記高画質化を行う領域に対して、高画質化を行う高画質化部と
を備え、
前記高画質化を行う領域に関する情報は、高画質化を行う位置を示す情報であり、
前記高画質化領域更新部は、
前記目的物の位置及びサイズ、前記高画質化を行う位置に基づいて、重み係数を生成する重み係数生成部と、
前記目的物の位置、前記高画質化を行う位置、及び前記重み係数生成部により生成された重み係数に基づいて、当該高画質化を行う位置を更新する位置情報更新部とを有し、
前記高画質化部は、前記位置情報更新部により更新された高画質化を行う位置、及び予め設定された高画質化を行うサイズから、前記高画質化を行う領域を求め、
前記重み係数生成部は、
前記目的物の位置を、予め設定された基準位置と比較する位置比較部と、
前記目的物のサイズを、予め設定された基準サイズと比較するサイズ比較部と、
前記目的物の位置及びサイズから求めた前記画像データ上の領域を、前記高画質化を行う位置、及び予め設定された前記高画質化を行うサイズから求めた前記高画質化を行う領域と比較する領域比較部と、
前記位置比較部、前記サイズ比較部及び前記領域比較部による比較結果に基づいて、前記重み係数を決定する重み係数決定部とを有する
ことを特徴とする動画像処理装置。
【請求項３】
画像データから目的物の位置を検出する目的物検出部と、
前記目的物検出部により検出された目的物の位置に基づいて、前記画像データ上の高画質化を行う領域に関する情報を更新する高画質化領域更新部と、
前記高画質化領域更新部により更新された情報に基づいて、前記画像データ上の前記高画質化を行う領域に対して、高画質化を行う高画質化部と、
前記画像データから、前記目的物が当該画像データ上に現れる予兆である事前動作を検出する事前動作検出部と、
前記事前動作検出部による検出結果に基づいて、前記高画質化部で高画質化を行うタイミングを決定するタイミング制御部とを備え、
前記高画質化部は、前記タイミング制御部によるタイミングに従い高画質化を行う
ことを特徴とする動画像処理装置。
【請求項４】
画像データから目的物の位置を検出する目的物検出部と、
前記目的物検出部により検出された目的物の位置に基づいて、前記画像データ上の高画質化を行う領域に関する情報を更新する高画質化領域更新部と、
前記高画質化領域更新部により更新された情報に基づいて、前記画像データ上の前記高画質化を行う領域に対して、高画質化を行う高画質化部と、
前記目的物が前記画像データ上に現れる予兆である事前動作の検出結果を示す情報を受信する事前動作検出情報受信部と、
前記事前動作検出情報受信部による受信結果に基づいて、前記高画質化部で高画質化を行うタイミングを決定するタイミング制御部とを備え、
前記高画質化部は、前記タイミング制御部によるタイミングに従い高画質化を行う
ことを特徴とする動画像処理装置。
【請求項５】
前記目的物検出部は、画像データから目的物のサイズを検出し、
前記高画質化領域更新部は、前記目的物検出部により検出された目的物の位置及びサイズに基づいて、前記画像データ上の高画質化を行う領域に関する情報を更新する
ことを特徴とする請求項１から４のうちのいずれか１項記載の動画像処理装置。
【請求項６】
前記高画質化部は、高画質化の実施をＯＮ又はＯＦＦに切替え可能に構成された
ことを特徴とする請求項１から請求項５のうちのいずれか１項記載の動画像処理装置。
【請求項７】
前記高画質化を行う領域は、複数の領域から成る
ことを特徴とする請求項１から請求項６のうちのいずれか１項記載の動画像処理装置。
【請求項８】
対象領域を撮影する監視撮影部と、
前記監視撮影部により撮影された画像データから、目的物の位置を検出する目的物検出部と、
前記目的物検出部により検出された目的物の位置に基づいて、前記画像データ上の高画質化を行う領域に関する情報を更新する高画質化領域更新部と、
前記高画質化領域更新部により更新された情報に基づいて、前記画像データ上の前記高画質化を行う領域に対して、高画質化を行う高画質化部と
を備え、
前記高画質化を行う領域に関する情報は、高画質化を行う位置を示す情報であり、
前記高画質化領域更新部は、
前記目的物の位置及びサイズ、前記高画質化を行う位置に基づいて、重み係数を生成する重み係数生成部と、
前記目的物の位置、前記高画質化を行う位置、及び前記重み係数生成部により生成された重み係数に基づいて、当該高画質化を行う位置を更新する位置情報更新部とを有し、
前記高画質化部は、前記位置情報更新部により更新された高画質化を行う位置、及び予め設定された高画質化を行うサイズから、前記高画質化を行う領域を求め、
前記重み係数生成部は、
前記目的物の位置を、予め設定された基準位置と比較する位置比較部と、
前記目的物のサイズを、予め設定された基準サイズと比較するサイズ比較部と、
前記目的物の位置及びサイズから求めた前記画像データ上の領域を、前記高画質化を行う位置、及び予め設定された前記高画質化を行うサイズから求めた前記高画質化を行う領域と比較する領域比較部と、
前記位置比較部、前記サイズ比較部及び前記領域比較部による比較結果に基づいて、前記重み係数を決定する重み係数決定部とを有する
ことを特徴とする監視システム。
【請求項９】
対象領域を撮影する監視撮影部と、
前記監視撮影部により撮影された画像データから、画像データから目的物の位置を検出する目的物検出部と、
前記目的物検出部により検出された目的物の位置に基づいて、前記画像データ上の高画質化を行う領域に関する情報を更新する高画質化領域更新部と、
前記高画質化領域更新部により更新された情報に基づいて、前記画像データ上の前記高画質化を行う領域に対して、高画質化を行う高画質化部と、
前記画像データから、前記目的物が当該画像データ上に現れる予兆である事前動作を検出する事前動作検出部と、
前記事前動作検出部による検出結果に基づいて、前記高画質化部で高画質化を行うタイミングを決定するタイミング制御部とを備え、
前記高画質化部は、前記タイミング制御部によるタイミングに従い高画質化を行う
ことを特徴とする監視システム。
【請求項１０】
対象領域を撮影する監視撮影部と、
前記監視撮影部により撮影された画像データから、画像データから目的物の位置を検出する目的物検出部と、
前記目的物検出部により検出された目的物の位置に基づいて、前記画像データ上の高画質化を行う領域に関する情報を更新する高画質化領域更新部と、
前記高画質化領域更新部により更新された情報に基づいて、前記画像データ上の前記高画質化を行う領域に対して、高画質化を行う高画質化部と、
前記目的物が前記画像データ上に現れる予兆である事前動作の検出結果を示す情報を受信する事前動作検出情報受信部と、
前記事前動作検出情報受信部による受信結果に基づいて、前記高画質化部で高画質化を行うタイミングを決定するタイミング制御部とを備え、
前記高画質化部は、前記タイミング制御部によるタイミングに従い高画質化を行う
ことを特徴とする監視システム。
【請求項１１】
目的物検出部が、画像データから目的物の位置を検出する目的物検出ステップと、
高画質化領域更新部が、前記目的物検出部により検出された目的物が現在の高画質化領域に収まっている場合には、画像データ上の高画質化を行う領域に関する情報の更新は不要と判断し、当該検出された目的物が現在の高画質化領域に収まっていない場合には、前記目的物検出部により検出された目的物の位置に基づいて、前記画像データ上の高画質化を行う領域に関する情報を更新し、この更新された画像データ上の高画質化を行う領域に関する情報を保持する高画質化領域更新ステップと、
高画質化部が、前記高画質化領域更新部により更新された、画像データ上の高画質化を行う領域に関する情報に基づいて、前記画像データ上の前記高画質化を行う領域に対して、高画質化を行う高画質化ステップと
を有する動画像処理方法。
【請求項１２】
目的物検出部が、画像データから目的物の位置を検出する目的物検出ステップと、
高画質化領域更新部が、前記目的物検出部により検出された目的物の位置に基づいて、前記画像データ上の高画質化を行う領域に関する情報である高画質化を行う位置を示す情報を更新する高画質化領域更新ステップと、
高画質化部が、前記高画質化領域更新部により更新された情報に基づいて、前記画像データ上の前記高画質化を行う領域に対して、高画質化を行う高画質化ステップとを備え、
前記高画質化領域更新ステップは、
前記高画質化領域更新部の重み係数生成部が、前記目的物の位置及びサイズ、前記高画質化を行う位置に基づいて、重み係数を生成する重み係数生成ステップと、
前記高画質化領域更新部の位置情報更新部が、前記目的物の位置、前記高画質化を行う位置、及び前記重み係数生成部により生成された重み係数に基づいて、当該高画質化を行う位置を更新する位置情報更新ステップと有し、
前記高画質化ステップは、前記高画質化部が、前記位置情報更新部により更新された高画質化を行う位置、及び予め設定された高画質化を行うサイズから、前記高画質化を行う領域を求め、
前記重み係数生成ステップは、
前記重み係数生成部の位置比較部が、前記目的物の位置を、予め設定された基準位置と比較する位置比較ステップと、
前記重み係数生成部のサイズ比較部が、前記目的物のサイズを、予め設定された基準サイズと比較するサイズ比較ステップと、
前記重み係数生成部の領域比較部が、前記目的物の位置及びサイズから求めた前記画像データ上の領域を、前記高画質化を行う位置、及び予め設定された前記高画質化を行うサイズから求めた前記高画質化を行う領域と比較する領域比較ステップと、
前記重み係数生成部の重み係数決定部が、前記位置比較部、前記サイズ比較部及び前記領域比較部による比較結果に基づいて、前記重み係数を決定する重み係数決定ステップと
を有する
ことを特徴とする動画像処理方法。
【請求項１３】
目的物検出部が、画像データから目的物の位置を検出する目的物検出ステップと、
高画質化領域更新部が、前記目的物検出部により検出された目的物の位置に基づいて、前記画像データ上の高画質化を行う領域に関する情報を更新する高画質化領域更新ステップと、
高画質化部が、前記高画質化領域更新部により更新された情報に基づいて、前記画像データ上の前記高画質化を行う領域に対して、高画質化を行う高画質化ステップと、
事前動作検出部が、前記画像データから、前記目的物が当該画像データ上に現れる予兆である事前動作を検出する事前動作ステップと、
タイミング制御部が、前記事前動作検出部による検出結果に基づいて、前記高画質化部で高画質化を行うタイミングを決定するタイミング制御ステップとを備え、
前記高画質化ステップは、前記高画質化部が、前記タイミング制御部によるタイミングに従い高画質化を行う
ことを特徴とする動画像処理方法。
【請求項１４】
目的物検出部が、画像データから目的物の位置を検出する目的物検出ステップと、
高画質化領域更新部が、前記目的物検出部により検出された目的物の位置に基づいて、前記画像データ上の高画質化を行う領域に関する情報を更新する高画質化領域更新ステップと、
高画質化部が、前記高画質化領域更新部により更新された情報に基づいて、前記画像データ上の前記高画質化を行う領域に対して、高画質化を行う高画質化ステップと、
事前動作検出情報受信部が、前記目的物が前記画像データ上に現れる予兆である事前動作の検出結果を示す情報を受信する事前動作検出情報受信ステップと、
タイミング制御部が、前記事前動作検出情報受信部による受信結果に基づいて、前記高画質化部で高画質化を行うタイミングを決定するタイミング制御ステップと、
前記高画質化ステップは、前記高画質化部が、前記タイミング制御部によるタイミングに従い高画質化を行う
ことを特徴とする動画像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、動画像の画像処理を行う動画像処理装置、監視システム及び動画像処理方法に関するものである。
【背景技術】
【０００２】
近年、監視カメラ、及び監視カメラに付属するレコーダの市場が著しく発展している。また、動画像の解像度が高精細化される等して、高画質な動画像が上記監視カメラやレコーダで取り扱われている。しかしながら、高画質の動画像データは、動画像符号化を行い、圧縮をしたものであったとしても、情報量が膨大となり、ストリーミングにおける通信容量やレコーダにおける記憶容量を圧迫する。そのため、監視カメラの撮像画像が高画質であっても、ある程度、画質を落とすことによって情報量を削減し、システムとしての通信容量や記憶容量を確保するといった手法をとる。しかしながら、この場合には、画質を落としたために重要な情報が取得できないといったことが起こる可能性がある。
【０００３】
それに対して、特定の目的物を検出する機能を有し、当該目的物が検出された場合にのみ、当該目的物を含む領域だけを高画質化する方法が開示されている（例えば特許文献１参照）。この方法により、全体の動画像の情報量をあまり増やさず、システムとしての通信容量や記憶容量を確保した上で、特定の目的物を含む領域の画質は高画質なままとすることができる。よって、重要な情報もしっかり取得することが可能となる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１０−１９３４４１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、目的物を検出してから高画質化を行う方法では、目的物が現れてからそれを検出し、高画質化を図るため、高画質化するまでの若干の時間差が生じる。そのため、検出した瞬間の目的物自体を含む領域を高画質化するためには、動画像データをバッファするメモリ等の記憶装置や、高速で動画像データの画像処理を行うＤＳＰ等の演算装置が必要となる。よって、それらの装置を用意しなければ、検出した瞬間の目的物自体を含む領域を高画質することはできず、高画質化を行いたい目的物を逃さず高画質化することができないという課題があった。
【０００６】
この発明は、上記のような課題を解決するためになされたもので、従来技術に対して簡易な構成で、高画質化を行いたい目的物を逃さず画像データ上の当該目的物を含む領域に対して高画質化を行うことが可能な動画像処理装置、監視システム及び動画像処理方法を提供することを目的としている。
【課題を解決するための手段】
【０００７】
この発明に係る動画像処理装置は、画像データから目的物の位置を検出する目的物検出部と、目的物検出部により検出された目的物が現在の高画質化領域に収まっている場合には、更新は不要と判断し、当該検出された目的物が現在の高画質化領域に収まっていない場合には、目的物検出部により検出された目的物の位置に基づいて、画像データ上の高画質化を行う領域に関する情報を更新し、この更新された画像データ上の高画質化を行う領域に関する情報を保持する高画質化領域更新部と、高画質化領域更新部により更新された情報に基づいて、画像データ上の高画質化を行う領域に対して、高画質化を行う高画質化部とを備えたものである。
【０００８】
また、この発明に係る動画像処理方法は、目的物検出部が、画像データから目的物の位置を検出する目的物検出ステップと、高画質化領域更新部が、目的物検出部により検出された目的物が現在の高画質化領域に収まっている場合には、画像データ上の高画質化を行う領域に関する情報の更新は不要と判断し、当該検出された目的物が現在の高画質化領域に収まっていない場合には、目的物検出部により検出された目的物の位置に基づいて、画像データ上の高画質化を行う領域に関する情報を更新し、この更新された画像データ上の高画質化を行う領域に関する情報を保持する高画質化領域更新ステップと、高画質化部が、高画質化領域更新部により更新された情報に基づいて、画像データ上の高画質化を行う領域に対して、高画質化を行う高画質化ステップとを有するものである。
【発明の効果】
【０００９】
この発明によれば、上記のように構成したので、従来技術に対して簡易な構成で、目的物検出部により検出された目的物が現在の高画質化領域に収まっている場合には、画像データ上の高画質化を行う領域に関する情報の更新は不要と判断して無用な更新をせず、当該検出された目的物が現在の高画質化領域に収まっていない場合には、高画質化領域更新部により更新された情報に基づいて、高画質化を行いたい目的物を逃さず画像データ上の当該目的物を含む領域に対して高画質化を行うことが可能となる。
【図面の簡単な説明】
【００１０】
【図１】この発明の実施の形態１に係る動画像処理装置が適用される監視システムの構成を示すブロック図である。
【図２】この発明の実施の形態１に係る動画像処理装置の構成を示すブロック図である。
【図３】この発明の実施の形態１に係る動画像処理装置による高画質化領域更新処理を示すフローチャートである。
【図４】この発明の実施の形態１における高画質化領域更新部の構成を示すブロック図の一例である。
【図５】この発明の実施の形態１における重み係数生成部の構成を示すブロック図の一例である。
【図６】この発明の実施の形態１における位置情報更新部の構成を示すブロック図の一例である。
【図７】この発明の実施の形態２に係る動画像処理装置が適用される監視システムの構成を示す図である。
【図８】この発明の実施の形態２に係る動画像処理装置の構成を示すブロック図である。
【図９】この発明の実施の形態３に係る動画像処理装置の構成を示すブロック図である。
【発明を実施するための形態】
【００１１】
以下、この発明の実施の形態について図面を参照しながら詳細に説明する。
実施の形態１．
図１はこの発明の実施の形態１に係る動画像処理装置が適用される監視システムの構成を示すブロック図である。
監視システムは、図１に示すように、監視カメラ（撮影装置）１、ネットワーク２、監視用ＰＣ３、レコーダ４、モニタ５及び設定用ＰＣ６から構成されている。
【００１２】
監視カメラ１、監視用ＰＣ３及びレコーダ４はそれぞれ、ネットワーク２に接続されている。そして、監視カメラ１（監視撮影部）により対象領域が撮影されることで得られた動画像や当該動画像に基づく侵入検知情報は、監視用ＰＣ３により監視され、レコーダ４に記録され、モニタ５に表示される。
【００１３】
なお、ネットワーク２はインターネットやローカルネットワーク、あるいはその他のネットワークでもよく、ネットワーク２の形態で本発明は制限されない、また、実施の形態１では図１の構成で説明しているが、監視カメラ１、監視用ＰＣ３、レコーダ４はネットワーク２を経ずＨＵＢを経由して接続されてもよく、あるいは、監視カメラ１とレコーダ４が直接接続されてもよく、監視カメラ１と監視用ＰＣ３とレコーダ４が直接接続されてもよく、監視カメラ１とレコーダ４と監視用ＰＣ３がその他の方法で接続されてもよく、接続の形態で本発明は制限されない。すなわち、ここでは、レコーダ４はネットワーク２を経由するレコーダとして説明するが、ネットワーク２を経由しないレコーダでもよい。
【００１４】
また、監視カメラ１のカメラ設定（監視カメラ１の各種動作を制御するための設定）は、設定用ＰＣ６より行われる。なお、図１では、設定用ＰＣ６は、監視カメラ１に直接繋がれているが、ＨＵＢ経由やネットワーク２経由で接続されてもよい。また以下では、監視カメラ１のカメラ設定は設定用ＰＣ６で行うものとして説明を行うが、カメラ設定を監視用ＰＣ３やレコーダ４で行ってもよく、本発明を制限するものではない。
【００１５】
次に、上記の監視システムに適用される動画像処理装置の構成について説明する。
図２はこの発明の実施の形態１に係る動画像処理装置の構成を示すブロック図である。動画像処理装置は、図１に示す監視カメラ１、監視用ＰＣ３、レコーダ４の何れに構成されていてもよい。
この動画像処理装置は、図２に示すように、目的物検出部１１、高画質化領域更新部１２及び高画質化部１３から構成されている。なお以下では、動画像処理装置の各機能部は、ソフトウェアに基づくＣＰＵを用いたプログラム処理によって実行されるものとして説明を行うが、ハードウェアによって実現してもよく、本発明を制限するものではない。
【００１６】
目的物検出部１１は、入力された画像データを解析して、高画質化の対象となる目的物を検出し、当該目的物の位置（例えば中心位置）及びサイズを検出するものである。この目的物検出部１１により検出された目的物の位置及びサイズを示す情報は、高画質化領域更新部１２に供給される。ここで、目的物検出部１１で検出を行う目的物としては、人物の顔や貨幣、紙幣等が想定され予め設定されるが、それらに限定されるものではなく、高画質化を行いたい対象物であればよい。
【００１７】
高画質化領域更新部１２は、目的物検出部１１により検出された目的物の位置及びサイズに基づいて、画像データ上の高画質化を行う領域（高画質化領域）に関する情報を更新するものである。なお、高画質化領域に関する情報としては、高画質化領域の位置（高画質化位置）や、高画質化位置及び高画質化領域のサイズ（高画質化サイズ）等が挙げられる。この高画質化領域更新部１２により更新された情報は、高画質化部１３に供給され、また自らも保持する。
【００１８】
高画質化部１３は、高画質化領域更新部１２により更新された情報に基づいて、画像データ上の高画質化領域に対して、高画質化を行うものである。なお、高画質化領域更新部１２が、高画質化領域に関する情報として高画質化位置を更新する場合には、高画質化部１３は、予め設定された高画質化サイズを保持し、これらの情報から高画質化領域を求めて高画質化を行う。この高画質化部１３により高画質化領域に対して高画質化が行われた画像データ（特定領域高画質化データ）は、外部に出力される。
【００１９】
次に、上記のように構成された動画像処理装置による高画質化領域更新処理について、図３を参照しながら説明する。なお、高画質化領域更新処理は、高画質化部１３による高画質化処理と並行して行われる。
【００２０】
動画像処理装置による高画質化領域更新処理では、図３に示すように、まず、目的物検出部１１は、監視カメラ１により撮影された画像データを受信する（ステップＳＴ１）。
次いで、目的物検出部１１は、上記画像データを解析して、目的物の検出を行う（ステップＳＴ２）。このステップＳＴ２において、目的物が検出できない場合に処理を終了する。
【００２１】
一方、目的物検出部１１は、ステップＳＴ２において目的物を検出した場合には、当該目的物の位置及びサイズを検出する（ステップＳＴ３，４）。ここで、ステップＳＴ４のサイズ検出処理は必須の処理ではなく、ステップＳＴ３の位置検出処理のみを行うようにしてもよい。この場合には、目的物のサイズは固定とする。
なお、ステップＳＴ１〜４による処理は、本発明の目的物検出ステップに相当する。
【００２２】
次いで、高画質化領域更新部１２は、目的物検出部１１により検出された目的物の位置及びサイズに基づいて、画像データ上の高画質化領域に関する情報の更新が必要かを判断する（ステップＳＴ５）。ここで、検出された目的物が現在の高画質化領域内に収まっている場合には、更新は不要と判断する。このステップＳＴ５において、更新が不要と判断した場合には処理を終了する。
一方、高画質化領域更新部１２は、ステップＳＴ５において更新が必要と判断した場合には、目的物検出部１１により検出された目的物の位置及びサイズに基づいて、高画質化領域に関する情報を更新する（ステップＳＴ６）。
なお、ステップＳＴ５，６による処理は、本発明の高画質化領域更新ステップに相当する。
【００２３】
そして、この高画質化領域更新部１２により更新された情報は高画質化部１３に供給され、高画質化部１３では、この情報に基づいて、画像データ上の高画質化領域に対して高画質化を行う（高画質化ステップ）。
【００２４】
次に、高画質化領域更新部１２の詳細について、図４〜６を参照しながら説明する。以下では、高画質化領域更新部１２が、高画質化領域に関する情報として高画質化位置を更新する場合について説明する。この場合、高画質化部１３では、予め設定された高画質化領域サイズを保持し、高画質化領域更新部１２により更新された高画質化位置と、当該高画質化サイズから高画質化領域を求め、高画質化を行う。
【００２５】
この場合、高画質化領域更新部１２は、例えば図４に示すように、重み係数生成部１２１及び位置情報更新部１２２から構成される。
【００２６】
重み係数生成部１２１は、目的物検出部１１により検出された目的物の位置及びサイズ、位置情報更新部１２２により設定された現在の高画質化位置に基づいて、重み係数を生成するものである。なお、重み係数αは、０≦α≦１の範囲内である。この重み係数生成部１２１は、例えば図５に示すように、位置比較部１２１１、サイズ比較部１２１２、領域比較部１２１３及び重み係数決定部１２１４から構成される。
【００２７】
位置比較部１２１１は、目的物検出部１１により検出された目的物の位置を、予め設定された画面上の基準位置（例えば中心位置）と比較するものである。この位置比較部１２１１による位置比較結果を示す情報は、重み係数決定部１２１４に供給される。
【００２８】
サイズ比較部１２１２は、目的物検出部１１により検出された目的物のサイズを、予め設定された基準サイズと比較するものである。このサイズ比較部１２１２によるサイズ比較結果を示す情報は、重み係数決定部１２１４に供給される。
【００２９】
領域比較部１２１３は、目的物検出部１１により検出された目的物の位置及びサイズから求めた画像データ上の領域を、位置情報更新部１２２により設定された現在の高画質化位置、及び予め設定された高画質化サイズから求めた高画質化領域と比較するものである。この領域比較部１２１３による領域比較結果を示す情報は、重み係数決定部１２１４に出力される。
【００３０】
重み係数決定部１２１４は、位置比較部１２１１による位置比較結果、サイズ比較部１２１２によるサイズ比較結果、及び領域比較部１２１３による領域比較結果に基づいて、重み係数を決定するものである。この重み係数決定部１２１４により決定された重み係数を示す情報は、位置情報更新部１２２に出力される。
【００３１】
ここで、重み係数決定部１２１４は、例えば、位置比較結果が、目的物の位置が基準位置（例えば中心位置）に近いことを示している場合には重み係数を大きくし、遠いことを示している場合には重み係数を小さくする。これは、監視カメラ１を設置する場合に、特に監視したい箇所を画面の中心になるように設置する場合が多いからである。
【００３２】
また、例えば、サイズ比較結果が、目的物のサイズが基準サイズに近いことを示している場合には重み係数を大きくし、大きすぎる又は小さすぎることを示している場合には重み係数を小さくする。これは、監視カメラ１を設置する場合に、特に監視したい箇所が画面上において小さすぎないように映し出されるように設置する場合が多いからである。また、元々、大きく映っている目的物は高画質化する必要がないからである。
【００３３】
また、例えば、領域比較結果が、目的物が現在の高画質領域の中に収まっていることを示している場合には重み係数を小さくし、複数回連続して現在の高画質領域の中に収まっていないことを示している場合には重み係数を大きくする。すなわち、目的物が高画質領域に収まっていなければ、早く高画質領域の位置を適切な位置へ変えたいので、重み係数を大きくする。一方、目的物の検出が一過性のものなら、高画質領域の位置の変更が頻繁になることで処理負荷が大きくなるため、高画質領域の位置の変更を抑えるために重み係数を小さくする。すなわち、連続して目的物が高画質領域に収まっていないことが検出された場合には、一過性のものではないと判断できるため、より早く高画質領域の位置を変更させる。
【００３４】
位置情報更新部１２２は、目的物検出部１１により検出された目的物の位置、自ら保持している高画質化位置を示す情報、及び重み係数生成部１２１により生成された重み係数に基づいて、画像データ上の高画質化位置を更新するものである。この位置情報更新部１２２は、例えば図６に示すように、第１乗算部１２２１、減算部１２２２、第２乗算部１２２３、加算部１２２４及び位置情報保持部１２２５から構成される。
【００３５】
第１乗算部１２２１は、目的物検出部１１により検出された目的物の位置と、重み係数生成部１２１により生成された重み係数とを乗算するものである。この第１乗算部１２２１による乗算結果を示す情報は、加算部１２２４に供給される。
【００３６】
減算部１２２２は、１から、重み係数生成部１２１により生成された重み係数を減算するものである。この減算部１２２２による減算結果を示す情報は、第２乗算部１２２３に供給される。
【００３７】
第２乗算部１２２３は、位置情報保持部１２２５に保持されている高画質位置と、減算部１２２２による減算結果とを乗算するものである。この第２乗算部１２２３による乗算結果を示す情報は、加算部１２２４に供給される。
【００３８】
加算部１２２４は、第１乗算部１２２１による乗算結果と、第２乗算部１２２３による乗算結果とを加算するものである。この加算部１２２４による加算結果（高画質化位置）を示す情報は、位置情報保持部１２２５に供給される。
【００３９】
位置情報保持部１２２５は、加算部１２２４による加算結果（高画質化位置）を示す情報を保持するメモリである。この位置情報保持部１２２５に保持されている高画質化位置を示す情報は、更新される度に、第２乗算部１２２３、重み係数生成部１２１及び高画質化部１３に供給される。
【００４０】
ここで、例えば、現在の高画質化位置を（ＸＮ−１,ＹＮ−１）、目的物の位置を（ｘ,ｙ）、重み係数をαとすると、次の高画質化位置（ＸＮ,ＹＮ）は、（αｘ＋(１−α)ＸＮ−１,αｙ＋(１−α)ＹＮ−１）となる。
【００４１】
ここで、高画質化位置及び高画質化サイズの初期値の具体例としては、画面上の中央の決まった領域とする方法や、予め設定した領域とする方法（例えば全画面を１６×９マスに分割し、そのうちの何マスかを設定する方法）が挙げられる。中央の決まった領域とした場合には、予め設定した領域とする場合に対し、設定の処理負荷を軽減することができる。一方、予め設定した領域とした場合には、中央の決まった領域とした場合に対し、監視カメラ１の設置位置やユーザの要望に沿った柔軟なシステムの構築が可能となる。特に、高画質化領域の形に柔軟性を持たせる場合（例えば長細くしたい場合）等に効果的である。
【００４２】
なお、高画質化部１３による高画質化処理として、画像データを符号化し、高画質化領域の符号化における圧縮率を、高画質化領域以外の領域の符号化における圧縮率より下げることで、高画質化を行うようにしてもよい。この場合、出力される特定領域高画質化データは、符号化された画像データとなる。
また、高画質化部１３による高画質化処理として、高画質化領域に対して超解像処理を行うことで、高画質化を行うようにしてもよい。
【００４３】
また、高画質化部１３による高画質化処理として、高画質化領域のフレームレートを、高画質化領域以外の領域のフレームレートより高くすることで、高画質化を行うようにしてもよい。
また、高画質化部１３による高画質化処理として、高画質化部１３と外部機器（スポットライト等）を接続し、高画質化領域をその他の領域よりも画質よく撮影させることで、高画質化を行うようにしてもよい。具体的には、高画質領域にスポットライトを当てるように制御することで、高精細化させ、画質よく撮影させる。
【００４４】
以上のように、この実施の形態１によれば、目的物の位置により、予め設定された高画質化領域の位置を調整して、高画質化処理を行うように構成したので、高画質化を行いたい目的物を逃さず画像データ上の当該目的物を含む領域に対して高画質化を行うことが可能となる。
また、従来技術では、目的物の検出を起点に高画質化を行う場合に、高速に画像解析を行う必要があり、高速な演算能力が必要となる。それに対して、本発明では、そのような高速な演算能力は必要としない。そのため、ＤＳＰやＣＰＵ、メモリといったＨ／Ｗの削減に貢献することができる。
【００４５】
また、固定的に高画質化領域を設定する方法も考えられるが、この場合、カメラ等の設置時に、目的物の出現位置に応じて、高画質化領域を手動で設定する必要がある。それに対して、本発明では、自動的に高画質化領域を更新していくため、そのような設置時の設定を必要としない。同様に、固定的に高画質化領域を設定する場合、設置後に目的物の出現位置が変わった場合には、手動での再設定が必要となるが、本発明では、そのような再設定は不要である。
【００４６】
なお上記の高画質化部１３では、高画質化領域を常時高画質化することを想定しているが、これに限るものではなく、高画質化機能をＯＮ又はＯＦＦに切替え可能に構成してもよい。このように構成することで、明らかに目的物が出現しないときには、手動で高画質化機能をＯＦＦすることにより、画像データの容量を無駄に大きくせずに済む。
【００４７】
また上記では、高画質化領域更新部１２が、高画質化領域に関する情報として、高画質化位置のみを更新する場合を例に説明を行った。これに対し、高画質化領域に関する情報として、高画質化位置及び高画質化サイズを更新してもよい。なおこの場合には、高画質化サイズに上限及び下限を設ける。そして、高画質化部１３では、高画質化領域更新部１２により設定された高画質化位置及び高画質化サイズから高画質化領域を求め、高画質化を行う。
これにより、目的物の大きさに応じて高画質化を行うことができ、画像データの容量を無駄に大きくせずに済む。なお、この場合に用いる重み係数は、位置判定結果と領域判定結果に基づいて決定すればよい。
【００４８】
実施の形態２．
図７はこの発明の実施の形態２に係る動画像処理装置が適用された監視システムの構成を示す図である。この図７に示す実施の形態２に係る監視システムは、図１に示す実施の形態１に係る監視システムに事前動作検出装置７を追加したものである。その他の構成は同様であり、同一の符号を付してその説明を省略する。
【００４９】
事前動作検出装置７は、目的物が画面データ上に現れる予兆である事前動作を検出するものである。事前動作の具体例としては、ドアの開閉やレジの入力、信号機の色の変更、車の停止動作等が挙げられる。この事前動作検出装置７は、センサ又は物理的な仕組みを利用して、ドアやレジ、信号機、車のブレーキを用いて実現可能である。この事前動作検出装置７による検出結果を示す情報は動画像処理装置に供給される。
【００５０】
図８はこの発明の実施の形態２に係る動画像処理装置の構成を示す図である。この図８に示す実施の形態２に係る動画像処理装置は、図２に示す実施の形態１に係る動画像処理装置に、事前動作検出情報受信部１４及びタイミング制御部１５を追加したものである。その他の構成は同様であり、同一の符号を付して異なる部分についてのみ説明を行う。
【００５１】
事前動作検出情報受信部１４は、事前動作検出装置７による検出結果を示す情報（事前動作検出情報）を受信するものである。この事前動作検出情報受信部１４による受信結果を示す情報は、タイミング制御部１５に供給される。
【００５２】
タイミング制御部１５は、事前動作検出情報受信部１４による受信結果に基づいて、高画質化部１３での高画質化を行うタイミングを決定するものである。このタイミング制御部１５により決定された高画質化を行うタイミングを示す情報は、高画質化部１３に供給される。
【００５３】
また、高画質化部１３は、タイミング制御部１５により決定された高画質化を行うタイミングに従い、入力された画像データの高画質化領域に対する高画質化を行う。
【００５４】
以上のように、この実施の形態２によれば、目的物が画像データ上に現れる予兆である事前動作を検出し、この検出結果に応じて高画質化部１３での高画質化を行うタイミングを制御するように構成したので、実施の形態１における効果に加え、目的物が出現しないときには、高画質化機能をＯＦＦにすることができ、画像データの容量を無駄に大きくせずに済む。また、事前動作の検出を起点に高画質化を行うことにより、目的物を逃さず高画質化することができる。また、高速に画像解析を行う必要がないため、高速な演算能力は必要としない。
【００５５】
実施の形態３．
図９はこの発明の実施の形態３に係る動画像処理装置の構成を示す図である。なお、実施の形態３では、監視システムの構成は図１に示す構成と同様であり、その説明を省略する。この図９に示す実施の形態３に係る動画像処理装置は、図２に示す実施の形態１に係る動画像処理装置に、事前動作検出部１６及びタイミング制御部１５ｂを追加したものである。その他の構成は同様であり、同一の符号を付して異なる部分についてのみ説明を行う。
【００５６】
事前動作検出部１６は、入力された画像データを解析して、目的物が画面データ上に現れる予兆である事前動作を検出するものである。事前動作の具体例としては、ドアの開閉やレジの入力、信号機の色の変更、車の停止動作等が挙げられる。ここで、事前動作検出部１６では、例えば、事前動作を検出するためのテンプレート画像を所持し、入力された画像データを当該テンプレート画像と比較して、特定の部分がテンプレート画像と異なる場合に、事前動作があったと検出する。この事前動作検出部１６による検出結果を示す情報は、タイミング制御部１５ｂに供給される。
【００５７】
タイミング制御部１５ｂは、事前動作検出部１６による検出結果に基づいて、高画質化部１３での高画質化を行うタイミングを決定するものである。このタイミング制御部１５ｂにより決定された高画質化を行うタイミングを示す情報は、高画質化部１３に供給される。
【００５８】
また、高画質化部１３は、タイミング制御部１５ｂにより決定された高画質化を行うタイミングに従い、入力された画像データの高画質化領域に対する高画質化を行う。
【００５９】
以上のように、この実施の形態３によれば、動画像処理装置内で、事前動作を検出するように構成しても、実施の形態１における効果に加えて、目的物が出現しないときには、高画質化機能をＯＦＦにすることができ、画像データの容量を無駄に大きくせずに済む。また、事前動作の検出を起点に高画質化を行うことにより、目的物を逃さず高画質化することができる。また、画像データのみで処理を行うことが可能となり、実施の形態２のようなセンサ又は物理的な仕組みといったものを不要とすることができる。
【００６０】
また、実施の形態２，３において、事前動作の内容に応じて高画質化領域に関する情報を更新するようにしてもよい。例えば、事前動作検出装置（信号機）７にて信号機が青に変更する事前動作を検出した場合には、画像データ上の直進車線を高画質化領域とする。また、信号機が赤に変更する事前動作を検出した場合には、画像データ上の左右方向車線を高画質化領域とする。
【００６１】
実施の形態４．
実施の形態１〜３では、高画質化領域が１つの領域である場合について説明したが、高画質化領域を複数の領域から構成してもよい。例えば、目的物検出部１１により複数の目的物が検出された場合に、それぞれの目的物の含む領域に対して高画質化を行うようにしてもよい。
【００６２】
また上記では、動画像処理装置を監視システムに適用し、監視カメラ１により撮影された動画像を処理する場合を例に説明を行った。しかしながら、これに限るものではなく、その他の撮影装置により撮影された動画像を処理するものであってもよく、同様の効果を得ることができる。
【００６３】
なお、本願発明はその発明の範囲内において、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略が可能である。
【符号の説明】
【００６４】
１  監視カメラ、２  ネットワーク、３  監視用ＰＣ、４  レコーダ、５  モニタ、６  設定用ＰＣ、７  事前動作検出装置、１１  目的物検出部、１２  高画質化領域更新部、１３  高画質化部、１４  事前動作検出情報受信部、１５，１５ｂ  タイミング制御部、１６  事前動作検出部、１２１  重み係数生成部、１２２  位置情報更新部、１２１１  位置比較部、１２１２  サイズ比較部、１２１３  領域比較部、１２１４  重み係数決定部、１２２１  第１乗算部、１２２２  減算部、１２２３  第２乗算部、１２２４  加算部、１２２５  位置情報保持部。
【図１】
0006494260.tif 000002
【図２】
0006494260.tif 000003
【図３】
0006494260.tif 000004
【図４】
0006494260.tif 000005
【図５】
0006494260.tif 000006
【図６】
0006494260.tif 000007
【図７】
0006494260.tif 000008
【図８】
0006494260.tif 000009
【図９】
0006494260.tif 000010