(57)【要約】【課題】  画像処理対象となる画像を効果的に処理する画像処理方法を提供する。【解決手段】  画像処理により物体を検出するステップと、物体を検出した旨を画像と共に表示するステップとを備え、物体を検出した旨を物体検出位置に重畳させて表示するか、或いは、物体検出位置に重畳しないように表示するか、のいずれかを選択できるようにした。また、更に、物体を検出した旨を表示した画像を記録するか、或いは、物体を検出した旨を表示しない画像を記録するか、のいずれかを選択できるようにした。【選択図】  図２
2007274312.tif 000002
【特許請求の範囲】
【請求項１】
画像処理により物体を検出するステップと、
物体を検出した旨を画像と共に表示するステップとを備え、
物体を検出した旨を物体検出位置に重畳させて表示するか、或いは、物体検出位置に重畳しないように表示するか、のいずれかを選択できるようにした、
ことを特徴とする画像処理方法。
【請求項２】
請求項１に記載の画像処理方法において、
更に、物体を検出した旨を表示した画像を記録するか、或いは、物体を検出した旨を表示しない画像を記録するか、のいずれかを選択できるようにした、
ことを特徴とする画像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理対象となる画像を画像処理する画像処理方法に関し、特に、画像を効果的に処理する画像処理方法に関する。
【背景技術】
【０００２】
従来の監視システムにおいては、カメラ画像に「Ａｔｔｅｎｔｉｏｎ！」、「物体検出！」といった文字等、もしくは「アラーム発生」などのインジケータを重畳する場合に、重畳する位置が固定位置であった。
【０００３】
なお、上記従来技術は、発明者が既に知られていることと認識して記述したものであるが、適切な文献が見出せなかったので、従来技術文献情報の記載をしていない。
【発明の開示】
【発明が解決しようとする課題】
【０００４】
この場合、カメラ画像の物体検出位置にインジケータが重畳されてしまうと、画像における重要な部分が見えなくなってしまう。逆に、物体検出箇所を明示的に示したい場合にも、不都合が生じる。つまり、重畳位置の選択ができなかった。
【０００５】
本発明は、このような従来の事情に鑑み為されたもので、画像処理対象となる画像を効果的に画像処理することができる画像処理方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明に係る画像処理方法は、画像処理により物体を検出するステップと、物体を検出した旨を画像と共に表示するステップとを備え、物体を検出した旨を物体検出位置に重畳させて表示するか、或いは、物体検出位置に重畳しないように表示するか、のいずれかを選択できるようにした。
【０００７】
なお、本明細書では、「画像」という語を用いて説明を行うが、例えば、「映像」といった語についても、同様な用語であり、本発明に包含される。
【０００８】
また、上記目的を達成するため、本発明に係る画像処理方法において、更に、物体を検出した旨を表示した画像を記録するか、或いは、物体を検出した旨を表示しない画像を記録するか、のいずれかを選択できるようにした。
【発明の効果】
【０００９】
以上説明したように、本発明に係る画像処理方法によると、物体を検出した旨を物体検出位置に重畳させて表示するか、或いは、物体検出位置に重畳しないように表示するか、のいずれかを選択できるようにしたため、画像処理対象となる画像を効果的に処理することができる。
【発明を実施するための最良の形態】
【００１０】
以下、本発明の実施の形態について、図面を参照しながら説明する。
【００１１】
図１には、本発明の一実施例に係る画像処理方法が適用される画像配信システムの構成例を示してある。
【００１２】
ここに示した画像配信システムは、後述する画像処理を行ったり、画像データの復号を行う画像復号化装置３と、画像データを蓄積するための画像記録装置４と、画像データを表示するための画像表示装置５と、ネットワーク２を介して上記画像復号化装置３に接続されたＷｅｂカメラ１からなる。
【００１３】
Ｗｅｂカメラ１による撮影映像の各フレームの画像データは、例えば、ＪＰＥＧ、ＭＰＥＧ等の画像圧縮方式で圧縮され、ＩＰパケット形式で画像復号化装置３に送信される。この場合、圧縮された画像データは、フレーム毎にデータ量の異なる可変長データとなる。
【００１４】
画像復号化装置３は、Ｗｅｂカメラ１に対して、画像データの配信を要求する。Ｗｅｂカメラ１は、画像復号化装置３からの要求に応じて、画像データをＩＰパケット形式で要求元の画像復号化装置３に配信サービスする。これにより、画像復号化装置３に接続された画像記録装置４においては画像データの記憶をすることができ、また、画像復号化装置３に接続された画像表示装置５においては画像データの表示を行うことができる。本発明の画像処理方法は、例えば、画像復号化装置３がＷｅｂカメラ１に対して画像データの配信要求を行い、画像記録装置４に画像データを記録する際や、画像表示装置５に画像データを表示する際に適用される。
【００１５】
図２には、本発明の一実施例における画像復号化装置３の構成例を示してある。図２に示される画像復号化装置３は、ネットワークＩ／Ｆ３０１と、画像処理部３０２と、録画画像選択部３０３と、録画用画像出力部３０４と、監視用画像出力部３０５から構成される。また、画像処理部３０２は、画像伸張部３１と、検出処理部３２と、画像重畳選択部３３から構成される。
【００１６】
ネットワークＩ／Ｆ３０１は、ネットワーク２を介してＷｅｂカメラ１に対して画像配信要求を出力し、Ｗｅｂカメラ１からネットワーク２を介して送られてくる画像データを受信する役割を果たす。
【００１７】
画像処理部３０２の画像伸張部３１は、ネットワークＩ／Ｆから出力された画像データの復号化処理を行い、復号化された画像データを検出処理部３２及び録画画像選択部３０３に出力する。
【００１８】
検出処理部３２は、画像伸張部３１より入力された画像データに対して所定の画像認識処理を行い、人や車等の物体を検出する処理を行い、物体検出結果と共に画像データを画像重畳選択部３３に出力する。
【００１９】
画像重畳選択部３３は、検出処理部３２での検出結果に基づいて、物体を検出した旨を表す「Ａｔｔｅｎｔｉｏｎ！」、「物体検出！」といった文字等、もしくは、物体を検出した旨を表す「アラーム発生」などのインジケータを画像の物体検出位置に重畳させる処理、或いは、インジケータ等を画像の物体検出位置と重ならない位置に重畳させる処理を行う。そして、インジケータ等が表示された画像データを録画画像選択部３０３及び監視用画像出力部３０５に出力する。
【００２０】
録画画像選択部３０３では、画像伸張部３１から入力された画像データと、画像重畳選択部３３から入力された画像データのうち、いずれか一方を選択して、選択した画像データを録画用画像出力部３０４に出力する。
【００２１】
録画用画像出力部３０４は、録画画像選択部３０３により選択された画像データを外部の画像記録装置４に出力する。
【００２２】
監視用画像出力部３０５は、画像重畳選択部３３より入力された画像データを外部の画像表示装置５に表示できる形式に変換して出力する。
【００２３】
ここで、本実施例による画像復号化装置３によれば、画像復号化装置３が物体検出機能を持っている場合には、物体を検出した箇所にインジケータ等を重畳する方法、または重畳しない方法の二つを実現可能にして、ユーザがそれを選択できるようになされている。また、その際、録画をインジケータ重畳なしの原画像データのままで行うのか、録画をインジケータ重畳ありの画像データで行うかについても選択が可能になされている。
【００２４】
つまり、ユーザは図３に示すような組み合わせを選択することができる。図３の（１）は、物体検出位置の画像データにインジケータ等を重畳させ画像データを表示し、かつ、インジケータ等が重畳された画像データを記録するケースである。図３の（２）は、物体検出位置とは重ならないようにインジケータ等を画像データに重畳させ画像データを表示し、かつ、インジケータ等が重畳された画像データを記録するケースである。図３の（３）は、物体検出位置の画像データにインジケータ等を重畳させ画像データを表示し、かつ、インジケータ等が重畳されていない元の画像データを記録するケースである。図３の（４）は、物体検出位置とは重ならないようにインジケータ等を画像データに重畳させ画像データを表示し、かつ、インジケータ等が重畳されていない元の画像データを記録するケースである。
【００２５】
次に、画像重畳選択部３３における処理の詳細について、図４を用いて説明する。検知処理部３２から画像重畳選択部３３には、物体検出結果が通知される。ここで、物体検出結果は、例えば、物体が検出された位置座標等から構成される。より具体的には、画像データを例えばn × n に分割し、各セル（分割された映像画面の単位をセルと呼ぶ。）内で物体が検出されたかを判断し、検出されれば1、されなければ０を値として持つマトリクスを画像重畳選択部３３に通知すればよい。
【００２６】
画像重畳選択部３３では、通知された座標からインジケータ等を画像データに重畳するが、これは前述のように以下のようなケースが考えられる。
（イ）動体検知部に重畳するようにインジケータ等を表示する。
（ロ）動体検知部に重畳しないようにインジケータ等を表示する。
【００２７】
（イ）の場合：
物体検出位置がわかるようにインジケータ等を画像データに表示させるには、一例として以下のような方法がある。あるセルの値が１であり、かつ、隣接する縦横斜めのいずれかがマトリクス上で1であれば、これを一つの物体として、これに1つのインジケータを割り当てる。インジケータは、例えば、その隣接したセルの集合の左上または右下のセルに重畳させればよい。図４（ａ）に示す例では、斜線部分が１の値を持つセルであり、その１のセルのかたまりを検出して、各々のかたまりに番号をつけて区別できるようにしている。図４（ａ）では、斜線領域４０１、及び、４０２がそれぞれ“１”のかたまりとなる。
【００２８】
（ロ）の場合：
予め、図４（ｂ）に示すように、インジケータ等を重畳する候補となる位置を予め複数決めておく。そして、その位置に優先順位をつけてメモリ内に保存しておき、優先順位の高いものから順にソートしていき、物体検出位置と重ならなかった位置（セル）が出てきた時点で、その位置にインジケータ等を重畳する。この時、重畳する位置は、分割したセルの一つであっても、連続したあるパターンであってもよい。なお、図４（ｂ）では、画像データの真ん中にインジケータ重畳の第一候補位置（１）が決められており、画像データの左上に第二候補位置（２）、右上に第三候補位置（３）、右下に第４候補位置（４）が決められている状態を表している。
【００２９】
なお、本実施例では、本発明に係る画像処理方法が画像符号化装置３において用いられる構成を示したが、他の種々な装置において本発明に係る画像処理方法が用いられてもよい。
【００３０】
ここで、本発明に係る画像復号化装置などの構成としては、必ずしも以上に示したものに限られず、種々な構成が用いられてもよい。また、本発明は、例えば、本発明に係る処理を実行する方法或いは方式や、このような方法や方式を実現するためのプログラムや当該プログラムを記録する記録媒体などとして提供することも可能であり、また、種々な装置やシステムとして提供することも可能である。
【００３１】
また、本発明の適用分野としては、必ずしも以上に示したものに限られず、本発明は、種々な分野に適用することが可能なものである。
【００３２】
また、本発明に係る画像復号化装置などにおいて行われる各種の処理としては、例えばプロセッサやメモリ等を備えたハードウエア資源においてプロセッサがＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）に格納された制御プログラムを実行することにより制御される構成が用いられてもよく、また、例えば当該処理を実行するための各機能手段が独立したハードウエア回路として構成されてもよい。
【００３３】
また、本発明は上記の制御プログラムを格納したフロッピー（登録商標）ディスクやＣＤ（Ｃｏｍｐａｃｔ  Ｄｉｓｃ）−ＲＯＭ等のコンピュータにより読み取り可能な記録媒体や当該プログラム（自体）として把握することもでき、当該制御プログラムを当該記録媒体からコンピュータに入力してプロセッサに実行させることにより、本発明に係る処理を遂行させることができる。
【図面の簡単な説明】
【００３４】
【図１】本発明の一実施例に係る画像配信システムの構成例を示す図である。
【図２】本発明の一実施例に係る画像復号化装置の構成例を示す図である。
【図３】本発明の一実施例に係るユーザが選択可能な表示・録画形態の組み合わせを説明するための図である。
【図４】本発明の一実施例に係る画像重畳選択部３３における処理の詳細を説明するための図である。
【符号の説明】
【００３５】
１：Ｗｅｂカメラ、２：ネットワーク、３：画像復号化装置、４：画像記録装置、５：画像表示装置。
【図１】
2007274312.tif 000003
【図２】
2007274312.tif 000004
【図３】
2007274312.tif 000005
【図４】
2007274312.tif 000006