(57)【要約】  業務支援を適切に行うことができる。  本発明の一態様に係る画像処理システムは、画像と当該画像の識別情報を記録する画像蓄積手段と、前記画像の識別情報と前記画像の一部画像とをサーバに送信する送信手段と、前記サーバから受信した識別情報に基づく付加情報を出力する出力手段と、を備える端末と、前記端末から受信した前記一部画像を、蓄積された候補画像と照合する画像照合手段と、照合された画像に対応する前記識別情報を前記端末に送信する送信手段と、を備えるサーバと、を含む。
2015151449.tif 000002
【特許請求の範囲】
【請求項１】
画像と、当該画像または当該画像の一部画像の識別情報とを記憶する画像蓄積手段と、
前記識別情報と前記一部画像とをサーバに送信する送信手段と、
前記サーバから受信した識別情報に基づく付加情報を出力する出力手段と、を備える端末と、
前記端末から受信した前記一部画像を、蓄積された候補画像と照合する画像照合手段と、
照合された画像に対応する前記識別情報を前記端末に送信する送信手段と、を備えるサーバと、
を含む画像処理システム。
【請求項２】
前記出力手段は、画像を表示する画像表示手段であり、前記付加情報として、照合結果に関する情報を前記画像に重畳表示する
請求項１に記載の画像処理システム。
【請求項３】
画像と、当該画像または当該画像の一部画像の識別情報とを記憶する画像蓄積手段と、
前記画像の識別情報と、前記画像の一部画像とをサーバに送信し、前記サーバから受信した識別情報で識別される前記画像を前記サーバに送信する送信手段と、を備える端末と、
前記端末から受信した一部画像を、蓄積された候補画像と照合する画像照合手段と、
照合された画像に対応する前記識別情報を前記端末に送信する送信手段と、を備えるサーバと、
を含む画像処理システム。
【請求項４】
前記一部画像は、画像中から検出された物体を含み、
前記識別情報は、前記物体の位置情報または前記画像を取得した時刻情報である
請求項１乃至３のいずれかに記載の画像処理システム。
【請求項５】
前記端末は、
検出された前記物体領域を指定する入力手段を備え、
前記入力手段で指定された前記物体領域を含む一部画像が前記候補画像と照合されない場合、当該一部画像をデータベースに格納する
請求項４に記載の画像処理システム。
【請求項６】
前記サーバの前記送信手段は、前記候補画像から指定された画像を前記端末に送信し、
前記端末は、指定された前記画像を受信した場合、当該画像と前記一部画像とを照合する画像処理部を備える
請求項４乃至５のいずれかに記載の画像処理システム。
【請求項７】
前記端末は複数台存在し、前記端末の少なくとも一台が前記サーバに送信した前記一部画像が前記画像照合手段にて照合された場合、前記サーバは、照合された画像に対応する前記識別情報を前記端末とは別の端末に送信する
請求項１乃至６のいずれかに記載の画像処理システム。
【請求項８】
撮像手段が撮像した画像の物体領域の大きさを示す値が閾値より大きい場合には当該物体領域の画像を、そうでない場合には当該物体領域を含む所定領域の画像を出力する出力手段
を備える画像処理装置。
【請求項９】
端末が、
画像と、当該画像または当該画像の一部画像の識別情報とを画像蓄積手段に記憶し、
前記識別情報と前記一部画像とをサーバに送信し、
前記サーバから受信した識別情報に基づく付加情報を出力し、
サーバが、
前記端末から受信した前記一部画像を、蓄積された候補画像と照合し、
照合された画像に対応する前記識別情報を前記端末に送信する、
画像処理方法。
【請求項１０】
コンピュータを、
撮像手段が撮像した画像の物体領域の大きさを示す値が閾値より大きい場合には当該物体領域の画像を、そうでない場合には当該物体領域を含む所定領域の画像を出力する出力手段と、
して動作させるプログラムを記憶するコンピュータ読み取り可能な記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理技術に関する。
【背景技術】
【０００２】
近年、犯罪の抑止効果や犯罪発生時の状況を確認できるように監視カメラがいたるところに設置されるようになってきた。しかし、固定式の監視カメラのみでは死角となる範囲が発生するため、死角を容易に補完できるようなウェアラブル監視カメラシステムが提案されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００６−１４８８４２号公報
【特許文献２】特許第４１０４５７７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上記特許文献１の技術によればウェアラブル監視カメラシステムによりカメラ方向やカメラ位置は着用者の動作により自由に撮影することが可能である。しかし、特許文献２に記載のように、カメラ画像データをセンター側に送信する際には高圧縮符号化によりデータ量の削減が行われるのが通常である。【０００５】
例えばＭＰＥＧ２（Moving Picture Experts Group）方式やＨ．２６４方式などの画像圧縮方式を利用して監視カメラの画像データ量を削減しイーサネット（登録商標）や無線等で収集する方式が知られている。しかしながら、画像圧縮処理により圧縮歪等が発生するので、業務に必要となる鮮明な画像データが得られない場合がある。そのため、適切に業務を支援することができない場合がある。
本発明の目的の１つは、業務支援を適切に行うことのできる画像処理システム、画像処理装置、画像処理方法、及びプログラムを記憶する記録媒体を提供することにある。
【課題を解決するための手段】
【０００６】
かかる目的を達成するため、本発明の一態様に係る画像処理システムは、画像と、当該画像または当該画像の一部画像の識別情報とを記憶する画像蓄積手段と、前記識別情報と前記一部画像とをサーバに送信する送信手段と、前記サーバから受信した識別情報に基づく付加情報を出力する出力手段と、を備える端末と、前記端末から受信した前記一部画像を、蓄積された候補画像と照合する画像照合手段と、照合された画像に対応する前記識別情報を前記端末に送信する送信手段と、を備えるサーバと、を含む。【０００７】
また、本発明の一態様に係る画像処理システムは、画像と、当該画像または当該画像の一部画像の識別情報とを記憶する画像蓄積手段と、前記画像の識別情報と、前記画像の一部画像とをサーバに送信し、前記サーバから受信した識別情報で識別される前記画像を前記サーバに送信する送信手段と、を備える端末と、前記端末から受信した一部画像を、蓄積された候補画像と照合する画像照合手段と、照合された画像に対応する前記識別情報を前記端末に送信する送信手段と、を備えるサーバと、を含む。【０００８】
また、本発明の一態様に係る画像処理装置は、撮像手段が撮像した画像の物体領域の大きさを示す値が閾値より大きい場合には当該物体領域の画像を、そうでない場合には当該物体領域を含む所定領域の画像を出力する出力手段を備える。
本発明の一態様に係る画像処理方法は、端末が、画像と、当該画像または当該画像の一部画像の識別情報とを画像蓄積手段に記憶し、前記識別情報と前記一部画像とをサーバに送信し、前記サーバから受信した識別情報に基づく付加情報を出力し、サーバが、前記端末から受信した前記一部画像を、蓄積された候補画像と照合し、照合された画像に対応する前記識別情報を前記端末に送信する。
本発明の一態様に係るコンピュータ読み取り可能な記録媒体は、コンピュータを、撮像手段が撮像した画像の物体領域の大きさを示す値が閾値より大きい場合には当該物体領域の画像を、そうでない場合には当該物体領域を含む所定領域の画像を出力する出力手段と、して動作させるプログラムを記憶する。
【発明の効果】
【０００９】
本発明によれば、業務支援を適切に行うことのできる画像処理システム、画像処理装置、画像処理方法、及びプログラムを記憶する記録媒体が提供される。
【図面の簡単な説明】
【００１０】
【図１】図１は本発明の第１の実施形態の画像処理システムの一構成を示している。
【図２】図２は本発明の第１の実施形態の画像処理Ａ部の一構成を示している。
【図３】図３は本発明の第１の実施形態の動作フローの一例を示している。
【図４】図４は本発明の第１の実施形態の動作フローの一例を示している。
【図５】図５は本発明の第２の実施形態の画像処理システムの一構成を示している。
【図６】図６は本発明の第２の実施形態の動作フローの一例を示している。
【図７】図７は本発明の第３の実施形態の画像処理システムの一構成を示している。
【図８】図８は本発明の第３の実施形態の画像表示の一例を示している。
【図９】図９は本発明の第３の実施形態の動作フローの一例を示している。
【図１０】図１０は本発明の第４の実施形態の画像処理システムの一構成を示している。
【図１１】図１１は本発明の第５の実施形態の画像処理システムの一構成を示している。
【図１２】図１２は本発明の第６の実施形態の画像処理システムの一構成を示している。
【図１３】図１３は本発明の第７の実施形態の画像処理システムの一構成を示している。
【図１４】図１４は本発明の第８の実施形態の画像処理システムの一構成を示している。
【図１５】図１５は本発明の第９の実施形態の画像処理システムの一構成を示している。
【図１６】図１６は本発明の第１及び第１２の実施形態等の画像切り出し方法の一例を示している。
【図１７】図１７は本発明の第１０の実施形態の画像処理システムの一構成を示している。
【図１８】図１８は本発明の第１０の実施形態の動作フローの一例を示している。
【図１９】図１９は本発明の第１１の実施形態の画像処理システムの一構成を示している。
【図２０】図２０は本発明の第１１の実施形態の動作フローの一例を示している。
【図２１】図２１は本発明の第１２の実施形態の端末の一構成を示している。
【図２２】図２２は本発明の第１２の実施形態の画像切り出し方法の一例を示している。
【発明を実施するための形態】
【００１１】
以下、本発明の実施の形態について、図面を用いて説明する。すべての図面において、同様な構成要素には同様の符号を付し、適宜説明を省略する。なお、以下の説明における装置等を構成する各部は、論理回路等のハードウェアで構成される。また、各部は、コンピュータの制御部、メモリ、メモリにロードされたプログラム、プログラムを格納するハードディスク等の記憶ユニット、ネットワーク接続用インターフェース等からなり、ハードウェアとソフトウェアの任意の組合せによって実現されてもよい。また特に断りのない限り、その実現方法、装置は限定されない。
【００１２】
＜第１の実施形態＞
図１は、本発明の第１の実施の形態における、画像処理システム全体構成の一例を示した図である。
【００１３】
画像処理システムは、第一の監視情報端末部１と第一の監視サーバ部２とを含む。第一の監視情報端末部１と第一の監視サーバ部２とは、有線もしくは無線による通信Ｃ１によって接続される。
【００１４】
第一の監視情報端末部１は、カメラ部１１と、画像処理Ａ部１２と、画像蓄積部１３と、送受信部１４とを備える。
【００１５】
カメラ部１１によって撮影された画像データＡ１１は、画像処理Ａ部１２に入力される。
【００１６】
画像処理Ａ部１２は、予め設定された検出用パラメータに基づいて、画像データＡ１１に物体が含まれている場合に当該物体を含む物体領域を検出する。また、画像処理Ａ部１２は、当該物体領域の画像を切り出す機能を有する。切り出された画像を一部画像データＡ１３とも呼ぶ。画像処理Ａ部１２が検出する物体とは、例えば人物の顔や鞄や車などである。
【００１７】
画像処理Ａ部１２は、カメラ部１１から入力されたフレーム番号等の画像ＩＤ（IDentification）と一部画像データＡ１３とを、送受信Ａ部１４に出力する。
【００１８】
画像処理Ａ部１２は、画像データＡ１１を画像ＩＤと共に画像蓄積部１３に記録する。画像データＡ１１と画像ＩＤとの組み合わせを記録用データＡ１２とも呼ぶ。画像ＩＤはフレーム番号でも良いが、画面上に複数物体が含まれている場合もあるため、物体領域ごとに付与されたＩＤでも良い。その場合ＩＤは、物体の位置情報（座標情報）や物体のサイズ等でもよい。
【００１９】
なお記録用データＡ１２に対しては、画像蓄積部１３の記録容量や記録時間との関係に基づき、動画像圧縮方式を利用した画像圧縮が行われてもよい。動画像圧縮方式は、例えば、ＭＰＥＧ−２符号化方式やＭＰＥＧ−４  ＡＶＣ（Ａｄｖａｎｃｅｄ  Ｖｉｄｅｏ  Ｃｏｄｉｎｇ）方式等の、フレーム間差分を利用した符号化方式である。ＭＰＥＧ−２符号化方式は、ＩＳＯ（Ｉｎｔｅｒｎａｔｉｏｎａｌ  Ｏｒｇａｎｉｚａｔｉｏｎ  ｆｏｒ  Ｓｔａｎｄａｒｄｉｚａｔｉｏｎ）／ＩＥＣ（Ｉｎｔｅｒｎａｔｉｏｎａｌ  Ｅｌｅｃｔｒｏｔｅｃｈｎｉｃａｌ  Ｃｏｍｍｉｓｓｉｏｎ）１３８１８−２である。ＭＰＥＧ−４  ＡＶＣ方式は、ＩＳＯ／ＩＥＣ１４４９６−１０である。
【００２０】
画像処理Ａ部１２は、第一の監視サーバ部２から画像データの要求があった場合には、要求のあった画像データを、送受信Ａ部１４を介して第一の監視サーバ部２に送信する。詳細な動作については後述する。
【００２１】
送受信Ａ部１４は、画像処理Ａ部１２から出力された一部画像データＡ１３と画像ＩＤとを第一の監視サーバ部２に送信する。また、送受信Ａ部１４は、画像データを第一の監視サーバ部２に送信する。
【００２２】
第一の監視サーバ部２は、送受信Ｂ部２１と、画像処理Ｂ部２２と、データベース部２３と、画像表示部２４とを備える。
【００２３】
第一の監視情報端末部１から入力された一部画像データＡ１３及び画像ＩＤは、画像処理Ｂ部２２に入力される。
【００２４】
画像処理Ｂ部２２は、一部画像データＡ１３とデータベース部２３に登録されている画像データとの照合作業を行う。画像照合方法は照合したい物体に合わせて適宜設定される。
【００２５】
一部画像データＡ１３がデータベース部２３に含まれる画像と照合された場合、画像処理Ｂ部２２は、送受信Ｂ部２１を介して、第一の監視情報端末部１に当該画像ＩＤが記録されている画像データの要求を行う。具体的には、画像処理Ｂ部２２は、該当する画像ＩＤを抽出して第一の監視情報端末部１に送信しても良いし、画像ＩＤが含まれる画像データを第一の監視情報端末部１に送信しても良い。この場合、例えば、画像処理Ｂ部２２は、画像データが画像蓄積部１３に非圧縮もしくはフレーム内圧縮方式で記録されている場合には該当フレーム画像データを送信しても良い。また、画像処理Ｂ部２２は、画像データが画像蓄積部１３に動画像圧縮方式で記録されている場合には当該画像ＩＤが含まれるフレーム画像データが含まれる画像ストリームを送信しても良い。なお、フレーム内圧縮方式は例えばＩＳＯ/ＩＥＣ１０９１８−１（ＪＰＥＧ（Ｊｏｉｎｔ  Ｐｈｏｔｏｇｒａｐｈｉｃ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）圧縮方式）である。また、例えば、前記動画像圧縮方式で送信される画像ストリームとは、ＭＰＥＧ−２符号化方式におけるＧＯＰ（Group of Picture）単位である。
【００２６】
画像処理Ｂ部２２は、第一の監視サーバ部２に送信された画像データに、照合された物体画像の照合結果に関する情報を重畳して画像表示部２４に表示する。照合結果に関する情報の重畳表示について説明する。例えば物体が人間の顔であるとすれば、画像処理Ｂ部２２は、図８に示すように、照合された顔領域に対応する位置に枠を重畳表示させる。重畳して表示させるものは枠である必要はなく、また、枠に加えて画像ＩＤなども重畳され表示されても良い。
【００２７】
次に、本実施の形態の動作例を説明する。画像処理Ａ部１２は、図２に示すような画像ＩＯ（Input Output）部１２１、ＣＰＵ（Central Processing Unit）部１２２、メモリ部１２３、及び外部ＩＯ部１２４によって構成される。ＣＰＵ部１２２は、図３及び図４に示すフロー図のように動作する。
【００２８】
画像処理Ａ部１２の動作を、図２、図３、及び図４を利用して詳細に説明する。図３は例えば、通常監視状態における動作を表すフローである。ＣＰＵ部１２２は、電源投入時に各パラメータを初期化し（ステップＳ１）、カメラ部１１からの画像入力を受け付ける（ステップＳ２）。
【００２９】
ＣＰＵ部１２２は、画像ＩＯ部１２１からの画像入力が無くなると処理を終了する（ステップＳ３においてＹＥＳ）。一方、画像入力がある場合（ステップＳ３においてＮＯ）、ＣＰＵ部１２２はフレーム番号（ＦｒａｍｅＮｕｍ）をカウントし（ステップＳ４）、物体検出用のパラメータをメモリ部１２３から読み出す（ステップＳ５）。ＣＰＵ部１２２は、読みだしたパラメータに基づいて画像入力データから物体を検出する（ステップＳ６）。
【００３０】
物体が検出された場合（ステップＳ７においてＹＥＳ）、ＣＰＵ部１２２は検出された物体の画像内の座標位置情報（ＯｂｊｅｃｔＣｏｏｒｄ）と検出された物体を包含する画像データ領域（ＯｂｊｅｃｔＸｓｉｚｅ、ＯｂｊｅｃｔＹｓｉｚｅ）とを抽出する（ステップＳ８）。また、ＣＰＵ部１２２は、ユニークな物体検出番号（ＯｂｊｅｃｔＮｕｍ）を付加する（ステップＳ９）。
【００３１】
ＣＰＵ部１２２は、物体検出番号、座標位置情報、及び画像データ領域（一部画像データＡ１３）をひも付けし、テーブルにより管理する。ＣＰＵ部１２２は、更に物体検出番号とフレーム番号とから画像ＩＤを計算する（ステップＳ１０）。但し、画像ＩＤは、処理軽減の為、フレーム番号で代用されても構わない。
【００３２】
ＣＰＵ部１２２は、画像ＩＤと一部画像データＡ１３を送受信Ａ部１４に出力し（ステップＳ１１）、次の物体検出を行う。送受信Ａ部１４は、画像ＩＤと一部画像データＡ１３を第一の監視サーバ部２に送信する。
【００３３】
ＣＰＵ部１２２は、画像データ領域全体において検出作業を繰り返し、画像データ検出作業が終了すると、フレーム内において付加された画像ＩＤと共に画像符号化を行い（ステップＳ１２）、外部ＩＯ部１２４を介して、画像データを画像蓄積部１３に記録する（ステップＳ１３）。
【００３４】
また、第一の監視サーバ部２より画像ＩＤと共に画像データの要求があった場合には、ＣＰＵ部１２２は、画像ＩＤを解析し、画像ＩＤからフレーム番号を抽出する（ステップＳ１４）。ＣＰＵ部１２２は、当該フレーム番号の画像データが含まれる、蓄積された画像データ（画像ストリーム）を画像蓄積部１３から読み出す（ステップＳ１５）。ＣＰＵ部１２２は、送受信Ａ部１４に画像データ（画像ストリーム）を出力する（ステップＳ１６）。送受信Ａ部１４は、画像データを第一の監視サーバ部２に送信する。
【００３５】
これらの動作により第一の監視情報端末部１と第一の監視サーバ部２間で送受信するデータのサイズを少なくしつつ、画像照合を行う事が出来る画質を保つことができる。さらに、画像照合後に、第一監視サーバ部２側の監視員が、照合結果の画像全体を監視する事が出来る。
【００３６】
次に、図１に示す画像処理Ａ部１２の物体検出動作に関して、図１６を使用して詳細に説明する。例えば監視対象が人物である場合には、監視対象が手配犯であれば、手配写真と顔照合を行う事が望ましい。そのため、検出する顔画像のサイズは、手配写真と十分に照合できる程度のサイズであることが望ましい。
【００３７】
そこで、例えば図１６の（１）のように、人の顔の目の間の距離Ｗ１が、あらかじめ定めた画素数ＴＨ１より大きく且つＴＨ２より小さい場合には、画像処理Ａ部１２は、顔の輪郭より大きめのサイズの画像データ領域を切り出す。この場合には、顔画像のサイズが顔照合できる程度のサイズである可能性が高いためである。
【００３８】
一方、図１６の（２）のように、人の顔の目の間の距離Ｗ２が予め定めた画素数ＴＨ１より小さい場合には、画像処理Ａ部１２は、体全体の輪郭より大きめのサイズの画像データ領域を切り出す。顔画像のサイズが顔照合を行うには十分な大きさではない可能性が高いため、対象全体の画像を用いて画像照合を実行できるようにするためである。
【００３９】
但し、図１６の（１）のように、顔のサイズは閾値内に入っているものの、人物の顔特徴が十分に取得できない可能性がある場合には、画像処理Ａ部１２は、（２）のように体全体の輪郭より大きめのサイズに切り出しても良い。このような場合には、人物が眼鏡を掛けていたりマスクをしていたりする場合がある。
【００４０】
また、他の例として、図１６の（３）のように、対象物体が自動車である場合を説明する。監視対象が手配車両であると仮定すると、ナンバープレート領域を検出し、そのナンバープレートが読みとれるか否かが重要となる。そのため、画像処理Ａ部１２は、検出したナンバープレートの幅Ｗ３が、あらかじめ定めた画素数ＴＨ１より大きく且つＴＨ２より小さい場合には、ナンバープレートの領域を、画像データ領域として切り出す。ナンバープレートの読み出しが可能である可能性が高いためである。
【００４１】
これに対し、図１６の（４）のように、ナンバープレートの幅Ｗ４が、あらかじめ定めた画素数ＴＨ１より小さい場合には、画像処理Ａ部１２は、車全体の輪郭より大きめのサイズの画像データ領域を切り出し、監視サーバに送出する。
【００４２】
このような画像の切り出しにより、無駄な画像領域を第一の監視サーバ部２に送信しない様にする事によって、通信データサイズを少なくすることが可能になっている。
【００４３】
本実施の形態によれば、第一の監視情報端末部１と第一の監視サーバ部２との間で送受信されるデータサイズを少なくしつつ、画像照合を行う事が出来る画質を保つことができる。さらに、画像照合後に、第一監視サーバ部２側の監視員が、照合結果の画像全体を監視する事が出来る。そのため、画像処理システムは、適切に業務支援を行うことができる。
【００４４】
なお、上述の記載では、業務として監視業務の説明をしたが、業務は監視業務に限られない。例えば、本システムは、接客業務、及び保守点検業務等にも活用できる。そのため、他の業務においては、監視情報端末部、監視サーバ部は、それぞれ、単に端末、サーバと呼んでも良い。また、端末は、監視員や接客員等に保持される。ここで、保持については、帽子や衣服などの着衣等と一体となって着用される場合（ウェアラブル等）や、手や他の器具を介して持たれることも含まれる。なお、保持される端末は、いわゆるスカウタとよばれるものでもよい。スカウタとは、視界の一部または全部に半透明な映像を表示するメガネ型ヘッドマウントディスプレイと、目線カメラとを組み合わせるウェアラブルコンピュータである。スカウタは、例えば、映像出力や他の機器との通信を行う小型コンピュータで形成される。スカウタは、専用のカメラ付きメガネフレームや、マイク及びイヤホンなどの音声機器と接続される場合、監視業務のみならず、保守点検業務や組み立て業務などの、現場業務を支援することが可能である。以下の実施形態ではこれらの点について再記しないが、特に断りのない限り同様である。
【００４５】
＜第２の実施形態＞
図５は本発明の第２の実施の形態における画像処理システム全体構成の一例を示した図である。画像処理システムは、第二の監視情報端末部３と、第一の監視サーバ部２又は第二の監視サーバ部４とを含む。
【００４６】
第二の監視情報端末部３と第一の監視サーバ部２又は第二の監視サーバ部４とは、有線もしくは無線による通信Ｃ１によって接続される。以降、第二の監視情報端末部３と第二の監視サーバ部４とが通信Ｃ１によって接続されているケースを詳細に説明する。第１の実施形態と同様の部分については適宜説明を簡略化する。本実施の形態では、画像表示部１５が監視情報端末部３側に含まれている点で第１の実施形態と異なる。
【００４７】
第二の監視情報端末部３は、カメラ部１１と、画像処理Ａ部１２と、画像蓄積部１３と、送受信部１４と、画像表示部１５とを備える。
【００４８】
カメラ部１１において撮影された画像データＡ１１は、画像処理Ａ部１２に入力される。画像処理Ａ部１２は、第１の実施形態と同様に、予め設定された検出用パラメータを元に、画像データＡ１１において検出された物体を、切り出す。画像処理Ａ部１２は、第１の実施形態と同様に、カメラ部１１から入力されたフレーム番号等の画像ＩＤと、切り出した物体画像データＡ１３（一部画像データＡ１３）とを、送受信Ａ部１４に出力する。
【００４９】
画像処理Ａ部１２は、第１の実施形態と同様に、画像データＡ１１と前記画像ＩＤとを、画像蓄積部１３に記録する。
【００５０】
送受信Ａ部１４は、第１の実施形態と同様に、画像処理Ａ部１２から出力された、一部画像データＡ１３と画像ＩＤとを合わせて、第二の監視サーバ部４に送信する。
【００５１】
第二の監視サーバ部４は、送受信Ｂ部２１と、画像処理Ｂ部２２と、データベース部２３とを備える。
【００５２】
第１の実施形態と同様に、一部画像データＡ１３及び画像ＩＤは、画像処理Ｂ部２２に入力される。画像処理Ｂ部２２は、一部画像データＡ１３とデータベース部２３に登録されている画像データとの照合作業を行う。
【００５３】
第１の実施形態と同様に、画像処理Ｂ部２２は、一部画像Ａ１３がデータベース部２３の画像と照合された場合には、照合された画像に関する画像ＩＤを抽出し、送受信Ｂ部２１を介して、第二の監視情報端末部３に画像ＩＤを送信する。
【００５４】
第二の監視情報端末部３の画像処理Ａ部１２は、画像蓄積部１３を参照し、第二の監視情報端末部３から取得した画像ＩＤに関する画像データに、物体画像の照合結果に関する情報を重畳することによって得られる画像データＡ１４を、画像表示部１５に表示する。具体的には、例えば、画像処理Ａ部１２は、画像ＩＤをもとに、上述のフレーム番号（ＦｒａｍｅＮｕｍ）、座標位置情報（ＯｂｊｅｃｔＣｏｏｒｄ）、及び画像データ領域（ＯｂｊｅｃｔＸｓｉｚｅ、ＯｂｊｅｃｔＹｓｉｚｅ）を抽出する（図６のステップＳ２１）。次に、画像処理Ａ部１２は、画像蓄積部１３を参照し、そして、抽出したフレーム番号の画像ストリームを読み出す（図６のステップＳ２２）。次に、画像処理Ａ部１２は、読み出した画像ストリームの、目的のフレームをデコードし、座標位置情報をもとに、照合した画像領域に、物体画像の照合結果に関する情報を重畳表示する（図６のステップＳ２３）。重畳表示の例は第１の実施形態と同様である。
【００５５】
本実施の形態によれば、第二の監視情報端末部３と第二の監視サーバ部４と間で、通信Ｃ１を介して送受信されるデータのサイズを少なくしつつ、画像照合を行う事が出来る画質を十分確保することができる。さらに、本実施の形態によれば、第二の監視サーバ部４にて画像照合が行われた場合、監視情報端末部３にて監視員が照合結果の画像を確認することができるため、照合結果の物体を注意深く監視する事ができる。なお、第二の監視情報端末部３が第一の監視サーバ部２と接続されている場合には、サーバ側で監視している監視員も同様の監視を行える。このように、画像処理システムは、適切に業務支援を行うことができる。
【００５６】
＜第３の実施形態＞
図７は本発明の第３の実施の形態における、画像処理システムの構成の一例を示した図である。画像処理システムは、第三の監視情報端末部５と、第一の監視サーバ部２又は第二の監視サーバ部４とを含む。
【００５７】
第三の監視情報端末部５と、第一の監視サーバ部２又は第二の監視サーバ部４とは、有線もしくは無線による通信Ｃ１によって接続される。以降、第一の監視サーバ部２と接続されているシステムに関して詳細に説明する。上述の実施形態と同様の部分については適宜説明を簡略化する。本実施の形態の監視情報端末部５は、入力部１６を備える点で、上述の実施形態と異なる。
【００５８】
第三の監視情報端末部５は、カメラ部１１と、画像処理Ａ部１２と、画像蓄積部１３と、送受信部１４と、画像表示部１５と、入力部１６とを備える。
【００５９】
上述の実施形態と同様に、カメラ部１１において撮影された画像データＡ１１は、画像処理Ａ部１２に入力される。画像処理Ａ部１２は、予め設定された検出用パラメータを元に画像データＡ１１から検出した物体画像を、切り出す。送受信Ａ部１４は、画像ＩＤと切り出された物体画像データＡ１３とを、第一の監視サーバ部２に送信する。更に、画像処理Ａ部１２は、画像データＡ１１を、画像ＩＤと共に、画像蓄積部１３に記録する。また、画像処理Ａ部１２は、検出した物体をカメラ入力画像に重畳し、画像表示部１５に表示する。この場合、例えば、画像表示部１５には、図８に示すように、検出された顔領域に枠が重畳され表示される。さらに、図８に示すように、顔領域の枠の近傍に、当該人物を識別するＩＤが、重畳され表示されても良い。
【００６０】
入力部１６は、例えば、表示画面上のタッチセンサ、十字キー、又は、ＩＤを直接入力できるボタン等として設けられる、情報入力手段である。
【００６１】
入力部１６は以下のように用いられる。例えば、物体が人物であるとする。第三の監視情報端末部５を保持する監視員は、例えば、不審な動作をしている人物が画像に写っている場合に、その人物のＩＤなどの、物体領域を示す情報を、入力部１６によって指定する。入力方法は特段限定されない。例えば、図８に示すように、顔領域にＩＤを示す枠が重畳表示され、当該枠を選択することによって、人物のＩＤが選択され入力されても良い。
【００６２】
ＩＤが入力されると、第三の監視情報端末部５は、当該ＩＤを、そのＩＤが他のＩＤと区別可能なように、第一の監視サーバ部２に送信する。第一の監視サーバ部２は、他の処理より優先して、本ＩＤで識別される人物の顔画像が、データベース部２３に登録されている顔画像と一致するか否かを照合する。その顔画像は、登録されていない顔画像であった場合には、要注意人物としてデータベース部２３に追加登録されても良い。
【００６３】
図２、３、９を用いて本実施の形態の動作について説明する。画像処理Ａ部１２の構成は、上述のように図２に示される通りである。ステップＳ１０までの説明は、図３と同様であるため、省略する。
【００６４】
次に、ＣＰＵ部１２２は、検出した物体をカメラ入力画像に重畳し、画像表示部１５に表示する（ステップＳ３１）。第三の監視情報端末部５の操作者は、注目する物体が映像中に存在する場合に、入力部１６を介して、物体のＩＤを入力又は選択する（ステップＳ３２においてＹＥＳ）。これにより、ＣＰＵ部１２２は、当該ＩＤに注目物体フラグを付加して、そして、画像ＩＤを計算する（ステップＳ３３）。その後、フローは図３のステップＳ１１に進む。
【００６５】
第一の監視サーバ部２は、他の処理より優先して、画像ＩＤで識別される物体の画像が、データベース部２３に登録されている画像であるか否かを照合する。物体の画像が登録されていない画像であった場合には、当該画像は、要注意対象としてデータベース部２３に追加登録されても良い。
【００６６】
本実施の形態によれば、監視情報端末部３は、監視したい対象を選択することによって、優先的に照合結果を得ることができる。なお、第三の監視情報端末部５が第一の監視サーバ部２と接続されている場合には、サーバ側で監視している監視員も監視ができる。このように、画像処理システムは、適切に業務支援を行うことができる。
【００６７】
＜第４の実施形態＞
図１０は本発明の第４の実施の形態における、画像処理システムの構成の一例を示した図である。画像処理システムは、第四の監視情報端末部７と、第一の監視サーバ部２又は第二の監視サーバ部４とを含む。
【００６８】
第四の監視情報端末部７と第一の監視サーバ部２又は第二の監視サーバ部４とは、有線もしくは無線による通信Ｃ１によって接続される。以降、第二の監視サーバ部４と接続されているシステムに関して、詳細に説明する。上述の実施形態と同様の部分については適宜説明を省略する。本実施の形態の監視情報端末部７は、画像処理Ｃ部１７を備える点で、上述の実施形態と異なる。
【００６９】
第四の監視情報端末部７は、カメラ部１１と、画像処理Ａ部１２と、画像蓄積部１３と、送受信Ａ部１４と、画像表示部１５と、画像処理Ｃ部１７とを備える。画像処理Ｃ部１７以外の機能、及び構成については上述の通りであるから、説明を省略する。
【００７０】
第二の監視サーバ部４は、監視領域内にて監視を強化する物体が予め判明している場合等には、その物体の画像データ又は画像特徴量を、第四の監視情報端末部７に送信する。監視を強化する物体とは、例えば、指名手配犯や凶器となりうる物体等であるが、監視業務以外においては、優良顧客等でも良い。このような物体を以下では単に対象物体とよぶ。このような対象物体は、監視者等によってあらかじめ指定されてデータベース部２３に格納される。
【００７１】
第四の監視情報端末部７には、対象物体の画像データ又は画像特徴量が第二の監視サーバ部４から入力され、画像処理Ｃ部１７に当該特徴量等が記憶される（又は一時記憶される）。
【００７２】
画像処理Ｃ部１７は、画像処理Ａ部１２において検出された物体画像領域データと、記憶されている画像データ又は画像特徴量とを利用して、画像照合を行う。画像照合の結果として、対象物体の画像が照合された場合には、画像表示部１５に、対象物体の画像、又は当該画像を他の物体と区別する情報が表示される。
【００７３】
画像処理Ｃ部１７の構成は、図２に示す、画像処理Ａ部と同じ構成でよい。従って、図２のＣＰＵ部１２２の性能に余裕があれば、画像処理Ａ部１２と画像処理Ｃ部１７とは、同じＣＰＵ部において演算を行うことによってもよい。
【００７４】
これにより、監視員等が、要注意物体等の監視を行う事ができる。このように、画像処理システムは、適切に業務支援を行うことができる。
【００７５】
＜第５の実施形態＞
図１１は本発明の第５の実施の形態における、画像処理システムの構成の一例を示した図である。画像処理システムは、第五の監視情報端末部８と、第一の監視サーバ部２又は第二の監視サーバ部４とを含む。
【００７６】
第五の監視情報端末部８と第一の監視サーバ部２又は第二の監視サーバ部４とは、有線又は無線による通信Ｃ１によって接続される。以降、第二の監視サーバ部４と接続されているシステムに関して詳細に説明する。上述の実施形態と同様の部分については適宜説明を省略する。本実施の形態の監視情報端末部８は、入力部１６と画像処理Ｃ部１７とを共に備える点で、上述の実施形態と異なる。
【００７７】
第五の監視情報端末部８は、カメラ部１１と、画像処理Ａ部１２と、画像蓄積部１３と、送受信部１４と、画像表示部１５と、入力部１６と、画像処理Ｃ部１７とを備える。入力部１６及び画像処理Ｃ部１７以外の機能及び構成については、説明を省略する。
【００７８】
入力部１６は、上述のような、タッチセンサ、十字キー、又は、ＩＤを直接入力できるようなボタン等の入力手段である。第五の監視情報端末部８を保持する監視員は、不審な動作をしている人物が映像に写っている場合に、その人物のＩＤを入力部１６によって入力する。その場合、第五の監視情報端末部８は、当該ＩＤを、そのＩＤが他のＩＤと区別可能なように、第二の監視サーバ部４に送信する。第二の監視サーバ部４は、他の処理より優先して、本ＩＤで識別される人物の顔画像が、データベース部２３に登録されている顔画像であるか否かを照合する。その顔画像が、登録されていない顔画像であった場合には、顔画像は、要注意人物として、データベース部２３に追加登録されても良い。
【００７９】
第二の監視サーバ部４は、予め対象物体が分かっている場合には、その画像データ又は画像特徴量を、第五の監視情報端末部８に送信しておく。これにより、第五の監視情報端末部８には、対象物体の画像データ又は画像特徴量が第二の監視サーバ部４から入力され、画像処理Ｃ部１７に特徴量が記憶される（又は一時記憶される）。
【００８０】
画像処理Ｃ部１７は、画像処理Ａ部１２で検出された物体画像領域データと、記憶されている画像データ又は画像特徴量とを利用して、画像照合を行う。画像照合結果として、対象物体の画像が照合された場合には、画像表示部１５に、対象物体の画像、又は、当該画像を他の物体と区別する情報が表示される。
【００８１】
このように、入力部１６と画像処理Ｃ部１７とを共に備えることにより、端末側及びサーバ側の両者にて注目対象を指定することができる。そのため、監視員等は、要注意物体の監視をより注意深く行なうことができる。このように、画像処理システムは、適切に業務支援を行うことができる。
【００８２】
＜第６の実施形態＞
図１２は本発明の第６の実施の形態における、画像処理システムの構成の一例を示した図である。画像処理システムは、複数台の第二の監視情報端末部３及び３'と、第一の監視サーバ部２又は第二の監視サーバ部４とを含む。図１２及び以下の説明では、２台の第二の監視情報端末部３及び３'が示されるが、第二の監視情報端末部は３台以上でも良い。
【００８３】
図１２に示すように、第二の監視情報端末部３及び３'と第一の監視サーバ部２（又は第二の監視サーバ部４）とは、有線もしくは無線による通信ネットワーク９（以下、ネットワーク９とも表記される）を介して接続されている。第二の監視情報端末部３及び３'は、第２の実施形態で構成及び動作を説明しているため、異なる動作の部分のみ詳細に説明する。
【００８４】
第二の監視情報端末部３が検出した物体の一部画像データＡ１３は、ネットワーク９を介して、第一の監視サーバ部２に入力される。第一の監視サーバ部２において、画像処理Ｂ部２２は、データベース部２３の画像データ又は画像特徴量と、一部画像データＡ１３との画像照合を行う。第一の監視サーバ部２は、一部画像データＡ１３がデータベース部２３に登録されている画像データと照合された場合、照合された画像データを、第二の監視情報端末部３'に照合画像データとして送信する。
【００８５】
第二の監視情報端末部３'は、画像表示部１５に、通信Ｃ１を介して送信された画像データを表示する。これにより、別の監視情報端末で検出された画像データが共有される。
【００８６】
本実施の形態によれば、第二の監視情報端末部３'の画像表示部１５を見ることができる監視員に対して、データベース部２３に登録されている画像データを表示できる。これにより、他の監視員が不審物及び不審者等を発見した場合に、別の監視員と情報共有を行うことが可能となる。このように、画像処理システムは、適切に業務支援を行うことができる。
【００８７】
＜第７の実施形態＞
図１３は本発明の第７の実施の形態における、画像処理システムの構成の一例を示した図である。画像処理システムは、複数台の第三の監視情報端末部５及び５'と、第一の監視サーバ部２又は第二の監視サーバ部４とを含む。図１３及び以下の説明では、２台の第三の監視情報端末部５及び５'が示されるが、第三の監視情報端末部は３台以上でも良い。
【００８８】
図１３に示すように、第三の監視情報端末部５及び５'と第一の監視サーバ部２（又は第二の監視サーバ部４）とは、有線もしくは無線による通信ネットワーク９を介して接続されている。第三の監視情報端末部５及び５'の構成及び動作は、第３の実施形態において説明されているため、異なる動作の部分のみを詳細に説明する。また、第６の実施形態と同様の動作を行う部分も説明を省略する。
【００８９】
第三の監視情報端末部５を保持する監視員は、上述のように、例えば、物体検出した画像データの中で気になる物体に対して、その物体のＩＤを入力部１６によって入力する。当該ＩＤは、一部画像データＡ１３と共に、ネットワーク９を介して、第一の監視サーバ部２に入力される。第一の監視サーバ部２において、画像処理Ｂ部２２は、データベース部２３の画像データ又は画像特徴量と、一部画像データＡ１３との画像照合を行う。
【００９０】
第一の監視サーバ部２は、一部画像データＡ１３がデータベース部２３に登録されている画像データと照合された場合に、その画像データを、第三の監視情報端末部５'に、照合画像データとして、通信Ｃ１を介して送信する。
【００９１】
第三の監視情報端末部５'は、画像表示部１５に、受信した照合画像データを表示する。これにより、別の監視情報端末で検出された画像データが共有される。
【００９２】
本実施の形態によれば、第三の監視情報端末部５'の画像表示部１５を見ることができる監視員に対して、データベース部２３に登録されている画像データを表示できる。これにより、他の監視員が不審物及び不審者等を発見した場合に、別の監視員と情報共有を行うことが可能となる。このように、画像処理システムは、適切に業務支援を行うことができる。
【００９３】
＜第８の実施形態＞
図１４は、本発明の第８の実施の形態における、画像処理システムの構成の一例を示した図である。画像処理システムは、複数台の第四の監視情報端末部７及び７'と、第一の監視サーバ部２又は第二の監視サーバ部４とを含む。図１４及び以下の説明では、２台の第四の監視情報端末部７及び７'が示されるが、第四の監視情報端末部は３台以上でも良い。
【００９４】
図１４に示すように、第四の監視情報端末部７及び７'と、第一の監視サーバ部２（又は第二の監視サーバ部４）とは、有線もしくは無線による通信ネットワーク９を介して接続されている。第四の監視情報端末部７及び７'の構成及び動作は、第４の実施の形態で説明されているため、異なる動作の部分のみ詳細に説明する。また、他の実施形態と同様の動作を行う部分の説明も省略する。
【００９５】
第四の監視情報端末部７には、対象物体の画像データ又は画像特徴量が、第一の監視サーバ部２から入力され、画像処理Ｃ部１７に特徴量が記憶される。画像処理Ｃ部１７は、画像処理Ａ部１２で検出された物体画像領域データと、記憶されている画像データ又は画像特徴量とを利用して、画像照合を行う。第四の監視情報端末部７'でも同様の処理が行われる。
【００９６】
第四の監視情報端末部７または７'が検出した物体の一部画像データＡ１３は、ネットワーク９を介して、第一の監視サーバ部２に送信される。第一の監視サーバ部２は、その画像データを、他の端末である第四の監視情報端末部７'及び７に送信する。第四の監視情報端末部７'は、画像表示部１５に画像データＳ３を表示する。これにより、別の監視情報端末で検出された画像データが共有される。
【００９７】
本実施の形態によれば、監視対象の画像を共有できる。これにより、他の監視員が不審物及び不審者等を発見した場合に、別の監視員と情報共有を行うことが可能となる。このように、画像処理システムは、適切に業務支援を行うことができる。
【００９８】
＜第９の実施形態＞
図１５は、本発明の第９の実施の形態における、画像処理システムの構成の一例を示した図である。画像処理システムは、複数台の第五の監視情報端末部８及び８'と、第一の監視サーバ部２又は第二の監視サーバ部４とを含む。図１５及び以下の説明では２台の第五の監視情報端末部８及び８'が示されるが、第五の監視情報端末部は３台以上でも良い。
【００９９】
第五の監視情報端末部８及び８'と、第一の監視サーバ部２又は第二の監視サーバ部４とは、有線もしくは無線による通信ネットワーク９を介して接続されている。第五の監視情報端末部８及び８'の構成及び動作は、第五の実施の形態において説明されているため、異なる動作の部分のみ詳細に説明する。また、上述の実施形態で説明している部分に関しても、説明を省略する。
【０１００】
第五の監視情報端末部８を保持する監視員は、他の物体と区別したい物体のＩＤを、入力部１６によって入力する。第五の監視情報端末部８は、当該ＩＤを第一の監視サーバ部２に送信する。第一の監視サーバ部２は、他の処理より優先して、本ＩＤで識別される物体の画像が、データベース部２３に登録されている画像データであるか否かを照合する。
【０１０１】
物体の画像がデータベース部２３に登録されている画像データでなかった場合には、その画像データは、第五の監視情報端末部８'に通信Ｃ１によって照合画像データとして送信される。第五の監視情報端末部８'は、画像表示部１５に画像データＳ３を表示する。
【０１０２】
また、第一の監視サーバ部２は、予め検出したい対象物体が分かっている場合には、その画像データ又は画像特徴量を、第五の監視情報端末部８及び８'に送信しておく。これにより、第五の監視情報端末部８及び８'には、対象物体の画像データ又は画像特徴量が、第一の監視サーバ部２から入力され、画像処理Ｃ部１７に特徴量が記憶される。
【０１０３】
画像処理Ｃ部１７は、通信Ｃ１によって送信された画像データを、対象物体の画像データ又は画像特徴量と照合し、照合された場合には画像表示部１５に照合画像を表示する。
【０１０４】
本実施の形態によれば、監視対象の画像を共有できる。これにより、他の監視員は、不審物及び不審者等を発見した場合に、別の監視員と情報共有を行うことが可能となる。このように、画像処理システムは、適切に業務支援を行うことができる。
【０１０５】
＜第１０の実施形態＞
次に、本発明の第１０の実施形態について説明する。図１７は本実施の形態の画像処理システムの構成の一例を示している。画像処理システムは、画像蓄積部１０１と、送信部１０２と、出力部１０３とを備える端末１０と、画像照合部２０１と、送信部２０２とを備えるサーバ２０と、を含む。
【０１０６】
画像蓄積部１０１は、画像と、当該画像または当該画像の一部画像のＩＤ（すなわち識別情報）とを、関連付けて記憶する。画像は、カメラ等の撮像装置から取得された画像でも良い。端末１０は、取得される画像ごと（又は一部画像ごと）に一意のＩＤを付与して、画像蓄積部１０１に記録しても良いし、予めＩＤが付与された画像を取得して、画像蓄積部１０１に記録しても良い。一部画像とは、画像から切り出された部分画像である。一部画像は、例えば物体が写っている領域（すなわち物体領域）を含む。第１の実施形態で説明したように、端末１０は、物体検出機能を備える画像処理部を備えていても良い。なお、ＩＤは、画像自体のフレーム番号によって画像ごとに付与されても良いが、画面上に複数物体が含まれている場合もあるため、物体の位置情報（すなわち座標情報）や物体のサイズ等によって一部画像ごとに付与されても良い。送信部１０２は、ＩＤと一部画像とをサーバ２０に送信する。
【０１０７】
出力部１０３は、サーバ２０から受信したＩＤに基づく付加情報を出力する。出力とは、表示部への画像表示出力、及び、外部装置への出力等である。付加情報とは、サーバ２０での照合結果に関する情報である。例えば、付加情報は、サーバ２０から受信したＩＤに対応付けられた画像（又は一部画像）を他の画像（又は他の一部画像）と区別する情報である。例えば、付加情報は、物体が人物の顔画像である場合、図８に示されるように、検出した顔領域に重畳表示される枠である。さらに、図８に示すように、顔領域の枠の近傍に当該人物を識別するＩＤが重畳表示されても良い。この場合には、ＩＤそのものが付加情報である。また、付加情報は、顔領域が写っている一部画像そのものであっても良い。
【０１０８】
画像照合部２０１は、端末１０から受信した一部画像を、候補画像と照合する。候補画像はサーバ２０内又は外に設けられた不図示のデータベースに格納されている。送信部２０２は、照合された画像に関連するＩＤを端末１０に送信する。
【０１０９】
本実施の形態の画像処理システムの動作を、図１８を用いて説明する。上述のように、端末１０の送信部１０２は、ＩＤと一部画像とをサーバ２０に送信する（ステップＳ１０１）。サーバ２０の画像照合部２０１は、端末１０から受信した一部画像を候補画像と照合する（ステップＳ１０２）。照合された場合（ステップＳ１０２においてＹＥＳ）、照合された画像に関連するＩＤを端末１０に送信する（ステップＳ１０３）。端末１０の出力部１０３は、サーバ２０から受信したＩＤに基づく付加情報を出力する（ステップＳ１０４）。端末１０は、全体画像を蓄積していることから、一部画像の照合結果と、当該一部画像とを含む全体の画像との関連性を把握することもできる。従って、例えば、出力部１０３は、図８に示すように、一部画像（例えば顔画像）と全体の画像（例えば、人物全体の画像、又は背景画像等）とを重畳して、表示部に表示させても良い。
【０１１０】
本実施の形態によれば、端末がサーバに送信する画像は一部画像で良いので、通信負荷を低減できる。また、端末自身に画像照合手段を設ける必要はなく、サーバで画像照合を行わせた結果を、端末保持者が確認できる。そのため、本実施の形態の画像処理システムによれば、監視業務や接客業務などの業務支援を適切に行うことができる。
【０１１１】
＜第１１の実施形態＞
次に、本発明の第１１の実施形態について説明する。図１９は本実施の形態の画像処理システムの構成の一例を示している。画像処理システムは、画像蓄積部１０１と、送信部１０４とを備える端末１０と、画像照合部２０１と、送信部２０２とを備えるサーバ２０と、を含む。画像蓄積部１０１、画像照合部２０１、及び送信部２０２は、第１０の実施形態と同様であるため、説明を省略する。動作の詳細説明は、第１０の実施形態と重複するため省略するが、図１８に示すステップＳ１０５が、第１０の実施形態と異なる。
【０１１２】
第１０の実施形態では、サーバ２０において実行された画像照合の処理結果が端末１０に提示される。これに対し、サーバ２０に一部画像が送信されて画像照合が行われる場合、サーバ２０側の監視者等は、一部画像のみならず、一部画像が含まれる画像の全体像を把握したい場合がある。そのため、本実施の形態の送信部１０４は、一部画像をサーバ２０に送信する点は送信部１０２と同様であるが、その後、さらに、サーバ２０から受信したＩＤで識別される一部画像を含む全体の画像を、サーバ２０に送信する（図２０のステップＳ１０５）。
【０１１３】
これにより、サーバ２０にて一部画像が候補画像と照合されると、サーバ２０は、一部画像を含む全体画像の送信要求を、端末１０に対して行うことができるようになる。
【０１１４】
＜第１２の実施形態＞
次に、本発明の第１２の実施形態について説明する。本実施の形態の画像処理装置１００は、出力部１００１を備える（図２１参照）。
【０１１５】
出力部１００１は、不図示の撮像部が撮像した画像中の物体領域の大きさを示す値が閾値より大きい場合には当該物体領域の画像を、そうでない場合には当該物体領域を含む所定領域の画像を出力する。出力とは表示部への画像表示出力、及び、外部装置への出力等である。
【０１１６】
具体的には、画像処理装置１００は例えば以下のように動作する。まず、画像処理装置１００は、不図示のカメラ等の撮像部を備え、撮像部によって、画像処理装置１００の保持者が、周囲の様子を撮像する。さらに、画像処理装置１００は不図示の物体検出部を備え、物体検出部は、撮像部によって撮像された画像から、物体の領域を検出する。物体とは、人物、車、商品、それらの一部、それらへの印字部分、又は、それらに付されたシールなど、である。ここでは物体は人物の顔であると仮定する。
【０１１７】
物体検出部が検出する顔画像のサイズは、手配写真等と十分に照合できる程度のサイズであることが望ましい。そこで、例えば図１６に示す（１）のように、物体領域の大きさを示す値である、人の顔の目の間の距離Ｗ１が、閾値である画素数ＴＨ１より大きい場合には、物体検出部は顔画像を切り出す。
【０１１８】
一方、図１６に示す（２）のように、人の顔の目の間の距離Ｗ２が画素数ＴＨ１より小さい場合には、物体検出部は、顔画像を含む所定領域である人物の体全体の輪郭のサイズの、画像データ領域を切り出す。
【０１１９】
なお、図１６に示す（１）のように、顔のサイズは閾値内であるものの、人物の顔特徴が十分に取得できない可能性がある場合には、物体検出部は、図１６に示す（２）のように、体全体の輪郭より大きめのサイズの画像データ領域を切り出しても良い。このような場合には、人物が眼鏡を掛けていたりマスクをしていたりする場合がある。
【０１２０】
また、他の例として、図１６に示す（３）のように、物体が自動車のナンバープレートである場合を説明する。この場合、物体検出部は、検出したナンバープレートの幅Ｗ３があらかじめ定めた画素数ＴＨ１より大きい場合には、ナンバープレートの領域を画像データ領域として切り出す。一方、図１６に示す（４）のように、ナンバープレートの幅Ｗ４があらかじめ定めた画素数ＴＨ１より小さい場合には、物体検出部は、車全体の輪郭あるいはそれより大きめのサイズの画像データ領域を切り出す。出力部１００１はこのように切り出された画像を出力する。
【０１２１】
また、他の例として、図２２のように物体が商品のロゴである場合を説明する。なお、ロゴとは、商標及びトレードマークに限らず、商品を他と識別可能な、記号、文字、又は図形等である。この場合、物体検出部は、検出したロゴの幅Ｄ２があらかじめ定めた画素数より大きい場合には、ロゴの領域を画像データ領域として切り出す。一方、図２２のように、ロゴの幅Ｄ２があらかじめ定めた画素数より小さい場合には、物体検出部は、商品全体の輪郭又はそれより大きめのサイズの画像データ領域を切り出す。出力部１００１はこのように切り出された画像を出力する。
【０１２２】
本実施の形態によれば、画像の切り出しにより、無駄な画像領域を出力しない様にする事ができる。そのため、効率的な画像処理が可能となり、適切に業務支援を行うことができる。
【０１２３】
本発明は上述の実施形態に限定されない。また以下のようにも記載できるが、それに限られない。
（付記１）
画像と、当該画像または当該画像の一部画像の識別情報とを記憶する画像蓄積手段と、
前記識別情報と前記一部画像とをサーバに送信する送信手段と、
前記サーバから受信した識別情報に基づく付加情報を出力する出力手段と、を備える端末と、
前記端末から受信した前記一部画像を、蓄積された候補画像と照合する画像照合手段と、
照合された画像に対応する前記識別情報を前記端末に送信する送信手段と、を備えるサーバと、
を含む画像処理システム。
（付記２）
前記出力手段は、画像を表示する画像表示手段であり、前記付加情報として、照合結果に関する情報を前記画像に重畳表示する
付記１に記載の画像処理システム。
（付記３）
画像と、当該画像または当該画像の一部画像の識別情報とを記憶する画像蓄積手段と、
前記画像の識別情報と、前記画像の一部画像とをサーバに送信し、前記サーバから受信した識別情報で識別される前記画像を前記サーバに送信する送信手段と、を備える端末と、
前記端末から受信した一部画像を、蓄積された候補画像と照合する画像照合手段と、
照合された画像に対応する前記識別情報を前記端末に送信する送信手段と、を備えるサーバと、
を含む画像処理システム。
（付記４）
前記一部画像は、画像中から検出された物体を含み、
前記識別情報は、前記物体の位置情報または前記画像を取得した時刻情報である
付記１乃至３のいずれかに記載の画像処理システム。
（付記５）
前記端末は、
検出された前記物体領域を指定する入力手段を備え、
前記入力手段で指定された前記物体領域を含む一部画像が前記候補画像と照合されない場合、当該一部画像をデータベースに格納する
付記４に記載の画像処理システム。
（付記６）
前記サーバの前記送信手段は、前記候補画像から指定された画像を前記端末に送信し、
前記端末は、指定された前記画像を受信した場合、当該画像と前記一部画像とを照合する画像処理部を備える
付記４乃至５のいずれかに記載の画像処理システム。
（付記７）
前記端末は複数台存在し、前記端末の少なくとも一台が前記サーバに送信した前記一部画像が前記画像照合手段にて照合された場合、前記サーバは、照合された画像に対応する前記識別情報を前記端末とは別の端末に送信する
付記１乃至６のいずれかに記載の画像処理システム。
（付記８）
撮像手段が撮像した画像の物体領域の大きさを示す値が閾値より大きい場合には当該物体領域の画像を、そうでない場合には当該物体領域を含む所定領域の画像を出力する出力手段を備える
画像処理装置。
（付記９）
前記物体領域は人物の顔領域であり、前記所定領域は当該人物の全体を含む画像である
付記８に記載の画像処理装置。
（付記１０）
前記物体領域は車のナンバープレートであり、前記所定領域は当該車の全体を含む画像である
付記８に記載の画像処理装置。
（付記１１）
端末が、画像と、当該画像または当該画像の一部画像の識別情報とを記憶し、前記識別情報と前記一部画像とをサーバに送信し、前記サーバから受信した識別情報に基づく付加情報を出力し、
前記サーバが、前記端末から受信した前記一部画像を、蓄積された候補画像と照合し、照合された画像に対応する前記識別情報を前記端末に送信する
画像処理方法。
（付記１２）
前記端末は画像を表示する画像表示手段に前記付加情報を出力し、前記付加情報として、照合結果に関する情報を前記画像に重畳表示する
付記１１に記載の画像処理方法。
（付記１３）
端末が、画像と、当該画像または当該画像の一部画像の識別情報とを記憶し、前記画像の識別情報と、前記画像の一部画像とをサーバに送信し、前記サーバから受信した識別情報で識別される前記画像を前記サーバに送信し、
前記サーバが、前記端末から受信した一部画像を、蓄積された候補画像と照合し、照合された画像に対応する前記識別情報を前記端末に送信する
画像処理方法。
（付記１４）
前記一部画像は、画像中から検出された物体を含み、
前記識別情報は、前記物体の位置情報または前記画像を取得した時刻情報である
付記１１乃至１３のいずれかに記載の画像処理方法。
（付記１５）
前記端末は、
検出された前記物体領域を指定する入力手段を介して物体領域の指定を受け付け、指定された前記物体領域を含む一部画像が前記候補画像と照合されない場合、当該一部画像をデータベースに格納する
付記１４に記載の画像処理方法。
（付記１６）
前記サーバは、前記候補画像から指定された画像を前記端末に送信し、
前記端末は、指定された前記画像を受信した場合、当該画像と前記一部画像とを照合する
付記１４乃至１５のいずれかに記載の画像処理方法。
（付記１７）
前記端末は複数台存在し、前記端末の少なくとも一台が前記サーバに送信した前記一部画像が照合された場合、前記サーバは、照合された画像に対応する前記識別情報を前記端末とは別の端末に送信する
付記１１乃至１６のいずれかに記載の画像処理方法。
（付記１８）
端末が、撮像手段が撮像した画像の物体領域の大きさを示す値が閾値より大きい場合には当該物体領域の画像を、そうでない場合には当該物体領域を含む所定領域の画像を出力する
画像処理方法。
（付記１９）
前記物体領域は人物の顔領域であり、前記所定領域は当該人物の全体を含む画像である
付記１８に記載の画像処理方法。
（付記２０）
前記物体領域は車のナンバープレートであり、前記所定領域は当該車の全体を含む画像である
付記１８に記載の画像処理方法。
（付記２１）
前記端末は、検出された前記物体領域を指定する入力手段を備え、前記入力手段で指定された前記物体領域を含む一部画像が他の一部画像より優先的に前記候補画像と照合処理される
付記４に記載の画像処理システム。
（付記２２）
前記端末は、検出された前記物体領域を指定する入力手段を介して物体領域の指定を受け付け、指定された前記物体領域を含む一部画像が他の一部画像より優先的に前記候補画像と照合処理される
付記１４に記載の画像処理方法。
（付記２３）
付記１８乃至２０のいずれかに記載の画像処理方法をコンピュータに実行させる
画像処理プログラム。
以上、実施形態を参照して本願発明を説明したが、本願発明は上記実施形態に限定されものではない。本願発明の構成や詳細には、本願発明のスコープ内で当業者が理解し得る様々な変更をすることができる。
この出願は、２０１４年３月３１日に出願された日本出願特願２０１４−０７０７１９を基礎とする優先権を主張し、その開示の全てをここに取り込む。
【符号の説明】
【０１２４】
１    第一の監視情報端末部
２    第一の監視サーバ部
３    第二の監視情報端末部
４    第二の監視サーバ部
５    第三の監視情報端末部
７    第四の監視情報端末部
８    第五の監視情報端末部
９    通信ネットワーク
１１    カメラ部
１２    画像処理Ａ部
１３    画像蓄積部
１４    送受信Ａ部
１５    画像表示部
１６    入力部
１７    画像処理Ｃ部
２１    送受信Ｂ部
２２    画像処理Ｂ部
２３    データベース部
２４    画像表示部
１２１    画像ＩＯ部
１２２    ＣＰＵ部
１２３    メモリ部
１２４    外部ＩＯ部
１０    端末
２０    サーバ
１０１    画像蓄積部
１０２    送信部
１０３    出力部
１０４    送信部
２０１    画像照合部
２０２    送信部
１００１    出力部
【図１】
2015151449.tif 000003
【図２】
2015151449.tif 000004
【図３】
2015151449.tif 000005
【図４】
2015151449.tif 000006
【図５】
2015151449.tif 000007
【図６】
2015151449.tif 000008
【図７】
2015151449.tif 000009
【図８】
2015151449.tif 000010
【図９】
2015151449.tif 000011
【図１０】
2015151449.tif 000012
【図１１】
2015151449.tif 000013
【図１２】
2015151449.tif 000014
【図１３】
2015151449.tif 000015
【図１４】
2015151449.tif 000016
【図１５】
2015151449.tif 000017
【図１６】
2015151449.tif 000018
【図１７】
2015151449.tif 000019
【図１８】
2015151449.tif 000020
【図１９】
2015151449.tif 000021
【図２０】
2015151449.tif 000022
【図２１】
2015151449.tif 000023
【図２２】
2015151449.tif 000024
【手続補正書】
【提出日】平成28年9月21日(2016.9.21)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
画像と、当該画像または当該画像の一部画像の識別情報とを記憶する画像蓄積手段と、
前記識別情報と前記一部画像とをサーバに送信する送信手段と、
前記サーバから受信した識別情報に基づく付加情報を出力する出力手段と、を備える端末と、
前記端末から受信した前記一部画像を、蓄積された候補画像と照合する画像照合手段と、
照合された画像に対応する前記識別情報を前記端末に送信する送信手段と、を備えるサーバと、
を含む画像処理システム。
【請求項２】
前記出力手段は、画像を表示する画像表示手段であり、前記付加情報として、照合結果に関する情報を前記画像に重畳表示する
請求項１に記載の画像処理システム。
【請求項３】
画像と、当該画像または当該画像の一部画像の識別情報とを記憶する画像蓄積手段と、
前記画像の識別情報と、前記画像の一部画像とをサーバに送信し、前記サーバから受信した識別情報で識別される前記画像を前記サーバに送信する送信手段と、を備える端末と、
前記端末から受信した一部画像を、蓄積された候補画像と照合する画像照合手段と、
照合された画像に対応する前記識別情報を前記端末に送信する送信手段と、を備えるサーバと、
を含む画像処理システム。
【請求項４】
前記一部画像は、画像中から検出された物体を含み、
前記識別情報は、前記物体の位置情報または前記画像を取得した時刻情報である
請求項１乃至３のいずれかに記載の画像処理システム。
【請求項５】
前記端末は、
検出された前記物体領域を指定する入力手段を備え、
前記入力手段で指定された前記物体領域を含む一部画像が前記候補画像と照合されない場合、当該一部画像をデータベースに格納する
請求項４に記載の画像処理システム。
【請求項６】
前記サーバの前記送信手段は、前記候補画像から指定された画像を前記端末に送信し、
前記端末は、指定された前記画像を受信した場合、当該画像と前記一部画像とを照合する画像処理部を備える
請求項４乃至５のいずれかに記載の画像処理システム。
【請求項７】
前記端末は複数台存在し、前記端末の少なくとも一台が前記サーバに送信した前記一部画像が前記画像照合手段にて照合された場合、前記サーバは、照合された画像に対応する前記識別情報を前記端末とは別の端末に送信する
請求項１乃至６のいずれかに記載の画像処理システム。
【請求項８】
撮像手段が撮像した画像の物体領域の大きさを示す値が閾値より大きい場合には当該物体領域の画像を、そうでない場合には当該物体領域を含む所定領域の画像を出力する出力手段
を備える画像処理装置。
【請求項９】
端末が、
画像と、当該画像または当該画像の一部画像の識別情報とを画像蓄積手段に記憶し、
前記識別情報と前記一部画像とをサーバに送信し、
前記サーバから受信した識別情報に基づく付加情報を出力し、
サーバが、
前記端末から受信した前記一部画像を、蓄積された候補画像と照合し、
照合された画像に対応する前記識別情報を前記端末に送信する、
画像処理方法。
【請求項１０】
コンピュータに、
撮像手段が撮像した画像の物体領域の大きさを示す値が閾値より大きい場合には当該物体領域の画像を、そうでない場合には当該物体領域を含む所定領域の画像を出力する出力処理、
を実行させるプログラム。
【国際調査報告】
2015151449.tif 000025
2015151449.tif 000026
2015151449.tif 000027
2015151449.tif 000028