(57)【要約】【課題】  定期的な物体移動か不定期の物体移動かを正確に区別する。【解決手段】  保持しておいた背景画像と入力画像とを比較して差分を得、差分の変化及び変化の時刻と予め記憶手段に記憶されている定期イベントの発生条件及び発生時刻とを照合することにより入力画像の状態変化が定期的な物体移動か不定期な物体移動かを判別し、判別結果に応じて、定期的な物体移動に応じた対応動作、または不定期な物体移動に応じた対応動作のいずれかを選択する。【選択図】  図１
2010141599.tif 000002
【特許請求の範囲】
【請求項１】
背景画像を保持する背景画像保持手段と、
定期イベントの発生条件と発生時刻情報を記憶する定期イベント記憶手段と、
画像を入力する画像入力手段と、
前記背景画像保持手段の背景画像と前記画像入力手段から入力された入力画像とを比較して差分を得る画像比較手段と、
前記差分の変化及び前記変化の時刻と前記定期イベント記憶手段に記憶されている前記発生条件及び発生時刻情報とを照合することにより、前記入力画像の状態変化が定期的な物体移動か不定期な物体移動かを判断する定期イベント照合手段と、
前記判断の結果に応じて、定期的な物体移動に応じた対応動作、または不定期な物体移動に応じた対応動作のいずれかを選択するイベント別対応選択手段と、
を備えることを特徴とする情報処理装置。
【請求項２】
イベント別対応選択手段は、定期的な物体移動と判断された場合は、物体の出現、あるいは物体の消失に対する警告動作を選択せず、不定期な物体移動と判断された場合は、前記警告動作を選択することを特徴とする請求項１に記載の情報処理装置。
【請求項３】
定期的な物体移動の予定時刻より早く又は遅く物体移動が発生した場合、前記イベント別対応選択手段は、警告動作を選択することを特徴とする請求項１に記載の情報処理装置。
【請求項４】
定期的な物体移動の予定時刻を過ぎても物体移動が発生しない場合、前記イベント別対応選択手段は、警告動作を選択することを特徴とする請求項１に記載の情報処理装置。
【請求項５】
警告動作とは、図形表示、あるいは光、あるいは音声、あるいは文字表示のいずれか一つを含むことを特徴とする請求項２〜４のいずれかに記載の情報処理装置。
【請求項６】
前記発生条件を、前記差分の変化位置が所定のエリアに含まれる条件とすることを特徴とする請求項１に記載の情報処理装置。
【請求項７】
前記発生条件を、前記差分の変化サイズが所定のサイズに含まれる条件とすることを特徴とする請求項１に記載の情報処理装置。
【請求項８】
前記発生条件を、前記差分の変化している色が所定の色に含まれる条件とすることを特徴とする請求項１に記載の情報処理装置。
【請求項９】
前記発生条件を、前記差分の変化している形状が所定の形状である条件とすることを特徴とする請求項１に記載の情報処理装置。
【請求項１０】
前記発生条件を、前記差分が変化している温度が所定の温度範囲である条件とすることを特徴とする請求項１に記載の情報処理装置。
【請求項１１】
前記発生条件を、前記差分が変化している重量が所定の重量範囲であることを条件とすることを特徴とする請求項１に記載の情報処理装置。
【請求項１２】
前記定期イベント照合手段が不定期な物体移動と判断した場合であっても、所定回数以上、前記物体移動が繰り返されていれば、前記物体移動を定期的な物体移動と判断するよう前記定期イベント記憶手段の記憶内容を変更することを特徴とする請求項１に記載の情報処理装置。
【請求項１３】
入力された画像を処理する情報処理装置の情報処理方法であって、
保持しておいた背景画像と前記入力画像とを比較して差分を得る画像比較ステップと、
前記差分の変化及び前記変化の時刻と予め記憶手段に記憶されている定期イベントの発生条件及び発生時刻情報とを照合することにより、前記入力画像の状態変化が定期的な物体移動か不定期な物体移動かを判断する定期イベント照合ステップと、
前記判断の結果に応じて、定期的な物体移動に応じた対応動作、または不定期な物体移動に応じた対応動作のいずれかを選択するイベント別対応選択ステップと、
を備えることを特徴とする情報処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、カメラ等から入力された画像の状態変化を判別する技術に関する。
【背景技術】
【０００２】
カメラからの現在の入力画像と基準の背景画像との差を比較して変化部分を検出している監視カメラ等の監視装置がある。この種の装置では、その変化検出の持続時間が所定時間以上の場合に、物の置き去り、持ち去りが検出されたとして監視画面への表示や警告等に用いる信号を出力していた（特許文献１参照）。
【特許文献１】特開２０００−３３１２５４号公報（第４頁、図１）
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら特許文献１では、変化を検出し続ける時間が所定時間以上になったことを検出条件とする物体移動検出のため、置き去りといった物体出現、持ち去りといった物体消失は、検出されると一律に警告対象とされることとなる。毎朝定期的に配達される牛乳瓶、新聞や、毎日定期的に来るコンビニエンスストアの配送車、郵便ポスト回収車のように、ほぼ同じ時刻に同じ位置へ同じ大きさの物体の移動が発生する局面がある。予定通りの物体出現ないし物体消失は承諾済みなので、毎度、置き去りないし持ち去りが発生したとして呼び出されたり、モニター確認を要請されたり、あるいは、発生現場へ確認しに行くのは、監視効率が悪い。以上のように、従来は定期的に起こる物体出現ないし消失と、不定期に起こる物体出現ないし消失を区別して扱うことが出来ていなかった。
【０００４】
本発明は、上述した問題点を解決するためのものであり、定期的な物体移動か不定期の物体移動かを正確に区別することができる情報処理装置及び情報処理方法を提供することを目的とする。
【課題を解決するための手段】
【０００５】
上記目的を達成するために、本発明の情報処理装置は、背景画像を保持する背景画像保持手段と、定期イベントの発生条件と発生時刻情報を記憶する定期イベント記憶手段と、画像を入力する画像入力手段と、前記背景画像保持手段の背景画像と前記画像入力手段から入力された入力画像とを比較して差分を得る画像比較手段と、前記差分の変化及び前記変化の時刻と前記定期イベント記憶手段に記憶されている前記発生条件及び発生時刻情報とを照合することにより、前記入力画像の状態変化が定期的な物体移動か不定期な物体移動かを判断する定期イベント照合手段と、前記判断の結果に応じて、定期的な物体移動に応じた対応動作、または不定期な物体移動に応じた対応動作のいずれかを選択するイベント別対応選択手段と、を備える。
【発明の効果】
【０００６】
本発明によれば、予定通りの定期的な物体移動か、不定期の物体移動かを区別できるので、以降の対応を適切に選別することができるという効果がある。
【発明を実施するための最良の形態】
【０００７】
以下、図面を参照して、本発明を実施するための最良の形態を説明する。
【０００８】
図１は本発明の情報処理装置を適用したカメラシステムのブロック図である。１００はカメラヘッドであり、画像入力の機能を有する。１０１は映像信号処理部であり、カメラヘッド１００から出力されたカメラ信号を規格化された画像信号に変換処理したあと、入力画像としてのデジタル画像データを出力する。１０２は比較の基準となる背景画像を保存する基準背景画像保存部である。１０３は画像信号処理部１０１から出力された現在の入力画像を保存する現在入力画像格納部である。
【０００９】
１０４は温度や重量などの外部センサー情報を取得する外部センサー情報入力部である。１０５はカレンダー情報や時刻情報を出力する暦時間出力部である。１０６は定期イベントの発生時刻帯、発生位置、発生サイズ、発生色、発生形状、さらに発生重量、発生温度という定期的なイベント毎に発生時刻情報及び発生条件を記憶している定期イベント記憶部である。１０７は不定期の物体移動と判断した場合の対応動作、定期的な物体移動と判断した場合の対応動作を選択するイベント別対応選択部である。
【００１０】
１０８は、現在入力画像格納部１０３の画像を表示する、また、後述の各種設定等を行うための表示部である。操作部１０９は、後述の各種設定等のための情報を入力するための操作部である。１１０はネットワークインタフェース部であり、ネットワークを介して接続されたＰＣに対して入力画像の送信やＰＣからの各種遠隔制御コマンドを受信するために用いられる。１１１は各部を統合的に制御する主制御部であり、また、以下述べる各フローチャートに示される処理を実行するものである。
【００１１】
図２は、主制御部１１１がカメラシステムを制御するために実行するメインフローチャートである。
【００１２】
まず、ステップＳ２０１において、実際のシステムの運用開始前に基準となる背景画像の初期登録を行う。次に、ステップＳ２０２において、実際の運用開始前に定期イベントの事前登録を行う。本ステップでの処理の詳細は図３、図４で説明する。
【００１３】
ステップＳ２０３では、現在の入力画像に基づき実際の状態変化の監視動作を行う。本ステップの詳細は図５で説明する。次に、ステップＳ２０４では、ステップＳ２０３の監視動作の結果、状態変化は発生したかを判断し、発生していればステップＳ２０５へ処理を移し、そうでなければ、ステップＳ２１１へ処理を移す。
【００１４】
ステップＳ２０４で状態変化は発生したと判断した場合、ステップＳ２０５において、状態変化は全て登録の通りに発生したかを判断し、発生していればステップＳ２１０へ処理を移し、そうでなければ、ステップＳ２０６へ処理を移す。
【００１５】
ステップＳ２０５で状態変化は全て登録の通りに発生していないと判断した場合、ステップＳ２０６において、状態変化は全て未登録のイベントかを判断する。ステップＳ２０６において、未登録イベントであると判断したならステップＳ２０８へ処理を移し、そうでなければ、ステップＳ２０７へ処理を移す。
【００１６】
ステップＳ２０７において、登録済み定期イベントに応じた画像転送、メッセージ表示等の処理を行う。ステップＳ２０７での処理の詳細は図９で説明する。次に、ステップＳ２０８において、未登録の不定期イベントに応じた画像転送、アラート発生等の処理を行う。ステップＳ２０８での処理の詳細は図８で説明する。そして、ステップＳ２０９において、未登録であるが定期的に状態変化が発生する場合に学習して自動的に定期イベントとして登録を行って、ステップＳ２０３へ処理を戻す。ステップＳ２０９での処理の詳細は図１１で説明する。
【００１７】
ステップＳ２０５で状態変化は全て登録の通りに発生したと判断した場合、ステップＳ２１０において、登録済み定期イベントに応じた画像転送、メッセージ表示等の処理を行い、ステップＳ２１３へ処理を移す。ステップＳ２１０での処理の詳細は図９で説明する。
【００１８】
一方、ステップＳ２０４で状態変化は発生してないと判断した場合、ステップＳ２１１において、登録の通りなら状態変化が発生しているはずであるかを判断し、発生しているはずならばステップＳ２１２へ処理を移し、そうでなければ、ステップＳ２１３へ処理を移す。
【００１９】
ステップＳ２１１で登録の通りなら状態変化が発生しているはずであると判断した場合、ステップＳ２１２において、遅延イベントに応じた画像転送、アラート表示等の処理を行い、ステップＳ２１３へ処理を移す。ステップＳ２１２での処理の詳細は図１０で説明する。ステップＳ２１３において、新規に定期イベントを追加登録したい要求が来ているかを判断し、追加したければ、ステップＳ２０２へ処理を移し、そうでなければ、ステップＳ２０３へ処理を戻す。このようにメインフローチャートは巡回動作する。
【００２０】
図３は図２のステップＳ２０２で定期イベント記憶部１０６にイベントを登録するフローチャートである。図４は定期イベント事前登録をする手順のイメージ図である。この事前登録処理は、主制御部１１１が、表示部１０８の表示及び操作部１０９における操作入力を制御して実行する。なお、この事前登録は、図１のネットワークインタフェース部１１０を介して接続されたＰＣにおける表示部及び操作部を用いて遠隔制御により実行されてもよい。
【００２１】
ステップＳ３０１において、図４（Ａ）のような管理エリアの画像を監視対象とする場合、図４（Ｂ）のような登録エリアと矢印が表示部１０８に表示され、ユーザは監視エリア中から登録エリアを選択可能になる。ここで、管理エリアの画像は、基準背景画像保持部に記録されている背景画像である。また、他の画像、例えば、変化の生じていないときに撮影した任意の静止画像等を用いても良い。本実施形態では、ユーザが背景画像を見ながら操作部１０９が備えるマウス等により指示することにより、図４（Ｂ）のように、例えば右下の左傾斜線部エリアに矢印が移動して、エリアを選択する。
【００２２】
ステップＳ３０２では、選択したエリアが拡大表示され、そのエリアに関してのユーザの操作に応答して、位置、サイズ、形状、範囲等の領域情報を入力する。図４（Ｃ）のように、例えば右下の左傾斜線部エリアが拡大表示された所で、ユーザ矢印の操作に応じて、交差斜線部分に相当する、領域情報を入力する。ユーザの操作により領域情報が決定されると、ステップＳ３０３において、決定した範囲の主な色を入力できるようになる。図４（Ｃ）のように、例えば左の色メニューからのユーザ選択に応じて色を入力する。
【００２３】
次に、図４（Ｄ）のように、暦時間帯、温度範囲、重量範囲をユーザ操作に設定させる画面に切り替わり、ユーザが操作部１０９のマウスやキーボードを用いて操作した結果に応じて各数値を入力する。ステップＳ３０４において、ユーザ操作に応じて暦や時刻帯を入力する。図４（Ｄ）では、例えば左の１段目枠と２段目枠のように七曜日帯や時刻帯を入力する。
【００２４】
ステップＳ３０５においては、ユーザ操作に応じて温度範囲を入力する。図４（Ｄ）のように、例えば左の３段目枠のように温度範囲を入力する。ステップＳ３０６においては、ユーザ操作に応じて重量範囲を入力する。図４（Ｄ）のように、例えば左の４段目枠のように重量範囲を入力する。
【００２５】
ステップＳ３０７において、登録終了の要求が入力されていないかを判断し、入力されていれば、ステップＳ３０１へ処理を移し、入力されていなければ、ステップＳ３０８へ処理を移す。ここで、上記各情報は必ずしもすべて入力しなければならないわけではない。少なくとも時刻帯と、位置あるいはサイズが登録できれば良い。
【００２６】
ステップＳ３０８では、主制御部１１１が上記各種設定入力に応じて内部のメモリに保持しておいた、各エリアについての各入力情報を定期イベント記憶部１０６に記録し、その後、本フローの処理を終了する。
【００２７】
図５は図２のステップＳ２０３における状態変化監視動作のフローチャートである。
【００２８】
まず、ステップＳ５０１において、主制御部１１１は、基準背景画像、現在入力画像を取得して両者の差分画像を生成する。そして、ステップＳ５０２において、差分画像の差分変化を検出する。
【００２９】
ステップＳ５０３において、差分変化が検出されたかどうか判断し、検出されていればステップＳ５０４へ処理を移し、されていなければ処理を終らせる。
【００３０】
ステップＳ５０４において、差分変化が検出され続ける経過時間を監視中かどうか判断し、監視中であればステップＳ５０６へ処理を移し、経過時間監視中でなければステップＳ５０５へ処理を移す。
【００３１】
ステップＳ５０４において経過時間監視中でないと判断された場合、すなわち、新たに物体が置かれた等の状況である場合、ステップＳ５０５において、経過時間の監視を開始してステップＳ５０６へ処理を移す。
【００３２】
ステップＳ５０６において、経過時間が所定時間以上であるかどうか判断し、所定時間以上である場合、すなわち、新たに置かれた物体が所定時間置き去りにされた状態の場合にステップＳ５０７へ処理を移す。一方所定時間経過していなければ処理を終らせる。
【００３３】
ステップＳ５０７において、定期イベント記憶部１０９に登録された監視エリアのうち１つの監視エリアを選択してステップＳ５０８へ処理を移す。
【００３４】
ステップＳ５０８において、定期イベント照合部１０５は、選択した監視エリアの登録済み定期イベントと照合し、ステップＳ５０９へ処理を移す。ステップＳ５０８での処理の詳細は図６で説明する。
【００３５】
ステップＳ５０９において、状態変化監視エリアを全て監視し終ったかどうか判断し、終了であればステップＳ５１１へ処理を移し、そうでなければ、ステップＳ５１０へ処理を移す。
【００３６】
ステップＳ５１０において、次の状態変化監視エリアの監視に移り、ステップＳ５０７へ処理を移す。ステップＳ５１１において、差分検出結果及び照合結果に応じて背景画像を更新設定して処理を終る。ステップＳ５１１での処理の詳細は図７で説明する。
【００３７】
図６は図５のステップＳ５０８における登録済み定期イベント照合のフローチャートである。
【００３８】
ステップＳ６０１において、選択した監視エリアの状態変化検出された年月日、曜日、時刻といった暦時間情報、また、変化位置に関する各種情報を取得する。ここで、各種情報とは、検出された変化位置、変化サイズ、変化色、変化形状、温度情報、重量情報と、図２のステップＳ２０２で登録済みの定期イベントに関する前記情報である。ステップＳ６０２〜ステップＳ６１５までは、検出した状態変化が登録済み定期イベントであるか否かの判断のために、変化検出時と登録時との間で上記各種情報の照合を行うものである。
【００３９】
まず、ステップＳ６０２において、該当時刻帯に変化予定があるかどうか判断し、予定があればステップＳ６０３へ処理を移し、予定が無ければステップＳ６１６へ処理を移す。ステップＳ６０３において、該当位置に変化予定があるかどうか判断し、予定が有ればステップＳ６０５へ処理を移し、予定が無ければステップＳ６０４へ処理を移す。ステップＳ６０４において、該当サイズの変化予定があるかどうか判断し、予定があればステップＳ６０７へ処理を移し、予定が無ければステップＳ６１６へ処理を移す。
【００４０】
ステップＳ６０５において、該当サイズの変化予定があるかどうか判断し、予定があればステップＳ６０６へ処理を移し、予定が無ければステップＳ６０７へ処理を移す。ステップＳ６０６において、時刻帯と位置とサイズの３条件が登録通りに変化したと照合して、ステップＳ６０８へ処理を移す。ステップＳ６０７において、時刻帯と位置またはサイズの２条件が登録通りに変化したと照合して、ステップＳ６０８へ処理を移す。
【００４１】
ステップＳ６０８以降において、更に照合条件を厳しくしている。ステップＳ６０８において、照合条件として色情報付きの変化予定があるかどうか判断し、予定があればステップＳ６０９へ処理を移し、予定が無ければステップＳ６１０へ処理を移す。ステップＳ６０９において、該当色の変化予定があるかどうか判断し、予定があればステップＳ６１０へ処理を移し、予定が無ければステップＳ６１６へ処理を移す。
【００４２】
ステップＳ６１０において、照合条件として形状情報付きの変化予定があるかどうか判断し、予定があればステップＳ６１１へ処理を移し、予定が無ければステップＳ６１２へ処理を移す。ステップＳ６１１において、該当形状の変化予定があるかどうか判断し、予定があればステップＳ６１２へ処理を移し、予定が無ければステップＳ６１６へ処理を移す。
【００４３】
ステップＳ６１２において、照合条件として温度情報付きの変化予定があるかどうか判断し、予定があればステップＳ６１３へ処理を移し、予定が無ければステップＳ６１４へ処理を移す。ステップＳ６１３において、該当温度の変化予定があるかどうか判断し、予定があればステップＳ６１４へ処理を移し、予定が無ければステップＳ６１６へ処理を移す。
【００４４】
ステップＳ６１４において、照合条件として重量情報付きの変化予定があるかどうか判断し、予定があればステップＳ６１５へ処理を移し、予定が無ければステップＳ６１７へ処理を移す。ステップＳ６１５において、該当重量の変化予定があるかどうか判断し、予定があればステップＳ６１７へ処理を移し、予定が無ければステップＳ６１６へ処理を移す。
【００４５】
ステップＳ６１６において、登録通りに変化していない未登録イベントだと照合して、処理を終る。ステップＳ６１７において、登録通りの変化している登録済み定期イベントだと照合確定して、処理を終る。
【００４６】
図７は図５のステップＳ５１１における背景画像更新のフローチャートである。
【００４７】
ステップＳ７０１において、状態変化があったかどうか判断し、変化があればステップＳ７０２へ処理を移し、変化が無ければステップＳ７０７へ処理を移す。ステップＳ７０２において、監視エリアを選択してステップＳ７０３へ処理を移す。ステップＳ７０３において、状態変化が未登録イベントであったかどうか判断し、未登録であればステップＳ７０８へ処理を移し、未登録でなければステップＳ７０４へ処理を移す。
【００４８】
ステップＳ７０４において、選択している監視エリアのみ、最新入力画像を背景画像に設定してステップＳ７０５へ処理を移す。ステップＳ７０５において、状態変化監視エリアを全て設定し終ったかどうか判断し、終了であれば処理を終らせ、そうでなければステップＳ７０６へ処理を移す。ステップＳ７０６において、次の状態変化監視エリアの設定に移り、ステップＳ７０２へ処理を移す。ステップＳ７０７において、画面全体で最新入力画像を背景画像に設定して処理を終らせる。ステップＳ７０８において、背景画像に変えないように設定して処理を終らせる。
【００４９】
図８は図２のステップＳ２０８における未登録イベント処理のフローチャートである。
【００５０】
ステップＳ８０１において、監視エリアを選択してステップＳ８０２へ処理を移す。ステップＳ８０２において、アラート処理をし、ステップＳ８０３へ処理を移す。ステップＳ８０３において、操作部１０９からのキー入力（不図示）によって未登録イベント発生をユーザー承認し、不審物から除外したかどうか監視し、除外していればステップＳ８０４へ処理を移し、そうでなければステップＳ８０６へ処理を移す。
【００５１】
ステップＳ８０４において、学習対象イベントに設定し、ステップＳ８０５へ処理を移す。ステップＳ８０５において、学習対象イベントに設定し、ステップＳ８０６へ処理を移す。ステップＳ８０６において、状態変化監視エリアを全て処理し終ったかどうか判断し、終了であれば処理を終らせ、そうでなければステップＳ８０７へ処理を移す。ステップＳ８０７において、次の状態変化監視エリアの処理に移り、ステップＳ８０１へ処理を移す。
【００５２】
図９は図２のステップＳ２０７、ステップＳ２１０における登録通りイベント処理のフローチャートである。ステップＳ９０１において、監視エリアを選択してステップＳ９０２へ処理を移す。ステップＳ９０２において、メッセージ処理をし、ステップＳ９０３へ処理を移す。ステップＳ９０３において、状態変化監視エリアを全て処理し終ったかどうか判断し、終了であれば処理を終らせ、そうでなければステップＳ９０４へ処理を移す。ステップＳ９０４において、次の状態変化監視エリアの処理に移り、ステップＳ９０１へ処理を移す。
【００５３】
図１０は図２のステップＳ２１２における遅延イベント処理のフローチャートである。
【００５４】
ステップＳ１００１において、監視エリアを選択してステップＳ１００２へ処理を移す。ステップＳ１００２において、アラート処理をし、ステップＳ１００３へ処理を移す。ステップＳ１００３において、状態変化監視エリアを全て処理し終ったかどうか判断し、終了であれば処理を終らせ、そうでなければステップＳ１００４へ処理を移す。ステップＳ１００４において、次の状態変化監視エリアの処理に移り、ステップＳ１００１へ処理を移す。
【００５５】
図１１は図２のステップＳ２０９におけるイベント学習登録のフローチャートである。
【００５６】
ステップＳ１１０１において、監視エリアを選択してステップＳ１１０２へ処理を移す。ステップＳ１１０２において、学習対象イベントかどうか判断し、対象であればステップＳ１１０３へ処理を移し、対象でなければステップＳ１１１１へ処理を移す。ステップＳ１１０３において、過去に所定回数以上、現在時刻帯にイベントがあったかどうか判断し、あればステップＳ１１０４へ処理を移し、なければステップＳ１１１０へ処理を移す。
【００５７】
ステップＳ１１０４において、過去に所定回数以上、現在位置にイベントがあったかどうか判断し、あればステップＳ１１０５へ処理を移し、なければステップＳ１１０６へ処理を移す。ステップＳ１１０５において、過去に所定回数以上、現在サイズのイベントがあったかどうか判断し、あればステップＳ１１０８へ処理を移し、なければステップＳ１１０７へ処理を移す。ステップＳ１１０６において、過去に所定回数以上、現在サイズのイベントがあったかどうか判断し、あればステップＳ１１０７へ処理を移し、なければステップＳ１１１０へ処理を移す。
【００５８】
ステップＳ１１０７において、時刻帯と位置、または時刻帯とサイズが一致するイベントが第２の所定回数以上あったかどうか判断し、あればステップＳ１１０９へ処理を移し、なければステップＳ１１１０へ処理を移す。ステップＳ１１０８において、時刻帯と位置とサイズの３条件が一致する定期的イベントが所定回数以上起きたので定期イベントとして学習登録してステップＳ１１１１へ処理を移す。ステップＳ１１０９において、時刻帯と位置、または時刻帯とサイズの２条件が一致する定期的イベントが第２の所定回数以上起きたので定期イベントとして学習登録してステップＳ１１１１へ処理を移す。
【００５９】
ステップＳ１１１０において、履歴を保存してステップＳ１１１１へ処理を移す。ステップＳ１１１１において、状態変化監視エリアを全て学習し終ったかどうか判断し、終了であれば処理を終らせ、そうでなければステップＳ１１１２へ処理を移す。ステップＳ１１１２において、次の状態変化監視エリアの学習に移り、ステップＳ１１０１へ処理を移す。
【００６０】
図１２は画像変化が無い場合における、図２の状態変化監視動作をしている間のイメージ図である。（Ａ１）は比較元の背景画像である。（Ｂ１）は現在の様子を映している画像である。（Ｃ１）は（Ａ１）と（Ｂ１）の差分画像である。破線で示す領域は状態変化検出させる複数のエリアである。現在の画像が背景画像に対して変化してないので、差分画像は何も出ない。
【００６１】
図１３は物が置かれた場合における、図２の状態変化監視動作をしている間のイメージ図である。（Ａ２）は比較元の背景画像である。（Ｂ２）は左上と右下に物が置かれた現在の様子を映している画像である。（Ｃ２）は（Ａ２）と（Ｂ２）の差分画像である。現在画像が背景画像に対して変化しているので、差分画像は左上と右下に差分画像が出る。（Ｄ２）は登録済みの定期イベントと照合するイメージ画像である。
【００６２】
例えば毎朝牛乳びんが右下に配達されると登録していれば、右下の変化は登録したイベントとして照合されるが、左上の変化は登録されておらず未登録と照合される。そして、主制御部１１１は、表示部１０８における警告動作として、差分画像に重畳させて、左上の変化は「置き去り検知しました」、右下の変化は「いつもの着荷です」と区別して表示させる。
【００６３】
図１４は物が除かれる場合における、図２の状態変化監視動作をしている間のイメージ図である。（Ａ３）は比較元の背景画像である。（Ｂ３）は右下の物が除かれた現在の様子を映している画像である。（Ｃ３）は（Ａ３）と（Ｂ３）の差分画像である。（Ｄ３）は登録済みの定期イベントと照合するイメージ画像である。
【００６４】
例えば毎朝配達済み牛乳びんを取りに行く時刻帯を登録してあったとして、それ以前の時刻帯で右下に変化が出たときは登録されておらず合致しない。登録時刻帯より早く状態変化があった場合は、勝手な持ち去りが起きた可能性がある。したがって、主制御部１１１は、表示部１０８における警告動作として、差分画像に重畳させて、右下の変化は「予定より早い持去り発生」と区別して表示する。
【００６５】
図１５は物が除かれる場合における、図２の状態変化監視動作をしている間のイメージ図である。（Ａ４）は比較元の背景画像である。（Ｂ４）は右下の物が除かれていない現在の様子を映している画像である。（Ｃ４）は（Ａ４）と（Ｂ４）の差分画像である。（Ｄ４）は登録済みの定期イベントと照合するイメージ画像である。
【００６６】
例えば毎朝牛乳びんが配達されたら所定の時間内に取りに行くと登録していれば、所定の時間より長く変化が出たときは合致しない。登録時刻帯より長く状態変化があった場合は、取り忘れが起きている可能性がある。したがって、主制御部１１１は、表示部１０８における警告動作として、差分画像に重畳させて、右下の変化は「予定より長い取り忘れ発生」と区別して表示する。
【００６７】
図１６は定期イベント発生待ちを行っている場合における、図２の状態変化監視動作をしている間のイメージ図である。（Ａ５）は比較元の背景画像である。（Ｂ５）は右下の物に定期イベントが起きない現在の様子を映している画像である。（Ｃ５）は（Ａ５）と（Ｂ５）の差分画像である。（Ｄ５）は登録済みの定期イベントと照合するイメージ画像である。
【００６８】
例えば毎朝牛乳びんが配達される時刻帯を登録してあったとして、該当する時刻帯で右下に変化が出ないときは合致しない。登録時刻帯に状態変化が無い場合は、配達忘れが起きた可能性がある。したがって、主制御部１１１は、表示部１０８における警告動作として、差分画像に重畳させて、右下の変化は「予定より遅い配達忘れ発生」と区別して表示する。
【００６９】
図１４の（Ｃ４）と図１５の（Ｃ５）は同じであるが、定期的イベントが定期的消失か、定期的出現かの区別は登録済みイベントを参照すれば区別がつくのは明らかである。
【００７０】
以上のように、予定通りの定期的な配達物出現の時は、「着荷のお知らせメッセージ」を出す一方、不定期な置き去り物出現の時は、「不審物の置き去りアラート」を出すことが出きるという効果がある。
【００７１】
また予定時刻より前での持ち去り発生の時は、「持ち去りアラート」を出す一方、予定通りの定期的な配達物取り込みの時は、「許可メッセージ」を出し、予定を過ぎた置き続けの時は、「取り忘れアラート」を出すことが出きるという効果がある。
【００７２】
さらに、予定通りの定期的な配達物が現れない時、「配達忘れアラート」を出すことが出きるという効果がある。
【００７３】
上記実施形態では、警告動作として表示部１０８において、差分画像に文字を重畳して表示する例を説明したが、重畳させる画像は、入力した現在画像に対してでも良い。この場合は、例えば、不審物と思われる差分画像領域に対応する現在画像領域を半透明の警告色を重畳させて表示することにより、ユーザに通知することができる。
【００７４】
上記実施形態では、警告動作として表示部１０８への文字表示を行う例を説明したが、本発明は、これに限らず、図形表示による警告を行っても良い。また、画像表示ではなく、発光ダイオード等による点滅表示、音声による通知等により警告等を行っても良い。
【００７５】
また、上記実施形態では、１セットのシステムにおいて各種警告を行うようにしたが、ネットワークを介して接続された他の端末上における表示部において、同様の表示を行うようにしてもよい。
【００７６】
以上のように、本実施形態では、予め登録された定期的な物体移動と、非定期の物体移動を区別して、設置者の監視意図に沿わせて警告の種類を設定しておくことが出来るので、誤報を減らし効率的な監視を続けられるという効果がある。
【図面の簡単な説明】
【００７７】
【図１】本発明を適用したカメラシステムのブロック図
【図２】主制御部のメインフローチャート
【図３】定期イベント登録のフローチャート
【図４】定期イベント登録の説明に使う図
【図５】状態変化監視動作のフローチャート
【図６】登録済み定期イベント照合のフローチャート
【図７】背景画像更新のフローチャート
【図８】未登録イベント処理のフローチャート
【図９】登録通りイベント処理のフローチャート
【図１０】遅延イベント処理のフローチャート
【図１１】イベント学習登録のフローチャート
【図１２】画像変化が無い時の状態変化監視動作をしている間のイメージ図
【図１３】物が置かれた時の状態変化監視動作をしている間のイメージ図
【図１４】物が除かれる時の状態変化監視動作をしている間のイメージ図
【図１５】物が除かれる時の状態変化監視動作をしている間のイメージ図
【図１６】定期イベント発生待ち時の状態変化監視動作をしている間のイメージ図
【符号の説明】
【００７８】
１００  カメラヘッド部
１０１  映像信号処理部
１０２  基準背景画像保存部
１０３  現在入力画像格納部
１０４  外部センサー情報入力部
１０５  暦時間出力部
１０６  定期イベント記憶部
１０７  イベント別対応選択情報記憶部
１０８  表示部
１０９  操作部
１１０  ネットワークＩ／Ｆ部
１１１  主制御部
【図１】
2010141599.tif 000003
【図２】
2010141599.tif 000004
【図３】
2010141599.tif 000005
【図４】
2010141599.tif 000006
【図５】
2010141599.tif 000007
【図６】
2010141599.tif 000008
【図７】
2010141599.tif 000009
【図８】
2010141599.tif 000010
【図９】
2010141599.tif 000011
【図１０】
2010141599.tif 000012
【図１１】
2010141599.tif 000013
【図１２】
2010141599.tif 000014
【図１３】
2010141599.tif 000015
【図１４】
2010141599.tif 000016
【図１５】
2010141599.tif 000017
【図１６】
2010141599.tif 000018