(57)【要約】【課題】検出は、イベントの発生時にリアルタイムで行われるか、又はイベントの発生後にオフラインで行われ得る。オフライン処理は、記録されたイベントの記憶、検索、及び取り出しを行う手段を必要とする。監視データの処理を自動化することが望ましい。【解決手段】監視データベースへの問合せ方法は、環境内のカメラ及び検出器により取得された映像及びイベントを記憶する。各イベントは、そのイベントが検出された時刻を含む。映像はイベントに従ってインデックス付けされる。問合せが空間及び時間コンテキストを指定する。この問合せの空間及び時間コンテキストに一致するイベントを求めてデータベースが探索され、映像のうち一致イベントに関連する部分のみが表示される。【選択図】図１Ａ
2007299381.tif 000002
【特許請求の範囲】
【請求項１】
監視データベースへの問合せ方法であって、
監視データベースに映像及びイベントを記憶することであって、該映像は環境内のカメラにより取得され、前記イベントは該環境内の検出器により信号伝達され、各イベントは、該イベントが検出された時刻を含む、記憶すること、
前記イベントに従って前記映像をインデックス付けすること、
空間及び時間コンテキストを含む問合せを指定すること、
前記問合せの前記空間及び時間コンテキストに一致するイベントを求めて前記データベースを検索すること、及び
前記映像のうち前記イベントに関連する部分のみを表示すること
を含む、監視データベースへの問合せ方法。
【請求項２】
前記空間コンテキストを指定することは、前記環境の領域を選択することを含み、該選択された領域は前記検出器及び前記カメラの部分集合に関連し、前記時間コンテキストを指定することは、前記イベントのイベントタイミングシーケンスを指定することを含む、請求項１に記載の監視データベースへの問合せ方法。
【請求項３】
前記データベースは前記環境の見取り図を記憶し、
前記指定すること及び前記表示することの間、前記見取り図を表示すること
をさらに含む、請求項１に記載の監視データベースへの問合せ方法。
【請求項４】
前記検出器は動き検出器である、請求項１に記載の監視データベースへの問合せ方法。
【請求項５】
前記見取り図は前記検出器の場所を含む、請求項３に記載の監視データベースへの問合せ方法。
【請求項６】
前記空間コンテキストを指定することは前記見取り図を使用する、請求項３に記載の監視データベースへの問合せ方法。
【請求項７】
前記イベントにタイムスタンプを付すことをさらに含む、請求項１に記載の監視データベースへの問合せ方法。
【請求項８】
前記イベントは、前記映像中で検出されたイベントを含む、請求項１に記載の監視データベースへの問合せ方法。
【請求項９】
前記映像中の前記イベントは、コンピュータビジョン技法を用いて検出される、請求項８に記載の監視データベースへの問合せ方法。
【請求項１０】
表示インタフェースが、映像再生ウインドウ、見取り図ウインドウ、及びイベント時系列ウインドウを含む、請求項１に記載の監視データベースへの問合せ方法。
【請求項１１】
前記空間コンテキストは、前記イベントの空間順及び時間順を定義する、請求項１に記載の監視データベースへの問合せ方法。
【請求項１２】
前記空間順及び前記時間順は、前記環境内を移動するオブジェクトに対応する、請求項１１に記載の監視データベースへの問合せ方法。
【請求項１３】
前記問合せに制約レベルを設けることをさらに含む、請求項１に記載の監視データベースへの問合せ方法。
【請求項１４】
前記見取り図は、前記イベントを表示するため、及び前記問合せを指定するために用いられる、請求項３に記載の監視データベースへの問合せ方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、包括的には監視システムの監視タスクのための問合せ処理方法に関し、特に監視データの問合せ及び視覚化に関する。
【背景技術】
【０００２】
監視システム及びセンサシステムは、環境をより安全且つ効率的にするために用いられている。通常、監視システムは、環境から取得される信号中のイベントを検出する。これらのイベントは、人、車両、又は環境そのものの変化に起因するものである可能性がある。信号は複雑なものであるか（例えば視覚（映像）及び聴覚）、又は熱感知器及び動き検出器等のセンサからの単純なものであり得る。
【０００３】
監視映像を解析するための多数のシステムが知られている（Ｓｔａｕｆｆｅｒ他著「リアルタイム追跡を用いた活動パターンの学習（Ｌｅａｒｎｉｎｇ  ｐａｔｔｅｒｎｓ  ｏｆ  ａｃｔｉｖｉｔｙ  ｕｓｉｎｇ  ｒｅａｌ−ｔｉｍｅ  ｔｒａｃｋｉｎｇ）」（ＩＥＥＥ  Ｔｒａｎｓａｃｔｉｏｎｓ  ｏｎ  Ｐａｔｔｅｒｎ  Ｒｅｃｏｇｎｉｔｉｏｎ  ａｎｄ  Ｍａｃｈｉｎｅ  Ｉｎｔｅｌｌｉｇｅｎｃｅ，  ２２（８）：  ７４７−７５７，  ２０００）、Ｙｕｒｉ  Ａ．  Ｉｖａｎｏｖ及びＡａｒｏｎ  Ｆ．  Ｂｏｂｉｃｋ著「確率的構文解析による視覚活動及び相互作用の認識（Ｒｅｃｏｇｎｉｔｉｏｎ  ｏｆ  Ｖｉｓｕａｌ  Ａｃｔｉｖｉｔｉｅｓ  ａｎｄ  Ｉｎｔｅｒａｃｔｉｏｎｓ  ｂｙ  Ｓｔｏｃｈａｓｔｉｃ  Ｐａｒｓｉｎｇ）」（Ｔｒａｎｓａｃｔｉｏｎｓ  ｏｎ  Ｐａｔｔｅｒｎ  Ａｎａｌｙｓｉｓ  ａｎｄ  Ｍａｃｈｉｎｅ  Ｉｎｔｅｌｌｉｇｅｎｃｅ  ２２（８）：  ８５２−８７２，  ２０００）、Ｊｏｈｎｓｏｎ他著「イベント認識のためのオブジェクトの軌跡分布の学習（Ｌｅａｒｎｉｎｇ  ｔｈｅ  ｄｉｓｔｒｉｂｕｔｉｏｎ  ｏｆ  ｏｂｊｅｃｔ  ｔｒａｊｅｃｔｏｒｉｅｓ  ｆｏｒ  ｅｖｅｎｔ  ｒｅｃｏｇｎｉｔｉｏｎ）」（Ｉｍａｇｅ  ａｎｄ  Ｖｉｓｉｏｎ  Ｃｏｍｐｕｔｉｎｇ，  １４（８），  １９９６）、Ｍｉｎｎｅｎ他著「期待文法：活動認識のための高レベルの期待の利用（Ｅｘｐｅｃｔａｔｉｏｎ  ｇｒａｍｍａｒｓ：  Ｌｅｖｅｒａｇｉｎｇ  ｈｉｇｈ−ｌｅｖｅｌ  ｅｘｐｅｃｔａｔｉｏｎｓ  ｆｏｒ  ａｃｔｉｖｉｔｙ  ｒｅｃｏｇｎｉｔｉｏｎ）」（Ｗｏｒｋｓｈｏｐ  ｏｎ  Ｅｖｅｎｔ  Ｍｉｎｉｎｇ，  Ｅｖｅｎｔ  Ｄｅｔｅｃｔｉｏｎ，  ａｎｄ  Ｒｅｃｏｇｎｉｔｉｏｎ  ｉｎ  Ｖｉｄｅｏ，  Ｃｏｍｐｕｔｅｒ  Ｖｉｓｉｏｎ  ａｎｄ  Ｐａｔｔｅｒｎ  Ｒｅｃｏｇｎｉｔｉｏｎ，  ｖｏｌｕｍｅ  ２，  ｐａｇｅ  ６２６，  ＩＥＥＥ，  ２００３）、Ｃｕｔｌｅｒ他著「リアルタイムでの周期的運動の検出、解析及び応用（Ｒｅａｌ−ｔｉｍｅ  ｐｅｒｉｏｄｉｃ  ｍｏｔｉｏｎ  ｄｅｔｅｃｔｉｏｎ，  ａｎａｌｙｓｉｓ  ａｎｄ  ａｐｐｌｉｃａｔｉｏｎｓ）」（Ｃｏｎｆｅｒｅｎｃｅ  ｏｎ  Ｃｏｍｐｕｔｅｒ  ａｎｄ  Ｐａｔｔｅｒｎ  Ｒｅｃｏｇｎｉｔｉｏｎ，  ｐａｇｅｓ  ３２６−３３１，  Ｆｏｒｔ  Ｃｏｌｌｉｎｓ，  ＵＳＡ，  １９９９．  ＩＥＥＥ）、並びにＭｏｅｓｌｕｎｄ他著「コンピュータビジョンに基づく人間の動作計測の調査（Ａ  ｓｕｒｖｅｙ  ｏｆ  ｃｏｍｐｕｔｅｒ  ｖｉｓｉｏｎ  ｂａｓｅｄ  ｈｕｍａｎ  ｍｏｔｉｏｎ  ｃａｐｔｕｒｅ）」（Ｃｏｍｐｕｔｅｒ  Ｖｉｓｉｏｎ  ａｎｄ  Ｉｍａｇｅ  Ｕｎｄｅｒｓｔａｎｄｉｎｇ，  ８１：２３１−２６８，  ２００１））。
【０００４】
いくつかのシステムは、コンピュータシステムの使いやすさを高めるためにジェスチャ入力を用いる（Ｒ．  Ａ．  Ｂｏｌｔ著「‘ｐｕｔ−ｔｈａｔ−ｔｈｅｒｅ’：グラフィックスインタフェースにおける音声及びジェスチャ（‘ｐｕｔ−ｔｈａｔ−ｔｈｅｒｅ’：  Ｖｏｉｃｅ  ａｎｄ  ｇｅｓｔｕｒｅ  ａｔ  ｔｈｅ  ｇｒａｐｈｉｃｓ  ｉｎｔｅｒｆａｃｅ）」（Ｃｏｍｐｕｔｅｒ  Ｇｒａｐｈｉｃｓ  Ｐｒｏｃｅｅｄｉｎｇｓ，  ＳＩＧＧＲＡＰＨ  １９８０，  １４（３）：２６２−２７０，  Ｊｕｌｙ  １９８０）、Ｃｈｒｉｓｔｏｐｈ  Ｍａｇｇｉｏｎｉ著「Ｇｅｓｔｕｒｅｃｏｍｐｕｔｅｒ−新しいコンピュータ操作方法（Ｇｅｓｔｕｒｅｃｏｍｐｕｔｅｒｎｅｗ  ｗａｙｓ  ｏｆ  ｏｐｅｒａｔｉｎｇ  ａ  ｃｏｍｐｕｔｅｒ）」（ＳＩＥＭＥＮＳ  ＡＧ  Ｃｅｎｔｒａｌ  Ｒｅｓｅａｒｃｈ  ａｎｄ  Ｄｅｖｅｌｏｐｍｅｎｔ，  １９９４）、Ｄａｖｉｄ  ＭｃＮｅｉｌｌ著「手と心：ジェスチャに表れる思考（Ｈａｎｄ  ａｎｄ  Ｍｉｎｄ：  Ｗｈａｔ  Ｇｅｓｔｕｒｅｓ  Ｒｅｖｅａｌ  ａｂｏｕｔ  Ｔｈｏｕｇｈｔ）」（Ｔｈｅ  Ｕｎｉｖｅｒｓｉｔｙ  ｏｆ  Ｃｈｉｃａｇｏ  Ｐｒｅｓｓ，  １９９２））。
【発明の開示】
【発明が解決しようとする課題】
【０００５】
検出は、イベントの発生時にリアルタイムで行われるか、又はイベントの発生後にオフラインで行われ得る。オフライン処理は、記録されたイベントの記憶、検索、及び取り出しを行う手段を必要とする。監視データの処理を自動化することが望ましい。
【課題を解決するための手段】
【０００６】
本発明の実施の形態は、環境内の異常イベントを検出すると共に、環境のグローバルコンテキストを用いて監視データを検索するためのシステム及び方法を提供する。本システムは、動き検出器及びビデオカメラを含む異種センサのネットワークを備える。本システムはまた、監視データを記憶するための監視データベースを備える。ユーザが、環境の空間コンテキストを利用する問合せを指定する。
【０００７】
具体的には、監視データベースへの問合せ方法は、環境内のカメラ及び検出器により取得された映像及びイベントを記憶する。各イベントは、そのイベントが検出された時刻を含む。映像はイベントに従ってインデックス付けされる。問合せが空間及び時間コンテキストを指定する。この問合せの空間及び時間コンテキストに一致するイベントを求めてデータベースが探索され、映像のうち一致イベントに関連する部分のみが表示される。
【発明の効果】
【０００８】
上述のようなシステム及び方法は、カメラであれ特定の動き検出器であれどの１つのセンサでも完全には検出されないイベントを見付けることができる。これにより、システムのユーザは、環境内の全てのセンサを、独立したセンサの集合としてではなく１つの「グローバル」センサとして扱うことができる。
【０００９】
例えば、不法侵入に当たるイベントを見付けることが望ましい。侵入に当たらないセンサイベントシーケンスに関連しない映像部分を排除し、侵入に当たる映像部分のみをユーザに提示することによって、大量の利用可能な映像を除外することができる。
【発明を実施するための最良の形態】
【００１０】
システム
図１は、本発明の実施の形態１による、監視データについて問合せを行うシステム及び方法を示す。本システムは、相互に接続された、プロセッサ１１０と、表示装置１２０と、監視データベース１３０とを備える。２ヶ所以上の場所を一度に監視するために複数の表示装置を用いることができることに留意すべきである。
【００１１】
プロセッサは従来のものであり、メモリと、バスと、Ｉ／Ｏインタフェースとを備える。プロセッサは、本発明の実施の形態１による問合せ方法１１１を行うことができる。監視データベースは、監視データ（例えば映像及びセンサデータストリーム１３１）と、監視データが収集される環境１０５の見取り図２２０とを記憶する。
【００１２】
入力装置１４０（例えばマウス又はタッチセンシティブ表面）を用いて空間問合せ１４１を指定することができる。問合せ１４１の結果１２１は表示装置１２０上に表示される。
【００１３】
センサ
センサデータ１３１は、異種センサ１２９のネットワークにより取得される。センサ１２９はビデオカメラ及び検出器を含むことができる。当該技術分野において既知である他のタイプのセンサも含むことができる。カメラ及び検出器の相対コストのために、検出器の数はカメラの数よりも大幅に多い場合がある。すなわち、環境内でカメラは疎であり検出器は密である。例えば、１台のカメラにより観察される１つの領域は数十個の検出器を含み得る。大きな建物内では、カメラは数百台であるが、検出器は無数に存在し得る。検出器の数はカメラの台数と比べて比較的多いかもしれないが、検出器により取得されるデータ（イベント／時間）の量は映像データに比べて極めて少ない。したがって、本発明の実施の形態１はイベントデータを利用して、関心の対象となり得る映像部分を迅速に見付ける。
【００１４】
見取り図２２０はセンサの場所を示すことができる。センサの特定の部分集合がユーザにより、入力装置を用いて、又は見取り図上の大まかな領域を指示することにより選択されることができる。
【００１５】
センサ
システム内のセンサ集合は、通常の監視ビデオカメラと、ハードウェア又はソフトウェアのいずれかで実装される様々な検出器とから成る。普通、カメラは、環境の領域の映像を連続取得する。通常、カメラはその視野内の活動に応答せず、監視環境の画像をただ記録するだけである。映像は従来のコンピュータ技法を用いて解析できることに留意すべきである。これは、リアルタイムで行うか、又は映像を取得した後に行うことができる。コンピュータビジョン技法は、オブジェクト検出、オブジェクト追跡、オブジェクト認識、顔検出、及び顔認識を含み得る。例えば、システムは、環境内の特定の領域に人物が入ってきたかどうかを判定し、これをタイムスタンプ付きのイベントとしてデータベースに記録することができる。
【００１６】
他の検出器（例えば動き検出器及び他の同様の検出器）は、離散的なタイムスタンプ付きイベントを信号伝達（ｓｉｇｎａｌ）する限り、能動的であっても受動的であってもよい。例えば、近接検出器は、特定の時刻にその付近で動く人物に応答して信号を伝達する。
【００１７】
データベース１３０に対する問合せ１４１は、監視データが空間及び時間コンテキストを共有するという点で、通常のマルチメディアデータベースに対する従来の問合せと異なる。本発明では、問合せ結果１２１の視覚化において、また問合せの入力に用いられるユーザインタフェースにおいて、この共有コンテキストを明示的に利用する。
【００１８】
表示インタフェース
図２に示すように、表示インタフェース１２０は、左上の映像再生ウインドウ２１０と、右上の見取り図ウインドウ２２０と、スクリーンの底部に沿ってイベント時系列ウインドウ２３０とを含む。映像再生ウインドウ２１０は、任意数のカメラからの映像ストリームを提示することができる。選択された映像はアクティブ化ゾーン１３３に対応し得る。
【００１９】
イベント時系列ウインドウ２３０はイベントを、左から右へ時間が流れる「自動ピアノロール」形式で示す。現在時は縦線２２１で表示される。様々な検出器のイベントは縦軸に沿って配置される。矩形１２２は、或る時刻（横の位置及び範囲）についてアクティブなイベント（縦位置）を表す。本明細書では、この説明のためだけに矩形ブロック１２５で示すような、特定のセンサの各横配置をイベントトラックと呼ぶ。
【００２０】
視覚化は共通のハイライト方式を有する。アクティブ化ゾーン１３３は、見取り図２２０上の色でハイライトされることができる。アクティブ化ゾーンに対応するセンサがイベント時系列上に、同じ色で描画される横のバー１２３で示される。イベントに対応する、特定の時刻、及び環境の特定の領域における映像を再生することができる。
【００２１】
図３は、長期（例えば２週間）にわたるイベント時系列ウインドウ２３０を有するインタフェースを示す。イベント数の比較的少ない２日間３０１の後にイベント数の多い５日間３０２が続いていることは明らかである。日中３０４及び夜間３０３のパターンもまた、イベントの密なバンド及び疎なバンドとしてはっきり見て取れる。
【００２２】
データベース１３０においてイベントが見付かると、これらのイベントを完全な時系列の背景に表示するか（図４を参照）、又は図５に示すように並べて表示して、連続再生が問合せ結果のみを表示するようにすることができる。
【００２３】
イベント時系列は、図６に示すように、問合せに関係ない全てのセンサのトラックを外すことによってさらに圧縮することができる。図６は、図５に示すものと全く同じ結果セットを示すが、全ての無関係なセンサのトラックが表示から外されている。
【００２４】
選択及び問合せ
単純な問合せは単に、あらゆるタイプの動きを含む全ての映像部分を要求することができる。一般に、この問合せでは多すぎる情報が返ってくる。より良い問合せは、見取り図２２０上でアクティブ化ゾーン１３３を指定する。このゾーンは、マウス１４０によって、又はタッチセンシティブスクリーンが使用される場合、見取り図２２０の適切な場所（複数可）に触れることによって指示することができる。
【００２５】
さらに良い問合せは、経路１３４及びイベントタイミングシーケンスの形態でコンテキスト制約を指定する。システムは、これらのコンテキスト制約を監視データと自動的に統合するため、結果が表示のために適切に絞り込まれる（ｒｅｆｉｎｅ）。システムはイベントデータベースにアクセスすることができるので、イベントデータの統計値（到着時間間隔等）を解析することができる。
【００２６】
経路
本発明の実施の形態１によれば、検出されたイベントは、空間的且つ時間的にリンクされて、経路及びイベントタイミングシーケンスを形成することができる。例えば、人物が廊下を歩いてくると、天井に取り付けられた検出器の直線状の部分集合がイベントを連続的に、歩行と一致する予測可能な時間間隔で信号伝達することになる。例えば、検出器が約５メートルずつ離間している場合、検出器はイベントを連続的に、約２〜３秒の時間間隔で信号伝達することになる。このイベントタイミングシーケンスでは、イベントは十分に分離している。走っている人物により生じるイベントタイミングシーケンスもまた、空間的に隣接する検出器がイベントをほぼ同時に信号伝達するという点で容易に区別することができる。
【００２７】
図１Ｂは環境の一例を示す。検出器１８１の場所は矩形で示される。破線はセンサ範囲を大まかに示す。システムは、問合せの目的で経路と交わる範囲を有するセンサを選択する。カメラの場所は三角形１８２で示される。ユーザは、人物が入口から特定のオフィスへ移動するために辿るであろう経路１８３を指定することができる。例えば、対応する検出器の部分集合（塗りつぶした矩形）、及びセンサがアクティブ化された相対時刻を選択することによって、検出器は、走りに一致するイベントタイミングシーケンスを有するイベントを信号伝達する。データベース１３０は、その特定の経路に沿って動く走っている人物がいたかを検出するために検索されることができる。このようなイベントが起こった場合、システムは、そのイベントに対応する映像を再生することができる。
【００２８】
センサイベントに関連するデータの量は、映像に関連するデータの量よりも大幅に少ない。また、イベント及びそれらの時刻は、データ構造内で効率的に編成することができる。映像中の時刻とイベントの時刻とがデータベース内で関連していれば、時空間問合せを用いてデータベースを検索して、環境内の異常イベントに一致する映像部分を迅速に見付けることが可能である。
【００２９】
同様に、映像部分を用いてデータベースを検索することもでき、その場合、関心イベントは、そのカメラビュー（映像）中に特定の特徴観測値を含み得る。例えば、特定の人物が監視領域を横切った軌跡を検索することができる。これは、映像中の顔を検出及び識別することによって行うことができる。このような顔データ及び離散的なイベントデータがデータベースに記憶されている場合、全ての検出された顔をユーザに提示することができ、ユーザが特定の顔を選択することができ、システムはその特定の顔に関する時間及び空間情報を用いてデータベースの検索を行い、監視領域のどこにその人物がいたかを割り出すことができる。
【００３０】
図４は、上述のような問合せの結果を示す。イベント時系列上で、縦のハイライトバー４０１は、その問合せに関係するイベント及び時間間隔を示す。
【００３１】
図７は、センサアクティブ化シーケンスがシステムにより、特定のセンサ部分集合がイベントを互いに特定の時間間隔内に連続して信号伝達する場合にのみ有効なものとして識別されるように、時間制約を厳しく課した問合せの一例を示す。
【００３２】
図８は、図７と同じであるが、問合せのタイミング制約を緩めて、直前の点ではなく共通の基準点に対して変動できるようにした問合せを示す。すなわち、イベントシーケンスが、直前の検出器から１秒以内に連続して信号を伝達する３つの動き検出器から成る場合、図７は、そのような制約された問合せの結果を示し、３番目の検出器によって信号伝達されるイベントは、検出器２が信号伝達を停止してから１秒以内に３番目の検出器がイベントを信号伝達した場合にのみ、有効な検索結果として認められる。
【００３３】
より制約の少ない問合せは、２番目の検出器が１番目の検出器から１秒以内にアクティブ化し、３番目の検出器が、２番目の検出器の信号伝達に関係なく１番目の検出器から２〜３秒以内にアクティブ化する場合に、シーケンスを有効な結果として識別する。図８は、そのようなより制約の少ない問合せの結果を示す。
【００３４】
システムは、問合せに設けることができる様々なレベルの検索制約（レベル０、レベル１、レベル２等）を有する。図８〜図１０は、それぞれレベル０〜２の制約を用いた同じ問合せの結果表示を示す。レベル０の制約では、図８に示すようにセンサイベントシーケンスが報告されるためには、或る特定の経路に沿った或るイベントタイミングシーケンスの全てのセンサが信号を伝達しなければならない。レベル１の制約では、図９に示すように１つのセンサが非アクティブであってもよい。レベル２の制約では、図１０に示すように問合せが報告されるために、経路内のセンサが２つまで非アクティブであってもよい。
【００３５】
厳しい問合せは、問合せに正確に一致するイベントのみを検索し、より制約の少ない問合せは変動を許容する。例えば、或る問合せは、センサ１−２−３−４が順番に信号を伝達しなければならないと指定する。レベル０は、センサ１−２−３−４が信号を伝達した全てのイベント鎖を見付ける。レベル１はそれに加えて、信号を伝達したセンサのタイミングが制約を満たすシーケンス１−３−４及び１−２−４も見付ける。次に、レベル２はいずれか２つのセンサが非アクティブであることを許容するため、センサ１及びセンサ４のタイミングを満たすセンサ１〜４の全てのインスタンスを見付ける。レベル数が大きくなるほど、所与の問合せに対する検索結果は増える。
【００３６】
Ｎ個のセンサに関係する任意の問合せについて、Ｎレベルの制約が一般に利用可能である。
【００３７】
本発明の精神及び範囲内で様々な他の適応及び修正を行ってもよいことを理解されたい。したがって、添付の特許請求の範囲の目的は、本発明の真の精神及び範囲に入るそのような変形及び修正をすべて網羅することである。
【図面の簡単な説明】
【００３８】
【図１Ａ】本発明の実施の形態１による監視システムのブロック図である。
【図１Ｂ】環境のブロック図である。
【図２】本発明の実施の形態１による、図１のシステムにより表示装置上に表示される画像である。
【図３】本発明の実施の形態１による、図１のシステムにより表示装置上に表示される画像である。
【図４】本発明の実施の形態１による、図１のシステムにより表示装置上に表示される画像である。
【図５】本発明の実施の形態１による、図１のシステムにより表示装置上に表示される画像である。
【図６】本発明の実施の形態１による、図１のシステムにより表示装置上に表示される画像である。
【図７】本発明の実施の形態１による、図１のシステムにより表示装置上に表示される画像である。
【図８】本発明の実施の形態１による、図１のシステムにより表示装置上に表示される画像である。
【図９】本発明の実施の形態１による、図１のシステムにより表示装置上に表示される画像である。
【図１０】本発明の実施の形態１による、図１のシステムにより表示装置上に表示される画像である。
【図１Ａ】
2007299381.tif 000003
【図１Ｂ】
2007299381.tif 000004
【図２】
2007299381.tif 000005
【図３】
2007299381.tif 000006
【図４】
2007299381.tif 000007
【図５】
2007299381.tif 000008
【図６】
2007299381.tif 000009
【図７】
2007299381.tif 000010
【図８】
2007299381.tif 000011
【図９】
2007299381.tif 000012
【図１０】
2007299381.tif 000013
【外国語明細書】
2007299381.tif 000014
2007299381.tif 000015
2007299381.tif 000016
2007299381.tif 000017
2007299381.tif 000018
2007299381.tif 000019
2007299381.tif 000020
2007299381.tif 000021
2007299381.tif 000022
2007299381.tif 000023
2007299381.tif 000024
2007299381.tif 000025
2007299381.tif 000026
2007299381.tif 000027
2007299381.tif 000028
2007299381.tif 000029
2007299381.tif 000030
2007299381.tif 000031
2007299381.tif 000032
2007299381.tif 000033
2007299381.tif 000034
2007299381.tif 000035
2007299381.tif 000036
2007299381.tif 000037
2007299381.tif 000038
2007299381.tif 000039
2007299381.tif 000040
2007299381.tif 000041