(57)【要約】【課題】重要物に対するセキュリティの強化とその管理を同時に達成する。【解決手段】撮像された画像情報および無線タグから読み取った読取情報を基に生成される物体の動作状態を表す情報であって、物体の動作の種類を表す動詞と物体の動作に関連する名詞である格要素とを含み、動詞と格要素との間の意味関係を示す格フレームによって表された状態情報を構築する状態情報構築手段と、状態情報構築手段により構築された状態情報を記憶する記憶手段と、記憶手段から、複数の前記物体それぞれの動作状態を表す複数の状態情報を取得する状態情報取得手段と、取得された複数の状態情報それぞれに含まれる動詞の組み合わせに応じた物体の動作状態を予め定めた規則に基づいて、組み合わせに対応する物体の動作状態を検出する検出手段と、検出手段による検出結果に基づいて異常であるか否かを判定する異常判定手段と、を備える。【選択図】図１
2010238180.tif 000002
【特許請求の範囲】
【請求項１】
撮像された画像情報および無線タグから読み取った読取情報を基に生成される物体の動作状態を表す情報であって、前記物体の動作の種類を表す動詞と前記物体の動作に関連する名詞である格要素とを含み、前記動詞と前記格要素との間の意味関係を示す格フレームによって表された状態情報を構築する状態情報構築手段と、
前記状態情報構築手段により構築された状態情報を記憶する記憶手段と、
前記記憶手段から、複数の前記物体それぞれの動作状態を表す複数の前記状態情報を取得する状態情報取得手段と、
取得された複数の前記状態情報それぞれに含まれる前記動詞の組み合わせに応じた物体の動作状態を予め定めた規則に基づいて、前記組み合わせに対応する物体の動作状態を検出する検出手段と、
前記検出手段による検出結果に基づいて異常であるか否かを判定する異常判定手段と、
を備えたことを特徴とする動作状態検出装置。
【請求項２】
前記状態情報は、前記格要素として前記物体の動作が発生した時刻を含み、
前記状態取得手段は、前記状態記憶手段から、前記時刻が略同一である複数の前記状態情報を取得すること、
を特徴とする請求項１に記載の動作状態検出装置。
【請求項３】
前記状態情報構築手段は、撮像された画像情報を基に人物に対する状態情報を構築し、少なくとも無線タグから読み取った読取情報を基に物品に対する状態情報を構築することを特徴とする請求項１または請求項２に記載の動作状態検出装置。
【請求項４】
前記異常判定手段は、対象とする物品に対する状態情報が前記記憶手段に記憶されている場合に、前記物品に対し時間的・空間的に直近する人物に対する状態情報を前記記憶手段から取得し、前記物品および前記人物に対するそれぞれの状態情報が、前記物品および前記人物に対し規定された使用条件を逸脱している場合に異常と判定することを特徴とする請求項３に記載の動作状態検出装置。
【請求項５】
撮像された画像情報および無線タグから読み取った読取情報を基に生成される物体の動作状態を表す情報であって、前記物体の動作の種類を表す動詞と前記物体の動作に関連する名詞である格要素とを含み、前記動詞と前記格要素との間の意味関係を示す格フレームによって表された状態情報を構築する状態情報構築手段と、
前記状態情報構築手段により構築された状態情報を記憶する第１の記憶手段と、
前記物体の、少なくとも保管状態と最終取扱者と前記物体の位置とを含む管理情報を記憶する第２の記憶手段と、
前記第１の記憶手段から、複数の前記物体それぞれの動作状態を表す複数の前記状態情報を取得する状態情報取得手段と、
対象とする物品である物体に対する状態情報が前記第１の記憶手段から取得できる場合に、該物体に対する状態情報から場所の移動の有無を検出し、さらに場所の移動が検出された場合に、前記第２の記憶手段に記憶された前記管理情報を更新する固定資産管理手段と、
を備えたことを特徴とする動作状態検出装置。
【請求項６】
前記状態情報は、前記格要素として前記物体の動作が発生した時刻を含み、
前記状態取得手段は、前記状態記憶手段から、前記時刻が略同一である複数の前記状態情報を取得すること、
を特徴とする請求項５に記載の動作状態検出装置。
【請求項７】
前記固定資産管理手段は、前記物品である物体の保管場所からの場所の移動が検出された場合、該物体に対し時間的・空間的に直近する人物である物体に対する状態情報を前記第１の記憶手段から取得し、前記物品および前記人物に対するそれぞれの状態情報を基に、前記第２の記憶手段に記憶された管理情報を更新することを特徴とする請求項５または請求項６に記載の動作状態検出装置。
【請求項８】
状態情報構築手段が、撮像された画像情報および無線タグから読み取った読取情報を基に生成される物体の動作状態を表す情報であって、前記物体の動作の種類を表す動詞と前記物体の動作に関連する名詞である格要素とを含み、前記動詞と前記格要素との間の意味関係を示す格フレームによって表された状態情報を構築し、構築した状態情報を記憶手段に記憶させる状態情報構築ステップと、
状態情報取得手段が、前記記憶手段から、複数の前記物体それぞれの動作状態を表す複数の前記状態情報を取得する状態情報取得ステップと、
検出手段が、取得された複数の前記状態情報それぞれに含まれる前記動詞の組み合わせに応じた物体の動作状態を予め定めた規則に基づいて、前記組み合わせに対応する物体の動作状態を検出する検出ステップと、
異常判定手段が、前記検出ステップによる検出結果に基づいて異常であるか否かを判定する異常判定ステップと、
を含むことを特徴とする動作状態検出方法。
【請求項９】
状態情報構築手段が、撮像された画像情報および無線タグから読み取った読取情報を基に生成される物体の動作状態を表す情報であって、前記物体の動作の種類を表す動詞と前記物体の動作に関連する名詞である格要素とを含み、前記動詞と前記格要素との間の意味関係を示す格フレームによって表された状態情報を構築し、構築した状態情報を第１の記憶手段に記憶させる状態情報構築ステップと、
状態情報取得手段が、前記第１の記憶手段から、複数の前記物体それぞれの動作状態を表す複数の前記状態情報を取得する状態情報取得ステップと、
固定資産管理手段が、対象とする物品である物体に対する状態情報が前記第１の記憶手段から取得できる場合に、該物体に対する状態情報から場所の移動の有無を検出し、さらに場所の移動が検出された場合に、前記物体の、少なくとも保管状態と最終取扱者と前記物体の位置とを含む管理情報を記憶する第２の記憶手段に記憶された管理情報を更新する固定資産管理処理ステップと、
を含むことを特徴とする動作状態検出方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、カメラなどの撮像手段により撮像された画像情報および物品に取り付けられた無線タグからの読取情報から人物や物品などの物体の動きを検出する動作状態検出装置および動作状態検出方法に関する。
【背景技術】
【０００２】
従来から、監視カメラ等で撮影した画像を分析して、人物などの監視対象物の行動を認識する認識装置が知られている。例えば、特許文献１では、ステレオカメラで撮影した映像から、ＳＶＭ（サポートベクタマシーン）などのパターン認識技術を用いて正常パターンか異常パターンかを判定することにより、複数の監視対象の中から不審な行動をしている監視対象を検出する技術が提案されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００８−２１７６０２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１の方法は、学習した歩行軌跡データを用いることにより、例えば複数人の歩行軌跡情報からパターン認識により異常な行動（歩行軌跡）を検出するものである。すなわち、複数人の歩行軌跡のそれぞれが正常か異常かを判定するのみである。このため、例えば、複数人が共謀して不正行為を行っている場合などでは、個々の人物の歩行軌跡のパターン認識のみでは高精度に行動を検出することができず、結果として異常な行動であると判定できない場合があった。また、人が重要な物品である重要物を移動させるといった行為もなされうるが、人の行動の検出だけでは、人と移動される重要物とを関連づけて重要物を管理するといったことができない。
【０００５】
本発明は、上記に鑑みてなされたものであって、人および物品（重要物）から得られる複数の情報を用いることにより、高精度に物体の動きを検出し、重要物に対するセキュリティの強化とその管理を同時に達成することができる動作状態検出装置および動作状態検出方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上述した課題を解決し、目的を達成するために、本発明の動作状態検出装置は、撮像された画像情報および無線タグから読み取った読取情報を基に生成される物体の動作状態を表す情報であって、前記物体の動作の種類を表す動詞と前記物体の動作に関連する名詞である格要素とを含み、前記動詞と前記格要素との間の意味関係を示す格フレームによって表された状態情報を構築する状態情報構築手段と、前記状態情報構築手段により構築された状態情報を記憶する記憶手段と、前記記憶手段から、複数の前記物体それぞれの動作状態を表す複数の前記状態情報を取得する状態情報取得手段と、取得された複数の前記状態情報それぞれに含まれる前記動詞の組み合わせに応じた物体の動作状態を予め定めた規則に基づいて、前記組み合わせに対応する物体の動作状態を検出する検出手段と、前記検出手段による検出結果に基づいて異常であるか否かを判定する異常判定手段と、を備えたことを特徴とする。
【０００７】
本発明の動作状態検出装置は、撮像された画像情報および無線タグから読み取った読取情報を基に生成される物体の動作状態を表す情報であって、前記物体の動作の種類を表す動詞と前記物体の動作に関連する名詞である格要素とを含み、前記動詞と前記格要素との間の意味関係を示す格フレームによって表された状態情報を構築する状態情報構築手段と、前記状態情報構築手段により構築された状態情報を記憶する第１の記憶手段と、前記物体の、少なくとも保管状態と最終取扱者と前記物体の位置とを含む管理情報を記憶する第２の記憶手段と、前記記憶手段から、複数の前記物体それぞれの動作状態を表す複数の前記状態情報を取得する状態情報取得手段と、対象とする物品である物体に対する状態情報が前記第１の記憶手段から取得できる場合に、該物体に対する状態情報から場所の移動の有無を検出し、さらに場所の移動が検出された場合に、前記第２の記憶手段に記憶された前記管理情報を更新する固定資産管理手段と、を備えたことを特徴とする。
【０００８】
本発明の動作状態検出方法は、状態情報構築手段が、撮像された画像情報および無線タグから読み取った読取情報を基に生成される物体の動作状態を表す情報であって、前記物体の動作の種類を表す動詞と前記物体の動作に関連する名詞である格要素とを含み、前記動詞と前記格要素との間の意味関係を示す格フレームによって表された状態情報を構築し、構築した状態情報を記憶手段に記憶させる状態情報構築ステップと、状態情報取得手段が、前記記憶手段から、複数の前記物体それぞれの動作状態を表す複数の前記状態情報を取得する状態情報取得ステップと、検出手段が、取得された複数の前記状態情報それぞれに含まれる前記動詞の組み合わせに応じた物体の動作状態を予め定めた規則に基づいて、前記組み合わせに対応する物体の動作状態を検出する検出ステップと、異常判定手段が、前記検出ステップによる検出結果に基づいて異常であるか否かを判定する異常判定ステップと、を含むことを特徴とする。
【０００９】
本発明の動作状態検出方法は、状態情報構築手段が、撮像された画像情報および無線タグから読み取った読取情報を基に生成される物体の動作状態を表す情報であって、前記物体の動作の種類を表す動詞と前記物体の動作に関連する名詞である格要素とを含み、前記動詞と前記格要素との間の意味関係を示す格フレームによって表された状態情報を構築し、構築した状態情報を第１の記憶手段に記憶させる状態情報構築ステップと、状態情報取得手段が、前記第１の記憶手段から、複数の前記物体それぞれの動作状態を表す複数の前記状態情報を取得する状態情報取得ステップと、固定資産管理手段が、対象とする物品である物体に対する状態情報が前記第１の記憶手段から取得できる場合に、該物体に対する状態情報から場所の移動の有無を検出し、さらに場所の移動が検出された場合に、前記物体の、少なくとも保管状態と最終取扱者と前記物体の位置とを含む管理情報を記憶する第２の記憶手段に記憶された管理情報を更新する固定資産管理処理ステップと、を含むことを特徴とする。
【発明の効果】
【００１０】
本発明によれば、予め定められた規則に基づき、複数の物体（人および物品）それぞれの動作状態を表す複数の状態情報に含まれる各物体の動作の種類を表す動詞の組み合わせに応じた物体の動作状態を検出することができるため、高精度に物体の動作を検出することができ、また無線タグからの読取情報も利用して物品と人物とを関連づけ動作状態を判別することにより、重要物などの物品に対するセキュリティの強化とその管理を同時に達成することができるという効果を奏する。
【図面の簡単な説明】
【００１１】
【図１】図１は、本実施の形態における監視システムの構成を示すブロック図である。
【図２】図２は、状態情報ＤＢに記憶される状態情報のデータ構造の一例を示す図である。
【図３】図３は、状態情報ＤＢに記憶される状態情報の具体例を示す図である。
【図４】図４は、時系列で構造化された深層格フレームの概念図である。
【図５】図５は、行動導出規則ＤＢに記憶される行動検出規則のデータ構造の一例を示す図である。
【図６】図６は、物品登録ＤＢのデータ構造の一例を示す図である。
【図７】図７は、アクセス制限の具体例を示す図である。
【図８】図８は、環境情報ＤＢのデータ構造の一例を示す図である。
【図９】図９は、人物ＤＢのデータ構造の一例を示す図である。
【図１０】図１０は、物品管理ＤＢのデータ構造の一例を示す図である。
【図１１】図１１は、状態情報から異常判定を行う際の具体例を示す図である。
【図１２】図１２は、図１１に示す状況で画像処理により得られる情報とＲＦＩＤリーダから得られる情報の例を示す図である。
【図１３】図１３は、異常判定部による異常判定処理を示すフローチャートである。
【図１４】図１４は、状態情報から固定資産管理のための処理を行う際の具体例を示す図である。
【図１５】図１５は、図１４の状況で画像処理により得られる情報とＲＦＩＤリーダから得られる情報の例を示す図である。
【図１６】図１６は、物品管理ＤＢの更新過程を例示した図である。
【図１７】図１７は、固定資産管理部による固定資産管理処理を示すフローチャートである。
【発明を実施するための形態】
【００１２】
以下に添付図面を参照して、この発明にかかる警備装置の一実施の形態を詳細に説明する。
【００１３】
本実施の形態は、監視カメラ等の撮像装置とＲＦＩＤ読取装置からの情報を用いて所定領域を警備する警備装置として本発明の動作状態検出装置を実現した例である。なお、本発明を適用可能な装置は警備装置に限られず、本発明は、撮像された画像情報およびＲＦＩＤタグ情報から物体（人物および物品）に関する情報を解析して、各物体の動作状態を検出する機能を備える任意の装置に適用できることに留意されたい。
【００１４】
本実施の形態の警備装置は、監視カメラ等の撮像装置で撮像した画像情報から、監視対象物である人物の行動（動作状態）を解析し、解析結果を深層格フレーム構造で表して記憶部に保存する。また、物品に取り付けられたＲＦＩＤタグ（無線タグ）からこのＲＦＩＤタグに記録された情報（ＲＦＩＤタグ情報）をＲＦＩＤ読取装置で読み取り、読み取ったＲＦＩＤタグ情報と上記画像情報の解析結果を基に、当該物品に関する情報を深層格フレーム構造で表して記憶部に保存する。そして、記憶部に保存した各深層格フレームを相互に比較することによって、さらに人物の行動や物品の動作状態（特には、移動）を検出する。具体的には、同時刻に発生した複数人物の行動や物品の移動の組み合わせが、事前に定めた組み合わせに一致する場合に、当該組み合わせに応じた所定の動作状態が発生したことを検出する。
【００１５】
はじめに、本実施の形態の警備装置を含む監視システムの構成例について説明する。図１は、本実施の形態における監視システム１０の構成を示すブロック図である。図１に示すように、監視システム１０は、警備装置１００と、管理用ＰＣ２００と、警備装置１００に接続される撮像装置（カメラ）３００１〜３００ｎとＲＦＩＤ読取装置（ＲＦＩＤリーダ）４００１〜４００ｎとを備えている。また、同図に示すように他のＰＣ２００’を設けてもよい。警備装置１００と管理用ＰＣ２００は、電話回線、無線または有線のネットワーク、インターネットなどのネットワークを介して接続されている。
【００１６】
管理用ＰＣ２００は、警備装置１００が異常を検知した場合には、監視エリアの異常を検知した警備装置１００からの通知を受け、待機中の警備員に対して異常が検知された監視エリア（不図示）へ向かう旨の指示を出すとともに、必要に応じて警察や消防等の関係機関への通報を行う。また、管理用ＰＣ２００や他のＰＣ２００’は、ＲＦＩＤタグが取り付けられた物品の現在の状態や位置のモニタリング等にも使用される。
【００１７】
撮像装置３００１〜３００ｎは、警備対象である監視エリアを撮像するカメラであり、各監視エリアに設置されている。
【００１８】
ＲＦＩＤ読取装置４００１〜４００ｎは、警備対象である各監視エリアに設置されており、主に重要物である物品に取り付けられたＲＦＩＤタグからＲＦＩＤタグ情報（ＩＤ等）を読み取る。
【００１９】
次に、警備装置１００について説明する。警備装置１００は、画像入力部１１１、画像処理部１１２、状態情報構築部１１３、データ入力部１１４、異常判定部１１５、固定資産管理部１１６、およびアクセス制御部１１７を備える制御部１１０と、状態情報ＤＢ（データベース）１２１、行動導出規則ＤＢ１２２、物品登録ＤＢ１２３、環境情報ＤＢ１２４、人物ＤＢ１２５、および物品管理ＤＢ１２６を備える記憶部１２０と、を備えている。なお、制御部１１０は、ＣＰＵ（プロセッサ）およびメモリを含み、ＣＰＵが、メモリにロードされた上記各部に対応するプログラムを実行することにより各部の機能を実現する。また、各ＤＢを備える記憶部１２０は、ハードディスク、光ディスク、メモリカード、ＲＡＭ（Random Access Memory）などの一般的に利用されている任意の記憶媒体により構成することができる。この記憶部１２０は、また、上記プログラムを格納する。
【００２０】
画像入力部１１１は、撮像装置３００１〜３００ｎによって撮像された画像情報が入力される。
【００２１】
画像処理部１１２は、画像入力部１１１に入力された画像情報を解析することにより、画像情報から物体の動作状態や特徴を検出する（詳細は後述）。そして、状態情報構築部１１３が、画像処理部１１２により検出された動作状態を表す状態情報を生成して状態情報ＤＢ１２１に保存する。
【００２２】
画像処理部１１２は、例えば画像情報から人物領域を抽出することにより、人物が「存在する」という動作状態を検出する。また、画像処理部１１２は、検出した人物の視線方向を検出することにより、当該人物の「見る」という動作状態を検出する。また、画像処理部１１２は、人物以外の他の物体を画像情報から抽出し、抽出した物体が新たに現れた場合には「取り出す」という動作状態を、抽出した物体が以前から存在し、人物の手の位置と重なった場合には「触る」という動作状態を検出する。
【００２３】
なお、画像処理部１１２が人物または物品を抽出する方法としては、連続する画像情報の背景を比較することにより抽出した変動領域を人物領域とする方法や、人物パターンまたは物品パターンと照合することにより人物または物品を抽出する方法などの、従来から用いられている任意の手法を用いることができる。また、画像処理部１１２が人物の視線方向を検出する方法としては、顔領域パターンと照合することにより顔領域を抽出するとともに視線方向を検出する従来から用いられている任意の方法を用いることができる。
【００２４】
データ入力部１１４は、ＲＦＩＤ読取装置４００１〜４００ｎが読み取ったＲＦＩＤタグ情報が入力される。状態情報構築部１１３は、画像処理部１１２による解析結果およびデータ入力部１１４に入力されたＲＦＩＤタグ情報を基に、物体（人または物品）の動作状態を後述の深層格フレームによる状態情報として構築する。なお、複数ある撮像装置３００１〜３００ｎやＲＦＩＤ読取装置４００１〜４００ｎは、各々そのＩＤにより識別され、入力される情報はそのＩＤとともに利用される。これらのＩＤは、各装置とそれらが設置されたエリアとを対応付けることができるので、撮像装置３００１〜３００ｎやＲＦＩＤ読取装置４００１〜４００ｎにより検出された物体が所在するエリアを特定するのに利用することができる。
【００２５】
アクセス制御部１１７は、ネットワークを介して管理用ＰＣ２００や他のＰＣ２００’との間で各種情報を送受信する際のアクセス制御を行う。なお、異常な動作状態を検出する異常判定部１１５および重要物などの物品の管理のための処理を行う固定資産管理部１１６の詳細については後に詳述する。
【００２６】
状態情報ＤＢ１２１は、状態情報構築部１１３より構築された、物体の動作状態を深層格フレーム構造（後述）で表した状態情報を、時系列に構造化し（図４参照）記憶する。なお、深層格フレーム（以下、単に格フレームとも言う）とは、動詞を基準として、動詞に対する名詞の意味関係を深層格として表した言語構造をいう。
【００２７】
図２は、状態情報ＤＢ１２１に記憶される状態情報のデータ構造の一例を示す図である。図２に示すように、状態情報は、格フレームを識別する格フレームＩＤ（ＣＦＩＤ）と、“しゃがむ”などの動作（行動）の種類を表す行動名（ＡｃｔＮｍ）と、動作に関連する名詞である格要素（深層格）とを含んでいる。深層格には、主格（Ａｇｅｎｔ）、属性格（Ｆｅａｔｕｒｅ）、場所格（ＰｏｓＣａｓｅ）、時間格（ＴｉｍｅＣａｓｅ）、源泉格（ＳｒｃＣａｓｅ）、目標格（ＤｓｔＣａｓｅ）、対象格（ＯｂｊＣａｓｅ）、および道具格（ＴｏｏｌＣａｓｅ）が含まれる。
【００２８】
図３に、状態情報ＤＢ１５１に記憶される状態情報の具体例を示す。主格は、動作を引き起こす主体を表し、具体的には、同図に示すように、追跡番号（ＩＤ）と認証名（Ｎａｍｅ）を含む。属性格は、主格に関する情報をいう。例えば、属性格は、顔特徴（Ｆａｃｅ）、体特徴（Ｂｏｄｙ）、歩行特徴（Ｇａｔｅ）に分けられる。顔特徴（Ｆａｃｅ）は、顔検出信頼度（ＦＣｏｎｆ）、顔特徴（Ｉｄｅｎｔ）、口開閉度合（Ｍｏｕｔｈ）、視線方向（ＰａｎＴｉｌｔ）、マスクの有無（Ｍａｓｋ）、サングラスの有無（ＳＧ）、性別（Ｓｅｘ）、年代（Ａｇｅ）、頭色（ＨＣｏｌｏｒ）等を含む。また、体特徴は、身長（Ｈｅｉｇｈｔ）、上半身色（ＢＣｏｌｏｒ）、下半身色（ＬＣｏｌｏｒ）等を含む。また、歩行特徴は、歩幅（ＳｔｅｐＷｉｄｔｈ）、体型（Ｐｏｓｔｕｒｅ）、脚長（ＬＬｅｎｇｔｈ）、歩速（ＷＳｐｅｅｄ）等を含む。
【００２９】
場所格は、動作や状態が起こる場所を表す。例えば、場所格は、場所名（ＰＮａｍｅ）、頭部座標（Ｈｅａｄ）、体座標（Ｂｏｄｙ）、足座標（Ｌｅｇ）、右手座標（ＲＨｎａｄ）、ＬＨａｎｄ（左手座標）、重心座標（ＷＢ）等を含む。
【００３０】
時間格は、動作や状態変化が起きた時間を表す。例えば、時間格は、動作や新たな状態が起こった日時（時刻）と、その動作や状態変化が終了するまでの経過時間（ＰａｓｓＴｉｍｅ）等を含む。
【００３１】
源泉格は、移動や状態変化などの起点を表す。例えば、源泉格は、主格が移動や動作等を行う起点の位置を表す場所情報（ＰｏｓＣａｓｅ）、起点での主格の属性を表す属性情報（Ｆｅａｔｕｒｅ）、およびそのときの時間情報（ＴｉｍｅＣａｓｅ）を含む。
【００３２】
目標格は、移動や状態変化などの終点を表す。例えば、目標格は、主格が移動や動作等を行う終点の位置を表す場所情報（ＰｏｓＣａｓｅ）、終点での主格の属性を表す属性情報（Ｆｅａｔｕｒｅ）、およびそのときの時間情報（ＴｉｍｅＣａｓｅ）を含む。
【００３３】
対象格は、動作や状態の対象となる事物を表す。対象格は、固有の識別情報である追跡番号（ＩＤ）、および認証名（Ｎａｍｅ）等を含む。
【００３４】
道具格は、動作の補助的手段を表す。道具格は、固有の識別情報である追跡番号（ＩＤ）、および認証名（Ｎａｍｅ）を含む。
【００３５】
前述の状態情報構築部１１３は、このように構成される格フレームに具体的な値を設定することにより、画像処理部１１２による解析結果およびデータ入力部１１４に入力されたＲＦＩＤタグ情報を、物体の動作状態を表わす状態情報として構築する。なお、利用できる深層格は上述のものに限られず、さらに細分化してもよく、例えば精神的事象の経験者を表す経験者格などの、その他のあらゆる深層格を用いることができる。
【００３６】
図１に戻り、行動導出規則ＤＢ１２２は、後述する異常判定部１１５が、状態情報ＤＢ１１１に保存された格フレームを比較して動作状態を検出するときに参照する行動導出規則を記憶する。この行動導出規則は、状態情報ＤＢ１２１に蓄積された格フレームを比較し、前後の格フレーム間で変化があれば、その変化を表わす格フレームを生成して再構成するための規則を蓄積したものである。図５に、行動導出規則ＤＢ１２２に記憶される行動検出規則のデータ構造の一例を示す。
【００３７】
図５に示すように、行動導出規則は、比較元となる情報であって、時間的に前の状態情報である前格フレームと、比較先となる情報であって、時間的に後の状態情報である後格フレームと、その他の条件とを、導出される状態情報と対応づけた形式となっている。
【００３８】
前格フレームおよび後格フレームは、それぞれ行動名と格情報とを含んでいる。格情報には、比較すべき少なくとも１つの深層格を設定する。
【００３９】
前格フレームおよび後格フレームは、２つの格フレームが差異を有するパターンを表す情報（差分情報）に相当する。すなわち、ある２つの格フレームが、それぞれ前格フレームと後格フレームとで、設定された行動名および格情報が適合するとき、この２つの格フレーム間には差異が存在すると判断される。例えば、図５では、ある前格フレーム（格フレーム１）の行動名が「存在する」、場所格に含まれる体位置が「Ａ」であり、後格フレーム（格フレーム２）の行動名が「存在する」、場所格に含まれる体位置が「Ｂ」であるとき、前格フレームと後格フレームとの間には差分が存在すると判断される。そして、差分が存在すると判断された場合、差分に対応する行動として、「導出できる状態情報」欄に記載された行動名の行動（上記例では「移動する」）が検出される。
【００４０】
その他の条件には、必要に応じて、比較する状態情報が満たすべき条件が設定される。例えば、同図の行動名「しゃがむ」の行動を導出する行動導出規則では、前格フレームに含まれる頭部位置Ｂと、後格フレームに含まれる頭部位置Ｃとが、Ｂ＞Ｃの関係を満たすことが条件として設定されている。
【００４１】
導出できる状態情報は、導出される行動の行動名と、保存すべき少なくとも１つの深層格を表す格情報とを含んでいる。同図では、例えば、行動名「移動する」の行動が検出された場合は、前格フレームに含まれる体位置Ａおよび後格フレームに含まれる体位置Ｂを、それぞれ導出した行動に対応する格フレームの源泉格の体位置Ａおよび目標格の体位置Ｂとして保存する例が示されている。
【００４２】
なお、行動導出規則は同図に示す形式に限られるものではなく、複数の状態情報間の差分に応じて予め定められた行動を決定可能なものであれば任意の形式の規則を適用することができる。
【００４３】
図６に、物品登録ＤＢ１２３のデータ構造の一例を示す。物品登録ＤＢ１２３は、同図に示すように、登録管理される物品（特には、重要物）のＩＤ（このＩＤは、物品に取り付けられたＲＦＩＤタグから読み取られるＩＤに対応する）、品名（金庫鍵、顧客リスト、ノートＰＣ、プロジェクタ等）、アクセス制限、タイプ、保管位置を対応付け、物品登録情報として記憶している。上記「アクセス制限」とは、各物品に設定される使用条件である。物品毎に複数のアクセス制限を設定可能であり、各条件から逸脱した状態が異常判定部１１５により検知されると異常と判定されることになる。このアクセス条件として、例えば、０〜９９の値を使用者条件として、１００〜１９９の値を場所条件として、２００〜２９９の値を時間条件として、３００〜３９９の値を用途条件として、割り当てる。また、「タイプ」とは、各物品の性質を示すもので、例えば、０は鍵を、１はＣＤ／ＤＶＤを、２は書籍／書類を、３はＰＣ機器を、４は工具をというように、数値で物品の性質（種類）を示す。図６の例では、ＩＤ＝０の金庫鍵の場合、アクセス制限が０，１００，２００という使用者条件、場所条件、時間条件の３つの使用条件が設定され、この物品のタイプは「０」すなわち鍵で、その保管場所が鍵保管箱であることが登録されている。
【００４４】
ここで、アクセス制限の具体例を図７に示す。上記のように、１００〜１９９の値は場所条件、２００〜２９９の値は時間条件、３００〜３９９の値は用途条件として、割り当てているが、使用者条件としては、使用条件を「管理権限者のみ」とする場合０を、「使用時、複数人の立ち会いを要する」場合１を、また「使用許可を受けている者のみ」とする場合２をというように値を割り当てている。場所条件としては、「エリア間の移動は禁止」とする場合１００を、「エリア間移動時にチェックが必要」とする場合１０１を、「フロア外持ち出し禁止」とする場合１０２をというように値を割り当てている。また、時間条件としては、「３０分以内」を条件とする場合２００を、「１日以内」を条件とする場合２０１を、「１週間以内」を条件とする場合２０２を割り当て、用途条件としては、「複製禁止」とする場合３００を、「複製時、複数人の立ち会いを要する」とする場合３０１というように値を割り当てている。
【００４５】
図８に、環境情報ＤＢ１２４のデータ構造の一例を示す。環境情報ＤＢ１２４は、同図に示すように、各監視エリアや各監視エリアに設けられたＲＦＩＤリーダ（ＲＦＩＤ読取装置４００１〜４００ｎ）等の設置物のＩＤ、名称、起点座標、終点座標、およびエリア／設置物種別が登録されている。監視エリアの起点座標と終点座標とで、監視エリアの範囲を定義している。各監視エリアのＲＦＩＤリーダ等の設置物の起点座標と終点座標は、当該設置物の設置位置の座標を示している。
【００４６】
図９に、人物ＤＢ１２５のデータ構造の一例を示す。人物ＤＢ１２５は、同図に示すように、人物と、この人物の重要物へのアクセスに対する権限に関する情報を対応付け登録したものである。具体的には、人物のＩＤ、名称、管理権限（管理者／ユーザ／ゲスト等）、所属部署（総務部／開発部／運用部等）、使用許可期限が人物毎に登録される。人物の重要物へのアクセスに対する権限に関する情報としては、例えば、出入管理等の情報を流用することも可能である。
【００４７】
図１０に、物品管理ＤＢ１２６のデータ構造の一例を示す。物品管理ＤＢ１２６は、物品の現在の状態を管理するためのＤＢであり、同図に示すように、物品のＩＤ、名称、状態（保管／持ち出し等）、最終取扱者、最新更新位置、最新更新時間を含む管理情報が物品毎に登録されている。なお、記憶部１２０の各ＤＢは、定期的に、または必要に応じて、あるいは所定のイベントに応じて、それらの更新が行われる。例えば、状態情報ＤＢ１２１は、定期的な更新の時間間隔が長い場合には、定期的な更新以外に、画像処理部１１２により物体の移動が検出された時点においても更新するようにすることが望ましい。
【００４８】
異常判定部１１５は、状態情報ＤＢ１２１から複数の状態情報を取得する。例えば、異常判定部１１５は、状態情報構築部１１３によって生成され状態情報ＤＢ１１１に保存された状態情報のうち、時刻が連続する２つの状態情報を取得する。また、異常判定部１１５は、状態情報ＤＢ１２１に保存された状態情報のうち、同一時刻で主格が異なる２つの状態情報を取得する。取得された状態情報は、図５の行動導出規則によって行動を検出するときに利用される。なお、上記時刻は厳密に同一である必要はなく、誤差が所定の時間範囲内であれば略同一の時刻と判断するように構成してもよい。
【００４９】
また、異常判定部１１５は、時刻が連続する２つの状態情報が行動導出規則ＤＢ１２２に保存された行動導出規則に適合するか否かを判定することによって、新たな行動を検出する。
【００５０】
具体的には、異常判定部１１５は、先に取得した時刻が連続する２つの状態情報の行動名および格情報が一致する行動導出規則を行動導出規則ＤＢ１２２から取得する。そして、２つの状態情報の行動名および格情報が一致する行動導出規則が取得できた場合には、当該行動検出規則で定められた行動を新たな行動として検出する。そして、後述の異常判定処理を実行する。
【００５１】
（異常判定）
異常判定部１１５は、さらに、状態情報ＤＢ１２１に時系列に登録されている人物に対する状態情報および物品に対する状態情報から異常判定を行う。その具体例を、図１１に示す。図１１は、状態情報から異常判定を行う際の具体例を示す図である。同図において、物品にはＲＦＩＤタグが取り付けられているものとする。また、図１２に、図１１に示す状況で画像処理により得られる情報とＲＦＩＤリーダから得られる情報の例を示す。
【００５２】
図１１に示すように、各エリアには、カメラとＲＦＩＤリーダが設置されており、各エリアにおいて、人物の行動を解析し、物品のエリア間の移動を検出する。図１１の（１）、（２）、（３）の各状態において得られる情報として、図１２に示す情報が得られる。すなわち、（１）で画像処理部１１２による画像処理により得られる情報は、［行動名：存在する］、［主格：人物Ａ、人物Ｂ］、［場所格（場所名）：エリアＡ］であり、同じく（１）でＲＦＩＤリーダから得られる情報は、［行動名：存在する］、［主格：物品］、［場所格：エリアＡ］である。また、図１１の（２）で画像処理部１１２による画像処理により得られる情報は、［行動名：存在する］、［主格：人物Ａ、人物Ｂ］、［場所格：エリアＣ］であり、同じく（２）でＲＦＩＤリーダから得られる情報は、［行動名：存在する］、［主格：物品］、［場所格：エリアＣ］である。また、図１１の（３）で画像処理部１１２による画像処理により得られる情報は、［行動名：存在する］、［主格：人物Ａ］、［場所格：エリアＢ］であり、同じく（３）でＲＦＩＤリーダから得られる情報は、［行動名：存在する］、［主格：物品］、［場所格：エリアＢ］である。なお、この例では物品の動作状態の検出をＲＦＩＤリーダから得られる情報によるものとしているが、もちろん画像情報を解析して得られる情報を利用することもできる。この例のように、ＲＦＩＤリーダから得られる情報を用いることにより、物品がカメラにより撮像できない状況にあっても、その動作状態を検出するための情報を得ることができる。
【００５３】
このような状況で、図７に示したアクセス制限として「１００」が設定されている場合、すなわち「エリア間の移動は禁止」という条件が設定されている場合、図１１の（２）で、状態情報ＤＢ１２１の更新のためＲＦＩＤリーダから情報を取得した際に、物品の「エリアＡからエリアＢへの移動」が時系列の状態情報として状態情報ＤＢ１２１に登録されるため（このとき生成される格フレームは、先に登録されている格フレーム（状態情報）とは場所格が異なる（エリアＡ→エリアＢ））、この状態情報を基に異常と判定することができる。
【００５４】
また、このような状況で、図７に示したアクセス制限として「１」が設定されている場合、すなわち「使用時、複数人の立会いを要する」という条件が設定されている場合、図１１の（１）、（２）の状況では、物体のあるエリアに人物Ａおよび人物Ｂが存在するため、アクセス制限の条件を満たし異常とならないが、（３）の状況のように、エリアＢに物体と人物Ａしか存在しないことが、状態情報から検出されると、異常判定部１１５は、この状態情報を基に異常と判定することになる。
【００５５】
（異常判定処理）
ここで、図１３を用いて、本実施形態の警備装置１００の異常判定部１１５による異常判定処理について説明する。図１３は、異常判定部１１５による異常判定処理を示すフローチャートである。なお、物品にはＲＦＩＤタグが取り付けられているものとする。
【００５６】
はじめに、対象物品に対する格フレームが状態情報ＤＢ１２１に登録されているか判断する（ステップＳ１３０１）。ここでは、この物品の主格であるＩＤ（追跡番号）を基に、状態情報ＤＢ１２１を検索し、該当する格フレームが登録されているか否か判断をする。
【００５７】
状態情報ＤＢ１２１に対象物品の格フレームが登録されている場合（ステップＳ１３０１でＹｅｓ）、ステップＳ１３０２に移行し、このステップにおいて、物品登録ＤＢ１２３からこの物品の情報を取得する。ここでは、当該物品のＩＤを基に、物品登録ＤＢ１２３を検索し、対応する、品名、アクセス制限（使用者条件、場所条件、時間条件、用途条件等）、タイプ、保管位置等の情報を取得する。
【００５８】
次いで、状態情報ＤＢ１２１から対象物品の直近に存在する人物の状態情報を取得する（ステップＳ１３０３）。通常、自走式の物体を除いて、一般の物品は人が移動させるものであるので、物品の移動がある場合には、その空間的・時間的直近に人物が存在すると考えられる。したがって、ここでは、状態情報ＤＢ１２１に登録されている物品の格フレーム（状態情報）から得られる場所格および時間格を基に、該当物品に対して空間的・時間的直近に存在する人物に対する状態情報を取得する。
【００５９】
そして、ステップＳ１３０４で使用者条件、場所条件、時間条件、用途条件のチェックをする。ここでは、ステップＳ１３０２で取得された情報の内アクセス制限として前述の使用者条件、場所条件、時間条件、用途条件のいずれかまたは全部が設定されている場合、ステップＳ１３０３で取得した人物に対する状態情報がこれらの条件を満たしているかチェックする。なお、使用者条件に関しては、人物に対する状態情報から特定される人物について人物ＤＢ１２５を参照し、その管理権限や使用許可期限等が使用者条件に合致するかもチェックする。また、場所条件や用途条件（例えば、複製禁止の場合、複写機のある位置／空間に物品が存在することを禁止条件とするなど）に関しては、人物や物品の位置が、状態情報において場所名の他、座標でも特定されるため、環境情報ＤＢ１２４を参照し、人物や物品が存在する位置関係を特定した上で、人物や物品に対する状態情報が場所条件等に合致するかをチェックする。
【００６０】
上記人物に対する状態情報が、いずれかの条件を逸脱している場合（ステップＳ１３０５でＹｅｓ）、管理用ＰＣ２００に異常を通知する異常出力を行う（ステップＳ１３０６）。
【００６１】
以上の、物品と人物とを関連づけて監視する異常判定処理により、物品（ＲＦＩＤタグ付き）に対するセキュリティをより強化することができる。
【００６２】
続いて、固定資産管理部１１６による固定資産管理のための処理について説明する。固定資産管理部１１６は、状態情報ＤＢ１２１から複数の状態情報を取得する。例えば、時刻が連続する２つの状態情報を取得する。この状態情報の主格（ＩＤ等）および場所格（なお、物品の場合、図３に示す人物に対する頭部座標等の情報はない）を基に、その動作状態（移動）を検出する。そして、後述の固定資産管理処理を実行する。なお、上記時刻は厳密に同一である必要はなく、誤差が所定の時間範囲内であれば略同一の時刻と判断するように構成してもよい。
【００６３】
（固定資産管理）
以下に、本実施形態の監視システム１０を利用した固定資産の手法について説明する。その具体例を図１４〜１６に示す。ここで、図１４は、状態情報から固定資産管理のための処理を行う際の具体例を示す図である。図１５は、図１４の状況で画像処理により得られる情報とＲＦＩＤリーダから得られる情報の例を示す図である。図１６は、物品管理ＤＢの更新過程を例示した図である。なお、図１４において、物品にはＲＦＩＤタグが取り付けられているものとする。
【００６４】
図１４に示すように、各エリアには、カメラとＲＦＩＤリーダが設置されており、各エリアにおいて、人物の行動を解析し、物品の動作状態としてこの物品のエリア間の移動を検出する。図１４の（１）、（２）、（３）の各状態において得られる情報として、図１５に示す情報が得られる。すなわち、（１）で画像処理部１１２による画像処理により得られる情報は、［行動名：存在する］、［主格：人物Ａ］、［場所格（場所名）：エリアＡ］、［時間格：Ｔ１］であり、同じく（１）でＲＦＩＤリーダから得られる情報は、［行動名：存在する］、［主格：物品］、［場所格：エリアＡ］、［時間格：Ｔ１］である。また、図１４の（２）で画像処理部１１２による画像処理により得られる情報は、［行動名：存在する］、［主格：人物Ａ、人物Ｂ］、［場所格：エリアＣ］、［時間格：Ｔ２］であり、同じく（２）でＲＦＩＤリーダから得られる情報は、［行動名：存在する］、［主格：物品］、［場所格：エリアＣ］、［時間格：Ｔ３］である。また、図１４の（３）で画像処理部１１２による画像処理により得られる情報は、［行動名：存在する］、［主格：人物Ｂ］、［場所格：エリアＢ］、［時間格：Ｔ３］であり、同じく（３）でＲＦＩＤリーダから得られる情報は、［行動名：存在する］、［主格：物品］、［場所格：エリアＢ］、［時間格：Ｔ３］である。
【００６５】
ここで、物品管理ＤＢ１２６の初期状態は、図１６の（Ａ）の状態にあるとする。図１４に示す（１）の状態では、人物Ａと物品がエリアＡ内にあり、人物Ａが物品を持ち出そうとしている。この状態で、物品管理ＤＢ１２６の更新がなされると、物品管理ＤＢ１２６は、図１６の（Ｂ）のように更新される。すなわち、物品更新ＤＢの項目の内、「状態」、「最終取扱者」、「最新更新位置」、「最終更新時間」が、それぞれ「持ち出し」、「人物Ａ」、「エリアＡ」、「Ｔ１」（ただし、Ｔ１はこの更新時の時間である）に更新される。
【００６６】
次いで、図１４の（２）の状態になると（このときエリアＣにおいて人物Ａは人物Ｂと合流している）、物品管理ＤＢ１２６は、図１６の（Ｃ）のように更新される。すなわち、物品更新ＤＢの項目の内、「最新更新位置」、「最終更新時間」が、それぞれ、「エリアＣ」、「Ｔ２」（ただし、Ｔ２はこの更新時の時間である）に更新される。
【００６７】
次いで、図１４の（３）の状態になると（このとき、物品は人物Ａから人物Ｂに手渡され、物品と人物ＢはエリアＢに存在している）、物品管理ＤＢ１２６は、図１６の（Ｄ）のように更新される。すなわち、物品更新ＤＢの項目の内、「最終取扱者」、「最新更新位置」、「最終更新時間」が、それぞれ「人物Ｂ」、「エリアＢ」、「Ｔ３」（ただし、Ｔ３はこの更新時の時間である）に更新される。
【００６８】
以上のように、ＲＦＩＤタグ付き物品の管理状態が物品管理ＤＢ１２６に登録され管理される。
【００６９】
（固定資産管理処理）
ここで、図１７を用いて、本実施形態の警備装置１００の固定資産管理部１１６による固定資産管理処理について説明する。図１７は、固定資産管理部１１６による固定資産管理処理を示すフローチャートである。なお、物品にはＲＦＩＤタグが取り付けられており、ＲＦＩＤリーダによりそのＲＦＩＤタグ情報が読み取られ、当該物品のＩＤが取得されているものとする。また、この処理は、例えば、定期的に行われる。
【００７０】
はじめに、対象物品に対する格フレームが状態情報ＤＢ１２１に登録されているか（状態情報ＤＢ１２１から取得可能か）判断する（ステップＳ１７０１）。ここでは、この物品の主格であるＩＤ（追跡番号）を基に、状態情報ＤＢ１２１を検索し、該当する格フレーム（最新の格フレームとその１つ前の時点の格フレーム）が登録されているか否か判断をする。状態情報ＤＢ１２１に該当する格フレームが存在しない場合（ステップＳ１７０１でＮｏ）、この処理は終了する。
【００７１】
一方、状態情報ＤＢ１２１に当該物品の格フレームが登録されている場合（ステップＳ１７０１でＹｅｓ）、ステップＳ１７０２に移行し、このステップにおいて、場所の移動が発生しているか判断する。この判断は、当該時点において、最新の格フレーム（状態情報）と時間的に近接する１つ前の格フレーム（状態情報）を取得し、これらの間において当該物品の場所格に変化があるか否かを判定することにより行う。このステップにおいて場所の移動がないと判定された場合は（ステップＳ１７０２でＮｏ）、ステップＳ１７０９へ移行し、このステップにおいて物品管理ＤＢ１２６の「最終更新時間」を当該物品の最新の状態情報の時間格の情報に更新する。
【００７２】
ステップＳ１７０２において場所の移動があったと判定された場合（ステップＳ１７０２でＹｅｓ）、ステップＳ１７０３に移行し、このステップにおいて物品管理ＤＢ１２６の「最終更新位置」を最新の状態情報の場所格の情報に更新する。
【００７３】
次いで、物品管理ＤＢ１２６より状態項目の情報を取得し（ステップＳ１７０４）、この情報が「保管」であるのか「持ち出し」であるのか判定する（ステップＳ１７０５）。
【００７４】
ステップＳ１７０５で、状態項目の情報が「保管」であると判定された場合（ステップＳ１７０５でＹｅｓ）、状態項目を「持ち出し」に更新する（ステップＳ１７０６）。
【００７５】
次いで、状態情報ＤＢ１２１から対象物品の直近に存在する人物の状態情報を取得する（ステップＳ１７０７）。ここでは、状態情報ＤＢ１２１に登録されている当該物品の格フレーム（状態情報）から得られる場所格および時間格を基に、該当物品に対して空間的・時間的直近に存在する人物に対する状態情報（特には、主格）を取得する。
【００７６】
そして、物品管理ＤＢ１２６の最終取扱者項目をステップＳ１７０７で取得した人物に対する状態情報（主格）で更新する（ステップＳ１７０８）。
【００７７】
最後に、物品管理ＤＢ１２６の「最終更新時間」を当該物品の最新の状態情報の時間格の情報に更新する（ステップＳ１７０９）。
【００７８】
一方、ステップＳ１７０５で、状態項目の情報が「保管」でない、すなわち「持ち出し」であると判定された場合（ステップＳ１７０５でＮｏ）、ステップＳ１７１０へ移行し、このステップで、物品登録ＤＢ１２３より保管位置の情報を取得する。そして、対象物品の状態情報の場所格がステップＳ１７１０で取得した保管位置と一致するか否か判断する（ステップＳ１７１１）。
【００７９】
ステップＳ１７１１の判断で、対象物品の状態情報の場所格がステップＳ１７１０で取得した保管位置と一致すると判定された場合（ステップＳ１７１１でＹｅｓ）、物品管理ＤＢ１２６の状態項目を「保管」に更新し（ステップＳ１７１２）、ステップＳ１７０７へ移行する。一方、対象物品の状態情報の場所格がステップＳ１７１０で取得した保管位置と一致しないと判定された場合は（ステップＳ１７１１でＮｏ）、何もせずに、ステップＳ１７０７へ移行する。ステップＳ１７０７以降の処理は上述のとおりである。
【００８０】
以上のようにして更新される物品管理ＤＢ１２６の情報は、管理用ＰＣ２００や他のＰＣ２００’からアクセスし、参照することができる。したがって、物品が、いまどのような状態にあるのか容易に知ることができる。
【００８１】
なお、本発明は、上記実施の形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化することができる。また、上記実施の形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成することができる。例えば、実施の形態に示される全構成要素からいくつかの構成要素を削除してもよい。さらに、異なる実施の形態にわたる構成要素を適宜組み合わせても良い。
【符号の説明】
【００８２】
１０  監視システム
１００  警備装置
１１０  制御部
１１１  画像入力部
１１２  画像処理部
１１３  状態情報構築部
１１４  データ入力部
１１５  異常判定部
１１６  固定資産管理部
１１７  アクセス制御部
１２０  記憶部
１２１  状態情報ＤＢ
１２２  行動導出規則ＤＢ
１２３  物品登録ＤＢ
１２４  環境情報ＤＢ
１２５  人物ＤＢ
１２６  物品管理ＤＢ
２００  管理用ＰＣ
２００’  ＰＣ
３００１〜３００ｎ  撮像装置
４００１〜４００ｎ  ＲＦＩＤ読取装置
【図１】
2010238180.tif 000003
【図２】
2010238180.tif 000004
【図３】
2010238180.tif 000005
【図４】
2010238180.tif 000006
【図５】
2010238180.tif 000007
【図６】
2010238180.tif 000008
【図７】
2010238180.tif 000009
【図８】
2010238180.tif 000010
【図９】
2010238180.tif 000011
【図１０】
2010238180.tif 000012
【図１１】
2010238180.tif 000013
【図１２】
2010238180.tif 000014
【図１３】
2010238180.tif 000015
【図１４】
2010238180.tif 000016
【図１５】
2010238180.tif 000017
【図１６】
2010238180.tif 000018
【図１７】
2010238180.tif 000019