(57)【要約】【課題】電子装置の動作ログの収集を行うシステムにおいて、インフラに障害が発生した場合、優先度の高いログのロストを防止することができるログ収集処理監視システムを提供する。【解決手段】電子装置１が出力するログを収集し、保全をするログ収集／保全システム２に記憶される動作ログと、運用管理システム７によって検出されるインフラの障害を記録したインフラ監視ログとに基づいて、ログ収集処理監視システム９のシステム状況分析手段９２によって分析を行い、この分析結果と予め判断ルール記憶手段９４に記憶される判断ルールに基づいてログのロスト状況をロスト状況判断手段によって判断し、電子装置１及びログ収集／保全システム２のログ送信／収集ポリシーを書き換える。【選択図】図１
2010152469.tif 000002
【特許請求の範囲】
【請求項１】
予め記憶するログ送信における所定のルール（以下、ログ送信ポリシーと称呼する）に則って外部装置に動作ログを送信可能な電子装置から、動作ログを収集するための所定のルール（以下、ログ収集ポリシーと称呼する）を記憶するログ収集ポリシー記憶手段と、
該ログ収集ポリシー記憶手段に記憶されたログ収集ポリシーに則って電子装置の動作ログを収集するログ収集手段と、
動作ログが記録されるログ保全用記憶手段と、
前記ログ収集手段が収集した動作ログを前記ログ保全用記録手段に記録するログ保全手段と、
を備えるログ収集／保全システムと、
前記電子装置の性能監視及び前記電子装置のネットワークの生死及び記憶容量等のインフラの状態を監視するサービス運用管理手段と、該サービス運用管理手段によって前記監視ログが記憶される監視結果記憶手段と、を備えるサービス運用管理システムとの各々のシステムによって記憶される動作ログ及びインフラ監視ログの収集処理を行うログ収集処理監視システムであって、
動作ログ及びインフラ監視ログの分析を行うログ分析手段と、ポリシー変更条件及びポリシー変更内容を管理する判断ルールを記憶する判断ルール記憶手段と、前記ログ分析手段によって分析された情報と前記判断ルールとに基づいてログのロスト状況及びロスト予測を判断し、ログ送信ポリシー及びログ収集ポリシーの変更の可否を判別するロスト状況判断手段と、該ロスト状況判断手段によって要ポリシー変更と判別された前記電子装置に対してログ送信ポリシー又はログ収集ポリシーの変更を行うポリシー変更手段を備え、
インフラ監視ログの分析によりインフラに発生した異常を分析すると共に、動作ログが欠落する恐れがある兆候を予め記憶した閾値に基づいて検出し分析を行い、得られた結果が前記判断ルールと合致するかを判別し、合致する場合前記判断ルールに基づいて対象となる前記電子装置又は前記ログ収集／保全システムのログ送信／収集ポリシーを変更することを特徴とするログ収集処理監視システム。
【請求項２】
個々の前記電子装置に対して、優先度を設定し記憶するログ収集・送信優先度記憶手段を備え、前記判断ルールを前記電子装置に適用する際に、前記優先度に基づいて前記判断ルールの適用の是非を判別することを特徴とする請求項１記載のログ収集処理監視システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、電子機器の動作ログに消失や欠損の畏れがある場合、予め設定された所定のルールに応じて自動的に記憶場所等を変更することが可能なログ収集処理監視システムに関する。
【０００２】
従来、多くのシステムには、システムのメンテナンス等に用いるためにシステムにおいて発生したイベントや異常、不正アクセス等を把握するために、都度動作ログをファイル等に記憶する手段を有し、有事の際に記録されたログを辿って原因を究明し、これに基づいて復旧作業や再発防止策を講じている。
【０００３】
例えば特許文献１では、複数のＯＡ装置に接続され、各々のＯＡ装置のイベントログを統括するイベントログ管理サーバであって、複数のＯＡ装置が連動して動作する場合、例えば第１の装置が起動し際に、第１の装置が第２の装置を自動的に起動させるような場合において、イベントログ管理サーバには、第１の装置の起動ログと第２の装置の起動ログを関連付けて記憶する構成が開示されている。
【背景技術】
【０００４】
【特許文献１】特開２００６−３１８４４２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
近年のＨＤＤ等のストレージ機器における大容量化に伴い、記憶する動作ログの取捨選択を行うこと無く、全て保存する傾向にある。しかしながら、ストレージ機器の容量は大容量化したとは言え有限であり、システムの高速化・大規模化が進むにつれ、記憶されるログの量は増加し、ストレージ機器の容量不足のために動作ログが保全できなかったり、またシステムの大規模化に伴うネットワークトラフィックの増加や、ストレージ機器・ネットワーク機器の物理的な故障が原因によって動作ログが保全できなかったりなど、様々な要因により動作ログの保全が不可能となるケースが考えられる。これらの異常が発生した際、従来ではログの記憶動作を停止し、復旧が行われるまでログ収集が行えなくなるという不具合があった。
【０００６】
本発明は上記課題を鑑みてなされたものであり、システムに異常が発生し、ログ記憶動作を行えないような場合においても、自動的に他のストレージや方法を選択し、ログ記憶動作を継続することができるログ収集処理監視システムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
請求項１に係るログ収集処理監視システムは、
予め記憶するログ送信における所定のルール（以下、ログ送信ポリシーと称呼する）に則って外部装置に動作ログを送信可能な電子装置から、動作ログを収集するための所定のルール（以下、ログ収集ポリシーと称呼する）を記憶するログ収集ポリシー記憶手段と、
該ログ収集ポリシー記憶手段に記憶されたログ収集ポリシーに則って電子装置の動作ログを収集するログ収集手段と、
動作ログが記録されるログ保全用記憶手段と、
前記ログ収集手段が収集した動作ログを前記ログ保全用記録手段に記録するログ保全手段と、
該ログ保全手段によって動作ログが記録されるログ保全用記憶手段と、を備えるログ収集／保全システムと、
前記電子装置の性能監視及び前記電子装置のネットワークの生死及び記憶容量等のインフラの状態を監視するサービス運用管理手段と、該サービス運用管理手段によってインフラ監視ログが記憶される監視結果記憶手段と、を備えるサービス運用管理システムとの各々のシステムによって記憶される動作ログ及びインフラ監視ログの収集処理を行うログ収集処理監視システムであって、
動作ログ及びインフラ監視ログの分析を行うログ分析手段と、ポリシー変更条件及びポリシー変更内容を管理する判断ルールを記憶する判断ルール記憶手段と、前記ログ分析手段によって分析された情報と前記判断ルールとに基づいてログのロスト状況及びロスト予測を判断し、ログ送信ポリシー及びログ収集ポリシーの変更の可否を判別するロスト状況判断手段と、該ロスト状況判断手段によって要ポリシー変更と判別された前記電子装置に対してログ送信ポリシー又はログ収集ポリシーの変更を行うポリシー変更手段を備え、
インフラ監視ログの分析によりインフラに発生した異常を分析すると共に、動作ログが欠落する恐れがある兆候を予め記憶した閾値に基づいて検出し分析を行い、得られた結果が前記判断ルールと合致するかを判別し、合致する場合前記判断ルールに基づいて対象となる前記電子装置又は前記ログ収集／保全システムのログ送信／収集ポリシーを変更することを特徴とする。
【０００８】
請求項１の構成によれば、ログ送信ポリシーに則って動作ログを出力する電子装置に接続され、送信されるログをログ収集ポリシーに則って蓄積するログを取捨選択し、蓄積するストレージを適宜変更して記憶するログ収集／保全システムによって収集した動作ログにおいて、ネットワークの高負荷やシステム例外イベントの発生などによって動作ログが欠落する恐れがある場合、インフラの監視を行うサービス運用管理システムによってインフラに対して発生した障害を記録されるインフラ監視ログと、収集した動作ログとを併せてログ分析手段によって分析を行い、判断ルール記憶手段に記憶された判断ルールと合致する判断条件がある場合、ロスト状況判断手段によって当該判断条件が示すログ送信／収集ポリシーの変更内容を選択し、ポリシー変更手段に当該変更内容を通知し、当該変更内容が示す電子装置のログ送信ポリシー又はログ収集／保全システムのログ収集ポリシーを変更することで、動作ログの記録を予め設定した判断ルールに基づいて行い、異常発生に伴う動作ログの消失を最小限に留めることができる。
【０００９】
請求項２に係るログ収集処理監視システムは、請求項１記載のログ収集処理監視システムにおいて、個々の前記電子装置に対して、優先度を設定し記憶するログ収集・送信優先度記憶手段を備え、前記判断ルールを前記電子装置に適用する際に、前記優先度に基づいて前記判断ルールの適用の是非を判別することを特徴とする。
【００１０】
請求項２の構成によれば、複数の電子装置において判断ルール適用の際の優先順位を定義することで、動作ログが欠落する恐れのあるインフラの障害が発生した場合、全ての電子装置に対するログの収集を停止することなく、優先度の低い電子装置のみを選択して停止することができる。
【発明の効果】
【００１１】
請求項１に係るログ収集処理監視システムは、
予め記憶するログ送信における所定のルール（以下、ログ送信ポリシーと称呼する）に則って外部装置に動作ログを送信可能な電子装置から、動作ログを収集するための所定のルール（以下、ログ収集ポリシーと称呼する）を記憶するログ収集ポリシー記憶手段と、
該ログ収集ポリシー記憶手段に記憶されたログ収集ポリシーに則って電子装置の動作ログを収集するログ収集手段と、
動作ログが記録されるログ保全用記憶手段と、
前記ログ収集手段が収集した動作ログを前記ログ保全用記録手段に記録するログ保全手段と、
該ログ保全手段によって動作ログが記録されるログ保全用記憶手段と、を備えるログ収集／保全システムと、
前記電子装置の性能監視及び前記電子装置のネットワークの生死及び記憶容量等のインフラの状態を監視するサービス運用管理手段と、該サービス運用管理手段によってインフラ監視ログが記憶される監視結果記憶手段と、を備えるサービス運用管理システムとの各々のシステムによって記憶される動作ログ及びインフラ監視ログの収集処理を行うログ収集処理監視システムであって、
動作ログ及びインフラ監視ログの分析を行うログ分析手段と、ポリシー変更条件及びポリシー変更内容を管理する判断ルールを記憶する判断ルール記憶手段と、前記ログ分析手段によって分析された情報と前記判断ルールとに基づいてログのロスト状況及びロスト予測を判断し、ログ送信ポリシー及びログ収集ポリシーの変更の可否を判別するロスト状況判断手段と、該ロスト状況判断手段によって要ポリシー変更と判別された前記電子装置に対してログ送信ポリシー又はログ収集ポリシーの変更を行うポリシー変更手段を備え、
インフラ監視ログの分析によりインフラに発生した異常を分析すると共に、動作ログが欠落する恐れがある兆候を予め記憶した閾値に基づいて検出し分析を行い、得られた結果が前記判断ルールと合致するかを判別し、合致する場合前記判断ルールに基づいて対象となる前記電子装置又は前記ログ収集／保全システムのログ送信／収集ポリシーを変更するので、インフラに発生した異常をインフラ監視ログから判別し、収集した動作ログのトレンドを分析することによって、動作ログの消失の畏れのある電子装置を判別し、当該電子装置から出力される動作ログが消失することを防止するよう、保存する記録媒体の変更や、優先度の高い動作ログの記録を行うための取捨選択を自動的に行うことができる。
【００１２】
請求項２に係るログ収集処理監視システムは、請求項１記載のログ収集処理監視システムにおいて、個々の前記電子装置に対して、優先度を設定し記憶するログ収集・送信優先度記憶手段を備え、前記判断ルールを前記電子装置に適用する際に、前記優先度に基づいて前記判断ルールの適用の是非を判別するので、判断ルールと合致する電子装置が複数に亘る場合、優先度の低いもののログ収集／送信ポリシーを変更することで、電子装置の動作ログ収集機能の停止や、ログ収集／送信ポリシーによる動作ログの記録場所の変更等を最小限に抑えることができる。
【発明を実施するための最良の形態】
【００１３】
以下、本発明を実施するための最良の形態としての実施例を図１から図９を参照して説明する。もちろん、本発明は、その発明の趣旨に反さない範囲で、実施例において説明した以外のものに対しても容易に適用可能なことは説明を要するまでもない。
【００１４】
本実施例における自動障害対応システムの構成について、図１に基づいて説明する。１はシステムの末端において、種々の動作をする電子装置である。電子装置１は動作ログの出力を行い、外部に自装置の動作の詳細を報知することができる。また、動作ログの送信先や、どの動作に対して動作ログを発行するかというログ送信ポリシーを予め記憶する記憶手段１１を有する。２は、電子装置１から出力される動作ログを収集し、ログの記録や保全を行うログ収集／保全システムである。ログ収集／保全システム２は、電子装置１と接続し、動作ログの収集を行うログ収集手段３と、収集したログの取捨選択の判別ルールや、記録するストレージ先を管理するログ収集ポリシーを記憶するログ収集ポリシー記憶手段４と、ログ収集ポリシー記憶手段４に記憶されたログ収集ポリシーに基づいて動作ログの処理を行うログ保全手段５と、ログを記録するログ保全用ストレージ６とを備える。
【００１５】
７はシステム運用管理システムであり、電子機器１とログ収集／保全システムを接続するネットワークの生死判定や、各装置が備えるストレージの異常の発生等、インフラに発生する障害を検出し、インフラ監視ログとして記録するものである。インフラ監視ログは、監視結果記録手段８に記録される。
【００１６】
９は、システム全体のログ収集処理の監視を行うログ収集処理監視システムである。ログ収集処理監視システム９は、ログ分析手段であり、ログ収集／保全システムのログ保全用ストレージ６にアクセスし、動作ログの分析を行うログトレンド分析部９１と、同じくログ分析手段であり、インフラに発生した異常を検出するためのシステム状況分析部９２と、これら２つのログ分析手段によって得られる分析結果を蓄積する分析結果記憶手段９３と、所定の分析結果に対応した閾値と、当該閾値に基づいてログ送信／収集ポリシーを変更するための変更内容を蓄積する判断ルール記憶手段９４と、分析結果記憶手段９３に蓄積される分析結果と、判断ルール記憶手段９４に記憶される判断ルールとを用いて、分析結果にログ送信／収集ポリシーを変更する必要があるケースが存在するかを検出するロスト状況判別手段９５と、ロスト状況判別手段９５によってログ送信／収集ポリシー変更の必要有りと判別された電子装置１又はログ収集／保全システム２に対してログ送信／収集ポリシーの書き換えを行うポリシー変更／通報手段９６を備える。ポリシー変更／通報手段９６は、ログ送信／収集ポリシーの変更を行う際に、図示しないシステム管理者へ変更通知１０を送信する自動通報手段を同時に担う。
【００１７】
続いて、ログ収集／保全システム２の定例動作について、図２に基づいて説明する。ログ収集／保全システムは、ログ収集ポリシー記憶手段４に記憶されるログ収集ポリシーに基づいて、定期的に監視対象たる電子装置１の動作ログの収集を行う（Ｓ２０１）。収集したログはログ保全用ストレージ６に保存され、改ざん等ユーザの手が加えられない状態で長期間保管される。
【００１８】
続いて、システムの運用管理を担う運用管理システムの定例動作について、図３に基づいて説明する。運用管理システム７は、定期的に電子装置１やログ収集／保全システム２のストレージ容量やＣＰＵ稼働率等の性能、及び、その他図示しないネットワーク装置や分配器、無停電電源等のインフラの生死等の稼働状況を監視する（Ｓ３０１）。監視した結果は、インフラ監視ログとして監視結果記憶手段８に記憶される。
【００１９】
続いて、ログ収集処理監視システム９の動作について図４及び５に基づいて説明する。ログ収集処理監視装置９のシステム状況分析部９２は、運用管理システム７が備える監視結果記憶手段８から、インフラ監視ログを採取し、電子装置１及びログ収集／保全システム２、その他各種インフラの稼働状況及び性能、ストレージの空き容量を分析結果記録手段に記録する（Ｓ４０１）。分析結果の例を図６及び図７に示す。図６は電子装置１及びログ収集／保全システムから採取した動作ログを分析した結果の一例である。分析結果として、インフラ監視ログから、インフラ監視ログが記録された日時、対象となるサーバや電子装置名、ＩＰアドレス等電子装置を一意に特定可能なネットワークアドレス、インフラ監視ログが記録された日時における該当装置の稼働状況や使用メモリ、ＣＰＵ使用量やストレージの使用量が記録されている。また、図７は、インフラであるネットワーク装置のインフラ監視ログの分析結果の一例である。上述と同様にインフラ監視ログが記録された日時、当該ネットワークの担当領域を示すゾーン名、平均転送速度、単位時間あたりのトラフィック量、輻輳回数やエラー回数が記録される。
【００２０】
ログ収集処理監視システム９は、続いてログ収集／保全システム２のログ保全用ストレージ６から、電子装置１の動作ログを採取し、動作ログのトレンド（曜日や時間毎のログの件数推移等）を分析し、分析結果記憶手段９３に記憶する（Ｓ４０２）。図８は、動作ログのトレンド分析結果の一例を示している。電子機器１の名称、ログの種別を示すログ名、当該ログ種別における最新収集日時、収集ログのサイズを示す収集ログ容量、曜日毎における動作ログの平均収集容量、時間毎における動作ログの平均収集容量が記録される。
【００２１】
上記における電子機器１やログ収集／保全システム２を含むインフラの監視ログの分析結果、及び、電子装置１の動作ログのトレンド分析結果を、判断ルール記憶手段９４に記憶される判断ルールに基づいて、更に分析を行い、動作ログのロスト（消失及び欠損）状況の判断を行う（Ｓ４０３）。図９に判断ルールの一例を示す。この分析結果が、この判断ルールに記載の判断条件に合致する場合、続くポリシー（ログ送信ポリシー又はログ収集ポリシー）変更フラグを判別し、ポリシー変更が必要である場合は、変更内容に基づいて対象機器のポリシーを変更する。また、システム管理者に異常発生を報知するためのフラグを併せて持つことで、動作ログにおいて重要な異常等をシステム管理者に自動通報が可能となる。
【００２２】
例えば、ログ収集／保全システム２のログ保全用ストレージの記憶容量が所定のしきい値を超えた場合、即ち、継続したシステムの利用によって記憶容量が足りなくなる虞がある場合は、図９の判断ルールのＮｏ．３に示すように、予め設定した動作ログの保全を行う際の優先度に基づいて、優先度の低い装置に対するログ収集処理を停止するよう、ログ収集／保全システム２のログ収集ポリシー記憶手段４の書き換えを試みると共に、システム管理者へ当該処理を行う旨の通知を行うよう、ポリシー変更／通知手段９６によって行う。また、電子装置１とログ収集／保全システム２との間に過大なネットワークトラフィックが掛かり、システム全体に支障を来たすことを防止するため、ネットワークトラフィックが所定のしきい値を超えた場合、判断ルールのＮｏ．４が適用され、管理者に当該現象を通知すると共に、動作ログの保全を行う優先度の低い電子装置１に対して動作ログの出力を停止するようログ送信ポリシーを書き換える。これにより、動作ログの保全を行う際の優先度の高い電子装置１は、確実に動作ログを出力し、ログ収集／保全システム２のログ保全用ストレージ６に記録することができる。
【００２３】
上記に基づき、図６〜８に示す各種ログ及び図９に示す判断ルールを用いた電子装置のログ送信ポリシーの変更に関する一連の動作を説明する。図６〜８は、ログ保全用ストレージ６からログトレンド分析手段９１によって取得し、分析されて分析結果９３に蓄積される情報の一例を示している。図６は監視結果記憶手段８からシステム状況分析手段９２を介して、分析結果９３にサーバの処理状況や各種デバイスのステータスを記憶するサーバ状況分析結果を示している。表は左から、分析を行った日時、対象装置を示すサーバ名、対象装置のＩＰアドレス、前述の日時における対象装置の稼働状況、対象装置のメモリ使用量、対象装置のＣＰＵ使用量、対象装置のストレージ使用量を管理している。
【００２４】
図７は図６に示すサーバ状況分析結果と同様に、監視結果記憶手段８からシステム状況分析手段を介して分析結果９３に記憶される各装置を接続するネットワークのトラフィックやエラー回数等を蓄積するネットワーク状況分析結果を示している。左から分析を行った日時、各々のゾーンを識別するためのゾーン名、ゾーン内の転送速度、所定の期間内におけるデータトラフィック量、過剰なトラフィックの際に通信を制限した回数を示す輻輳回数、データ通信の際のエラー回数を管理している。
【００２５】
図８は、曜日別にログの収集容量を分析したトレンド分析情報を示している。表は左からログを出力する装置の名前を示す「サーバ名」、ログの種類を示す「ログ名」、当該ログの最新の収集日時を示す「最新収集日時」、ログファイルのファイルサイズを示す「収集ログ容量」、収集されたログの曜日別トレンド情報を示す「曜日別平均容量」が管理される。また、「収集ログ容量」は、過去の収集したログの容量を履歴として記録しており、「曜日別平均容量」は、曜日毎の収集容量の平均値を算出し管理している。
【００２６】
運用システム７によって監視されるネットワークの負荷状況を示すトラフィック量が記憶される監視結果記憶手段から、図７に示すようなネットワークの通信負荷（トラフィック量）の状況分析結果がシステム状況分析手段９２により得られ、当該トラフィック量が予め判断ルール記憶手段９４に記憶した閾値（例えば８０ＭＢｙｔｅｓ）を超えた場合、即ち図７に示すゾーンＢのような分析結果が得られた場合は、ロスト状況判断手段９５によって、図９に示す判断ルールのリストから合致する状況を判別する。ここではルール４に示す「対象機器とログ収集装置間のネットワークトラフィックが閾値を超えた」に合致するため、ゾーンＢに接続する電子装置１であって収集を行うログの内の優先度が低いもの（図１０を例とするとＡ００１．ｌｏｇ及びＥ００１．ｌｏｇ）のログ送信ポリシーを変更し、ログ収集動作を停止させると共に、ポリシー変更をシステム管理者にメール等で通報する。以上のような動作によって優先度の高いログが過剰なトラフィックによって欠損することを防止することができ、システム管理者によるシステムの復旧作業を迅速に促すことができる。
【００２７】
以上のような構成のログ収集処理監視システムによれば、システム内に発生した異常等、ログがロストする要因を早期に検出することができ、これに対処することでログがロストすることを最小限に抑えることが可能となる。また、収集するログに優先順位を付け、ログのロストが発生する畏れがあるような異常が発生した場合、優先度のより高い電子装置１のログに限定して収集することで、ログ収集時のロスト被害の最小化を図ることができる。
【００２８】
以上、本発明の実施例について詳述したが、本発明は前記実施例に限定されるものではなく、本発明の要旨の範囲内で種々の変形実施が可能である。例えば、図６〜８に示すログの分析結果として記録する情報や、図９に示す判断ルールはあくまで一例であり、システムを利用するユーザやシステム管理者によって適宜変更してもよい。
【図面の簡単な説明】
【００２９】
【図１】本発明の実施例における、ログ収集処理監視システムと監視対象となる電子装置、システムの構成を示すブロック図である。
【図２】同上、ログ収集／保全システムの動作を示すフローチャートである。
【図３】同上、運用管理システムの動作を示すフローチャートである。
【図４】同上、ログ収集処理監視システムの動作を示すフローチャートである。
【図５】同上、ログ収集処理監視システムの動作を示すフローチャートである。
【図６】同上、インフラ監視ログの電子装置及びログ収集／保全システムに対する分析結果の一例を示す説明図である。
【図７】同上、インフラ監視ログのネットワーク状況における分析結果の一例を示す説明図である。
【図８】同上、電子装置の動作ログにおけるログトレンド分析結果の一例を示す説明図である。
【図９】同上、分析結果からログ送信／収集ポリシーの変更の可否を判別するための判断ルールの一例を示す説明図である。
【符号の説明】
【００３０】
１    電子装置
２    ログ収集／保全システム
３    ログ収集手段
４    ログ収集ポリシー記憶手段
５    ログ保全手段
６    ログ保全用ストレージ
７    運用管理装置
８    監視結果記憶手段
９    ログ収集処理監視システム
９２  システム状況分析手段（インフラ監視ログのログ分析手段）
９３  分析結果記憶手段
９４  判断ルール記憶手段
９５  ロスト状況判断手段
９６  ポリシー変更／通報手段（ポリシー変更手段）
【図１】
2010152469.tif 000003
【図２】
2010152469.tif 000004
【図３】
2010152469.tif 000005
【図４】
2010152469.tif 000006
【図５】
2010152469.tif 000007
【図６】
2010152469.tif 000008
【図７】
2010152469.tif 000009
【図８】
2010152469.tif 000010
【図９】
2010152469.tif 000011