(57)【特許請求の範囲】
【請求項１】
通信ネットワークを介して互いに連繋してデータ処理を実行する機能を備えた複数のサーバと、上記通信ネットワークに結合された監視端末装置とからなり、
上記監視端末装置が、それぞれソフトウエア識別子を含む索引コードと、障害解析情報の保存動作に関係するリソースを定義している少なくとも１組のリソース定義データとからなる複数のデータレコードを記憶した管理テーブルを有し、
上記監視端末装置が、上記何れかのサーバからソフトウエア識別子を含む障害通知メッセージを受信した時、上記管理テーブル上で上記ソフトウエア識別子と対応するデータレコードにおいて上記リソースのうちの１つとして定義されているサーバに対して、障害解析情報の保存を指令するようにしたことを特徴とする分散処理システム。
【請求項２】
前記管理テーブルのリソース定義データの各組が、障害解析情報の保存動作を実行すべきサーバと、障害解析情報が存在するデータファイルと、障害解析情報の退避先となる出力ファイルとを定義しており、
前記監視端末装置が、上記リソース定義データで定義されたデータファイルと出力ファイルとを指定して、前記サーバに前記障害解析情報の保存を指令することを特徴とする請求項１に記載の分散処理システム。
【請求項３】
通信ネットワークを介して複数のサーバと接続された監視端末装置において、
それぞれ上記サーバで実行されるソフトウエアの識別子を含む複数の索引コードと対応して、障害解析情報の保存動作に関係する複数のリソースを定義した複数組のリソース定義データを記憶した管理テーブルと、
上記何れかのサーバからソフトウエア識別子を含む障害通知メッセージを受信した時、上記管理テーブルから、上記障害通知メッセージに含まれるソフトウエア識別子と対応した少なくとも１組のリソース定義データを検索し、上記検索されたリソース定義データにおいて上記複数のリソースのうちの１つとして定義されているサーバに対して、障害解析情報の保存を指令する制御メッセージを送信する処理手段とを有することを特徴とする監視端末装置。
【請求項４】
前記管理テーブルに記憶されるリソース定義データの各組が、前記リソースとして、障害解析情報の保存動作を実行すべきサーバと、障害解析情報が存在するデータファイルと、障害解析情報の退避先となる出力ファイルとを定義しており、
前記処理手段が、上記リソース定義データで定義された上記データファイルと出力ファイルとを含む制御メッセージを前記サーバに送信するようにしたことを特徴とする請求項３に記載の監視端末装置。
【請求項５】
通信ネットワークを介して互いに連繋してデータ処理を実行する複数のサーバと、上記通信ネットワークに接続され、それぞれソフトウエアの識別子と、障害解析情報の保存動作に関係する複数のリソースを定義した少なくとも１組のリソース定義データとからなる複数のデータレコードを記憶した管理テーブルを有する監視端末装置とからなる分散処理システムにおける障害解析情報の保存方法において、
データ処理中にソフトウエア障害を検出したサーバから上記監視端末装置に、実行中のソフトウエアの識別子を含む障害通知メッセージを送信し、
上記障害通知メッセージを受信した上記監視端末装置が、上記管理テーブルに記憶されている上記障害通知メッセージのソフトウエア識別子と対応したデータレコードを参照し、上記データレコードで上記複数のリソースのうちの１つとして定義されているサーバに対して、障害解析情報の保存を指令し、
上記保存を指令されたサーバが、障害解析情報の保存動作を実行するようにしたことを特徴とする障害解析情報の保存方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、障害発生時の障害解析情報の保存技術に関し、特に、複数のサーバにより構成される分散処理システムに適したソフトウェア障害解析情報の保存方法および保存システムに関する。
【０００２】
【従来の技術】
複数のサーバからなる分散処理システム上で動作するソフトウェア製品（プログラム）群は、個々のサーバ内でのローカルなデータ処理以外に、複数のサーバが互いに連繋してデータ処理を実行することにより、大規模なシステム動作の実現を可能にしている。
上記分散処理システムでは、データ処理を実行中に１つのサーバでソフトウエア障害が発生した場合、上記サーバが所有する障害解析情報（トレース情報あるいはログデータ等）だけでは障害原因を究明できない場合がある。また、ソフトウェア製品のトレース情報等、システム障害の原因究明に必要な障害解析情報の殆どは、ラップアラウンド機能のものとなっているため、障害解析情報の保存ファイルへの退避が遅れると、重要な情報が喪失してしまう場合がある。
【０００３】
一般に、ソフトウエア・バグを含むシステム障害が発生すると、監視端末装置に障害の発生を知らせる障害報知メッセージが表示される。従来は、監視端末のディスプレイに障害報知メッセージが表示されると、監視端末のオペレータがシステム管理者（またはメーカ等）に連絡し、システム管理者が、障害の内容および障害が発生したサーバ（以下、障害サーバと言う）とを確認し、障害原因の究明に必要な障害解析情報の収集作業を開始している。
【０００４】
【発明が解決しようとする課題】
複数のサーバが連繋したデータ処理中に障害が発生すると、障害サーバのみならず、これと連繋動作している他のサーバからも障害解析情報を収集する必要がある。この場合は、障害解析情報を収集すべきサーバを特定し、これら複数のサーバに対して速やかに障害解析情報の保存、または監視端末装置への障害解析情報の転送を指令しなければならない。
複数のコンピュータからのログデータの収集に関する従来技術として、例えば、特開平５−２５０２２９号公報では、全てのコンピュータに自動的にログデータの送信を要求した場合に生じる負荷の増加問題を解決するために、各コンピュータから送信されたログデータを解析し、エラーが見つかったログデータの送信元コンピュータに対しては次回もログデータの送信を要求し、ログデータエラーの無かったコンピュータについては、次回のログデータの送信要求を見合わせることによって、正常に動作しているコンピュータにおけるログデータ送信負荷を軽減することが提案されている。
【０００５】
しかしながら、上記従来技術は、障害コンピュータと連繋動作する他のコンピュータが、それらが正常にデータ処理している限り次回のログデータの収集対象からは除外されるため、正常コンピュータからも障害分析情報の収集を必要とする分散処理システムには適用できない。
また、ソフトウエア障害を含むシステム障害の発生時に監視端末装置のオペレータやシステム管理者の判断で特定のサーバに障害解析情報の保存を指令する従来の障害解析情報の収集方法では、人為的な判断と監視端末からの指令操作を前提としているため、障害解析情報の保存と収集に時間がかかり、重要な情報が喪失してしまうおそれがある。
【０００６】
本発明の目的は、障害発生時に、人為的な判断と端末操作を必要とすることなく、自動的に障害解析情報を保存できる障害解析情報の保存方法を提供することにある。
本発明の他の目的は、１つのサーバで障害が検出された時、該サーバのみならず、上記障害と関係する他のサーバでも障害解析情報を自動的に保存できる障害解析情報保存システムを提供することにある。
本発明の更に他の目的は、１つのサーバで障害が検出された時、複数のサーバに分散して蓄積されている障害解析情報を自動的、且つ迅速に保存可能な分散処理システムおよび計算機ネットワークを提供することにある。
本発明の更に他の目的は、１つのサーバで障害が検出された時、他のサーバが所有する上記障害と関係する障害解析情報を自動的に特定し、複数のサーバに対して障害解析情報の保存を指令する監視端末装置を提供することにある。
【０００７】
【課題を解決するための手段】
上記目的を達成するために、本発明による計算機ネットワークは、通信ネットワークを介して監視装置と結合された複数のサーバからなり、上記各サーバが、複数のソフトウエアを装備し、データ処理の実行過程で、各ソフトウエア毎に障害原因解析に利用される障害解析情報を記憶するためのデータファイルと、障害が発生した時、実行中のソフトウエアの識別子を含む障害通知メッセージを上記監視装置に送信するための手段とを有し、上記監視装置が、上記何れかのサーバから受信した１つの障害通知メッセージに応答して、該障害通知メッセージに含まれるソフトウエア識別子に基いて特定される１以上のサーバに、障害解析情報の保存を指令するための手段を有することを特徴とする。
【０００８】
また、本発明による分散処理システムは、通信ネットワークを介して互いに連繋してデータ処理を実行する機能を有する複数のサーバと、上記通信ネットワークに結合された監視端末装置とからなり、該監視端末装置が、それぞれソフトウエア識別子を含む索引コードと、障害解析情報の保存動作に関係する複数のリソースを定義した少なくとも１組のリソース定義データとからなる複数のデータレコードが記憶された管理テーブルを有し、上記何れかのサーバからソフトウエア識別子を含む障害通知メッセージを受信した時、上記管理テーブル上の上記ソフトウエア識別子と対応するデータレコードにおいて上記リソースのうちの１つとして定義されているサーバに対して、障害解析情報の保存を指令するようにしたことを特徴とする。
【０００９】
更に詳述すると、上記管理テーブルの各データレコードは、例えば、障害解析情報の保存動作を実行すべきサーバと、障害解析情報が存在するデータファイルと、障害解析情報の退避先となる出力ファイルとを定義した少なくとも１組のリソース定義データを含み、上記監視端末装置は、上記リソース定義データで定義されたデータファイルと出力ファイルとを指定して、上記サーバに障害解析情報の保存を指令する。
本発明の好ましい実施例によれば、上記管理テーブルに記憶されたデータレコードのうちの少なくとも１つが、１つの索引コードと対応して複数組のリソース定義データを含んでおり、上記監視端末装置が、１つの障害通知メッセージの受信に応答して、上記複数組のリソース定義データで定義された複数のサーバに対して、障害解析情報の保存を指令できるようにしている。
また、本発明の好ましい実施例によれば、上記管理テーブルに記憶される各データレコードの索引コードが、上記ソフトウエア識別子に付随して、障害の種類を示す付加コードを含み、上記サーバから送信される障害通知メッセージが、ソフトウエア識別子と障害の種類を示す付加コードとからなるメッセージ識別子を含み、上記監視端末が、何れかのサーバから障害通知メッセージを受信した時、該受信メッセージのメッセージ識別子に基いて上記管理テーブルを検索することによって、上記管理テーブルで予め指定された特定のソフトウエアで特定種類の障害が発生した場合に、前記障害解析情報の保存を指令されるようにしている。
【００１０】
本発明による監視端末装置は、通信ネットワークを介して複数のサーバと接続され、上記サーバで実行されるソフトウエアの識別子を含む複数の索引コードと対応して、障害解析情報の保存動作に関係する複数のリソースを定義した複数組のリソース定義データを記憶するための管理テーブルと、上記何れかのサーバからソフトウエア識別子を含む障害通知メッセージを受信した時、上記管理テーブルから、上記障害通知メッセージに含まれるソフトウエア識別子と対応した少なくとも１組のリソース定義データを検索するための手段と、上記検索されたリソース定義データにおいて上記複数のリソースのうちの１つとして定義されているサーバに対して、障害解析情報の保存を指令する制御メッセージを送信するための手段とを有することを特徴とする。
【００１１】
また、本発明による障害解析情報の保存方法は、通信ネットワークを介して互いに連繋してデータ処理を実行する複数のサーバと、上記通信ネットワークに接続され、それぞれソフトウエアの識別子と、障害解析情報の保存動作に関係する複数のリソースを定義した少なくとも１組のリソース定義データとからなる複数のデータレコードを記憶した管理テーブルを有する監視端末装置とからなる分散処理システムにおいて、
データ処理中にソフトウエア障害を検出したサーバから上記監視端末装置に、実行中のソフトウエアの識別子を含む障害通知メッセージを送信し、
上記監視端末装置が、上記障害通知メッセージを受信した時、上記管理テーブルに記憶されている上記障害通知メッセージのソフトウエア識別子と対応したデータレコードを参照し、上記データレコードで上記複数のリソースのうちの１つとして定義されているサーバに対して、障害解析情報の保存を指令し、
上記保存を指令されたサーバが、障害解析情報の保存動作を実行するようにしたことを特徴とする。
【００１２】
上記障害解析情報の保存指令は、具体的には、上記監視端末装置が、障害通知メッセージの受信に応答して、上記管理テーブル内のデータレコードでリソースの１つとして定義されているソース・ファイルと出力ファイルとを指定した形で行う。好ましい実施例では、上記監視端末装置は、障害通知メッセージの受信に応答して、管理テーブルに記憶されている上記障害通知メッセージのソフトウエア識別子と対応した複数のデータレコードを参照し、上記参照された複数のデータレコードで定義されている複数のサーバに対して、障害解析情報の保存を指令する。
【００１３】
【発明の実施の形態】
図１は、本発明による分散処理システムを構成する計算機ネットワークの１例を示す。
分散処理システムは、通信ネットワークで接続された監視端末装置１１と、複数のサーバ１２（１２Ａ〜１２Ｄ）と、複数のユーザ端末装置１３とからなる。本実施例では、監視端末装置１１はＬＡＮ１に接続され、 サーバ１２Ａ〜１２ＤはＬＡＮ―２〜ＬＡＮ−ｎに接続され、これらのＬＡＮが広域ネットワーク（ＷＡＮ）１４によって相互接続されている。尚、上記各ＬＡＮ１〜ＬＡＮ−ｎは、サーバ１２を利用するための複数のユーザ端末装置１３を含むが、図１では、簡単化のために、ＬＡＮ−２に接続された１つの端末装置のみを示している。
【００１４】
監視端末装置１１は、後述する障害メッセージ管理テーブル３０を記憶するためのデータファイル５１と、表示装置５２と、入力装置５３を有し、この他に、図２に示すように、監視端末装置の全体動作を制御するための統合管理制御プログラム２１と、各サーバからのメッセージを受信処理するためのメッセージ受信プログラム２２と、受信メッセージの中から障害メッセージを判別し、障害分析情報の保存をサーバに命令するための障害メッセージ処理プログラム２３と、各種のアプリケーションプログラム２４とが格納されるプログラムメモリ１１０（図１では省略）を備えている。
【００１５】
一方、各サーバ１２（１２Ａ〜１２Ｄ）は、サーバ１２Ａで代表して示すように、データファイル５５と障害解析情報を保存するための保存ファイル５６を有し、この他の要素として、図３に示すように、分散処理ソフトウエア４１と、ＳＹＳＬＯＧメッセージ送信プログラム４２と、障害分析情報保存プログラム４３と、その他のアプリケーションプログラム４４が格納されるプログラムメモリ１２０（図１では省略）を備えている。上記分散処理ソフトウェア４１は、例えば、トランザクション管理、データベース制御、バッチ処理等のための複数のプログラムを含む。
【００１６】
各サーバ１２は、上記分散処理ソフトウエア４１に従って、必要に応じてサーバ相互間でメッセージを送受信することにより互いに連繋しながら、ユーザ端末装置１３からのユーザ操作に応答したデータ処理を実行する。尚、上記各サーバ１２は、他のサーバと連携動作する分散処理システムの他に、それぞれが独立してアプリケーションプログラム４４を実行するローカルなデータ処理システムとしても機能する。また、監視端末装置１１も、アプリケーションプログラムを実行することによって、監視機能以外のローカルなデータ処理システムとしても機能する。
【００１７】
各サーバ１２のデータファイル５５には、上記分散処理ソフトウエア４１の実行によって生成される各種のデータが格納される。上記データファイル５５には、これらの一般的なデータの他に、障害発生時に障害原因の究明と復旧処理に備えて、データ処理の実行過程の要所ポイントで生成される履歴情報（あるいはトレース情報）が、実行中のソフトウエアと対応したファイルエリアに格納される。
【００１８】
各サーバ１２は、ユーザ端末との間で通信されるメッセージや、他のサーバとの間で連繋したデータ処理のために通信されるメッセージとは別に、定期的あるいは上記履歴情報の記録時にＳＹＳＬＯＧメッセージ６０を生成し、監視端末装置１１に送信する。
【００１９】
図４に示すように、ＳＹＳＬＯＧメッセージ６０は、ヘッダ６１と情報フィールド６２とからなる。上記ヘッダ６１は、監視端末装置のアドレスが設定される宛先アドレスと、該メッセージの送信元サーバのアドレスが設定される送信元アドレスを含み、上記情報フィールド６２は、メッセージＩＤ６２１とメッセージ内容６２２を含む。
【００２０】
上記メッセージＩＤ６２１は、実行されたソフトウェア（プログラム）の識別子を示す主コードと、障害の状態を示す付加コードとからなる。上記付加コードとして、例えば、エラーの有無や、リトライによりエラーが回復したことを示す警報（ｗａｒｎｉｎｇ）等を表示するビット情報が設定される。また、上記メッセージ内容６２２には、通常の場合はログ情報が設定され、障害が発生した場合は、エラー内容を示す情報が設定される。
上記ＳＹＳＬＯＧメッセージ６０は、メッセージ送信プログラム４２によってＬＡＮに送出され、ＷＡＮ１４を介して監視端末装置１１に転送される。以下の説明では、上記ＳＹＳＬＯＧメッセージのうち、付加コードとして障害の発生を示す状態コードが設定されたものを特に障害通知メッセージと言う。
【００２１】
図５は、監視端末装置１１のデータファイル５１に形成される障害通知メッセージ管理テーブル３０の構成を示す。
障害通知メッセージ管理テーブル３０には、障害解析情報の取得または保存が必要となる特定のメッセージＩＤ３１と対応して、少なくとも１組のリソース定義データが登録される。上記メッセージＩＤ３１は、障害通知メッセージ管理テーブル３０の索引コードとして使用されるものであり、障害通知メッセージ６０に付されたメッセージＩＤ６２１のうちの１つと対応している。また、上記リソース定義データは、障害解析情報の保存動作に関係する複数のリソースを特定するためのものであり、障害分析情報が存在しているソースファイルを示すデータファイルＩＤ３２と、障害分析情報の退避先ファイル（メモリ領域）を示す出力ファイルＩＤ３３と、上記ソースファイルから退避先ファイルへの障害分析情報の転送動作（保存動作）を実行すべきサーバを示す対象サーバＩＤ３４とを含んでいる。上記対象サーバＩＤ３４は、通信ネットワーク上で各サーバにメッセージを送信する際の宛先アドレスとなる。
【００２２】
障害メッセージ管理テーブル３０は、図５に示すように、１つのメッセージＩＤと対応して複数組のリソース定義データを登録できる。すなわち、本発明では、或るサーバで障害が発生した時に、その障害の原因究明に必要となる複数サイトに分散して格納されている障害解析情報を自動的に保存するために、複数のサーバが互いに連繋してデータ処理動作を実行するソフトウエアに関して、障害解析情報の保存動作を実行すべき複数のサーバと、各サーバ毎にアクセスすべき入出力ファイルを定義できるようになっている。これらのテーブル情報は、分散処理システムの構築時に、ソフトウェア製品４１のそれぞれについて、保守者等により登録される。
尚、図５に示した管理テーブル３０では、メッセージＩＤ３１を索引コードとする１つのデータレコードが複数組のリソース定義データを含む形式となっているが、同一メッセージＩＤ（索引コード）を持つ複数のデータレコードを用意し、１つのデータレコードが１組のリソース定義データを含むテーブル構成としてもよい。
【００２３】
監視端末装置１１は、サーバ１２からＳＹＳＬＯＧメッセージ６０を受信すると、メッセージ受信プログラム２２によって、受信メッセージからメッセージＩＤ６２１を抽出し、障害通知メッセージ処理プログラム２３を起動する。
障害通知メッセージ処理プログラム２３は、図６に示すように、上記メッセージＩＤ６２１を受信すると（ステップ２４１）、該メッセージＩＤの付加コードの内容から、受信メッセージが通常のＳＹＳＬＯＧメッセージか障害通知メッセージか否かを判定する（ステップ２４２）。
受信メッセージが通常のＳＹＳＬＯＧメッセージの場合は、この障害通知メッセージ処理プログラム２３を終了する。上記受信メッセージが障害通知メッセージの場合は、障害通知メッセージ管理テーブル３０を参照して、上記メッセージＩＤ６２１が管理テーブル３０に登録されたメッセージＩＤ３１と一致したものか否かを判定する（ステップ２４３）。
もし、上記メッセージＩＤ６２１と一致するメッセージＩＤが管理テーブル３０に登録されていなければ、上記メッセージＩＤ６２１と対応した表示内容をもつ障害メッセージを表示装置５２に表示する（ステップ２４６）。表示装置への障害メッセージの出力は、報知統合管理制御プログラム２１を介して、行っても良い。
【００２４】
ステップ２４３で、メッセージＩＤ６２１が管理テーブル３０に登録された何れかのメッセージＩＤ３１と一致していた場合、管理テーブル３０から上記一致メッセージＩＤ３１を含むデータレコードを読み取り（ステップ２４４）、対象サーバＩＤ３４で指定されたサーバに対して、障害解析情報の保存を指令（ステップ２４５）し、然る後に、上記メッセージＩＤ６２１と対応した内容を持つ障害メッセージを表示装置５２に表示する（ステップ２４６）。
サーバに対する上記障害解析情報の保存指令は、管理テーブル３０から読み出されたデータレコードを統合管理制御プログラム２１に渡し、統合管理制御プログラム２１によって、対象サーバＩＤ３４で指定された各サーバ宛に、障害解析情報の保存命令と、データファイルＩＤ３２と、出力ファイルＩＤ３３とを含む制御メッセージを送信することによって達成できる。上記管理テーブル３０に、上記一致したメッセージＩＤ３１と対応して複数組のリソース定義データが登録してあった場合は、これら複数組のリソース定義データに基いて、複数のサーバに障害解析情報の保存命令が発行される。
【００２５】
各サーバ１２は、監視端末装置１１から上記制御メッセージを受信すると、図７に示す障害解析情報保存プログラム４３を実行する。
先ず、受信メッセージからデータファイルＩＤ３２と出力ファイルＩＤ３３を受け取り（ステップ４３１）、データファイル５５内の上記データファイルＩＤ３２で特定されるメモリ領域に存在するデータを障害解析情報として読み取り（ステップ４３２）、これを保存ファイル５６内の上記出力ファイルＩＤ３３で特定されたメモリ領域に書きこむ（ステップ４３３）。上記保存ファイル５６への障害解析情報の書き込みは、必要なメモリ容量を少なくするために、障害解析情報をデータ圧縮した形で行ってもよい。
【００２６】
各サーバ１２は、その後に監視端末装置１１から消去指示があるまで、上記保存ファイル５６に障害解析情報を保持する。また、各サーバ１２は、監視端末装置１１から、上記障害解析情報の転送を要求する制御メッセージを受信すると、上記保存ファイル５６から障害解析情報を読み出し、これを監視端末装置１１に転送する。上記障害解析情報の転送要求メッセージは、表示装置５２に出力された障害報知を見た監視端末装置１１のオペレータが入力装置５３から入力する入力コマンドに応答して起動される障害原因の究明／復旧のためのプログラム（図示せず）の実行過程で生成される。
【００２７】
上記実施例では、障害通知メッセージ管理テーブル３０におけるデータレコードの索引コードとして、ソフトウエア識別子（主コード）と障害状態コード（付加コード）とからなるメッセージＩＤ３１を適用し、受信メッセージに含まれるメッセージＩＤ６２１と上記索引コードとを照合することによって、障害解析情報の保存動作の要否を判断するようにしている。
しかしながら、図６に示した障害通知メッセージの処理プログラム２３の判定ステップ２４２において、メッセージＩＤ６２１の付加コードが障害解析情報の保存を要する特定の障害を示しているか否かを判定するようした場合は、上記管理テーブル３０による障害コード（付加コード）の照合は不要となる。すなわち、管理テーブル３０の索引コード３１として、メッセージＩＤに代えてソフトウエア識別子のみを適用し、各受信メッセージのメッセージＩＤ６２１から主コードとして設定されているソフトウエア識別子を抽出し、これを上記管理テーブルの索引コードと照合するようにしてもよい。
【００２８】
【発明の効果】
以上の実施例の説明から明らかなように、本発明によれば、計算機ネットワークにおける１つの計算機（サーバ）で障害が発生した時、上記計算機から障害通知を受けた監視端末装置が、保存動作すべき計算機に対して自動的に保存命令を発行し、この保存指令を受けた計算機が障害解析情報を自動的に保存ファイルに退避するようになっているため、障害原因の究明に必要な障害解析情報を喪失するおそれがない。
また、本発明によれば、１つの計算機で障害が発生した時、上記障害と関係する他の計算機が所有する障害解析情報についても、上記監視端末装置から自動的に保存命令が発行できるようになっているため、特に、複数の計算機が連繋してデータ処理を実行する分散処理システムにおける障害原因の究明と障害の復旧に極めて有効となる。
【図面の簡単な説明】
【図１】本発明が適用される分散処理システムの構成を示すブロック図。
【図２】監視端末装置１１が備えるソフトウエアを説明するための図。
【図３】サーバ１２が備えるソフトウエアを説明するための図。
【図４】サーバから監視端末装置へ送信されるメッセージのフォーマットを示す図。
【図５】監視端末装置１１が備える障害メッセージ管理テーブルの構成を示す図。
【図６】監視端末装置が実行する障害メッセージ処理プログラム２３を示すフローチャート。
【図７】サーバが実行する障害分析情報保存プログラム４３を示すフローチャート。
【符号の説明】
１１：監視端末装置、１２：サーバ、１３：ユーザ端末装置、１４：ＷＡＮ、
３０：障害通知メッセージ管理テーブル、５１：データファイル、
５２：表示装置、５３：入力装置、５５：データファイル、５６：保存ファイル
【図１】
0003691272.tif 000002
【図２】
0003691272.tif 000003
【図３】
0003691272.tif 000004
【図４】
0003691272.tif 000005
【図５】
0003691272.tif 000006
【図６】
0003691272.tif 000007
【図７】
0003691272.tif 000008