(57)【要約】【課題】携帯情報端末に適切な情報の提供ができ、現場巡視や保守点検作業が効率良くできる保守点検システムを提供することにある。【解決手段】携帯情報端末２とセンタ情報処理サーバ４とがそれぞれネットワーク３を介して相互伝送可能に接続された保守点検システム１である。携帯情報端末２は、表示部１６、操作部１７と、カメラ部１８、プロジェクタ部１９を有している。センタ情報処理サーバ４は、携帯情報端末２から受信したプラント機器６の撮影画像と、機器マスク画像７５とを画像認識処理部６１でマッチング処理させて、撮影画像から点検領域情報を取得する。そして、保守点検結果を表示させるための機器表示画像７６に前記点検領域情報を重畳し、更に点検文字情報も重畳して投影画像を合成し、携帯情報端末２に送信し、プロジェクタ部１９から投影表示させる。【選択図】図１
2010003190.tif 000002
【特許請求の範囲】
【請求項１】
サーバと携帯情報端末とがそれぞれネットワークを介して相互伝送可能に接続された保守点検システムであって、
前記携帯情報端末は、
入力手段と、
表示手段と、
保守点検対象機器を撮影するカメラと、
このカメラで撮影された前記保守点検対象機器の撮影画像、及び前記入力手段で入力された情報を前記サーバに送信、並びに、前記サーバから送られてくる情報を受信する通信手段と、
を備え、
前記サーバは、
前記携帯情報端末から送信される情報を受信、及び前記携帯情報端末に情報を送信する通信手段と、
前記携帯情報端末から受信した前記保守点検対象機器の撮影画像とマッチング処理させて、前記保守点検対機器の撮影画像の点検領域を特定するための開口部を有するマスク画像を、前記機器識別情報に対応させて格納するマスク画像の記憶手段と、
前記保守点検対象機器の保守点検結果を表示させるための機器表示画像を前記機器識別情報に対応させて格納する機器表示画像の記憶手段と、
前記携帯情報端末から受信された前記機器識別情報にもとづいて、対応する前記マスク画像を前記マスク画像の記憶手段から検索するマスク画像検索手段と、
前記携帯情報端末から受信された前記機器識別情報にもとづいて、対応する機器表示画像を前記機器表示画の記憶手段から検索する機器表示画像検索手段と、
前記携帯情報端末から受信された前記保守点検対象機器の撮影画像と、前記機器識別情報にもとづいて前記検索されたマスク画像と、をマッチング処理する画像マッチング手段と、
マッチング処理されて前記マスク画像の前記開口部に対応した前記保守点検対象機器の前記撮影画像の点検領域から前記点検領域情報を取得する点検領域情報取得手段と、
前記検索された機器表示画像の前記開口部に対応する所定の領域に、前記取得された点検領域情報を上書きして重畳し、出力用機器表示画像として生成する情報重畳手段と、
を備え、
前記携帯情報端末から受信された前記保守点検対象機器の前記機器識別情報及び前記保守点検対象機器の撮影画像にもとづいて、前記検索された機器表示画像の前記所定の領域に前記取得された点検領域情報を上書きされて生成された出力用機器表示画像を前記携帯情報端末に送信して、前記携帯情報端末の前記表示手段に表示させることを特徴とする保守点検システム。
【請求項２】
前記携帯情報端末のカメラにおいて、前記保守点検対象機器の少なくとも前記機器識別情報を含めて前記撮影画像に収められ、
前記サーバは、前記撮影画像に含まれる前記機器識別情報を識別して取得する機器識別情報取得手段を備えることを特徴とする請求項１に記載の保守点検システム。
【請求項３】
前記サーバは、更に、少なくとも単線結線図のテンプレートを格納する保守点検データテンプレートの記憶手段を備え、
前記携帯情報端末から受信した前記機器識別情報にもとづいて、前記出力用機器表示画像を前記単線結線図のテンプレートの所定の領域に書き込み、保守点検履歴情報とすることを特徴とする請求項１又は請求項２に記載の保守点検システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、保守点検システムに係り、特に発電所や化学プラント等のプラント設備の機器の保守点検をする保守点検システムに関するものである。
【背景技術】
【０００２】
一般に、プラント現場の監視や点検は、プラント建屋内若しくはプラント外の支柱に撮影方向、ズーム倍率を遠隔操作可能なＩＴＶ（工業用テレビ）カメラ装置を主要箇所に設け、本ＩＴＶカメラ装置による現場映像をプラント運転員が常駐する中央操作室に取り込み、運転員による遠隔操作により現場状況を確認する手段と、機器状態の確認項目が記載されたチェックリストを基に定期的に運転員が現場巡視を行い異常の有無を確認する手段を併用する手段が取られていた。
【０００３】
従来のプラント監視装置における現場監視は、監視手段となるＩＴＶカメラ装置が固定設置されており、広域視野を確保する目的からプラント機器よりかなり遠距離に設置されているケースが多い。従って、特定のプラント機器を近接撮影することは不可能であり、主に現場状況のアウトライン的な監視に用いられ、機器個別の状態点検は、プラント運転員による定期的な現場巡視により確認されているのが実状である。
【０００４】
そこで、プラント運転員による現場巡視のような労力を省く、現場巡視の省力化技術として、特許文献１に記載された技術が提案されている。この技術によれば、現場巡視ロボットに現場を自動巡視させ、現場映像と現場音声等をリアルタイムに取得し、プラントの操作室にて運転員が漏れなく機器の現状況を確認可能としている。
【０００５】
また、機器運転状態を表わす操作ボタン、運転状態表示用ランプ等の位置や表示色を撮影画像から抽出し、それと予めデータベース上に登録されたプラント運転状態に対応した正常運転時の該当機器状態値とを比較し、差分の発生した項目を判定し、運転員に状態変化を自動通知する技術が記載されている。
【特許文献１】特開２０００−０３９９１４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
ところで、プラント現場は必ずしも現場巡視ロボットが通行可能に軌道や通路が用意されているわけではなく、人間による巡視を前提としたものが多い。また、現場巡視員は、必ずしもプラントの運転に携わり、現場のプラント機器について詳しい知識や、プラント全体について知識が詳しいとは限らず、点検巡視や保守点検の作業員は運転員とは別のエンジニアであることが多い。
【０００７】
そこで、本発明の目的は、巡視や保守点検の作業員が点検マニュアルや保守点検指示書を携帯して、プラントの現場機器を点検する場合に、携帯していく携帯情報端末に適切な情報の提供ができ、ベテラン作業員に匹敵する現場巡視や保守点検作業が効率良くできる保守点検システムを提供することにある。
【課題を解決するための手段】
【０００８】
前記した目的を達成するため、本願発明の保守点検システムは、サーバと携帯情報端末とがそれぞれネットワークを介して相互伝送可能に接続された保守点検システムであって、
携帯情報端末は、入力手段と、表示手段と、保守点検対象機器を撮影するカメラと、このカメラで撮影された保守点検対象機器の撮影画像を当該保守点検機器の機器識別情報とともに送信、及び入力手段で入力された情報をサーバに送信、並びに、サーバから送られてくる情報を受信する通信手段と、を備え、
サーバは、
携帯情報端末から送信される情報を受信、及び、携帯情報端末に情報を送信する通信手段と、携帯情報端末から受信した保守点検対象機器の撮影画像とマッチング処理させて、保守点検対機器の撮影画像の点検領域を特定するための開口部を有するマスク画像を、機器識別情報に対応させて格納するマスク画像の記憶手段と、保守点検対象機器の保守点検結果を表示させるための機器表示画像を機器識別情報に対応させて格納する機器表示画像の記憶手段と、携帯情報端末から受信された機器識別情報にもとづいて、対応するマスク画像をマスク画像の記憶手段から検索するマスク画像検索手段と、携帯情報端末から受信された機器識別情報にもとづいて、対応する機器表示画像を機器表示画像の記憶手段から検索する機器表示画像検索手段と、携帯情報端末から受信された保守点検対象機器の撮影画像と、機器識別情報にもとづいて検索されたマスク画像と、をマッチング処理する画像マッチング手段と、マッチング処理されてマスク画像の開口部に対応した保守点検対象機器の撮影画像の点検領域から点検領域情報を取得する点検領域情報取得手段と、検索された機器表示画像の開口部に対応する所定の領域に、取得された点検領域情報を上書きして重畳し、出力用機器表示画像として生成する情報重畳手段と、を備え、携帯情報端末から受信された保守点検対象機器の機器識別情報及び保守点検対象機器の撮影画像にもとづいて、検索された機器表示画像の所定の領域に取得された点検領域情報を上書きされて生成された出力用機器表示画像を携帯情報端末に送信して、携帯情報端末の表示手段に表示させることを特徴とする。
【０００９】
本発明によれば、保守点検対象機器の保守点家結果を示す鮮明な出力用機器表示画像を携帯情報端末に表示させることによって、作業員に機器点検履歴情報として登録する明瞭で正確な画像データを提供できる。
【発明の効果】
【００１０】
本発明によれば、巡視や保守点検の作業員が点検マニュアルや保守点検指示書を携帯して、プラント機器を点検する場合に、携帯していく携帯情報端末に適切な情報の提供ができ、ベテラン作業員に匹敵する現場巡視や保守点検作業が効率良くできるようにする保守点検システムを提供する。
【発明を実施するための最良の形態】
【００１１】
以下、本発明の好適な実施形態である保守点検システムについて図面を参照しながら説明する。図１は、本発明に係る保守点検システムの概略構成を示すブロック図であり、図２は、保守点検システムにおける携帯情報端末の回路構成ブロック図である。
図１に示すように保守点検システム１は、主に、プラントの現場機器（以下、「プラント機器」と略称する）６を点検するために、作業員が図示省略の保守点検指示書とともに携帯する携帯情報端末２と、携帯情報端末２がネットワーク３を介して接続するセンタ側に設置されているサーバであるセンタ情報処理サーバ４とを含んで構成されている。
ここでプラント機器６は、特許請求の範囲に記載の保守点検対象機器に対応する。
【００１２】
ちなみに、携帯情報端末２は、ネットワーク３に接続している無線端末３ａと無線通信により接続し、センタ情報処理サーバ４はネットワーク３に接続しているノード端末３ｂと接続している。
また、ネットワーク３の他のノード端末３ｂには、機器メーカ情報サーバ５Ａ，５Ｂが接続し、ノード端末３ｃには、サーバ管理端末７が接続している。
プラント機器６は、例えば、リレー盤、モータコントロール盤、ＡＶＲ（Automatic Voltage Regulator）盤、制御盤等である。
図１にはプラント機器６の１例としてリレー盤が示されている。この例のリレー盤は、後記する機器識別情報を表示した銘板１１３が取り付けられたり、リレー盤の筐体表面に印刷されたりしている。また、このリレー盤は、表示灯１１４、リレーやスイッチのパネル１１５を有している。
【００１３】
携帯情報端末２は、携帯電話の形態、又はモバイルパソコンやＰＤＡ（Personal Digital Assistants）の形態をしており、マイク１１、スピーカ１２、処理部１３、通信制御部（通信手段）１４、アンテナ（通信手段）１５、液晶等を用いた表示部（表示手段）１６、キーボードやタッチパネル式の操作部（入力手段）１７の他に、カメラ部（カメラ）１８、プロジェクタ部（表示手段）１９を備えている。
【００１４】
センタ情報処理サーバ４は、通信制御部（通信手段）５１、処理部５２、保守点検データベース（記憶手段）５３を備えている。
ここで、保守点検データベース５３は、特許請求範囲に記載の「マスク画像の記憶手段」、「機器表示画像の記憶手段」及び「保守点検データプレートの記憶手段」に対応する。
【００１５】
処理部５２は、ハード的にはＣＰＵやＲＯＭ、ＲＡＭ等のメモリやインタフェース回路を含んで構成され、機能的に統括制御部６０、画像認識処理部６１、投影画像生成部６２、データベース管理部６４を含んで構成されている。
また、保守点検データベース５３は、前記したインタフェース回路を介して処理部５２の前記したＣＰＵに接続する記憶装置のデータ領域のことであり、そのデータ領域にはプラント機器点検関連情報７１、機器点検履歴情報７２、機器点検ガイダンス情報７３、データ検索ディレクトリ７４、機器マスク画像７５、機器表示画像７６等が格納されている。プラント機器点検関連情報７１、機器点検履歴情報７２、機器点検ガイダンス情報７３、データ検索ディレクトリ７４、機器マスク画像（マスク画像）７５、機器表示画像７６についての具体的な内容は後記する。
【００１６】
前記した記憶装置には、図示しないが、保守点検システム１のセンタ情報処理サーバ４として前記した通信制御部５１、統括制御部６０、画像認識処理部６１、投影画像生成部６２、データベース管理部６４の各機能を実行させるためのプログラムを格納している。
【００１７】
《携帯情報端末》
先ず、携帯情報端末２について詳細に説明する。
携帯情報端末２の処理部１３はＣＰＵから構成され、例えば、ＲＯＭに格納されている制御プログラムを実行し、携帯情報端末２の操作部１７等から入力される制御信号を用いて所定の演算を行う等して、携帯情報端末２の各部に対して制御信号を出力して、表示部１６、通信制御部１４、カメラ部１８、プロジェクタ部１９をそれぞれ制御する。
【００１８】
携帯情報端末２は携帯電話の機能を基本的に有しており、処理部１３は通信制御部１４と協調して、マイク１１で取得した音声情報を処理部１３で処理して、外部に送信したり、外部からの音声情報を受信して処理部１３で処理してスピーカ１２に出力したり、カメラ部１８で撮影した撮影画像を処理部１３で処理して外部に送信したり、外部から画像情報等のデータを受信して、受信した画像情報等のデータを処理部１３で処理して表示部１６に表示したり、プロジェクタ部１９で投影表示したりする機能を有している。
【００１９】
電源回路２１は、リチウムイオン電池等のバッテリ２０への充電回路や、バッテリ２０の電圧を検出する電圧検出回路や、ＤＣ／ＤＣ変換回路等を含み、外部インタフェース（図２では「外部Ｉ／Ｆ」と表示）２２を介して外部から供給される充電用電流でバッテリ２０を充電したり、携帯情報端末２の各部に（図２では、省略して処理部１３を構成するＣＰＵにのみ供給線を表示してあるが、実際には、マイク１１、スピーカ１２、通信制御部１４、表示部１６、操作部１７、カメラ部１８、プロジェクタ部１９にも供給）必要な所定の電圧に変換して供給したりする。
メモリ２７は、ＲＡＭであり、ＣＰＵがプログラムを実行するときのメインメモリとして用いられ、メモリ２８は、例えば、ＲＯＭ及びフラッシュメモリ等の不揮発メモリであり、プログラムを格納したり、各種データを一時記憶するときに用いられる。
【００２０】
（カメラ部）
カメラ部１８は、撮影レンズ３１と、ＣＣＤやＣＭＯＳ撮像素子等のイメージセンサ３２と、撮影制御回路３３と、レンズ駆動回路３４とを含んでいる。
撮影制御回路３３は、処理部１３からの指令によりイメージセンサ３２及びレンズ駆動回路３４を制御するとともに、イメージセンサ３２から出力される撮像信号に対して画像処理を行い処理部１３に出力する。撮影制御回路３３は、操作部１７からの指示入力に応じた処理部１３からの撮影開始指示に応じてイメージセンサ３２に撮像信号の取得を開始させ、撮像終了後にイメージセンサ３２から撮像信号を読み出し、画像処理を施した後、画像データとして処理部１３へ出力する。
【００２１】
撮影レンズ３１は、図示省略の複数のレンズからなり、例えば、フォーカス調整用のフォーカスレンズ群、ズーム率調整用のズームレンズ群を含んで構成されている。
レンズ駆動回路３４は、撮影制御回路３３から出力されるフォーカス調節信号にもとづいて、前記したフォーカスレンズ群の一部のレンズを光軸方向に進退駆動する。また、レンズ駆動回路３４は、撮影制御回路３３から出力されるズーム調節信号にもとづいて、前記したズームレンズ群の一部のレンズを光軸方向へ進退駆動する。ちなみに、処理部１３は、操作部１７から入力される操作信号に応じてカメラ部１８へのフォーカス調節量やズーム調節量を、撮影制御回路３３へ出力し、撮影制御回路３３においてフォーカス調節信号及びズーム調節信号として、撮影制御回路３３からレンズ駆動回路３４に出力される。
【００２２】
プロジェクタ部１９は、投影制御回路４１と、ＬＥＤ等の光源４２と、液晶パネル４３と、投影レンズ４４と、レンズ駆動回路４５とを含んで構成されている。投影制御回路４１は、処理部１３から出力される投影指令に応じて光源４２に駆動電流を供給する。光源４２は、供給された電流に応じた明るさで液晶パネル４３を照明する。
投影制御回路４１はさらに、処理部１３から送出される画像データに応じて液晶パネル４３を駆動する駆動信号を生成し、液晶パネル４３に出力する。この駆動信号は、具体的には、液晶パネル４３の液晶層に対して画素ごと画像信号に応じた電圧を印加するものである。電圧が印加された液晶パネル４３の画素は液晶分子の配列が変わり、当該液晶層の光の透過率が変化する。このように、画像信号に応じて光源４２からの光を変調することにより、液晶パネル４３が光学像を生成する。
【００２３】
投影レンズ４４は、図示省略の複数のレンズからなり、例えば、フォーカス調整用のフォーカスレンズ群、ズーム率調整用のズームレンズ群を含んで構成されている。
投影レンズ４４は、液晶パネル４３から射出される光学像をスクリーン等へ向けて投影する。レンズ駆動回路４５は、投影制御回路４１から出力されるオフセット調節信号にもとづいて、投影レンズ４４を光軸に対して直交する方向へ進退駆動する。また、レンズ駆動回路４５は、投影制御回路４１から出力されるフォーカス調節信号にもとづいて、前記したフォーカスレンズ群の一部のレンズを光軸方向へ進退駆動する。レンズ駆動回路４５はさらに、投影制御回路４１から出力されるズーム調節信号にもとづいて、前記したズームレンズ群の一部のレンズを光軸方向へ進退駆動する。ちなみに、処理部１３は、操作部１７から入力される操作信号に応じてプロジェクタ部１９へのオフセット調整量やフォーカス調節量やズーム調節量を投影制御回路４１へ出力し、投影制御回路４１においてオフセット調節信号、フォーカス調節信号及びズーム調節信号として、レンズ駆動回路４５に出力される。
【００２４】
《センタ情報処理サーバ》
次に、図１に戻って適宜図３から図５を参照しながらセンタ情報処理サーバ４の各部の機能について詳細に説明する。図３は、保守点検データベースのデータ検索ディレクトリの構成を説明する図である。図４に受信画像と、それに対応する機器マスク画像の例を示す。図５は、機器表示画像の１例である。
【００２５】
（保守点検データベース）
先ず、保守点検データベース５３の詳細な構成について説明する。
プラント機器点検関連情報７１は、プラントの系統図や単線結線図等を含んだ、図面情報や文書情報であり、機器識別情報にもとづいてデータ検索ディレクトリ７４を用いて検索可能に保守点検データベース５３に格納されている。
機器点検履歴情報７２は、携帯情報端末２で取得した撮影画像にもとづいて前記投影画像生成部６２で生成した投影画像（出力用機器表示画像）（図５参照）を保守点検記録として時系列的に蓄積した履歴情報である。機器点検履歴情報７２の具体的な生成方法については、後記する。機器点検履歴情報７２は、機器識別情報にもとづいてデータ検索ディレクトリ７４を用いて検索可能に保守点検データベース５３に格納されている。
機器点検ガイダンス情報７３は、例えば、機器点検マニュアルや機器異常時の処置ガイドであり、機器識別情報にもとづいてデータ検索ディレクトリ７４を用いて検索可能に格納されている。
【００２６】
データ検索ディレクトリ７４は、例えば、図３に示すようにプラント機器６を個々に識別する機器識別情報を記載する機器識別情報欄７４ａ、型式コード（機器種別情報）を記載する型式コード欄７４ｂ、プラント機器６の名称を記載する機器名称欄７４ｃ、プラント機器６に対応するマスク画像のファイル名を指定する機器マスク画像欄７４ｄ、プラント機器６に対応する機器表示画像のファイル名を指定する機器表示画像欄７４ｅ、プラント機器６に対応する保守点検データテンプレートのファイル名を指定するデータテンプレート欄７４ｆ、プラント機器６に対応するプラント機器点検関連情報のファイル名を指定する関連情報欄７４ｇ、プラント機器６の点検履歴の存在するアドレスを指定する機器点検履歴欄７４ｈ、プラント機器６の機器点検ガイダンス情報のファイル名を指定する機器点検ガイダンス情報欄７４ｉ、制御対象のプラント機器６の機器名称欄７４ｋが設けられ、機器識別情報をキーコードとして前記した各種情報やデータが検索可能に構成されている。
ちなみに、図３の機器識別情報欄７４ａに記載された機器識別情報の例では、ハイフン記号「−」の前が盤の型式コードを示し、ハイフン記号「−」の後ろがシリアル番号を示している。
【００２７】
ここで機器識別情報は、プラント機器６をそれぞれ個別に識別するために付された、例えば、英数字の組み合わせ符号列であり、同じ型式のプラント機器６でも個別に判別できるように、プラント機器６の種類や型式を示す型式コード（機器種別情報）と組み合わせて、１つの機器識別情報が構成されており、機器種別情報のどの部分が型式コードを示すかがわかるように書式が予め定められている。例えば、機器識別情報をハイフン記号「−」で前後の部分に分け、ハイフンの前の部分が型式コードを示し、ハイフンの後ろの部分がシリアル番号を示す。
なお、型式コードの部分とシリアル番号の部分との区別の仕方はハイフン記号に限定されず、文字認識し易いものであれば、他の文字や符号でも良い。
【００２８】
機器マスク画像７５は、機器識別情報にもとづいてデータ検索ディレクトリ７４を用いて検索可能に保守点検データベース５３に格納されている。機器マスク画像７５の具体例を図４の（ｂ），（ｄ），（ｆ）に例示する。機器マスク画像７５の詳細については、画像認識処理部６１の詳細な機能説明の中で後記する。
機器表示画像７６は、機器識別情報にもとづいてデータ検索ディレクトリ７４を用いて検索可能に保守点検データベース５３に格納されている。機器表示画像７６の具体例を図５に例示する。
【００２９】
（通信制御部）
通信制御部５１は、ネットワーク３を介して携帯情報端末２とのデータの送受信の通信を制御する機能を有している。
（統括制御部）
処理部５２の統括制御部６０は、センタ情報処理サーバ４として各部のデータの受け渡しの制御、保守点検データベース５３からの各種データの検索、例えば、プラント機器点検関連情報７１、機器点検履歴情報７２、機器点検ガイダンス情報７３、データ検索ディレクトリ７４、機器マスク画像７５、機器表示画像７６等の検索の制御、携帯情報端末２との通信制御部５１による通信の制御、画像認識処理部６１、投影画像生成部６２、データベース管理部６４の制御等の全体調整をする機能を有している。
【００３０】
（画像認識処理部とマスク画像）
画像認識処理部６１は、携帯情報端末２のカメラ部１８で取得した撮影画像（受信画像とも言う）を、通信制御部５１を介して取得し、統括制御部６０に制御されて、取得された受信画像に含まれる機器識別情報を抽出して認識する。そして、それを受けて統括制御部６０にて、保守点検データベース５３のデータの一部として予め入力され格納されている複数の機器マスク画像７５の中から前記認識された機器識別情報に対応する機器マスク画像７５を検索し、画像認識処理部６１に受け渡す。画像認識処理部６１は、受信画像と検索された機器マスク画像７５とをマッチング処理し、機器マスク画像７５の開口部１１８（図４の（ｂ），（ｄ），（ｆ）参照）に対応する領域の画像情報を取得したりする機能を有している。
【００３１】
図４は、受信画像と、それに対応する機器マスク画像の例であり、（ａ）は、ＡＶＲ運転表示盤の正面を撮影した受信画像であり、（ｂ）は、（ａ）に対応する機器マスク画像であり、（ｃ）は、計算機背面の入出力カードユニットの正面を撮影した受信画像であり、（ｄ）は、（ｃ）に対応する機器マスク画像であり、（ｅ）は、リレー回路盤の正面を撮影した受信画像であり、（ｆ）は（ｅ）に対応する機器マスク画像である。
図４の（ａ），（ｃ），（ｅ）に示すように受信画像１１１Ａ，１１１Ｂ，１１１Ｃには、それぞれのプラント機器６、ここの例では電気盤を識別するための機器識別情報を表示する銘板１１３が写しこまれている。
なお、銘板１１３には、例えば、「型式：ＡＶＲ１−０５０１」、「型式：ＨＫＣ−１００１」、「型式：Ｈ０００１−００１」と表示されているが、盤の型式とシリアル番号を組み合わせたものである。
【００３２】
そして、図４の（ａ），（ｃ），（ｅ）に示すように銘板１１３の下に盤正面には、表示灯１１４と、表示灯１１４の対応しているプラント機器名称を表示するパネルや表示灯１１４の対応している機器を制御するリレー、スイッチ等のパネル１１５と、が写しこまれている。
図４の（ａ）では、ＡＶＲ運転表示盤の運転表示灯が表示灯１１４で示され、図４の（ｃ）では、入出力カードの動作表示器が表示灯１１４で示され、図４の（ｅ）では、リレー回路盤の動作灯が表示灯１１４で示されている。
これに対し、図４の（ｂ），（ｄ），（ｆ）に示すように機器マスク画像７５Ａ，７５Ｂ，７５Ｃは、前記した表示灯１１４の領域に対応する開口部１１８と、前記したパネル１１５に対応する輪郭１１９が含まれている。
【００３３】
受信画像１１１（図４では１１１Ａ，１１１Ｂ，１１１Ｃと表示）と機器マスク画像７５（図４では７５Ａ，７５Ｂ，７５Ｃと表示）とでは、倍率が異なったりするので受信画像１１１の表示灯１１４の領域のみの画像情報を点検領域情報として抽出するためにはマッチング処理が必要となる。
【００３４】
（投影画像生成部）
統括制御部６０（図１参照）が保守点検データベース５３のデータの一部として予め入力され格納されている複数の機器表示画像７６の中から画像認識処理部６１が取得した機器識別情報に対応する機器表示画像７６を検索したり、画像認識処理部６１が取得した機器識別情報にもとづく後記する点検文字情報をデータ検索ディレクトリ７４から検索したりするのを受けて、投影画像生成部６２は、検索された機器表示画像７６の開口部１２２（図５では、１２２Ａ，１２２ｂ，１２２Ｃで表示）に対応する領域に画像認識処理部６１が取得した点検領域情報を重ね合わせ、又、検索された点検文字情報を検索された機器表示画像７６の特定の領域に書き込んだりして、投影画像（出力用機器表示画像）を生成したりする。
【００３５】
（データベース管理部）
データベース管理部６４は、例えば、パーソナルコンピュータで構成されたサーバ管理端末７からの操作によって、保守点検データベース５３に含まれる各種情報（プラント機器点検関連情報７１、機器点検履歴情報７２、機器点検ガイダンス情報７３、データ検索ディレクトリ７４、機器マスク画像７５、機器表示画像７６）を、新たに登録したり、削除したり、変更したりする機能を有する。
なお、機器メーカからプラント機器点検関連情報７１の提供を受ける役務契約にもとづいて、サーバ管理端末７から必要に応じて機器メーカ情報サーバ５Ａ，５Ｂ等にアクセスして、保守点検対象のプラント機器６に対する新たなプラント機器点検関連情報７１を入手して、サーバ管理端末７で入手したプラント機器点検関連情報７１を、データベース管理部６４を介して保守点検データベース５３に登録することができる。
【００３６】
（フローチャートの説明）
次に、図６から図１３を参照しながら、適宜図１から図５を参照して携帯情報端末２とセンタ情報処理サーバ４との協調による保守点検方法について説明する。
図６から図１０は携帯情報端末２とセンタ情報処理サーバ４との協調による撮影画像にもとづく機器点検履歴情報７２の作成の制御の流れを示すフローチャートである。
図１１は携帯情報端末の保守点検メイン画面を示す説明図である。
ここでは、作業員が携帯情報端末２と作業指示書を携帯して、プラント構内のいろいろな位置に配置された単線結線図に示された盤等の内、予め作業指示書で指定された盤等を一定の順路で巡回して、盤面のオン、オフ等を示す表示灯等表示内容を点検していく場合を例に説明する。
なお、センタ情報処理サーバ４は、常時動作しており、センタ情報処理サーバ４に接続してくる携帯情報端末２との間で通信回線を確立して、相互に通信を行う。そして、携帯情報端末２との通信が終了すると、確立されていた通信回線を切断する。
【００３７】
携帯情報端末２側の制御の流れはステップＳ０１〜Ｓ３８で示し、センタ情報処理サーバ４側の制御の流れはステップＳ１０１〜Ｓ１３４で示す。
ステップＳ０１では、作業員は携帯情報端末２の操作部１７を操作して、プラント機器保守点検プログラムを起動させる。そして、プラント機器保守点検プログラムが起動して、センタと通信接続を要求（ステップＳ０２：「センタと通信接続」）し、センタ情報処理サーバ４が通信接続する（ステップＳ１０１）。
すると、センタ情報処理サーバ４の統括制御部６０は、プラント名称、保守点検対象のメニュー画面（保守点検メイン画面８０（図１１参照））を携帯情報端末に送信する（ステップＳ１０２）。携帯情報端末２は、図１１に示すような保守点検メイン画面８０を受信し、その画面が表示部１６に表示され、携帯情報端末２はプラント名称、保守点検対象の入力を受け付ける（ステップＳ０３：「プラント名、保守点検対象受け付け」）。
【００３８】
保守点検メイン画面８０は、「プラント名称・保守点検対象」と表示された画面タイトル欄８１と入力欄８２からなり、画面タイトル欄８１の右端には終了ボタン１０１が配置され、入力欄８２は「プラント名称」と表示されたコンボボックス８３と、「保守点検対象」と表示されたコンボボックス８４が配置されている。
コンボボックス８３、８４は、入力表示窓８３ａ，８４ａ、選択肢表示用ボタン８３ｂ，８４ｂとから構成され、操作部１７（図１参照）のキーボードを直接用いて、例えば、コンボボックス８３の場合は、「ｘｘｘ工場」、「△△△工場」、「○○○浄水場」、・・・等のプラント名称を入力することもできるし、コンボボックス８４の場合は、「単線結線図盤表示」、「制御系指示表示」、・・・等の保守点検対象を入力することもできるし、選択肢表示用ボタン８３ｂ，８４ｂを押下して一時的に開く選択肢表示ウインドから選択して入力表示窓８３ａ，８４ａに表示させることもできる。
ここでは、マウスの代わりに操作部１７にカーソル移動・決定ボタンが容易され、カーソルを移動して、アイコンボタンの押下やメニュー項目や選択肢の選択操作ができるものとする。
入力欄８２には、「次へ」と表示された保守点検メイン画面８０における入力完了を示す操作ボタン１０２が用意されている。
【００３９】
ちなみに、「単線結線図盤表示」とは、図１２に示すような単線結線図テンプレート９０に従って、単線結線図テンプレート９０に示された保守点検対象の盤の表示状態を点検する場合を示し、単線結線図テンプレート９０に示された保守点検対象の盤の表示灯の表示状態を記録していくものである。
単線結線図テンプレート９０は、単線結線図と同じ配線及び機器系統樹を示し、単線で示された電力供給線９１から電源の供給を受けるプラント機器６の機器識別情報欄９５と、後記する投影画像をはめ込む記録領域９３を予め記載したものである。
ここで、保守点検対象のプラント機器６に対しては、機器識別情報欄９５が注意喚起されやすい背景色としてあり、そこに機器識別情報が表示されているとともに、記録領域９３が書き込み可能に空白に設定されている。保守点検対象でないプラント機器６に対しては、機器識別情報欄９５が、例えば、白地の背景色としてあり、そこに機器識別情報が表示されているとともに、記録領域９３の代わりに、盤面表示され書き込み不能に設定されている。
「制御系指示表示」とは、保守点検対象の制御盤に設けられた指示メータの表示状態を図示省略の「制御系盤面系統図テンプレート」に従って記録していくものである。
【００４０】
ステップＳ０４では、携帯情報端末２は、入力が完了したか否かをチェックし、入力が完了している場合（Ｙｅｓ）はステップＳ０５に進み、入力が完了していない場合（Ｎｏ）はステップＳ０３を継続する。
ステップＳ０５では、携帯情報端末２は、ステップＳ０３で選択されたプラント名称、保守点検対象をセンタ情報処理サーバ４に送信し、センタ情報処理サーバ４はプラント名称、保守点検対象を受信して、統括制御部６０において、保守点検対象に対する保守点検データテンプレートを検索する（ステップＳ１０３）。
ここで、保守点検データテンプレートとは、前記した単線結線図テンプレート９０や図示省略の制御系盤面系統図テンプレートのことである。
ちなみに、制御系盤面系統図テンプレートとは、階層化された制御系の各階層に含まれる制御機器や制御盤であるプラント機器６を系統樹的に表示したテンプレートである。
【００４１】
ステップＳ０６では、携帯情報端末２は、作業員に操作部１７を操作されて、カメラ部１８により、プラント機器６の盤面を撮影する（「対象機器の撮影」）し、撮影画像の一時記憶をし（ステップＳ０７）、撮影パラメータの一時記憶を行なう（ステップＳ０８）。
ここで、撮影パラメータとは、カメラ部１８で被写体を撮影するときの焦点距離、合焦信号、視線方向中心位置、フラッシュの有無、撮影日時等である。
【００４２】
このステップＳ０６〜Ｓ０８の流れは、作業員が複数回撮影することを許容し、撮影し記憶された撮影画像の中から、うまく写っている画像を作業員が選択して、送信操作をするものとする。
ついで、作業員が携帯情報端末２を操作して撮影画像を選択したか否かをチェックする（ステップＳ０９）。選択された場合（Ｙｅｓ）はステップＳ１０へ進み、選択されていない場合（Ｎｏ）はステップＳ０６に戻り、ステップＳ０６〜Ｓ０９を繰り返す。
ステップＳ１０では、携帯情報端末２はセンタ情報処理サーバ４と接続しているか否かをチェックする（「センタと接続？」）。接続している場合（Ｙｅｓ）はステップＳ１１へ進み、接続していない場合は、接続を試みステップＳ１０を繰り返す。このステップＳ１０は、携帯情報端末２が、一時的にセンタ情報処理サーバ４と接続しなくなるようなプラント機器６や建物等による電波遮蔽で電波の微弱なところがありうるので、単に接続を確認するものである。
【００４３】
ステップＳ１１では、携帯情報端末２は、選択された撮影画像をセンタ情報処理サーバ４に送信し、次いで選択された撮影画像に対応する撮影パラメータを送信する（ステップＳ１２）。ステップＳ１２の後、符号（Ａ）に従って図７のステップＳ１３に進む。
これを受けて、センタ情報処理サーバ４の統括制御部６０は、撮影画像を受信し（ステップＳ１０４）、撮影パラメータを受信する（ステップＳ１０５）。ステップＳ１０５の後、符号（Ｂ）に従って図７のステップＳ１０６に進む。
【００４４】
センタ情報処理サーバ４の画像認識処理部６１は、ステップＳ１０４で受信した撮影画像からプラント機器６の機器識別情報を認識する（ステップＳ１０６：「受信画像から機器の機器識別情報の認識」）。以下では、受信された撮影画像のことを受信画像と称する。
このように撮影画像から機器識別情報のように英数字で表示された符号を抽出して認識する技術は、自動車ナンバー読取装置等で既に用いられている技術であり、ここでは説明を省略する。
ついで、ステップＳ１０７では、センタ情報処理サーバ４の統括制御部６０は、ステップＳ１０６で認識された機器識別情報を携帯情報端末２に送信する。
【００４５】
携帯情報端末２は、送信された機器識別情報を受信して表示部１６に表示する（ステップＳ１３）。このとき表示画面には、受信された機器識別情報とともに、「機器識別情報の認識は正しいか？」との表示と「Ｙｅｓ」と表示のアイコンボタンと「Ｎｏ」と表示のアイコンボタンが表示される。
ステップＳ１４では、携帯情報端末２は、「Ｙｅｓ」と表示のアイコンボタンが押下されたか、「Ｎｏ」と表示のアイコンボタンが押下されたかをチェックし（「Ｙｅｓ」を押下？）、「Ｙｅｓ」と表示のアイコンボタンが押下された場合(Ｙｅｓ)は、ＯＫ信号をセンタ情報処理サーバ４に送信し（ステップＳ１５）、「Ｎｏ」と表示のアイコンボタンが押下された場合(Ｎｏ)は、作業員による操作部１７からの機器識別情報の手入力を受け付ける（ステップＳ１６）。機器識別情報の手入力を受け付ける画面には、例えば、「次へ」と表示のアイコンボタンが用意されており、「次へ」と表示のアイコンボタンが押下されると、入力完了となる。
【００４６】
ステップＳ１７では、携帯情報端末２は、聞き識別情報の手入力が完了したか否かをチェックする。入力完了の場合（Ｙｅｓ）は、ステップＳ１８へ進み、完了してない場合（Ｎｏ）は、ステップＳ１６に戻る。
【００４７】
ステップＳ１０８では、センタ情報処理サーバ４の統括制御部６０は、ステップＳ１５に対応してＯＫ信号を携帯情報端末２から受信したか否かをチェックする。ＯＫ信号を受信した場合（Ｙｅｓ）は、ステップＳ１１０へ進み、ＯＫ信号を受信しない場合（Ｎｏ）は、ステップＳ１０９へ進む。
ステップＳ１０９では、センタ情報処理サーバ４の統括制御部６０は、ステップＳ１８に対応して機器識別情報を受信する。ステップＳ１８の後、符号（Ｃ）に従って図９のステップＳ１９へ進む。
このようにステップＳ１３〜Ｓ１８のセンタ情報処理サーバ４側で受信画像から機器識別情報を認識しても、それを携帯情報端末２側に送信して作業員に確認させるので、センタ情報処理サーバ４側で、自動的に以後の処理を行うよりも信頼度が高くなる。
【００４８】
ステップＳ１１０では、センタ情報処理サーバ４の統括制御部６０は、図３に示すようなデータ検索ディレクトリ７４を用いて、機器識別情報に対応する機器マスク画像７５、機器表示画像７６、機器点検ガイダンス情報７３を検索する。
図５に機器表示画像の例を示す。この機器表示画像７６は、図５の（ｅ）に示すリレー回路盤に対応するものであり、単線結線図用の表示領域７６ａと、後記する投影文字情報入力領域７６ｂと、関連情報表示要求のためのアイコンボタン１０５を有している。
【００４９】
表示領域７６ａには、単線結線図の配線１２１が３つに分岐していることを示すように描かれ、その配線の３つの端部に丸い開口部１２２Ａ，１２２Ｂ，１２２Ｃが配置されている。図５では開口部１２２Ａ，１２２Ｂ，１２２ＣにステップＳ１１３において点検領域情報が張り付けられた後の状態を示し、ダブルハッチング（「赤（点灯）」）、白地（「白（消灯）」、ダブルハッチング（「赤（点灯）」）の状態で示してあるが、機器表示画像７６が検索された段階では、開口部１２２Ａ，１２２Ｂ，１２２Ｃは全て白地の無地の状態（ステップＳ１１３において点検領域情報が張り付けられる前の状態である）になっている。
更に、表示領域７６ａの開口部１２２Ａ，１２２Ｂ，１２２Ｃそれぞれの下には、開口部１２２Ａ，１２２Ｂ，１２２Ｃが示す点検領域情報の対象のプラント機器６の識別名称１２３Ａ，１２３Ｂ，１２３Ｃが「Ａ機」、「Ｂ機」、「Ｃ機」が表示されている。
表示領域７６ａの下方の投影文字情報入力領域７６ｂには、図５では「＊＊＊ポンプ」と表示のこのリレー回路盤の制御対象の機器名称１２４、「型式：Ｈ００１−００１」と表示のこのリレー回路盤そのものの機器識別情報１２５、「点検日時  ０８−０２−２８−１６」と表示の保守点検時の日時情報１２６を含んだ点検文字情報の記載が表示されているが、機器表示画像７６が検索された時点では投影文字情報入力領域７６ｂには何も表示されていない。
投影文字情報入力領域７６ｂの下には、「関連情報表示」と表示のアイコンボタン１０５が配置されている。
アイコンボタン１０５の下方に参考のために表示されているアイコンボタン領域１０６は、携帯情報端末２に投影画像が表示されたときに、その表示部１６の画面に表示されるものであり、ステップＳ２０の説明ところで後記する。
【００５０】
ステップＳ１１１では、センタ情報処理サーバ４の画像認識処理部６１は、受信画像とステップＳ１１０で検索された機器マスク画像をマッチング処理する。
【００５１】
マッチング処理としては、例えば、ステップＳ１０５で取得された撮影パラメータにもとづいて行う。すなわち、マッチング処理では、撮影時の被写体距離又は焦点距離パラメータにもとづいて機器マスク画像のマッチング処理のためのサイズ設定を行ったり、撮影時の視線方向にもとづいて受信画像１１１上の中心位置に対応して機器マスク画像７５の中心位置の調整を行ったりする。
マッチング処理は、前記した方法に限定されず他の方法で行なっても良い。
【００５２】
ステップＳ１１２では、センタ情報処理サーバ４の画像認識処理部６１は、機器マスク画像の開口部１１８（図４参照）に対応する受信画像１１１（図４では１１１Ａ，１１１Ｂ，１１１Ｃと表示）の点検領域情報を抽出して一時記憶する。
本実施形態の図４に示す例において点検領域情報を抽出とは、プラント機器６の稼働状況を示す表示灯１１４の盤内配列とその色を判別する処理を含む。
表示灯１１４の表示色は通常、「赤」、「青（緑）」、「黄」、「白」といった色に限定されているので、これらの色の基準色を予め用意しておけば、この基準色と比較することにより、色判別を容易に行うことができる。
受信画像１１１と機器マスク画像７５とマッチング処理でのズレの影響による前記点検領域情報の抽出におけるエラーを最小限にするため、開口部１１８に対応する受信画像１１１の領域での色判別においては、その領域（以下、「判定領域」と称する）を小領域に区切り、判定領域の中心に近い１点以上の異なる小領域画像を切り出し、切り出された小領域画像を予め用意されている基準色と比較して得た、１点以上の色判別結果を総合判断(例えば2 out of 3ロジック)することにより、より高信頼の色判別ができる。
【００５３】
なお、基準色は厳密には所定の色バンドを有して設定され、携帯情報端末２のカメラ部１８で撮影されたときの色の微妙な変化や、表示灯１１４の仕様やメーカによる発光色の微妙な差異を許容して、前記「赤」、「青（緑）」、「黄」、「白」を判別可能に設定する。
ちなみに、「赤」はオン状態を示し、「白（消灯）」はオフ状態を示し、「緑」はオフ状態又は「異常なし」の状態を示し、「黄」は「要注意」の状態を示し、色の使い方は様々である。
【００５４】
以下では、図４の（ｅ）に示す受信画像１１１Ｃを例に説明をすることにする。
図４の（ｅ）に示すように受信画像１１１Ｃからは、左から右に一列に配列された３つの表示灯１１４が、例えば、「赤（点灯）」、「白（消灯）」、「赤（点灯」の順に並んでいる。
【００５５】
ステップＳ１１３では、センタ情報処理サーバ４の投影画像生成部６２は、ステップＳ１１０で検索された機器表示画像７６（図５参照）の開口部１２２（図５中では１２２Ａ，１２２Ｂ，１２２Ｃで表示）に受信画像１１１Ｃから抽出された点検領域情報を貼り付け、合成画像を生成する。その後、符号（Ｄ）に従って図８のステップＳ１１４に進む。
ステップＳ１１４では、センタ情報処理サーバ４の統括制御部６０は、機器識別情報の示す機器名称をデータ検索ディレクトリ７４により検索して、ステップＳ１０５で取得した撮影パラメータに含まれる日時情報とともに、点検文字情報として生成する。このとき点検文字情報の一部として、機器識別情報も含めても良い。
なお、統括制御部６０はデータ検索ディレクトリ７４において当該の機器識別情報に対する機器名称欄７４ｃ（図３参照）の他に制御対象の機器名称欄７４ｋも検索して、制御対象の機器名称欄７４ｋに機器名称が記載されている場合は、機器名称欄７４ｋの機器名称をステップＳ１１４における機器名称とする。
これは、受信画像のプラント機器６が電気盤や制御盤の場合は、機器名称欄７４ｃには盤の名称が記載されており、機器名称欄７４ｋには制御対象の機器名称が記載されている。そして、盤の表示灯１１４の表示状態から制御対象のプラント機器の「オン」、「オフ」等の稼動状態を判別可能に、作業員に携帯情報端末２の表示部１６を介して表示させるには、機器名称欄７４ｋに記載されている機器名称の方が適切であるからである。
【００５６】
ステップＳ１１５では、センタ情報処理サーバ４の統括制御部６０は、ステップＳ１１０で検索された機器点検ガイダンス情報７３の該当する判定条件を検索する。
ちなみに、機器点検ガイダンス情報７３の中に含まれる判定条件は、判定条件を示す識別子とともに対応する機器識別情報を添付して、容易に検索可能に記載されている。
ステップＳ１１６では、センタ情報処理サーバ４の統括制御部６０は、該当する判定条件があるか否かチェックする。判定条件がある場合（Ｙｅｓ）は、ステップＳ１１７へ進み、判定条件が無い場合（Ｎｏ）は、ステップＳ１２０へ進む。
ステップＳ１１７では、センタ情報処理サーバ４の統括制御部６０は、ステップＳ１１２で抽出された点検領域情報がステップＳ１１５，Ｓ１１６で検索された判定条件を満足しているか否かをチェックする。判定条件を満足している場合（Ｙｅｓ）は、ステップＳ１１８に進み、センタ情報処理サーバ４の統括制御部６０は、「判定条件を満足」という判定結果文字情報を生成し、ステップＳ１２１へ進む。
ステップＳ１１７において判定条件を満足していない場合（Ｎｏ）は、ステップＳ１１９に進み、センタ情報処理サーバ４の統括制御部６０は、「警告！！判定条件満足せず」という判定結果文字情報を生成し、ステップＳ１２１へ進む。
【００５７】
ステップＳ１１６においてＮｏでステップＳ１２０へ進むと、センタ情報処理サーバ４の統括制御部６０は、ステップＳ１１４で生成した点検文字情報をそのまま投影文字情報とする。
ステップＳ１２１では、センタ情報処理サーバ４の統括制御部６０は、ステップＳ１１４で生成した点検文字情報と、ステップＳ１１８又はステップＳ１１９で生成した判定結果文字情報を合体して、投影文字情報とする。
ステップＳ１２２では、センタ情報処理サーバ４の投影画像生成部６２は、ステップＳ１２０又はステップＳ１２１で作成された投影文字情報を、ステップＳ１１３で生成された合成画像の所定の領域、例えば、図５に示す機器表示画像７６の投影文字情報入力領域にオーバーレイして投影画像７８を生成する。ステップＳ１２２の後、符号（Ｅ）に従って、図９のステップＳ１２３へ進む。
【００５８】
ステップＳ１２３では、センタ情報処理サーバ４の統括制御部６０は、ステップＳ１２２で生成された投影画像７８を一時記憶させるとともに、携帯情報端末２に通信制御部５１を介して送信する（ステップＳ１２４）。
ステップＳ１２４を受けて、ステップＳ１９では、携帯情報端末２は、投影画像を受信し、一時記憶する。ステップＳ２０では、携帯情報端末２は、プロジェクタ部１９を介して受信した投影画像を適当な壁面等に投影する。このとき、投影画像は表示部１６にも表示しても良い。
なお、機器表示画像７６が携帯情報端末２に表示されたとき、携帯情報端末２の表示部１６の表示画面のアイコンボタン領域１０６（図５参照）には、「次の機器へ」と表示の次のプラント機器６の点検に移動する指示を入力するアイコンボタン１０６ａ、「終了」と表示の一連のプラント機器６の点検の終了の指示を入力するアイコンボタン１０６ｂ、「終了」のアイコンボタン１０６ｂが押下されると、そのときそれまでのアイコンボタンの存在を示すだけの半表示状態から明瞭な表示に変って「終了確認」と表示される一連のプラント機器６の点検の終了を確認入力するアイコンボタン１０６ｃが表示されている。
【００５９】
ステップＳ１２５では、センタ情報処理サーバ４の統括制御部６０は、ステップＳ１０６又はステップＳ１０９で取得した機器識別情報のもとづいてデータ検索ディレクトリ７４を検索して、機器点検ガイダンス情報７３、その他プラント機器点検関連情報７１のメニューリストを携帯情報端末２に送信する。
ステップＳ１２５を受けて、ステップＳ２１では、携帯情報端末２は、メニューリストを受信し、一時記憶する。この受信されたメニューリストは、図５に示す投影画像７８の「関連情報表示」と表示されたアイコンボタン１０５に組み込まれ、アイコンボタン１０５を作業員が押下すると、小ウインドが開いて図示しないメニューリストが表示される。そのメニューリスト表示の画面には「要求」、「要求しない」のアイコンボタンが表示される。
ステップＳ２２では、携帯情報端末２は、機器点検ガイダンス情報７３、その他プラント機器点検関連情報７１を要求したか否かをチェックする、つまり、「要求」、「要求しない」のアイコンボタンのいずれが押下されたかをチェックする。要求した場合（Ｙｅｓ）は、ステップＳ２３へ進み、要求しない場合（Ｎｏ）は、ステップＳ２８へ進む。
【００６０】
ステップＳ２３では、携帯情報端末２は、要求情報の入力を受け付け、ステップＳ２４では、要求情報の入力が完了したか否かをチェックする。入力が完了した場合（Ｙｅｓ）はステップＳ２５へ進み、入力が完了していない場合（Ｎｏ）は、ステップＳ２３を継続する。ステップＳ２５では、携帯情報端末２は、要求情報リストをセンタ情報処理サーバ４へ送信する。
ステップＳ２５を受けて、センタ情報処理サーバ４の統括制御部６０は、通信制御部５１を介して要求情報リストを受信し（ステップＳ１２６）、要求された情報を保守点検データベース５３から検索して携帯情報端末２に送信する（ステップＳ１２７）。
【００６１】
ステップＳ１２７を受けて、携帯情報端末２は、要求情報を受信して、一時記憶する（ステップＳ２６）。そして、作業員の操作部１７の操作に応じて携帯情報端末２は、受信した要求情報をプロジェクタ部１９で適当な壁等に投影する（ステップＳ２７）。
【００６２】
この状態において携帯情報端末２の表示部１６の表示画面のアイコンボタン領域１０６（図５参照）には、「次の機器へ」と表示の次のプラント機器６の点検に移動する指示を入力するアイコンボタン１０６ａ、「終了」と表示の一連のプラント機器６の点検の終了の指示を入力するアイコンボタン１０６ｂ、「終了」のアイコンボタン１０６ｂが押下されると、そのときそれまでのアイコンボタンの存在を示すだけの半表示状態から明瞭な表示に変って「終了確認」と表示される一連のプラント機器６の点検の終了を確認入力するアイコンボタン１０６ｃが表示されている。
【００６３】
ステップＳ２８では、携帯情報端末２は、次の機器への移動か否か、つまり、「次の機器へ」の表示のアイコンボタン１０６ａが押下されたか否かをチェックする。押下された場合（Ｙｅｓ）は、ステップＳ２９へ進み、押下されていない場合（Ｎｏ）は、符号（Ｇ）にしたがって、図１０のステップＳ３０へ進む。
ステップＳ２９では、携帯情報端末２は、センタ情報処理サーバ４に、この機器の保守点検終了の通知を送信する。ステップＳ２９を受けてセンタ情報処理サーバ４の統括制御部６０は、ステップＳ１２３において一時記憶した投影画像を、ステップＳ１０３において検索した保守点検データテンプレート（このフローチャートの説明においては単線結線図テンプレート９０（図１２参照）に書き込む（ステップＳ１２８）。具体的には、例えば、図１２に示す単線結線図テンプレート９０の現在の保守点検対象のプラント機器６の機器識別情報と一致する機器識別情報欄９５に対応する記録領域９３に書き込む。その後符号（Ｈ）にしたがって図１０のステップＳ１２９へ進む。
【００６４】
ステップＳ３０では、携帯情報端末２は、一連の保守点検を終了か否かをチェックする、つまり、前記「終了」の表示のアイコンボタン１０６ｂが押下されたか否かをチェックする。押下された場合（Ｙｅｓ）は、ステップＳ３１へ進み、押下されていない場合（Ｎｏ）は、符号（Ｆ）にしたがって、図６のステップＳ０６へ戻り、次のプラント機器６の保守点検を続ける。
ステップＳ３１では、携帯情報端末２は、一連の保守点検を終了の通知をセンタ情報処理サーバ４に送信する。センタ情報処理サーバ４の統括制御部６０は、この一連の保守点検を終了の通知を、通信制御部５１を介して受信して、保守点検データテンプレートに書き込みされていない点検対象の機器があるかチェックする（ステップＳ１２９）。
【００６５】
ステップＳ１３０では、ステップＳ１２９を受けて、センタ情報処理サーバ４の統括制御部６０は、保守点検忘れがあるか否かをチェックする。保守点検忘れがある場合（Ｙｅｓ）は、ステップＳ１３１へ進み、保守点検忘れが無い場合（Ｎｏ）は、ステップＳ１３２へ進む。
ステップＳ１３１では、センタ情報処理サーバ４の統括制御部６０は、保守点検忘れの機器を、保守点検データテンプレートに表示して携帯情報端末２に送信する。例えば、単線結線図テンプレート９０の場合に、保守点検忘れのプラント機器６の機器識別情報欄９５を点滅表示させるようにして送信する。
携帯情報端末２は、保守点検データテンプレートを受信してプロジェクタ部１９で投影表示する（ステップＳ３２）。その後、符号（Ｆ）にしたがって図６のステップＳ０６に戻り、保守点検忘れのプラント機器６の保守点検を続ける。
【００６６】
ステップＳ１３２では、センタ情報処理サーバ４の統括制御部６０は、保守点検データテンプレートを携帯情報端末２に送信する。
携帯情報端末２は、保守点検データテンプレートを受信してプロジェクタ部１９で投影表示する（ステップＳ３３）。その後、作業員による操作部１７の操作に応じて表示する。こうして、作業員は、単線結線図テンプレート９０を一通り点検検して、改めて、各プラント機器６の投影文字情報入力領域７６ｂを点検して、異常な状態の警報表示の見落としが無いかを一通り通してチェックすることができる。
図１３は保守点検データテンプレート（単線結線図テンプレートの場合）の表示画面を示し、（ａ）は保守点検データテンプレートの全体表示画面を示し、（ｂ）その一つの機器を選択して拡大表示させた場合を示す。
図１３の（ａ）に示す単線結線図テンプレート９０は図１２に示した構成と同じであり、図１３の（ｂ）に示す拡大図は、図５の投影画像７８の構成と同じなので重複する説明を省略する。
ちなみに、表示画面に示された単線結線図テンプレート９０には、縦方向のスクロールボタン１０７ａ，１０７ｂ，１０７ｃ、横方向のスクロールボタン１０８ａ，１０８ｂ，１０８ｃが用意され、操作部１７の操作によりスクロール操作ができ、表示範囲を移動することができる（ステップＳ３４：「操作に応じて表示」）。
【００６７】
この状態において携帯情報端末２の表示部１６の表示画面のアイコンボタン領域１０６（図５参照）には、「終了確認」と表示される一連のプラント機器６の点検の終了を確認入力するアイコンボタン１０６ｃが表示されている。
ステップＳ３５において、携帯情報端末２は、一連の保守点検の「終了確認」のアイコンボタンが押下されたか否かをチェックする（一連の保守点検の終了確認ボタンを押下？）。終了確認のボタンが押下された場合（Ｙｅｓ）はステップＳ３６へ進み、押下されない場合（Ｎｏ）は、ステップＳ３４に戻る。
【００６８】
ステップＳ３６では、携帯情報端末２は、一連の保守点検の終了確認の通知をセンタ情報処理サーバ４に送信する。センタ情報処理サーバ４の統括制御部６０は、通信制御部５１を介してこの通知を受け、保守点検データテンプレートを機器点検履歴情報７２に書き込む（ステップＳ１３３）。これにより投影画像７８が書き込まれた保守点検データテンプレートそのものが機器点検履歴情報７２として、保守点検のたびに蓄積されていくことになる。
【００６９】
ステップＳ３７では、携帯情報端末２は、表示部１６に保守点検を終了させる図示しない「保守点検終了？」表示のアイコンボタンを表示させ、このアイコンボタンが押下されて、終了か否かのチェックをする。終了の場合（Ｙｅｓ）は、ステップＳ３８へ進み、センタ情報処理サーバ４との通信を切断して一連の制御を終了する。
これをうけてセンタ情報処理サーバ４は、携帯情報端末２との通信を終了する（ステップＳ１３４）。
【００７０】
ステップＳ３７において終了でない場合（Ｎｏ）は、符号（Ｉ）にしたがって、図６のステップＳ０３に戻り、これまで、例えば、プラント機器６の対象として単線結線図テンプレート９０に従って保守点検してきたものを、他の対象、例えば、制御系盤面系統図テンプレートにしたがって保守点検を続ける。
【００７１】
本実施形態におけるフローチャートのステップＳ１１０は、特許請求の範囲に記載のマスク画像検索手段及び機器表示画像検索手段に対応し、ステップＳ１１１は、特許請求の範囲に記載の画像マッチング手段に対応し、ステップＳ１１２は、特許請求の範囲に記載の点検領域情報取得手段に対応し、ステップＳ１１３は、特許請求の範囲に記載の情報重畳手段に対応する。
【００７２】
本実施形態によれば、保守点検に当たり、点検対象のプラント機器６が、例えば、ポンプモータ等を制御するリレー回路盤の場合に、リレー回路盤の表示灯１１４の点灯状態をチェックしたときに、センタ情報処理サーバ４は、投影画像７８に表示させる点検文字情報として、データ検索ディレクトリ７４にもとづいて、制御対象のプラント機器６の機器名称７４ｋ（図３参照）を検索してこの表示灯１１４がどのポンプに対するものかが投影画像７８（図５参照）から容易に判別でき、作業員が点検指示書等をめくって捜さずとも容易に判別できる。したがって、プラントの系統図と制御盤の単線結線図との対応関係を熟知して正確に記憶していない作業員でも、正確な判別ができる。
【００７３】
また、例えば、受信画像の点検領域情報そのものを、機器表示画像７６の開口部１２２（図５では１２２Ａ，１２２ｂ，１２２Ｃと表示）に自動的に貼り付けて機器点検履歴情報７２とするので、転記ミスが防止でき、作業の品質が向上する。
例えば、特定の色に対して色覚異常のある作業員でも正確な点検報告が可能となる。
更に、例えば、単線結線図テンプレート９０（図１３参照）に投影画像７８を貼り付けた形にして機器点検履歴情報７２を登録するので、単線結線図に接続している点検対象の盤等の点検結果が一目瞭然に見て取れ、以前の点検結果と比較してどこが変化しているかもすぐに分かる。また、単線結線図の接続の上で下流側の盤に異常が発見されたときに、その盤と同レベルの盤や上流側の盤を見ることにより、原因の特定がしやすい。
【００７４】
《変形例》
本実施形態のセンタ情報処理サーバ４の画像認識処理部６１におけるプラント機器６の機器識別情報の認識の方法としては、携帯情報端末２から受信した受信画像１１１（図４参照、ただし、図４中では１１１Ａ，１１１Ｂ，１１１Ｃと表示）に機器識別情報が表示された銘板１１３が写し込まれ、受信画像１１１から機器識別情報を認識するとしたがそれに限定されるものではない。
例えば、携帯情報端末２から銘板１１３の撮影画像と、プラント機器６の盤面の表示灯１１４やパネル１１５を含んだ撮影画像の２枚をセンタ情報処理サーバ４に送信するようにし、画像認識処理部６１において銘板１１３の撮影画像から機器識別情報を認識するようにしても良い。このように銘板１１３の撮影画像から機器識別情報を認識することにすると、銘板１１３に記載された文字を大きくして撮影できることと、盤面の他の情報が少ないことから機器識別情報の認識の精度が高まる。
【００７５】
また、本実施形態では、プラント機器６として、リレー盤、モータコントロール盤、ＡＶＲ盤、制御盤等を例に、盤面に設けられている表示灯１１４の点灯状態を点検領域情報として取得することにしたが、それに限定されるものではない。
制御盤によっては、電圧メータや電流メータ等のメータが設けられているものもある。そのメータの指示針の指し示している指示値を点検領域情報として画像認識により取得するようにしても良い。
なお、メータの指示値の取得はアナログメータに限らず、デジタル値表示の場合でも画像認識により点検領域情報として取得できる。
【図面の簡単な説明】
【００７６】
【図１】本発明に係る保守点検システムの概略構成を示すブロック図である。
【図２】保守点検システムにおける携帯情報端末の回路構成ブロック図である。
【図３】保守点検データベースのデータ検索ディレクトリの構成を説明する図である。
【図４】受信画像と、それに対応する機器マスク画像の例である。
【図５】機器表示画像の例である。
【図６】携帯情報端末とセンタ情報処理サーバとの協調による撮影画像にもとづく機器点検履歴情報の作成の制御の流れを示すフローチャートである。
【図７】携帯情報端末とセンタ情報処理サーバとの協調による撮影画像にもとづく機器点検履歴情報の作成の制御の流れを示すフローチャートである。
【図８】携帯情報端末とセンタ情報処理サーバとの協調による撮影画像にもとづく機器点検履歴情報の作成の制御の流れを示すフローチャートである。
【図９】携帯情報端末とセンタ情報処理サーバとの協調による撮影画像にもとづく機器点検履歴情報の作成の制御の流れを示すフローチャートである。
【図１０】携帯情報端末とセンタ情報処理サーバとの協調による撮影画像にもとづく機器点検履歴情報の作成の制御の流れを示すフローチャートである。
【図１１】携帯情報端末の保守点検メイン画面を示す説明図である。
【図１２】単線結線図テンプレートを説明する図である。
【図１３】保守点検データテンプレート（単線結線図テンプレートの場合）の表示画面を示す図であり、（ａ）は保守点検データテンプレートの全体表示画面を示し、（ｂ）その一つの機器を選択して拡大表示させた場合を示す。
【符号の説明】
【００７７】
１      保守点検システム
２      携帯情報端末
３      ネットワーク
３ａ    無線端末
３ｂ，３ｃ    ノード端末
４      センタ情報処理サーバ
５Ａ    機器メーカ情報サーバ
６      プラント機器（保守点検対象機器）
７      サーバ管理端末
１３    処理部
１４    通信制御部（通信手段）
１５    アンテナ（通信手段）
１６    表示部（表示手段）
１７    操作部（入力手段）
１８    カメラ部（カメラ）
１９    プロジェクタ部（表示手段）
２０    バッテリ
２１    電源回路
２７，２８    メモリ
３１    撮影レンズ
３２    イメージセンサ
３３    撮影制御回路
３４,４５  レンズ駆動回路
４１    投影制御回路
４２    光源
４３    液晶パネル
４４    投影レンズ
５１    通信制御部（通信手段）
５２    処理部
５３    保守点検データベース（記憶手段）
６０    統括制御部
６１    画像認識処理部
６２    投影画像生成部
６４    データベース管理部
７１    プラント機器点検関連情報
７２    機器点検履歴情報
７３    機器点検ガイダンス情報
７４    データ検索ディレクトリ
７４ａ  機器識別情報欄
７４ｂ  型式コード欄
７４ｃ  機器名称欄
７４ｄ  機器マスク画像欄
７４ｅ  機器表示画像欄
７４ｆ  データテンプレート欄
７４ｇ  関連情報欄
７４ｈ  機器点検履歴欄
７４ｉ  機器点検ガイダンス情報欄
７４ｋ  機器名称欄
７５，７５Ａ，７５Ｂ，７５Ｃ  機器マスク画像（マスク画像）
７６    機器表示画像
７６ａ  表示領域
７６ｂ  投影文字情報入力領域
７８    投影画像（出力用機器表示画像）
８０    保守点検メイン画面
８１    画面タイトル欄
８２    入力欄
８３，８４  コンボボックス
８３ａ，８４ａ  入力表示窓
８３ｂ，８４ｂ  選択肢表示用ボタン
９０    単線結線図テンプレート
９１    電力供給線
９３    記録領域
９５    機器識別情報欄
１０１  終了ボタン
１０２  操作ボタン
１０５，１０６ａ１０６ｂ，１０６ｃ  アイコンボタン
１０６  アイコンボタン領域
１１１Ａ，１１１Ｂ，１１１Ｃ  受信画像
１１３  銘板
１１４  表示灯
１１５  パネル
１１８  開口部
１１９  輪郭
１２１  配線
１２２Ａ，１２２Ｂ，１２２Ｃ  開口部
１２３Ａ、１２３Ｂ，１２３Ｃ  識別名称
１２４  機器名称
１２５  機器識別情報
１２６  日時情報
【図１】
2010003190.tif 000003
【図２】
2010003190.tif 000004
【図３】
2010003190.tif 000005
【図４】
2010003190.tif 000006
【図５】
2010003190.tif 000007
【図６】
2010003190.tif 000008
【図７】
2010003190.tif 000009
【図８】
2010003190.tif 000010
【図９】
2010003190.tif 000011
【図１０】
2010003190.tif 000012
【図１１】
2010003190.tif 000013
【図１２】
2010003190.tif 000014
【図１３】
2010003190.tif 000015