(57)【要約】【課題】電気的Ｉ／ＦやＲＤＩＤタグを必要とせず、保守作業時に誤って保守作業対象外に対する保守作業を行ってしまうことを抑止することができる保守作業支援システムにおける携帯型情報処理装置を提供すること。【解決手段】画像撮影機能、音声発生機能、を有する携帯型情報処理装置を有し、当該携帯型情報処理装置は、保守作業員の手が保守対象機器の保守エリア内にあるか否かを判定し、当該結果、保守エリア内から外に移動した場合、又は保守エリア外にある場合、保守作業員に警告音を鳴らす画像処理機能部を有する。【選択図】図１
2015194866.tif 000002
【特許請求の範囲】
【請求項１】
複数の機器及び保守作業員を撮影するカメラ部を操作する画像撮影機能を有するカメラ操作部、警告音を鳴動する音声発生機能を有する警報部、前記カメラ部により撮影した画像情報を受けて表示する表示機能を有するディスプレイを含む表示部、前記複数の機器から保守対象機器の保守内エリア及び／又は保守外エリアを指定するエリア指定機能を有するエリア指定部、前記カメラ部により撮影した画像を処理する画像処理機能を有する制御部、を有し、
前記画像処理機能部は、
前記カメラ部から保守対象機器を含む複数の機器の静止画像を受けて前記ディスプレイに表示するように制御し、また前記カメラ部から機器及び当該機器の保守作業員を含む動画像を受けて前記ディスプレイに出力表示するように制御する手段、
前記静止画像の表示状態において、前記保守エリア指定部からの保守エリア指定に基づいて前記複数の機器の中から保守対象の機器を特定する保守エリア指定枠画像を生成して前記ディスプレイに出力表示するように制御する手段、
前記動画像の表示状態において、前記保守対象機器の保守内エリアを示す枠画像と保守作業員の手の位置を示す手画像との位置関係を監視する手段、
前記手画像の位置が前記保守内エリアから外れたか否かを判定する手段、
前記判定する手段による判定結果、前記手画像の位置が前記保守内エリアから外れた場合、前記警報部を制御して保守作業員に対して警告する警告音を鳴動する手段、
を有することを特徴とする携帯型情報処理装置。
【請求項２】
複数の機器及び保守作業員を撮影するカメラ部を操作する画像撮影機能を有するカメラ操作部、警告音を鳴動する音声発生機能を有する警報部、前記カメラ部により撮影した画像情報を受けて表示する表示機能を有するディスプレイを含む表示部、前記複数の機器から保守対象機器の保守内エリア及び／又は保守外エリアを指定するエリア指定機能を有するエリア指定部、前記カメラ部により撮影した画像を処理する画像処理機能を有する制御部、を有し、
前記画像処理機能部は、
前記カメラ部から保守対象機器を含む複数の機器の静止画像を受けて前記ディスプレイに表示するように制御し、また前記カメラ部から機器及び当該機器の保守作業員を含む動画像を受けて前記ディスプレイに出力表示するように制御する手段、
前記静止画像の表示状態において、前記保守エリア指定部からの保守エリア指定に基づいて前記複数の機器の中から保守対象の機器を特定する保守エリア指定枠画像を生成して前記ディスプレイに出力表示するように制御する手段、
前記静止画像の表示状態において、前記保守エリア指定部からの保守エリア指定に基づいて前記複数の機器の中から保守対象の機器を特定する保守エリア指定枠画像、及び保守外エリア指定枠画像を生成して前記ディスプレイに出力表示するように制御する手段、
前記動画像の表示状態において、前記保守対象機器の保守内エリアを示す枠画像と保守作業員の手の位置を示す手画像との位置関係を監視する手段、
前記手画像の位置が前記保守内エリアか前記保守外エリアかを判定する手段、
前記判定する手段による判定結果、前記手画像の位置が前記保守内エリアから外れた場合、また保守外エリアに入った場合、前記警報部を制御して保守作業員に対して警告する警告音を鳴動する手段、
を有することを特徴とする携帯型情報処理装置。
【請求項３】
請求項１又は請求項２に記載の携帯型情報処理装置であって、
前記画像処理機能部は、さらに
前記カメラからの画像情報及び前記保守エリア指定枠画情報を保守作業監視側に送信する手段、
を有することを特徴とする携帯型情報処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像撮影機能、音声発生機能、を有する携帯型情報処理装置をもってラックなどに搭載された機器の保守作業を支援するシステムに適用される携帯型情報処理装置に関する。
【背景技術】
【０００２】
本技術分野の背景技術として、特開２０１１−１７５４９４号公報（特許文献１）がある。当該特許文献１には、「保守対象機器及び当該保守対象機器上で動作するソフトウェア（以降インストールプログラムと称呼する）の保守管理業務を行うための保守作業支援システムであって、保守対象機器と通信可能に接続するための機器インタフェース部と、保守対象機器及びインストールプログラムの構成を判定する条件を記憶する機器条件判定情報記憶部と、保守対象機器に用いられている部品及び該部品と互換性を持つ他の部品を示す互換情報、及びインストールプログラムのアップデートファイルの情報を記憶する部品判定情報記憶部と、保守対象機器の保守作業の手順を記憶する作業手順情報記憶部と、保守対象機器の更新や動作チェック等を行う保守作業支援実行部と、画像の表示や入出力を行うための表示・入出力部と、を備え前記保守作業支援実行部は、前記機器インタフェース部に接続された保守対象機器から、保守対象機器及びインストールプログラムの構成情報を取得して前記機器条件判定情報記憶部に記憶される情報と照合し、判定された保守対象機器及びインストールプログラムの構成情報から、前記部品判定情報記憶部と照合して部品情報を取得し、保守対象機器及びインストールプログラムの保守手順を前記作業手順情報記憶部から取得し、保守作業の手順のガイダンスを前記表示・入出力部に表示することを特徴とする保守作業支援システム」をもって「保守作業の際の作業ミスや作業漏れを低減することができる保守作業支援システムを提供する」との記載がある。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１１−１７５４９４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
前記特許文献１には、保守対象装置を、当該装置に装着した電気的Ｉ／Ｆからの情報をもって識別することが開示されている。また、従来にあっては、ＲＦＩＤタグをもって保守対象装置を識別するものもある。しかし、このように電気的Ｉ／ＦやＲＤＩＤタグを必要とするものにあっては、保守対象機器に対して、予め電気的Ｉ／ＦやＲＤＩＤタグなどを機器に取り付けるなどの準備作業が必要となり、また、その管理も必要である。また、ＲＦＩＤタグなどを取り付けていない機器に対しては適用できない、のみならず複数のメーカの機器の保守に適用することが難しく、汎用性にかける嫌いがある。
【０００５】
そこで、本発明は、電気的Ｉ／ＦやＲＤＩＤタグを必要とせず、保守対象機器を特定することができる携帯型情報処理装置を提供する。
【０００６】
また、保守作業時に誤って保守作業対象外に対する保守作業を行ってしまうことを抑止することができる携帯型情報処理装置を提供する。
【課題を解決するための手段】
【０００７】
そのために本発明は、画像撮影機能、音声発生機能、を有する携帯型情報処理装置を有し、当該携帯型情報処理装置は、保守作業員の手が保守対象機器の保守エリア内にあるか否かを判定し、当該結果、保守エリア内から外に移動した場合、又は保守エリア外にある場合、保守作業員に警告音（警報音）を鳴らす画像処理機能部を有する。
【０００８】
例えば、本発明の携帯型情報処理装置は、
複数の機器及び保守作業員を撮影するカメラ部を操作する画像撮影機能を有するカメラ操作部、警告音を鳴動する音声発生機能を有する警報部、前記カメラ部により撮影した画像情報を受けて表示する表示機能を有するディスプレイを含む表示部、前記複数の機器から保守対象機器の保守内エリア及び／又は保守外エリアを指定するエリア指定機能を有するエリア指定部、前記カメラ部により撮影した画像を処理する画像処理機能を有する制御部、を有し、
前記画像処理機能部は、
前記カメラ部から保守対象機器を含む複数の機器の静止画像を受けて前記ディスプレイに表示するように制御し、また前記カメラ部から機器及び当該機器の保守作業員を含む動画像を受けて前記ディスプレイに出力表示するように制御する手段、
前記静止画像の表示状態において、前記保守エリア指定部からの保守エリア指定に基づいて前記複数の機器の中から保守対象の機器を特定する保守エリア指定枠画像を生成して前記ディスプレイに出力表示するように制御する手段、
前記動画像の表示状態において、前記保守対象機器の保守内エリアを示す枠画像と保守作業員の手の位置を示す手画像との位置関係を監視する手段、
前記手画像の位置が前記保守内エリアから外れたか否かを判定する手段、
前記判定する手段による判定結果、前記手画像の位置が前記保守内エリアから外れた場合、前記警報部を制御して保守作業員に対して警告する警告音（警報音）を鳴動する手段、
を有することを特徴とする。
【０００９】
また、本発明の携帯型情報処理装置は、
複数の機器及び保守作業員を撮影するカメラ部を操作する画像撮影機能を有するカメラ操作部、警告音を鳴動する音声発生機能を有する警報部、前記カメラ部により撮影した画像情報を受けて表示する表示機能を有するディスプレイを含む表示部、前記複数の機器から保守対象機器の保守内エリア及び／又は保守外エリアを指定するエリア指定機能を有するエリア指定部、前記カメラ部により撮影した画像を処理する画像処理機能を有する制御部、を有し、
前記画像処理機能部は、
前記カメラ部から保守対象機器を含む複数の機器の静止画像を受けて前記ディスプレイに表示するように制御し、また前記カメラ部から機器及び当該機器の保守作業員を含む動画像を受けて前記ディスプレイに出力表示するように制御する手段、
前記静止画像の表示状態において、前記保守エリア指定部からの保守エリア指定に基づいて前記複数の機器の中から保守対象の機器を特定する保守エリア指定枠画像を生成して前記ディスプレイに出力表示するように制御する手段、
前記静止画像の表示状態において、前記保守エリア指定部からの保守エリア指定に基づいて前記複数の機器の中から保守対象の機器を特定する保守エリア指定枠画像、及び保守外エリア指定枠画像を生成して前記ディスプレイに出力表示するように制御する手段、
前記動画像の表示状態において、前記保守対象機器の保守内エリアを示す枠画像と保守作業員の手の位置を示す手画像との位置関係を監視する手段、
前記手画像の位置が前記保守内エリアか前記保守外エリアかを判定する手段、
前記判定する手段による判定結果、前記手画像の位置が前記保守内エリアから外れた場合、また保守外エリアに入った場合、前記警報部を制御して保守作業員に対して警告する警告音（警報音）を鳴動する手段、
を有することを特徴とする。
【００１０】
携帯型情報処理装置の画像処理機能部は、さらに
前記カメラからの画像情報及び前記保守エリア指定枠画情報を保守作業監視側に送信する手段、を有することを特徴とする。
【発明の効果】
【００１１】
本発明によれば、保守対象機器にそれぞれ電気的Ｉ／ＦやＲＤＩＤタグを取り付け、管理する必要もなく、保守対象機器に対して正確に保守作業支援を行うことができる携帯型画像処理装置を提供する。
本発明によれば、保守作業員による保守作業時に誤って保守作業対象外の機器に対して保守作業を行うようなことを抑止することができる。
【００１２】
上記した以外の課題、構成及び効果は、以下の実施形態の説明により明らかにされる。
【図面の簡単な説明】
【００１３】
【図１】図１は、本発明の携帯型情報処理装置とラックに搭載された機器との関係を示すシステム構成図である。
【図２】図２は、携帯型情報処理装置の画像処理制御部２２の機能ブロック構成を示す図である。
【図３】図３は、携帯型情報処理装置の表示部２３のディスプレイにおける表示画面の一例を示す図である。
【図４】図４は、携帯型情報処理装置の表示部２３のディスプレイにおける表示画面の他の例を示す図である。
【図５】図５は、保守作業前の処理フローを示すフロー図である。
【図６】図６は、保守作業時の処理フローを示すフロー図である。
【図７】図７は、携帯型情報処理装置の一例を示す説明図である。
【発明を実施するための形態】
【００１４】
以下、本発明の実施例を説明する。
【００１５】
図1は、本発明の携帯型情報処理装置とラックに搭載された機器との関係を示すシステム構成図である。
【００１６】
同図において、携帯型情報処理装置２は、図７に示すような保守作業員が携帯に適した端末、例えば、スマートフォンからなる。
そして、保守作業員による保守作業時に例えば、ラック１に搭載された機器１１及び当該機器を保守する保守作業員を、カメラ２１１を含むカメラ部２１により撮影するのに適した位置に設置される。
【００１７】
携帯型情報処理装置２は、カメラ部２１、画像処理制御部２２、表示部２３、警報部２４、記憶部２５、カメラ操作部２６、エリア設定部２７、を有する。
【００１８】
カメラ部２１は、保守対象を撮影するものであり、具体的には、複数の機器１１（含保守対象機器）や保守作業員３（リストバンド３１）などを撮影するものであり、静止画、また動画の撮影を可能とする画像撮影機能を有する。
【００１９】
画像処理制御部２２は、ＣＰＵを含み、記憶部２５に記憶された画像処理プログラムに基づき前記カメラ部により撮影した画像情報を処理する画像処理機能を有する。
【００２０】
表示部２３は、ディスプレイ２３１を含み、前記カメラ部２１により撮影した画像情報１１１〜１１５、３１１を表示する表示機能を有する。
【００２１】
警報部２４は、スピーカ２４１を含む、保守作業員による保守作業が保守内エリアの機器の保守作業でないと思われるような場合に保守作業員に対して警告音を鳴動する音声発生機能を有する。
【００２２】
記憶部２５は、カメラ部２１により撮影した画像情報を記憶する。また、画像処理制御部２２を制御する画像処理プログラム、などを記憶する。これらは、別個の記録部を設けてもよい。
【００２３】
カメラ操作部２６は、カメラ部２１による撮影を開始するものであり、例えば、表示部２３のディスプレイ２３１と兼用されたタッチパネル形式からなる。
【００２４】
また、カメラ操作部２６は、ラック１の機器１１を静止画撮影する操作ボタン２６１、及び当該機器と当該機器の保守作業員を含めて動画撮影する操作ボタン２６２を有する。操作ボタン２６１，２６２は１つのボタンで兼用する構成としてもよい。
【００２５】
したがって、静止画撮影操作ボタン２６１を操作したときは、カメラ部２１で撮影された画像情報が静止画として表示部２３のディスプレイ２３１に表示され、動画撮影操作ボタン２６２を操作したときは、カメラ２１で撮影された画像情報が動画として表示部２３のディスプレイ２３１に表示される。
【００２６】
エリア指定部２７は、表示部２３のディスプレイに表示された静止画を元に複数の機器１１の中で保守対象となる機器（保守対象機器）の保守内エリア、例えば、保守対象機器の周囲を囲むような枠状の画像２２３１（図３、図４参照）をもって保守対象エリアを設定するものである。
【００２７】
エリア設定部２７は、例えば、前記カメラ部２１により撮影した複数の機器１１を含む静止画（画像情報）から保守対象の機器を特定する設定部２７１を含み、当該保守対象機器の保守内エリア及び／又は保守外エリアを指定、設定するエリア指定機能を有する。設定部２７１は、例えば、画像座標点情報を指定してエリアを設定する技術を使用する。
【００２８】
図２は、携帯型情報処理装置２の画像処理制御部２２の機能ブロック構成を示す図である。
【００２９】
同図において、画像処理制御部２２は、カメラ制御部２２１、画像情報（機器及び保守作業員撮影画像）受信部２２２、保守対象エリア指定画像（枠画像）生成部２２３、画像表示制御部２２４、手位置画像の位置判定部２２５、警報制御部２２６、を有する。
【００３０】
カメラ制御部２２１は、カメラ操作部２６の操作ボタンに応じてカメラ部２１を制御する。
【００３１】
画像情報受信部２２２は、カメラ部２１にて撮影した複数の機器１１（１１１〜１１５）を含む静止画（静止画情報）、また、複数の機器１１（１１１〜１１５）、保守作業員の手画像３１１（図３、図４参照）を含む動画（動画情報）を受信する。
【００３２】
画像表示制御部２２４は、画像情報受信部２２２により受信した静止画、動画を含む画情報を受けて表示部２３のディスプレイに表示するように制御する。
【００３３】
保守対象エリア指定画像生成部２２３は、表示部２３のディスプレイ２３１上に表示された静止画表示状態において、エリア指定部２７（２７１）からのエリア指定、例えば保守内エリア指定に基づいて複数の機器１１の中から保守対象となる機器（保守対象機器）の保守内エリアを指定する保守対象エリア指定画像２２３１（図３、図４参照）を生成する。
【００３４】
保守エリア対象エリア指定画像生成部２２３は、例えば、保守対象機器の周囲を取り囲むような保守内エリア指定枠画像２２３１を生成するものからなり、当該枠画像によりカメラ２１の動画の保守対象機器を取り囲むエリア内を保守内エリアとして指定する。
保守作業員の手の位置は、例えば、保守作業員の手首に装着した一目に付く色のリストバンドや手袋の撮影により得た画像の位置を手の位置とするとよい。
【００３５】
手位置画像の位置判定部２２５は、表示部２３のディスプレイ２３１上に表示された動画表示状態において、保守対象機器の保守内エリアを示す保守エリア指定画像２２３１と保守作業員の手の位置を示す画像３１１との位置関係を監視して当該手の位置が当該保守内エリアから外れたか否かを判定する。
【００３６】
警報制御部２２６は、位置判定部２２５による判定結果、当該手の位置が当該保守内エリアから保守外エリアに出た場合、警報部２４を制御して保守作業員に対して警告音を鳴動するように制御する。
【００３７】
また、画像処理制御部２２は、カメラ部２１の画像情報を保守エリア指定画像２２３１と共に保守作業監視者側に送信する画像情報送信部２２７を有してもよい。これにより、保守作業監視者側にて保守作業員が保守対象機器の保守作業を適切に行っているのか、そうでないかの状況を確認することができ、場合によっては監視者側から保守作業員に対して助言することも可能となる。
【００３８】
図３は、表示部２３のディスプレイ２３１の表示画面の一例を示す図であって、保守内エリア（保守対象エリア）のみを指定した場合の例である。図４は、表示部２３のディスプレイの表示画面の他の例を示す図であって、保守内エリア（保守対象エリア）と保守外（保守対象外エリア）の両方を指定した場合の例である。
【００３９】
同図において、表示部２３のディスプレイ２３１には、複数の機器１１（１１１〜１１５）、保守内エリア指定枠画像（図３、図４の実線で示す枠）２２３１、また保守作業員の手の位置を示す画像（例えば、リストバンド又は手袋を示す画像）３１１を示し、例えば、リストバンド３１１が保守内エリア（保守対象内エリア）から保守対象外、又は保守外エリア（保守対象外エリア）：（図４の点線で示す枠）に移動する例を示している。
【００４０】
図５は、保守作業前の処理フローを示すフロー図、図６は、保守作業時の処理フローを示すフロー図である。
【００４１】
図５において、ステップＳ５１１にて、携帯型画像処理装置２２を所望の位置に設置する。そして、保守対象エリアを静止画撮影する。例えば、ラック１に搭載された機器１１のすべてをカメラ部２１により静止画撮影する。当該静止画撮影は、カメラ操作部２６の静止画操作ボタンをもって行う。
【００４２】
続いて、ステップＳ５１２にて、カメラ部２１より撮影した静止画（静止画情報）を受信して表示部２３のディスプレイに表示する。
【００４３】
係る静止画表示状態において、ステップＳ５１３にて、保守対象エリアと保守対象外エリアを指定する。この指定に基づき例えば、保守内エリア、及び／又は保守外エリアを指定する保守内エリア、及び／又は保守外エリア指定枠画像（枠画像情報）を生成する。
この保守内エリア、及び／又は保守外エリア指定枠画像は、静止画状態（静止画像上）において、保守対象機器を取り囲む座標点を指定して設定する。
【００４４】
次に、ステップＳ５１４にて、保守内エリア、及び／又は保守外エリア指定枠画像を表示部２３のディスプレイに出力して、静止画の機器画像を取り囲むようにして重ねて表示する。これにより、複数の機器１１の中から保守対象となる機器を特定する。
【００４５】
次に、保守対象となる機器を特定したあと、以下の処理を実行する。
図６において、ステップＳ６１１にて、保守対象エリアを動画撮影する。例えば、ラック１に搭載された機器１１のすべて、及び当該機器の保守対象機器を保守する保守作業員をカメラ部２１により動画撮影する。当該動画撮影は、カメラ操作部２６の動画操作ボタンをもって行う。そして、このときの動画（画像情報）を受信する。このとき、保守作業員はリストバンド又は、手袋を装着し、保守作業員の手の位置がわかり易いようにする。
【００４６】
続いて、ステップＳ６１２にて、保守内エリア、及び／又は保守外エリア指定枠画像１２３１及びカメラ２１の動画（機器画像１１１〜１１５、保守作業員の手の位置を示す画像３１１）を表示部２３のディスプレイに表示する。
【００４７】
そして、次のステップＳ６１３にて、保守内エリア、及び／又は保守外エリア指定枠画像２２３１と保守作業員の手の位置を示す画像３１１との位置関係を監視する。
【００４８】
係る状態において、ステップＳ６１４にて保守作業を開始する。
【００４９】
また、ステップＳ６１５にて、保守作業員による保守作業が完了したか否かを判定する。
【００５０】
ここで、保守作業が完了した場合には、ステップＳ６２１にてカメラ動画撮影ボタンを操作して撮影を停止し、保守作業処理を終了する。
【００５１】
保守作業が完了していない場合には、ステップＳ６１６にて手画像情報が保守内外かを判定する。例えば、保守作業員の手が、保守対象外エリアに入り込んだか否かを判定する。
【００５２】
ここで、保守内エリアの場合には、ステップＳ６２０にて保守作業員が保守対象エリア（保守内エリア）の保守対象機器の保守作業中であると認識してステップＳ６１５に戻り、手位置画像の位置判定を繰り返す。
【００５３】
保守外エリアの場合には、ステップＳ６１７にてアラームを鳴動する。このアラーム鳴動により、ステップＳ６１８にて保守作業員に対して保守作業員が保守内エリアから外に出たこと、例えば、保守外エリアの機器を保守しているご操作の可能性がある旨の警告、又は通知を行う。これにより、保守作業員は、警告を聞いた時点で作業を一旦中段し、誤操作をしていないかを確認できる。
【００５４】
ステップＳ６１７における鳴動は、明らかに保守作業員が保守内エリアから保守外エリアに移動して保守外の機器の保守を行っていることを判断するに適した所定の待機時間をおいて、鳴動するようにするとよい。この待機時間は、タイマーにより監視する構成とする。
【００５５】
ステップＳ６１９にて保守作業員が確認した場合には、ステップＳ６２０に進み、上述した処理を実行する。
保守作業員が保守作業を終了したら、上記各処理（画像処理プログラム）を停止する。
【００５６】
上記実施例では、図５と図６との処理を区別して説明したが、図５の処理が完了したあと、自動的に図６の処理に移行するようにするとよい。
【００５７】
また、上記実施例では、携帯型情報処理装置として１つの例を挙げて説明したが、複数台用意し、複数台の装置からの画像情報を元に保守内エリアや保守外エリアを特定し、また画像情報を監視した上で、上述した処理を正確に実行するように構成するとよい。例えば、２台の１つの手画像情報の位置が保守内エリアから外れた場合、または保守外エリアに入った場合に警告音を鳴動するように構成してもよく、或は２台のそれぞれが手画像情報の位置が保守内エリアから外れた場合、または保守外エリアに入った場合に警告音を鳴動するように構成してもよい。
【００５８】
以上、本発明の一実施形態を説明したが、これは本発明の例示であって、本発明の範囲をこの実施形態にのみ限定する必要はない。
【符号の説明】
【００５９】
１  ラック
１１  機器
２  携帯型情報処理装置
２１  カメラ部
２２  画像処理制御部（ＣＰＵ）
２２１  カメラ制御部
２２２  画像情報（機器及び保守作業員撮影画像）受信部
２２３  保守対象エリア指定画像（枠画像）生成部
２２４  画像表示制御部
２２５  手位置画像の位置判定部
２２６  警報制御部
２２７  画像情報送信部
【図１】
2015194866.tif 000003
【図２】
2015194866.tif 000004
【図３】
2015194866.tif 000005
【図４】
2015194866.tif 000006
【図５】
2015194866.tif 000007
【図６】
2015194866.tif 000008
【図７】
2015194866.tif 000009