(57)【要約】【課題】カメラ撮影を伴うメータ読み取り作業現場での段階的で有効な作業支援ができるメータ読み取り作業装置および方法を提供する。【解決手段】メータ装置の読み取り対象領域Ａ２の画像Ｐ１２に基づいてメータ装置の指示値Ｖｍを読み取る作業を、ガイド情報Ｇ１１，Ｇ１２−Ｇ１４の提示によって支援しつつ実行するメータ読み取り作業装置であって、メータ装置を撮影するカメラと、カメラの撮影画像を表示するディスプレイ１２と、音声を出力するスピーカと、カメラ撮影された読み取り対象領域Ａ２の画像Ｐ１２の複数段階の認識状態に応じた作業支援情報を、ディスプレイ１２およびスピーカのうちいずれか一方または双方から出力させる制御手段とを備える。【選択図】図２
2020166586.tif 000002
【特許請求の範囲】
【請求項１】
メータ装置の読み取り対象領域の画像に基づいて前記メータ装置の指示値を読み取る作業を、作業支援情報の提示によって支援しつつ実行するメータ読み取り作業装置であって、
前記メータ装置を撮影するカメラと、
前記カメラの撮影画像を表示するディスプレイと、
音声を出力するスピーカと、
前記カメラで撮影された前記読み取り対象領域の画像の複数段階の認識状態に応じた前記作業支援情報を、前記ディスプレイおよび前記スピーカのうちいずれか一方または双方から出力させる制御手段と、を備えることを特徴とするメータ読み取り作業装置。
【請求項２】
前記ディスプレイの表示領域内に、前記作業支援情報として、前記読み取り対象領域の画像が表示されるべき注目領域を特定するガイド情報を表示するガイド表示手段と、
前記読み取り対象領域の画像が所定認識確度以上の画像として前記注目領域内に含まれるか否かを判定する読み取り対象抽出手段と、
前記注目領域内の前記所定認識確度以上の画像から前記指示値を読み取り可能に認識する認識処理手段と、を含むことを特徴とする請求項１に記載のメータ読み取り作業装置。
【請求項３】
前記ディスプレイに表示される前記撮影画像中に複数のマーカ画像を設定するマーカ設定手段と、
前記ディスプレイの表示領域内に、前記作業支援情報として、前記複数のマーカ画像がそれぞれ表示されるべき複数のマーカ表示領域を特定するガイド情報を表示するガイド表示手段と、
前記複数のマーカ画像の表示と前記複数のマーカ表示領域との幾何学的な対応度合いに応じて前記読み取り対象領域の画像が表示されるべき注目領域を特定するとともに、該注目領域に入った前記撮影画像の一部が前記読み取り対象領域の前記所定認識確度以上の画像か否かの判定を実行する読み取り対象抽出手段と、
前記注目領域内の前記所定認識確度以上の画像から前記指示値を読み取り可能に認識する認識処理手段と、を含むことを特徴とする請求項１に記載のメータ読み取り作業装置。
【請求項４】
前記ディスプレイの表示領域内に、それぞれに前記読み取り対象領域内の指示値の一部を表示し、全体として前記指示値を表示する複数の指示値表示領域を予め設定するとともに、前記カメラの撮影画像を表示する撮影画像表示領域を併せて設定し、
前記複数の指示値表示領域に、それぞれの領域に対応する前記指示値の一部を、前記指示値の一部の画像の認識確度に応じた表示態様で表示することを特徴とする請求項１ないし３のいずれか一項に記載のメータ読み取り作業装置。
【請求項５】
前記制御手段は、複数段階の認識状態として、前記メータ装置の種別を特定する第１の認識段階と、前記読み取り対象領域を特定する第２の認識段階と、前記読み取り対象領域の画像に基づいて前記指示値を認識する第３の認識段階と、を設定し、
前記作業支援情報に、前記第１ないし第３の各認識段階の状態の表示または次段階へのガイド情報を含めることを特徴とする請求項１ないし４のいずれか一項に記載のメータ読み取り作業装置。
【請求項６】
前記制御手段は、前記ディスプレイの表示領域内にメータ情報表示領域を設定し、
前記メータ情報表示領域内の画像に基づいて、前記読み取り対象領域の位置または前記指示値の読み取り条件を判定するとともに、
前記複数段階のうち所定段階の認識状態下で、前記作業支援情報として前記読み取り対象領域の位置または前記指示値の読み取りに関するガイド情報を出力することを特徴とする請求項１ないし５のいずれか一項に記載のメータ読み取り作業装置。
【請求項７】
前記作業支援情報の提示条件が、前記複数段階の認識状態に応じて前記スピーカから出力する音を変化させる条件を含むことを特徴とする請求項１ないし５のいずれか一項に記載のメータ読み取り作業装置。
【請求項８】
メータ装置の読み取り対象領域の画像に基づいて前記メータ装置の指示値を読み取る作業を、作業支援情報の提示によって支援しつつ実行するメータ読み取り作業方法であって、
前記メータ装置を撮影する移動可能なカメラと、前記カメラの撮影画像を表示するディスプレイと、音声を出力するスピーカと、を準備し、
前記カメラで撮影された前記読み取り対象領域の画像の複数段階の認識状態に応じて前記作業支援情報を生成し、該作業支援情報を、前記ディスプレイおよび前記スピーカのうちいずれか一方または双方から出力させることを特徴とするメータ読み取り作業方法。
【請求項９】
前記複数段階の認識状態は、前記ディスプレイに表示される前記撮影画像中に前記読み取り対象領域の画像が含まれないか所定認識確度未満である読み取り対象未確定段階と、前記ディスプレイに表示される前記撮影画像中に前記読み取り対象領域の画像が前記所定認識確度以上で含まれる読み取り対象確定段階と、を含むことを特徴とする請求項８に記載のメータ読み取り作業方法。
【請求項１０】
前記読み取り対象領域内に、それぞれに対応する前記指示値の一部を表示し、全体として前記指示値を表示する複数の指示値表示領域を予め設定するとともに、
前記読み取り対象領域の画像の認識状態に応じた作業支援情報として、前記複数の指示値表示領域の撮影画像をそれぞれ２値化した複数の分割認識状態画像を表示することを特徴とする請求項８または９に記載のメータ読み取り作業方法。
【請求項１１】
カメラ付の通信端末によってメータ装置の読み取り対象領域が所定の認識状態で撮影されたとき、前記通信端末から取得した前記読み取り対象領域の画像に基づいて前記メータ装置の指示値を読み取る読み取り装置と、
前記指示値の読み取り作業のための作業支援情報を前記通信端末に送信し、出力させる支援情報提示装置と、を備えたメータ読み取り作業支援システムであって、
前記支援情報提示装置は、
前記カメラによる撮影の開始から該撮影した画像を基に前記読み取り対象領域の画像が読み取り可能に認識されるまでの撮影画像の複数段階の認識状態に応じて、前記作業支援情報の提示条件を変化させ、
前記作業支援情報を前記通信端末に画像および音声の少なくとも一方の情報形態で送信するとともに、該作業支援情報の出力を前記複数段階の認識状態に応じて変化させることを特徴とするメータ読み取り作業支援システム。
【請求項１２】
メータ装置の読み取り対象領域の画像に基づいて前記メータ装置の指示値を読み取る作業を、作業支援情報の提示によって支援するメータ読み取り作業支援方法であって、
前記メータ装置を撮影する移動可能なカメラと、前記カメラの撮影画像を表示するディスプレイと、音声を出力するスピーカと、を準備するとともに、
前記カメラの撮影の開始から該撮影した画像を前記メータ装置の指示値を読み取り可能に認識するまでの複数段階の認識状態に応じて、前記作業支援情報の提示条件を可変に設定しておき、
前記カメラでの撮影に際して、前記作業支援情報を前記ディスプレイおよび前記スピーカのうちいずれか一方または双方から出力するとともに、該作業支援情報の出力を前記認識状態に応じて変化させることを特徴とするメータ読み取り作業支援方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、メータ読み取り作業装置および方法ならびにメータ読み取り作業支援システムに関し、特に移動式のカメラにより各種メータの撮影画像から指示値を読み取るメータ読み取り作業装置および方法ならびにメータ読み取り作業支援システムに関する。
【背景技術】
【０００２】
各種の工場やプラント等において、メータ装置の指示値（メータ値）を読み取る作業は、従来、作業員が巡回して目視確認するのが専らであったが、近時、メータ装置のカメラ撮影画像からその指示値を読み取ることで、設備の点検や監視業務の効率化を図るようにした読み取り作業装置および方法やそのようなフィールド作業の支援システムが提案されている。
【０００３】
この種のメータ読み取り作業装置および方法ならびに作業支援システムとしては、例えば撮像画像を表示する画像表示部に、その撮影画像と併せて、入力画像から認識処理の対象領域を取得するためのガイド情報を表示する一方、そのガイド情報に基づいて画像処理の対象領域を抽出する処理対象領域抽出／判定部を設けて、読み取り対象領域の画像を確実に撮影可能な操作ガイドを画像表示により提示するようにしたものが知られている（例えば、特許文献１参照）。
【０００４】
また、２次元バーコードの位置検出シンボルの検出可否によって読み取り度合いを判断し、その読み取り度合いをインジケータに反映することで、２次元バーコードからの情報読み取りが可能か否かを利用者に知らせ、インジケータを確認しながら、撮像物認識装置の位置を調整可能にするものが知られている（例えば、特許文献２参照）。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００４−２１３２１５号公報
【特許文献２】特開２００５−１２２６０９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
上述のような従来のメータ読み取り作業装置および方法ならびにメータ読み取り作業支援システムにあっては、カメラ撮影時に認識処理対象領域の形状特定を容易化するガイド表示や所定の画像読み取り度合いでの自動認識処理といった点に注目したものであったため、作業環境によっては、ガイド表示画像の視覚的な認識が容易でなかったり、読み取り対象のメータ装置の特定や作業順序の把握が難しかったりすることがあった。また、メータ読み取り作業のチェックや、作業後の報告その他の作業についても有効な作業支援を行うことができていなかった。
【０００７】
また、所定の作業手順や予定に従った読み取り対象メータの特定ができる場合でも、そのカメラ撮影時の危険予測や傷害事故の未然防止を図る機能、作業ミスや作業忘れの発生防止機能、作業内容のチェックリストや作業報告書等の成果物の生成機能等といったように、作業環境の良し悪しや現場作業者の作業スキルの程度等に応じた有効な作業支援情報を的確に提示し、カメラ撮影を伴うメータ読み取りのフィールド作業を効果的に支援することができていなかった。
【０００８】
これに対し、実際の作業現場では、作業スキルが低く、現場で使用される言語や用語等に不慣れな労働者が作業を行うケースが増えており、作業ミスや作業忘れの発生、作業中の傷害事故の発生等が懸念される。また、事故発生による社会的影響は大きく、その防止策や再発防止策としての作業品質の向上に加え、２人作業での確認、作業チェックリストや作業報告書の詳細化がより高度に要求されてきている。よって、そのような要求に十分に応え得るメータ読み取り作業方法やその支援システムの提供が望まれる。
【０００９】
本発明は、前述のような従来の課題を解消すべくなされたものであり、カメラ撮影を伴うメータ読み取り作業現場での段階的で有効な作業支援や、その作業のチェック、作業後の成果物の生成等を有効に支援することができるメータ読み取り作業装置および方法ならびにメータ読み取り作業支援システムを提供することを目的とする。
【課題を解決するための手段】
【００１０】
１）本発明に係るメータ読み取り作業装置は、上記目的達成のため、メータ装置の読み取り対象領域の画像に基づいて前記メータ装置の指示値を読み取る作業を、作業支援情報の提示によって支援しつつ実行するメータ読み取り作業装置であって、前記メータ装置を撮影するカメラと、前記カメラの撮影画像を表示するディスプレイと、音声を出力するスピーカと、前記カメラで撮影された前記読み取り対象領域の画像の複数段階の認識状態に応じた前記作業支援情報を、前記ディスプレイおよび前記スピーカのうちいずれか一方または双方から出力させる制御手段と、を備えることを特徴とするものである。
【００１１】
この構成により、本発明では、メータ装置の指示値が読み取り可能に認識されるまで、カメラ撮影画像の認識状態に応じた作業支援情報が画像表示または／および音声出力で提示されることとなる。よって、撮影条件の良くない環境下でもカメラでの撮影画像を認識率の良好な画像として取得できるようにカメラの良好な位置や姿勢、視線方向等の撮影条件等を誘導でき、メータ読み取り作業の実用性向上やメータ指示値の読み取り精度向上を図ることができる。また、例えば熟練者の作業内容を不慣れな作業者に提示することで、現場作業者の作業ミスや事故防止を図ることができ、現場作業者と管理者の２人で行っていたようなメータ読み取りおよびチェック作業と同等な作業を、自動読み取りとその読み取り結果のチェックとして１人でも実施可能となる。
【００１２】
２）本発明のメータ読み取り作業装置は、前記ディスプレイの表示領域内に、前記作業支援情報として、前記読み取り対象領域の画像が表示されるべき注目領域を特定するガイド情報を表示するガイド表示手段と、前記読み取り対象領域の画像が所定認識確度以上の画像として前記注目領域内に含まれるか否かを判定する読み取り対象抽出手段と、前記注目領域内の前記所定認識確度以上の画像から前記指示値を読み取り可能に認識する認識処理手段と、を含む構成とすることができる。
【００１３】
この構成により、カメラの撮影を注目領域に集中させた後にその撮影画像の認識確度を高めることができ、所定認識確度以上の読み取り対象領域の画像を迅速的確に撮影画像中に含めることができるようになる。
【００１４】
３）本発明のメータ読み取り作業装置は、前記ディスプレイに表示される前記撮影画像中に複数のマーカ画像を設定するマーカ設定手段と、前記ディスプレイの表示領域内に、前記作業支援情報として、前記複数のマーカ画像がそれぞれ表示されるべき複数のマーカ表示領域を特定するガイド情報を表示するガイド表示手段と、前記複数のマーカ画像の表示と前記複数のマーカ表示領域との幾何学的な対応度合いに応じて前記読み取り対象領域の画像が表示されるべき注目領域を特定するとともに、該注目領域に入った前記撮影画像の一部が前記読み取り対象領域の前記所定認識確度以上の画像か否かの判定を実行する読み取り対象抽出手段と、前記注目領域内の前記所定認識確度以上の画像から前記指示値を読み取り可能に認識する認識処理手段と、を含む構成とすることができる。
【００１５】
この場合、複数のマーカ画像がそれぞれのマーカ表示領域に表示されるか否かによって、読み取り対象領域の画像が表示されるべき注目領域の特定と、読み取り対象領域の画像が所定認識確度以上の画像として注目領域内に含まれるか否かの判定とが可能となり、比較的簡単な処理で、所定認識確度以上の読み取り対象領域の画像を迅速的確に撮影画像中に含めることができる。
【００１６】
４）本発明のメータ読み取り作業装置においては、前記ディスプレイの表示領域内に、それぞれに前記読み取り対象領域内の指示値の一部を表示し、全体として前記指示値を表示する複数の指示値表示領域を予め設定するとともに、前記カメラの撮影画像を表示する撮影画像表示領域を併せて設定し、前記複数の指示値表示領域に、それぞれの領域に対応する前記指示値の一部を、前記指示値の一部の画像の認識確度に応じた表示態様で表示するようにしてもよい。
【００１７】
この構成により、メータ装置の指示値の所定桁数ごとに指示値表示領域を設定することで、各指示値表示領域内の指示値（一部）の画像の認識確度に応じた撮影条件を設定可能となり、認識確度の低い一部の指示値画像の認識確度を高める認識処理を早期に実行可能となる。
【００１８】
５）本発明のメータ読み取り作業装置において、前記制御手段は、前記複数段階の認識状態として、前記メータ装置の種別を特定する第１の認識段階と、前記読み取り対象領域を特定する第２の認識段階と、前記読み取り対象領域の画像に基づいて前記指示値を認識する第３の認識段階と、を設定し、前記作業支援情報に、前記第１ないし第３の各認識段階の状態の表示を含める構成とすることができる。
【００１９】
この構成により、メータ装置の指示値を読み取り可能に認識するまでの第１ないし第３の各認識段階で、その認識状態の表示あるいは次段階へのガイド情報の表示が可能となり、撮影条件の良くない環境下でもカメラでの撮影画像を認識率の良好な画像として取得できる。
【００２０】
６）本発明のメータ読み取り作業装置において、前記制御手段は、前記ディスプレイの表示領域内にメータ情報表示領域を設定し、前記メータ情報表示領域内の画像に基づいて、前記読み取り対象領域の位置または前記指示値の読み取り条件を判定するとともに、前記複数段階のうち所定段階の認識状態下で、前記作業支援情報として前記読み取り対象領域の位置または前記指示値の読み取りに関するガイド情報を出力する構成とすることができる。
【００２１】
この構成により、読み取り対象領域の位置情報または指示値の読み取り条件を判定するためのメータ情報表示領域をディスプレイの表示領域内に設定しておくので、読み取り対象領域の画像の認識と併せて読み取り対象領域の位置または指示値の読み取り条件を容易に判定可能となる。
【００２２】
７）本発明のメータ読み取り作業装置においては、前記作業支援情報の提示条件が、前記複数段階の認識状態に応じて前記スピーカから出力する音を変化させる条件を含むものであってもよい。音の変化は、例えば、音の周波数または間欠出力する音の周期を変化させる条件を含むものであってもよい。
【００２３】
この場合、複数段階の認識状態の変化を、スピーカからの出力音の周波数または間欠出力音の周期の変化として容易に把握可能となる。
【００２４】
８）本発明に係るメータ読み取り作業方法は、メータ装置の読み取り対象領域の画像に基づいて前記メータ装置の指示値を読み取る作業を、作業支援情報の提示によって支援しつつ実行するメータ読み取り作業方法であって、前記メータ装置を撮影する移動可能なカメラと、前記カメラの撮影画像を表示するディスプレイと、音声を出力するスピーカと、を準備し、前記カメラで撮影された前記読み取り対象領域の画像の複数段階の認識状態に応じて前記作業支援情報を生成し、該作業支援情報を、前記ディスプレイおよび前記スピーカのうちいずれか一方または双方から出力させることを特徴とするものである。
【００２５】
この構成により、本発明では、メータ装置の指示値が読み取り可能に認識されるまで、カメラ撮影画像の認識状態に応じて、作業支援情報が画像表示または／および音声出力で提示されることとなる。よって、撮影条件の良くない環境下でもカメラでの撮影画像を認識率の良好な画像として取得できるようにカメラの良好な位置や姿勢、視線方向等の撮影条件等を誘導でき、メータ読み取り作業の実用性向上やメータ指示値の読み取り精度向上を図ることができる。また、例えば熟練者の作業内容を不慣れな作業者に提示することで、現場作業者の作業ミスや事故防止を図ることができ、現場作業者と管理者の２人で行っていたようなメータ読み取りおよびチェック作業と同等な作業を、自動読み取りとその読み取り結果のチェックとして１人でも実施可能となる。
【００２６】
９）本発明のメータ読み取り作業方法において、前記複数段階の認識状態は、前記ディスプレイに表示される前記撮影画像中に前記読み取り対象領域の画像が含まれないか所定認識確度未満である読み取り対象未確定段階と、前記ディスプレイに表示される前記撮影画像中に前記読み取り対象領域の画像が前記所定認識確度以上で含まれる読み取り対象確定段階と、を含む構成とすることができる。
【００２７】
この構成により、カメラの撮影画像中に所定認識確度以上の読み取り対象領域の画像が含まれるか否かによって、読み取り対象領域の認識状態を容易に複数段階に判別可能となる。
【００２８】
１０）本発明のメータ読み取り作業方法においては、前記読み取り対象領域内に、それぞれに対応する前記指示値の一部を表示し、全体として前記指示値を表示する複数の指示値表示領域を予め設定するとともに、前記読み取り対象領域の画像の認識状態に応じた作業支援情報として、前記複数の指示値表示領域の撮影画像をそれぞれ２値化した複数の分割認識状態画像を表示するようにしてもよい。
【００２９】
この構成により、複数の指示値表示領域のうち一部の画像が所定確度以下となった場合、その認識段階では、白抜けや黒潰れにより当該表示領域における正常な指示値が得られない２値化画像が表示され得るので、撮影画像の確度に応じた表示の変化と認識処理の結果とを共に端的に視認可能に提示できる。
【００３０】
１１）本発明に係るメータ読み取り作業支援システムは、カメラ付の通信端末によってメータ装置の読み取り対象領域が所定の認識状態で撮影されたとき、前記通信端末から取得した前記読み取り対象領域の画像に基づいて前記メータ装置の指示値を読み取る読み取り装置と、前記指示値の読み取り作業のための作業支援情報を前記通信端末に送信し、出力させる支援情報提示装置と、を備えたメータ読み取り作業支援システムであって、前記支援情報提示装置は、前記カメラによる撮影の開始から該撮影した画像を基に前記読み取り対象領域の画像が読み取り可能に認識されるまでの撮影画像の複数段階の認識状態に応じて、前記作業支援情報の提示条件を変化させ、前記作業支援情報を前記通信端末に画像および音声の少なくとも一方の情報形態で送信するとともに、該作業支援情報の出力を前記複数段階の認識状態に応じて変化させることを特徴とするものである。
【００３１】
この構成により、メータ装置の指示値を読み取り可能に認識するまで、カメラでの撮影画像の認識状態に応じた作業支援情報を提示できることから、撮影条件の良くない環境下でもカメラでの撮影画像を認識率の良好な画像として取得できるようにカメラの位置や姿勢を誘導でき、メータ読み取り作業の実用性向上やメータ指示値の読み取り精度向上を図ることができる。
【００３２】
１２）本発明に係るメータ読み取り作業支援方法は、メータ装置の読み取り対象領域の画像に基づいて前記メータ装置の指示値を読み取る作業を、作業支援情報の提示によって支援するメータ読み取り作業支援方法であって、前記メータ装置を撮影する移動可能なカメラと、前記カメラの撮影画像を表示するディスプレイと、音声を出力するスピーカと、を準備するとともに、前記カメラの撮影の開始から該撮影した画像を前記メータ装置の指示値を読み取り可能に認識するまでの複数段階の認識状態に応じて、前記作業支援情報の提示条件を可変に設定しておき、前記カメラでの撮影に際して、前記作業支援情報を前記ディスプレイおよび前記スピーカのうちいずれか一方または双方から出力するとともに、該作業支援情報の出力を前記認識状態に応じて変化させることを特徴とするものである。
【００３３】
この構成により、メータ装置の指示値を読み取り可能に認識するまで、カメラでの撮影画像の認識状態に応じた作業支援情報を提示できることから、撮影条件の良くない環境下でもカメラでの撮影画像を認識率の良好な画像として取得できるようにカメラの位置や姿勢を誘導でき、メータ読み取り作業の実用性向上やメータ指示値の読み取り精度向上を図ることができる。
【発明の効果】
【００３４】
本発明によれば、カメラ撮影を伴うメータ読み取り作業現場での段階的で有効な作業支援や、その作業のチェック、作業後の成果物の生成等を有効に支援することができるメータ読み取り作業装置および方法を提供することができる。
【図面の簡単な説明】
【００３５】
【図１】本発明に係る第１ないし第６実施形態のメータ読み取り作業方法を実施する一実施形態のメータ読み取り作業装置の概略構成図である。
【図２】本発明の一実施形態のメータ読み取り作業装置において第１実施形態のメータ読み取り作業方法を実施する場合の作業者側情報端末の正面図で、その作業者側情報端末のディスプレイに作業支援情報を表示可能な３つの注目領域を設定した画面表示状態を示している。
【図３】本発明の一実施形態のメータ読み取り作業装置において第２実施形態のメータ読み取り作業方法を実施する場合の作業者側情報端末の正面図で、その作業者側情報端末のディスプレイに作業支援情報である複数のマーカ画像とそれらによって囲まれた１つの注目領域を設定した画面表示状態を示している。
【図４】本発明の一実施形態のメータ読み取り作業装置において第３実施形態のメータ読み取り作業方法を実施する場合の作業者側情報端末の正面図で、（ａ）はその作業者側情報端末のディスプレイに読み取り対象領域のカメラ撮影画像が表示されている状態を、（ｂ）はその読み取り対象領域内のメータ指示値の認識状態を複数桁分の２値化画像で表示している状態を、それぞれ示している。
【図５】本発明の一実施形態のメータ読み取り作業装置において第４実施形態のメータ読み取り作業方法を実施する場合の作業者側情報端末の正面図で、その作業者側情報端末のディスプレイに作業支援情報である複数のマーカ画像を表示するとともに、複数のマーカ画像の重心で囲まれた撮影画像表示領域である一方の注目領域と、一方の注目領域に近接配置された認識段階および認識処理結果の表示領域である他方の注目領域とを表示する画面の表示状態を示している。
【図６】本発明の一実施形態のメータ読み取り作業装置において第５実施形態のメータ読み取り作業方法を実施する場合の作業者側情報端末の正面図で、その作業者側情報端末のディスプレイに互いに平行に離間する上下の認識状態表示領域と、上下の認識状態表示領域の間に位置する撮影画像表示領域とを表示する画面の表示状態を示している。
【図７】本発明の一実施形態のメータ読み取り作業装置において第６実施形態のメータ読み取り作業方法を実施する場合の作業者側情報端末の正面図で、その作業者側情報端末のディスプレイに傾斜した作業支援情報である複数のマーカ画像とそれらによって囲まれた１つの注目領域が同図中時計方向に傾いた同図中右側の傾斜表示状態と、その注目領域の傾きが補正された同図中左側の補正済み表示状態とを示している。
【図８】本発明の一実施形態のメータ読み取り作業装置における読み取り設定情報例を示す図表であり、（ａ）は傾き補正用のカラーマーカの認識誘導用の読み取り設定情報例を、（ｂ）は低認識状態であることの判定条件の読み取り設定情報例を、それぞれ示している。
【図９】本発明の一実施形態のメータ読み取り作業装置を用い、本発明の第１ないし第６実施形態のメータ読み取り作業方法を複数のメータ装置に順次実施する場合の説明図である。
【図１０】本発明の各実施形態において読み取り対象となるメータ装置の例を示す。
【図１１】本発明の第２実施形態のメータ読み取り作業方法における事前の設定処理を行うメータ読み取り制御装置の画面表示例を示す。
【図１２】本発明の第２実施形態のメータ読み取り作業方法における事前の設定処理を行うメータ読み取り制御装置のさらに別の画面表示例を示す
【図１３】本発明の第２実施形態のメータ読み取り作業方法において事前に行われる設定処理の説明図である。
【発明を実施するための形態】
【００３６】
以下、本発明を実施するための形態について、図面を参照しつつ説明する。
【００３７】
図１ないし図８は、本発明の第１ないし第６実施形態のメータ読み取り作業方法を実施可能な一実施形態に係るメータ読み取り作業装置を示している。
【００３８】
まず、構成について説明する。
【００３９】
図１に示す本実施形態のメータ読み取り作業装置１は、メータ読み取り作業を支援するフィールド作業支援サービスが可能な装置として構成されている。
【００４０】
このメータ読み取り作業装置１は、スマートフォンやタブレット型情報端末等の通信端末１０であり、該通信端末１０が、メータ装置Ｍｔを撮影するカメラ１１と、カメラ１１の撮影画像を表示するディスプレイ１２と、音声を出力するスピーカ１３と、メータ読み取り制御装置１５（制御手段）と、を備えている。
【００４１】
メータ読み取り作業装置１の構成としては、（１）上述したようなスマートフォンやタブレット型情報端末等のポータブルなスマートデバイスを単独で含む構成の他に、（２）スマートデバイス（スマートフォンやタブレット型情報端末）と、外部カメラ（スマートデバイスと有線あるいは無線で接続）と、を含む構成、（３）ヘッドマウントディスプレイ（ＨＭＤ）を単独で含む構成、（４）ＨＭＤ（カメラ機能のみ利用）と、スマートデバイス（スマートフォンやタブレット型情報端末）と、を含む構成、（５）ＨＭＤと、外部カメラ（ＨＭＤと有線あるいは無線で接続）と、を含む構成、（６）スマートデバイス（カメラ、ディスプレイ、スピーカ含む）と、ノート型ＰＣ（メータ読み取り制御装置含む）と、を含む構成のいずれかであってもよい。上記構成（２）や（５）の外部カメラは、高い位置や作業者の背面など、ディスプレイ表示とカメラ撮影を両立できない場合に使用するのに好都合である。
【００４２】
また、通信端末１０は、移動可能なカメラ１１とディスプレイ１２および／またはスピーカ１３とを具備するものであればよく、特定の機器に限定されるものではない。さらに、カメラ１１、ディスプレイ１２、スピーカ１３がそれぞれ単独で着用可能なウェアラブルデバイス等として構成されていてもよいし、スピーカ１３は、ワイヤレスヘッドフォンや骨伝導ヘッドフォン等でもよく、あるいは、振動や熱等を発生する他の情報伝達手段であってもよい。
以下の説明では、カメラ１１、ディスプレイ１２、スピーカ１３がそれぞれ単独で着用可能なウェアラブルデバイス等として構成されているメータ読み取り作業装置１を用いて実施形態を説明する。
【００４３】
メータ読み取り制御装置１５は、メータ読み取り部５１（認識処理手段）と、ガイド情報判定部５２（読み取り対象抽出手段）と、ガイド情報出力部５３（ガイド表示手段）と、読み取り設定情報蓄積部５４とを具備している。
【００４４】
メータ読み取り部５１は、通信端末１０のカメラ１１から画像データを受信可能な通信ポートと、カメラ１１からの画像データを受信したとき、読み取り設定情報蓄積部５４に予め記憶格納された設定情報に基づきメータ装置Ｍｔの読み取り対象領域Ｚが所定の認識状態で撮影されたか否かを判定する画像判定プログラムと、メータ装置Ｍｔの読み取り対象領域Ｚが所定の認識状態で撮影されたと判定されたとき、その受信画像データに対し所定の認識処理を実行する認識処理プログラムと、を有している。
【００４５】
このメータ読み取り部５１は、通信端末１０によってメータ装置Ｍｔの読み取り対象領域Ｚが所定の認識状態で撮影されたとき、メータ装置Ｍｔに対応する読み取り対象領域Ａ２の画像Ｐ１２を取得し、認識処理プログラムによりメータ装置Ｍｔの指示値Ｖｍ（メータ値）を読み取るようになっている。
【００４６】
ガイド情報判定部５２は、メータ読み取り部５１からの読み取り情報および読み取り設定情報蓄積部５４に予め記憶格納された設定情報に基づいて、カメラ撮影または／および撮影画像の認識状態に関連する所定のガイド情報の要否や必要なガイド情報の内容を判定する判定処理プログラムを内蔵しており、そのガイド情報に係る判定結果をガイド情報出力部５３に出力するようになっている。ここにいう所定のガイド情報とは、カメラ１１によるメータ読み取り作業のための撮影に有用な複数種別のガイド情報であり、カメラ撮影画像の認識確度その他の認識状態の表示や音声出力に関連する情報を含んでいる。なお、ここにいう認識確度とは、画像認識結果の確からしさの程度であり、尤度や確率とも考えることもできる。
【００４７】
ガイド情報出力部５３は、ガイド情報判定部５２からその判定結果に応じて出力されるガイド情報や画像の認識状態の表示等に関連する設定情報を、その画面表示が可能な画像信号形態および／または音声出力が可能な信号形態に変換して、ディスプレイ１２およびスピーカ１３のうち少なくとも一方から情報出力させるようになっている。
【００４８】
ガイド情報出力部５３は、また、ガイド情報判定部５２および読み取り設定情報蓄積部５４と協働して、カメラ撮影を伴うメータ読み取り作業現場での段階的な作業のチェックシートや、その作業後の成果物であるレポート等を生成し出力する機能を発揮するようにプログラムされている。
【００４９】
読み取り設定情報蓄積部５４は、通信端末１０によりメータ装置Ｍｔの読み取り対象領域Ｚが所定の認識状態で撮影されたか否かをメータ読み取り部５１にて判定するために必要な設定情報と、メータ読み取り部５１からの読み取り情報に基づきカメラ撮影または／および撮影画像の認識状態に関連する所定のガイド情報の要否を判定したり必要なガイド情報の内容を判定したりするための設定情報を、予めの設定情報入力により取り込み、記憶保存するストレージデバイスで構成されている。
【００５０】
また、メータ読み取り制御装置１５は、上述したようにスマートフォンやタブレット型情報端末等の通信端末１０に含まれるが、この構成に限定されず、通信端末１０とデータ通信が可能で持ち運び可能な可搬型のもので、例えば通信端末１０との近距離無線通信が可能なノート型ＰＣで構成されていてもよい。また、メータ読み取り制御装置１５は、スマートフォンやタブレット型情報端末等の通信端末１０に対し閉域網内での無線通信が可能なデータベースサーバ等によって構成されてもよい。このように、メータ読み取り作業装置１を構成するマートフォンやタブレット型情報端末等の通信端末１０とは別体で、通信端末１０と通信接続されたメータ読み取り制御装置１５を備えたものをメータ読み取り作業システムともいう。
【００５１】
このメータ読み取り制御装置１５は、カメラ１１による撮影画像が受信されると、メータ装置Ｍｔの指示値Ｖｍの読み取り作業のための作業支援情報を通信端末１０に送信し、そのディスプレイ１２やスピーカ１３から出力させる支援情報提示装置となっている。
【００５２】
メータ読み取り作業装置１は、また、メータ装置Ｍｔの読み取り対象領域Ｚが通信端末１０のカメラ１１で撮影されディスプレイ１２に表示されるとき、メータ読み取り制御装置１５によって、ディスプレイ１２上の表示領域Ａ１に表示される複数種の画像Ｐ１１、Ｐ１２等、特にメータ装置Ｍｔの読み取り対象領域Ｚに対応するディスプレイ１２上の読み取り対象領域Ａ２の画像Ｐ１２に基づき、現場作業者がメータ装置Ｍｔの指示値Ｖｍを読み取る作業（典型的には、検針作業）を作業支援情報の提示によって支援しつつ実行するようになっている。この場合の作業支援情報は、表示領域Ａ１内の複数の注目領域Ｒ１１，Ｒ２１およびＲ２２内に表示されるそれぞれの領域内の画像Ｐ１１，Ｐ２１等である。
【００５３】
この作業支援情報の生成のために、メータ読み取り制御装置１５の読み取り設定情報蓄積部５４には、複数種のメータ装置Ｍｔについてのメータ読み取り作業を作業支援情報を提示しつつ実行するための複数（例えば、第１ないし第６）の作業支援プログラムと、それぞれの作業支援プログラムに用いるメータ装置Ｍｔ毎のＣＳＶ形式のパラメータ設定ファイル等が記憶格納されている。
【００５４】
そして、メータ読み取り制御装置１５は、作業支援プログラムを実行し、カメラ１１による撮影画像が受信されると、まず、表示領域Ａ１の上部側で注目領域Ｒ１１の略四角形の輪郭を赤線等で強調表示するガイド情報Ｇ１１を表示して、メータ装置Ｍｔに予め貼られた所定の個体識別コード、例えばＱＲコード（登録商標）等の二次元コードを注目領域Ｒ１１内に映し出す撮影操作によってコードスキャンをうながすようになっている。
【００５５】
このコードスキャンは、例えば二次元コードの画像Ｐ１１の隅部の形状パターンをパターンマッチングにより検出し、公知の二次元コードスキャン処理を実行することでなされる。ここでの個体識別コードは、カラーコードやバーコードその他の識別コードであってもよい。
【００５６】
メータ装置Ｍｔに予め貼られたその個体識別コードがカメラ１１で撮影されてコードスキャンされたとき、メータ読み取り制御装置１５は、その個体識別コードに対応する読み取り設定情報蓄積部５４内の設定情報に基づいてメータ装置Ｍｔの読み取り対象領域Ａ２の画像Ｐ１２や検針対象の指示針の画像Ｐ２１を特定する。その際、その画像Ｐ１２、Ｐ２１に対応する目盛等のガイド情報Ｇ１２、Ｇ１３，Ｇ１４を特定する設定情報抽出処理を実行してもよい。
【００５７】
必要に応じて付与されるガイド情報Ｇ１２、Ｇ１３，Ｇ１４は、例えばアナログメータであれば、最小値指示位置と最大値指示位置、中央値指示位置、区切り位置、針の色や本数等であり、デジタルメータであれば、表示エリア、表示値の桁数、小数点位置等である。
【００５８】
メータ読み取り制御装置１５は、ガイド情報Ｇ１１で示す第１の注目領域Ｒ１１内に入った二次元コードの画像Ｐ１１と、第２の注目領域Ｒ２１内に表示されている読み取り対象領域Ａ２の画像Ｐ１２と、第３の注目領域Ｒ２２内に表示される文字情報等とを選択的に単独でまたは組み合わせて表示出力することにより、カメラ１１の撮影画像から指示値の読み取りが可能となるまでの複数段階の画像認識状態の変化を、ディスプレイ１２の表示内容の変化やスピーカ１３の音声出力内容等によって、作業者が認識できるように提示させることができる。
【００５９】
すなわち、メータ読み取り制御装置１５は、作業支援情報の提示をディスプレイ１２およびスピーカ１３のうちいずれか一方または双方から出力させる制御手段となっている。
【００６０】
より具体的には、メータ読み取り制御装置１５は、第１の注目領域Ｒ１１内に二次元コードの画像Ｐ１１がコードスキャン可能に入るまでの段階と、注目領域Ｒ１１内に二次元コードの画像Ｐ１１がコードスキャン可能に入るとともに読み取り対象領域Ａ２の画像Ｐ１２が第２の注目領域Ｒ２１内に表示される段階と、カメラ１１の撮影範囲の適否やカメラ１１の視線方向を移動させるべき方向、認識確度その他の認識状態の表示等の形で、複数の画像Ｐ１１，Ｐ１２の認識状態に応じた作業支援情報を第３の注目領域Ｒ２２内に文字等で表示しながら、カメラ１１の撮影画像が指示値の読み取りが可能な状態となるのを待つ段階と、を区別可能な作業支援情報の提示を行うことができる。
【００６１】
第１の注目領域Ｒ１１内に二次元コードの画像Ｐ１１がコードスキャン可能に入るまでの段階では、二次元コードの画像Ｐ１１が位置、サイズ、傾きに関して第１の注目領域Ｒ１１に合致しているほど、読み取り対象領域Ａ２の画像Ｐ１２（メータ画像）が、メータ読み取り設定時に想定していた画像内位置に合っているので、メータ読み取りの認識確度が高くなる。第１の注目領域Ｒ１１内に二次元コードの画像Ｐ１１がコードスキャン可能に入るまでの段階を作業者に知らせることで、作業者はメータ読み取りの認識確度を迅速に高めることができる。その際、二次元コードの画像Ｐ１１が、位置、サイズ、傾きに関して第１の注目領域Ｒ１１に合致している度合を、作業支援情報として提示するようにしてもよい。
【００６２】
メータ読み取り作業装置１の通信端末１０およびメータ読み取り制御装置１５は、図２に示すような画面表示形態で画像認識状態に応じた段階的なガイド表示を行う第１の作業支援プログラムのみならず、メータＭｔの種別に応じ、図３ないし図５に示すような複数の表示形態でそれぞれの画像認識状態に応じた段階的なガイド表示を実行できるようになっており、そのために、読み取り設定情報蓄積部５４には、第２ないし第６の作業支援プログラムが記憶格納されている。
【００６３】
具体的には、メータ読み取り作業装置１の通信端末１０およびメータ読み取り制御装置１５が第２の作業支援プログラムを実行する場合、図３に示すように、メータ読み取り制御装置１５のガイド情報出力部５３は、ディスプレイ１２の表示領域Ａ１内に、作業支援情報として、読み取り対象領域Ａ２の画像Ｐ１２が表示されるべき注目領域Ｒ２１を特定するマーカ表示エリアのガイド情報Ｇ２１−Ｇ２４を表示させるガイド表示手段の機能を有する。
【００６４】
この場合、メータ読み取り制御装置１５のメータ読み取り制御装置１５は、注目領域Ｒ２１内に映し出された読み取り対象領域Ａ２の画像Ｐ１２が所定認識確度以上の画像か否かを判定する読み取り対象抽出手段として機能し、メータ読み取り部５１は、注目領域Ｒ２１内の所定認識確度以上の画像から指示値Ｖｍを読み取り可能に認識する認識処理手段として機能する。
【００６５】
メータ読み取り作業装置１の通信端末１０およびメータ読み取り制御装置１５が第３の作業支援プログラムを実行する場合、図４（ａ）および図４（ｂ）のそれぞれに示すように、メータ読み取り制御装置１５は、読み取り設定情報蓄積部５４内に、ディスプレイ１２の表示領域Ａ１内に表示される撮影画像中に所定形状の複数の色付きのマーカ画像Ｍ２１−Ｍ２４を読み取り設定情報の一部として設定するよう、読み取り設定情報作成部５５（マーカ設定手段）を有している。
【００６６】
ここで、図４（ａ）は、読み取り対象領域Ａ２の画像Ｐ３０を二値化（白黒）処理してライブビュー表示しているものを例示しており、図４（ｂ）は、読み取り対象領域Ａ２の画像Ｐ３０が指示値Ｖｍの背景を所定桁数毎に分割して複数の指示値表示領域Ｐ３１−Ｐ３４としたものを例示している。
【００６７】
図４（ａ）に示す前者の場合、メータ読み取り制御装置１５のガイド情報出力部５３は、ディスプレイ１２の表示領域Ａ１内に、作業支援情報として、複数のマーカ画像Ｍ２１−Ｍ２４がそれぞれ表示されるべき複数のマーカ表示領域を特定するガイド情報Ｇ２１−Ｇ２４を表示するガイド表示手段の機能を有している。また、ガイド情報判定部５２は、複数のマーカ画像Ｍ２１−Ｍ２４の表示と複数のマーカ表示領域を示すガイド情報Ｇ２１−Ｇ２４との幾何学的な対応度合いに応じて、読み取り対象領域の画像Ｐ３０が表示されるべき注目領域Ｒ２１を特定するとともに、その注目領域Ｒ２１に入った撮影画像の一部が読み取り対象領域（Ａ２）の所定認識確度以上の画像であるか否かの判定を実行する読み取り対象抽出手段の機能を有している。さらに、メータ読み取り部５１は、注目領域Ｒ２１内の所定認識確度以上の画像Ｐ３０から指示値Ｖｍを読み取り可能に認識する認識処理手段の機能を有している。
【００６８】
図４（ｂ）に示す後者の場合、メータ読み取り制御装置１５は、読み取り設定情報蓄積部５４内に、前述の読み取り設定情報作成部５５（マーカ設定手段）を有している。このメータ読み取り制御装置１５は、ディスプレイ１２の表示領域Ａ１内に、それぞれに読み取り対象領域Ａ２内の指示値の一部を表示し、全体としては指示値Ｖｍを表示する複数の指示値表示領域Ｐ３１−Ｐ３４を予め設定するとともに、カメラ１１の撮影画像を表示する撮影画像表示領域Ｒ２１を併せて設定している。
【００６９】
そして、メータ読み取り制御装置１５のガイド情報出力部５３は、複数の指示値表示領域Ｐ３１−Ｐ３４のそれぞれに、各領域に対応する指示値の一部を、その指示値の一部の画像の認識確度に応じた表示態様で表示するようになっている。
【００７０】
具体的には、図４（ｂ）に示すように、読み取り対象領域Ａ２の４桁の指示値表示領域Ｐ３１−Ｐ３４のうち３桁目の指示値表示領域Ｐ３３で数字がつぶれており、その桁位置について的確な指示値読み取りができない場合、この３桁目の２値化画像表示が部分的に白抜けあるいは黒潰れが生じて正常な数値表示とならないのに対して、他の桁位置の２値化画像表示が正常な数値表示となる。この場合、カメラ１１の撮影方向のずれの影響が数値表示形状によって相違することや、３桁目について汚れの付着や影、映り込み等の可能性があることが考えられるため、注目領域Ｒ２２内にそのような点を指摘するメッセージをガイド情報として表示することができる。
【００７１】
これに対し、図４（ａ）に示すように、カメラ１１の撮影画像のうち読み取り対象領域Ａ２の画像Ｐ３０を二値化（白黒）処理してディスプレイ１２の注目領域Ｒ２１内にライブビュー表示するとともに、各表示桁範囲内の画像認識または／および文字認識処理の結果に応じて、注目領域Ｒ２２内にメッセージをガイド情報として表示することができる。
【００７２】
一方、メータ読み取り作業装置１の通信端末１０およびメータ読み取り制御装置１５が図５に示すような表示態様で第４の作業支援プログラムを実行する場合、メータ読み取り制御装置１５は、前述の読み取り設定情報作成部５５（マーカ設定手段）を有する。
【００７３】
図５に示すように、ここでの読み取り対象領域Ａ２の画像Ｐ３０は、注目領域Ｒ２２内に指示値Ｖｍの背景を一体に表示するライブビュー画像として表示される一方、表示領域Ａ１内で注目領域Ｒ２１より上方側に位置する注目領域Ｒ４１内には、読み取り対象領域Ａ２の画像Ｐ４０を文字認識処理して読み取った桁毎の数値、あるいは文字認識処理中を示す回転矢印表示が桁毎に表示されるようになっている。
【００７４】
この場合、メータ読み取り制御装置１５は、ディスプレイ１２の表示領域Ａ１内に、作業支援情報として、複数のマーカ画像Ｍ２１−Ｍ２４および複数のマーカ表示領域を特定するガイド情報Ｇ２１−Ｇ２４を表示するガイド表示手段の機能と、表示領域Ａ１内で上方側の注目領域Ｒ４１内に、それぞれに読み取り対象領域Ａ２内の指示値の一部を表示し、全体として指示値Ｖｍを表示する複数の指示値表示領域Ｐ４１−Ｐ４４を設定するとともに、カメラ１１の撮影画像を表示する撮影画像表示領域Ｒ２１を併せて設定し、複数の指示値表示領域Ｐ４１−Ｐ４４に、それぞれの領域に対応する指示値Ｖｍの一部を、その一部の画像の認識確度に応じた表示態様で表示するようになっている。
【００７５】
この場合も、読み取り対象領域Ａ２の４桁の指示値表示領域Ｐ４１−Ｐ４４のうち３桁目、４桁目の指示値表示領域Ｐ４３、Ｐ４４で数字がつぶれており、その桁位置について的確な指示値読み取りができないため、この３桁目、４桁目の認識処理結果を示す指示値表示領域Ｐ４３、Ｐ４４には、文字認識処理中を示す回転矢印表示が桁毎に表示される。
【００７６】
また、メータ読み取り作業装置１の通信端末１０およびメータ読み取り制御装置１５が図６に示すような表示態様で第５の作業支援プログラムを実行する場合、メータ読み取り制御装置１５は、前述の読み取り設定情報作成部５５（マーカ設定手段）を有する。
【００７７】
図６に示すように、この場合の読み取り対象領域Ａ２の画像Ｐ１２は、上方側の注目領域Ｒ５１と下方側の注目領域Ｒ２２とで挟まれた、注目領域Ｒ２１内に指示値Ｖｍの背景を一体に表示するアナログメータのライブビュー画像として表示されている。
【００７８】
メータ読み取り制御装置１５は、表示領域Ａ１内で上方側に位置する注目領域Ｒ５１内に、読み取り対象領域Ａ２の画像Ｐ１２から長短２種類のメータ指示針Ｐｔ１、Ｐｔ２の輪郭を認識処理して読み取り、その針毎の指示値の表示領域Ｐ５１，Ｐ５２（同図中の「メータ１」、「メータ２」）に、それぞれの指示値を読み取り値または「認識中」の語で表示するようになっている。
【００７９】
ここで、上方側の注目領域Ｒ５１内の２つの表示領域Ｐ５１、Ｐ５２は、それぞれにメータ読み取り対象領域Ａ２内の指示値の一部である各指示針を表示し、全体として２針の指示値Ｖｍを表示するように設定されており、カメラ１１の撮影画像をライブビュー表示する撮影画像表示領域Ｒ２１を併せて設定することで、複数の指示値表示領域Ｐ５１、５２に、それぞれ対応する指示針Ｐｔ１またはＰｔ２の指示値の一部を、その一部の画像の認識確度に応じた表示態様で表示するようになっている。
【００８０】
この場合も、例えば読み取り対象領域Ａ２の指示針Ｐｔ１、Ｐｔ２のうち片方Ｐｔ２の輪郭形状が把握できない場合、その指示針について的確な指示値読み取りができないことが生じ得る。
【００８１】
メータ読み取り作業装置１の通信端末１０およびメータ読み取り制御装置１５が図７に示すような表示態様で第６の作業支援プログラムを実行する場合、メータ読み取り制御装置１５は、前述の読み取り設定情報作成部５５（マーカ設定手段）を有する。
【００８２】
読み取り設定情報蓄積部５４に記憶させる読み取り設定情報の例を図８（ａ）および図８（ｂ）に例示している。
【００８３】
本実施形態のメータ読み取り作業装置１においては、図８（ａ）に示すように、メータＩＤ「ｍ００１」について傾き補正用の４つのカラーマーカのそれぞれの中心点、例えば画面上の重心の座標（Ｘ１，Ｙ１）、（Ｘ２，Ｙ２）、（Ｘ３，Ｙ３）、（Ｘ４，Ｙ４）とする。また、マーカ色を「赤」とする。
【００８４】
本実施形態では、傾き補正用のマーカは４個であるが、個数は４に限定されず、複数個あればよく、２個、３個、或いは５個以上であってもよい。また、本実施形態における傾き補正用のマーカは、メータ装置Ｍｔに貼り付けた四角いシールを想定しているが、これに限定されず、例えば、表示領域Ａ１の注目領域Ｒ１１に表示された二次元バーコード（ＱＲコード（登録商標））の４角であってもよいし、あるいはメータ装置Ｍｔにおいて一意的に特定可能な任意の箇所であってもよい。
【００８５】
また、本実施形態では、傾き補正用に複数個のマーカを用いているが、これに限定されず、特定の物（例えばメータ装置Ｍｔ）の輪郭を利用して画像の傾き補正を行ってもよい。この場合には、設定時にメータ装置Ｍｔの形状等の輪郭を抽出、記憶しておき、この輪郭とメータ読み取り時に抽出したメータ装置Ｍｔの輪郭とを比較し、その輪郭のずれから画像の傾き補正を行うようにしてもよい。この方式の場合は、設定時とメータ読み取り時の特定対象物の輪郭の一致時、ずれの大きさを基に作業者をガイドする。
【００８６】
また、図８（ｂ）に示すように、メータＩＤ「ｍ００１」について傾き補正用の４つのカラーマーカのそれぞれの中心点、例えば画面上の重心の座標（Ｘ１，Ｙ１）、（Ｘ２，Ｙ２）、（Ｘ３，Ｙ３）、（Ｘ４，Ｙ４）とする。また、マーカ色を「赤」とするとともに、メータ桁数を４桁とする。また、映り込み、低照度、低コントラスト、白飛び、黒潰れ等によって文字認識できないことを桁毎に判定するための判定閾値（認識確度等）等が設定されている。
【００８７】
次に、前述の第１ないし第６の作業支援プログラムを実行することでなされる本発明に係るメータ読み取り作業方法の第１ないし第６実施形態について説明する。
【００８８】
以下に説明する第１ないし第６実施形態のメータ読み取り作業方法は、説明の便宜上、図９に示すような複数のメータ装置Ｍｔ１ないしＭｔ１２の指示値の読み取り作業を、予め作成されて読み取り設定情報蓄積部５４に記憶格納された作業手順書に従って行う際に、順次実行されるものとする。
【００８９】
（メータ読み取り作業方法の第１実施形態）
図２および図９に示すように、第１実施形態のメータ読み取り作業方法は、メータ装置Ｍｔ１の撮影画像を映すディスプレイ１２上の表示領域Ａ１内で、ディスプレイ１２上の読み取り対象領域Ａ２の画像Ｐ１２に基づいてメータ装置Ｍｔ１の指示値Ｖｍを読み取る作業を、作業支援情報Ｇ１１等の提示によって支援しつつ実行するものである。
【００９０】
具体的には、まず、メータ装置Ｍｔを撮影する移動可能なカメラ１１と、カメラの撮影画像を表示するディスプレイ１２と、音声を出力するスピーカ１３と、をそれぞれ準備する。
【００９１】
次いで、カメラ１１で撮影された読み取り対象領域Ａ２の画像Ｐ１２または／および注目領域Ｒ１１の画像Ｐ１１の複数段階の認識状態に応じて、最上段の注目領域Ｒ１１内に二次元バーコードの画像Ｐ１１を映し出させた後、中段の注目領域Ｒ２１内にメータ読み取り対象領域の画像Ｐ１２、および必要に応じてガイド情報Ｇ１２−Ｇ１４を表示させ、さらに、下段の注目領域Ｒ２２内に画像Ｐ１１、Ｐ１２の認識状態、特にその認識確度に応じて、その認識状態に対応する作業支援情報として予め設定されている作業支援情報を、ディスプレイ１２およびスピーカ１３のうちいずれか一方または双方から出力させる。
【００９２】
したがって、本実施形態では、複数段階の認識状態が、ディスプレイ１２に表示される撮影画像中に読み取り対象領域Ａ２または／および注目領域Ｒ１１の画像Ｐ１２または／およびＰ１１が含まれないか所定認識確度未満である読み取り対象未確定段階と、ディスプレイ１２に表示される撮影画像中に読み取り対象領域Ａ２の画像Ｐ１２が所定認識確度以上で含まれる読み取り対象確定段階と、を含む作業手順となる。
【００９３】
また、本実施形態における複数段階の認識状態は、メータ装置Ｍｔの種別を特定する第１の認識段階と、読み取り対象領域Ａ２を特定する第２の認識段階と、読み取り対象領域Ａ２の画像に基づいて指示値Ｖｍを認識する第３の認識段階と、を含んだ作業手順となり、作業支援情報が、第１ないし第３の各認識段階の状態の表示または次段階へのガイド情報の表示を含むものとなる。
【００９４】
より具体的には、ディスプレイ１２上の表示領域Ａ１内で、まず、第１の注目領域Ｒ１１内に二次元コードの画像Ｐ１１がコードスキャン可能に映し出されるまでの撮影前段階では、第１の注目領域Ｒ１１内に画像は表示されず、第２の注目領域Ｒ２１内には読み取り対象領域Ａ２からはずれた撮影画像が単に表示される。
【００９５】
カメラ１１での撮影が開始される段階に入ると、注目領域Ｒ１１内に二次元コードの画像Ｐ１１がコードスキャン可能に入るとともに、読み取り対象領域Ａ２の画像Ｐ１２が第２の注目領域Ｒ２１内に表示される状態になるようカメラ撮影操作がなされる。
【００９６】
この撮影開始段階では、カメラ１１の撮影範囲の適否や、カメラ１１の視線方向を移動させるべき方向、認識確度その他の認識状態の表示等の形で、複数の画像Ｐ１１，Ｐ１２の認識状態に応じた作業支援情報を第３の注目領域Ｒ２２内に文字等で表示する。
【００９７】
このような作業支援情報により、撮影開始から所定認識確度での認識画像の取得段階までの間、現場作業者は、カメラ１１の撮影画像が指示値Ｖｍの読み取りが早期に可能な状態となるように、ガイド情報に基づいてカメラ１１の位置や姿勢その他の撮影条件や環境条件を変化させ、認識画像を早期に取得することができる。
【００９８】
（メータ読み取り作業方法の第２実施形態）
図３に示す表示形態で実行される第２実施形態のメータ読み取り作業方法では、予めの設定処理で、図１１ないし図１３に示すように、メータ装置Ｍｔ（例えば、Ｍｔ３）の正常な撮影画像を解析して、カメラ１１の撮影画像中における読み取り対象領域Ａ２やその近傍領域、メータ装置Ｍｔの指示針の輪郭や背景色の相違、目盛表示、メモリ値表示、メータ装置Ｍｔ個体識別記号、型式表示その他の特徴パターンを抽出しておき、カメラ１１の撮影画像中の特徴パターンを基準として読み取り対象領域Ａ２および複数のマーカ画像Ｍ２１−Ｍ２４の位置を特定しておく（マーカ設定段階）。
【００９９】
例えば、図１１に示すような複数針のメータ装置Ｍｔ３の場合、針数が２であること、小数点以下の桁数が２桁であること、最小値が０、最大値が６、２針の各針画像Ｐ２１，Ｐ２２の色等が、設定値情報として予め登録され、ＣＳＶファイル等のファイル形式で設定情報ファイルとして記憶保存される。また、図１２に示すように、マーカＭ２１−Ｍ２３等を設定しておき、マーカの色や数、撮影画像の表示位置の補正手順等を設定しておくこともできる。
【０１００】
次いで、ディスプレイ１２の表示領域Ａ１内に、複数のマーカ画像Ｍ２１−Ｍ２４がそれぞれ表示されるべき複数、例えば４つのマーカ表示領域を特定するガイド情報Ｇ２１−Ｇ２４を表示する（ガイド表示段階）。
【０１０１】
次いで、カメラ１１の撮影状態に応じてその撮影画像中の複数のマーカ画像Ｍ２１−Ｍ２４を特定して表示領域Ａ１内に表示させ、複数のマーカ画像Ｍ２１−Ｍ２４の表示とガイド情報Ｇ２１−Ｇ２４に対応する複数のマーカ表示領域との幾何学的な対応度合いに応じて、読み取り対象領域の画像Ｐ１２が表示されるべき注目領域Ｒ２１を特定する。
【０１０２】
ここにいう「幾何学的な対応度合い」とは、例えば幾何学的な一致率が所定範囲内に入り、実質的に複数のマーカ画像Ｍ２１−Ｍ２４の表示とガイド情報Ｇ２１−Ｇ２４に対応する複数のマーカ表示領域とが重なる状態であるが、必ずしも一致する必要はなく、双方の重心間距離の大小に応じて異なるガイド情報を提示することも可能である。
【０１０３】
注目領域Ｒ２１の特定に次いで、注目領域Ｒ２１に入った撮影画像の一部が読み取り対象領域Ａ２の所定認識確度以上の画像Ｐ１２か否かの判定を実行する読み取り対象抽出を実行する。
【０１０４】
ここでの認識確度は、例えば数のマーカ画像Ｍ２１−Ｍ２４の重心位置とガイド情報Ｇ２１−Ｇ２４に対応する複数のマーカ表示領域の重心位置との一致度合い、あるいは、相対距離の小ささを段階的に評価したものであってもよい。
【０１０５】
次いで、注目領域Ｒ２１に入った撮影画像の一部が読み取り対象領域Ａ２の所定認識確度以上の画像Ｐ１２であると判定されたとき、その所定認識確度以上の画像Ｐ１２から指示値Ｖｍを読み取り可能に認識する認識処理を実行し、指示針の画像Ｐ２１の先端の指示値Ｖｍを読み取る。
【０１０６】
（メータ読み取り作業方法の第３実施形態）
図４に示す表示形態で実行される第３実施形態のメータ読み取り作業方法では、まず、カメラ１１の撮影画像および作業支援情報を表示可能なディスプレイ１２を準備し、そのディスプレイ１２の表示領域Ａ１内に、それぞれに読み取り対象領域Ａ２内の指示値の一部を表示し、全体として指示値Ｖｍを表示する複数の指示値表示領域Ｐ３１−Ｐ３４を予め設定する。
【０１０７】
また、カメラ１１の撮影画像を表示する撮影画像表示領域Ｒ２１を併せて設定し、複数の指示値表示領域Ｐ３１−Ｐ３４に、それぞれの領域に対応する指示値の一部を、指示値の一部の各画像Ｐ３１−Ｐ３４の認識確度に応じた表示態様で表示する。
【０１０８】
この場合、桁毎に読み取り結果を表示出力し、一度読み取った桁でも、より認識確度の高い結果が出た場合は、上書きしてもよい。
【０１０９】
また、認識確度の違いを、フォントや背景色の違いとして表示出力してもよい。
【０１１０】
注目領域Ｒ２１をライブビュー画像の表示領域とし、その撮影画像表示領域Ｒ２１内に図４（ａ）に示すように、読み取り対象領域Ａ２内の画像Ｐ３０を一体画像として表示することもできるし、図４（ｂ）に示すように、読み取り対象領域Ａ２内の複数の指示値表示領域の画像Ｐ３１−Ｐ３４として表示出力することもできる。
【０１１１】
このとき、複数の指示値表示領域Ｐ３１−Ｐ３４に、それぞれの領域に対応する指示値の一部を、指示値の一部の画像の認識確度に応じた表示態様で表示出力でき、読み取り桁位置での読み取り値の表示出力と認識できなかった桁位置での未確定表示の出力とを併せて表示出力することもできる。また、このとき、複数の指示値表示領域Ｐ３１−Ｐ３４の表示画像自体の相違として現れる作業支援情報は、前述の第１ないし第３の各認識段階の状態の表示または次段階へのガイド情報の表示を含むものとなる。
【０１１２】
（メータ読み取り作業方法の第４実施形態）
図５に示す表示形態で実行される第４実施形態のメータ読み取り作業方法では、まず、ディスプレイ１２の表示領域Ａ１内に、複数のマーカ画像Ｍ２１−Ｍ２４がそれぞれ表示されるべき複数、例えば４つのマーカ表示領域を特定するガイド情報Ｇ２１−Ｇ２４を表示する（ガイド表示段階）。
【０１１３】
次いで、カメラ１１の撮影状態に応じてその撮影画像中の複数のマーカ画像Ｍ２１−Ｍ２４を特定して表示領域Ａ１内に表示させ、複数のマーカ画像Ｍ２１−Ｍ２４の表示とガイド情報Ｇ２１−Ｇ２４に対応する複数のマーカ表示領域との幾何学的な対応度合いに応じて、読み取り対象領域の画像Ｐ３０およびリアル表示側の注目領域Ｒ２１および認識結果側の注目領域Ｒ４１を特定する。
【０１１４】
例えば、複数のマーカ画像Ｍ２１−Ｍ２４がガイド情報Ｇ２１−Ｇ２４に対応する複数のマーカ表示領域に表示されるか否かによって、読み取り対象領域Ａ２の画像Ｐ３０が表示されるべき注目領域Ｒ２１を特定するとともに、読み取り対象領域Ａ２の画像Ｐ３０が所定認識確度以上の複数の桁画像Ｐ４１−Ｐ４４またはその数値の認識情報として注目領域Ｒ４１内に表示され得るか否かの判定とを実行する（読み取り対象抽出段階）。
【０１１５】
このとき、読み取り対象領域Ａ２の画像Ｐ３０は、注目領域Ｒ２１内に指示値Ｖｍの背景と一体に表示するライブビュー画像として表示する。
【０１１６】
認識結果側の注目領域Ｒ４１内には、読み取り対象領域Ａ２の画像Ｐ３０を文字認識処理した結果に応じて、読み取った桁毎の数値、あるいは文字認識処理中を示す回転矢印表示を桁毎に表示する。
【０１１７】
この場合、ディスプレイ１２の表示領域Ａ１内に作業支援情報として表示される複数のマーカ画像Ｍ２１−Ｍ２４および複数のガイド情報Ｇ２１−Ｇ２４は、表示領域Ａ１内で上方側の注目領域Ｒ４１内に、それぞれに読み取り対象領域Ａ２内の指示値の一部を表示し、全体として指示値Ｖｍを表示する複数の指示値表示領域Ｐ４１−Ｐ４４を設定可能にする基準位置を特定するものとなる。
【０１１８】
そして、リアルビュー表示側の注目領域Ｒ２１と、認識結果側の複数の指示値表示領域Ｐ４１−Ｐ４４を表示する注目領域Ｒ４１とを併用することから、撮影画像の認識状態をその認識確度に応じてより的確に表示可能となる。
【０１１９】
（メータ読み取り作業方法の第５実施形態）
図６に示す表示形態で実行される第５実施形態のメータ読み取り作業方法では、まず、ディスプレイ１２の表示領域Ａ１内に、上方側の注目領域Ｒ５１と、下方側の注目領域２２と、これら双方に挟まれた中段の注目領域Ｒ２１とを設定しておき、カメラ１１での画像撮影時に、その注目領域Ｒ２１内に読み取り対象領域Ａ２の画像Ｐ１２をライブビュー画像として表示する。
【０１２０】
次いで、表示領域Ａ１内で上方側に位置する注目領域Ｒ５１内に、読み取り対象領域Ａ２の画像Ｐ１２から長短２種類のメータ指示針Ｐｔ１、Ｐｔ２の輪郭を検出する処理を実行して、それぞれの指示値を表示領域Ｐ５１，Ｐ５２に読み取り値または「認識中」の語で表示する。
【０１２１】
図６の表示例では、読み取り対象領域Ａ２の指示針Ｐｔ１、Ｐｔ２のうち片方Ｐｔ２の輪郭形状が未認識の状態となっているので、この段階では、表示領域Ｐ５２に「認識中」の文字表示がなされるのと併せて、下方側の注目領域Ｒ２２に認識結果待ちであることを表示する。
【０１２２】
本実施形態においても、２つの表示領域Ｐ５１、Ｐ５２が全体として２針の指示値Ｖｍを数値表示するとともに、撮影画像表示領域としての注目領域Ｒ２１にカメラ１１の撮影画像をライブビュー表示するので、指示針Ｐｔ１またはＰｔ２の指示値Ｖｍの画像の認識確度をその認識確度に応じてより的確に表示可能となる。
【０１２３】
（メータ読み取り作業方法の第６実施形態）
図７に示す表示形態で実行される第６実施形態のメータ読み取り作業方法では、まず、ディスプレイ１２の表示領域Ａ１内に、複数のマーカ画像Ｍ２１−Ｍ２４がそれぞれ表示されるべき複数のマーカ表示領域を特定するガイド情報Ｇ２１−Ｇ２４を表示する。
【０１２４】
次いで、カメラ１１の撮影状態に応じてその撮影画像中の複数のマーカ画像Ｍ２１−Ｍ２４を特定して表示領域Ａ１内に表示させ、複数のマーカ画像Ｍ２１−Ｍ２４の表示とガイド情報Ｇ２１−Ｇ２４に対応する複数のマーカ表示領域との幾何学的な対応度合いに応じて、読み取り対象領域の画像Ｐ３０が表示されるべき注目領域Ｒ２１を特定する。
【０１２５】
次いで、ディスプレイ１２の表示領域Ａ１内に表示されるガイド情報Ｇ２１−Ｇ２４で特定される複数のマーカ表示領域に対し、カメラ１１で撮影されディスプレイ１２の表示領域Ａ１内に表示される複数のマーカ画像Ｍ２１−Ｍ２４の幾何学的なずれ量を算出する。
【０１２６】
すなわち、設定時に表示領域Ａ１内の複数のマーカ表示領域として設定されたガイド情報Ｇ２１−Ｇ２４のマーカ点（重心）の座標Ｅ２１−Ｅ２４と、カメラ撮影時に認識されたマーカ画像Ｍ２１−Ｍ２４のマーカ点（重心）の座標ｅ２１−ｅ２４との対応関係から、ずれ量やそのずれの方向を求める。例えば、設定時と読み取り時のマーカ４点の座標を基に幾何変換行列を求め、その行列を使ったアフィン変換等により、画像の傾きや遠近のずれ量を算出する。
【０１２７】
このようにして、複数、例えば４つのマーカ画像Ｍ２１−Ｍ２４の座標ｅ２１−ｅ２４で特定される四角形の画像（ｅ２１−ｅ２４）および注目領域Ｒ２１内の４つの複数のマーカ表示領域の設定座標Ｅ２１−Ｅ２４で特定される四角形の画像（Ｅ２１−Ｅ２４）との幾何変換処理によって、ディスプレイ１２に表示する画像に対してずれ量を縮小する幾何補正等の補正処理を実行することができる。
【０１２８】
次に、本実施形態の作用について説明する。
【０１２９】
（発明装置の作用）
上述のように構成された本実施形態のメータ読み取り作業装置およびメータ読み取り作業支援システムにおいては、メータ装置Ｍｔの読み取り対象領域Ａ２の画像Ｐ１２もしくはＰ３０に基づいてメータ装置Ｍｔの指示値Ｖｍを読み取る作業を、作業支援情報の提示によって支援しつつ実行するものであり、メータ装置Ｍｔを撮影する移動可能なカメラ１１と、カメラ１１の撮影画像を表示するディスプレイ１２と、音声を出力するスピーカ１３と、カメラ１１で撮影された読み取り対象領域Ａ２や注目領域Ｒ１１等の画像Ｐ１２、Ｐ１１の認識状態に応じた作業支援情報であるガイド情報Ｇ１１（必要に応じてＧ１２−Ｇ１４も）、あるいはＧ２１−Ｇ２４や指示値Ｖｍの桁毎の認識状態表示、注目領域Ｒ２２内のメッセージ等を、ディスプレイ１２およびスピーカ１３のうちいずれか一方または双方から出力させるように構成されている。
【０１３０】
したがって、本実施形態では、メータ装置Ｍｔの指示値Ｖｍが読み取り可能に認識されるまで、カメラ撮影画像の認識状態に応じた作業支援情報がディスプレイ１２の画像表示または／およびスピーカ１３の音声出力で提示されることとなる。したがって、撮影条件の良くない環境下であっても、カメラ１１での撮影画像を認識率の良好な画像として取得できるようにカメラ１１の位置や姿勢、視線方向等の撮影条件を良好に誘導でき、メータ読み取り作業の実用性向上やメータ指示値の読み取り精度向上を図ることができる。
【０１３１】
また、作業支援情報によって、熟練者の作業内容を不慣れな作業者に提示することで、現場作業者の作業ミスや事故防止を図ることができ、従来は現場作業者と管理者の２人で行っていたようなメータ読み取りおよびチェック作業と同等な作業を、自動読み取りとその読み取り結果のチェック作業として１人でも実施可能となる。さらに、本実施形態では、チェックシートやレポート出力機能を有しているので、現場作業者の作業ミスや作業忘れも防止でき、成果物の作成が自動化でできるため、作業品質の担保が容易になる。
【０１３２】
また、本実施形態では、移動可能な情報通信端末１０がカメラ１１、ディスプレイ１２、スピーカ１３、およびメータ読み取り制御装置１５を一体で備えて構成されているので、軽量・コンパクトな装置構成を実現できる。
【０１３３】
さらに、本実施形態では、ディスプレイ１２の表示領域Ａ１内に、読み取り対象領域Ａ２の画像Ｐ１２やメータ種別特定用の画像Ｐ１１が表示されるべき注目領域Ｒ２１、Ｒ１１を特定するガイド情報Ｇ１１−Ｇ１４あるいはＧ２１−Ｇ２４を表示するガイド情報出力部５３と、読み取り対象領域Ａ２の画像Ｐ１２やメータ種別特定用の画像Ｐ１１が所定認識確度以上の画像として注目領域Ｒ１１、Ｒ２１内に含まれるか否かを判定するガイド情報判定部５２と、注目領域Ｒ１１、Ｒ２１内の所定認識確度以上の画像Ｐ１２やＰ１１から指示値Ｖｍを読み取り可能に認識するメータ読み取り部５１とを有している。
【０１３４】
したがって、カメラ１１の撮影を注目領域Ｒ２１やＲ１１に集中させた後に、その撮影画像の認識確度を高めることができ、所定認識確度以上の読み取り対象領域Ａ２の画像を迅速的確に撮影画像中に含めるようなカメラ操作が可能となる。
【０１３５】
しかも、本実施形態では、ディスプレイ１２の表示画像中に複数のマーカ画像Ｍ２１−Ｍ２４を設定する読み取り設定情報作成部５５と、ディスプレイ１２の表示領域Ａ１内に複数のマーカ表示領域をガイド情報Ｇ２１−Ｇ２４によりガイド表示させるガイド情報出力部５３と、マーカ画像Ｍ２１−Ｍ２４の表示と対応するマーカ表示領域との幾何学的な対応度合いに応じて読み取り対象領域Ａ２の画像Ｐ３０が表示されるべき注目領域Ｒ２１（もしくはＲ４１）を特定するとともに、その注目領域Ｒ２１に入った撮影画像の一部が読み取り対象領域Ａ２で所定認識確度以上の画像となっているか否かの判定を実行するガイド情報判定部５２と、注目領域Ｒ２１内の所定認識確度以上の画像Ｐ３０（もしくはＰ４０）から指示値Ｖｍを読み取り可能に認識するメータ読み取り部５１とを含む構成となっている。
【０１３６】
したがって、複数のマーカ画像Ｍ２１−Ｍ２４がそれぞれのマーカ表示領域に対応して表示されるか否かによって、読み取り対象領域Ａ２の画像Ｐ１２が表示されるべき注目領域Ｒ２１の特定と、読み取り対象領域Ａ２の画像Ｐ１２が注目領域Ｒ２１内で所定認識確度以上の画像として認識されたか否かの判定とが可能となり、比較的簡単な処理で、所定認識確度以上の読み取り対象領域Ａ２の画像Ｐ１２を迅速的確に撮影画像中に含めることができる。
【０１３７】
加えて、本実施形態のメータ読み取り作業装置では、ディスプレイ１２の表示領域Ａ１内でガイド情報Ｇ２１−Ｇ２４により設定される複数のマーカ表示領域に対して撮影画像中の複数のマーカ画像Ｍ２１−Ｍ２４の幾何学的なずれ量を算出し、複数のマーカ画像Ｍ２１−Ｍ２４および注目領域Ｒ２１の画像Ｐ３０の幾何変換処理によって、ディスプレイ１２に表示する画像Ｐ３０に対してずれ量を縮小する補正処理を実行する。
【０１３８】
したがって、メータ装置Ｍｔの読み取り対象領域Ｚに対する撮影時のカメラ１１の傾き等のずれ量を補正し、ディスプレイ１２上の表示画像におけるそのずれ量を縮小することで、撮影時の操作負担を軽減できる。
【０１３９】
また、本実施形態では、ディスプレイ１２の表示領域Ａ１内に、それぞれに読み取り対象領域Ａ２内の指示値Ｖｍの一部を表示し、全体として指示値Ｖｍを表示する複数の指示値表示領域Ｐ３１−Ｐ３４（もしくは（Ｐ４１−Ｐ４４）もしくは（Ｐ５１，５２））を予め設定するとともに、カメラ１１の撮影画像を表示する撮影画像表示領域としての注目領域Ｒ２１を併せて設定し、複数の指示値表示領域Ｐ３１−Ｐ３４に、それぞれの領域に対応する指示値Ｖｍの一部を、指示値Ｖｍの一部の画像Ｐ３１、Ｐ３２、Ｐ３３またはＰ３４の認識確度に応じた表示態様で表示する。
【０１４０】
したがって、メータ装置Ｍｔの指示値Ｖｍの所定桁数ごとに指示値表示領域Ｐ３１−Ｐ３４を設定することで、各指示値表示領域Ｐ３１、Ｐ３２、Ｐ３３またはＰ３４内の指示値Ｖｍ（一部）の画像の認識確度に応じた撮影条件を設定可能となり、認識確度の低い一部の指示値画像Ｐ３１−Ｐ３４のいずれかの認識確度を高める認識処理を早期に実行可能となる。
【０１４１】
また、本実施形態において、可搬型のメータ読み取り制御装置１５は、複数段階の認識状態として、個体識別コードや特徴パターン等からメータ装置Ｍｔの種別を特定する第１の認識段階と、種別が特定されたメータ装置Ｍｔの設定情報に基づいて読み取り対象領域Ａ２を特定する第２の認識段階と、読み取り対象領域Ａ２の画像Ｐ１２（もしくはＰ３０）に基づいて指示値Ｖｍを認識する第３の認識段階とを設定し、作業支援情報に、第１ないし第３の各認識段階の状態の表示（ガイド表示Ｇ１１の表示、個体識別コード等の画像Ｐ１１の表示、読み取り対象領域Ａ２の画像Ｐ１２を映すべき注目領域Ｒ２１の表示、読み取り値の表示等）または次段階へのガイド情報（ガイド情報Ｇ１１、ガイド情報Ｇ１２−Ｇ１４、ガイド情報Ｇ２１−Ｇ２４、および注目領域Ｒ２２内ガイド情報）を含める構成となっている。
【０１４２】
したがって、メータ装置Ｍｔの指示値Ｖｍを読み取り可能に認識するまでの第１ないし第３の各認識段階で、その認識状態の表示あるいは次段階へのガイド情報の表示が可能となり、撮影条件の良くない環境下でもカメラ１１での撮影画像を認識率の良好な画像として取得できる。
【０１４３】
さらに、本実施形態では、メータ読み取り制御装置１５は、ディスプレイ１２の表示領域Ａ１内にメータ情報表示領域Ｒ１１またはＲ２１を設定し、メータ情報表示領域Ｒ１１またはＲ２１内の画像Ｐ１１またはＰ１２に基づいて、読み取り対象領域Ａ２の位置または指示値Ｖｍの読み取り条件Ｇ１２−Ｇ１４を判定するとともに、複数段階のうち所定段階の認識状態下で、作業支援情報として読み取り対象領域Ａ２の位置または指示値（Ｖｍ）の読み取りに関するガイド情報（Ｒ２２内表示）を出力する構成としている。
【０１４４】
この構成により、読み取り対象領域の位置情報または指示値の読み取り条件を判定するためのメータ情報表示領域をディスプレイの表示領域内に設定しておくので、読み取り対象領域の画像の認識と併せて読み取り対象領域の位置または指示値の読み取り条件を容易に判定可能となる。
【０１４５】
本実施例のメータ読み取り作業装置では、作業支援情報の提示条件が、複数段階の認識状態に応じてスピーカ１３から出力する音を変化させる条件を含むものである。
【０１４６】
したがって、複数段階の認識状態の変化を、スピーカ１３からの出力音の変化、例えば出力音の周波数または間欠出力音の周期の変化などとして、明確にかつ容易に把握可能となる。
【０１４７】
（発明方法の作用）
第１ないし第６実施形態のメータ読み取り作業方法では、読み取り対象領域Ａ２の画像Ｐ１２もしくはＰ３０に基づいてメータ装置Ｍｔの指示値Ｖｍを読み取る作業を、作業支援情報の提示によって支援しつつ実行するに際して、カメラ１１で撮影された読み取り対象領域Ａ２の画像Ｐ１２の複数段階の認識状態に応じてガイド情報Ｇ１１（必要に応じてＧ１２−Ｇ１４も）あるいはＧ２１−Ｇ２４を生成し、その作業支援情報を、ディスプレイ１２およびスピーカ１３のうちいずれか一方または双方から出力させる。
【０１４８】
したがって、本実施形態の方法では、メータ装置Ｍｔの指示値Ｖｍが読み取り可能に認識されるまで、カメラ撮影画像の認識状態に応じて、作業支援情報がディスプレイ１２の画像表示または／およびスピーカ１３の音声出力で提示されることとなる。よって、撮影条件の良くない環境下でもカメラ１１での撮影画像を認識率の良好な画像として取得できるようにカメラ１１の良好な位置や姿勢、視線方向等の撮影条件等を誘導でき、メータ読み取り作業の実用性向上やメータ指示値の読み取り精度向上を図ることができる。
【０１４９】
例えば、読み取り対象領域Ａ２に対するガイド表示がなされるにもかかわらず、読み取り対象領域Ａ２の外観状態によって照明等の映り込みや同色物の誤認識、作業環境の明るさや距離の適否等が生じやすい作業環境となる場合であっても、効果的な作業支援情報を提示することができる。
【０１５０】
また、例えば熟練者の作業内容を不慣れな作業者に提示することで、現場作業者の作業ミスや事故防止を図ることができ、現場作業者と管理者の２人で行っていたようなメータ読み取りおよびチェック作業と同等な作業を、自動読み取りとその読み取り結果のチェックとして１人でも実施可能となる。
【０１５１】
本実施形態のメータ読み取り作業方法では、また、複数段階の認識状態は、ディスプレイ１２に表示される撮影画像中に読み取り対象領域Ａ２または／およびＲ１１の画像Ｐ１２または／およびＰ１１が含まれないか所定認識確度未満である読み取り対象未確定段階と、ディスプレイ１２に表示される撮影画像中に読み取り対象領域の画像Ｐ１２または／およびＰ１１が所定認識確度以上で含まれる読み取り対象確定段階とを含んでいる。
【０１５２】
したがって、カメラ１１の撮影画像中に所定認識確度以上の読み取り対象領域の画像が含まれるか否かによって、読み取り対象領域Ａ２の画像Ｐ１２の認識状態を容易に複数段階に判別可能となる。
【０１５３】
さらに、第２ないし第６実施形態のメータ読み取り作業方法は、ディスプレイ１２の表示領域Ａ１内に、作業支援情報として、個体識別用の画像Ｐ１１が表示されるべき注目領域Ｒ１１を特定するガイド情報Ｇ１１や、読み取り対象領域Ａ２の画像Ｐ１２が表示されるべき注目領域Ｒ２１を特定するガイド情報Ｇ２１−Ｇ２４を表示するガイド表示段階と、複数のマーカ画像Ｍ２１−Ｍ２４の表示と複数のマーカ表示領域との幾何学的な対応度合いに応じて読み取り対象領域の画像Ｐ１２またはＰ３０が表示されるべき注目領域Ｒ２１（もしくはＲ４１）を特定するとともに、その注目領域Ｒ２１に入った撮影画像の一部が読み取り対象領域Ａ２の所定認識確度以上の画像か否かの判定を実行する読み取り対象抽出段階と、注目領域Ｒ２１内の所定認識確度以上の画像から指示値Ｖｍを読み取り可能に認識する認識処理段階とを含んでいる。
【０１５４】
したがって、カメラの撮影を注目領域に集中させた後にその撮影画像の認識確度を高めることができ、所定認識確度以上の読み取り対象領域の画像を迅速的確に撮影画像中に含めることができる。
【０１５５】
しかも、第２ないし第６実施形態のメータ読み取り作業方法では、ディスプレイ１２に表示される撮影画像中に複数のマーカ画像Ｍ２１−Ｍ２４を設定するマーカ設定段階と、ディスプレイ１２の表示領域Ａ１内に、作業支援情報として、複数のマーカ画像Ｍ２１−Ｍ２４がそれぞれ表示されるべき複数のマーカ表示領域を特定するガイド情報Ｇ２１−Ｇ２４を表示するガイド表示段階と、複数のマーカ画像Ｍ２１−Ｍ２４が複数のマーカ表示領域に表示されるか否かによって、読み取り対象領域Ａ２の画像Ｐ１２が表示されるべき注目領域Ｒ２１を特定するとともに、読み取り対象領域Ａ２の画像Ｐ１２が所定認識確度以上の画像か否かの判定とを実行する読み取り対象抽出段階と、注目領域Ｒ２１内の所定認識確度以上の画像から指示値Ｖｍを読み取り可能に認識する認識処理段階とを含んでいる。
【０１５６】
したがって、複数のマーカ画像Ｍ２１−Ｍ２４がそれぞれ対応するマーカ表示領域に表示されるか否かによって、読み取り対象領域Ａ２の画像Ｐ１２が表示されるべき注目領域Ｒ２１が特定され、読み取り対象領域Ａ２の画像Ｐ１２が所定認識確度以上の画像か否かを判定することが可能となる。よって、比較的簡単な処理で、所定認識確度以上の読み取り対象領域Ａ２の画像Ｐ１２を迅速的確にカメラ１１の撮影画像中に含めることができる。
【０１５７】
また、第６実施形態のメータ読み取り作業方法においては、ディスプレイ１２の表示領域Ａ１内に設定された複数のマーカ表示領域に対し、カメラ１１で撮影されディスプレイ１２の表示領域内に表示される複数のマーカ画像Ｍ２１−Ｍ２４の幾何学的なずれ量を算出して、複数のマーカ画像Ｍ２１−Ｍ２４および注目領域Ｒ２１の画像Ｐ１２の幾何変換処理によって、ディスプレイ１２に表示する画像に対してずれ量を縮小する補正処理を実行する。
【０１５８】
したがって、メータ装置の読み取り対象領域に対する撮影時のカメラの傾き等のずれ量を補正し、ディスプレイ表示画像におけるそのずれ量を縮小することで、撮影時の操作負担を軽減できる。なお、ずれ量を補正する撮影姿勢の補正方向を矢印表示したり操作方向の表示または音声による指示、例えば「左に回転して下さい」と表示したりすることができる。また、ずれ方向（ロール、ヨー、ピッチ等）を音色で判別可能に出力したり、ずれ量自体は音量で表現したりすることが考えられる。
【０１５９】
第３ないし第６実施形態のメータ読み取り作業方法では、カメラ１１の撮影画像および作業支援情報を表示可能なディスプレイ１２を準備し、ディスプレイ１２の表示領域Ａ１内に、それぞれに読み取り対象領域Ａ２内の指示値Ｖｍの一部を表示し、全体として指示値Ｖｍを表示する複数の指示値表示領域Ｐ３１−Ｐ３４等（もしくは（Ｐ４１−Ｐ４４）もしくは（Ｐ５１，Ｐ５２））を予め設定するとともに、カメラ１１の撮影画像を表示する撮影画像表示領域Ｒ２１を併せて設定し、複数の指示値表示領域Ｐ３１−Ｐ３４等に、それぞれの領域に対応する指示値Ｖｍの一部を、その一部の画像の認識確度に応じた表示態様で表示する。
【０１６０】
したがって、メータ装置Ｍｔの指示値Ｖｍの所定桁数ごとに指示値表示領域Ｐ３１−Ｐ３４等を設定することで、各指示値表示領域Ｐ３１−Ｐ３４内の指示値画像の認識確度に応じた撮影条件を設定可能となり、認識確度の低い一部の指示値画像の認識確度を高めるようなカメラ操作の誘導および認識処理を早期に実行可能となる。
【０１６１】
第１ないし第６実施形態のメータ読み取り作業方法では、複数段階の認識状態は、メータ装置Ｍｔの種別を特定する第１の認識段階と、読み取り対象領域Ａ２を特定する第２の認識段階と、読み取り対象領域Ａ２の画像Ｐ１２またはＰ３０に基づいて指示値Ｖｍを認識する第３の認識段階とを含み、作業支援情報が、第１ないし第３の各認識段階の状態の表示または次段階へのガイド情報の表示を含んでいる。
【０１６２】
したがって、メータ装置Ｍｔの指示値Ｖｍを読み取り可能に認識するまでの第１ないし第３の各認識段階で、その認識状態の表示あるいは次段階へのガイド情報Ｇ１１，Ｇ１２−Ｇ１４，Ｇ２１−Ｇ２４等の表示が可能となり、撮影条件の良くない環境下でもカメラでの撮影画像を認識率の良好な画像として取得できる。
【０１６３】
第１実施形態のメータ読み取り作業方法では、ディスプレイ１２の表示領域Ａ１内に撮影画像の表示領域Ａ２と固体意識別コード等のメータ情報の表示領域Ｒ１１とを設定し、ディスプレイ１２の表示領域Ａ１内の画像Ｐ１１，Ｐ１２等に基づいて、読み取り対象領域Ａ２の位置または指示値Ｖｍの読み取り条件を判定するとともに、複数段階のうち所定段階の認識状態下で、作業支援情報として読み取り対象領域Ａ２の位置または指示値Ｖｍの読み取りに関するガイド情報Ｇ１１、及び必要に応じてＧ１２−Ｇ１４を出力する。
【０１６４】
したがって、読み取り対象領域Ａ２の位置情報または指示値Ｖｍの読み取り条件を判定するためのメータ情報表示領域Ｒ１１をディスプレイ１２の表示領域Ａ１内に設定しておくことにより、読み取り対象領域Ａ２の画像Ｐ１２の認識と併せて読み取り対象領域Ａ２の位置または指示値Ｖｍの読み取り条件を容易に判定可能となる。
【０１６５】
なお、各実施形態のメータ読み取り作業方法においては、複数段階のうち各段階におけるカメラの撮影回数を、その各段階の認識状態に応じて可変に設定しておき、複数段階のうち所定段階におけるカメラの撮影回数を、その所定段階の撮影画像の認識確度が低いほど多回数になるように変化させることにより、所定段階におけるカメラ１１の撮影画像中に所定認識確度以上の読み取り対象領域Ａ２の画像Ｐ１２が含まれる確率を選択的に増加させ、その段階におけるカメラ１１の撮影画像の認識確度を指示値Ｖｍを読み取り可能な確度範囲内に高めることができる。
【０１６６】
そのようにすると、メータ装置Ｍｔの指示値Ｖｍの読み取り対象領域Ａ２が低認識確度となる所定段階では、カメラ１１での撮影回数を増やし、撮影画像の認識確度を高めることで、認識確度の良好なメータ読み取りが可能となる。
【０１６７】
また、第３、第４および第６実施形態のメータ読み取り作業方法においては、読み取り対象領域Ａ２内に、それぞれに対応する指示値Ｖｍの一部を表示し、全体として指示値Ｖｍを表示する複数の指示値表示領域Ｐ３１−Ｐ３４等（Ｐ４１−Ｐ４４もしくはＰ５１，Ｐ５２でもよい）を予め設定するとともに、読み取り対象領域Ａ２の画像Ｐ１２の認識状態に応じた作業支援情報として、複数の指示値表示領域Ｐ３１−Ｐ３４等の撮影画像をそれぞれ２値化した複数の分割認識状態画像Ｐ３０を表示するようにしてもよい。
【０１６８】
この場合、複数の指示値表示領域Ｐ３０のうち一部の画像が所定確度以下となった場合、その認識段階では、白抜けや黒潰れ等により当該表示領域Ｐ３１、Ｐ３２，Ｐ３３またはＰ３４における正常な指示値が得られない２値化画像が表示され得るので、撮影画像の確度に応じた表示の変化と認識処理の結果とを共に端的に視認可能に提示できる。
【０１６９】
各実施形態のメータ読み取り作業方法においては、作業支援情報の提示条件が、複数段階の認識状態に応じてスピーカ１３から出力する音を変化させる条件を含んでいる。
【０１７０】
したがって、複数段階の認識状態の変化を、スピーカ１３からの出力音の変化、例えば出力音の周波数または間欠出力音の周期の変化等、すなわち、音の強弱やパターン変化等に比して段階的な変化を聴覚的に把握し易い音の変化とすることで、認識状態の変化を容易に把握可能となる。
【０１７１】
さらに、上述の各実施形態では、通信端末１０が、カメラ１１、ディスプレイ１２、スピーカ１３、およびメータ読み取り制御装置１５を含む構成であり、メータ読み取り制御装置１５が、カメラ１１によりメータ装置Ｍｔの読み取り対象領域が所定の認識状態で撮影されたとき、カメラ１１から取得した読み取り対象領域Ａ２の画像に基づいてメータ装置Ｍｔの指示値Ｖｍを読み取るメータ読み取り部５１と、指示値Ｖｍの読み取り作業のための作業支援情報をディスプレイ１２に送信し、出力させるガイド情報出力部５３と、を備えている。また、支援情報提示装置となるメータ読み取り制御装置１５が、カメラ１１による撮影の開始からその撮影画像を基に読み取り対象領域の画像が読み取り可能に認識されるまでの撮影画像の複数段階の認識状態に応じて、作業支援情報の提示条件を変化させ、作業支援情報をディスプレイ１２およびスピーカ１３に画像および音声の少なくとも一方の情報形態で送信するとともに、その作業支援情報の出力を複数段階の認識状態に応じて変化させる。
【０１７２】
したがって、メータ装置Ｍｔの指示値Ｖｍを読み取り可能に認識するまで、カメラ１１での撮影画像の認識状態に応じた作業支援情報を提示できることから、撮影条件の良くない環境下でもカメラ１１での撮影画像を認識率の良好な画像として取得できるようにカメラ１１の位置や姿勢を誘導でき、メータ読み取り作業の実用性向上やメータ指示値の読み取り精度向上を図ることができる。
【０１７３】
同様に、各実施形態では、メータ装置Ｍｔの読み取り対象領域Ａ２の画像Ｐ１２に基づいてメータ装置Ｍｔの指示値Ｖｍを読み取る作業を、ガイド情報Ｇ１１および必要に応じてＧ１２−Ｇ１４等（ガイド情報Ｇ２１−Ｇ２４あるいはＰ３１−Ｐ３４でもよい）の提示によって支援するメータ読み取り作業支援方法を実施することとなる。そして、この方法では、予め、メータ装置Ｍｔを撮影する移動可能なカメラ１１と、カメラ１１の撮影画像を表示するディスプレイ１２と、音声を出力するスピーカ１３とを準備しておき、カメラ１１の撮影の開始からその撮影画像をメータ装置Ｍｔの指示値Ｖｍを読み取り可能に認識するまでの複数段階の認識状態に応じて、ガイド情報Ｇ１１およびＧ１２−Ｇ１４等の提示条件を可変に設定し、カメラ１１での撮影に際して、そのガイド情報Ｇ１１およびＧ１２−Ｇ１４等をディスプレイ１２およびスピーカ１３のうちいずれか一方または双方から出力するとともに、そのガイド情報Ｇ１１およびＧ１２−Ｇ１４等の出力を認識状態に応じて変化させる。
【０１７４】
したがって、メータ装置Ｍｔの指示値Ｖｍを読み取り可能に認識するまで、カメラ１１での撮影画像の認識状態に応じた作業支援情報を提示できることから、撮影条件の良くない環境下でもカメラ１１での撮影画像を認識率の良好な画像として取得できるようにカメラの位置や姿勢を誘導でき、メータ読み取り作業の実用性向上やメータ指示値の読み取り精度向上を図ることができる。
【０１７５】
以上のように、本発明の各実施形態によれば、カメラ撮影を伴うメータ読み取り作業現場での段階的で有効な作業支援や、その作業のチェック、作業後の成果物の生成等を有効に支援することができるメータ読み取り作業装置および方法ならびにメータ読み取り作業支援システムを提供することができる。
【０１７６】
なお、上述の各実施形態におけるマーカ画像Ｍ２１−Ｍ２４は４つとしたが、マーカは２つ以上でよい。ガイド表示やそのメッセージは、一例に過ぎないものであり、図１０に示すようなメータ装置の多様な形態に応じて異なるガイド表示が採用できることはいうまでもない。
【０１７７】
以上説明したように、本発明は、カメラ撮影を伴うメータ読み取り作業現場での段階的で有効な作業支援や、その作業のチェック、作業後の成果物の生成等を有効に支援することができるメータ読み取り作業装置および方法を提供することができる。このような本発明は、移動式のカメラにより各種メータの撮影画像から指示値を読み取るメータ読み取り作業装置および方法ならびにメータ読み取り作業支援システム全般に有用である。
【符号の説明】
【０１７８】
１  メータ読み取り作業装置
１０  情報通信端末（通信端末）
１１  カメラ
１２  ディスプレイ
１３  スピーカ
１５  メータ読み取り制御装置（制御手段）
５１  メータ読み取り部（認識処理手段）
５２  ガイド情報判定部（読み取り対象抽出手段）
５３  ガイド情報出力部（ガイド表示手段）
５４  読み取り設定情報蓄積部
５５  読み取り設定情報作成部
Ａ１  表示領域
Ａ２  読み取り対象領域
Ｅ２１、Ｅ２２、Ｅ２３、Ｅ２４  座標（マーカ表示領域の設定座標、ガイド情報のマーカ点の座標）
ｅ２１、ｅ２２、ｅ２３、ｅ２４  マーカ画像のマーカ点の座標
Ｇ１１  ガイド情報（作業支援情報）
Ｇ１２、Ｇ１３、Ｇ１４  ガイド情報（作業支援情報）
Ｇ２１、Ｇ２２、Ｇ２３、Ｇ２４  ガイド情報（作業支援情報）
Ｍ２１、Ｍ２２、Ｍ２３、Ｍ２４  マーカ画像
Ｍｔ  メータ装置
Ｐ１１  画像（メータ情報画像）
Ｐ１２  読み取り対象領域の画像
Ｐｔ１、Ｐｔ２  指示針
Ｐ３０  画像（指示値表示領域、分割認識状態画像）
Ｐ３１、Ｐ３２、Ｐ３３、Ｐ３４  指示値表示領域（指示値表示領域の画像）
Ｐ４０、Ｐ５０  画像
Ｐ４１、Ｐ４２、Ｐ４３、Ｐ４４  桁画像（指示値表示領域）
Ｐ５１、Ｐ５２  表示領域（指示値表示領域）
Ｒ１１  注目領域（メータ情報表示領域、第１の注目領域）
Ｒ２１  注目領域（撮影画像表示領域、第２の注目領域）
Ｒ２２  注目領域（第３の注目領域）
Ｒ３１、Ｒ４１、Ｒ５１  注目領域
【図１】
2020166586.tif 000003
【図２】
2020166586.tif 000004
【図３】
2020166586.tif 000005
【図４】
2020166586.tif 000006
【図５】
2020166586.tif 000007
【図６】
2020166586.tif 000008
【図７】
2020166586.tif 000009
【図８】
2020166586.tif 000010
【図９】
2020166586.tif 000011
【図１０】
2020166586.tif 000012
【図１１】
2020166586.tif 000013
【図１２】
2020166586.tif 000014
【図１３】
2020166586.tif 000015