(57)【要約】【課題】点検業務に先立つ手間を少なくすることを課題とする。【解決手段】対象物を撮影した対象画像に基づいて前記対象物の変状を特定するユーザの作業を支援する情報処理装置であって、前記ユーザの指示に基づいて、前記対象物の変状を特定するユーザの作業において参照される１以上の参照画像からいずれかを選択する選択手段と、前記対象画像と、前記選択された参照画像とを、所定の表示デバイスにおいて比較可能に表示させる表示手段と、前記表示手段によって表示された前記対象画像内の変状を指定する前記ユーザの操作を受け付ける指定手段と、前記対象画像のうち前記指定された変状を含む部分領域に基づいて、新たな参照画像を生成する生成手段と、を備え、前記生成手段によって生成された新たな参照画像は、前記選択手段によって選択され得る前記１以上の参照画像に加えられる。【選択図】図２
2019053050.tif 000002
【特許請求の範囲】
【請求項１】
対象物を撮影した対象画像に基づいて前記対象物の変状を特定するユーザの作業を支援する情報処理装置であって、
前記ユーザの指示に基づいて、前記対象物の変状を特定するユーザの作業において参照される１以上の参照画像からいずれかを選択する選択手段と、
前記対象画像と、前記選択された参照画像とを、所定の表示デバイスにおいて比較可能に表示させる表示手段と、
前記表示手段によって表示された前記対象画像内の変状を指定する前記ユーザの操作を受け付ける指定手段と、
前記対象画像のうち前記指定された変状を含む部分領域に基づいて、新たな参照画像を生成する生成手段と、を備え、
前記生成手段によって生成された新たな参照画像は、前記選択手段によって選択され得る前記１以上の参照画像に加えられることを特徴とする情報処理装置。
【請求項２】
前記選択手段によって選択された前記参照画像の前記表示デバイスにおける表現に関する表示パラメータを取得する取得手段と、
前記取得手段によって取得された表示パラメータに基づいて、前記対象画像の前記表示デバイスにおける表現に関する表示パラメータを調整する調整手段をさらに備え、
前記表示手段は、前記調整手段によって調整された表示パラメータを反映した状態で、前記対象画像と前記参照画像とを前記比較可能に表示することを特徴とする請求項１に記載の情報処理装置。
【請求項３】
前記対象画像の前記表示デバイスにおける表現に関する表示パラメータを取得する取得手段と、
前記取得手段によって取得された表示パラメータに基づいて、前記参照画像の前記表示デバイスにおける表現に関する表示パラメータを調整する調整手段をさらに備え、
前記表示手段は、前記調整手段によって調整された表示パラメータを反映した状態で、前記対象画像と前記参照画像とを前記比較可能に表示することを特徴とする請求項１に記載の情報処理装置。
【請求項４】
前記表示パラメータは、ズーム倍率、明度調整値、色相調整値、ガンマ値、画像の解像度の、少なくともいずれかを含むことを特徴とする請求項２または３に記載の情報処理装置。
【請求項５】
表示デバイスに表示される前記対象画像とは、作業の対象物である構造物を撮影した写真のうちの少なくとも一部の領域であって、前記ユーザによるスクロール、ズームイン、ズームアウトの少なくとも１つの操作によって前記対象画像として表示される領域は変更されることが可能であって、
前記生成手段は、前記指定手段によって前記対象画像として表示される領域に含まれる変状が指定された時点での前記対象画像として表示される領域のズーム倍率を、前記新たな参照画像に関する表示パラメータとして前記参照画像に関連付けることを特徴とする請求項２または３に記載の情報処理装置。
【請求項６】
前記参照画像は、参照情報に基づいて前記対象画像のなかで特定される部分領域であり、
前記参照情報は、前記変状の位置およびサイズを表す情報と、前記変状の種類を表す情報と、前記変状の程度を表す情報とを含み、前記対象画像のなかに含まれる変状を表した情報であることを特徴とする請求項１から５のいずれか１項に記載の情報処理装置。
【請求項７】
前記参照画像は、当該参照画像に含まれる変状を指定する前記ユーザの操作が前記指定手段によって受け付けられたときに、前記対象画像として前記表示デバイスに表示されていた画像に相当することを特徴とする請求項６に記載の情報処理装置。
【請求項８】
前記参照画像は、参照情報の生成元である画像から当該参照情報に基づいて特定される領域であり、
前記参照情報は、当該参照情報の生成元である画像を表すパスと、前記変状の位置およびサイズを表す情報と、前記変状の種類を表す情報と、前記変状の程度を表す情報とを含み、前記参照情報の生成元である画像のなかに含まれる変状を表した情報であることを特徴とする請求項１から７のいずれか１項に記載の情報処理装置。
【請求項９】
前記指定手段は、前記ユーザが入力する前記指定された変状の種類及び前記指定された変状の程度を表す情報を取得し、
前記生成手段は、前記指定手段によって取得された変状の種類及び変状の程度を表す情報に基づいて、前記参照情報を生成することを特徴とする請求項７に記載の情報処理装置。
【請求項１０】
前記選択手段は、前記表示デバイスに一覧として表示される前記参照情報を表すサムネイル画像のいずれかを選択するユーザの指示に基づいて、前記参照画像を選択することを特徴とする請求項７または８に記載の情報処理装置。
【請求項１１】
前記表示デバイスに一覧として表示される前記サムネイル画像のそれぞれは、前記参照画像のうち変状が指定された部分をトリミングした画像を縮小した画像に相当することを特徴とする請求項１０に記載の情報処理装置。
【請求項１２】
前記選択手段は、前記表示デバイスに一覧として表示される前記参照情報を表す文字列のいずれかを選択するユーザの指示に基づいて、前記参照画像を選択することを特徴とする請求項７または８に記載の情報処理装置。
【請求項１３】
前記一覧として表示される前記参照情報を、前記変状の種類と程度の少なくともいずれかに基づいて、ソートするソート手段を有することを特徴とする請求項１０から１２のいずれか１項に記載の情報処理装置。
【請求項１４】
前記一覧として表示される前記参照情報を、前記変状の種類と程度の少なくともいずれかに基づいて、グルーピングするグループ化手段を有することを特徴とする請求項１０から１２のいずれか１項に記載の情報処理装置。
【請求項１５】
前記生成手段によって新たに生成された参照画像を特定する参照情報は、
前記一覧において、前記グループ化手段によってグルーピングされたグループのいずれかの最後に追加されることを特徴とする請求項１４に記載の情報処理装置。
【請求項１６】
前記表示手段は、前記対象画像と前記参照画像を、前記表示デバイスにおいてサイドバイサイドに表示することによって、前記対象画像と前記参照画像を比較可能に表示することを特徴とする請求項１から１３のいずれか１項に記載の情報処理装置。
【請求項１７】
前記表示手段は、前記表示デバイスの同一領域において前記対象画像と前記参照画像を所定時間毎に切り替えながら表示することによって、前記対象画像と前記参照画像を比較可能に表示することを特徴とする請求項１から１３のいずれか１項に記載の情報処理装置。
【請求項１８】
前記変状は、前記対象物の表面に発生する、ひび割れ、浮き、剥離、エフロレッセンス、コールドジョイント、ジャンカ、表面気泡、砂筋、錆汁の、少なくともいずれかを含むことを特徴とする請求項１から１５のいずれか１項に記載の情報処理装置。
【請求項１９】
対象物を撮影した対象画像に基づいて前記対象物の変状を特定するユーザの作業を支援する情報処理装置が実行する情報処理方法であって、
前記ユーザの指示に基づいて、前記対象物の変状を特定するユーザの作業において参照される１以上の参照画像からいずれかを選択する工程と、
前記対象画像と、前記選択された参照画像とを、所定の表示デバイスにおいて比較可能に表示させる工程と、
表示された前記対象画像内の変状を指定する前記ユーザの操作を受け付ける工程と、
前記対象画像のうち前記指定された変状を含む部分領域に基づいて、新たな参照画像を生成する工程と、
前記生成された新たな参照画像を、前記選択する工程によって選択され得る前記１以上の参照画像に加える工程と、
を有することを特徴とする情報処理方法。
【請求項２０】
コンピュータを、請求項１から１８のいずれか１項に記載の情報処理装置の各手段として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像を用いた対象物の点検業務等に用いられる技術に関する。
【背景技術】
【０００２】
構造物等の対象物を点検する点検業務では、現地へ赴き構造物の撮影が行われる。その後、事務所等に戻り、撮影した画像を仔細に観察してコンクリート表面のひび割れや浮き、剥離等の変状を判定して、点検帳票が作成される。ここで変状の判定とは、画像に写っている変状について、その種類と程度を特定する行為を指す。例えば、ある変状について、その変状が「ひび割れ」という種類であることと、その変状の程度が「ひび割れの幅が０．２(mm)」であることなどを特定する行為が変状の判定にあたる。
【０００３】
変状を判定する際には、同じ種類で同程度の変状であっても、被写体の材質や撮影環境などによって大きく見え方が変わるため、点検者は判定に関して一定の基準を持つことが難しい。また、点検対象である構造物が大きい場合、点検者が確認しなければならない画像の量は膨大になりがちである。以上のような理由のため、構造物の点検業務において、一貫した変状判定を続けることは難しく、判定結果にはばらつきが発生しやすい。
【０００４】
このような画像の観察による異常部の判定や診断における判断基準の一貫性維持にまつわる課題に対し、特許文献１には、電子部品の検査において、比較対象として参照する基準画像と検査画像とを比較する方法が開示されている。それに加えて、特許文献１では、基準画像から見え方を調節するパラメータを取得し、検査画像の撮影時に基準画像との見え方を合わせるように撮影を行うことで両者を比較しやすくすることも開示されている。また、特許文献２は、ＣＴ（コンピュータ断層撮影）画像から病変の見え方を調節するパラメータをプリセットとして保持し、そのプリセットを適用することで指定された関心領域の見え方を調節して、一貫した判断を行いやすくする技術が開示されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０１６−６５８７５号公報
【特許文献２】特開２００２−１６５７８６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１に開示された技術では、異常部の種類や程度ごとに基準画像を用意しなければならないため手間が掛かる。また、特許文献２に開示された技術においても予めパラメータのプリセットを用意しておかなければならないため手間が掛かる。
【０００７】
そこで、本発明は、点検業務に先立つ手間を少なくすることを可能にすることを目的とする。
【課題を解決するための手段】
【０００８】
本発明は、対象物を撮影した対象画像に基づいて前記対象物の変状を特定するユーザの作業を支援する情報処理装置であって、前記ユーザの指示に基づいて、前記対象物の変状を特定するユーザの作業において参照される１以上の参照画像からいずれかを選択する選択手段と、前記対象画像と、前記選択された参照画像とを、所定の表示デバイスにおいて比較可能に表示させる表示手段と、前記表示手段によって表示された前記対象画像内の変状を指定する前記ユーザの操作を受け付ける指定手段と、前記対象画像のうち前記指定された変状を含む部分領域に基づいて、新たな参照画像を生成する生成手段と、を備え、前記生成手段によって生成された新たな参照画像は、前記選択手段によって選択され得る前記１以上の参照画像に加えられることを特徴とする。
【発明の効果】
【０００９】
本発明によれば、点検業務に先立つ手間を少なくすることが可能となる。
【図面の簡単な説明】
【００１０】
【図１】実施形態の情報処理装置の全体構成を示す図である。
【図２】第一の実施形態の構造物点検処理の機能ブロック図である。
【図３】第一の実施形態の参照情報を格納するテーブルを示す図である。
【図４】第一の実施形態の画面構成を説明する図である。
【図５】第一の実施形態の画面構成の代替例を説明する図である。
【図６】参照情報選択に応じた画像調整処理のフローチャートである。
【図７】参照情報生成処理を説明するフローチャートである。
【図８】第二の実施形態の構造物点検処理の機能ブロック図である。
【図９】対象画像へのユーザ操作に応じた画像調整処理のフローチャートである。
【図１０】第三の実施形態の構造物点検処理の機能ブロック図である。
【図１１】第三の実施形態の参照情報を格納するテーブルを示す図である。
【図１２】第三の実施形態の画面構成を説明する図である。
【図１３】第三の実施形態の画像調整処理のフローチャートである。
【図１４】表示状態の遷移の例を表す図である。
【図１５】表示状態の遷移の例を表す図である。
【発明を実施するための形態】
【００１１】
以下、添付の図面を参照して、本発明の好適な実施形態について詳細に説明する。なお、以下の実施形態において示す構成は一例に過ぎず、本発明はそれらの構成に限定されるものではない。本実施形態では、例えば建築物などの構造物を点検の対象物として撮影した画像を用い、その構造物における変状を点検する構造物点検業務を例に挙げて説明する。
＜第一の実施形態＞
図１は、第一の実施形態にかかる情報処理装置の概略的なハードウェア構成図である。ＣＰＵ１０１は、コンピュータシステムの制御を司る中央演算装置である。ＣＰＵ１０１が、制御プログラムや本実施形態にかかる処理プログラムに基づいて、情報の演算や加工、各ハードウェアの制御等を実行することにより、後述する構造物点検処理を含む各種処理、各機能ブロックの構成を実現する。ＲＡＭ１０２は、ランダムアクセスメモリであり、ＣＰＵ１０１の主メモリとして、実行プログラムのロードやプログラム実行に必要なワークメモリとして機能する。ＲＯＭ１０３は、ＣＰＵ１０１の動作処理手順を規定する制御プログラムや本実施形態にかかる処理プログラムを記録しているリードオンリーメモリである。ＲＯＭ１０３には、コンピュータシステムの機器制御を行うシステムプログラムである基本ソフト（ＯＳ）を記録したプログラムＲＯＭとシステムを稼動するために必要な情報などが記録されたデータＲＯＭとが含まれる。ＲＯＭ１０３の代わりに後述のＨＤＤ１０７を用いる場合もある。ＮＥＴＩＦ１０４は、ネットワークインターフェースであり、ネットワークを介して送受信される画像などのデータの入出力制御を行う。本実施形態にかかるプログラムは、ＮＥＴＩＦ１０４を介してダウンロードされてＨＤＤ１０７等に記録されてもよい。表示デバイス１０５は、例えばＣＲＴディスプレイや液晶ディスプレイ等である。入力デバイス１０６は、ユーザからの操作指示を受け付けるための操作入力部であり、例えば、タッチパネル、キーボード、マウスなどである。ＨＤＤ１０７は、ハードディスクドライブであり、記憶装置である。ＨＤＤ１０７は、アプリケーションプログラムや、画像などのデータ保存用に用いられる。バス１０８は、上述した各ユニット間を接続するための入出力バス（アドレスバス、データバス、及び制御バス）である。
【００１２】
図２は、本実施形態の情報処理装置において、点検の対象物である構造物の撮影画像を用いて、その構造物の点検を行う際の構造物点検処理を実現する機能ブロックを示した図である。本実施形態では、この図２の機能ブロックによる構造物点検処理を実行することで、構造物における変状の判定基準のばらつきを抑制しつつ、点検業務に先立つ手間を少なくすることをも可能としている。図２に示す各機能ブロックによる構造物点検処理は、例えば図１のＣＰＵ１０１が本実施形態にかかるプログラムを実行および各部を制御することにより実現される。なお、図２に示す機能ブロックは、ハードウェア構成により実現されてもよいし、ソフトウェア構成により実現されてもよく、またハードウェア構成とソフトウェア構成の組み合わせにより実現されてもよい。このことは後述する各実施形態の機能ブロックにおいても同様である。
【００１３】
対象画像入力部２０１は、ＮＥＴＩＦ１０４またはＨＤＤ１０７から、点検対象の構造物を撮影した画像（以下、対象画像と記す）を取得する。
対象画像表示部２０２は、対象画像入力部２０１に入力された対象画像の部分領域を、表示デバイス１０５の画面の所定の表示領域に表示させる。部分領域は、ユーザが入力デバイス１０６を介してスクロールやズームイン・ズームアウト等により対象画像のなかで領域指定を行うことにより決定される。
【００１４】
変状指定部２０３では、対象画像表示部２０２にて表示された対象画像の部分領域内の変状を、入力デバイス１０６を介したユーザからの入力に基づいて指定する。本実施形態において、変状とは、構造物の表面に発生する、例えば、ひび割れ、浮き、剥離、エフロレッセンス、コールドジョイント、ジャンカ（豆板）、表面気泡、砂筋、錆汁などである。本実施形態において、変状の指定は、対象画像内で変状と思われる領域について、ユーザが入力デバイス１０６を介して矩形や楕円形で囲むこと、その輪郭をなぞることなどにより行われる。変状がひび割れのように線状である場合、その線状の変状の上をなぞることで変状が指定されてもよい。変状指定部２０３は、そのようにして指定された変状を、変状を囲う矩形や、変状の輪郭、変状自体をなぞったポリラインとして表す情報を、対象画像表示部２０２に送る。これにより、対象画像表示部２０２は、それら変状を囲う矩形、変状の輪郭、ポリラインなどを対象画像上に表示する。なお、ポリラインはデータ量が多くなりがちであるため、変状指定部２０３は、ポリラインの外接矩形を算出し、変状領域を矩形として表す情報を、対象画像表示部２０２に送ってもよい。このようにして矩形により指定された変状は、例えば、その矩形の左上の座標とサイズ（幅と高さ）により表され、これにより、当該対象画像内において一意に位置と範囲の特定が可能となる。本実施形態においては、前述のように矩形で変状を囲むことによって変状を指定することとする。対象画像の部分領域や、その対象画像内で変状を指定する矩形についての具体的な表示例等は後述する。
【００１５】
変状判定部２０４は、変状指定部２０３により変状の指定がなされた対象画像の部分領域に対して、ユーザが入力デバイス１０６を介して入力した変状判定の結果を取得する。本実施形態において、ユーザが入力する変状判定の結果には、例えば、変状の種類とその変状の程度が含まれる。ユーザによる変状判定と、その判定結果の具体例については後述する。
【００１６】
参照情報表示部２０７は、後述する参照情報保持部２０６が管理している参照情報を、表示デバイス１０５に表示する。参照情報とは、対象画像の変状判定を行う際に参考となる参照画像に対して、その参照画像の少なくとも変状の種類およびその変状の程度を表す情報を関連付けた情報である。本実施形態において参照画像には、対象画像のうち、変状指定部２０３によって指定された変状を含む部分画像を含む。参照情報には、部分領域において変状判定部２０４によって判定された変状判定の結果を示す情報が含まれる。また参照画像に関連付けられる情報には、後述の表示パラメータ取得部２０５によって、参照情報保持部２０６から取得された表示パラメータや、変状指定部２０３で指定された部分領域から取得された表示パラメータが含まれていてもよい。本実施形態の場合、複数の参照情報が、例えばＨＤＤ１０７やＮＥＴＩＦ１０４を介した外部の記録装置等に保持されており、参照情報保持部２０６は、それら保持された複数の参照情報を管理している。
【００１７】
参照情報選択部２０９は、参照情報保持部２０６が管理している複数の参照情報の一覧を、表示デバイス１０５の所定の表示領域に表示させ、ユーザに対し、その中の一つを選択させる。一覧表示では、参照情報に基づいて参照画像を取得し、その参照画像に適切なトリミング、あるいは縮小処理を施して作成したサムネイル画像を並べて表示してもよいし、参照画像を一意に特定可能な文字列を並べて表示してもよい。参照情報の一覧の具体的表示例については後述する。
【００１８】
また、参照情報の一覧表示の際には、各参照情報に含まれる変状の種類や程度によって、それぞれ参照情報をグルーピングしたり、ソートしたり、フィルタリングしたりして表示してもよい。この場合、参照情報選択部２０９は、複数の参照情報を、各々の参照情報の種類や程度を基にグルーピングするグループ化機能、参照情報の種類や程度を基にソートするソート機能、参照情報の種類や程度を基にフィルタリングするフィルタ処理機能を有する。
【００１９】
そして、一覧表示のなかから、入力デバイス１０６を介してユーザにより一つの参照情報が選択されると、参照情報表示部２０７は、選択された参照情報に基づいて参照画像を取得し、表示デバイス１０５の所定の表示領域に表示させる。参照画像の表示の具体例については後述する。
【００２０】
ここで、本実施形態の情報処理装置は、対象画像の部分領域について変状指定と変状判定が行われる場合、前述した対象画像の部分領域と参照画像とを、ユーザが目視で比較可能となるように表示デバイス１０５に表示する。本実施形態の情報処理装置は、これら対象画像の部分領域と参照画像とを比較可能に表示する際に、対象画像と参照画像の表示上の見え方（表示の仕方）を一致させるような調整処理を行う。第一の実施形態では、対象画像の表示の仕方を、参照画像の表示の仕方に合わせることにより、対象画像と参照画像の表示上での見え方を一致させるような調整処理を実現している。
【００２１】
このため、表示パラメータ取得部２０５は、参照情報選択部２０９によって選択された参照情報に基づく参照画像から表示パラメータを取得する。また、選択された参照情報に既に表示パラメータが含まれている場合、表示パラメータ取得部２０５は、参照情報保持部２０６から、その選択された参照情報に含まれている表示パラメータを取得する。本実施形態において、表示パラメータとは、見え方が異なる画像同士の表示の仕方を揃え、表示上での見え方を合わせるために使用されるパラメータのことである。
【００２２】
本実施形態は、対象画像と参照画像を比較可能に表示することで、参照画像において既に特定されている変状と、対象画像に含まれる判定前の変状の候補との比較が容易となり、対象画像における変状を判定する作業が支援されるものである。従って、本実施形態において「表示上での見え方を合わせる」とは、対象画像と参照画像をより比較しやすいように、それぞれの表示上の環境を同等に揃えることである。例えば、両者のズーム倍率を一致させる。本実施形態では、参照画像には対象画像のうち既に変状が判定されている部分画像を含むので、対象画像のズーム倍率と参照画像のズーム倍率を一致させることで、対象画像と参照画像のそれぞれに同じ幅の変状が写っていた場合、それら表示上も同じ幅に見える。表示パラメータの詳細については、図６において具体例を用いて後述する。そして、表示パラメータ取得部２０５は、取得した表示パラメータを表示パラメータ適用部２０８に送る。
【００２３】
表示パラメータ適用部２０８は、表示パラメータを対象画像の部分領域に対して適用することにより、表示パラメータの取得元である画像（参照画像）と表示パラメータの適用先である画像（対象画像）との見え方を一致させるような画像の調整を行う。表示パラメータの適用の具体例については後述する。
【００２４】
また本実施形態の参照情報保持部２０６は、対象画像の部分領域の変状指定と変状判定が行われた場合、その部分領域に対し、その変状判定結果（変状の種類および程度等）を関連付けた情報を、新たな参照情報として生成および管理する。そして、参照情報保持部２０６は、その新たに生成した参照情報を、例えばＨＤＤ１０７やＮＥＴＩＦ１０４を介した外部の記録装置等に保持させる。すなわち、本実施形態では、ユーザによる変状の判定がなされた対象画像内の部分領域に関する参照情報は、その後さらに、この対象画像の変状判定が行われる際の参照情報として使用可能となされる。
【００２５】
図３は、参照情報保持部２０６が、保持している参照情報を管理するのに用いる参照情報テーブルを例示した図である。以下では、構造物点検で扱う変状のうち、特にひび割れを対象とした例を挙げて説明を行う。
図３において、参照情報テーブルの参照ＩＤ項目３０１には、参照情報テーブルに格納された参照情報を一意に識別するための参照ＩＤが記述される。
座標項目３０２には、対象画像内において、変状の領域を表す矩形の相対座標が記述される。本実施形態において座標項目３０２に記述される座標としては、対象画像内の矩形の左上の相対座標を用いることを想定しているが、これに限らず矩形の中心座標や右下の座標であってもよい。
【００２６】
サイズ項目３０３には、変状の領域を表す矩形のサイズが記述される。ここで、矩形のサイズは、矩形の幅と高さからなる。
種類項目３０４には、変状の種類を表す文字列が記述される。程度項目３０５には、変状の程度を表す値が記述される。本実施形態の例においては、変状の程度を表す値として、ひび割れの幅が記述されている例を挙げている。
表示パラメータ項目３０６には、表示パラメータが記述される。表示パラメータは、座標項目３０２の座標及びサイズ項目３０３のサイズで特定される参照画像に対して、前述したように他の画像（本実施形態の場合は部分領域）の見え方を合わせるために使用される。本実施形態では、表示パラメータの一例として、ズーム倍率を採用した場合を例に挙げて説明する。
【００２７】
図４（ａ）および図４（ｂ）は、本実施形態の情報処理装置において構造物点検処理を実行している際の表示デバイス１０５における表示の一例を説明する図である。なお、図４（ａ）と図４（ｂ）の差異は参照情報一覧の表現方法が異なっていることである。
対象画像読込ボタン４０１は、対象画像入力部２０１によって対象画像を読み込む際にユーザにより操作されるボタンである。
【００２８】
対象画像表示領域４０２は、対象画像表示部２０２によって対象画像が表示される表示領域である。ユーザは、１つの対象画像を取得したあと、スクロールやズームイン・ズームアウトにより、表示領域４０２に表示される部分領域を動かしながら、変状を判定する作業を行い、対象画像の必要な範囲を点検することができる。例えば、スクロールバー４０９およびスクロールバー４１０は、部分領域を動かす操作に利用できる。このほか、対象画像表示領域４０２上での所定操作（例えば右クリック、ダブルタップ等）に応じて、ズーム倍率、明度調整値、色相調整値、ガンマ値などの表示パラメータを変化させるためのインタフェースを表示してもよい。
【００２９】
参照画像表示領域４０３は、参照情報表示部２０７によって参照画像が表示される表示領域である。
変状領域指示矩形４０４は、変状指定部２０３によって指定された変状の領域を表した矩形である。
変状判定ボタン４０５は、変状領域指示矩形４０４で示されている変状について、変状判定部２０４によって変状の種類および程度をユーザが入力する際に操作されるボタンである。図示は省略しているが、変状判定ボタン４０５が押されたタイミングで、情報処理装置は、変状の種類と程度を入力するためのダイアログウィンドウ等を画面上に表示して、ユーザにそれらの入力を促す。
【００３０】
図４（ａ）の参照情報一覧領域４０６は、参照情報保持部２０６が管理している参照情報の一覧が表示される領域である。これにより、ユーザは、一覧から参照情報を選択することができる。
参照サムネイル画像４０７は、参照画像を表すサムネイル画像であり、参照情報に基づいて取得した参照画像を適切にトリミング、あるいは縮小あるいは拡大することで作成されている。図４（ａ）の例は、変状が判定された時に、変状指定部２０３によって指定されていた変状領域指示矩形４０４に相当する部分画像をトリミングし、縮小したサムネイル画像が参照情報一覧領域４０６に表示される。
図４（ａ）には、参照情報に含まれる変状の種類と程度（この例ではひび割れのひび幅）に基づいて、参照サムネイル画像４０７がグルーピングされて、参照情報一覧領域４０６に一覧表示された例を示している。
【００３１】
図４（ｂ）の参照情報一覧領域４０８は、参照情報保持部２０６が管理している参照情報の一覧が表示される領域である。図４（ａ）に例示した参照情報一覧領域４０６には参照画像を表すサムネイル画像が一覧表示されているが、図４（ｂ）の参照情報一覧領域４０８には、参照画像を一意に特定可能な文字列が一覧表示されている。この参照画像を一意に特定可能な文字列としては、例えば「変状＿（参照ＩＤ）」のような文字列を挙げることができる。
図４（ｂ）には、参照情報に含まれる種類と程度（ひび割れのひび幅）に基づいて、参照画像を一意に特定可能な文字列がグルーピングされて、参照情報一覧領域４０８に一覧表示された例を示している。
【００３２】
図４（ａ）と図４（ｂ）では、対象画像表示領域４０２と参照画像表示領域４０３をサイドバイサイドに並んで表示させることで両者を比較可能に表示した例を挙げたが、例えば図５のような表示がなされてもよい。図５は、対象画像表示領域４０２と参照画像表示領域４０３を、画面上の同一領域に（同じ表示領域）に両者を重畳させて配置し、両者の可視状態を切り替えることによって比較可能とした表示例を示している。
【００３３】
図５の例において、点検・参照画像表示領域５０１は、対象画像表示領域４０２と参照画像表示領域４０３を切り替えて表示するための表示領域である。点検・参照画像表示領域５０１における対象画像表示領域４０２と参照画像表示領域４０３の切り替え表示は、例えば、点検・参照画像切替ボタン５０２のようなトグルボタンの切り替え操作に応じて行われる。なお、図５において、対象画像読込ボタン４０１、変状判定ボタン４０５、参照情報一覧領域４０６、参照サムネイル画像４０７は、図４（ａ）と同様のものである。
【００３４】
以下、図６を用いて、対象画像と参照画像の表示の仕方を揃える処理（見え方を合わせる処理）について説明する。また、図７を用いて、ユーザによる変状判定結果に基づいて、新たな参照情報を生成する処理について説明する。
図６は、本実施形態の情報処理装置において、参照情報一覧の中から参照情報が選択された場合に実行される処理を説明するフローチャートである。本実施形態において参照情報は、後述の図７で説明するように、対象画像表示部２０２にて表示された対象画像内の変状に基づいて生成されたものであるとする。以下の図６や図７のフローチャートに示す処理は、図１のＣＰＵ１０１が本実施形態にかかるプログラムを実行することにより実現されるとする。また、以下の説明では、ステップＳ６０１〜ステップＳ６０４、ステップＳ７０１、ステップＳ７０２をそれぞれＳ６０１〜Ｓ６０４、Ｓ７０１、Ｓ７０２のように略記する。これらことについては後述する他のフローチャートにおいても同様とする。
【００３５】
Ｓ６０１において、参照情報選択部２０９は、前述のような参照情報一覧領域（４０６または４０８）のなかからユーザによって何れかが選択されると、その選択に応じた参照情報を、参照情報保持部２０６から取得する。
次にＳ６０２において、表示パラメータ取得部２０５は、Ｓ６０１で取得された参照情報から表示パラメータを取得する。ここでは表示パラメータの一例として、前述のズーム倍率が取得される。
【００３６】
次にＳ６０３において、参照情報表示部２０７は、Ｓ６０１で取得された参照情報に基づいて、参照画像表示領域４０３に参照画像を表示させる。このとき、参照情報表示部２０７は、先ず、選択された参照情報から変状を囲う矩形の左上の座標、サイズを取得する。そして、参照情報表示部２０７は、参照情報の生成元である画像（つまり対象画像表示部２０２によって表示されている対象画像）から、矩形の左上の座標とサイズを基に矩形画像を切り出す。さらに、参照情報表示部２０７は、切り出した矩形画像に対し、Ｓ６０２で表示パラメータ取得部２０５により取得されたズーム倍率を適用して、参照情報が生成された際の変状判定の時点の表示の仕方を再現する。表示の仕方を再現は、その切り出された矩形画像に対し、ズーム倍率に基づいて作成したスケール変換行列を適用することで実現できる。そして、参照情報表示部２０７は、その表示の仕方を再現した矩形画像を、参照画像として参照画像表示領域４０３に表示する。
【００３７】
なお本実施形態では、参照情報が生成された際の変状を囲う矩形（変状領域指示矩形４０４の内部）の表示の仕方を再現した矩形画像が、参照画像表示領域４０３よりも小さい場合は、変状を囲う矩形の周囲も含めて表示する。その結果として、参照サムネイル画像４０７が選択された場合に、参照画像表示領域４０３に表示される参照画像は、対象画像のうち、その変状が判定された時に、対象画像表示領域４０２の全体に表示されていた部分となる。ただし、これに限らない。例えば、参照情報が生成された際の変状を囲う矩形が参照画像表示領域４０３の中心に位置するように表示してもよい。また、変状を囲う矩形が参照画像表示領域４０３よりも小さい場合は、矩形の外側を空白としても構わない。
【００３８】
次にＳ６０４において、表示パラメータ適用部２０８は、対象画像表示部２０２にて表示されている対象画像に対して、Ｓ６０２で表示パラメータ取得部２０５にて取得されたズーム倍率を適用することで、参照画像と同様の表示の仕方を再現する。これにより、対象画像と参照画像の見え方（表示パラメータ）を一致させる画像の調整が実現されることになる。この場合も前述同様、対象画像に対して、ズーム倍率に基づいて作成したスケール変換行列を適用すればよい。選択された参照画像が対象画像の部分画像である場合、対象画像のズーム倍率と参照画像のズーム倍率を一致させることで、対象画像と参照画像のそれぞれに写る同じ幅の変状は、表示装置上での見た目の幅も一致する。ただし、本実施形態では、参照画像を選択し、対象画像の表示パラメータが情報処理装置によって変更された後であっても、ユーザは、スクロールやズームイン・ズームアウトにより、表示される部分領域を動かし、ズーム倍率を変更することが可能である。例えば、参照画像と同じズーム倍率で表示されることで、参照した変状と同程度の幅を持つ変状が対象画像に含まれることを確認した後、任意にズームアウトすることで、その変状の長さを確認することもできる。そして、任意にズームアウトをした状態で変状の判定が行われた場合、その判定に伴って新たに生成される参照画像の参照情報としては、ズームアウトにより微調整されたズーム倍率が保持される。第１の実施形態では、対象画像の表示パラメータがユーザによって変更された場合、その変更は参照画像に影響しない。
【００３９】
なお、本実施形態においては、対象画像と参照画像についてズーム倍率を揃えることによって両者の見え方を合わせる例を挙げたが、ズーム倍率以外の表示パラメータを利用してもよい。この場合の表示パラメータとしては、例えば、明度調整値、色相調整値、ガンマ値などが考えられる。また、用いられる表示パラメータは、それらズーム倍率、明度調整値、色相調整値、ガンマ値のいずれか一つだけでなく、それらの組み合わせであってもよい。
【００４０】
例えば、表示パラメータとして明度調整値を用いる場合、Ｓ６０２において、表示パラメータ取得部２０５は参照画像から明度を取得して明度調整値を生成する。そして、Ｓ６０４において、表示パラメータ適用部２０８は、その明度調整値を用いて、対象画像の明度を調整すればよい。また、例えばＨＳＶ色空間が使われているような場合、ＲＧＢの内、最大のものが明度調整値Ｖとなり、この場合の表示パラメータ適用部２０８は、参照画像の明度調整値Ｖｒに対し、対象画像の明度調整値Ｖｉを合わせるようにする。なおこのとき、対象画像の明度調整値Ｖｉの変化に従って、Ｖｉ以外の値（例えばＲがＶｉならば、ＧおよびＢ）も変化前のＲＧＢの比率を崩さないように変化させる必要がある。いずれの表示パラメータが採用される場合も、対象画像と表示画像を表示する環境を揃え、参照画像において既に特定されている変状と、対象画像に含まれる判定前の変更の候補とをより比較しやすくすることができる。
本実施形態では、参照情報一覧から参照情報が選択されるたびに以上のような処理が行われる。
【００４１】
図７は、本実施形態の情報処理装置において、変状判定ボタン４０５が押されたときに実行される、新たな参照情報の生成処理を説明するフローチャートである。
Ｓ７０１において、変状判定部２０４は、変状判定ボタン４０５が押された場合、その時に変状判定された対象画像の部分領域と、変状の種類及び程度を示す情報とを、新たな参照情報として生成して、参照情報保持部２０６に格納する。この場合、参照情報保持部２０６には、前述した図３の参照情報テーブルの各項目に参照情報を記述する。また、この時の参照情報には、表示パラメータ取得部２０５によって取得された、現時点の対象画像のズーム倍率が含まれる。
なお、表示パラメータの種類によっては、必ずしもこのタイミングで表示パラメータの取得・保存を行わなくてもよい。例えば、前述の表示パラメータの一例として説明した明度調整値の場合、参照情報の生成時に明度調整値を算出し、参照情報の一部として保存してもよいが、参照画像が選択されたタイミングで明度調整値を算出してもよい。
【００４２】
次にＳ７０２において、参照情報表示部２０７は、Ｓ７０１で生成された参照情報に基づいて生成した表示要素を、例えば図４（ａ）の参照情報一覧領域４０６に追加表示する。具体的には、参照情報表示部２０７は、新たな参照情報に基づいて生成された参照画像のうち変状部分を例えばサムネイル画像のサイズまでリサイズし、参照情報一覧領域４０６に追加表示する。または、参照情報表示部２０７は、参照情報を示す参照ＩＤに基づく適当な文字列を生成し、例えば図４（ｂ）の参照情報一覧領域４０８に追加表示してもよい。
なお、図７のフローチャートは、変状判定ボタン４０５が押されたタイミングだけでなく、ユーザが変状を指定したタイミングなど任意のタイミングで起動してもよい。
【００４３】
ここで、図１４を参照して、本実施形態の情報処理装置において構造物点検処理が実行される際の、表示デバイス１０５における表示状態の遷移の例を説明する。
図１４（ａ）〜（ｄ）は、図４（ａ）に示した画面を使って、ユーザが構造物点検の作業を行うことで生じる表示状態の変化を時系列に表している。
図１４（ａ）では、図４（ａ）で示したように、ユーザが対象画像表示領域４０２の中に、変状指定領域４０４を設定している。
【００４４】
ここで、参照画像としてはサムネイル画像１４００が選択された状態にあり、その結果、参照画像表示領域４０３には、サムネイル画像１４００に基づく参照画像が表示されている。図１４（ａ）では、選択された状態にあるサムネイル画像１４００の外枠が太く縁どられることで、他のサムネイル画像を識別可能に明示されている。さらに図１４（ａ）では、ユーザにより判定ボタン４０５が操作され、変状領域指示矩形４０４の内側が幅５．０ｍｍのひびとして登録されたとする。その結果、サムネイル画像１４０１が、参照情報一覧領域４０６に加わる。
【００４５】
図１４（ｂ）は、さらにユーザが作業を進めるにあたり、参照情報一覧領域４０６から幅０．２ｍｍの変状としてグルーピングされているサムネイル画像１４０２を選択した状態を表す。選択された状態にあるサムネイル画像１４０２の外枠が太く縁どられることで、他のサムネイル画像を識別可能に明示されている。
参照画像表示領域４０３には、選択されたサムネイル画像１４０２に基づく参照画像が表示されている。
【００４６】
ここで、参照画像表示領域４０３に表示された参照画像全体のうち、サムネイル画像１４０２として切り出されている領域は、右下に当たる部分である。参照画像が変わったことに応じて、対象画像表示領域４０２では、対象画像のズーム倍率が変更され、図１４（ａ）の状態よりもより拡大されている。
【００４７】
図１４（ｂ）で対象画像として表示されているのは、図１４（ａ）で表示されていた対象画像のうち変状指定領域４０４で選択されている部分の下側にあたる。ユーザは、例えば、図１４（ａ）の状態（幅０．５ｍｍの変状が参照されていた）に比べて、より細い幅の変状に着目して作業を行いたい場合に、幅０．２ｍｍの変状と比較するために、図１４（ｂ）のようにサムネイル画像１４０２を選択する。情報処理装置は、サムネイル画像１４０２が選択されたことに応じて、対象画像をズームインする。この結果、ユーザは、対象画像のうち新たに着目した細かい変状と幅０．２ｍｍの変状とを同じズーム倍率で容易に比較可能となる。
【００４８】
図１４（ｃ）は、ユーザが、対象画像表示領域４０２の中に、新たに変状指定領域１４０３を設定し、判定ボタン４０５を押し、幅０．２ｍｍの変状を登録した状態である。これにより、参照情報一覧領域４０６のうち幅０．２ｍｍのグルーピングの中に、サムネイル画像１４０３が加わる。サムネイル画像１４０４は、対象画像のうち変状指定領域１４０３で囲われた部分が切り出され、縮小された画像となっている。
【００４９】
このように本実施形態では、参照情報一覧領域４０６から、サムネイル画像が選択されるたびに、対象画像表示領域４０２内の表示パラメータ（例えばズーム倍率）が変更される。また、対象画像において新たに変状が判定されるたびに、参照情報が生成される。その際、表示状態においては、参照情報一覧領域４０６に参照情報を一意に特定可能な文字列が追加される。
【００５０】
なお、図１４（ｂ）および図１４（ｃ）では、幅０．２ｍｍの変状の参照画像を参照しながら、対象画像において幅０．２ｍｍの変状を判定する作業を例示したが、必ずしも同じ幅の変状を参照していることは必要ない。例えば幅０．５ｍｍの変状の参照画像と比較したとき、対象画像の変状が参照画像の変状より細いことを確認し、結果として幅０．２ｍｍの変状を判定するといったこともあり得る。つまり、参照情報一覧に、新しくサムネイル画像が追加される時、必ずしも選択された状態にあるサムネイル画像と同じグループに追加されるとは限らない。
【００５１】
本実施形態において新たに生成された参照情報は、その後に行われる変状判定の作業において、参照するために選択することができる。
例えば、図１４（ｄ）は、図１４（ａ）において新たに追加されたサムネイル画像１４０１が選択された状態を表す。
参照画像表示領域４０３には、図１４（ａ）において変状指定領域４０４に対する変状判定が行われた時に表示されていた対象画像の部分画像が、参照画像として表示されている。またこのとき、対象画像表示領域４０２では、図１４（ａ）において変状指定領域４０４に対する変状判定が行われた時に表示されていた対象画像のズーム倍率で対象画像が表示される。その結果、図１４（ａ）及び図１４（ｄ）では、対象画像表示領域４０２と参照画像表示領域４０３に表示される画像の見た目が全く同じになっている。
【００５２】
ただし、本実施形態ではこれに限らない。例えば、参照画像表示領域４０３では、選択されているサムネイル画像１４０１で切り出されている領域が中心となるような参照画像が表示されてもよい。また例えば、対象画像表示領域４０２では、ズーム倍率が変更される直前に表示されていた部分画像を中心とするように表示される部分の位置合わせが行われてもよい。
【００５３】
このように、第一の本実施形態においては、ユーザの変状判定結果に基づいて、対象画像から新たな参照画像を生成することができる。これにより、第一の実施形態によれば、変状の種類や程度ごとにあらかじめ参照画像を用意しておく手間を省くことが可能となる。また、第一の実施形態においては、対象画像と、過去に判定した変状画像（参照画像）との見え方の条件（環境）を揃えることができる。具体的には、対象画像と、対象画像の一部である参照画像を、より比較しやすい状態で表示するために、それぞれの表示パラメータを一致させる。これにより、第一の実施形態によれば、過去に判定した変状画像（参照画像）における変状を参考にして新たな変状を判定できるようになり、変状判定に一貫性を持たせることが可能となる。
【００５４】
＜第二の実施形態＞
前述の第一の実施形態では、ユーザによって選択された参照情報に基づいて、対象画像の見え方の条件が揃えられている。また、対象画像に対してユーザが見え方を変更する操作を加えた場合、その影響は参照画像に及ばなかった。これに対し、以下の第二の実施形態では、対象画像表示領域４０２に対するズーム倍率の変更等のユーザ操作により、対象画像の表示の仕方が変化した場合に、参照画像の表示態様にその変化を反映する場合の動作について説明する。つまり、第二の実施形態では、対象画像に基づいて参照画像の見え方の条件（環境）を揃えるために、表示パラメータを調整する処理が行われる。
【００５５】
図８は、第二の実施形態の情報処理装置において構造物点検処理を実現する機能ブロックを示した図である。対象画像入力部２０１〜変状判定部２０４、参照情報保持部２０６〜参照情報選択部２０９は、図２の対応した各部と同様であるため、それらの説明は省略する。第二の実施形態における表示パラメータ取得部８０１は、対象画像または対象画像表示部２０２から表示パラメータを取得する。
【００５６】
また、図９（ａ）と図９（ｂ）は、第二の実施形態の情報処理装置における構造物点検処理において、ユーザ操作により対象画像の表示の仕方が変化した場合に実行される２種類の処理を表すフローチャートである。以下の図９（ａ）と図９（ｂ）のフローチャートの処理は、ユーザによって対象画像表示領域４０２のパラメータが変更されたことをきっかけに開始される。
【００５７】
図９（ａ）のフローチャートは、対象画像において変更された表示パラメータを、選択されている１つの参照画像の表示パラメータとして適用することで両者の見え方を合わせる処理を表す。
Ｓ９０１において、表示パラメータ取得部８０１は、対象画像表示部２０２に設定された現在の表示パラメータを取得する。第２の実施形態でも、表示パラメータは、例えばズーム倍率、明度調整値、色相調整値、ガンマ値等である。
次にＳ９０２において、表示パラメータ適用部２０８は、参照情報表示部２０７に表示された参照画像のズーム倍率を、Ｓ９０１で取得したズーム倍率に変更する。
【００５８】
ここで、図１５を参照して、図９（ａ）のフローチャートの処理が実行される際の、表示デバイス１０５における表示状態の遷移の例を説明する。図１５（ａ）〜（ｂ）は、第２の実施形態において、ユーザが構造物点検の作業を行う場合に図９（ａ）のフローチャートの処理が実行されることで生じる表示状態の変化を時系列に表している。
【００５９】
図１５（ａ）は、図１４（ｂ）と同じ状態を表す。
参照画像表示領域４０３には、選択状態にあるサムネイル画像１４０２に基づいた参照画像が表示される。
また、図１５（ａ）では、対象画像表示領域４０２の中に、ズーム倍率変更ボタン１５０１が表示されている。ズーム倍率変更ボタン１５０１は、例えば、対象画像表示領域４０２内でのクリックやダブルタップなどの所定の操作に応じて呼び出し可能な、表示パラメータの操作用インタフェースの一例である。ユーザは、ズーム倍率変更ボタン１５０１を操作することで、対象画像のズーム倍率を任意に変更することができる。
【００６０】
図１５（ｂ）は、対象画像表示領域４０２の内部がユーザ操作に応じてさらにズームインされた状態を表す。本実施形態では、対象画像に対するユーザ操作があったことに応じて、参照画像表示領域４０３においても、対象画像と同じ表示パラメータの変化が反映される。
図１５（ｂ）の場合、参照画像もズームインされている。本実施形態では、特に参照画像にズームイン（拡大）の処理を加える場合は、参照画像中の変状を見失うことがないように、表示される部分領域に必ず既に判定された変状が含まれるように位置合わせする。その結果、図１５（ｂ）の参照画像表示領域４０３には、サムネイル画像１４０２に切り出されている変状が拡大されて表示されている。
【００６１】
図９（ｂ）のフローチャートは、対象画像において変更された表示パラメータを、選択されている参照画像だけでなく、表示情報一覧に含まれる全ての参照情報に反映の表示パラメータとして適用する処理を表す。ただし、図９（ｂ）の説明において、参照情報一覧は、各参照情報に基づいて得られる参照画像を、トリミングせずに縮小あるいは拡大したサムネイル画像から成ることとする。
図９（ｂ）のＳ９０１の処理は、図９（ａ）のＳ９０１の処理と同様であるため説明は省略する。
【００６２】
次にＳ９０３において、参照情報選択部２０９は、参照情報保持部２０６に格納されているすべての参照情報について、後段のＳ９０４、Ｓ９０５の処理が完了したかを判定する。参照情報選択部２０９は、Ｓ９０３において処理が完了していると判定した場合には図９（ｂ）のフローチャートの処理を終了する。一方、参照情報選択部２０９は、Ｓ９０３において処理が完了していないと判定した場合にはＳ９０４に処理を進める。
Ｓ９０４に進むと、参照情報選択部２０９は、参照情報保持部２０６から、後段のＳ９０４、Ｓ９０５の処理が完了していない参照情報を一件取得する。
【００６３】
次に、Ｓ９０５において、参照情報選択部２０９は、Ｓ９０４で取得した参照情報を基に、Ｓ６０３で説明したような方法で参照画像を得る。そして、参照情報選択部２０９は、その参照画像に対して、Ｓ９０１で取得したズーム倍率に基づいて作成したスケール変換行列を適用し、その後、サムネイル画像のサイズまでリサイズする。ただし、この方法の場合、二度のリサイズ処理を行わなければならず、計算量が増加する。このため、Ｓ９０１で取得したズーム倍率と、参照画像とサムネイル画像のサイズ比から求めたサムネイル化のためのスケール係数を合わせて、一度のリサイズ処理で済むようにしてもよい。
なお、図９（ｂ）のフローチャートの処理の完了後に、参照情報一覧の中からサムネイル画像が選択されると、図９（ａ）のフローチャートの処理が実行されるようにしてもよい。
【００６４】
ここで、図１５（ｃ）及び図１５（ｄ）を参照して、図９（ｂ）のフローチャートの処理が実行される際の、表示デバイス１０５における表示状態の遷移の例を説明する。
図１５（ｃ）〜（ｄ）は、第２の実施形態において、ユーザが構造物点検の作業を行う場合に図９（ａ）のフローチャートの処理が実行されることで生じる表示状態の変化を時系列に表している。
【００６５】
図１５（ｃ）において、対象画像表示領域４０２の状態は図１５（ａ）と同じである。参照画像表示領域４０３には、選択状態にあるサムネイル画像１５０３に基づいた参照画像が表示されている。ここで、サムネイル画像１５０３に対応する参照画像は、図１５（ａ）におけるサムネイル画像１４０２と同じである。ただし、図１５（ｃ）では、参照情報一覧領域４０６に表示されているサムネイル画像が、参照画像そのものを縮小したものになっている。ユーザは、この場合にも、ズーム倍率変更ボタン１５０１を操作することで、対象画像のズーム倍率を任意に変更することができる。
【００６６】
図１５（ｄ）は、対象画像表示領域４０２の内部がユーザ操作に応じてさらにズームインされた状態を表す。本実施形態では、対象画像に対するユーザ操作があったことに応じて、参照情報一覧領域４０６に表示されているサムネイル画像のそれぞれがズームインされる。図１５（ｄ）の場合、さらに図９（ａ）の処理を施すことで、参照画像もズームインされている。
【００６７】
このように、第二の実施形態の情報処理装置によれば、対象画像に対するユーザ操作に基づいて、参照画像の見え方を常に対象画像と合うように揃えることができ、これによりユーザは迅速に変状を判定することが可能となる。
【００６８】
＜第三の実施形態＞
前述の第一の実施形態では、表示中の対象画像から参照画像を生成していた。これに対して、第三の実施形態においては、過去に生成された参照情報を読み込む（外部からの読込も含む）構成とする。ここで、本来、変状部分の撮影にあたっては、所定の解像度で撮影することが推奨されるが、撮影現場の状況によっては必ずしもこれが満たされるとは限らない。第三の実施形態のように過去に生成された参照情報を読み込むようにした場合、その読み込んだ参照情報に基づく参照画像の解像度と、撮影された対象画像の解像度とが異なることが起こり得る。このように対象画像と参照画像の解像度が異なっていると、前述のように単純にズーム倍率を合わせても両者の表示の仕方を揃えることが難しい。
【００６９】
図１０は、第三の実施形態の情報処理装置における構造物点検処理を実現する機能ブロック図である。対象画像表示部２０２〜参照情報選択部２０９は、図２の対応した各部と同様であるため、それらの説明は省略する。
図１０において、対象画像入力部１００１は、ＨＤＤ１０７やＮＥＴＩＦ１０４から対象画像を取得する。その際、対象画像入力部１００１は、入力しようとする対象画像の解像度（単位はピクセル／ｍｍ）をユーザに求めることとする。ユーザによって入力された対象画像の解像度は、その対象画像が対象画像表示部２０２に表示されている間、一時データとして保持（例えばＲＡＭ１０２の所定の領域に保持）される。
【００７０】
参照情報入力部１００２は、ＨＤＤ１０７やＮＥＴＩＦ１０４から参照情報を取得する。この場合の参照情報は、ファイルとして保存されていてもよいし、データベースに格納されていてもよい。なお、これから点検しようとする対象画像に対して、適切な参照情報を入力するために、複数の参照情報は、検索可能なように構造化されていてもよい。この場合、参照情報入力部１００２は、例えば参照情報の種類や程度によって検索する検索機能を有している。また、この場合の検索キーとしては、変状が現れた構造物の種類やその材質、変状が現れた位置、判定を行った人物などが利用できる。参照情報入力部１００２によって取得された参照情報は、例えば参照情報保持部２０６により一時的に保持される。
【００７１】
参照情報出力部１００３は、第三の実施形態の情報処理装置において新たに生成された参照情報を、ＨＤＤ１０７やＮＥＴＩＦ１０４へ出力する。なお、出力された参照情報は、ファイルとして保存されてもよいし、データベースに格納されてもよい。
【００７２】
図１１は、第三の実施形態において、参照情報保持部２０６が管理する参照情報テーブルを例示する図である。参照ＩＤ項目３０１〜表示パラメータ項目３０６は図３の対応する各項目と同様であるため、それらの説明を省略する。
図１１の参照情報テーブルには、画像パス項目１１０１と、解像度項目１１０２が用意されている。
画像パス項目１１０１には、参照される変状が写り込んでいる画像を示すパスが記述される。
解像度項目１１０２には、画像パス項目１１０１のパスが示す画像（参照される変状が写りこんでいる画像）の解像度が記述される。
【００７３】
図１２は、第三の実施形態の情報処理装置における表示画面の一例を説明する図である。対象画像読込ボタン４０１〜参照サムネイル画像４０７は、図４の対応する各表示要素と同様であるため、それらの説明は省略する。
参照情報入力ボタン１２０１は、参照情報入力部１００２によって参照情報を入力する際にユーザにより操作されるボタンである。
参照情報出力ボタン１２０２は、参照情報出力部１００３によって参照情報を出力する際にユーザにより操作されるボタンである。
【００７４】
図１３は、本実施形態の情報処理装置で実現される構造物点検処理において、過去に生成された参照情報一覧のなかから参照情報が選択された場合に実行される処理を説明するフローチャートである。Ｓ６０１は、図６の対応するステップと同様であるため、その説明は省略する。図１３のフローチャートの場合、Ｓ６０１の後、Ｓ１３０１の処理に進む。
【００７５】
Ｓ１３０１において、参照情報選択部２０９は、ユーザにより選択された参照情報から、変状が写り込んでいる画像のパスと解像度、変状判定時のズーム倍率を取得する。
次にＳ１３０２において、対象画像表示部２０２は、表示されている対象画像の解像度を取得する。対象画像の解像度は、対象画像表示部２０２に表示中の対象画像に付随する一時データとして保持されているとする。
【００７６】
次にＳ１３０３において、対象画像表示部２０２は、表示している対象画像と、Ｓ１３０１でパスと解像度、ズーム倍率が取得された画像（変状が写りこんでいる画像のなかから特定された参照画像）との、表示上での見え方（見た目の解像度）を合わせる。具体的には、対象画像表示部２０２は、後述する式（１）で求められるスケール係数を、それら二枚の画像のうち解像度が高い方に適用する。
【００７７】
ここで、画像サイズのスケール係数Ｓ1は、Ｓ１３０１で取得した解像度をｒｅｓaとし、Ｓ１３０２で取得した解像度をｒｅｓbとすると、式（１）のように求められる。
【数１】
2019053050.tif 000003
【００７８】
なお、ここでは、解像度が高い方の画像を適切にスケールすることで、もう一方の画像と表示上での見え方（見た目の解像度）を合わせているが、解像度が低い方の画像を適切にスケールさせてもう一方の画像と表示上における見た目の解像度を合わせてもよい。その場合、下記の式（２）で求められるスケール係数Ｓ2を解像度が低い方の画像に適用すればよい。
【数２】
2019053050.tif 000004
【００７９】
次にＳ１３０４において、表示パラメータ適用部２０８は、Ｓ１３０３で両者の表示上での見え方（見た目の解像度）を合わせた後に、Ｓ１３０１で取得したズーム倍率を、対象画像表示部２０２にて表示されている対象画像に適用する。
【００８０】
このように、第三の実施形態においては、他ユーザが本実施形態の情報処理装置を用いて点検作業を行った際に作成された参照情報を流用することができる。これにより、第三の実施形態によれば、点検作業に熟練したユーザ（熟練者）によって生成された参照情報を、熟練していない初級のユーザ（初級者）が利用可能となり、初級者でも熟練者の判定基準に合わせた判定を行うことが可能となる。
【００８１】
なお、第三の本実施形態では、対象画像の表示の仕方を参照画像に対して揃えているが、もちろん、参照画像の表示の仕方を対象画像に対して揃えてもよい。この場合の処理は、基本的には図９（ａ）あるいは図９（ｂ）のフローチャートで説明した通りであるが、Ｓ１３０３のように予め両者の見た目の解像度を揃えておく必要がある。また、第三の実施形態では、過去に生成された参照情報を一覧表示して選択する例を挙げたが、一覧表示される参照情報には過去に生成された参照情報と前述の実施形態のように対象画像から新たに生成した参照情報の両者が含まれていてもよい。
【００８２】
以上説明したように、本発明にかかる前述した各実施形態によれば、ユーザの変状判定結果に基づいて、変状判定の際に参照する参照画像を自動的に生成することが可能となる。また、各実施形態によれば、点検対象の画像と変状判定の参照画像との見え方を合わせることで、両者の比較をしやすくすることが可能となっている。
【００８３】
＜その他の実施形態＞
本発明は、前述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサーがプログラムを読出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【００８４】
前述の実施形態は、何れも本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。即ち、本発明は、その技術思想、又はその主要な特徴から逸脱することなく、様々な形で実施することができる。
【符号の説明】
【００８５】
１０１：ＣＰＵ、１０２：ＲＡＭ、１０３：ＲＯＭ、１０４：ＮＥＴＩＦ、１０５：表示デバイス、１０６：入力デバイス、４０２：対象画像表示領域、４０３：参照画像表示領域、４０６，４０８：参照情報一覧領域
【図１】
2019053050.tif 000005
【図２】
2019053050.tif 000006
【図３】
2019053050.tif 000007
【図４】
2019053050.tif 000008
【図５】
2019053050.tif 000009
【図６】
2019053050.tif 000010
【図７】
2019053050.tif 000011
【図８】
2019053050.tif 000012
【図９】
2019053050.tif 000013
【図１０】
2019053050.tif 000014
【図１１】
2019053050.tif 000015
【図１２】
2019053050.tif 000016
【図１３】
2019053050.tif 000017
【図１４】
2019053050.tif 000018
【図１５】
2019053050.tif 000019