(57)【要約】  本発明は、対応点の指定、及び指定された対応点に基づく画像の合成を迅速かつ容易に行うことができる画像合成方法、画像合成装置、及び記録媒体を提供することを目的とする。本発明の一の態様に係る画像合成方法では、複数の画像の全てを１つの画像に合成できない場合に、複数の画像を合成が可能な画像群に分けるので、全ての画像に対して対応点を指定する必要がなく、一の画像群と他の画像群とについて（すなわち、自動合成が可能でない画像群どうしで）対応点を指定すればよい。また、複数の画像が合成可能な画像群ごとに表示装置に表示されるので、いずれの画像群について対応点を指定すればよいか把握することができる。このように、上述した態様の画像合成方法によれば、対応点の指定、及び指定された対応点に基づく画像の合成を迅速かつ容易に行うことができる。
2019003796.tif 000002
【特許請求の範囲】
【請求項１】
被写体を分割撮影して取得した複数の画像を入力するステップと、
前記複数の画像を画像どうしの対応点に基づいて合成するステップと、
を有する画像合成方法であって、
前記複数の画像の全てを１つの画像に合成できない場合に、
前記複数の画像を合成が可能な画像群に分けるステップと、
前記画像群ごとに、画像どうしの対応点に基づいて画像配置を決定するステップと、
前記決定した画像配置により、前記複数の画像を前記画像群ごとに表示装置に表示させるステップと、
前記表示された前記画像群のうちの一の画像群と前記画像群のうちの他の画像群とについて対応点を指定するステップと、
前記一の画像群と前記他の画像群とを前記指定された対応点に基づいて合成するステップと、
を行う画像合成方法。
【請求項２】
前記画像配置を決定するステップでは、前記複数の画像のうち射影変換の基準となる基準画像を設定し、前記複数の画像のうち前記基準画像以外の画像の前記基準画像に対する射影変換行列を前記画像どうしの対応点に基づいて算出し、前記算出した射影変換行列に基づいて前記画像配置を決定する請求項１に記載の画像合成方法。
【請求項３】
前記画像配置を決定するステップでは、画像どうしが重ならない画像配置を決定する請求項１または２に記載の画像合成方法。
【請求項４】
前記画像配置を決定するステップでは、画像どうしで重複する領域が重なる画像配置を決定する請求項１または２に記載の画像合成方法。
【請求項５】
前記画像群ごとに画像を合成するステップを有し、
前記複数の画像を表示するステップでは、前記画像群ごとに合成した画像により前記複数の画像を表示させる請求項１から４のいずれか１項に記載の画像合成方法。
【請求項６】
前記画像群ごとに画像を合成するステップでは、複数の画像が重複する領域においては前記重複する複数の画像のうちの１つを選択して画像を合成する請求項５に記載の画像合成方法。
【請求項７】
前記画像群どうしの相対配置をユーザの指示入力に基づいて変更するステップを有し、
前記複数の画像を表示するステップでは前記変更した相対配置で前記複数の画像を表示する請求項１から６のいずれか１項に記載の画像合成方法。
【請求項８】
前記複数の画像を入力するステップでは、前記被写体としての建造物を分割撮影して取得した複数の画像を入力する請求項１から７のいずれか１項に記載の画像合成方法。
【請求項９】
被写体を分割撮影して取得した複数の画像を入力する画像入力部と、
前記複数の画像を画像どうしの対応点に基づいて合成する画像合成部を備える画像合成装置であって、
前記複数の画像を１つの画像に合成できない場合に、前記複数の画像を合成が可能な画像群に分け、前記画像群ごとに画像どうしの対応点に基づいて画像配置を決定する画像配置決定部と、
前記決定した画像配置により、前記複数の画像を前記画像群ごとに表示装置に表示させる表示制御部と、
前記表示された前記画像群のうちの一の画像群と前記画像群のうちの他の画像群とについて対応点を指定する対応点指定部と、
を備え、
前記画像合成部は、前記一の画像群と前記他の画像群とを前記指定された対応点に基づいて合成する画像合成装置。
【請求項１０】
前記画像配置決定部は、前記複数の画像のうち射影変換の基準となる基準画像を設定し、前記複数の画像のうち前記基準画像以外の画像の前記基準画像に対する射影変換行列を前記画像どうしの対応点に基づいて算出し、前記算出した射影変換行列に基づいて前記画像配置を決定する請求項９に記載の画像合成装置。
【請求項１１】
前記画像合成部は前記画像群ごとに画像を合成し、
前記表示制御部は前記画像群ごとに合成した画像により前記複数の画像を表示させる請求項９または１０に記載の画像合成装置。
【請求項１２】
前記画像配置決定部は前記画像群どうしの相対配置をユーザの指示入力に基づいて変更し、
前記表示制御部は前記変更した相対配置で前記複数の画像を表示させる請求項９から１１のいずれか１項に記載の画像合成装置。
【請求項１３】
請求項１から８のいずれか１項に記載の画像合成方法をコンピュータに実行させるプログラムのコンピュータ読み取り可能なコードが記録された記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は画像合成方法、画像合成装置、及び記録媒体に関し、特に被写体を分割撮影して取得した複数の画像を合成する技術に関する。
【背景技術】
【０００２】
被写体の画像を撮影する場合、被写体の種類、大きさ等の条件によっては１つの画像に収まらず複数の画像に分割して撮影される場合があり、この場合撮影された複数の画像は画像処理で一枚の画像に合成される。画像の合成は、例えば下記特許文献１に記載されているように、ブロックマッチングで対応点を検出することにより行われる。また、マッチングによる画像の合成に関し、下記特許文献２には、合成すべき複数の画像をあらかじめ人手で大まかに重ね合わせておく（人手で初期配置を決める）ことが記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１７−８５２９７号公報
【特許文献２】特開平１０−１０８００３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
画像を合成する場合、画像のオーバーラップが少ない、画像がボケている等の理由により画像の合成（画像処理装置等による自動的な合成）に失敗する可能性があるが、この場合ユーザが対応点を指定することで合成を行える場合がある。しかしながら、特許文献１，２では合成失敗時の対応については考慮されていない。また、対応点の指定を特許文献２の重ね合わせ作業のように全て人手で行う場合、画像の数が多くなるほど時間を要する複雑な作業になる。【０００５】
このように、従来の技術は対応点の指定、及び指定された対応点に基づく画像の合成を迅速かつ容易に行えるものではなかった。【０００６】
本発明はこのような事情に鑑みてなされたもので、対応点の指定、及び指定された対応点に基づく画像の合成を迅速かつ容易に行うことができる画像合成方法、画像合成装置、及び記録媒体を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上述した目的を達成するため、本発明の第１の態様に係る画像合成方法は、被写体を分割撮影して取得した複数の画像を入力するステップと、複数の画像を画像どうしの対応点に基づいて合成するステップと、を有する画像合成方法であって、複数の画像の全てを１つの画像に合成できない場合に、複数の画像を合成が可能な画像群に分けるステップと、画像群ごとに、画像どうしの対応点に基づいて画像配置を決定するステップと、決定した画像配置により、複数の画像を画像群ごとに表示装置に表示させるステップと、表示された画像群のうちの一の画像群と画像群のうちの他の画像群とについて対応点を指定するステップと、一の画像群と他の画像群とを指定された対応点に基づいて合成するステップと、を行う。【０００８】
第１の態様に係る画像合成方法では、複数の画像の全てを１つの画像に合成できない場合に、複数の画像を合成が可能な画像群に分けるので、全ての画像に対して対応点を指定する必要がなく、一の画像群と他の画像群とについて（すなわち、自動合成が可能でない画像群どうしで）対応点を指定すればよい。また、複数の画像が合成可能な画像群ごとに表示装置に表示されるので、いずれの画像群について対応点を指定すればよいか把握することができる。このように、第１の態様によれば対応点の指定、及び指定された対応点に基づく画像の合成を迅速かつ容易に行うことができる。このような対応点の指定は、ユーザの操作に基づいて行うことができる。【０００９】
第１の態様において、「画像群」に含まれる画像の数は問わず、画像が１つの場合も「画像群」に含まれるものとする。また第１の態様において、合成可能な画像群を画像群ごとに識別可能に表示してもよい。例えば、画像群ごとに色を変える、枠で囲む、他の画像群と間隔を空ける、等により表示することができる。なお、入力した複数の画像を表示する際に画像群を構成する画像を合成してもよいし、しなくてもよい。【００１０】
なお第１の態様において、合成の対象となる複数の画像は撮像装置で取得して入力してもよいし、取得され記録されている画像をネットワーク経由あるいは、媒体経由で入力してもよい。【００１１】
第２の態様に係る画像合成方法は第１の態様において、画像配置を決定するステップでは、複数の画像のうち射影変換の基準となる基準画像を設定し、複数の画像のうち基準画像以外の画像の基準画像に対する射影変換行列を画像どうしの対応点に基づいて算出し、算出した射影変換行列に基づいて画像配置を決定する。第２の態様によれば、基準画像以外の画像が、基準画像に対する射影変換行列により移動、回転等されて画像配置が決定される。基準画像は、被写体に対する位置（例えばコーナー部分の画像）、撮影順（例えば、一番最初に撮影した画像）、画像の特徴（露出条件、鮮明度、特定の部材が写っている）等に基づいて設定することができる。なお、基準画像の撮影面は撮影方向に正対していることが好ましいが、これに限定されるものではない。基準画像の撮影面が正対していない場合は、合成後に正対補正することができる。【００１２】
第３の態様に係る画像合成方法は第１または第２の態様において、画像配置を決定するステップでは、画像どうしが重ならない画像配置を決定する。第３の態様は画像配置の一態様を規定するものであり、例えば各画像の向きを射影変換行列で求めた向きと変えずに、画像どうしを離間させて配置することができる。【００１３】
第４の態様に係る画像合成方法は第１または第２の態様において、画像配置を決定するステップでは、画像どうしで重複する領域が重なる画像配置を決定する。第４の態様は画像配置の他の態様を規定するものであり、画像を合成した様子を、画像を合成することなく容易に把握することができる。【００１４】
第５の態様に係る画像合成方法は第１から第４の態様のいずれか１つにおいて、画像群ごとに画像を合成するステップを有し、複数の画像を表示するステップでは、画像群ごとに合成した画像により複数の画像を表示させる。【００１５】
第６の態様に係る画像合成方法は第５の態様において、画像群ごとに画像を合成するステップでは、複数の画像が重複する領域においては重複する複数の画像のうちの１つを選択して画像を合成する。第６の態様によれば、複数の画像が重複する領域において画像のずれによるボケを抑制し、鮮明な画像を得ることができる。【００１６】
第７の態様に係る画像合成方法は第１から第６の態様のいずれか１つにおいて、画像群どうしの相対配置をユーザの指示入力に基づいて変更するステップを有し、複数の画像を表示するステップでは変更した相対配置で複数の画像を表示する。表示の際の相対配置が不適切な場合（例えば、上下に配置すべき画像群が左右に配置されている場合）、画像群の関係が把握しづらく対応点の指定に時間を要する可能性がある。これに対し第７の態様のようにユーザの指示入力に基づいて相対配置を変更して表示することで、対応点の指定、及び指定された対応点に基づく画像の合成を迅速かつ容易に行うことができる。【００１７】
第８の態様に係る画像合成方法は第１から第７の態様のいずれか１つにおいて、複数の画像を入力するステップでは、被写体としての建造物を分割撮影して取得した複数の画像を入力する。建造物（建築物）が被写体である場合、撮影範囲が広いことが多く、分割撮影して取得した複数の画像を合成して利用（分析等）することが行われるため、第８の態様に係る画像合成方法が有効である。このような建造物の例としては橋梁、ビル、道路等を挙げることができるが、これらの例に限定されるものではない。また、建造物はコンクリート建造物でもよい。【００１８】
上述した目的を達成するため、第９の態様に係る画像合成装置は、被写体を分割撮影して取得した複数の画像を入力する画像入力部と、複数の画像を画像どうしの対応点に基づいて合成する画像合成部を備える画像合成装置であって、複数の画像を１つの画像に合成できない場合に、複数の画像を合成が可能な画像群に分け、画像群ごとに画像どうしの対応点に基づいて画像配置を決定する画像配置決定部と、決定した画像配置により、複数の画像を画像群ごとに表示装置に表示させる表示制御部と、表示された画像群のうちの一の画像群と画像群のうちの他の画像群とについて対応点を指定する対応点指定部と、を備え、画像合成部は、一の画像群と他の画像群とを指定された対応点に基づいて合成する。第９の態様によれば、第１の態様と同様に対応点の指定、及び指定された対応点に基づく画像の合成を迅速かつ容易に行うことができる。【００１９】
第１０の態様に係る画像合成装置は第９の態様において、画像配置決定部は、複数の画像のうち射影変換の基準となる基準画像を設定し、複数の画像のうち基準画像以外の画像の基準画像に対する射影変換行列を画像どうしの対応点に基づいて算出し、算出した射影変換行列に基づいて画像配置を決定する。第１０の態様によれば、第２の態様と同様に基準画像以外の画像が、基準画像に対する射影変換行列により移動、回転等されて画像配置が決定される。【００２０】
第１１の態様に係る画像合成装置は第９または第１０の態様において、画像合成部は画像群ごとに画像を合成し、表示制御部は画像群ごとに合成した画像により複数の画像を表示させる。【００２１】
第１２の態様に係る画像合成装置は第９から第１１の態様のいずれか１つにおいて、画像配置決定部は画像群どうしの相対配置をユーザの指示入力に基づいて変更し、表示制御部は変更した相対配置で複数の画像を表示させる。第１２の態様によれば、第７の態様と同様に対応点の指定、及び指定された対応点に基づく画像の合成を迅速かつ容易に行うことができる。【００２２】
上述した目的を達成するため、第１３の態様に係る記録媒体は、第１から第８の態様のいずれか１つに係る画像合成方法をコンピュータに実行させるプログラムのコンピュータ読み取り可能なコードが記録された記録媒体である。第１３の態様によれば、第１の態様と同様に対応点の指定、及び指定された対応点に基づく画像の合成を迅速かつ容易に行うことができる。なお、第１３の態様に係る記録媒体は各種光磁気記録媒体、半導体記録媒体等の非一時的記録媒体とすることができる。
【発明の効果】
【００２３】
以上説明したように、本発明の画像合成方法、画像合成装置、及び記録媒体によれば、対応点の指定、及び指定された対応点に基づく画像の合成を迅速かつ容易に行うことができる。
【図面の簡単な説明】
【００２４】
【図１】図１は、下面側から見た橋梁の外観図である。
【図２】図２は、画像処理システムの構成を示すブロック図である。
【図３】図３は、処理部の機能構成を示す図である。
【図４】図４は、記憶部に記憶される情報を示す図である。
【図５】図５は、第１の実施形態に係る画像処理のフローチャートを示す図である。
【図６】図６は、床版の撮影手順の例を示す図である。
【図７】図７は、格間の撮影手順の例を示す図である。
【図８】図８は、各画像の撮影範囲を示す図である。
【図９】図９は、各撮影画像を示す図である。
【図１０】図１０は、撮影画像等を部材ごとにフォルダ分けして格納する様子を示す図である。
【図１１】図１１は、撮影画像等を部材ごとにフォルダ分けして格納する様子を示す他の図である。
【図１２】図１２は、画像配置決定の処理を示すフローチャートである。
【図１３】図１３は、基準画像設定の様子を示す図である。
【図１４】図１４は、画像群ごとの画像配置の例を示す図である。
【図１５】図１５は、画像群ごとの画像配置の例を示す他の図である。
【図１６】図１６は、画像群ごとの相対配置の変更の様子を示す他の図である。
【図１７】図１７は、画像群に対応点を設定する様子を示す図である。
【図１８】図１８は、合成した画像を示す図である。
【図１９】図１９は、画像が重複する領域での画像の合成を示す図である。
【図２０】図２０は、重複を考慮して合成した画像の例を示す図である。
【図２１】図２１は、合成後の正対補正の様子を示す図である。
【図２２】図２２は、損傷マッピング画像の例を示す図である。
【図２３】図２３は、損傷情報の例を示す図である。
【発明を実施するための形態】
【００２５】
以下、添付図面を参照しつつ、本発明に係る画像合成方法、画像合成装置、及び記録媒体の実施形態について、詳細に説明する。
【００２６】
＜橋梁の構造＞
図１は、建造物の一つである橋梁１を下から見た状態を示す斜視図である。図１に示す橋梁１は、主桁２と、横桁３と、対傾構４と、横構５と、床版６と、による立体的構造を有し、これらの部材がボルト、リベット、溶接等により連結されて構成されている。主桁２等の上部には、車輌等が走行するための床版６が打設されている。床版６は、鉄筋コンクリート製のものが一般的である。主桁２は橋台または橋脚の間に渡されて床版６上の車輌等の荷重を支える部材であり、また床版６の面（水平面）と直交する面（鉛直方向の面）を有する。横桁３は、荷重を複数の主桁２で支持するため、主桁２を連結する部材である。対傾構４及び横構５は、それぞれ風及び地震の横荷重に抵抗するため、主桁２を相互に連結する部材である。なお、本実施形態では橋梁１を対象（被写体）とする場合について説明するが、対象とする建造物は橋梁に限らずトンネル、ビル等、道路等でもよい。
【００２７】
＜画像の取得＞
橋梁１の画像を撮影して合成画像を生成する場合、検査員はデジタルカメラ１００（図２参照）を用いて橋梁１を下方から撮影し、検査範囲について複数の撮影画像（橋梁１の異なる部分がそれぞれ撮影された複数の画像）を分割して取得する。撮影は、橋梁１の延伸方向及びその直交方向に適宜移動しながら行う。なお橋梁１の周辺状況により検査員の移動が困難な場合は、橋梁１に沿って移動可能な移動体にデジタルカメラ１００を設けて撮影を行ってもよい。このような移動体には、デジタルカメラ１００の昇降機構、回転機構（パン及び／またはチルトを行う機構）を設けてもよい。なお移動体の例としては車輌、ロボット、及び飛翔体（ドローン等）を挙げることができるが、これらに限定されるものではない。
【００２８】
＜画像処理システムの構成＞
図２は、画像処理システム１０の概略構成を示すブロック図である。画像処理システム１０は、デジタルカメラ１００（撮像装置）及びシステム本体２００（画像合成装置）を備える。画像処理システム１０は被写体を分割撮影して取得した複数の画像の合成等を行うシステムであり（詳細は後述する）、デジタルカメラ、スマートフォン、タブレット端末、パーソナルコンピュータ等に適用することができる。なお、デジタルカメラ１００はシステム本体２００と別々の筐体に組み込んでもよいし、一体化してもよい。また、デジタルカメラ１００をシステム本体２００の一部として組み込み、デジタルカメラ１００とシステム本体２００とで本発明に係る画像合成装置を構成してもよい。
【００２９】
＜デジタルカメラの構成＞
デジタルカメラ１００は、図示せぬ撮影レンズ及び撮像素子を備える撮像光学系１１０により画像を取得する。撮像素子の例としてはＣＣＤ（Charge Coupled Device）型の撮像素子及びＣＭＯＳ（Complementary Metal-Oxide Semiconductor）型の撮像素子を挙げることができる。撮像素子の受光面上にはＲ（赤），Ｇ（緑），またはＢ（青）のカラーフィルタが設けられており、各色の信号に基づいて被写体のカラー画像を取得することができる。デジタルカメラ１００は、無線通信部１３０及びアンテナ１３２を介してシステム本体２００との無線通信を行い、撮影された画像が処理部２１０に入力されて後述する処理が行われる。
【００３０】
＜システム本体の構成＞
システム本体２００は処理部２１０、記憶部２２０、表示部２３０、及び操作部２４０を備え、互いに接続されて必要な情報が送受信される。また、システム本体２００はアンテナ２１２を介してデジタルカメラ１００との間で無線通信を行い、デジタルカメラ１００で撮影された撮影画像を取得する。
【００３１】
＜処理部の構成＞
図３は処理部２１０の構成を示す図である。処理部２１０は、画像入力部２１０Ａ、画像合成部２１０Ｂ、画像配置決定部２１０Ｃ、対応点指定部２１０Ｄ、損傷計測部２１０Ｅ、損傷マッピング部２１０Ｆ、表示制御部２１０Ｇ、及び無線通信部２１０Ｈを備え、デジタルカメラ１００で取得した撮影画像に基づく画像の合成等を行う。画像入力部２１０Ａは、デジタルカメラ１００（または記録媒体、ネットワーク等）から橋梁１の撮影画像（橋梁１を分割撮影した複数の画像）を入力する。画像合成部２１０Ｂは、画像どうしの対応点を検出し、また画像どうしの対応点に基づいて撮影画像を合成する。画像配置決定部２１０Ｃは、撮影画像（複数の画像）を１つの画像に合成できない場合に、複数の画像を合成が可能な画像群に分け、画像群ごとに画像どうしの対応点に基づいて画像配置を決定する。対応点指定部２１０Ｄは、ユーザの指示入力に基づいて、表示された画像群のうちの一の画像群と画像群のうちの他の画像群とについて対応点を指定する。損傷計測部２１０Ｅは、合成画像における損傷（ひび割れ、剥離、腐食等）を抽出及び計測する。損傷マッピング部２１０Ｆは、損傷を示す情報を合成画像にマッピングする。表示制御部２１０Ｇは、撮影画像、合成画像等の表示部２３０（モニタ２３２；表示装置）への表示制御を行う。無線通信部２１０Ｈは、アンテナ２１２を介してデジタルカメラ１００との間で画像、情報を送受信する。ＲＯＭ２１０Ｉ（ROM：Read Only Memory、非一時的記録媒体）には、本発明に係る画像合成方法を実行するための画像合成プログラム等、画像処理システム１０が動作するための各種プログラムのコンピュータ読み取り可能なコードが記録される。
【００３２】
上述した処理部２１０の各部の機能は、各種のプロセッサ（processor）を用いて実現できる。各種のプロセッサには、例えばソフトウェア（プログラム）を実行して各種の機能を実現する汎用的なプロセッサであるＣＰＵ（Central Processing Unit）が含まれる。また、上述した各種のプロセッサには、ＦＰＧＡ（Field Programmable Gate Array）などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device：ＰＬＤ）も含まれる。さらに、ＡＳＩＣ（Application Specific Integrated Circuit）などの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路なども上述した各種のプロセッサに含まれる。
【００３３】
各部の機能は１つのプロセッサにより実現されてもよいし、複数のプロセッサを組み合わせて実現されてもよい。また、複数の機能を１つのプロセッサで実現してもよい。複数の機能を１つのプロセッサで構成する例としては、第１に、クライアント、サーバなどのコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組合せで１つのプロセッサを構成し、このプロセッサが複数の機能として実現する形態がある。第２に、システムオンチップ（System On Chip：ＳｏＣ）などに代表されるように、システム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の機能は、ハードウェア的な構造として、上述した各種のプロセッサを１つ以上用いて構成される。さらに、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子などの回路素子を組み合わせた電気回路（circuitry）である。
【００３４】
上述したプロセッサあるいは電気回路がソフトウェア（プログラム）を実行する際は、実行するソフトウェア（本発明に係る画像合成方法を実行するためのプログラムを含む）のプロセッサ（コンピュータ）読み取り可能なコードをＲＯＭ２１０Ｉ（図３を参照）等の非一時的記録媒体に記憶しておき、プロセッサがそのソフトウェアを参照する。ＲＯＭ２１０Ｉではなく各種光磁気記録装置、半導体メモリ等の非一時的記録媒体にコードを記録してもよい。ソフトウェアを用いた処理の際には例えばＲＡＭ（Random Access Memory）が一時的記憶領域として用いられ、また例えばＥＥＰＲＯＭ（Electronically Erasable and Programmable Read Only Memory）に記憶されたデータが参照される。なお、図３ではＲＡＭ，ＥＥＰＲＯＭ等のデバイスの図示は省略する。
【００３５】
＜記憶部の構成＞
記憶部２２０はＣＤ（Compact Disk）、ＤＶＤ（Digital Versatile Disk）、ハードディスク（Hard Disk）、各種半導体メモリ等の非一時的記録媒体及びその制御部により構成され、図４に示す画像及び情報が互いに関連づけて記憶される。撮影画像２２０Ａは、被写体である橋梁１（床版６の部分）をデジタルカメラ１００で分割撮影し画像入力部２１０Ａで入力した複数の画像である。なお、デジタルカメラ１００及び画像入力部２１０Ａにより入力した画像でなく、ネットワーク、記録媒体経由で取得した画像を記憶してもよい。合成情報２２０Ｂは、対応点、射影変換行列等、撮影画像を合成するための情報である。合成画像２２０Ｃは、撮影画像を合成した画像（部分的に合成した画像群を含む）である。損傷情報２２０Ｄは、合成画像から抽出した損傷の情報である。損傷マッピング画像２２０Ｅは、損傷を示す情報を合成画像にマッピングした画像である。これらの画像及び情報は、フォルダまたはサブフォルダに格納することができる（図１０，１１参照）。
【００３６】
＜表示部及び操作部の構成＞
表示部２３０はモニタ２３２（表示装置）を備えており、入力した画像、記憶部２２０に記憶された画像及び情報、処理部２１０による処理の結果等を表示することができる。操作部２４０は入力デバイス及び／またはポインティングデバイスとしてのキーボード２４２及びマウス２４４を含んでおり、ユーザはこれらのデバイス及びモニタ２３２の画面を介して、本発明に係る画像合成方法の実行に必要な操作を行うことができる（後述）。この操作には、後述するフォルダ及びサブフォルダの作成、画像のフォルダ分け等の操作（図１０，１１参照）、対応点の指定、表示された画像群の移動、損傷情報の入力等が含まれる。
【００３７】
＜画像処理の手順＞
画像処理システム１０による画像処理について説明する。図５は画像処理（本発明に係る画像合成方法の各処理を含む）の手順を示すフローチャートである。
【００３８】
＜撮影＞
まず、デジタルカメラ１００により橋梁１（建造物）の異なる部分が分割して撮影された複数の撮影画像を取得する（ステップＳ１００；画像取得工程）。システム本体２００は、デジタルカメラ１００（撮像光学系１１０、無線通信部１３０、アンテナ１３２、アンテナ２１２）及び処理部２１０（無線通信部２１０Ｈ、画像入力部２１０Ａ）を介して、それら複数の撮影画像を取得する。
【００３９】
本実施形態では、床版６を撮影する場合について説明する。図６は床版６の撮影手順の例を示す図である。図６では、主桁２（ｘ方向に伸びる部材）及び横桁３（ｙ方向に伸びる部材）で規定される格間ＧＯを含む領域Ａを単位として撮影を行い、撮影領域をｙ方向及びｘ方向に（矢印の方向に）順次移動させながら撮影を繰り返す様子を示している。撮影範囲全体の画像が取得できれば、撮影は他の手順で行ってもよい。なお、図６では橋梁１（床版６）の延伸方向をｘ、床版６の面内でｘと直交する方向をｙ、床版６と直交する方向（垂直下方向）をｚとし、（ｘ，ｙ，ｚ）で右手系の座標を構成している。
【００４０】
図７は１つの格間ＧＯでの撮影手順の例を示す図である。図７の例では、格間ＧＯの＋ｘ側端部の領域Ａ１から開始して−ｘ方向端部の領域Ａｉに至るまで移動しながら撮影し、再度＋ｘ側端部に戻って領域Ａｊから初めて−ｘ方向端部の領域Ａｎに至るまで、合計ｎ枚（ｎは２以上の整数）の画像を撮影する。これと異なるパターン（例えば領域Ａ１〜Ａｉ〜Ａｎ〜Ａｊの順）で撮影してもよい。撮影の際は、１画像を撮影するごとに撮影位置を移動し常に正対した画像を撮影してもよいし、１つの撮影位置で撮影方向を変えながら複数の画像を撮影してもよい（この場合、斜め方向から撮影された画像が含まれることになる）。また撮影においては、撮影位置及び撮影方向を適切に設定することにより隣接する画像で十分な（例えば、３０％程度）重複を生じさせ、対応点の検出及び設定を容易かつ高精度にすることが好ましい。
【００４１】
図８は撮影画像の例であり、画像ｉ１〜ｉ１０まで１０枚の画像を、重複を確保しつつ撮影した様子を示している。また、図９は画像ｉ１〜ｉ１０を個別に示す図である。なお図８，９では、格間ＧＯの枠Ｆ（主桁２及び横桁３で規定される矩形）を図示しており、その他の部材及び床板に生じた損傷は図示を省略している（特段の記載がない限り、以降の図でも同様である）。
【００４２】
＜画像及び情報の格納＞
図１０は画像の格納の様子を示す図である。画像処理システム１０では、撮影範囲全体に対してメインフォルダを作成し、このメインフォルダの中にサブフォルダを作成することができる。サブフォルダは、例えば部材番号ごとに、あるいは主桁２及び横桁３で規定される格間ＧＯごとに作成することができる。図１０ではメインフォルダＭＦの中にサブフォルダＳＦ１〜ＳＦ５を作成した様子を示しているが、メインフォルダ及びサブフォルダの個数は特に限定されない。また、サブフォルダの中にさらにサブフォルダ（例えば、異なる作成日時に対応した複数のサブフォルダ）を作成してもよい。
【００４３】
撮影画像の格納においては、デジタルカメラ１００の側でメインフォルダ及びサブフォルダを作成してこれらフォルダ内に保存した撮影画像をフォルダごとシステム本体２００側に入力（図５のステップＳ１０２）することができる。あるいは、デジタルカメラ１００からシステム本体２００に順次入力（ステップＳ１０２）した画像を操作部２４０（キーボード２４２、マウス２４４）の操作に応じてフォルダ分けしてもよい。画像の入力は、処理部２１０（画像入力部２１０Ａ）の制御により行ってもよい。いずれの方法でも、最終的にシステム本体２００（記憶部２２０）にメインフォルダ及びサブフォルダが作成され画像が格納されていればよい。このようなフォルダ及びサブフォルダの作成、及び画像のフォルダ分けは、システム本体２００（操作部２４０）が備えるファイル管理ツール（一般的なパーソナルコンピュータが備えるものと同様で良い）を用いて、ユーザの操作により容易に実現することができる。
【００４４】
図１１は、サブフォルダＳＦ１内に格納された画像及び情報を示す図である。サブフォルダＳＦ１には、撮影画像（例えば、上述した画像ｉ１〜ｉ１０）に加えてこれら撮影画像に対応する画像群（例えば、後述する画像群Ｇ１，Ｇ２）及び合成画像（例えば、後述する画像Ｇ３，Ｇ３ａ）、損傷情報（図２３参照）、及び損傷マッピング画像（図２２参照）等の処理結果が格納される。すなわち、同一のフォルダ内に撮影画像及び撮影画像に対応した処理結果が格納される。図１１中、点線で囲まれたファイルは撮影画像を示し、一点鎖線で囲まれたファイルは処理結果を示す。
【００４５】
＜合成情報の算出＞
ステップＳ１００，Ｓ１０２で画像の撮影及び入力が行われたら、処理部２１０（画像合成部２１０Ｂ）は合成情報（合成情報２２０Ｂ）を算出する（ステップＳ１０４）。合成情報としては、例えば撮影画像どうしの対応点、対応点に基づいて算出した射影変換行列等を算出することができる。
【００４６】
＜合成可否の判断＞
処理部２１０（画像合成部２１０Ｂ）は、ステップＳ１０４で算出した合成情報に基づいて、全ての撮影画像を１つに合成することができるか否かを判断する（ステップＳ１０６）。合成できるか否かは、対応点の数、対応点の信頼性が十分であるか否か（対応点が特徴的な点であるか否か）、対応点により射影変換行列が算出できるか等に基づいて判断することができる。この際、ＲＡＮＳＡＣ（RANdom SAmple Consensus）アルゴリズム等により対応点の組合せを変えて射影変換行列とその評価値の算出を繰り返して判断してもよい。全ての画像を１つの画像に合成できる場合はステップＳ１０８〜Ｓ１１８の処理を省略し、ステップＳ１２０に進んで合成画像に対し損傷の抽出を行う。全ての画像を１つの画像に合成できない場合は、ステップＳ１０８〜Ｓ１１８の処理を行う（以下の説明を参照）。
【００４７】
＜画像の分類＞
ステップＳ１０６で「全ての撮影画像を１つの画像に合成できない」と判断された場合、画像合成部２１０Ｂは撮影画像を合成が可能な画像群に分け（ステップＳ１０８）、画像配置決定部２１０Ｃは画像群ごとに、画像どうしの対応点に基づいて画像配置を決定する（ステップＳ１１０）。
【００４８】
＜画像配置の決定＞
図１２は、図５のステップＳ１１０における画像配置決定の処理の詳細を示すフローチャートである。画像配置決定部２１０Ｃは、複数の撮影画像のうちから射影変換の基準となる基準画像を設定する（ステップＳ１１０Ａ）。基準画像は正対度、鮮明度等の画像の特徴により設定（選択）できるが、特定の撮影順の画像（例えば、最初に撮影した画像）を基準画像としてもよい。図８，９の例では、図１３の（ａ）部分に示すように、画像ｉ１，ｉ２に対し画像ｉ１を基準画像として設定することができる。
【００４９】
基準画像が設定されたら、画像配置決定部２１０Ｃは、基準画像以外の画像の基準画像に対する射影変換行列を、画像どうしの対応点に基づいて算出する（ステップＳ１１０Ｂ）。図８，９の例では、図１３の（ａ）部分に示すように、画像ｉ２（基準画像以外の画像）を画像ｉ１（基準画像）と同一平面に射影し、対応点を一致させるための射影変換行列を算出する。画像ｉ２の画像ｉ１（基準画像）に対する射影変換行列が算出されたら、図１３の（ｂ）部分に示すように、画像ｉ２を基準画像とし、画像ｉ３の画像ｉ２に対する射影変換行列を算出する。このように、基準画像を替えながら、画像群の全画像について（ステップＳ１１０ＣでＹＥＳになるまで）射影変換行列を算出する。全画像について射影変換行列を算出したら、画像配置決定部２１０Ｃは、算出した射影変換行列に基づいて各画像に対し移動、回転、拡大または縮小、及び変形等を行い、画像群の各画像の配置を決定する（ステップＳ１１０Ｄ）。以下では、画像ｉ１〜ｉ４及び画像ｉ６〜ｉ９が合成可能な画像群Ｇ１を構成し、画像ｉ５及び画像ｉ１０が合成可能な画像群Ｇ２を構成するものとして説明する。なお、上述した画像配置の決定においては各画像を射影変換行列により移動、回転、変形等するが、図示する例は画像の配置等を概念的に示すものであり、画像の移動、回転、変形等を正確に表すものではない。
【００５０】
ステップＳ１１０Ｄで決定する画像配置は、画像どうしで重複する領域が重なる画像配置（図１４参照）でもよいし、画像どうしが重ならない画像配置（図１５参照）でもよい。画像どうしが重ならない画像配置の場合、図１５に示すように画像をｘ方向及びｙ方向に離間させて配置し、画像の向きは射影変換行列により求めた向きと変えない（画像を回転させない）配置とすることができる。
【００５１】
＜画像表示＞
ステップＳ１１０（ステップＳ１１０Ａ〜Ｓ１１０Ｄ）で画像配置が決定すると、処理部２１０（画像配置決定部２１０Ｃ，表示制御部２１０Ｇ）は合成可能な画像群を、画像群ごとにモニタ２３２（表示装置）に表示させる（ステップＳ１１２）。上述の例では、画像群Ｇ１，Ｇ２を図１４または図１５のような画像配置により表示させる。この際、処理部２１０（画像配置決定部２１０Ｃ，表示制御部２１０Ｇ）が画像群Ｇ１，Ｇ２に対しそれぞれ枠で囲む、画像群ごとに異なる色で表示する、画像群の番号を表示する等の処理を施して、画像群を容易に識別できるようにしてもよい。また、画像群Ｇ１、Ｇ２を画像群ごとに合成し、画像群ごとに合成した画像を表示してもよい。
【００５２】
ステップＳ１１２での表示の際、画像群の間での配置が不適切な場合がある。例えば、図１６に示すように、画像群Ｇ１の下部（−ｘ方向）に配置されるべき画像群Ｇ２が画像群Ｇ１の横方向に配置される場合がある。そこで処理部２１０（画像配置決定部２１０Ｃ）は画像群の配置を変更するか否か判断し（ステップＳ１１４）、変更する場合（ステップＳ１１４でＹＥＳ）はステップＳ１１２に戻って、表示制御部２１０Ｇが変更後の配置で画像群Ｇ１，Ｇ２を再度表示する。ステップＳ１１４の判断は、ユーザの指示入力（例えば、キーボード２４２及び／またはマウス２４４を介した画像群Ｇ２の移動、すなわち相対配置の変更操作）に基づいて行うことができる。図１６の例の場合、ユーザの操作（例えば、マウス２４４でドラッグ）に基づいて画像配置決定部２１０Ｃ及び表示制御部２１０Ｇが画像群Ｇ２を画像群Ｇ１の下部に移動（図１６において矢印で移動方向を図示）し、図１４のように表示することができる。
【００５３】
画像群どうしの相対配置が不適切な状態で表示すると対応点の指定に時間が掛かる場合があるが、画像処理システム１０では、このような配置の変更を行うことで対応点の指定を迅速かつ容易に行うことができる。
【００５４】
＜対応点の指定＞
ステップＳ１１４までの処理により画像群の配置が決定すると、処理部２１０（対応点指定部２１０Ｄ）は、表示された画像群のうちの一の画像群と他の画像群とについて対応点を指定する（ステップＳ１１６）。例えば画像群Ｇ１，Ｇ２が図１４のように配置及び表示されている場合、図１７に示すように、画像群Ｇ１におけるマウス２４４のクリック等（ユーザ操作）に応じて点Ｐ１ａを指定し、画像群Ｇ２において点Ｐ１ａの対応点である点Ｐ１ｂを指定する。この際、図１７に示すように対応点指定部２１０Ｄ及び表示制御部２１０Ｇが指定された点Ｐ１ａ，Ｐ１ｂを直線でつなぐ等により関連付け及び識別表示することで、指定された点が対応することを容易に把握することができる。以下、同様に点Ｐ２ａと点Ｐ２ｂ、点Ｐ３ａと点Ｐ３ｂ、点Ｐ４ａと点Ｐ４ｂ、点Ｐ５ａと点Ｐ５ｂ、点Ｐ６ａと点Ｐ６ｂについても対応点を指定する。なお、図１７では画像群Ｇ１，Ｇ２について対応点を６点ずつ指定する例を示しているが、指定する対応点の数は特に限定されない。画像群Ｇ１，Ｇ２が図１５のように配置及び表示されている場合も、同様に画像ｉ４，ｉ５と画像ｉ９，ｉ１０とで対応点を指定することができる。
【００５５】
上述のように指定した対応点で画像群を精度良く合成できない場合、あるいは合成できない場合は、処理部２１０（画像合成部２１０Ｂ、対応点指定部２１０Ｄ、表示制御部２１０Ｇ）が警告メッセージをモニタ２３２に表示して、再度対応点を指定するようユーザを促してもよい。
【００５６】
＜画像の合成＞
ステップＳ１１６で対応点が指定されたら、処理部２１０（画像合成部２１０Ｂ，画像配置決定部２１０Ｃ）は指定された対応点に基づいて画像群を合成する（ステップＳ１１８）。図１７の例では、画像合成部２１０Ｂ，画像配置決定部２１０Ｃは、対応点である点Ｐ１ａ〜Ｐ６ｂに基づいて、画像群Ｇ１を基準とした画像群Ｇ２の射影変換行列（または画像群Ｇ２を基準とした画像群Ｇ１の射影変換行列）を算出する。さらに、算出した射影変換行列により画像群Ｇ２を構成する画像（画像ｉ５，ｉ１０）を移動、回転、変形等して画像の配置を決定し、決定した配置で画像を合成する。なお、指定された対応点では射影変換行列が算出できない場合、算出精度が悪い場合等に警告メッセージを表示し、ユーザの操作に基づき再度対応点を指定して射影変換行列を算出し直してもよい。
【００５７】
画像群Ｇ１，Ｇ２を１つの画像に合成した様子を図１８に示す。図１８では合成後の画像Ｇ３（輪郭を実線で示す）と上述した枠Ｆを示している。なお、図中の点線は合成前の各画像を示す線である。このように、本実施形態に係る画像処理システム１０では、合成可能な画像群（画像群Ｇ１，Ｇ２）が画像群ごとに表示されるので、どの画像群について（自動的に）合成できなかったか容易に把握することができる。また、合成できなかった画像群（画像群Ｇ１と画像群Ｇ２）について対応点を指定すれば良いので、全ての画像について対応点を指定する必要がなく、対応点の指定、及び指定された対応点に基づく画像の合成を迅速かつ容易に行うことができる。
【００５８】
＜重複領域における画像の選択＞
図１８の例では、合成した画像Ｇ３において複数の元画像が重複する領域が存在する。このような領域に損傷等の計測対象が存在すると、合成時の位置ずれにより損傷がボケる、幅が太くなる、等の現象が発生して検出及び／または計測の精度が低下する可能性がある。そこで、画像処理システム１０では、画像の合成の際に、画像が重複する領域では１つの画像を選択して合成することができる。このような画像の合成の例を図１９、２０に示す。図１９の（ａ）部分は画像ｉ１と画像ｉ２とが領域ＯＬにおいて重複している様子を示しており、このような領域ＯＬにおいては、処理部２１０（画像合成部２１０Ｂ）は画像ｉ１，ｉ２のうち１つを選択する。例えば、図１９の（ｂ）部分のように領域ＯＬについては画像ｉ１を選択して合成する（グレーの網掛けをした部分は、画像ｉ２が選択された領域を示す）。このような画像の選択は処理部２１０（画像合成部２１０Ｂ）が例えば画像の明るさ、被写体の鮮明さ等の特徴に基づいて行っても良いし、操作部２４０を介したユーザの操作に応じて選択してもよい。
【００５９】
図１９と同様にして全ての画像（画像ｉ１〜ｉ１０）を合成した画像Ｇ３ａを図２０に示す（図中の点線は、合成前の各画像の境界を示す）。図２０では、各画像の領域を明示するため枠Ｆの図示を省略している。このように、画像が重複する領域では１つの画像を選択して合成することで、計測対象（損傷等）のぼけを低減し検出及び計測を良好に行うことができる。
【００６０】
＜画像合成後の正対補正＞
画像処理システム１０では、上述のように基準画像に対する他の画像の射影変換行列を算出して画像配置を決定するが、基準画像が撮影方向に対し正対していない場合、合成後の画像において本来矩形であるべき領域が矩形にならない場合がある。例えば、図２１の（ａ）部分に示すように、合成後の画像において格間の枠Ｆが台形状になる場合がある。この場合、処理部２１０（画像合成部２１０Ｂ、画像配置決定部２１０Ｃ）はキーボード２４２及び／またはマウス２４４を介したユーザの操作に基づいて矩形を形成する点（例えば、枠Ｆの４隅の点Ｃ１，Ｃ２，Ｃ３，Ｃ４）を指定し、図２１の（ｂ）部分に示すように、射影変換によりこれら４点に矩形を形成させる。これにより、画像合成後においても被写体が正対した画像（正対画像）を得ることができる。
【００６１】
＜損傷の抽出及び計測＞
ステップＳ１１８までの処理で合成画像が得られると、処理部２１０（損傷計測部２１０Ｅ）は合成画像に対し損傷の抽出及び計測を行う（ステップＳ１２０）。損傷の分類としては剥離、漏水、ひび割れ、錆などを挙げることができるが、具体的に抽出する損傷の種類は建造物（被写体）の種類、特徴、検査の目的等の条件に応じて設定してよい。また、計測する項目としては位置、大きさ、方向、範囲、形状等があるが、計測項目についても損傷の分類に応じて、また建造物の種類、特徴、検査の目的等の条件に応じて設定してよい。
【００６２】
損傷の抽出及び計測は分類に応じて種々の手法により行うことができるが、ひび割れについては、例えば特許４００６００７号公報に記載されたひび割れ検出方法を用いることができる。この方法は、ウェーブレット画像を作成する工程と、ウェーブレット画像に基づいてひび割れ領域を判定する工程と、を有するひび割れ検出方法である。ウェーブレット画像を作成する工程では、対比される２つの濃度に対応したウェーブレット係数を算定するとともに、その２つの濃度をそれぞれ変化させた場合のそれぞれのウェーブレット係数を算定してウェーブレット係数テーブルを作成し、ひび割れ検出対象であるコンクリート表面を撮影した入力画像をウェーブレット変換する。ひび割れ領域を判定する工程では、ウェーブレット係数テーブル内において、局所領域内の近傍画素の平均濃度と注目画素の濃度に対応するウェーブレット係数を閾値として、注目画素のウェーブレット係数と閾値とを比較することによりひび割れ領域とひび割れでない領域とを判定する。
【００６３】
また、錆及び剥離を検出する方法としては、例えば特表２０１０−５３８２５８号公報に記載された鋼橋の塗膜検査システムの処理方法を用いることができる。この処理方法では、撮影された鋼橋塗膜の画像ファイルからの色情報、映像処理、ウォーターシェッド、パルツェン窓を用いて錆と剥離を検出している。
【００６４】
＜計測結果のマッピング＞
処理部２１０（損傷マッピング部２１０Ｆ）は、損傷の計測結果を合成画像にマッピングする（ステップＳ１２２）。マッピングは、例えば計測結果と関連づけられた文字、図形、記号等を合成画像に表示することにより行うことができる。表示した文字、図形、記号等は操作部２４０（キーボード２４２及び／またはマウス２４４）を介した操作により選択することができ、選択に応じて処理部２１０（表示制御部２１０Ｇ）がモニタ２３２に計測結果を表示させる。文字、図形、記号等は実際の損傷を簡略化あるいは強調したものでもよいし、損傷の種別、大きさ等に応じて異なる態様で表示してもよい。図２２は画像Ｇ３ａに対し計測結果をマッピングした画像Ｇ４を示す図であり、腐食の位置及び大きさを示す円形の図形Ｍ１、及びひび割れの数、位置、長さを示す線状の図形Ｍ２〜Ｍ４を表示している。図２２のように計測結果がマッピングされた画像は記憶部２２０に記憶され（図４の損傷マッピング画像２２０Ｅ）、表示制御部２１０Ｇの制御によりモニタ２３２に表示される。
【００６５】
このような計測結果のマッピングは、橋梁１のサイズ情報を示す線図情報を含む図面データ（例えばＣＡＤデータ、ＣＡＤ：Computer-Aided Design）に対して行ってもよい。この際、ＣＡＤデータを規定する座標系が図２２等に示す座標系と異なる場合は、座標系の関係に応じた座標変換（移動、回転、ミラーリング等）を行う。このような変換は、処理部２１０（損傷マッピング部２１０Ｆ）により行うことができる。
【００６６】
＜損傷情報の入力＞
画像処理システム１０では、マッピングした計測結果について損傷情報を入力することができる。損傷情報の入力は、表示部２３０及び操作部２４０（キーボード２４２及び／またはマウス２４４）を介したユーザの指示に基づき、処理部２１０（損傷計測部２１０Ｅ、損傷マッピング部２１０Ｆ）が行う。図２２では、図形Ｍ１，Ｍ４に対する引き出し線部分に損傷の情報（部材名、損傷の種別、太さ及び長さ、画像番号）を入力した様子を示している。入力した損傷情報は、例えば図２３のような形式で記憶部２２０に記憶され（図４の損傷情報２２０Ｄ）、表示部２３０及び操作部２４０を介したユーザの指示に基づき、表示制御部２１０Ｇの制御によりモニタ２３２に表示される。なお、損傷情報として入力する情報の内容及び形式は、国土交通省作成の「橋梁定期点検要領（平成２６年６月）」に従うことが好ましい。
【００６７】
以上説明したように、本実施形態に係る画像処理システム１０では、対応点の指定、及び指定された対応点に基づく画像の合成を迅速かつ容易に行うことができ、また合成された画像に基づく損傷の抽出及び計測を行うことができる。
【００６８】
以上で本発明の実施形態に関して説明してきたが、本発明は上述した態様に限定されず、本発明の精神を逸脱しない範囲で種々の変形が可能である。
【符号の説明】
【００６９】
１        橋梁
２        主桁
３        横桁
４        対傾構
５        横構
６        床版
１０      画像処理システム
１００    デジタルカメラ
１１０    撮像光学系
１３０    無線通信部
１３２    アンテナ
２００    システム本体
２１０    処理部
２１０Ａ  画像入力部
２１０Ｂ  画像合成部
２１０Ｃ  画像配置決定部
２１０Ｄ  対応点指定部
２１０Ｅ  損傷計測部
２１０Ｆ  損傷マッピング部
２１０Ｇ  表示制御部
２１０Ｈ  無線通信部
２１０Ｉ  ＲＯＭ
２１２    アンテナ
２２０    記憶部
２２０Ａ  撮影画像
２２０Ｂ  合成情報
２２０Ｃ  合成画像
２２０Ｄ  損傷情報
２２０Ｅ  損傷マッピング画像
２３０    表示部
２３２    モニタ
２４０    操作部
２４２    キーボード
２４４    マウス
Ａ        領域
Ａ１      領域
Ａｉ      領域
Ａｊ      領域
Ａｎ      領域
Ｆ        枠
Ｇ１      画像群
Ｇ２      画像群
Ｇ３      画像
Ｇ３ａ    画像
Ｇ４      画像
ＧＯ      格間
Ｍ１      図形
Ｍ２      図形
Ｍ３      図形
Ｍ４      図形
ＭＦ      メインフォルダ
ＯＬ      領域
Ｓ１００〜Ｓ１２２  画像合成方法の各ステップ
ＳＦ１    サブフォルダ
ＳＦ２    サブフォルダ
ＳＦ３    サブフォルダ
ＳＦ４    サブフォルダ
ＳＦ５    サブフォルダ
ｉ１      画像
ｉ２      画像
ｉ３      画像
ｉ４      画像
ｉ５      画像
ｉ６      画像
ｉ７      画像
ｉ８      画像
ｉ９      画像
ｉ１０    画像
【図１】
2019003796.tif 000003
【図２】
2019003796.tif 000004
【図３】
2019003796.tif 000005
【図４】
2019003796.tif 000006
【図５】
2019003796.tif 000007
【図６】
2019003796.tif 000008
【図７】
2019003796.tif 000009
【図８】
2019003796.tif 000010
【図９】
2019003796.tif 000011
【図１０】
2019003796.tif 000012
【図１１】
2019003796.tif 000013
【図１２】
2019003796.tif 000014
【図１３】
2019003796.tif 000015
【図１４】
2019003796.tif 000016
【図１５】
2019003796.tif 000017
【図１６】
2019003796.tif 000018
【図１７】
2019003796.tif 000019
【図１８】
2019003796.tif 000020
【図１９】
2019003796.tif 000021
【図２０】
2019003796.tif 000022
【図２１】
2019003796.tif 000023
【図２２】
2019003796.tif 000024
【図２３】
2019003796.tif 000025
【手続補正書】
【提出日】令和1年12月4日(2019.12.4)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】００４３
【補正方法】変更
【補正の内容】
【００４３】
撮影画像の格納においては、デジタルカメラ１００の側でメインフォルダ及びサブフォルダを作成してこれらフォルダ内に保存した撮影画像をフォルダごとシステム本体２００側に入力（図５のステップＳ１０２）することができる。あるいは、デジタルカメラ１００からシステム本体２００に順次入力（ステップＳ１０２）した画像を操作部２４０（キーボード２４２、マウス２４４）の操作に応じてフォルダ分けしてもよい。画像の入力は、処理部２１０（画像入力部２１０Ａ）の制御により行ってもよい。いずれの方法でも、最終的にシステム本体２００（記憶部２２０）にメインフォルダ及びサブフォルダが作成され画像が格納されていればよい。このようなメインフォルダ及びサブフォルダの作成、及び画像のフォルダ分けは、システム本体２００（操作部２４０）が備えるファイル管理ツール（一般的なパーソナルコンピュータが備えるものと同様で良い）を用いて、ユーザの操作により容易に実現することができる。
【国際調査報告】
2019003796.tif 000026
2019003796.tif 000027
2019003796.tif 000028
2019003796.tif 000029