(57)【要約】【課題】工事に関する情報が記載されたボードを含む状態で撮像された撮像画像を効率良く分類することが可能な撮像画像分類装置を提供する。【解決手段】工事に関する情報が記載されたボードを含む状態で工事の状況が撮像された撮像画像Ｇを自動で分類する撮像画像分類装置１は、撮像画像Ｇを取得する撮像画像取得部１１と、取得された撮像画像Ｇに含まれるボードから工事に関する情報を示す文字情報を画像認識処理により取得する文字情報取得部１２と、取得された文字情報に基づいて、工事に関する情報に応じた区分で撮像画像Ｇを分類する分類部１３と、分類された撮像画像Ｇを区分毎に記憶する記憶部１４と、を備える。【選択図】図１
2019175141.tif 000002
【特許請求の範囲】
【請求項１】
工事に関する情報が記載されたボードを含む状態で前記工事の状況が撮像された撮像画像を自動で分類する撮像画像分類装置であって、
前記撮像画像を取得する撮像画像取得部と、
取得された前記撮像画像に含まれる前記ボードから前記工事に関する情報を示す文字情報を画像認識処理により取得する文字情報取得部と、
取得された前記文字情報に基づいて、前記工事に関する情報に応じた区分で前記撮像画像を分類する分類部と、
分類された前記撮像画像を前記区分毎に記憶する記憶部と、
を備える撮像画像分類装置。
【請求項２】
前記工事に関する情報の少なくとも一部の夫々が、一文字からなる指標の夫々と互いに関連付けして予め登録され、
前記ボードに前記工事に関する情報が前記指標で記載されている場合には、前記文字情報取得部が、前記指標を前記文字情報として取得する請求項１に記載の撮像画像分類装置。
【請求項３】
前記指標に応じて前記撮像画像が分類された場合に、前記指標と関連付けされた前記工事に関する情報を示す識別情報を前記撮像画像に重畳させる重畳部を備え、
前記記憶部は前記識別情報が重畳された重畳済撮像画像を記憶する請求項２に記載の撮像画像分類装置。
【請求項４】
前記工事に関する情報が、前記工事の名称を示す情報、前記撮像画像が取得された日付を示す情報、前記工事が行われた場所を示す情報、及び前記工事の状況を示す情報のうちの複数からなる情報であって、
前記区分は、前記複数からなる情報に基づく階層構造で形成されている請求項１から３のいずれか一項に記載の撮像画像分類装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、工事に関する情報が記載されたボードを含む状態で撮像された撮像画像を自動で分類する撮像画像分類装置に関する。
【背景技術】
【０００２】
従来、各種工事が施工されているが、工事によっては施工管理や工事前後の状況の記録を目的として工事の状況毎に写真撮影が行われることがある。このような写真撮影は工事の全期間に亘って行われることから、撮影後の写真の量が膨大なものとなる。一方、写真撮影を行う際には、工事に関する情報が記載されたボードを含むように工事の状況が撮影される。これらの膨大な量の写真は、ボードに記載された工事に関する情報を人が読み取って手動で分類していたため、分類に多大な時間と手間を要していた。このような写真の分類に係る技術として、例えば下記に出典を示す特許文献１に記載のものがある。
【０００３】
特許文献１に記載の画像処理装置は、原稿を読み取って作成された読み取りデータに含まれる複数の項目を認識し、この項目を複数のグループに分類する。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１０−７２８４２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
特許文献１に記載の技術は、読み取りデータから、タイトル、見出し、図、表、写真、手書き、キーワードのうち少なくとも１つを項目として認識するように構成されている。このため、特許文献１に記載の技術は、写真であるか否かに基づき分類することができるが、写真自体を、当該写真に含まれる情報（例えばボードに記載された工事に関する情報）に基づき分類することはできない。
【０００６】
そこで、工事に関する情報が記載されたボードを含む状態で撮像された撮像画像を効率良く分類することが可能な撮像画像分類装置が求められる。
【課題を解決するための手段】
【０００７】
本発明に係る撮像画像分類装置の特徴構成は、工事に関する情報が記載されたボードを含む状態で前記工事の状況が撮像された撮像画像を自動で分類する撮像画像分類装置であって、前記撮像画像を取得する撮像画像取得部と、取得された前記撮像画像に含まれる前記ボードから前記工事に関する情報を示す文字情報を画像認識処理により取得する文字情報取得部と、取得された前記文字情報に基づいて、前記工事に関する情報に応じた区分で前記撮像画像を分類する分類部と、分類された前記撮像画像を前記区分毎に記憶する記憶部と、を備えている点にある。
【０００８】
このような特徴構成とすれば、ボードから工事に関する情報を画像認識処理で取得し、当該取得した情報に基づき自動で撮像画像を分類し、記憶することができる。したがって、本撮像画像分類装置によれば、撮像画像が複数枚あった場合でも、効率良く分類することが可能となる。
【０００９】
また、前記工事に関する情報の少なくとも一部の夫々が、一文字からなる指標の夫々と互いに関連付けして予め登録され、前記ボードに前記工事に関する情報が前記指標で記載されている場合には、前記文字情報取得部が、前記指標を前記文字情報として取得すると好適である。
【００１０】
このような構成とすれば、画像認識処理における認識精度を高めることができる。したがって、分類精度を高めることが可能となる。
【００１１】
また、前記指標に応じて前記撮像画像が分類された場合に、前記指標と関連付けされた前記工事に関する情報を示す識別情報を前記撮像画像に重畳させる重畳部を備え、前記記憶部は前記識別情報が重畳された重畳済撮像画像を記憶すると好適である。
【００１２】
このような構成とすれば、工事に関する情報と指標との対応関係を覚えていない人であっても、撮像画像に重畳された識別情報を確認することで工事に関する情報を把握することが可能となる。
【００１３】
また、前記工事に関する情報が、前記工事の名称を示す情報、前記撮像画像が取得された日付を示す情報、前記工事が行われた場所を示す情報、及び前記工事の状況を示す情報のうちの複数からなる情報であって、前記区分は、前記複数からなる情報に基づく階層構造で形成されていると好適である。
【００１４】
このような構成とすれば、階層構造をたどることにより、記憶部に記憶された撮像画像を容易に見つけることが可能となる。
【図面の簡単な説明】
【００１５】
【図１】第１の実施形態に係る撮像画像分類装置の構成を模式的に示すブロック図である。
【図２】撮像画像の例を示す図である。
【図３】階層構造で形成された区分を示す図である。
【図４】第２の実施形態に係る撮像画像分類装置の構成を模式的に示すブロック図である。
【図５】ボードに指標を用いて記載された場合の撮像画像の例を示す図である。
【図６】重畳済撮像画像の例を示す図である。
【発明を実施するための形態】
【００１６】
１．第１の実施形態
本発明に係る撮像画像分類装置は、工事に関する情報が記載されたボードを含む状態で工事の状況が撮像された撮像画像を自動で分類して記憶する機能を備えている。以下、本実施形態の撮像画像分類装置１について説明する。
【００１７】
図１は、本実施形態の撮像画像分類装置１の構成を模式的に示したブロック図である。図１に示されるように、撮像画像分類装置１は、撮像画像取得部１１、文字情報取得部１２、分類部１３、記憶部１４の各機能部を備えている。各機能部は撮像画像Ｇの分類に係る処理を行うために、ＣＰＵを中核部材としてハードウェア又はソフトウェア或いはその両方で構築されている。
【００１８】
ここで、図２には撮像画像分類装置１により分類される撮像画像Ｇの一例が示される。撮像画像Ｇは、ボードＢを含む状態で工事の状況を撮像したものである。ボードＢを含む状態とは、撮像画像Ｇの中にボードＢがうつり込むように工事の状況と一緒に撮像されている状態をいう。工事の状況とは、例えば工事の施工前の状況や、施工中の状況や、施工後の状況をいう。
【００１９】
ボードＢには、工事に関する情報が記載される。工事に関する情報とは、本実施形態では、工事の名称を示す情報、撮像画像Ｇが取得された日付（工事の施工日や日数等も含む）を示す情報、工事が行われた場所を示す情報、及び工事の状況を示す情報である。具体的には、工事の名称を示す情報は、ボードＢにおける項目「工事名」において記載され、撮像画像Ｇが取得された日付を示す情報は、ボードＢにおける項目「日付」において記載される。また、工事が行われた場所を示す情報は、ボードＢにおける項目「場所」において記載され、工事の状況を示す情報は、ボードＢにおける項目「状況」において記載される。また、ボードＢには工事の責任者が記載される項目「責任者」も設けられる。
【００２０】
図１に戻り、撮像画像取得部１１は撮像画像Ｇを取得する。撮像画像Ｇは、上述したようにボードＢを含む状態で工事の状況を撮像したものであり、例えばカメラ２により撮像される。カメラ２により撮像された撮像画像Ｇは、撮像画像データとしてネットワークや記憶媒体を介して撮像画像取得部１１に伝達され、撮像画像取得部１１が撮像画像Ｇを取得することが可能となる。なお、撮像画像分類装置１においては撮像画像Ｇは、このような撮像画像データとして扱われるが、ここで説明を簡便にするために、特に区別をする必要がない限り、撮像画像データも撮像画像Ｇとして説明する。撮像画像取得部１１により取得された撮像画像Ｇは後述する文字情報取得部１２に伝達される。
【００２１】
文字情報取得部１２は、取得された撮像画像Ｇに含まれるボードＢから工事に関する情報を示す文字情報を画像認識処理により取得する。取得された撮像画像Ｇとは、撮像画像取得部１１により取得された撮像画像Ｇである。また、上述したように撮像画像Ｇには、各種工事に関する情報が記載されたボードＢがうつっている。文字情報取得部１２は、ボードＢに記載されている工事に関する情報を示す文字情報を画像認識処理を行うことにより取得する。画像認識処理は、公知であるのでここでは説明を省略する。文字情報取得部１２により取得された文字情報は後述する分類部１３に伝達される。
【００２２】
分類部１３は、取得された文字情報に基づいて、工事に関する情報に応じた区分で撮像画像Ｇを分類する。取得された文字情報とは、文字情報取得部１２により取得された文字情報である。工事に関する情報に応じた区分とは、ボードＢに記載された工事に関する情報に基づき設定された区分である。本実施形態では、ボードＢには工事に関する情報として、「工事名」、「日付」、「場所」、「状況」、及び「責任者」が記載されている。したがって、工事に関する情報に応じた区分とは、これらの項目に基づき区分けされた区分にあたる。
【００２３】
本実施形態では、工事に関する情報は、このように複数からなる情報である。そこで、分類を容易に把握することを目的として、区分がこれらの複数からなる情報に基づく階層構造で形成される。本実施形態では、図３に示されるように、「工事名」、「場所」、「状況」、「日付」の順からなる階層構造で区分が形成される。
【００２４】
具体的には、「工事名」は、「御堂筋配管工事」や「四ツ橋筋配管工事」等のような工事の名称を示すものであり、「場所」は、「第１交差点から０ｍ」、「第１交差点から北へ１０ｍ」等のように工事が施工された場所を示すものである。「状況」は、「撤去前」、「敷設中」、「撤去後」等のように工事の進捗状況を示すものであり、「日付」は、「１日目」、「２日目」等のように同一の工事の状況において工事が施工された日数を計数したものである。したがって、例えば「御堂筋配管工事」において、「第１交差点から０ｍ」からの地点での「撤去前」の「１日目」に撮像された撮像画像Ｇは、「御堂筋配管工事」−「第１交差点から０ｍ」−「撤去前」−「１日目」に分類される。その他の撮像画像Ｇも同様に、ボードＢから取得された文字情報に応じて分類される。分類部１３が撮像画像Ｇを分類した情報は分類情報として、後述する記憶部１４に伝達される。なお、上記「日付」は、カレンダー上の日付そのものを用いても良い。
【００２５】
記憶部１４は、分類された撮像画像Ｇを区分毎に記憶する。すなわち、記憶部１４には、分類部１３から伝達される分類情報に応じて階層構造でフォルダを形成し、撮像画像Ｇを分類情報に応じて該当するフォルダに記憶する。これにより、適切に分類して撮像画像Ｇを記憶することが可能となる。
【００２６】
２．第２の実施形態
次に、第２の実施形態について説明する。上述した第１の実施形態では撮像画像分類装置１では、工事に関する情報を示す文字情報を画像認識処理により取得し、取得された文字情報に基づいて分類するとして説明した。しかしながら、ボードＢに記載された工事に関する情報が小さい字であったり、読み取り難い字であったりすると、画像認識処理を適切に行うことができない可能性がある。そこで、本実施形態では、適切に画像認識処理が行えるように構成されている。
【００２７】
図４は、本実施形態の撮像画像分類装置１の構成を模式的に示したブロック図である。図４に示されるように、本実施形態の撮像画像分類装置１は、図１の第１の実施形態に係るブロック図に対して、登録部１５及び重畳部１６が追加されている点で、第１の実施形態と異なる。登録部１５及び重畳部１６もまた、他の機能部と同様に撮像画像Ｇの分類に係る処理を行うために、ＣＰＵを中核部材としてハードウェア又はソフトウェア或いはその両方で構築されている。以下では、第１の実施形態と異なる点を中心に説明する。
【００２８】
登録部１５には、工事に関する情報の少なくとも一部の夫々が、一文字からなる指標の夫々と互いに関連付けして予め登録されている。工事に関する情報の少なくとも一部とは、ボードＢに記載された「工事名」、「日付」、「場所」、「状況」、及び「責任者」のうち少なくとも一部である。ここでは、理解を容易にするために、「状況」に関する情報が「工事に関する情報の少なくとも一部」であるとする。一文字からなる指標とは、例えばアルファベットの一文字や、数字の一文字や、平仮名や片仮名の一文字等が相当する。もちろん、丸や三角や四角等の記号であっても良い。係る場合、「状況」に関する情報の夫々が、アルファベットの一文字や、数字の一文字や、平仮名や片仮名の一文字や、一文字の記号等の何れかと、互いに関連付けして予め登録される。具体的には、「状況」に関する情報のうち、「撤去前」が「Ａ」として登録され、「敷設中」が「Ｂ」として登録され、「撤去後」が「Ｃ」として登録される。
【００２９】
撮像画像ＧにうつるボードＢに「状況」に関する情報を記載する際、登録部１５に予め登録された一文字からなる指標を用いて記載される。すなわち、ボードＢの項目「状況」において「撤去前」であることを示す場合には「Ａ」と記載し、「敷設中」であることを示す場合には「Ｂ」と記載し、「撤去後」であることを示す場合には「Ｃ」と記載する。このような指標を用いて記載されたボードＢがうつる撮像画像Ｇの例が図５に示される。
【００３０】
図４に戻り、ボードＢに工事に関する情報がこのような指標で記載されている場合には、文字情報取得部１２は当該指標を文字情報として取得する。これにより、文字情報取得部１２における画像認識処理の認識精度を高めることができ、適切に撮像画像Ｇを分類することが可能となる。
【００３１】
重畳部１６は、指標に応じて撮像画像Ｇが分類された場合に、指標と関連付けされた工事に関する情報を示す識別情報を撮像画像Ｇに重畳させる。指標に応じて撮像画像Ｇが分類された場合とは、本実施形態のように、登録部１５に登録された指標に基づき撮像画像Ｇが分類された場合である。指標と関連付けされた工事に関する情報とは、「Ａ」の場合には「撤去前」であることを示す情報であり、「Ｂ」の場合には「敷設中」であることを示す情報であり、「Ｃ」の場合には「撤去後」であることを示す情報である。本実施形態では、これらの「撤去前」、「敷設中」、「撤去後」という記載が識別情報に相当する。
【００３２】
したがって、重畳部１６は、ボードＢに工事に関する情報として、「Ａ」と記載されている場合には撮像画像Ｇに「撤去前」という記載を重畳させ、「Ｂ」と記載されている場合には撮像画像Ｇに「敷設中」という記載を重畳させ、「Ｃ」と記載されている場合には撮像画像Ｇに「撤去後」という記載を重畳させる。
【００３３】
これにより、記憶部１４には識別情報が重畳された図６に示されるような重畳済撮像画像が記憶される。このような撮像画像Ｇに重畳された識別情報を確認することで、どういう状況の撮像画像Ｇであるかを容易に把握することが可能となる。
【００３４】
３．その他の実施形態
上記第１の実施形態では、工事に関する情報が、工事の名称を示す情報、撮像画像Ｇが取得された日付を示す情報、工事が行われた場所を示す情報、及び工事の状況を示す情報のうちの複数からなる情報であるとして説明した。しかしながら、工事に関する情報はこれら以外の情報であっても良い。
【００３５】
上記第１の実施形態では、ボードＢに撮像画像Ｇが取得された日付を示す情報、及び工事が行われた場所を示す情報が記載されるとして説明したが、これらの情報が撮像画像Ｇを撮像した際に形成されるＥｘｉｆ（Exchangeable image file format）情報に含まれる場合にはＥｘｉｆ情報から取得しても良い。また、工事が行われた場所を示す情報は、カメラ２が有するＧＰＳ機能を用いて取得するように構成することも可能である。
【００３６】
上記実施形態では、撮像画像Ｇは、カメラ２により撮像されるとして説明したが、撮像画像Ｇはカメラ２とは異なるデバイス（例えばカメラ付き携帯端末）のカメラ機能を用いて撮像しても良い。
【００３７】
上記第１の実施形態では、区分が階層構造で形成されているとして説明したが、区分は階層構造で形成されていなくても良い。また、階層構造で形成する場合であっても、区分の並び順は図３に記載のものと異なる並び順であっても良い。
【００３８】
上記実施形態では、工事に関する情報の少なくとも一部の夫々が、一文字からなる指標の夫々と互いに関連付けして予め登録部１５に登録されているとして説明したが、指標は画像認識処理に適したものであれば２文字以上からなるものであっても良い。
【００３９】
上記実施形態では、重畳部１６が、指標に応じて撮像画像Ｇが分類された場合に、指標と関連付けされた工事に関する情報を示す識別情報を撮像画像Ｇに重畳させるとして説明した。しかしながら、指標に応じて撮像画像Ｇが分類された場合であっても、撮像画像Ｇに指標と関連付けされた工事に関する情報を示す識別情報を重畳させないで構成しても良い。係る場合には、重畳部１６を備えなくても良い。
【００４０】
なお、上記実施形態（別実施形態を含む、以下同じ）で開示される構成は、矛盾が生じない限り、他の実施形態で開示される構成と組み合わせて適用することが可能であり、また、本明細書において開示された実施形態は例示であって、本発明の実施形態はこれに限定されず、本発明の目的を逸脱しない範囲内で適宜改変することが可能である。
【産業上の利用可能性】
【００４１】
本発明は、工事に関する情報が記載されたボードを含む状態で撮像された撮像画像を自動で分類する撮像画像分類装置に用いることが可能である。
【符号の説明】
【００４２】
１：撮像画像分類装置
１１：撮像画像取得部
１２：文字情報取得部
１３：分類部
１４：記憶部
１６：重畳部
Ｂ：ボード
Ｇ：撮像画像
【図１】
2019175141.tif 000003
【図２】
2019175141.tif 000004
【図３】
2019175141.tif 000005
【図４】
2019175141.tif 000006
【図５】
2019175141.tif 000007
【図６】
2019175141.tif 000008