(57)【要約】【課題】可視光画像の視認性を維持しつつ、熱画像と可視光画像を重畳表示すること。【解決手段】熱画像処理部１０５と可視光画像処理部１０６は、遠赤外線カメラ１０１からの熱画像と可視光カメラ１０２からの可視光画像を、一定の幅で交互、または特定のパターンで入れ違いに合成し、その合成された画像を表示部１０７で表示する。画像合成パターン格納部１０３は、一定の幅で交互、または特定のパターンで入れ違いに合成する画像合成パターンを格納し、熱画像処理部１０５と可視光画像処理部１０６に通知する。【選択図】図１
2016217953.tif 000002
【特許請求の範囲】
【請求項１】
可視光画像と熱画像を重畳させて表示させる情報処理端末において、
前記情報処理端末は、可視光画像を取得する可視光画像処理部と、熱画像を取得する熱画像処理部と、可視光画像と熱画像の合成方法が記述された画像合成パターンを格納する画像合成パターン格納部と、前記画像合成パターンを前記可視光画像処理部と前記熱画像処理部に指定する画像合成制御部と、合成された可視光画像と熱画像を表示する表示部を備え、
前記画像合成パターンは、可視光画像と熱画像を一定の幅ごとに交互、または特定のパターンで入れ違いに表示させると記述された設定内容であり、
前記画像合成制御部は、前記画像合成パターン格納部から前記画像合成パターンを読み出し、前記可視光画像処理部と前記熱画像処理部に通知する機能を備え、
前記可視光画像処理部は、通知された前記画像合成パターンに従って可視光画像を切り出し、表示部に出力する機能を備え、
前記熱画像処理部は、通知された前記画像合成パターンに従って熱画像を切り出し、表示部に出力する機能を備え、
前記表示部は、前記可視光画像処理部と前記熱画像処理部から受け取った画像を合成して表示する機能を備える
ことを特徴とする熱画像の表示方法。
【請求項２】
請求項１記載の熱画像の表示方法であって、
前記可視光画像処理部と前記熱画像処理部は、可視光画像と熱画像を拡大、縮小、平行移動、回転、トリミングを行うことで、同じ撮影領域の画像に変換する機能を備える
ことを特徴とする熱画像の表示方法。
【請求項３】
請求項１または２記載の熱画像の表示方法であって、
前記画像パターン格納部は、複数の画像合成パターンを保持し、ユーザが任意の画像合成パターンを指定することができる
ことを特徴とする熱画像の表示方法。
【請求項４】
請求項１、２または３記載の熱画像の表示方法であって、
前記表示部は、前記可視光画像処理部と前記熱画像処理部から受け取った画像を合成して記録する機能を備える
ことを特徴とする熱画像の表示方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、可視光画像と熱（遠赤外線）画像を合成表示する方法に関する。
【背景技術】
【０００２】
物体から放射される遠赤外線エネルギーを検知するセンサ群を構成することで、撮影対象の温度分布を表示する遠赤外線撮像装置（サーモグラフィ）がある。元々は軍事用途で開発・使用されていたが、民生用途としても広く使われ始めている。また、近年ではスマートフォン・タブレット端末、無人航空機、監視システム、自動車制御システム等で様々なセンサの取り込みが進んでおり、これらシステムではサーモグラフィの使用が普及し始めている。
【０００３】
サーモグラフィに搭載される遠赤外線カメラは、可視光を捕えることができない。そこで、遠赤外線カメラと可視光カメラを並べて配置して撮影し、可視光画像の上に遠赤外線カメラによる熱画像を重畳表示する方法が一般的に行われている。
【０００４】
しかし、可視光画像に熱画像を重畳すると視認性が極端に悪くなる。そこで、可視光画像内の境界を強調した画像を熱画像に重畳する方法や、熱画像や可視光画像を半透明にして重畳する方法、特許文献１のように周囲の温度と異なる場所を強調表示する方法がある。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０１３−２９５９公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
以上のように熱画像と可視光画像を重畳表示する方法は提案されているが、可視光画像にグラフィックデータである熱画像を重畳すると、可視光画像の視認性が悪くなってしまう。
【０００７】
そこで本発明の目的は、可視光画像と熱画像をラインごとに交互、または特定のパターンで入れ違いに表示させることで、可視光画像の視認性をなるべく損なわずに可視光画像に熱画像を重畳する方法を提供することにある。
【０００８】
本発明の前記ならびにその他の目的と新規な特徴は、本明細書の記述および添付図面から明らかになるであろう。
【課題を解決するための手段】
【０００９】
本願において開示される発明のうち、代表的なものの概要を簡単に説明すれば、次のとおりである。
【００１０】
すなわち、代表的なものの概要は、可視光画像と熱画像をラインごとに交互、または特定のパターンで入れ違いに表示させることである。
【発明の効果】
【００１１】
本願において開示される発明のうち、代表的なものによって得られる効果を簡単に説明すれば以下のとおりである。
【００１２】
すなわち、代表的なものによって得られる効果は、可視光画像の視認性をなるべく損なわずに可視光画像に熱画像を重畳できることである。
【図面の簡単な説明】
【００１３】
【図１】本発明の実施の形態１に係るカメラの構成図である。
【図２】本発明の実施の形態１に係る可視光画像と熱画像の合成例である。
【図３】本発明の実施の形態１に係る可視光画像と熱画像の合成例である。
【図４】本発明の実施の形態１に係る可視光画像と熱画像の合成例である。
【図５】本発明の実施の形態１に係る可視光画像と熱画像の合成例である。
【図６】本発明の実施の形態１に係る可視光画像と熱画像の合成例である。
【図７】本発明の実施の形態１に係る可視光画像と熱画像の合成実施のシーケンス図である。
【図８】本発明の実施の形態２に係るスマートフォンとサーマルカメラの接続図である。
【図９】本発明の実施の形態２に係るカメラの構成図である。
【発明を実施するための形態】
【００１４】
以下、本発明の実施の形態を図面に基づいて詳細に説明する。なお、実施の形態を説明するための全図において、同一の部材には原則として同一の符号を付し、その繰り返しの説明は省略する。
【実施例１】
【００１５】
図１から図７により、本発明の実施の形態１に係る可視光画像と熱画像の合成方法について説明する。図１は本発明の実施の形態１に係るカメラの構成図、図２から図６は本発明の実施の形態１に係る可視光画像と熱画像の合成例、図７は本発明の実施の形態１に係る可視光画像と熱画像の合成実施のシーケンス図である。
【００１６】
図１において、カメラシステム１００は、１つ以上の遠赤外線カメラ１０１と、１つ以上の可視光カメラ１０２、画像合成パターン格納部１０３、画像合成制御部１０４、熱画像処理部１０５、可視光画像処理部１０６、表示部１０７を備える。遠赤外線カメラ１０１は、撮影範囲の温度分布を目視可能な色に変換した熱画像を出力する。可視光カメラ１０２は、可視光画像を出力する。遠赤外線カメラ１０１と可視光カメラ１０２は、熱画像と可視光画像のサイズが異なる場合には画像を拡大や縮小して同じサイズにし、熱画像と可視光画像の撮影範囲が異なる場合には画像を平行移動や回転、トリミングすることで同じ撮影範囲にする。画像合成パターン格納部１０３は、熱画像と可視光画像の画像合成パターンを格納している。画像合成制御部１０４は、画像合成パターン格納部１０３から１つの画像合成パターンを読み出し、その画像合成パターンに従った画像合成を熱画像処理部１０５と可視光画像処理部１０６に指示する。熱画像処理部１０５と可視光画像処理部１０６は、画像合成制御部１０４から指示される画像を生成し、出力する。表示部１０７は、熱画像処理部１０５と可視光画像処理部１０６から出力される画像を合成して表示する。
【００１７】
図２において、熱画像２０１は遠赤外線カメラ１０１が出力する熱画像、可視光画像２０２は可視光カメラ１０２が出力する可視光画像、合成画像２０３は熱画像２０１と可視光画像２０２を合成した画像、画像合成パターン２００は図２に示す画像合成パターンを示している。熱画像２０１と可視光画像２０２は、この同じサイズ、同じ撮影範囲に処理された画像である。画像合成パターン２００では、熱画像２０１と可視光画像２０２を垂直方向に一定の幅で区切り、交互に抽出して合成することで合成画像２０３を生成する。
【００１８】
図３から図６では、画像合成パターン２００とは異なる画像合成パターンを示している。画像合成パターン３００では、熱画像２０１と可視光画像２０２を垂直方向に一定の幅で区切り、交互に抽出して合成することで合成画像３０３を生成する。画像合成パターン４００では、熱画像２０１と可視光画像２０２を一定の大きさの矩形で区切り、隣り合う矩形が必ず熱画像２０１由来の矩形と可視光画像２０２由来の矩形になるよう交互に抽出して合成画像４０３を生成する。画像合成パターン５００では、熱画像２０１と可視光画像２０２を一定の大きさの矩形で区切り、可視光画像２０２由来の矩形の周りが必ず熱画像２０１由来の矩形となるよう合成することで合成画像５０３を生成する。画像合成パターン６００では、熱画像２０１と可視光画像２０２を一定の大きさの矩形で区切り、熱画像２０１由来の矩形の周りが必ず可視光画像２０２由来の矩形となるよう合成することで合成画像６０３を生成する。
【００１９】
図７は、可視光画像と熱画像の合成実施のシーケンスを示す。画像合成制御部１０４は、熱画像処理部１０５と可視光画像処理部１０６に画像合成パターンを指示する。熱画像処理部１０５は、遠赤外線カメラ１０１から熱画像を受け取り、画像合成制御部１０４から受け取った画像合成パターンに従って画像処理し、その画像を表示部１０７に出力する。可視光画像処理部１０６は、可視光カメラ１０２から可視光画像を受け取り、画像合成制御部１０４から受け取った画像合成パターンに従って画像処理し、その画像を表示部１０７に出力する。表示部１０７は、熱画像処理部１０５と可視光画像処理部１０６から受け取った画像を合成し、表示する。
【００２０】
以上で、実施の形態１について説明した。
【実施例２】
【００２１】
本発明の実施の形態２では、実施の形態１をスマートフォンに応用する実施方法例を説明する。図８は本発明の実施の形態２に係るスマートフォンとサーマルカメラの接続図、図９は本発明の実施の形態２に係るカメラの構成図である。
【００２２】
図８と図９により、本発明の実施の形態２に係る可視光カメラと遠赤外線カメラの接続方法について説明する。
【００２３】
図８において、スマートフォン８００は可視光カメラ１０２を備え、サーマルカメラ８０１は遠赤外線カメラ１０１を備える。スマートフォン８００とサーマルカメラ８０１は、接続８０２で繋がっている。接続８０２は、有線または無線の接続であり、サーマルカメラ９０１内の遠赤外線カメラ１０１から出力される熱画像をスマートフォン８００に通信できる接続である。
【００２４】
図９は、本発明の実施の形態２における構成図を示す。本発明の実施の形態１と同様の構成であることが分かる。各機能は本発明の実施の形態１と同様であるので説明は省略する。一般的にスマートフォンは可視光カメラを備える。本発明の実施の形態２の構成により、スマートフォンへ容易に遠赤外線カメラ機能を追加し、本発明の可視光画像と熱画像の合成方法を使用することができる。
【００２５】
以上で、実施の形態２について説明した。
【００２６】
以上、本発明者によってなされた発明を実施の形態に基づき具体的に説明したが、本発明は前記実施の形態に限定されるものではなく、その要旨を逸脱しない範囲で種々変更可能であることはいうまでもない。
【産業上の利用可能性】
【００２７】
本発明は、電力・ガス・水道・鉄道等社会インフラ、産業用機器、医療、監視、農業、無人航空機、自動車等のサーモグラフィを利用するカメラシステムに適用可能である。
【符号の説明】
【００２８】
１００…カメラシステム、１０１…遠赤外線カメラ、１０２…可視光カメラ、１０３…画像合成パターン格納部、１０４…画像合成制御部、１０５…熱画像処理部、１０６…可視光画像処理部、１０７…表示部、２００…画像合成パターン、２０１…熱画像、２０２…可視光画像、２０３…合成画像、３００…画像合成パターン、３０３…合成画像、４００…画像合成パターン、４０３…合成画像、５００…画像合成パターン、５０３…合成画像、６００…画像合成パターン、６０３…合成画像、８００…スマートフォン、８０１…サーマルカメラ、８０２…接続
【図１】
2016217953.tif 000003
【図２】
2016217953.tif 000004
【図３】
2016217953.tif 000005
【図４】
2016217953.tif 000006
【図５】
2016217953.tif 000007
【図６】
2016217953.tif 000008
【図７】
2016217953.tif 000009
【図８】
2016217953.tif 000010
【図９】
2016217953.tif 000011