(57)【要約】【課題】高価な高解像度の赤外線カメラを使うことなく、かつ、可視光カメラの撮像面上のサイズと赤外線カメラの撮像面上の被写体のサイズとを一致させることなく、記録媒体から再生された視認性に優れた可視光カメラの可視光画像と暗部の監視に優れた赤外線カメラの赤外線画像とを組み合わせて、高機能な監視を行う。【解決手段】記録／再生部１８は、記録媒体から可視光カメラ１１の撮影範囲の第１のディジタル映像データを再生する。記録／再生部１９は、記録媒体から赤外線カメラ１２の撮影範囲の第２のディジタル映像データを再生する。画像合成部２０は、操作部２５から画像合成を行うように指示された場合は、記録／再生部１８により再生された可視光カメラ１１のディジタル映像データ中の選択領域の映像データの替りに、記録／再生部１９により再生された赤外線カメラ１２のディジタル映像データと置き換える画像合成を行う。【選択図】図１
2010278817.tif 000002
【特許請求の範囲】
【請求項１】
可視光カメラの第１の撮影範囲内の任意の位置を、前記可視光カメラより低解像度で、かつ、撮影可能範囲が前記第１の撮影範囲よりも小である赤外線カメラの第２の撮影範囲の位置として指定する指定入力手段と、
前記指定入力手段により指定された前記可視光カメラの前記第１の撮影範囲内の前記任意の位置に、撮影方向が移動自在な前記赤外線カメラの前記第２の撮影範囲を移動する移動手段と、
前記可視光カメラにより撮影して得られた前記第１の撮影範囲の可視光画像を第１の記録媒体に記録する第１の記録手段と、
前記赤外線カメラにより撮影して得られた前記第２の撮影範囲の赤外線画像を、前記第２の撮影範囲の位置を示す撮影領域情報とともに第２の記録媒体に記録する第２の記録手段と
を有することを特徴とする撮影装置。
【請求項２】
可視光カメラの第１の撮影範囲内の任意の位置を、前記可視光カメラより低解像度で、かつ、撮影可能範囲が前記第１の撮影範囲よりも小である赤外線カメラの第２の撮影範囲の位置として指定する指定入力手段と、
前記指定入力手段により指定された前記可視光カメラの前記第１の撮影範囲内の前記任意の位置に、撮影方向が移動自在な前記赤外線カメラの前記第２の撮影範囲を移動する移動手段と、
前記可視光カメラにより撮影して得られた前記第１の撮影範囲の可視光画像を第１の記録媒体に記録し、その第１の記録媒体から前記可視光画像を再生する第１の記録再生手段と、
前記赤外線カメラにより撮影して得られた前記第２の撮影範囲の赤外線画像を、前記第２の撮影範囲の位置を示す撮影領域情報とともに第２の記録媒体に記録し、その第２の記録媒体から前記赤外線画像及び前記撮影領域情報を再生する第２の記録再生手段と、
前記第１の記録再生手段により前記第１の記録媒体から再生された、前記可視光カメラにより撮影して得られた前記第１の撮影範囲の可視光画像中の、前記第２の記録再生手段により前記第２の記録媒体から再生された前記撮影領域情報に基づいて決定される所定の位置の前記第２の撮影範囲に相当する領域の可視光画像部分を、前記第２の記録再生手段により前記第２の記録媒体から再生された、前記赤外線カメラにより撮影して得られた前記第２の撮影範囲の赤外線画像と置き換える合成、又は、前記可視光画像部分に重畳する合成を行う画像合成手段と
を有することを特徴とする撮影装置。
【請求項３】
前記第１及び第２の記録媒体は、同一の記録媒体の第１の記録領域及び第２の記録領域であることを特徴とする請求項１又は２記載の撮影装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は撮影装置に係り、特に赤外線カメラと可視光カメラとを用いて所望の被写体をそれぞれ撮影して得た画像信号を記録し再生する撮影装置に関する。
【背景技術】
【０００２】
赤外線カメラは、例えば遠赤外線に相当する８μｍ〜１４μｍ程度の波長をモニタリングするため、近赤外線と異なり、物体の発する放射熱を直接検知するので光源が不要という特徴を持つ。従って、赤外線カメラは、夜間走行が多い車両向けの障害物認識システムや夜間の監視用途にも広く使われている。
【０００３】
しかしながら、赤外線カメラにより得られる映像は可視光で得られる映像と大きく異なり、認識できるのは目標物の大まかな形程度である。その結果、赤外線カメラにより得られる映像を見ているだけでは、赤外線カメラがどの部分を写しているのかよく分からないという不具合が発生する。そこで、赤外線カメラと可視光カメラで得られる映像とを組み合わせるという手法が発達してきた。
【０００４】
例えば、特許文献１は、撮影領域をそろえた可視光カメラの画像と赤外線カメラの画像とを使い、指定したエリアの画像を他方の画像に置き換えるという発明を開示している。また、特許文献２は、ハーフミラーを使って可視光カメラと赤外線カメラの光軸を合わせる発明を開示している。
【０００５】
更に、特許文献３は、同一の被写体を異なる光軸上で撮像する赤外線カメラとズームレンズ付き可視光カメラとを備え、予め可視光カメラの撮影範囲を赤外線カメラのそれよりも大きく設定しておき、その後で可視光カメラのズームレンズの倍率などを調整することにより、可視光カメラの撮像面上のサイズと赤外線カメラの撮像面上の被写体のサイズとを一致させる発明を開示している。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特許第３１９６１２２号公報
【特許文献２】特開平２−０５８４８０号公報
【特許文献３】特開平１−２８９３９０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
従来、可視光カメラに用いるＣＣＤ（Charge Coupled Devise;電荷結合素子）やＣＭＯＳ（Complementary Metal-Oxide Semiconductor）センサなどの撮像素子の解像度は、ＶＧＡ(Video Graphic Array)規格の水平方向６４０画素、垂直方向４８０画素程度であり、それほど大きくはなかった。ところが、近年は画素数が大幅に増えて、可視光カメラに用いる撮像素子の解像度は、ＸＧＡ(eXtended Graphics Array)規格の水平方向１０２４画素、垂直方向７６８画素や、ＨＤＴＶ(High Definition Television)規格の水平方向１９２０画素、垂直方向１１２５画素程度のものが増えてきた。
【０００８】
一方、遠赤外線を扱う赤外線カメラの撮像素子の解像度はあまり増えていない。例えば一般的なＭＥＭＳ(Micro Mechanical Systems)技術を使ったマイクロ・ボロメーターアレイのセンサの解像度は水平方向１８０画素、垂直方向１２０画素の２万画素クラスが普及品である。すると、赤外線カメラの撮像素子の解像度は、可視光カメラのＨＤＴＶ用撮像素子の２００万画素に比べて、１００倍の差がある。従って、単純に画素数のみで比較すると、赤外線カメラと可視光カメラが同じ領域を撮影している場合、赤外線カメラの１つの画素は、可視光カメラの１００画素に相当することになる。これでは画素数ギャップが大きすぎて、問題が生じる。
【０００９】
例えば、可視光カメラで１画素分の領域に高熱の物体があっても、赤外線カメラでは１００分の１に平均化されてしまい、目立たなくなってしまう。また、例えば人間を撮像した場合、可視光カメラでは確認できても、赤外線カメラでは画素数が粗すぎて、その画像を見てもそれが何か確認できないことが起こる。これでは可視光が少ない夜間の監視に不都合が生じる。また、撮影領域をそろえた可視光カメラの画像と赤外線カメラの画像とを用いる特許文献１記載の発明は適用することができない。
【００１０】
また、特許文献２記載の発明のような、夜間の車両の障害物回避を目的とした可視・遠赤外線切換えシステムも画素数の少ない赤外線カメラでは画像が粗く、人体・人工物の識別精度の低さから事故を招く危険性さえ生じる恐れがある。
【００１１】
上記の課題の最も簡単な解決策は、赤外線カメラの撮像素子の解像度を可視光カメラの解像度程度に上げることである。しかしながら、赤外線カメラの撮像素子の値段は高価であり、単純に画素数を増やして解像度を上げるのはコストアップになり難しい。更に、特許文献３記載の発明では、可視光カメラの撮像面上のサイズと赤外線カメラの撮像面上の被写体のサイズとを一致させる必要がある。
【００１２】
本発明は以上の点に鑑みなされたもので、高価な高解像度の赤外線カメラを使うことなく、低コストで、かつ、高機能な監視を行うと共に、その監視した映像の記録再生を行うことが可能な撮影装置を提供することを目的とする。
【課題を解決するための手段】
【００１３】
上記の目的を達成するため、本発明の撮影装置は、可視光カメラの第１の撮影範囲内の任意の位置を、可視光カメラより低解像度で、かつ、撮影可能範囲が第１の撮影範囲よりも小である赤外線カメラの第２の撮影範囲の位置として指定する指定入力手段と、指定入力手段により指定された可視光カメラの第１の撮影範囲内の任意の位置に、撮影方向が移動自在な赤外線カメラの第２の撮影範囲を移動する移動手段と、可視光カメラにより撮影して得られた第１の撮影範囲の可視光画像を第１の記録媒体に記録する第１の記録手段と、赤外線カメラにより撮影して得られた第２の撮影範囲の赤外線画像を、第２の撮影範囲の位置を示す撮影領域情報とともに第２の記録媒体に記録する第２の記録手段とを有することを特徴とする。
【００１４】
また、上記の目的を達成するため、本発明の撮影装置は、可視光カメラの第１の撮影範囲内の任意の位置を、可視光カメラより低解像度で、かつ、撮影可能範囲が第１の撮影範囲よりも小である赤外線カメラの第２の撮影範囲の位置として指定する指定入力手段と、指定入力手段により指定された可視光カメラの第１の撮影範囲内の任意の位置に、撮影方向が移動自在な赤外線カメラの第２の撮影範囲を移動する移動手段と、可視光カメラにより撮影して得られた第１の撮影範囲の可視光画像を第１の記録媒体に記録し、その第１の記録媒体から可視光画像を再生する第１の記録再生手段と、赤外線カメラにより撮影して得られた第２の撮影範囲の赤外線画像を、第２の撮影範囲の位置を示す撮影領域情報とともに第２の記録媒体に記録し、その第２の記録媒体から赤外線画像及び撮影領域情報を再生する第２の記録再生手段と、第１の記録再生手段により第１の記録媒体から再生された、可視光カメラにより撮影して得られた第１の撮影範囲の可視光画像中の、第２の記録再生手段により第２の記録媒体から再生された撮影領域情報に基づいて決定される所定の位置の第２の撮影範囲に相当する領域の可視光画像部分を、第２の記録再生手段により第２の記録媒体から再生された、赤外線カメラにより撮影して得られた第２の撮影範囲の赤外線画像と置き換える合成、又は、可視光画像部分に重畳する合成を行う画像合成手段とを有することを特徴とする。
【００１５】
ここで、上記の第１及び第２の記録媒体は、同一の記録媒体の第１の記録領域及び第２の記録領域であってもよい。
【発明の効果】
【００１６】
本発明によれば、高価な高解像度の赤外線カメラを使うことなく、低コストで、かつ、高機能な監視を行うと共に、その監視した映像の記録再生を行うことが可能となる。
【図面の簡単な説明】
【００１７】
【図１】本発明の撮影装置の第１の実施の形態のブロック図である。
【図２】本発明における可視光カメラと赤外線カメラとの位置関係の一例を示す斜視図である。
【図３】可視光カメラと赤外線カメラの撮影範囲の一例の比較説明図である。
【図４】本発明の撮影装置の可視光カメラの撮影範囲の複数領域分割、選択領域の赤外線カメラ画像への置き換え／重ね合わせの第１の実施の形態の説明図である。
【図５】本発明の撮影装置の第２の実施の形態のブロック図である。
【発明を実施するための形態】
【００１８】
次に、本発明の実施の形態について図面を参照して詳細に説明する。
【００１９】
（第１の実施の形態）
図１は、本発明になる撮影装置の第１の実施の形態のブロック図を示す。同図において、撮影装置１０は、可視光カメラ１１とズームレンズ１３を備えた赤外線カメラ１２とを有する。また、撮影装置１０は、図１に示すように、Ａ／Ｄ変換器１４及び１６と、フレームメモリ１５及び１７と、記録／再生部１８及び１９と、画像合成部２０と、モニタ２１と、画像分析部２２と、警報発令部２３と、通信部２４と、操作部２５と、赤外線カメラ撮影領域制御部２６とを有する。
【００２０】
可視光カメラ１１と赤外線カメラ１２とは、図２に斜視図を示すように、互いに光軸がｄだけ離れた位置に配置されている。可視光カメラ１１は、例えば、ＸＧＡ規格やＨＤＴＶ規格の画素数程度の高解像度の撮像素子を用いて可視光を光電変換するカメラである。一方、赤外線カメラ１２は、例えば２万画素クラスの低解像度の撮像素子を用いて、波長８μｍ〜１４μｍの遠赤外線を光電変換するカメラである。従って、図３に示すように、可視光カメラ１１の撮影範囲３０に対して、赤外線カメラ１２の撮影可能範囲は４１や４２に示すように、狭い範囲となっている。
【００２１】
また、赤外線カメラ１２は、図１の赤外線カメラ撮影領域制御部２６により、所定位置を支点として図２に示すように、撮影方向（光軸方向）が垂直方向Iと、水平方向IIに回動可能な構成とされている。これにより、赤外線カメラ１２の撮影範囲は、可視光カメラ１１の撮影範囲内の任意の位置に移動可能とされ、可視光カメラ１１の撮影範囲３０内において、例えば、図３に４１で示す位置から４２で示す位置に移動可能とされている。
【００２２】
また、可視光カメラ１１と赤外線カメラ１２は光軸が合っていないが、図２に示したように、それらの光軸間の距離はｄであり、ｄよりも１０倍以上の遠い範囲を写すことでほぼ光軸が合っているときと同等な撮影状況を得ることができるようになる。例えばｄが１０ｃｍであれば、１ｍ以上先を撮影するようにする。
【００２３】
図１に戻って説明する。Ａ／Ｄ変換器１４は、可視光カメラ１１が被写体からの可視光を光電変換して得たアナログ映像信号を第１のディジタル映像データに変換して、フレームメモリ１５に格納する。フレームメモリ１５は、例えば、ダイナミック・ランダム・アクセス・メモリ（ＤＲＡＭ）から構成されている。一方、Ａ／Ｄ変換器１６は、赤外線カメラ１２が被写体からの赤外線を光電変換して得たアナログ映像信号を第２のディジタル映像データに変換して、フレームメモリ１７に格納する。フレームメモリ１７は、例えばＤＲＡＭから構成されている。
【００２４】
記録／再生部１８は、フレームメモリ１５に格納された第１のディジタル映像データを記録媒体に記録し、またその記録媒体に記録された上記の第１のディジタル映像データを再生する。記録／再生部１９は、フレームメモリ１７に格納された第２のディジタル映像データを記録媒体に記録し、またその記録媒体に記録された上記の第２のディジタル映像データを再生する。記録媒体は、ハードディスク等である。
【００２５】
記録／再生部１８及び１９は、それぞれ別々の記録再生装置であってもよいし、同じ記録再生装置内の同じ記録媒体内の別の領域にディジタル映像データを記録し、再生する構成であってもよい。要は、第１及び第２のディジタル映像データが分離された状態で記録媒体に記録され、再生されればよい。例えば、同じＨＤＤ記録再生装置に記録し再生する場合でも、それぞれ別のファイル名で記録されている場合には、それぞれ記録／再生部１８及び１９を構成しているとみなせる。
【００２６】
画像合成部２０は、記録／再生部１８及び１９によりそれぞれ再生された第１及び第２のディジタル映像データを合成する。操作部２５は、画像合成部２０により画像合成するかどうかの指示を随時行うことができる。画像合成の方法として、例えば単純な可視光カメラ情報の置き換え、あるいは重ね合わせがある。この合成された映像データがモニタ２１により表示される。
【００２７】
画像分析部２２は、記録／再生部１８及び１９によりそれぞれ再生された第１及び第２のディジタル映像データが入力され、画像分析を行って何らかの特徴を抽出し、判断を行う。その特徴とは、例えば温度情報であったり、一定時間前との温度変化だったり、あるいは動きの検出であったりする。画像分析部２１の検出内容、判断基準は監視対象に応じて個々に操作部２５を用いて設定される。
【００２８】
警報発令部２３は、画像分析部２２が画像分析して所定の判断基準で警報が必要と判断された時に、画像分析部２２から供給される警報情報に基づいて、警報を発生する。警報は、アラーム音あるいはパイロットランプの点灯又は点滅により行われる。また、警報発令部２３は、モニタ２１に警報内容を表示させる。
【００２９】
通信部２４は、モニタ２１からの画像情報を撮影装置１０の外部（例えば、遠隔地のセキュリティ関係者、あるいはセキュリティシステム）に伝達する。なお、通信部２４は、警報発令部２３で発令された警報を外部へ伝達するようにしてもよい。
【００３０】
操作部２５は、画像分析部２２の分析条件の設定も行う。操作部２５の設定作業時の設定状況はモニタ２１により表示される。操作部２５は、ペン入力デバイス、マウスなどの領域指定可能なデバイスであるが、モニタ２１上のタッチパネルを入力デバイスとして用いる場合がある。
【００３１】
赤外線カメラ撮影領域制御部２６は、操作部２５で使用者が操作した設定に従って、赤外線カメラ１２の撮影領域（撮影範囲）を、図３に示したように、可視光カメラ１１の撮影範囲３０内において制御する。その制御方法としては、モータにより直接赤外線カメラ１２の胴体の方向を制御する方法や、ミラー、レンズ等の光学部品を振ることにより赤外線カメラ１２の入射光線の方向を制御する方法がある。この中には、赤外線カメラ１２のズームレンズ１３によるズーム倍率を制御する方法も含む。なお、赤外線カメラ撮影領域制御部２６は、制御後の赤外線カメラ１２の撮影領域の位置などを示す撮影領域情報をフレームメモリ１７に供給して記憶させる。
【００３２】
次に、本実施の形態の撮影装置１０の動作について説明する。
【００３３】
撮影装置１０は、まず、モニタ２１の画面全体に可視光カメラ１１で撮影した被写体である監視対象の画像を表示する。これにより、監視者は、モニタ２１の画像から赤外線カメラ１２だけでは得られない監視対象全体の様子が確認できる。ここで、図４（Ａ）に示すように、モニタ２１の画面全体に表示される可視光カメラ１１の撮影範囲３０の画像は、例えば横方向４つ、縦方向３つの１２個の分割領域３１に分割されている。この１２個の分割領域３１の各々は、図３と共に説明した赤外線カメラ１２の一つの撮影範囲４１又は４２と等しい。
【００３４】
監視者は、モニタ２１の画面全体に表示されている可視光カメラ１１からの画像中、ライトが当たっていない領域、あるいは暗がりになっている領域を操作部２５を操作して指定する。この操作部２５を操作して指定された選択領域が、例えば図４（Ａ）に３２で示す一つの分割領域であるものとすると、赤外線カメラ撮影領域制御部２６が、上記の操作部２５からの選択領域３２の指定入力により、赤外線カメラ１２を、選択領域３２を撮影するように回動する。
【００３５】
なお、ここでは、選択領域は、可視光カメラ１１の撮影範囲３０に対して規格化された領域分割を行い、その中から選ぶようになっているが、選択領域は、可視光カメラ１１の撮影範囲３０内の規格化されない任意の位置に設定できることは勿論である。
【００３６】
Ａ／Ｄ変換器１４は、可視光カメラ１１により撮影して得られた、撮影範囲３０の被写体のアナログ映像信号をＡ／Ｄ変換して第１のディジタル映像データを生成し、その第１のディジタル映像データをフレームメモリ１５に格納する。一方、Ａ／Ｄ変換器１６は、赤外線カメラ１２により撮影された図４（Ａ）に示した選択領域３２のアナログ映像信号をＡ／Ｄ変換して第２のディジタル映像データを生成し、その第２のディジタル映像データをフレームメモリ１７に格納する。なお、フレームメモリ１７は、赤外線カメラ撮影領域制御部２６からの選択領域３２を示す撮影領域情報も記憶する。
【００３７】
記録／再生部１８は、フレームメモリ１５から読み出された可視光カメラ１１の撮影範囲３０の第１のディジタル映像データを記録媒体に記録する。もう一方の記録／再生部１９は、フレームメモリ１７から読み出された赤外線カメラ１２の選択領域３２の第２のディジタル映像データと、選択領域３２を示す撮影領域情報とを記録媒体に記録する。
【００３８】
その後、記録／再生部１８は、記録媒体から可視光カメラ１１の撮影範囲３０の第１のディジタル映像データを再生し、その再生ディジタル映像データを画像合成部２０に供給すると共に、画像分析部２２に供給する。また、記録／再生部１９は、記録媒体から赤外線カメラ１２の撮影範囲である選択領域３２の第２のディジタル映像データと撮影領域情報とを再生し、その再生ディジタル映像データと撮影領域情報とを画像合成部２０に供給すると共に、画像分析部２２に供給する。
【００３９】
画像合成部２０は、操作部２５から画像合成を行うように指示された場合は、記録／再生部１８により再生された可視光カメラ１１の撮影範囲３０の第１のディジタル映像データ中の、記録／再生部１９により再生された撮影領域情報に基づいて決定される選択領域３２の映像データの替りに、赤外線カメラ１２の選択領域３２の第２のディジタル映像データと置き換える画像合成を行い、その画像合成後の映像データをモニタ２１へ出力する。
【００４０】
これにより、モニタ２１は、図４（Ｂ）に模式的に示すように、可視光カメラ１１からの可視光画像を表示すると共に、その可視光画像中の同図（Ａ）に示した選択領域３２に対応する領域４３の可視光画像部分を、赤外線カメラ１２からの赤外線画像と置き換えて表示する。なお、操作部２５からの指示により、画像合成部２０は、選択領域３２の可視光カメラ１１からの可視光画像に、赤外線カメラ１２からの赤外線画像を重畳するように画像合成して、その合成画像をモニタ２１に表示させるようにしてもよい。
【００４１】
なお、記録／再生部１８、１９の画像データには、通常の監視カメラシステムと同様に撮影時刻情報が含まれている。記録／再生部１８、１９の画像を合成する際は、この撮影時刻情報を用いて同期を取る。
【００４２】
一方、画像分析部２２は、記録／再生部１８により再生された可視光カメラ１１の撮影範囲３０の第１のディジタル映像データと、記録／再生部１９により再生された赤外線カメラ１２の選択領域３２の第２のディジタル映像データの画像分析を行って何らかの特徴（温度情報、一定時間前との温度変化、動きの検出など）を抽出し、判断を行う。警報発令部２３は、画像分析部２２が画像分析して所定の判断基準で警報が必要と判断された時に、画像分析部２２から供給される警報情報に基づいて、警報を発生する。
【００４３】
なお、画像合成部２０は、操作部２５から可視光画像のみ、又は赤外線画像のみを選択する非合成の指示を受けた場合は、操作部２５から指示に従い、記録／再生部１８により再生された可視光カメラ１１の撮影範囲３０の第１のディジタル映像データのみ、又は記録／再生部１９により再生された赤外線カメラ１２の選択領域３２の第２のディジタル映像データのみをモニタ２１に供給する。
【００４４】
このように、本実施の形態の撮影装置１０によれば、画像合成部２０において可視光カメラ１１の撮影範囲３０の再生可視光画像と、赤外線カメラ１２の撮影範囲の再生赤外線画像との画像合成を行うようにしたため、高価な高解像度の赤外線カメラを使うことなく、かつ、可視光カメラの撮像面上のサイズと赤外線カメラの撮像面上の被写体のサイズとを一致させることなく、視認性に優れた可視光カメラ１１の可視光画像と、暗部の監視に優れた赤外線カメラ１２の赤外線画像とを組み合わせた再生画像により、高機能な監視を行うことができると共に、その監視した映像の記録再生を行うことができる。
【００４５】
（第２の実施の形態）
図５は、本発明になる撮影装置の第２の実施の形態のブロック図を示す。同図中、図１と同一構成部分には同一符号を付し、その説明を省略する。
【００４６】
図５において、本実施の形態の撮影装置５０は、図１に示した撮影装置１０と比較すると、記録／再生部５２が一つである点に特徴がある。また、図５の画像合成部５１は、フレームメモリ１５及び１７からの映像データを合成する。画像合成の方法として、例えば単純な可視光カメラ情報の置き換え、あるいは重ね合わせがある。
【００４７】
次に、本実施の形態の撮影装置５０の動作について説明する。
【００４８】
撮影装置５０内のフレームメモリ１５は、第１の実施の形態と同様に、Ａ／Ｄ変換器１４からの可視光カメラ１１により撮影された撮影範囲３０の被写体の第１のディジタル映像データを格納する。また、フレームメモリ１７は、第１の実施の形態と同様に、Ａ／Ｄ変換器１６からの赤外線カメラ１２により撮影された図４（Ａ）に示した選択領域３２の被写体のディジタル映像データを格納する。なお、フレームメモリ１７は、赤外線カメラ撮影領域制御部２６からの選択領域３２を示す撮影領域情報も記憶する。
【００４９】
なお、ここでは、赤外線カメラ１２は図４（Ａ）に示した選択領域３２の被写体を撮影しているものとして説明したが、撮影範囲３０内であればよく、この選択領域３２に限定されるものではないことは勿論である。
【００５０】
画像合成部５１は、フレームメモリ１５から読み出された可視光カメラ１１の撮影範囲３０の第１のディジタル映像データ中の選択領域３２の映像データの替りに、フレームメモリ１７から読み出された赤外線カメラ１２の選択領域３２の第２のディジタル映像データを置き換える画像合成を行い、その画像合成後の映像データをモニタ２１へ出力すると共に記録／再生部５２へ出力する。
【００５１】
記録／再生部５２は、上記の画像合成後の映像データを記録媒体に記録した後、必要に応じて記録媒体から上記の画像合成後の映像データを再生して、モニタ２１及び画像分析部５３にそれぞれ供給する。従って、モニタ２１は、操作部２５からの指示により、画像合成部５１からの画像合成後の映像データ、及び記録／再生部５２により記録媒体から再生された画像合成後の映像データのいずれか一方を選択して表示する。
【００５２】
モニタ２１は、図４（Ｂ）に模式的に示すように、可視光カメラ１１からの可視光画像を表示すると共に、その可視光画像中の同図（Ａ）に示した選択領域３２に対応する領域４３の可視光画像部分を、赤外線カメラ１２からの赤外線画像に置き換えて表示する。なお、画像合成部２０は、選択領域３２の可視光カメラ１１からの可視光画像に、赤外線カメラ１２からの赤外線画像を重畳するような画像合成を行うように構成されていてもよく、その場合は、モニタ２１は可視光画像と赤外線画像とが重畳された合成画像を表示する。
【００５３】
また、画像分析部５３は、記録／再生部５２により記録媒体から再生された画像合成後の映像データの画像分析を行って何らかの特徴（温度情報、一定時間前との温度変化、動きの検出など）を抽出し、判断を行う。警報発令部２３は、画像分析部５３が画像分析して所定の判断基準で警報が必要と判断された時に、画像分析部５３から供給される警報情報に基づいて、警報を発生する。
【００５４】
このように、本実施の形態の撮影装置５０によれば、画像合成部５１において可視光カメラ１１の撮影範囲３０の可視光画像と、赤外線カメラ１２の撮影範囲の赤外線画像との画像合成を行った後の合成画像データを記録再生するようにしたため、高価な高解像度の赤外線カメラを使うことなく、かつ、可視光カメラの撮像面上のサイズと赤外線カメラの撮像面上の被写体のサイズとを一致させることなく、視認性に優れた可視光カメラ１１の可視光画像と、暗部の監視に優れた赤外線カメラ１２の赤外線画像とを組み合わせた再生画像により、高機能な監視を行うことができる。
【００５５】
なお、本発明は上記の実施の形態に限定されるものではなく、例えば画像分析部２２、５３により警報発令が必要な異常分析結果を得る方法は、一般には正常な状態ではあり得ない温度を赤外線画像から検出する方法であるが、これに限らず差分検出方法、置き去り検出方法、動物検出方法、変装・異常扮装検出方法なども含まれる。
【００５６】
上記の差分検出方法は、所定の時間差の複数の画像を比較し、被写体が動いたとか、何かが撮影範囲に現れたなどの、画像に変化があったかどうかを検出する方法である。また、上記の置き去り検出方法は、人間などが何かを置いていかなかったかどうかを検出する方法である。この置き去り検出方法では、例えば、爆弾テロなどを想定し、鞄を持っていた人間がそれをどこかに置かなかったかどうかを検出する。原理としては、画像に写っている人間の面積が急激に変化した場合に警報を出す。
【００５７】
また、上記の動物検出方法は、赤外線画像から被写体の体温を検出し、その体温から被写体が動物であるかどうかを検出する方法である。更に動物検出方法では、画像認識を併用して、人間かそれ以外の動物であるかを検出する。この動物検出方法は、野生動物から農場を監視する用途などに用いられる。更に、上記の変装・異常扮装検出方法は、目出し帽やマスクなどを装着している人間の顔からの赤外線の出方が、そのようなものを装着していない人間の顔からの赤外線の出方と異なることを利用して異常を検出する方法である。逆に裸の人間も赤外線画像から検出することができる。
【００５８】
なお、本発明は以上の実施の形態に限定されるものではなく、例えば、各実施の形態の撮影装置をコンピュータにより実現する撮影プログラムも包含するものである。この撮影プログラムは、記録媒体に記録されてコンピュータに取り込まれたり、あるいはネットワークを介して配布されてコンピュータにロードされたりしてもよい。
【符号の説明】
【００５９】
１０、５０  撮影装置  
１１  可視光カメラ
１２  赤外線カメラ
１３  ズームレンズ
１４、１６  Ａ／Ｄ変換器
１５、１７  フレームメモリ
１８、１９、５２  記録／再生部
２０、５１  画像合成部
２１  モニタ
２２、５３  画像分析部
２３  警報発令部
２４  通信部
２５  操作部
２６  赤外線カメラ撮影領域制御
３０  可視光カメラの撮影範囲
３１  可視光カメラの分割撮影領域
３２  選択された分割撮影領域
【図１】
2010278817.tif 000003
【図２】
2010278817.tif 000004
【図４】
2010278817.tif 000005
【図５】
2010278817.tif 000006
【図３】
2010278817.tif 000007