(57)【要約】【課題】重畳された情報が指し示す対象物体の現在の状況が確認できる監視システムを提供できるようにする。【解決手段】複数の撮像装置を有する監視システムにおいて、前記複数の撮像装置のうち１台から得られる画像に第１の重畳情報を重畳して第１の重畳情報付き画像を生成する生成手段と、前記第１の重畳情報に対応する対象物体が映っている画像を選択し、第２の重畳情報を重畳して提示する提示手段とを設ける。【選択図】図１
2014116852.tif 000002
【特許請求の範囲】
【請求項１】
複数の撮像装置を有する監視システムにおいて、
前記複数の撮像装置のうち１台の撮像装置から得られる画像に第１の重畳情報を重畳する生成手段と、
前記第１の重畳情報に対応する対象物体が映っている画像を選択し、第２の重畳情報を重畳する提示手段と、
を有することを特徴とする監視システム。
【請求項２】
利用者から要求される第１の重畳情報を管理するデータベースを有し、
前記複数の撮像装置のうち１台の撮像装置から得られる画像に重畳する第１の重畳情報を前記データベースから選択する際、
前記利用者が設定した条件によってフィルタリングして前記画像に表示する第１の重畳情報を選択する選択手段、
を有することを特徴とする請求項１に記載の監視システム。
【請求項３】
前記選択手段は、
予め決められた情報のみを前記データベースから選択することを特徴とする請求項２に記載の監視システム。
【請求項４】
前記提示手段は、
前記複数の撮像装置のうち１台の撮像装置の位置・画角・ズーム倍率と前記第１の重畳情報に対応する対象物体の位置を基に、前記撮像装置によって取得された画像内に前記対象物体が映っているか否かを判別することを特徴とする請求項２に記載の監視システム。
【請求項５】
前記生成手段は、
予め前記撮像装置によって取得された前記画像内に重畳する第１の重畳情報を決定しておくことを特徴とする請求項１に記載の監視システム。
【請求項６】
前記複数の撮像装置のうち１台の撮像装置から得られる前記画像に対し前記第１の重畳情報を重畳する際に、
前記第１の重畳情報に対応する前記対象物体が画面内に映っているか否かを条件に画面内における第１の重畳情報の表示を変える決定手段、
を有することを特徴とする請求項１〜５の何れか１項に記載の監視システム。
【請求項７】
前記生成手段は、重畳する複数の第１の重畳情報同士が画面内で重ならないように重畳することを特徴とする請求項６に記載の監視システム。
【請求項８】
前記提示手段は、
前記複数の撮像装置のうち１台の撮像装置から得られる第１の重畳情報付き画像において、前記第２の重畳情報の内容をさらに追加して情報を重畳して詳細重畳情報付き画像を生成して提示することを特徴とする請求項１〜７の何れか１項に記載の監視システム。
【請求項９】
前記提示手段は、
前記複数の撮像装置のうち１台の撮像装置から得られる第１の重畳情報付き画像に第１の重畳情報に対応する対象物体が映っているか否かを、
カメラの位置、画角、ズーム倍率と、対象物体の位置、大きさから決定することを特徴とする請求項１〜８の何れか１項に記載の監視システム。
【請求項１０】
前記選択手段は、
前記提示手段によって第２の重畳情報を提示する際に、
利用者が前記データベースから前記第２の重畳情報として画像に重畳する内容を選択することを特徴とする請求項２に記載の監視システム。
【請求項１１】
前記選択手段は、
前記提示手段によって前記第２の重畳情報を提示する際に、
予め決めておいた第２の重畳情報を選択して表示することを特徴とする請求項１０に記載の監視システム。
【請求項１２】
前記提示手段は、第２の重畳情報を提示する際に、
前記第１の重畳情報に対応する対象物体が第１の重畳情報付き画像に映っている場合、
前記第２の重畳情報付き画像の中央に前記第２の重畳情報が指し示す前記対象物体がくるように提示することを特徴とする請求項１〜１１の何れか１項に記載の監視システム。
【請求項１３】
前記提示手段は、第２の重畳情報を提示する際に、
前記第２の重畳情報に対応する対象物体が第１の重畳情報付き画像に映っている場合、
前記第１の重畳情報に対応する対象物体を拡大表示して前記第２の重畳情報付き画像を生成して提示することを特徴とする請求項１〜１１の何れか１項に記載の監視システム。
【請求項１４】
前記複数の撮像装置のうち１台の撮像装置から得られる第１の重畳情報付き画像において利用者が前記第１の重畳情報よりもさらに詳しい情報を求めた際に、
前記第１の重畳情報に対応する対象物体が画像内に映っている場合、
前記提示手段は、前記画像内の前記第１の重畳情報に対応する対象物体の領域を画像処理によって拡大表示して情報の詳細を重畳して提示することを特徴とする請求項１〜１３の何れか１項に記載の監視システム。
【請求項１５】
前記提示手段によって第２の重畳情報を提示する際に、
前記複数の撮像装置のうち１台の撮像装置から得られる第１の重畳情報付き画像に、
前記第１の重畳情報に対応する対象物体が第１の重畳情報付き画像に映っていない場合、
前記提示手段は、前記対象物体の位置と、前記複数の撮像装置それぞれの位置、画角、およびズーム倍率とを用いて、前記対象物体が映っている画像を出力している撮像装置を選択し、前記選択した撮像装置から出力される画像に第２の重畳情報を重畳して提示することを特徴とする請求項１〜１１の何れか１項に記載の監視システム。
【請求項１６】
前記提示手段によって第２の重畳情報を提示する際に、
前記複数の撮像装置のうち１台の撮像装置から得られる第１の重畳情報付き画像に、
前記第１の重畳情報に対応する対象物体が映っていない場合、
前記提示手段は、前記複数の撮像装置のそれぞれから得られる画像には何が映っているかを予め決めておき、
前記対象物体が映っている撮像装置の画像に切り替えて第２の重畳情報を重畳して提示することを特徴とする請求項１〜１１の何れか１項に記載の監視システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は監視システムに関し、特に、撮影した画像に係る情報を撮像画像に重畳する情報重畳機能を有する監視システムに用いて好適な技術に関するものである。
【背景技術】
【０００２】
様々な場所を撮影する監視システムは、撮影した画像に何が映っているのかを利用者に補足して通知するための情報を撮影した画像に重畳する情報重畳機能を備えている。情報重畳を行う際には撮影された画像と、撮影した画像に重畳する情報と、その情報を画像内で重畳する位置とが最適になるようにすることが必要である。
【０００３】
従来は例えば、特許文献１のように、可動雲台上に設置されたズームレンズ付カメラで撮影された画像に、あらかじめ蓄積した文字及び図形情報を雲台の制御値に基づいて画像の所定の位置に重畳する、という技術が知られている。また、特許文献２によると、携帯端末において、携帯端末で撮影された画像に、携帯端末の利用者の趣味趣向に合わせてあらかじめ蓄積しておいた情報を、携帯端末の位置や向きの情報を基に選択して画像の所定の位置に重畳する、という技術も知られている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平４−１５７８８２号公報
【特許文献２】特開２００４−３４３２８８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、前述の特許文献に開示された従来技術では、撮像装置１台から得られた画像では、画像内に重畳した情報が指し示す対象が映っていない場合、指し示す対象が画像で確認できない問題がある。
本発明は前述の問題点に鑑み、重畳された情報に対応する対象物体が確認できる監視システムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の監視システムは、複数の撮像装置を有する監視システムにおいて、前記複数の撮像装置のうち１台の撮像装置から得られる画像に第１の重畳情報を重畳する生成手段と、前記第１の重畳情報に対応する対象物体が映っている画像を選択し、第２の重畳情報を重畳する提示手段とを有することを特徴とする。
【発明の効果】
【０００７】
本発明によれば、監視システムの利用者に対して重畳情報に対応する対象物体を画像から確認できる監視システムを提供することができる。
【図面の簡単な説明】
【０００８】
【図１】実施形態にかかわる監視システムの構成例を示す図である。
【図２】実施形態の監視システムの機器の構成例を示す図である。
【図３】実施形態の監視システムにおける重畳情報付き画像生成の処理手順を説明するフローチャートである。
【図４】実施形態の監視システムにおける詳細重畳情報付き画像生成の処理手順を説明するフローチャートである。
【図５】情報重畳部による画像への情報の重畳の様子を表す図である。
【図６】利用者から要求があった重畳情報をデータベースから選択する様子を表す図である。
【図７】重畳情報が指し示す対象物体が画面内に映っていない場合の処理の一例を示す図である。
【発明を実施するための形態】
【０００９】
以下に、本発明の好ましい実施形態を、添付の図面に基づいて詳細に説明する。
［第１の実施形態］
以下、図１を参照して、本発明の第１の実施形態による、監視システムについて説明する。図１は、本発明の実施形態にかかわる監視システムの構成例を示す図である。
本実施形態における監視システムは第１の撮像部１１０から得られた画像を用いて情報重畳部１２０を通って画像に情報を重畳し、画像出力回路１３０から情報を重畳した画像を出力する。この際、情報重畳部１２０が第２の撮像部１４０を利用することがある。
第１の撮像部１１０は光学レンズ１１１と撮像素子１１２、信号処理回路１１３、撮像制御回路１１４で構成される。
【００１０】
情報重畳部１２０は重畳情報選択回路１２１と重畳情報決定回路１２２、重畳情報付き画像生成回路１２３、詳細重畳情報提示回路１２４で構成される。
第２の撮像部１４０は光学レンズ１４１と撮像素子１４２、信号処理回路１４３、撮像制御回路１４４で構成される。
【００１１】
本実施形態の監視システムの機器の構成は、図２（ａ）に示すように、複数の撮像装置２１０と、情報蓄積端末２２０と、画像表示装置２３０とを用いた構成である。または、図２（ｂ）のような複数の撮像装置２５０と、画像表示装置２６０とを用いた構成が考えられる。
【００１２】
図２（ａ）の構成において、第１の撮像部１１０は撮像装置２１０に配設されている。情報重畳部１２０を構成する重畳情報選択回路１２１、重畳情報決定回路１２２、重畳情報付き画像生成回路１２３、詳細重畳情報提示回路１２４の４つは、撮像装置２１０、情報蓄積端末２２０、画像表示装置２３０のいずれかに配設されている。または、複数箇所に分散して配設されている。画像出力回路１３０は画像表示装置２３０に配設されている。
【００１３】
図２（ｂ）の構成において、第１の撮像部１１０は撮像装置２５０に配設されている。情報重畳部１２０を構成する重畳情報選択回路１２１、重畳情報決定回路１２２、重畳情報付き画像生成回路１２３、詳細重畳情報提示回路１２４の４つは、撮像装置２５０、画像表示装置２６０のいずれか、または複数箇所に分散して配設されている。画像出力回路１３０は画像表示装置２６０に配設されている。
【００１４】
本実施形態の監視システムにおける処理手順を図３と図４のフローチャートに示す。以降の各手順の説明ではフローチャートを交えながら説明する。図３のフローチャートの処理は、図示しない不揮発性メモリに記録されたプログラムを、ワークメモリとして機能するメモリに展開してＣＰＵが実行することで実現する。
本実施形態では、まず第１の撮像部１１０において、撮像素子１１２は光学レンズ１１１を通して結像した光を電化に変換し撮像信号を生成する。信号処理回路１１３は撮像素子１１２で撮像された撮像信号を入力してデジタル化して撮像画像を生成する。この手順は図３のフローチャートにおける画像取得処理（Ｓ３１）に該当する。
【００１５】
次に、第１の撮像部１１０で生成された画像に対し、情報重畳部１２０で情報重畳を行う。この手順は、図３における画像に重畳する情報を選択する情報選択処理（Ｓ３２）を行い、情報を重畳した画像を生成する処理（Ｓ３３）に該当する。次に、情報重畳画像を利用者に提示する情報重畳画像提示処理を行なう（Ｓ３４）。
【００１６】
ここで図１に加え、本実施形態における情報重畳部１２０による画像への情報の重畳を表す図５を用いて、具体例を説明する。
情報重畳部１２０においては、第１の撮像部１１０から得られた画像５２０に対して、まず重畳する情報の内容を、重畳情報選択回路１２１によって図５のデータベース５１０から選択する。データベース５１０は、図２（ａ）の監視システムの構成であれば撮像装置２１０、情報蓄積端末２２０、画像表示装置２３０のいずれか、または複数箇所に分散して蓄積されている。
【００１７】
また、図２（ｂ）の監視システムの構成であれば撮像装置２５０、画像表示装置２６０のいずれか、または複数箇所に分散して蓄積されている。本実施形態において、情報の内容選択とは、データベース５１０における個々の対象物を表す名称や、築年数、住所、イベント情報といった情報の内、どれを画像に表示させるかを選択して決定することである。
【００１８】
本実施形態においては、データベース５１０の名称として、ビルＡ、デパートＢ、Ｃタワー、Ｄ博物館が登録されている。また、それぞれの名称（第１の重畳情報）に対応する、「築年数」、「住所」、「イベント情報」（第２の重畳情報）が登録されている。
【００１９】
データベース５１０の内容の選択方法は、例えば利用者が１つ以上の条件を設定し、その設定した条件に従って情報をデータベース５１０からフィルタリングする方法がある。また、例えば監視システムの設計者があらかじめ画像に重畳する情報の内容を決定しておく方法がある。
【００２０】
次に、画像５２０に表示する情報の選択、及び画像内の表示位置の決定を重畳情報決定回路１２２によって行う。選択及び位置決定方法は、例えば、地図情報と現在の撮像装置の位置・画角・ズーム倍率から情報を重畳すべき対象を自動で選択する方法がある。また、例えば撮像装置の位置・画角・ズーム倍率に基づいて、画面のどの位置に何が表示されるかをあらかじめ定義しておく方法がある。ここで、重畳する情報の画像上での表示形式は、文字列、写真、図形などがある。
【００２１】
重畳情報選択回路１２１、重畳情報決定回路１２２によって選択された情報を画像５２０に重畳した第１の重畳情報付き画像５３０を、重畳情報付き画像生成回路１２３により生成する。重畳する情報の画像内での表示は全て一律なものでもよいが、視認性を向上させるために重畳する情報のアイコンを少なくとも１つ以上の条件によって分けることが好ましい。例えば、重畳する情報が付随する対象物体が画像内に映っているか否かという条件で重畳情報のアイコンの形状を表示５３１と表示５３２で分ける方法がある。また、例えば第１の重畳情報同士が画像内でなるべく重ならないように表示する方法がある。重畳情報付き画像生成回路１２３によって生成された重畳情報付き画像は、画像出力回路１３０によって監視システムの利用者に提示される。
【００２２】
利用者に提示された重畳情報付き画像において、利用者が画像に表示されている重畳情報のうち、１つの重畳情報に関して、より詳しい情報を取得したい場合、詳細重畳情報提示回路１２４を利用する。より詳しい情報とは、図５のデータベース５１０から重畳情報選択回路１２１によって選択された内容（例えば図５では名称）だけでなく、他の内容（例えば築年数）をデータベース５１０から取得し、画面に内容をさらに追加して詳細な情報を重畳させることを指す。
【００２３】
ここからの手順は、図４のフローチャートを参照しながら説明する。
図４のフローチャートの処理は、図示しない不揮発性メモリに記録されたプログラムを、ワークメモリとして機能するメモリに展開してＣＰＵが実行することで実現する。
まず、利用者の操作により詳細情報の提示要求が行われる（Ｓ４１）。その後、詳細の提示を求めた重畳情報が指し示す対象物体が画像に映っているか否かを判定する可視判定処理を行う（Ｓ４２）。ここで、利用者が選択した重畳情報が指し示す対象物体が画像内に映っているか否かを判定する方法としては、例えばカメラの画角、位置、ズーム倍率を基にして、画面内に対象物体が映る、映らないといった選択をする方法がある。
【００２４】
ここで図１に加え、本実施形態における詳細重畳情報提示回路１２４により行なわれる画像への詳細な情報を重畳し、詳細重畳情報付き画像（第２の重畳情報付き画像）を生成して提示する詳細情報提示処理の様子を、図６、図７を用いて説明する。
まず、利用者が詳細な情報を知るために重畳情報を選択した際、図４のフローチャートにおけるＳ４２の判定処理で、重畳情報が指し示す対象物体が画面内に映っていると、詳細重畳情報提示回路１２４が判定した場合について、図６を用いて説明する。
【００２５】
図６に示すように、重畳情報選択回路１２１は、利用者から要求があった重畳情報の詳細として表示する情報を、重畳情報を管理するデータベース５１０から選択する。詳細情報として何を表示するかを選択する方法は、例えば利用者がデータベース５１０から選択した情報を表示する方法がある。また、例えば何を詳細情報として表示するかを監視システムに定義しておき、詳細情報の提示を利用者から求められた際に、決められた情報を表示する方法がある。これが、図４における詳細情報重畳処理（Ｓ４３）に該当する。
【００２６】
選択された重畳情報の詳細は、重畳情報付き画像生成回路１２３を用いて詳細重畳情報付き画像６１０として出力される。この際、詳細重畳情報付き画像６１０は、図６のように第１の重畳情報付き画像５３０に対して、詳細な表示６１１を重畳するだけもよいが、詳細重畳情報注目画像６２０のように、利用者にとって見やすい表示を行うようにすることが好ましい。
【００２７】
利用者が確認しやすい画像生成方法は、例えば、詳細重畳情報注目画像６２０のように、重畳情報が指し示す対象が画像の中央にくるように画像処理を行う方法がある。また、例えば重畳情報が指し示す対象の領域を画像内で拡大表示する画像処理を行う方法がある。これが図４における詳細情報重畳画像提示処理（Ｓ４４）に該当する。
【００２８】
次に、利用者が詳細な情報を知るために重畳情報を選択した際に、図４におけるＳ４２の判定処理で、重畳情報が指し示す対象物体が画面内に映っていないと詳細重畳情報提示回路１２４が判定した場合の処理の一例を、図７を用いて説明する。
【００２９】
本実施形態において、対象物体が画面に映っていない場合とは、例えば第１の重畳情報付き画像５３０におけるＣタワーのように、情報が指し示す対象が画面に映っていないことを指す。この場合、図４における別カメラ画像選択処理（Ｓ４５）が詳細重畳情報提示回路１２４により行なわれる。これにより、詳細重畳情報提示回路１２４に接続された少なくとも１台以上の第２の撮像部１４０の信号処理回路１４３から得られる１枚以上の画像から、対象物体が映っている画像（図７ではＣタワーが映っている画像）を選択する処理が実行される。
【００３０】
そして、対象物体が映っている画像が選択されると、図４における別画像詳細情報重畳処理（Ｓ４６）によって、選ばれた別撮像装置の画像に詳細情報が重畳される。
次に、図４における詳細情報重畳別画像提示処理（Ｓ４７）によって、詳細情報重畳別画像７１０として利用者に提示される。
【００３１】
この際、対象物体が映っている画像の選択方法は、例えば、画像を撮影しているカメラの位置・画角と地図情報を用いて、対象が映っているか否かを自動で判別して選択する方法がある。また、例えば詳細重畳情報提示回路１２４が、複数の撮像装置のそれぞれから得られる画像には何が映っているかを予めデータベース（図示せず）として持っておき、必要に応じてデータベースから選択する方法がある。
【００３２】
本実施形態の監視システムにおいて、利用者が重畳情報のより詳しい情報を取得する際、詳細重畳情報提示回路１２４によって提示する画像の切り替えを行うようにした。これにより、利用者はどんな場合でも対象の現在の状況を画像で確認しながら情報を得ることができるようになる。
以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。
【００３３】
（その他の実施形態）
また、本発明は、以下の処理を実行することによっても実現される。即ち、前述した実施形態の機能を実現するソフトウェア（コンピュータプログラム）を、ネットワーク又は各種のコンピュータ読み取り可能な記憶媒体を介してシステム或いは装置に供給する。そして、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【符号の説明】
【００３４】
１１０  第１の撮像部
１２０  情報重畳部
１２１  重畳情報選択回路
１２２  重畳情報決定回路
１２３  重畳情報付き画像生成回路
１２４  詳細重畳情報提示回路
１３０  画像出力回路
１４０  第２の撮像部
【図１】
2014116852.tif 000003
【図２】
2014116852.tif 000004
【図３】
2014116852.tif 000005
【図４】
2014116852.tif 000006
【図５】
2014116852.tif 000007
【図６】
2014116852.tif 000008
【図７】
2014116852.tif 000009