(57)【要約】  本発明は、センサー装置を検索する段階と、前記モニタリング装置の周辺に対するイメージを獲得する段階と、前記イメージを用いて検索により発見したセンサー装置に対応する位置情報を登録する段階と、及び前記発見したセンサー装置で発生するイベントに対応して行われる動作を含むモニタリング情報を登録する段階と、を含む。前記装置はイメージを獲得するカメラと、有線又は無線で信号を送受信する通信部と、情報を登録する記憶部と、及びセンサー装置を検索し、前記モニタリング装置の周辺に対するイメージを獲得し、前記イメージを用いて検索により発見したセンサー装置に対応する位置情報を登録し、前記発見したセンサー装置で発生するイベントに対応して行われる動作を含むモニタリング情報を登録し、前記発見したセンサー装置によるイベントの発生を検出すると、前記登録された位置情報を用いてモニタリングを行う制御部と、を含む。
2017526263.tif 000002
【特許請求の範囲】
【請求項１】
センサー装置と接続可能なモニタリング装置が周辺をモニタリングする方法であって、
センサー装置を検索する段階と、
前記モニタリング装置の周辺に対するイメージを獲得する段階と、
前記イメージを用い、検索により発見したセンサー装置に対応する位置情報を登録する段階と、
前記発見したセンサー装置で発生するイベントに対応して行われる動作を含むモニタリング情報を登録する段階と、を含むことを特徴とする、モニタリング方法。
【請求項２】
前記発見したセンサー装置によるイベントの発生を検出すると、前記登録された位置情報を用いて前記モニタリング装置の周辺のモニタリングを行う段階をさらに含むことを特徴とする、請求項１に記載のモニタリング方法。
【請求項３】
前記発見したセンサー装置に対応する位置情報は、前記発見したセンサー装置によるイベントの発生により前記モニタリング装置がモニタリングする位置に対する情報を含むことを特徴とする、請求項１に記載のモニタリング方法。
【請求項４】
前記位置情報を登録する段階は、
前記獲得したイメージを表示する段階と、
前記表示されたイメージに含まれた一つ以上の地点を選択する入力を検出する段階と、
前記選択された地点の座標を前記センサー装置に対応する位置情報として登録する段階と、を含むことを特徴とする、請求項１に記載のモニタリング方法。
【請求項５】
前記位置情報を登録する段階は、
前記獲得したイメージを２以上の領域に分けて表示する段階と、
前記分けて表示された２以上の領域中の一つ以上の領域を選択する入力を検出する段階と、
前記分けて表示された２以上の領域中で前記選択された一つ以上の領域に対応する領域識別子を前記センサー装置に対応する位置情報として登録する段階と、を含むことを特徴とする、請求項１に記載のモニタリング方法。
【請求項６】
前記位置情報を登録する段階は、
前記獲得したイメージに含まれた予め設定された形状に基づいて前記センサー装置に対応する位置又は座標を決定する段階と、
前記位置又は座標を前記センサー装置に対応する位置情報として登録する段階と、を含むことを特徴とする、請求項１に記載のモニタリング方法。
【請求項７】
前記モニタリング情報を登録する段階は、
前記予め設定された形状に含まれたモーション、色又はパターンのうちの少なくとも一つに基づいて前記発見されたセンサー装置で発生するイベントに対応して行われる動作を決定する段階と、
前記決定された動作を登録する段階と、を含むことを特徴とする、請求項６に記載のモニタリング方法。
【請求項８】
前記センサー装置によって放出される光源情報に基づいてセンサー装置の装置情報を獲得する段階をさらに含むことを特徴とする、請求項１に記載のモニタリング方法。
【請求項９】
前記センサー装置に対応する位置情報が複数の位置、領域又は座標を含む場合、
前記モニタリング情報を登録する段階は、
前記位置、領域又は座標別でモニタリング時間を設定する段階を含むことを特徴とする、請求項１に記載のモニタリング方法。
【請求項１０】
前記モニタリングを行う段階は、
変化が検出された位置、領域又は座標に対応するモニタリング時間を増加させることを特徴とする、請求項９に記載のモニタリング方法。
【請求項１１】
位置、領域又は座標別でモニタリング時間を累積して計算する段階と、及び
モニタリングを行わない間には、累積したモニタリング時間が最も長い位置、領域又は座標に向けるようにモニタリング装置が含むカメラの方向を設定する段階と、をさらに含むことを特徴とする、請求項９に記載のモニタリング方法。
【請求項１２】
センサー装置と接続可能なモニタリング装置であって、
イメージを獲得するカメラと、
有線又は無線で信号を送受信する通信部と、
情報を登録する記憶部と、及び
センサー装置を検索し、前記モニタリング装置の周辺に対するイメージを獲得し、前記イメージを用いて検索により発見したセンサー装置に対応する位置情報を登録し、前記発見したセンサー装置で発生するイベントに対応して行われる動作を含むモニタリング情報を登録する制御部と、を含むことを特徴とする、モニタリング装置。
【請求項１３】
前記制御部は、
前記発見したセンサー装置によるイベントの発生を検出すると、前記登録された位置情報を用いて前記モニタリング装置の周辺のモニタリングを行うことを特徴とする、請求項１２に記載のモニタリング装置。
【請求項１４】
前記発見したセンサー装置に対応する位置情報は、前記発見したセンサー装置によるイベントの発生により前記モニタリング装置がモニタリングする位置に対する情報を含むことを特徴とする、請求項１２に記載のモニタリング装置。
【請求項１５】
ユーザによる入力を検出する入力部と、
イメージを表示する表示部と、をさらに含み、
前記制御部は、
前記獲得したイメージを表示し、前記表示されたイメージに含まれた一つ以上の地点を選択する入力を検出し、前記選択された地点の座標を前記センサー装置に対応する位置情報として登録することを特徴とする、請求項１２に記載のモニタリング装置。
【請求項１６】
ユーザによる入力を検出する入力部と、
イメージを表示する表示部と、をさらに含み、
前記制御部は、
前記獲得したイメージを２以上の領域に分けて表示し、前記分けて表示された２以上の領域中の一つ以上の領域を選択する入力を検出し、前記分けて表示された２以上の領域中で前記選択された一つ以上の領域に対応する領域識別子を前記センサー装置に対応する位置情報として登録することを特徴とする、請求項１２に記載のモニタリング装置。
【請求項１７】
前記制御部は、
前記獲得したイメージに含まれた予め設定された形状に基づいて前記センサー装置に対応する位置又は座標を決定し、前記位置又は座標を前記センサー装置に対応する位置情報として登録することを特徴とする、請求項１２に記載のモニタリング装置。
【請求項１８】
前記制御部は、
前記予め設定された形状に含まれたモーション、色又はパターンのうちの少なくとも一つに基づいて前記発見されたセンサー装置で発生するイベントに対応して行われる動作を決定し、前記決定された動作を登録することを特徴とする、請求項１７に記載のモニタリング装置。
【請求項１９】
前記制御部は、
前記センサー装置によって放出される光源情報に基づいてセンサー装置の装置情報を獲得することを特徴とする、請求項１２に記載のモニタリング装置。
【請求項２０】
前記センサー装置に対応する位置情報が複数の位置、領域又は座標を含む場合、
前記制御部は、
前記位置、領域又は座標別でモニタリング時間を設定することを特徴とする、請求項１２に記載のモニタリング装置。
【請求項２１】
前記制御部は、
変化が検出された位置、領域又は座標に対応するモニタリング時間を増加させることを特徴とする、請求項２０に記載のモニタリング装置。
【請求項２２】
前記制御部は、
位置、領域又は座標別でモニタリング時間を累積して計算し、モニタリングを行わない間には累積したモニタリング時間が最も長い位置、領域又は座標に向けるように前記カメラの方向を設定することを特徴とする、請求項２０に記載のモニタリング装置。
【請求項２３】
センサー装置と接続可能な周辺をモニタリングすることができるモニタリング装置のためのチップセットであって、
前記チップセットは、
センサー装置を検索し、前記モニタリング装置の周辺に対するイメージを獲得し、
前記イメージを用いて検索により発見したセンサー装置に対応する位置情報を登録し、
前記発見したセンサー装置で発生するイベントに対応して行われる動作を含むモニタリング情報を登録することを特徴とする、チップセット。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、モニタリング装置を用いたセンサーの位置及びイベント動作のマッピング方法、並びに装置に関し、より具体的にはモニタリング装置で撮影したイメージを用いてイベント発生時のモニタリング位置及びモニタリング動作を入力する方法及び装置に関する。
【背景技術】
【０００２】
センサーが予め設定された入力を検出すると、前記入力が伝達されたモニタリング装置が予め定められた動作を行う。例えば、モニタリング装置は前記センサーに係る位置をモニタリングする。センサーが前記予め設定された入力を検出することをイベント発生と表現する。この時、ユーザは前記モニタリングされる位置を予め設定するために数字などを含む座標を直接入力する。
【発明の概要】
【発明が解決しようとする課題】
【０００３】
別途のユーザインターフェースを備える装置無く、イベント発生による動作を設定することができる方法及び装置を提供する。一つのセンサーが多くのイベント発生をサポートする場合、モニタリング装置で獲得したイメージを用いてイベントを設定する方法及び装置を提供する。モニタリング装置で獲得したイメージを用いてモニタリング動作及びモニタリング装置の初期位置を設定する方法及び装置を提供する。
【課題を解決するための手段】
【０００４】
本発明の一実施形態によるセンサー装置と接続可能なモニタリング装置が周辺をモニタリングする方法が提供される。前記方法は、センサー装置を検索する段階と、前記モニタリング装置の周辺に対するイメージを獲得する段階と、前記イメージを用いて検索により発見したセンサー装置に対応する位置情報を登録する段階と、及び前記発見したセンサー装置で発生するイベントに対応して行われる動作を含むモニタリング情報を登録する段階と、を含むことを特徴とする。
【０００５】
本発明の一実施形態によるセンサー装置と接続可能なモニタリング装置が提供される。前記モニタリング装置は、イメージを獲得するカメラと、有線又は無線で信号を送受信する通信部と、情報を登録する記憶部と、及びセンサー装置を検索し、前記モニタリング装置の周辺に対するイメージを獲得し、前記イメージを用いて検索により発見したセンサー装置に対応する位置情報を登録し、前記発見したセンサー装置で発生するイベントに対応して行われる動作を含むモニタリング情報を登録する制御部と、を含むことを特徴とする。
【０００６】
本発明の一実施形態によるセンサー装置と接続可能な周辺をモニタリングすることができるモニタリング装置のためのチップセットが提供される。前記チップセットは、センサー装置を検索し、前記モニタリング装置の周辺に対するイメージを獲得し、前記イメージを用いて検索により発見したセンサー装置に対応する位置情報を登録し、前記発見したセンサー装置で発生するイベントに対応して行われる動作を含むモニタリング情報を登録することを特徴とする。
【０００７】
本願発明の前記及び他の目的、特徴及び有利な効果が次の詳細な説明及びそれに伴う図面と組み合わせてより明確に開示されるだろう。
【図面の簡単な説明】
【０００８】
【図１】本発明の一実施形態によるモニタリング装置及びセンサー装置を含むシステムの構成を示す図面である。
【図２】本発明の一実施形態によるセンサー装置と接続可能なモニタリング装置が周辺をモニタリングする動作を示す図面である。
【図３】本発明の一実施形態によるイメージに基づいて位置情報を登録する動作を示す図面である。
【図４】本発明の一実施形態による領域に基づいて位置情報を登録する動作を示す図面である。
【図５】本発明の一実施形態による予め設定された形状に基づいて位置情報を登録する動作を示す図面である。
【図６】本発明の一実施形態によるモニタリング装置の構成を示す図面である。
【図７】本発明の一実施形態によるモニタリング装置の入力部及び表示部が別途のタッチスクリーンに具現された場合の情報伝達を示す図面である。
【図８】本発明の一実施形態によるセンサー位置及びイベントの自動登録過程を示す図面である。
【図９Ａ】モニタリング装置の周辺に対するイメージを示す図面である。
【図９Ｂ】モニタリング装置の周辺に対するイメージを示す図面である。
【図１０】本発明の一実施形態による多重イベントの登録過程を示す図面である。
【図１１】本発明の一実施形態によるセンサー装置がサポートするイベントリストを表示したことを示す図面である。
【図１２】本発明の一実施形態による表示されたイメージの領域をイベントと連関させる入力を示す図面である。
【図１３】本発明の一実施形態による単一イベントに対して複数の位置がマッチングされた場合の時間調整を示す図面である。
【図１４】本発明の一実施形態に係るイメージ比較によるモニタリング時間調整を示している図面である。
【発明を実施するための形態】
【０００９】
本明細書及び請求範囲において“含む”は他の要素又は動作を排除するという意味ではない。本明細書及び請求範囲において単数名詞は特に言及されない限り複数名詞を含むことができる。例えば、“センサー装置”は一つのセンサーを示すこともでき、２以上のセンサーを含むこともできる。さらに、“イメージ”は一つ以上のイメージを指すか、又は一つ以上のビデオ画像を含むこともできる。本明細書及び請求範囲において構成要素に対する接尾辞“部”は明細書作成の容易のために付与されたり混用されるもので、その自体で互いに区別される意味又は役目を有することではない。
【００１０】
本明細書及び請求範囲において、“イベント”はセンサー装置が予め設定した範囲の入力を検出することを意味する。本発明の一実施形態によれば、温度センサーを含むセンサー装置が４５℃以上の温度を測定することをイベント発生と定義することができる。
【００１１】
本明細書及び請求範囲において、“位置情報”はモニタリング装置を基準とする相対的な位置、座標又は領域を含むことができる。座標はモニタリング装置のカメラのＰａｎ、Ｔｉｌｔ及びＺｏｏｍ形態と表示することができる。領域はパノラマイメージの一部区間に該当することができる。位置は前記座標又は領域を含むことができる。
【００１２】
本明細書及び請求範囲において、“モニタリング情報”はセンサー装置がイベントを発生するための条件及び前記イベント発生時にモニタリング装置が行う動作を含むことができる。
【００１３】
以下、本発明の多様な実施形態を添付した図面を参照して説明する。以下の説明では本発明の実施形態による動作を理解するのに必要な部分だけが説明され、その以外の部分の説明は本発明の要旨を明瞭にするために簡略化されたり省略される。ここで本発明の特徴が上述した例示に限定されるものではなく、以下で説明する各構成の形態変更や、追加的な機能までも含むことができる。図面において、一部要素のサイズは例示のために拡大されることができ、サイズに比例して示すことではない。
【００１４】
図１は、本発明の一実施形態によるモニタリング装置及びセンサー装置を含むシステムの構成を示す図面である。
【００１５】
図１を参照すれば、モニタリング装置１１０はカメラを含み、周辺を回転しながら撮影することができる。これにより、モニタリング装置１１０は周辺に位置したセンサー装置１２０、１３０、１４０、１５０、１６０に対するイメージを獲得することができる。モニタリング装置１１０が室内にある場合、天井についていることが一般的であるがこれに限定されるものではない。図１でセンサー装置１２０、１３０、１４０、１５０、１６０が５個であることで示したがここに限定されるものではない。本願発明の一実施形態によれば、モニタリング装置１１０は周辺のセンサー装置１２０、１３０、１４０、１５０、１６０により放出される光源情報(例えば、発光ダイオード(ＬＥＤｓ:ｌｉｇｈｔ ｅｍｉｔｔｉｎｇ ｄｉｏｄｅｓ))に基づいて周辺のセンサー装置１２０、１３０、１４０、１５０、１６０の装置情報を獲得することができる。
【００１６】
センサー装置１２０、１３０、１４０、１５０、１６０は、例えば、地磁気センサー、温度センサー、気圧センサー、近接センサー、照度センサー、ＧＰＳ(Ｇｌｏｂａｌ Ｐｏｓｉｔｉｏｎｉｎｇ Ｓｙｓｔｅｍ)、加速度センサー、モーションセンサー、角速度センサー、速度センサー、重力センサー、勾配センサー、ジャイロセンサーなどを含むことができ、前記挙げられた例示に限定されるものではない。センサー装置１２０、１３０、１４０、１５０、１６０は自分の装置情報を含む識別子を無線通信又は光源情報表示(例えば、ＬＥＤ)により外部装置に伝達することができる。
【００１７】
一方、モニタリング装置１１０は、入力部及び表示部を有する別途の(ｓｅｐａｒａｔｅ)端末１７０を含むことができる。端末１７０は、一つ又はそれ以上のタッチスクリーンから構成されたディスプレーを備え、コンテンツ(例えば、イメージ)を表示可能となるように構成される電子装置に該当することができる。例えば、タブレット(Ｔａｂｌｅｔ)個人コンピューター(Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ:ＰＣ)、携帯用マルチメディア再生装置(Ｐｏｒｔａｂｌｅ Ｍｕｌｔｉｍｅｄｉａ Ｐｌａｙｅｒ:ＰＭＰ)、個人用携帯端末機(Ｐｅｒｓｏｎａｌ Ｄｉｇｉｔａｌ Ａｓｓｉｓｔａｎｔ:ＰＤＡ)、スマートフォン(Ｓｍａｒｔ Ｐｈｏｎｅ)、携帯電話又はデジタル額縁に該当することができる。また、端末１７０はモニタリング装置１１０の専用装置(ｄｅｄｉｃａｔｅｄ ｄｅｖｉｃｅ)に該当することができる。端末１７０はモニタリング装置１１０と有線又は無線で接続されてデータを送受信することができる。図１でモニタリング装置１１０が別途の端末１７０を含むことに示したがここに限定されるものではなく、一つの物理的装置がカメラ、入力部及び表示部をいずれも含むことで具現することもできる。
【００１８】
図２は、本発明の一実施形態によるセンサー装置と接続可能なモニタリング装置が周辺をモニタリングする動作を示す図面である。
【００１９】
図２を参照すれば、段階２１０でモニタリング装置は周辺センサー装置を検索する。前記検索には前記センサー装置から放出する信号又は光を用いることができる。例えば、モニタリング装置は、センサー装置との有無線通信又はセンサー装置から放出される光源情報に基づいてセンサー装置の存在を認識して前記センサー装置の装置情報を獲得することができる。これと異なり外部サーバーから周辺センサー装置に対する情報が伝達されることも可能である。
【００２０】
段階２２０でモニタリング装置はカメラを用いて周辺に対するイメージを獲得する。モニタリング装置が一つのカメラを有する場合、前記カメラが周辺を回転して３６０°撮影することができる。モニタリング装置が回転儀中心が同一の３つのカメラを有する場合、前記カメラが周辺を回転してそれぞれ１２０°ずつ撮影することができる。モニタリング装置が回転の中心が互いに異なる複数のカメラを有する場合、それぞれのカメラが周辺を回転して３６０°撮影することができる。前記撮影は静止イメージの撮影又はビデオ画像撮影のうちの少なくとも一つに該当することができる。
【００２１】
段階２３０で前記イメージを用いて検索により発見したセンサー装置に対応する位置情報を登録する。前記登録された位置情報は、前記発見したセンサー装置によりイベントが発生すると、前記モニタリング装置がモニタリングを行う位置に対する情報を含むことができる。
【００２２】
図３は、本発明の一実施形態によるイメージに基づいて位置情報を登録する動作を示す図面である。
【００２３】
図３を参照すれば、段階３１０でモニタリング装置の表示部に前記獲得したイメージを表示する。イメージの例示を図９Ａに図示している。図９Ａは家でモニタリング装置のカメラが玄関門、居間及び台所に対して獲得したイメージを表示する。図９Ａではイメージを多数の領域に分けて表示したがここに限定されるものではない。一方、図９ＡではカメラのＰａｎを基準で領域を区分したが、カメラのＴｉｌｔを基準で領域を区分することも可能である。
【００２４】
図３の段階３２０で前記表示されたイメージ内の一つ以上の地点を選択する入力を検出する。例えば、モニタリング装置の表示部がタッチスクリーンの場合、図９Ａで３０５をタッチする入力を検出する。
【００２５】
図３の段階３３０で前記選択された地点の座標を前記センサー装置に対応する位置情報として登録する。前記座標はモニタリング装置のカメラの方向に該当することができる。例えば、前記座標はＰａｎ=１２０°、Ｔｉｌｔ=１０°、Ｚｏｏｍ=１に該当することができる。
【００２６】
図４は、本発明の一実施形態による領域に基づいて位置情報を登録する動作を示す図面である。
【００２７】
図４を参照すれば、段階４１０で前記獲得したイメージを２以上の領域に分けて表示する。イメージの例示を図９Ａに示している。
【００２８】
段階４２０で前記表示された領域中の一つ以上の領域を選択する入力を検出する。例えば、図９Ａで領域４０５を選択する入力又は領域４０５及び領域４０６を選択する入力を検出することができる。
【００２９】
段階４３０で前記選択された領域に対応する領域識別子を前記センサー装置に対応する位置情報として登録する。図９Ａでそれぞれの領域は固有の領域識別子を有することができる。例えば、検索により発見したセンサー装置のセンサー識別子がＳ１であり、領域４０５の領域識別子がＬ１と仮定すれば、モニタリング装置はＬ１をＳ１の位置情報として登録することができる。
【００３０】
図５は、本発明の一実施形態による予め設定された形状に基づいて位置情報を登録する動作を示す図面である。
【００３１】
図５を参照すれば、段階５１０で前記獲得したイメージに含まれた予め設定された形状に基づいて前記センサー装置に対応する位置又は座標を決定する。前記予め設定された形状は例えば、ヒトのモーション又は外部装置のＬＥＤを介して放出される特定模様の図形に該当することができる。図９Ｂでヒトのモーションの例示を示している。獲得したイメージに含まれたヒトの手が指す方向又は前記ヒトの顔の角度を通じてセンサー装置に対応される位置又は座標を決定することができる。図５の段階５２０で前記決定した位置又は座標を前記センサー装置に対応する位置情報として登録する。
【００３２】
図３乃至図５で位置情報を登録する動作の多くの実施形態に対して説明した。モニタリング装置は位置登録を登録した後、図２の段階２４０でモニタリング情報を登録する。前記モニタリング情報は発見したセンサー装置で発生するイベントに対応して行われる動作を含むことができる。この時、前記登録された位置情報が複数の位置、領域又は座標を含む場合、前記位置、領域又は座標別でモニタリング時間を設定してモニタリング情報に含ませることができる。図５の場合、予め設定された形状に含まれたモーション(ｍｏｔｉｏｎ)、色又はパターンのうちの少なくとも一つに基づいて動作を決定し、前記決定された動作を登録することができる。
【００３３】
前記説明で位置情報を登録した後、モニタリング情報を登録することで記載しているがここに限定されるものではなく、モニタリング情報を登録した後、位置情報を登録したりモニタリング情報と位置情報を同時に登録することもできる。モニタリング装置は、位置情報とモニタリング情報を登録した後、図２の段階２５０で検索により発見したセンサー装置によるイベント発生を検出するか判断する。
【００３４】
イベントの発生を検出すると、段階２６０で登録された位置情報を用いてモニタリングを行う。モニタリング実行中に周期的に各位置(例えば、領域又は座標)に対してイメージを獲得することができ、イメージの変化が検出された位置(例えば、領域又は座標)に対しては対応するモニタリング時間を増加させることができる。
【００３５】
モニタリング装置は、前記モニタリング時間を位置(例えば、領域又は座標)別で累積して計算することができる。モニタリング装置はモニタリングを実行しない間には、累積したモニタリング時間が最も長い位置(例えば、領域又は座標)に向けるようにモニタリング装置のカメラの方向を設定することができる。
【００３６】
図６は、本発明の一実施形態によるモニタリング装置の構成を示す図面である。
【００３７】
図６を参照すれば、モニタリング装置はカメラ６１０、通信部６２０、記憶部６３０、入力部６４０、表示部６５０及び制御部６６０の構成を含むことができる。
【００３８】
カメラ６１０は、モニタリング装置の周辺のイメージを獲得することができる。前記イメージは一つ以上の静止イメージ又はビデオ画像に該当することができる。
【００３９】
通信部６２０は、有線又は無線で信号を送受信することができる。通信部６２０は信号又は光の受信によってセンサー装置を検索することができる。
記憶部６３０は、モニタリング装置が行う機能に該当する応用プログラムとモニタリング装置で機能が行われる中に発生される情報などを登録することができる。
【００４０】
入力部６４０は、ユーザによる入力を検出して制御部６６０に伝達する。表示部６５０はイメージの全部又は一部を表示することができる。表示部６５０は、イメージの一部だけ表示する場合、スクロールバーを共に表示することができる。入力部６４０は、表示部６５０と結合してタッチスクリーンで形成されるか、一般的なキーパッドで形成されることができる。また、入力部６４０は機能を行うために選択される機能キー、ソプトキーなどから構成されることができる。モニタリング装置は入力部６４０と表示部６５０を別途の端末の形態で保有することができ、入力部６４０と表示部６５０はモニタリング装置のその他の部と有線又は無線で信号を送受信することができる。
【００４１】
制御部６６０は、端末機を構成する構成の全般的な状態及び動作を制御する。制御部６６０は情報登録及びモニタリング実行のためにイベント管理、装置制御、イメージ比較、ストリーミング及びキャプチャなどの機能を行うことができる。
【００４２】
図６でカメラ６１０、通信部６２０、記憶部６３０、入力部６４０、表示部６５０及び制御部６６０が別途のブロックから構成され、各ブロックが相違する機能を行うことで記述したがこれは記述上の便宜のためのもので、必ずこのように各機能が区分されることではない。
【００４３】
例えば、制御部６６０はセンサー装置を検索し、前記モニタリング装置の周辺に対するイメージを獲得し、前記イメージを用いて検索により発見したセンサー装置に対応する位置情報を登録し、前記発見したセンサー装置で発生するイベントに対応して行われる動作を含むモニタリング情報を登録し、前記発見したセンサー装置によるイベントの発生を検出すると、前記登録された位置情報を用いてモニタリングを行うことができる。前記発見したセンサー装置に対応する位置情報は、前記発見したセンサー装置によるイベントの発生によって前記モニタリング装置がモニタリングする位置に対する情報を含むことができる。
【００４４】
さらに、制御部６６０は、前記獲得したイメージを表示し、前記表示されたイメージに含まれた一つ以上の地点を選択する入力を検出し、前記選択された地点の座標を前記センサー装置に対応する位置情報として登録することができる。また、制御部６６０は前記獲得したイメージを２以上の領域に分けて表示し、前記表示された領域中の一つ以上の領域を選択する入力を検出し、前記選択された領域に対応する領域識別子を前記センサー装置に対応する位置情報として登録することができる。また、制御部６６０は獲得したイメージに含まれた予め設定された形状に基づいて前記センサー装置に対応する位置又は座標を決定し、前記位置又は座標を前記センサー装置に対応する位置情報として登録することができる。この場合、制御部６６０は前記予め設定された形状に含まれたモーション(ｍｏｔｉｏｎ)、色又はパターンうちの少なくとも一つに基づいて前記センサー装置で発生するイベントに対応して行われる動作を決定し、前記決定された動作を登録することができる。
【００４５】
図７は、本発明の一実施形態によるモニタリング装置の入力部及び表示部が別途の(ｓｅｐａｒａｔｅ)タッチスクリーンに具現された場合の情報伝達を示す図面である。
【００４６】
図７を参考すれば、制御部７１０はタッチスクリーン７２０と有線又は無線で接続されて信号を相互間に送受信する。
【００４７】
７３０段階で制御部７１０はカメラを介して獲得したイメージ及び通信部を介して獲得したセンサー装置の装置情報をタッチスクリーン７２０に伝達する。前記イメージはモニタリング装置の周辺を３６０°全体角度で撮影したパノラマイメージに該当することができる。
【００４８】
７４０段階でタッチスクリーン７２０は前記伝達されたイメージ及び装置情報をユーザが閲覧することができるように表示することができる。
【００４９】
７５０段階でユーザは表示されたイメージ及び装置情報に基づいてセンサー装置に対応する位置情報及びモニタリング情報を入力することができる。前記モニタリング情報はセンサー装置で発生するイベントに対応して行われる動作を含むことができる。
【００５０】
７６０段階でタッチスクリーン７２０は入力された位置情報及びモニタリング情報を制御部７１０に伝達することができる。
【００５１】
図８は、本発明の一実施形態によるセンサー位置及びイベントの自動登録過程を示す図面である。
【００５２】
図８を参照すれば、８１０段階でユーザがモニタリング装置を見ながら特定モーションを取ることができる。又はセンサー装置が予め設定された色の光を発生させたり予め設定されたブリンキングパターン(ｂｌｉｎｋｉｎｇ ｐａｔｔｅｒｎ)で光を発生させることができる。
【００５３】
８２０段階でモニタリング装置がセンサー装置を検索する。検索過程でモニタリング装置は、センサー装置が送信した信号又は光に基づいて前記センサー装置の装置情報(センサー識別子含み)を獲得することができる。
【００５４】
８３０段階でモニタリング装置が周辺を撮影してイメージ(イメージ又はビデオ画像)を獲得する。モニタリング装置のカメラが１個である場合、前記カメラが３６０°をいずれも撮影することができる。前記撮影によって獲得したイメージ又はビデオ画像は他のモニタリング装置と共有することができる。一方、モニタリング装置は複数のカメラを保有することができ、この場合、各カメラが分担して周辺を撮影することができる。例えば、同じ原点を中心に回転するカメラが２台である場合、それぞれ１８０°ずつ撮影することができる。
【００５５】
図９Ａ及び図９Ｂは、モニタリング装置の周辺に対するイメージを示す図面である。
【００５６】
図９Ａを参照すれば、モニタリング装置のカメラによって撮影されたイメージは２以上の領域に分けることができる。図９Ａでは便宜上、９個の領域に分けて図示する。
【００５７】
図９Ｂを参照すれば、モニタリング装置のカメラによって撮影されたイメージは予め設定された形状を含むことができる。図９Ｂで、前記予め設定された形状の例示に該当するヒトのモーションを示している。便宜上、それぞれのモーションをＭ１、Ｍ２、Ｍ３と定義する。
【００５８】
図８の８４０段階でモニタリング装置は獲得したイメージに含まれた形状とマッチングされる形状が記憶部に記憶されているか否かを決定する。前記形状はヒトの形状、モーション、表情、色光又はブリンキングパターンを含むことができるが、ここに限定されるものではない。マッチングされる形状が記憶部に記憶されている場合、８５０段階へ進行する。
【００５９】
８５０段階でモニタリング装置は前記マッチングされる形状に対応される新しい情報登録がリクエストされるか判断する。情報登録がリクエストされると８６０段階へ進行する。一方、図８と異なり、新しい情報登録のリクエストがなくてもマッチングされる形状が記憶部に記憶されていると８６０段階へ進行することで具現することもでき、この場合、８６０段階で決定される情報がユーザの入力無しに自動で決定及び登録されることができる。
【００６０】
８６０段階でセンサー装置の装置情報、位置情報又はモニタリング情報を決定する。前記装置情報は検索に応答したセンサー装置のｕｎｉｖｅｒｓａｌｌｙ  ｕｎｉｑｕｅ ｉｄｅｎｔｉｆｉｅｒ(ＵＵＩＤ)又はｉｎｔｅｒｎｅｔ  ｐｒｏｔｏｃｏｌ(ＩＰ) ａｄｄｒｅｓｓに該当することができる。前記位置情報はカメラのＰａｎ、ｔｉｌｔ又はＺｏｏｍ に対する情報を含むことができる。前記位置情報はユーザの顔の角度を考慮して決定されることができる。前記モニタリング情報はユーザのモーションを考慮して決定することができる。
【００６１】
表１は、モニタリング情報に含まれる動作及び位置情報の対応関係を示す。
【００６２】
【表１】
2017526263.tif 000003
【００６３】
前記表１によれば、形状(ヒトのモーション)、センサー識別子、モニタリング情報に含まれる動作、カメラの方向(ｐａｎ、ｔｉｌｔ、ｚｏｏｍ)間のマッチング関係を示している。表１の“キャプチャ”は、モニタリング実行の時に静止イメージを獲得することを意味し、表１の“ストリーミング”はモニタリング実行の時に獲得したビデオ画像をモニタリング装置の表示部にディスプレーすることを意味する。本発明の一実施形態によれば、モニタリング装置の記憶部は形状、動作及びカメラの方向をマッチングして記憶することができ、獲得したイメージに含まれた形状が記憶部に記憶された形状とマッチングされると、前記形状とマッチングされる動作及びカメラの方向に基づいてセンサーに対応される位置情報又はモニタリング情報を決定することができる。
【００６４】
図１０は、本発明の一実施形態による多重イベントの登録過程を示す図面である。
【００６５】
図１０を参照すれば、１００５段階でモニタリング装置がセンサー装置を検索し、これと別に１０１０段階でモニタリング装置が周辺を撮影する。１００５段階と１０１０段階は同時に進行されることもできる。
【００６６】
１０１５段階でモニタリング装置は検索に応答したセンサー装置の装置情報を登録することができる。前記装置情報は、例えば検索に応答したセンサー装置のＵＵＩＤ又はＩＰ  ａｄｄｒｅｓｓに該当することができる。
【００６７】
１０２０段階で前記モニタリング装置は検索に応答したセンサー装置が多重イベントをサポートするかを判断することができる。検索に応答したセンサー装置が多重イベントをサポートすることで判断すると、１０２５段階へ進行し、検索に応答したセンサー装置がサポートするイベントリストを表示することができる。
【００６８】
図１１は、本発明の一実施形態によるセンサー装置がサポートするイベントリストを表示したことを示した図面である。
【００６９】
図１１を参照すれば、３個のイベントを含むリストを表示している。図１１ではモーション(ｍｏｔｉｏｎ)イベント、ガスイベント及び温度イベントを含むリストを表示しており、リストの背景として１０１０段階で撮影されたイメージを表示している。モーションイベントは外部人の侵入を検出することで、ガスイベントはガス漏出を検出することで、温度イベントは火事発生を検出することである。
【００７０】
１０３０段階で表示されたリストでイベントを選択する入力を検出することができる。例えば、図１１でｌｏｎｇ ｐｒｅｓｓ１１１０がここに該当することができる。本発明の一実施形態によれば、イベントが選択されると、リストが消えてから図１０の１０１０段階で撮影されたイメージを表示するように具現することができる。この時、表示されるイメージは１０１０段階で撮影されたイメージの全体であることもでき、表示部のサイズなどを考慮して撮影されたイメージの一部であることもできる。１０１０段階で撮影されたイメージの一部だけ表示する場合、スクロールバーを表示することができ、前記スクロールバーを用いて前記イメージの残り部分を表示することができる。１０３５段階で前記表示されたイメージをイベントと連関させる入力を検出することができる。
【００７１】
図１２は、本発明の一実施形態による表示されたイメージの領域をイベントと連関させる入力を示した図面である。
【００７２】
図１２を参照すれば、表示されたイメージの領域をイベントと連関させる入力は表示されたイメージの望む領域で前記ｌｏｎｇ ｐｒｅｓｓをｒｅｌｅａｓｅすることに該当することができる。一方、表示されたイメージの領域をイベントと連関させる入力が前記ｒｅｌｅａｓｅに限定されるものではない。例えば、図１０の１０３０段階及び１０３５段階の入力がいずれもｓｈｏｒｔ  ｐｒｅｓｓ又はｃｌｉｃｋに該当することができる。図１２ではモーション(Ｍ)イベントをイメージ上の領域１と連関させ、温度(Ｔ)イベントをイメージ上の領域２と連関させ、温度(Ｔ)イベント及びガス(Ｇ)イベントをイメージ上の領域３と連関させたことを示した。この時、温度(Ｔ)イベントは２ケ所(例えば、居間及び台所)に連関されているので温度イベントが発生すると、領域２及び領域３に対していずれもモニタリングが行われることができる。
【００７３】
図１０の１０４０段階では前記イメージ上でイベントと連関させた領域に基づいてセンサー装置の位置情報を登録する。前記位置情報はモニタリング装置のカメラのＰａｎ、ｔｉｌｔ又はＺｏｏｍに対する情報を含むことができる。
【００７４】
１０４５段階でイベント情報又は位置情報を追加と指定するかを決定する。追加指定が入力されると１０３０段階へ進行し、追加指定を繰り返すことによって多数のイベント情報又は位置情報を指定することができる。この時、イベント情報又は位置情報のうちで一つだけ繰り返して指定することができ、この場合、複数のイベント及び単一位置がマッチングされたり単一イベント及び複数の位置がマッチングされることができる。
【００７５】
図１３は、本発明の一実施形態による単一イベントに対して複数の位置がマッチングされた場合の時間調整を示す図面である。
【００７６】
図１３を参照すれば、１３０５段階でセンサー装置でイベントが発生すると、モニタリング装置による周辺モニタリングが行われる。この時、前記モニタリングが複数の位置に対して行われる場合には一定時間ごとにモニタリングされる位置が変更されるようにできる。また、モニタリングされるそれぞれの位置に対してモニタリングが再開又は終了される時ごとに撮影をしてイメージを獲得して前記イメージを記憶することができる。前記イメージはビデオ画像を含むことができる。
【００７７】
１３１０段階でそれぞれの位置に対して撮影したイメージを以前周期で撮影したイメージと比較して変更されたかを判断することができる。変更されたと判断された位置がある場合、１３１５段階で当該位置に対するモニタリング時間を増加させることができる。これと異なり変更されないと判断された位置がある場合、１３２０段階で当該位置に対するモニタリング時間を減少させることができる。
【００７８】
１３２５段階で増加又は減少されたモニタリング時間に基づいてモニタリングを行う。一方、１３１５段階及び１３２０段階と異なり、モニタリング時間を維持することもできる。また、モニタリング時間の変更基準にイメージが変更された位置の個数を含ませることもできる。例えば、２個の位置をモニタリングする場合において、２個の位置のいずれもイメージが変更された場合には２個の位置いずれもモニタリング時間をそのまま維持するとかモニタリング時間をむしろ減少させることもできる。またユーザが予め設定した位置のモニタリング時間だけ増加させることもできる。一方、モニタリング時間は上限閾値(Ｍａｘｔｈｒｅｓｈｏｌｄ)及び下限閾値(Ｍｉｎｔｈｒｅｓｈｏｌｄ)を有するようにし、上限閾値と下限閾値の間に限り変更されるように設定することができる。
【００７９】
図１４は、本発明の一実施形態によるイメージ比較によるモニタリング時間調整を示している。
【００８０】
図１４を参照すれば、モニタリング装置は１４１０でイメージが変更されたことを発見した後、Ｌ１に対するモニタリング時間を１０秒から２０秒に増加させた。一方、イメージが変更されないＬ２に対するモニタリング時間は１０秒から５秒に減少させた。
【００８１】
図１３の１３１５段階又は１３２０段階でモニタリング時間を変更すると、１３２５段階で変更されたモニタリング時間を適用してモニタリングを行う。具現例によって、イメージが変更されてもモニタリング時間を変更せずモニタリングを行うこともできる。
【００８２】
モニタリング時間と別にイベント動作時間が設定されることができる。即ち、イベント発生後、イベント動作時間が経過するまでモニタリング時間が有効であるように設定することができる。例えば、２個の位置に対してそれぞれモニタリング時間を１０秒と設定してイベント動作時間を１００秒と設定した場合、モニタリング時間の変化がない場合、２個の場所に対してそれぞれ５０秒ずつモニタリングが行われた後、モニタリングが終了される。
【００８３】
表２は、モニタリング頻度を考慮してカメラの初期方向を決定することに係る図表である。
【００８４】
【表２】
2017526263.tif 000004
【００８５】
表２を参考すれば、位置Ｌ１にはセンサーＳ１及びＳ２が対応されている。モニタリング装置はモニタリングを行わないうちに、位置別のモニタリング頻度が４０.０％として最も高いＬ１を向けるようにカメラの方向を設定することができる。これにより、イベントが発生した時にモニタリングを行う確率が最も高い方向を最初に向かっているようにすることで、イベントに対応してモニタリングを行う初期時間を減らすことができる。表２ではモニタリング頻度を基準でカメラの初期方向を判断したが、これと異なり累積したモニタリング時間を基準と判断することができる。例えば、累積したモニタリング時間が最も長い位置に向けるようにカメラの方向を設定することができる。
【００８６】
本発明の詳細な説明及びそれと連関された図面に特定実施形態が開示されているが、これらは本発明を理解することができるように表現されたもので、本発明はこれら説明により制限されるものではない。したがって、請求項及びそれらの変形により定義されることができる本発明のすべての変形例は本願発明の範囲に含まれることは理解されるべきである。
【符号の説明】
【００８７】
６１０  カメラ
６２０  通信部
６３０  記憶部
６４０  入力部
６５０  表示部
６６０  制御部
【図１】
2017526263.tif 000005
【図２】
2017526263.tif 000006
【図３】
2017526263.tif 000007
【図４】
2017526263.tif 000008
【図５】
2017526263.tif 000009
【図６】
2017526263.tif 000010
【図７】
2017526263.tif 000011
【図８】
2017526263.tif 000012
【図９ａ】
2017526263.tif 000013
【図９ｂ】
2017526263.tif 000014
【図１０】
2017526263.tif 000015
【図１１】
2017526263.tif 000016
【図１２】
2017526263.tif 000017
【図１３】
2017526263.tif 000018
【図１４】
2017526263.tif 000019
【国際調査報告】
2017526263.tif 000020
2017526263.tif 000021
2017526263.tif 000022