(57)【要約】【課題】個人情報保護機能を含んだモニタリングシステム及びその方法を提供する。【解決手段】本発明は、個人情報保護機能を含んだモニタリングシステム及びその方法を開示する。即ち、本発明はプライバシーモードが設定されたモニタリング領域内で客体の動きが感知される場合、サーバーで前記感知された客体の動きに対するメタデータをモニタリングセンターに提供し、前記モニタリングセンターではモニタリング領域と関連した映像の代わりに予め設定された背景の上にメタデータに対応するアバターを表示することによって、個人情報保護を強化し、全体システムに対する信頼性を高めることができる。【選択図】図１
2019041383.tif 000002
【特許請求の範囲】
【請求項１】
個人情報保護機能を含んだモニタリング方法において、
サーバーにより、映像獲得装置から転送されるモニタリング領域と関連した映像を受信する時、前記モニタリング領域に対するプライバシーモードが設定された状態か否かを判断するステップと、
前記判断結果、前記モニタリング領域に対するプライバシーモードが設定された状態の時、前記サーバーにより、前記映像内で客体の動きが感知されるか否かを識別するステップと、
前記識別結果、前記映像内で客体の動きが感知される時、前記サーバーにより、前記映像内で客体の動きと関連したメタデータをモニタリングセンターに転送するステップと、
前記モニタリングセンターにより、前記メタデータに基づいて予め設定された背景色または背景イメージ上に前記メタデータに対応する１つ以上のアバターを表示するステップと、
前記モニタリングセンターにより、前記メタデータに基づいて前記モニタリング領域に対する映像確認のための映像受信要請情報を端末に転送するステップとを含む
個人情報保護機能を含んだモニタリング方法。
【請求項２】
前記映像内で客体の動きと関連したメタデータは、
ディップランニングに従う停止映像分析を通じて前記映像内での客体の数、前記映像内での客体の位置情報、前記客体の種類、前記客体の形状、前記客体の色相、前記客体が持っている物の種類や色相、及び前記停止映像分析に従う分析情報を基盤とする状況認知情報のうち、少なくとも１つを含む
ことを特徴とする請求項１に記載の個人情報保護機能を含んだモニタリング方法。
【請求項３】
前記端末により、前記映像受信要請情報に基づいて前記サーバーと連動して前記映像獲得装置を通じて獲得された前記モニタリング領域に対する映像を確認するステップと、
前記端末により、プライバシーモードの設定を一時停止するためのプライバシーモードの一時停止要請情報を前記サーバーに転送するステップと、
前記サーバーにより、前記プライバシーモードの一時停止要請情報に基づいて前記モニタリング領域と関連した映像を前記モニタリングセンターに転送するステップと、
前記モニタリングセンターにより、前記サーバーから転送される前記モニタリング領域と関連した映像を表示するステップと、
前記モニタリングセンターにより、前記モニタリング領域と関連した映像内で侵入者があると判断される時、予め登録された警察署サーバーに応急状況発生に対する情報を提供するステップとをさらに含む
ことを特徴とする、請求項１に記載の個人情報保護機能を含んだモニタリング方法。
【請求項４】
個人情報保護機能を含んだモニタリングシステムにおいて、
モニタリング領域と関連した映像を獲得し、前記獲得された映像を転送する映像獲得装置と、
前記映像獲得装置から転送される映像を受信する時、前記モニタリング領域に対するプライバシーモードが設定された状態か否かを判断し、前記モニタリング領域に対するプライバシーモードが設定された状態で、前記映像内で客体の動きが感知される時、前記映像内で客体の動きと関連したメタデータを転送するサーバーと、
前記メタデータに基づいて予め設定された背景色または背景イメージ上に前記メタデータに対応する１つ以上のアバターを表示し、前記メタデータに基づいて前記モニタリング領域に対する映像確認のための映像受信要請情報を転送するモニタリングセンターと、
前記映像受信要請情報に基づいて前記サーバーと連動して前記映像獲得装置を通じて獲得された前記モニタリング領域に対する映像を確認し、プライバシーモードの設定を一時停止するためのプライバシーモードの一時停止要請情報を前記サーバーに転送する端末とを含む
個人情報保護機能を含んだモニタリングシステム。
【請求項５】
前記サーバーは、
前記プライバシーモードの一時停止要請情報に基づいて前記モニタリング領域と関連した映像を前記モニタリングセンターに転送し、
前記モニタリングセンターは、
前記サーバーから転送される前記モニタリング領域と関連した映像を表示し、前記モニタリング領域と関連した映像内で侵入者があると判断される時、予め登録された警察署サーバーに応急状況発生に対する情報を提供する
ことを特徴とする請求項４に記載の個人情報保護機能を含んだモニタリングシステム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は個人情報保護機能を含んだモニタリングシステム及びその方法に関し、特にプライバシーモードが設定されたモニタリング領域内で客体の動きが感知される場合、サーバーで前記感知された客体の動きに対するメタデータをモニタリングセンターに提供し、前記モニタリングセンターでメタデータに基づいて端末に該当モニタリング領域に対するリアルタイム映像受信のための要請を転送し、前記端末で前記モニタリングセンターから転送される要請に従って警察署などに申告するか、または前記サーバーにプライバシーモードの一時停止を要請する個人情報保護機能を含んだモニタリングシステム及びその方法に関する。
【背景技術】
【０００２】
治安や安全を目的としてＣＣＴＶ／ＤＶＲ映像監視システムが補給及び設置されている。
【０００３】
このようなＣＣＴＶ／ＤＶＲ映像監視システムは、個人情報保護のためにプライバシーモード（ｐｒｉｖａｃｙ  ｍｏｄｅ）機能を提供しており、前記プライバシーモードが設定された状態で獲得される映像内で人が含まれた場合、該当映像内の人に対するマスキング処理のみを遂行して、相変らず該当プライバシーモードに従う獲得された映像に対する個人情報を保護することに足りない点が存在している。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】韓国公開特許第１０−２０１４−００１２４７４号［名称：顔認識基盤の個人情報保護装置及び方法］
【発明の概要】
【発明が解決しようとする課題】
【０００５】
本発明の目的は、プライバシーモードが設定されたモニタリング領域内で客体の動きが感知される場合、サーバーで前記感知された客体の動きに対するメタデータをモニタリングセンターに提供し、前記モニタリングセンターではモニタリング領域と関連した映像の代わりに予め設定された背景の上にメタデータに対応するアバターを表示する個人情報保護機能を含んだモニタリングシステム及びその方法を提供することにある。
【０００６】
本発明の他の目的は、プライバシーモードが設定された状態で、モニタリングセンターでサーバーから提供されるメタデータに基づいて端末に該当モニタリング領域に対するリアルタイム映像受信のための要請を転送し、前記端末で前記モニタリングセンターから転送される要請に基づいて前記端末を通じて該当モニタリング領域を確認した後、外部侵入などが疑わしい時、直接警察署に申告するか、またはサーバーに前記モニタリング領域に対するプライバシーモードの一時停止を要請し、前記サーバーで一時停止要請に従って該当モニタリング領域と関連した映像を前記モニタリングセンターに提供する個人情報保護機能を含んだモニタリングシステム及びその方法を提供することにある。
【課題を解決するための手段】
【０００７】
本発明の実施形態に係る個人情報保護機能を含んだモニタリング方法は、個人情報保護機能を含んだモニタリング方法において、サーバーにより、映像獲得装置から転送されるモニタリング領域と関連した映像を受信する時、前記モニタリング領域に対するプライバシーモードが設定された状態か否かを判断するステップ；前記判断結果、前記モニタリング領域に対するプライバシーモードが設定された状態の時、前記サーバーにより前記映像内で客体の動きが感知されるか否かを識別するステップ；前記識別結果、前記映像内で客体の動きが感知される時、前記サーバーにより、前記映像内で客体の動きと関連したメタデータをモニタリングセンターに転送するステップ；前記モニタリングセンターにより、前記メタデータに基づいて予め設定された背景色または背景イメージ上に前記メタデータに対応する１つ以上のアバターを表示するステップ；及び前記モニタリングセンターにより、前記メタデータに基づいて前記モニタリング領域に対する映像確認のための映像受信要請情報を端末に転送するステップを含むことができる。
【０００８】
本発明の実施形態に係る個人情報保護機能を含んだモニタリングシステムは、個人情報保護機能を含んだモニタリングシステムにおいて、モニタリング領域と関連した映像を獲得し、前記獲得された映像を転送する映像獲得装置；前記映像獲得装置から転送される映像を受信する時、前記モニタリング領域に対するプライバシーモードが設定された状態か否かを判断し、前記モニタリング領域に対するプライバシーモードが設定された状態で、前記映像内で客体の動きが感知される時、前記映像内で客体の動きと関連したメタデータを転送するサーバー；前記メタデータに基づいて予め設定された背景色または背景イメージ上に前記メタデータに対応する１つ以上のアバターを表示し、前記メタデータに基づいて前記モニタリング領域に対する映像確認のための映像受信要請情報を転送するモニタリングセンター；及び前記映像受信要請情報に基づいて前記サーバーと連動して前記映像獲得装置を通じて獲得された前記モニタリング領域に対する映像を確認し、プライバシーモードの設定を一時停止するためのプライバシーモードの一時停止要請情報を前記サーバーに転送する端末を含むことができる。
【発明の効果】
【０００９】
本発明は、プライバシーモードが設定されたモニタリング領域内で客体の動きが感知される場合、サーバーで前記感知された客体の動きに対するメタデータをモニタリングセンターに提供し、前記モニタリングセンターではモニタリング領域と関連した映像の代わりに予め設定された背景の上にメタデータに対応するアバターを表示することによって、個人情報保護を強化し、全体システムに対する信頼性を高めることができる効果がある。
【００１０】
また、本発明はプライバシーモードが設定された状態で、モニタリングセンターでサーバーから提供されるメタデータに基づいて端末に該当モニタリング領域に対するリアルタイム映像受信のための要請を転送し、前記端末で前記モニタリングセンターから転送される要請に基づいて前記端末を通じて該当モニタリング領域を確認した後、外部侵入などが疑わしい時、直接警察署に申告するか、またはサーバーに前記モニタリング領域に対するプライバシーモードの一時停止を要請し、前記サーバーで一時停止要請に従って該当モニタリング領域と関連した映像を前記モニタリングセンターに提供することによって、端末のユーザが持続的に個人のプライバシーが保護されていることを認知することによる使用上の便宜性を高めることができる効果がある。
【図面の簡単な説明】
【００１１】
【図１】本発明の実施形態に係る個人情報保護機能を含んだモニタリングシステムの構成を示したブロック図である。
【図２】本発明の実施形態に係る個人情報保護機能を含んだモニタリング方法を示したフローチャートである。
【図３】本発明の実施形態に係るモニタリングセンターに表示される画面を示した図である。
【図４】本発明の実施形態に係るモニタリングセンターに表示される画面を示した図である。
【発明を実施するための形態】
【００１２】
本発明で使われる技術的用語は単に特定の実施形態を説明するために使われたものであって、本発明を限定しようとする意図でないことに留意しなければならない。また、本発明で使われる技術的用語は本発明で特別に異なる意味として定義されない限り、本発明が属する技術分野で通常の知識を有する者により一般的に理解される意味に解釈されなければならず、過度に包括的な意味に解釈されるか、または過度に縮小された意味に解釈されてはならない。また、本発明で使われる技術的な用語が本発明の思想を正確に表現できない誤った技術的用語である時には、当業者が正しく理解することができる技術的用語に代替されて理解されるべきである。また、本発明で使われる一般的な用語は事前に定義されているところによって、または前後文脈によって解釈されなければならず、過度に縮小された意味に解釈されてはならない。
【００１３】
また、本発明で使われる単数の表現は、文脈上の明白に異なる意味を有しない限り、複数の表現を含む。本発明で、「構成される」または「含む」などの用語は発明に記載されたいろいろな構成要素またはいろいろなステップを必ず全て含むものとして解釈されてはならず、そのうちの一部の構成要素または一部のステップは含まれないこともあり、または追加的な構成要素またはステップをさらに含むことができるものとして解釈されなければならない。
【００１４】
また、本発明で使われる第１、第２などのように序数を含む用語は、構成要素を説明することに使用できるが、構成要素は用語により限定されてはならない。用語は１つの構成要素を他の構成要素から区別する目的のみに使われる。例えば、本発明の権利範囲を逸脱することなく、第１構成要素は第２構成要素と命名されることができ、類似するように、第２構成要素も第１構成要素と命名できる。
【００１５】
以下、添付した図面を参照して本発明に従う好ましい実施形態を詳細に説明し、かつ図面符号に関わらず、同一または類似の構成要素は同一な参照番号を与えて、これに対する重複説明は省略する。
【００１６】
また、本発明を説明するに当たって、関連した公知技術に対する具体的な説明が本発明の要旨を曖昧にすることがあると判断される場合、その詳細な説明を省略する。また、添付した図面は本発明の思想が容易に理解できるようにするためのものであり、添付した図面により本発明の思想が制限されるものとして解釈されてはならないことに留意しなければならない。
【００１７】
図１は、本発明の実施形態に係る個人情報保護機能を含んだモニタリングシステム１０の構成を示したブロック図である。
【００１８】
図１に図示したように、個人情報保護機能を含んだモニタリングシステム１０は、映像獲得装置１００、サーバー２００、モニタリングセンター３００、及び端末４００から構成される。図１に図示されたモニタリングシステム１０の全ての構成要素が必須構成要素であるものではなく、図１に図示された構成要素より多い構成要素によりモニタリングシステム１０が具現されることもでき、それより少ない構成要素によってもモニタリングシステム１０が具現されることもできる。
【００１９】
前記映像獲得装置１００は、前記端末４００と関連して予め設定されたモニタリング領域に設置される。
【００２０】
また、前記映像獲得装置１００は、ＩＰカメラ／ＩＰエンコーダ、ネットワークカメラなどでありうる。
【００２１】
また、前記映像獲得装置１００はイメージセンサー（カメラモジュールまたはカメラ）により得られる停止映像または動映像などの画像フレームを処理する。即ち、コーデック（ＣＯＤＥＣ）に従って前記イメージセンサーにより得られる該当画像データを各規格に合うようにエンコーディング／デコーディングする。前記処理された画像フレームは前記映像獲得装置１００に連結された表示部（図示せず）に表示されるか、または前記サーバー２００に転送される。
【００２２】
このように、前記映像獲得装置１００は前記映像獲得装置１００が設置された地域（または、領域）に対する映像情報を獲得（または、撮影）し、前記獲得された映像情報（または、映像／モニタリング領域と関連した映像）を前記サーバー２００に転送する。
【００２３】
前記サーバー２００、前記モニタリングセンター、前記端末４００は、通信機能を遂行する通信部（図示せず）、情報格納機能を遂行する格納部（または、メモリ）（図示せず）、情報をディスプレイする表示部（図示せず）、情報に対応する音声情報を出力する音声出力部（図示せず）、構成要素を制御するか、または情報に従う機能を遂行する制御部（図示せず）を各々含むことができる。
【００２４】
また、前記サーバー２００は前記映像獲得装置１００から転送される映像を受信する。
【００２５】
また、前記サーバー２００は該当映像と関連したモニタリング領域に対するプライバシーモード設定有無を判断する。
【００２６】
即ち、前記サーバー２００は該当映像と関連したモニタリング領域に対して前記端末４００によりプライバシーモードが設定された状態か否かを判断する。
【００２７】
前記判断結果、該当映像と関連したモニタリング領域に対してプライバシーモードが設定された状態でない場合、前記サーバー２００は該当映像（または、該当モニタリング領域と関連した映像）をモニタリングセンター３００に転送する。
【００２８】
また、前記判断結果、該当映像と関連したモニタリング領域に対してプライバシーモードが設定された状態である場合、前記サーバー２００は該当映像（または、該当モニタリング領域と関連した映像）内で客体（または、人）の動きが感知されるか否かを識別する。
【００２９】
この際、前記サーバー２００は前記モニタリング領域と関連したドアのオン／オフ状態に対する感知情報などに基づいて前記モニタリング領域内での外部侵入有無を識別することもできる。
【００３０】
また、前記サーバー２００は前記映像内での客体の登場方向や客体の動きが該当モニタリング領域に対して既存に学習されたものと異なる状態か否かを識別することもできる。
【００３１】
また、前記サーバー２００は前記映像内での懐中電灯のような照明が動く状態により外部侵入有無を識別することもできる。
【００３２】
前記識別結果、該当映像内で客体の動きが感知されない場合、前記サーバー２００は該当映像内で客体の動きが感知されないことを示すメタデータ（または、該当映像内に客体が存在しないことを示すメタデータ）を前記モニタリングセンター３００に転送する。
【００３３】
また、前記識別結果、該当映像内で客体の動きが感知される場合、前記サーバー２００は該当映像内で客体の動きと関連したメタデータを前記モニタリングセンター３００に転送する。ここで、前記映像内で客体の動きと関連したメタデータはディップランニングに従う停止映像分析を通じて映像内での客体の数、ディップランニングに従う停止映像分析を通じて映像内での客体の位置情報（または、座標情報）、ディップランニングに従う停止映像分析を通じて客体の種類、ディップランニングに従う停止映像分析を通じて客体の形状、ディップランニングに従う停止映像分析を通じて客体の色相、ディップランニングに従う停止映像分析を通じて客体が持っている物（または、異なる客体）の種類や色相、先の停止映像分析に従う分析情報を基盤とする状況認知情報などを含む。この際、前記状況認知情報は拳銃を持っている人が門を足で蹴っている場合、人々が争っている場合などを含む。
【００３４】
また、前記映像（例えば、停止映像、動映像などを含み）内で客体を検出する場合、前記サーバー２００は前記映像内での客体の数、映像内での客体の位置情報、客体の移動速度及び／又は移動パターンの他にも前記映像内での客体検出、検出された客体追跡、客体の倒れ感知、客体の徘徊、検出された客体が物を置いて行くか、または物を持って行くこと、客体間争い、客体の種類、客体を構成する色相などのような客体の現在状況と関連した情報を含む前記映像内での客体の動きと関連したメタデータを生成（または、管理）することができる。
【００３５】
また、前記モニタリングセンター３００に転送した前記映像内で客体の動きと関連したメタデータに基づいて前記端末４００で該当モニタリング領域に対するプライバシーモードの一時停止を要請しようとする場合、前記サーバー２００は前記端末４００から転送されるプライバシーモードの一時停止要請情報を受信する。ここで、前記プライバシーモードの一時停止要請情報は、予め設定された時間（例えば、３０分、１時間、２時間などを含み）の間、先に設定されたプライバシーモードを解除して正常モードを維持し、前記予め設定された時間が経過した場合、自動で前記正常モードから前記プライバシーモードに転換するための情報、端末４００の識別情報、前記端末４００と関連したモニタリング領域に対する情報、前記モニタリング領域と関連した映像獲得装置１００に対する情報などを含む。また、前記端末４００の識別情報は、ＭＤＮ（Ｍｏｂｉｌｅ  Ｄｉｒｅｃｔｏｒｙ  Ｎｕｍｂｅｒ）、モバイルＩＰ、モバイルＭＡＣ、Ｓｉｍ（ｓｕｂｓｃｒｉｂｅｒ  ｉｄｅｎｔｉｔｙ  ｍｏｄｕｌｅ：加入者識別モジュール）カード固有情報、シリアル番号などを含む。
【００３６】
また、前記サーバー２００は前記受信されたプライバシーモードの一時停止要請情報に基づいて前記映像獲得装置１００から提供される該当モニタリング領域と関連した映像を前記モニタリングセンター３００に転送する。
【００３７】
また、前記サーバー２００は前記モニタリングセンター３００から転送される前記モニタリング領域と関連した不法侵入と判断された時点の前／後の各々の５分間の動映像、前記モニタリング領域での不法侵入と判断された時点の応急状況発生時刻情報、前記警察署サーバーに不法侵入に対する応急状況発生情報を提供した時点の時刻情報（または、応急状況発生申告時刻情報）などを含むログ情報を受信する。
【００３８】
また、前記サーバー２００は前記受信されたログ情報を前記モニタリング領域及び／又は前記端末４００の識別情報と連動して格納する。
【００３９】
また、前記サーバー２００は前記映像獲得装置１００から提供される映像を該当サーバー２００に接続した管理者、前記端末１００、前記モニタリングセンター３００などに提供する場合、該当映像を確認する全てのデバイスやユーザに対する情報をログで記録し、前記記録されたログを前記端末１００に提供する。
【００４０】
このように、前記ログを最終ユーザである前記端末１００に提供することによって、プライバシーモードがイネーブル状態またはディスエーブル状態でも最終ユーザは個人情報の保護を受けているという感じを有することができる。
【００４１】
前記モニタリングセンター３００は、前記サーバー２００から転送される該当映像内で客体の動きが感知されないことを示すメタデータ（または、該当映像内に客体が存在しないことを示すメタデータ）を受信する。
【００４２】
また、前記モニタリングセンター３００は前記受信された該当映像内で客体の動きが感知されないことを示すメタデータを表示する。この際、前記モニタリングセンター３００は前記メタデータに基づいて前記モニタリングと関連した映像の代りに予め設定された背景色（例えば、ブラック色相、ホワイト色相などを含み）、または予め設定された背景イメージを表示する。
【００４３】
また、前記モニタリングセンター３００は前記サーバー２００から転送される該当映像内で客体の動きと関連したメタデータを受信する。
【００４４】
また、前記モニタリングセンター３００は前記受信された該当映像内で客体の動きと関連したメタデータを表示する。この際、前記モニタリングセンター３００は予め設定された背景色（例えば、ブラック色相、ホワイト色相などを含み）、または予め設定された背景イメージ上に前記映像内で客体の動きと関連したメタデータに対応する１つ以上のアバターまたは顔文字を表示する。ここで、前記モニタリングセンター３００は前記客体の動きと関連したメタデータに基づいて客体の移動速度及び／又は移動パターン、客体の現在状況情報などを追加で表示することもできる。
【００４５】
また、前記モニタリングセンター３００は前記受信された該当映像内で客体の動きと関連したメタデータに基づいて客体位置別アバター、メタデータに従う客体種類や状態、客体の行動に説明（例えば、「青い服を着た人が３０秒間徘徊している」、「黄色い髪の人と黒髪の人が争っている」などを含み）などを表示することもできる。
【００４６】
また、前記モニタリングセンター３００（または、前記モニタリングセンター３００の管理者／オペレータ）は該当映像内で客体の動きと関連したメタデータに基づいて該当モニタリング領域に対する映像受信（または、映像確認）のための映像受信要請情報を前記端末４００に転送する。
【００４７】
また、前記モニタリングセンター３００は前記サーバー２００から転送される該当モニタリング領域と関連した映像を受信する。
【００４８】
また、前記モニタリングセンター３００は前記受信された該当モニタリング領域と関連した映像を表示する。
【００４９】
また、前記モニタリングセンター３００に表示される映像内で侵入者があると判断される場合、前記モニタリングセンター３００は予め登録された警察署などの前記管理サーバーに応急状況発生に対する情報（または、応急状況発生情報）を提供する。ここで、前記応急状況発生に対する情報（または、応急状況発生情報）は前記応急状況と関連した応急状況発生時点を基準に該当応急状況発生前／後の予め設定された個数だけのスナップショットまたは予め設定された時間の間の動映像、応急状況発生時刻情報、応急状況発生申告時刻情報、応急状況が発生した所の住所、応急状況が発生した所の非常連絡先情報、応急状況が発生した所の応急状況担当者の非常連絡先情報などを含む。
【００５０】
前記端末４００は、前記モニタリング領域と関連した端末でありうる。
【００５１】
また、前記端末４００は前記モニタリング領域に対して個人情報保護のためのプライバシーモードか否かを設定する。
【００５２】
この際、前記プライバシーモードが設定された状態でない場合、前記映像獲得装置１００を通じて獲得される映像が前記サーバー２００を経由して前記モニタリングセンター３００に提供できる。
【００５３】
また、前記プライバシーモードが設定された状態である場合、前記サーバー２００は前記映像獲得装置１００を通じて獲得された映像で客体の有無に従うメタデータを生成し、前記生成されたメタデータを前記モニタリングセンター３００に提供することができる。
【００５４】
また、前記端末４００は前記モニタリングセンター３００から転送される映像受信要請情報を受信する。
【００５５】
また、前記端末４００は前記サーバー２００と連動して前記映像獲得装置１００を通じて獲得された（または、撮影された）該当モニタリング領域に対する映像を確認する。
【００５６】
また、前記端末４００での前記モニタリング領域に対する映像確認により、該当モニタリング領域に侵入者があると判断される場合、前記端末４００は警察署などの管理サーバー（図示せず）に直接申告する。
【００５７】
また、前記端末４００での前記モニタリング領域に対する映像確認により、該当モニタリング領域に侵入者があると判断される場合、前記端末４００は前記サーバー２００にプライバシーモードの一時停止要請情報を転送する。ここで、前記プライバシーモードの一時停止要請情報は予め設定された時間（例えば、３０分、１時間、２時間などを含み）の間、先に設定されたプライバシーモードを解除して正常モードを維持し、前記予め設定された時間が経過した場合、自動で前記正常モードから前記プライバシーモードに転換するための情報、端末４００の識別情報、前記端末４００と関連したモニタリング領域に対する情報、前記モニタリング領域と関連した映像獲得装置１００に対する情報などを含む。
【００５８】
また、前記モニタリングセンター３００から転送される映像受信要請情報を受信する場合、前記端末４００は前記サーバー２００にプライバシーモードの一時停止要請情報を転送することもできる。
【００５９】
また、前記端末４００は前記サーバー２００から転送されるログ（または、ログ情報）を受信し、前記受信されたログを表示する。
【００６０】
このように、プライバシーモードが設定されたモニタリング領域内で客体の動きが感知される場合、サーバーで前記感知された客体の動きに対するメタデータをモニタリングセンターに提供し、前記モニタリングセンターではモニタリング領域と関連した映像の代わりに予め設定された背景の上にメタデータに対応するアバターを表示することができる。
【００６１】
また、このように、プライバシーモードが設定された状態で、モニタリングセンターでサーバーから提供されるメタデータに基づいて端末に該当モニタリング領域に対するリアルタイム映像受信のための要請を転送し、前記端末で前記モニタリングセンターから転送される要請に基づいて前記端末を通じて該当モニタリング領域を確認した後、外部侵入などが疑わしい時、直接警察署に申告するか、またはサーバーに前記モニタリング領域に対するプライバシーモードの一時停止を要請し、前記サーバーで一時停止要請に従って該当モニタリング領域と関連した映像を前記モニタリングセンターに提供することができる。
【００６２】
以下、本発明に従う個人情報保護機能を含んだモニタリング方法を図１から図４を参照して詳細に説明する。
【００６３】
図２は、本発明の実施形態に係る個人情報保護機能を含んだモニタリング方法を示したフローチャートである。
【００６４】
まず、映像獲得装置１００は端末４００と関連して予め設定されたモニタリング領域と関連した映像を獲得する。ここで、前記映像獲得装置１００はＩＰカメラ／ＩＰエンコーダ、ネットワークカメラなどでありうる。
【００６５】
また、前記映像獲得装置１００は前記獲得された映像（または、前記獲得されたモニタリング領域と関連した映像）をサーバー２００に転送する。
【００６６】
一例に、前記映像獲得装置１００は第１ショップ（ｓｈｏｐ）に設置されたネットワークカメラを通じて撮影される第１映像を前記サーバー２００に転送する（Ｓ２１０）。
【００６７】
以後、前記サーバー２００は前記映像獲得装置１００から転送される映像を受信する。
【００６８】
また、前記サーバー２００は該当映像と関連したモニタリング領域に対するプライバシーモード設定有無を判断する。
【００６９】
即ち、前記サーバー２００は該当映像と関連したモニタリング領域に対して前記端末４００によりプライバシーモードが設定された状態か否かを判断する。
【００７０】
一例に、前記サーバー２００は前記映像獲得装置１００から転送される第１映像を受信する。
【００７１】
また、前記サーバー２００は前記第１ショップに対して前記端末４００によりプライバシーモードが設定された状態か否かを判断する（Ｓ２２０）。
【００７２】
前記判断結果、該当映像と関連したモニタリング領域に対してプライバシーモードが設定された状態でない場合、前記サーバー２００は該当映像（または、該当モニタリング領域と関連した映像）をモニタリングセンター３００に転送する。
【００７３】
また、前記モニタリングセンター３００は前記サーバー２００から転送される映像を受信し、前記受信された映像を表示する。
【００７４】
一例に、前記判断結果、前記第１ショップに対して前記端末４００によりプライバシーモードが設定された状態でない時、前記サーバー２００は前記第１映像を前記モニタリングセンター３００に転送する。
【００７５】
また、前記モニタリングセンター３００は前記サーバー２００から転送される第１映像を受信し、前記受信された第１映像を表示する（Ｓ２３０）。
【００７６】
また、前記判断結果、該当映像と関連したモニタリング領域に対してプライバシーモードが設定された状態の場合、前記サーバー２００は該当映像（または、該当モニタリング領域と関連した映像）内で客体（または、人）の動きが感知されるか否かを識別する。
【００７７】
一例に、前記判断結果、前記第１ショップに対して前記端末４００によりプライバシーモードが設定された状態の時、前記サーバー２００は前記第１映像内で客体の動きが感知されるか否かを識別する（Ｓ２４０）。
【００７８】
前記識別結果、該当映像内で客体の動きが感知されない場合、前記サーバー２００は該当映像内で客体の動きが感知されないことを示すメタデータ（または、該当映像内に客体が存在しないことを示すメタデータ）を前記モニタリングセンター３００に転送する。
【００７９】
また、前記モニタリングセンター３００は前記サーバー２００から転送される該当映像内で客体の動きが感知されないことを示すメタデータ（または、該当映像内に客体が存在しないことを示すメタデータ）を受信し、前記受信された該当映像内で客体の動きが感知されないことを示すメタデータを表示する。この際、前記モニタリングセンター３００は前記メタデータに基づいて前記モニタリングと関連した映像の代りに予め設定された背景色（例えば、ブラック色相、ホワイト色相などを含み）、または予め設定された背景イメージを表示する。
【００８０】
一例に、前記識別結果、前記第１映像内で客体の動きが感知されない時、前記サーバー２００は第１映像内で客体の動きが感知されないことを示す第１メタデータを前記モニタリングセンター３００に転送する。
【００８１】
また、前記モニタリングセンター３００は前記サーバー２００から転送される第１映像内で客体の動きが感知されないことを示す第１メタデータを受信する。
【００８２】
また、図３に図示したように、前記モニタリングセンター３００は前記受信された第１メタデータに基づいて前記第１ショップと関連した映像の代りに予め設定された白色の背景色相のみ（斜線で表示）をモニタリング画面に表示する。ここで、前記モニタリング画面は前記映像獲得装置１００を通じて獲得された映像を表示する領域（斜線で表示）、前記映像獲得装置１００が設置された位置を表示する領域、発生したイベントリストを表示する領域、前記イベントリストのうち、いずれか１つが選択される場合、該当イベントと関連したスナップショットを表示する領域などで構成する（Ｓ２５０）。
【００８３】
また、前記識別結果、該当映像内で客体の動きが感知される場合、前記サーバー２００は該当映像内で客体の動きと関連したメタデータを前記モニタリングセンター３００に転送する。ここで、前記映像内で客体の動きと関連したメタデータはディップランニングに従う停止映像分析を通じて映像内での客体の数、ディップランニングに従う停止映像分析を通じて映像内での客体の位置情報（または、座標情報）、ディップランニングに従う停止映像分析を通じて客体の種類、ディップランニングに従う停止映像分析を通じて客体の形状、ディップランニングに従う停止映像分析を通じて客体の色相、ディップランニングに従う停止映像分析を通じて客体が持っている物（または、他の客体）の種類や色相、先の停止映像分析に従う分析情報を基盤とする状況認知情報などを含む。この際、前記状況認知情報は拳銃を持っている人が門を足で蹴っている場合、人々が争っている場合などを含む。
【００８４】
また、前記モニタリングセンター３００は前記サーバー２００から転送される該当映像内で客体の動きと関連したメタデータを受信し、前記受信された該当映像内で客体の動きと関連したメタデータを表示する。この際、前記モニタリングセンター３００は予め設定された背景色（例えば、ブラック色相、ホワイト色相などを含み）、または予め設定された背景イメージ上に前記映像内で客体の動きと関連したメタデータに対応する１つ以上のアバターを表示する。
【００８５】
一例に、前記識別結果、前記第１映像内で２人の人の動きが感知される時、前記サーバー２００は前記第１映像内での客体の数（例えば、２人）、前記第１映像内での各個体の位置情報などを含む第２メタデータを前記モニタリングセンター３００に転送する。
【００８６】
また、前記モニタリングセンター３００は前記サーバー２００から転送される第１映像内で客体の動きが感知されることに従う第２メタデータを受信する。
【００８７】
また、図４に図示したように、前記モニタリングセンター３００は前記受信された第２メタデータに基づいて前記第１ショップと関連した映像の代りに予め設定された白色の背景色相の上に、２人の人に対応する第１アバターと第２アバターをモニタリング画面に表示する。ここで、前記モニタリング画面は前記映像獲得装置１００を通じて獲得された映像を表示する領域（斜線で表示）、前記映像獲得装置１００が設置された位置を表示する領域、発生したイベントリストを表示する領域、前記イベントリストのうち、いずれか１つが選択される場合、該当イベントと関連したスナップショットを表示する領域などで構成する（Ｓ２６０）。
【００８８】
以後、前記モニタリングセンター３００（または、前記モニタリングセンター３００の管理者／オペレータ）は該当映像内で客体の動きと関連したメタデータに基づいて該当モニタリング領域に対する映像受信（または、映像確認）のための映像受信要請情報を前記端末４００に転送する。
【００８９】
一例に、前記モニタリングセンター３００のオペレータは前記表示される第１アバターと第２アバターを確認し、前記第１映像と関連した前記第１ショップに侵入者が存在するか否かを正確に判断するために、該当第１ショップ内の映像を確認することができるように臨時的に前記第１ショップに対するプライバシーモードの解除を要請する第１映像受信要請情報を前記端末４００に転送する（Ｓ２７０）。
【００９０】
以後、前記端末４００は前記モニタリングセンター３００から転送される映像受信要請情報を受信する。
【００９１】
また、前記端末４００は前記サーバー２００と連動して前記映像獲得装置１００を通じて獲得された（または、撮影された）該当モニタリング領域に対する映像を確認する。
【００９２】
また、前記端末４００での前記モニタリング領域に対する映像確認により、該当モニタリング領域に侵入者があると判断される場合、前記端末４００は警察署などの管理サーバー（図示せず）に直接申告するか、または前記サーバー２００にプライバシーモードの一時停止要請情報を転送する。ここで、前記プライバシーモードの一時停止要請情報は予め設定された時間（例えば、３０分、１時間、２時間などを含み）の間、先に設定されたプライバシーモードを解除して正常モードを維持し、前記予め設定された時間が経過した場合、自動で前記正常モードから前記プライバシーモードに転換するための情報、端末４００の識別情報、前記端末４００と関連したモニタリング領域に対する情報、前記モニタリング領域と関連した映像獲得装置１００に対する情報などを含む。
【００９３】
一例に、前記端末４００は前記モニタリングセンター３００から転送される第１映像受信要請情報を受信し、前記サーバー２００と連動して前記映像獲得装置１００を通じて獲得される第１ショップに対するリアルタイム映像を確認する。
【００９４】
また、前記リアルタイムに確認される第１ショップに対する映像内で侵入者が確認される時、前記端末４００は先に設定されたプライバシーモードを１時間の間一時停止するためのプライバシーモードの一時停止要請情報を前記サーバー２００に転送する（Ｓ２８０）。
【００９５】
以後、前記サーバー２００は前記端末４００から転送されるプライバシーモードの一時停止要請情報を受信する。
【００９６】
また、前記サーバー２００は前記受信されたプライバシーモードの一時停止要請情報に基づいて該当モニタリング領域と関連した映像を前記モニタリングセンター３００に転送する。
【００９７】
一例に、前記サーバー２００は前記端末４００から転送されるプライバシーモードの一時停止要請情報を受信し、前記受信されたプライバシーモードの一時停止要請情報に基づいて前記映像獲得装置１００を通じてリアルタイムに獲得される第１ショップと関連したリアルタイム映像を前記モニタリングセンター３００に転送する（Ｓ２９０）。
【００９８】
以後、前記モニタリングセンター３００は前記サーバー２００から転送される該当モニタリング領域と関連した映像を受信する。
【００９９】
また、前記モニタリングセンター３００は前記受信された該当モニタリング領域と関連した映像を表示する。
【０１００】
また、前記モニタリングセンター３００に表示される映像内で侵入者があると判断される場合、前記モニタリングセンター３００は予め登録された警察署などの前記管理サーバーに応急状況発生に対する情報（または、応急状況発生情報）を提供する。ここで、前記応急状況発生に対する情報（または、応急状況発生情報）は前記応急状況と関連した応急状況発生時点を基準に該当応急状況発生前／後の予め設定された個数だけのスナップショットまたは予め設定された時間の間の動映像、応急状況発生時刻情報、応急状況発生申告時刻情報、応急状況が発生した所の住所、応急状況が発生した所の非常連絡先情報、応急状況が発生した所の応急状況担当者の非常連絡先情報などを含む。
【０１０１】
一例に、前記モニタリングセンター３００は前記サーバー２００から転送される第１ショップと関連したリアルタイム映像を受信し、前記受信された第１ショップと関連したリアルタイム映像を表示する。
【０１０２】
また、前記モニタリングセンター３００のオペレータは前記リアルタイム映像内での２人の侵入者を確認し、予め登録された警察署サーバーに不法侵入に対する応急状況発生情報を提供する。
【０１０３】
また、前記モニタリングセンター３００は前記第１ショップでの不法侵入と判断された時点の前／後の各々の５分間の動映像、前記第１ショップでの不法侵入と判断された時点の応急状況発生時刻情報、前記警察署サーバーに不法侵入に対する応急状況発生情報を提供した時点の時刻情報（または、応急状況発生申告時刻情報）などを含むログ情報をサーバー２００に提供し、前記サーバー２００では該当ログ情報を前記第１ショップ（または、前記端末４００）と連動して格納する（Ｓ３００）。
【０１０４】
本発明の実施形態は前述したように、プライバシーモードが設定されたモニタリング領域内で客体の動きが感知される場合、サーバーで前記感知された客体の動きに対するメタデータをモニタリングセンターに提供し、前記モニタリングセンターではモニタリング領域と関連した映像の代わりに予め設定された背景の上にメタデータに対応するアバターを表示して個人情報保護を強化し、全体システムに対する信頼性を高めることができる。
【０１０５】
また、本発明の実施形態は前述したように、プライバシーモードが設定された状態で、モニタリングセンターでサーバーから提供されるメタデータに基づいて端末に該当モニタリング領域に対するリアルタイム映像受信のための要請を転送し、前記端末で前記モニタリングセンターから転送される要請に基づいて前記端末を通じて該当モニタリング領域を確認した後、外部侵入などが疑わしい時、直接警察署に申告するか、またはサーバーに前記モニタリング領域に対するプライバシーモードの一時停止を要請し、前記サーバーで一時停止要請に従って該当モニタリング領域と関連した映像を前記モニタリングセンターに提供して、端末のユーザが持続的に個人のプライバシーが保護されていることを認知することに従う使用上の便宜性を高めることができる。
【０１０６】
前述した内容は、本発明が属する技術分野で通常の知識を有する者であれば、本発明の本質的な特性から逸脱しない範囲で修正及び変形が可能である。したがって、本発明に開示された実施形態は本発明の技術思想を限定するためのものでなく、説明するためのものであり、このような実施形態によって本発明の技術思想の範囲が限定されるものではない。本発明の保護範囲は以下の請求範囲により解釈されなければならず、それと同等な範囲内にある全ての技術思想は本発明の権利範囲に含まれるものとして解釈されるべきである。
【産業上の利用可能性】
【０１０７】
本発明は、プライバシーモードが設定されたモニタリング領域内で客体の動きが感知される場合、サーバーで前記感知された客体の動きに対するメタデータをモニタリングセンターに提供し、前記モニタリングセンターではモニタリング領域と関連した映像の代わりに予め設定された背景の上にメタデータに対応するアバターを表示することによって、個人情報保護を強化し、全体システムに対する信頼性を高めることができるものであって、ネットワークカメラ分野、客体感知分野、映像分野、サーバー分野、保安監視分野などで広範囲に利用できる。
【符号の説明】
【０１０８】
１０    モニタリングシステム
１００    映像獲得装置
２００    サーバー
３００    モニタリングセンター
４００    端末
【図１】
2019041383.tif 000003
【図２】
2019041383.tif 000004
【図３】
2019041383.tif 000005
【図４】
2019041383.tif 000006