(57)【特許請求の範囲】
【請求項１】
監視画面がモニタ機器のカメラにより採集されたとき、前記監視画面にサウンドを発した監視対象が存在するか否かを検出するステップと、
前記監視画面に前記サウンドを発した監視対象が存在する場合、サウンド取得機器で採集された前記監視対象のサウンド信号強度が前記モニタ機器で採集された前記監視対象のサウンド信号強度よりも大きいという所定条件を満たす前記サウンド取得機器を特定するステップと、
前記サウンド取得機器が前記監視対象から発せられたサウンドを採集するように当該サウンド取得機器を制御するステップと、を含み、
前記サウンド取得機器は採集部材を有し、モニタ機器でない機器であることを特徴とする監視画面サウンド採集方法。
【請求項２】
前記監視画面にサウンドを発した監視対象が存在するか否かを検出するステップは、
前記監視画面にサウンドを発した画像変化要素が存在するか否かを検出するステップ、または、
前記監視画面における指定種類対象がサウンドを発したか否かを検出するステップ、または、
検出機器からレポートされた指定指標に基づいて、前記監視画面にサウンドを発した監視対象が存在するか否かを検出するステップを含み、
前記画像変化要素は、前記監視画面に入っている監視対象、あるいは、口形の変化がある監視対象を含み、
前記指定種類対象は、ドア、窓及び家電製品のうちの少なくとも１つを含み、
前記検出機器は、前記モニタ機器とバインディングされた、前記指定指標をモニタリングするための機器であり、
前記指定指標は、オン・オフ状態、空気品質パラメータ、温度、熱源変化パラメータあるいは生理特徴パラメータであることを特徴とする請求項１に記載の監視画面サウンド採集方法。
【請求項３】
前記所定条件を満たすサウンド取得機器を特定するステップは、
前記モニタ機器で採集された前記監視画面に対応するサウンドが所定サウンド閾値よりも小さいか否かを検出するステップと、
前記モニタ機器で採集された前記監視画面に対応するサウンドが前記所定サウンド閾値よりも小さい場合、前記所定条件を満たすサウンド取得機器を特定するステップと、を含むことを特徴とする請求項１に記載の監視画面サウンド採集方法。
【請求項４】
前記所定条件を満たすサウンド取得機器を特定するステップは、
前記モニタ機器とバインディングされた全てのサウンド取得機器のうち、前記サウンドを発した監視対象に最も近いサウンド取得機器を取得し、取得されたサウンド取得機器を、前記所定条件を満たすサウンド取得機器として特定するステップ、または、
前記モニタ機器とバインディングされた全てのサウンド取得機器がサウンドの元となる前記監視対象から発せられたサウンドを採集するように当該サウンド取得機器を制御し、最も強いサウンド信号を採集したサウンド取得機器を、前記所定条件を満たすサウンド取得機器として特定するステップ、または、
前記モニタ機器とバインディングされた少なくとも１つの移動機器を、前記所定条件を満たすサウンド取得機器として特定するステップを含むことを特徴とする請求項３に記載の監視画面サウンド採集方法。
【請求項５】
前記モニタ機器とバインディングされた全てのサウンド取得機器のうち、前記サウンドを発した監視対象に最も近いサウンド取得機器を取得するステップは、
前記モニタ機器とバインディングされた全てのサウンド取得機器のうち、前記サウンドを発した監視対象に最も近いサウンド取得機器を室内測位技術によって特定するステップ、または、
サウンドを発した前記監視対象が存在する位置を画像識別技術によって特定し、前記サウンド取得機器のそれぞれに対応するリスリング領域範囲に基づいて、サウンドを発した前記監視対象をリスリングするためのサウンド取得機器を特定するステップを含むことを特徴とする請求項４に記載の監視画面サウンド採集方法。
【請求項６】
前記サウンド取得機器が前記監視対象から発せられたサウンドを採集するように当該サウンド取得機器を制御するステップは、
前記所定条件を満たすサウンド取得機器がサウンドを発した監視対象に最も近いサウンド取得機器である場合、前記サウンド取得機器がサウンドを採集するように当該サウンド取得機器を制御するステップと、
前記所定条件を満たすサウンド取得機器が最も強いサウンド信号を採集したサウンド取得機器である場合、前記サウンド取得機器がサウンドを継続して採集するように当該サウンド取得機器を制御するステップと、
前記所定条件を満たすサウンド取得機器が前記モニタ機器とバインディングされた移動機器である場合、前記移動機器が前記監視画面におけるサウンドを発した監視対象の位置に移動するように当該移動機器を制御し、かつ、前記移動機器が前記監視対象の存在する位置でのサウンドを採集するように当該移動機器を制御するステップと、を含むことを特徴とする請求項１〜５の何れかに記載の監視画面サウンド採集方法。
【請求項７】
監視画面がモニタ機器のカメラにより採集されたとき、前記監視画面にサウンドを発した監視対象が存在するか否かを検出するように構成される検出モジュールと、
前記監視画面に前記サウンドを発した監視対象が存在すると前記検出モジュールにより検出されたとき、サウンド取得機器で採集された前記監視対象のサウンド信号強度が前記モニタ機器で採集された前記監視対象のサウンド信号強度よりも大きいという所定条件を満たす前記サウンド取得機器を特定するように構成される特定モジュールと、
前記特定モジュールにより特定されたサウンド取得機器が前記監視対象から発せられたサウンドを採集するように当該サウンド取得機器を制御するように構成される制御モジュールと、を備え、
前記サウンド取得機器は採集部材を有し、モニタ機器でない機器であることを特徴とする監視画面サウンド採集装置。
【請求項８】
前記検出モジュールは、
前記監視画面にサウンドを発した画像変化要素が存在するか否かを検出するように構成される第１の検出サブモジュール、または、
前記監視画面における指定種類対象がサウンドを発したか否かを検出するように構成される第２の検出サブモジュール、または、
検出機器からレポートされた指定指標に基づいて、前記監視画面にサウンドを発した監視対象が存在するか否かを検出するように構成される第３の検出サブモジュールを有し、
前記画像変化要素は、前記監視画面に入っている監視対象、あるいは、口形の変化がある監視対象を含み、
前記指定種類対象は、ドア、窓及び家電製品のうちの少なくとも１つを含み、
前記検出機器は、前記モニタ機器とバインディングされた、前記指定指標をモニタリングするための機器であり、
前記指定指標は、オン・オフ状態、空気品質パラメータ、温度、熱源変化パラメータあるいは生理特徴パラメータであることを特徴とする請求項７に記載の監視画面サウンド採集装置。
【請求項９】
前記特定モジュールは、
前記モニタ機器で採集された前記監視画面に対応するサウンドが所定サウンド閾値よりも小さいか否かを検出するように構成される第４の検出サブモジュールと、
前記モニタ機器で採集された前記監視画面に対応するサウンドが前記所定サウンド閾値よりも小さいと前記第４の検出サブモジュールにより検出されたとき、前記所定条件を満たすサウンド取得機器を特定するように構成される第１の特定サブモジュールと、を有することを特徴とする請求項７に記載の監視画面サウンド採集装置。
【請求項１０】
前記第１の特定サブモジュールは、
前記モニタ機器とバインディングされた全てのサウンド取得機器のうち、前記サウンドを発した監視対象に最も近いサウンド取得機器を取得し、取得されたサウンド取得機器を、前記所定条件を満たすサウンド取得機器として特定するように構成される第１の取得サブモジュール、または、
前記モニタ機器とバインディングされた全てのサウンド取得機器がサウンドの元となる前記監視対象から発せられたサウンドを採集するように当該サウンド取得機器を制御し、最も強いサウンド信号を採集したサウンド取得機器を、前記所定条件を満たすサウンド取得機器として特定するように構成される第２の取得サブモジュール、または、
前記モニタ機器とバインディングされた少なくとも１つの移動機器を、前記所定条件を満たすサウンド取得機器として特定するように構成される第２の特定サブモジュールを有することを特徴とする請求項９に記載の監視画面サウンド採集装置。
【請求項１１】
前記第１の取得サブモジュールは、
前記モニタ機器とバインディングされた全てのサウンド取得機器のうち、前記サウンドを発した監視対象に最も近いサウンド取得機器を室内測位技術によって特定するように構成される第３の特定サブモジュール、または、
サウンドを発した前記監視対象が存在する位置を画像識別技術によって特定し、前記サウンド取得機器のそれぞれに対応するリスリング領域範囲に基づいて、サウンドを発した前記監視対象をリスリングするためのサウンド取得機器を特定するように構成される第４の特定サブモジュールを有することを特徴とする請求項１０に記載の監視画面サウンド採集装置。
【請求項１２】
前記制御モジュールは、
前記所定条件を満たすサウンド取得機器がサウンドを発した監視対象に最も近いサウンド取得機器である場合、前記サウンド取得機器がサウンドを採集するように当該サウンド取得機器を制御するように構成される第１の制御サブモジュールと、
前記所定条件を満たすサウンド取得機器が最も強いサウンド信号を採集したサウンド取得機器である場合、前記サウンド取得機器がサウンドを継続して採集するように当該サウンド取得機器を制御するように構成される第２の制御サブモジュールと、
前記所定条件を満たすサウンド取得機器が前記モニタ機器とバインディングされた移動機器である場合、前記移動機器が前記監視画面におけるサウンドを発した監視対象の位置に移動するように当該移動機器を制御し、かつ、前記移動機器が前記監視対象の存在する位置でのサウンドを採集するように当該移動機器を制御するように構成される第３の制御サブモジュールと、を有することを特徴とする請求項７〜１１の何れかに記載の監視画面サウンド採集装置。
【請求項１３】
プロセッサと、
前記プロセッサが実行可能な指令を記憶するためのメモリと、を備え、
前記プロセッサは、
監視画面がモニタ機器のカメラにより採集されたとき、前記監視画面にサウンドを発した監視対象が存在するか否かを検出し、
前記監視画面に前記サウンドを発した監視対象が存在する場合、サウンド取得機器で採集された前記監視対象のサウンド信号強度が前記モニタ機器で採集された前記監視対象のサウンド信号強度よりも大きいという所定条件を満たすサウンド取得機器を特定し、
前記サウンド取得機器が前記監視対象から発せられたサウンドを採集するように当該サウンド取得機器を制御するように構成され、
前記サウンド取得機器は採集部材を有し、モニタ機器でない機器であることを特徴とする監視画面サウンド採集装置。
【請求項１４】
プロセッサに実行されることにより、請求項１から請求項６のいずれか１項に記載の監視画面サウンド採集方法を実現することを特徴とするプログラム。
【請求項１５】
請求項１４に記載のプログラムが記録された記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、コンピュータ技術分野に関し、特に、監視画面サウンド採集方法、装置、プログラムおよび記録媒体に関する。
【背景技術】
【０００２】
カメラが各種のイベントの発生の過程を忠実に監視することができるため、カメラの監視機能は、例えば、交通監視、スーパーマーケット監視、団地監視などに広く用いられている。
【０００３】
モニタ機器のカメラを用いて監視する際、撮像された監視対象が遠ければ、当該モニタ機器が一般的に監視対象から発せられたサウンドを明確に取得できないため、監視の情報は不完全となってしまう。
【発明の概要】
【発明が解決しようとする課題】
【０００４】
モニタ機器が当該モニタ機器から遠く離れている監視対象によって発せられたサウンドを明確に取得できないという課題を解決するために、本開示は、監視画面サウンド採集方法、装置、プログラムおよび記録媒体を提供する。前記技術案は下記の通りである。
【課題を解決するための手段】
【０００５】
本開示の実施例の第１の態様によれば、監視画面サウンド採集方法を提供する。前記方法は、監視画面がモニタ機器のカメラにより採集されたとき、前記監視画面にサウンドを発した監視対象が存在するか否かを検出するステップと、前記監視画面に前記サウンドを発した監視対象が存在する場合、サウンド取得機器で採集された前記監視対象のサウンド信号強度が前記モニタ機器で採集された前記監視対象のサウンド信号強度よりも大きいという所定条件を満たす前記サウンド取得機器を特定するステップと、前記サウンド取得機器が前記監視対象から発せられたサウンドを採集するように当該サウンド取得機器を制御するステップと、を含む。
【０００６】
好ましくは、前記監視画面にサウンドを発した監視対象が存在するか否かを検出するステップは、前記監視画面にサウンドを発した画像変化要素が存在するか否かを検出するステップ、または、前記監視画面における指定種類対象がサウンドを発したか否かを検出するステップ、または、検出機器からレポートされた指定指標に基づいて、前記監視画面にサウンドを発した監視対象が存在するか否かを検出するステップを含み、前記画像変化要素は、前記監視画面に入っている監視対象、あるいは、口形の変化がある監視対象を含み、前記指定種類対象は、ドア、窓及び家電製品のうちの少なくとも１つを含み、前記検出機器は、前記モニタ機器とバインディングされた、前記指定指標をモニタリングするための機器であり、前記指定指標は、オン・オフ状態、空気品質パラメータ、温度、熱源変化パラメータあるいは生理特徴パラメータである。
【０００７】
好ましくは、前記所定条件を満たすサウンド取得機器を特定するステップは、前記モニタ機器で採集された前記監視画面に対応するサウンドが所定サウンド閾値よりも小さいか否かを検出するステップと、前記モニタ機器で採集された前記監視画面に対応するサウンドが前記所定サウンド閾値よりも小さい場合、前記所定条件を満たすサウンド取得機器を特定するステップと、を含む。
【０００８】
好ましくは、前記所定条件を満たすサウンド取得機器を特定するステップは、前記モニタ機器とバインディングされた全てのサウンド取得機器のうち、前記サウンドを発した監視対象に最も近いサウンド取得機器を取得し、取得されたサウンド取得機器を、前記所定条件を満たすサウンド取得機器として特定するステップ、または、前記モニタ機器とバインディングされた全てのサウンド取得機器がサウンドの元となる前記監視対象から発せられたサウンドを採集するように当該サウンド取得機器を制御し、最も強いサウンド信号を採集したサウンド取得機器を、前記所定条件を満たすサウンド取得機器として特定するステップ、または、前記モニタ機器とバインディングされた少なくとも１つの移動機器を、前記所定条件を満たすサウンド取得機器として特定するステップを含む。
【０００９】
好ましくは、前記モニタ機器とバインディングされた全てのサウンド取得機器のうち、前記サウンドを発した監視対象に最も近いサウンド取得機器を取得するステップは、前記モニタ機器とバインディングされた全てのサウンド取得機器のうち、前記サウンドを発した監視対象に最も近いサウンド取得機器を室内測位技術によって特定するステップ、または、サウンドを発した前記監視対象が存在する位置を画像識別技術によって特定し、前記サウンド取得機器のそれぞれに対応するリスリング領域範囲に基づいて、サウンドを発した前記監視対象をリスリングするためのサウンド取得機器を特定するステップを含む。
【００１０】
好ましくは、前記サウンド取得機器が前記監視対象から発せられたサウンドを採集するように当該サウンド取得機器を制御するステップは、前記所定条件を満たすサウンド取得機器がサウンドを発した監視対象に最も近いサウンド取得機器である場合、前記サウンド取得機器がサウンドを採集するように当該サウンド取得機器を制御するステップと、前記所定条件を満たすサウンド取得機器が最も強いサウンド信号を採集したサウンド取得機器である場合、前記サウンド取得機器がサウンドを継続して採集するように当該サウンド取得機器を制御するステップと、前記所定条件を満たすサウンド取得機器が前記モニタ機器とバインディングされた移動機器である場合、前記移動機器が前記監視画面におけるサウンドを発した監視対象の位置に移動するように当該移動機器を制御し、かつ、前記移動機器が前記監視対象の存在する位置でのサウンドを採集するように当該移動機器を制御するステップと、を含む。
【００１１】
本開示の実施例の第２の態様によれば、監視画面サウンド採集装置を提供する。前記装置は、監視画面がモニタ機器のカメラにより採集されたとき、前記監視画面にサウンドを発した監視対象が存在するか否かを検出するように構成される検出モジュールと、前記監視画面に前記サウンドを発した監視対象が存在すると前記検出モジュールにより検出されたとき、サウンド取得機器で採集された前記監視対象のサウンド信号強度が前記モニタ機器で採集された前記監視対象のサウンド信号強度よりも大きいという所定条件を満たす前記サウンド取得機器を特定するように構成される特定モジュールと、前記特定モジュールにより特定されたサウンド取得機器が前記監視対象から発せられたサウンドを採集するように当該サウンド取得機器を制御するように構成される制御モジュールと、を備える。
【００１２】
好ましくは、前記検出モジュールは、前記監視画面にサウンドを発した画像変化要素が存在するか否かを検出するように構成される第１の検出サブモジュール、または、前記監視画面における指定種類対象がサウンドを発したか否かを検出するように構成される第２の検出サブモジュール、または、検出機器からレポートされた指定指標に基づいて、前記監視画面にサウンドを発した監視対象が存在するか否かを検出するように構成される第３の検出サブモジュールを有し、前記画像変化要素は、前記監視画面に入っている監視対象、あるいは、口形の変化がある監視対象を含み、前記指定種類対象は、ドア、窓及び家電製品のうちの少なくとも１つを含み、前記検出機器は、前記モニタ機器とバインディングされた、前記指定指標をモニタリングするための機器であり、前記指定指標は、オン・オフ状態、空気品質パラメータ、温度、熱源変化パラメータあるいは生理特徴パラメータである。
【００１３】
好ましくは、前記特定モジュールは、前記モニタ機器で採集された前記監視画面に対応するサウンドが所定サウンド閾値よりも小さいか否かを検出するように構成される第４の検出サブモジュールと、前記モニタ機器で採集された前記監視画面に対応するサウンドが前記所定サウンド閾値よりも小さいと前記第４の検出サブモジュールにより検出されたとき、前記所定条件を満たすサウンド取得機器を特定するように構成される第１の特定サブモジュールと、を有する。
【００１４】
好ましくは、前記特定サブモジュールは、前記モニタ機器とバインディングされた全てのサウンド取得機器のうち、前記サウンドを発した監視対象に最も近いサウンド取得機器を取得し、取得されたサウンド取得機器を、前記所定条件を満たすサウンド取得機器として特定するように構成される第１の取得サブモジュール、または、前記モニタ機器とバインディングされた全てのサウンド取得機器がサウンドの元となる前記監視対象から発せられたサウンドを採集するように当該サウンド取得機器を制御し、最も強いサウンド信号を採集したサウンド取得機器を、前記所定条件を満たすサウンド取得機器として特定するように構成される第２の取得サブモジュール、または、前記モニタ機器とバインディングされた少なくとも１つの移動機器を、前記所定条件を満たすサウンド取得機器として特定するように構成される第２の特定サブモジュールを有する。
【００１５】
好ましくは、前記第１の取得サブモジュールは、前記モニタ機器とバインディングされた全てのサウンド取得機器のうち、前記サウンドを発した監視対象に最も近いサウンド取得機器を室内測位技術によって特定するように構成される第３の特定サブモジュール、または、サウンドを発した前記監視対象が存在する位置を画像識別技術によって特定し、前記サウンド取得機器のそれぞれに対応するリスリング領域範囲に基づいて、サウンドを発した前記監視対象をリスリングするためのサウンド取得機器を特定するように構成される第４の特定サブモジュールを有する。
【００１６】
好ましくは、前記制御モジュールは、前記所定条件を満たすサウンド取得機器がサウンドを発した監視対象に最も近いサウンド取得機器である場合、前記サウンド取得機器がサウンドを採集するように当該サウンド取得機器を制御するように構成される第１の制御サブモジュールと、前記所定条件を満たすサウンド取得機器が最も強いサウンド信号を採集したサウンド取得機器である場合、前記サウンド取得機器がサウンドを継続して採集するように当該サウンド取得機器を制御するように構成される第２の制御サブモジュールと、前記所定条件を満たすサウンド取得機器が前記モニタ機器とバインディングされた移動機器である場合、前記移動機器が前記監視画面におけるサウンドを発した監視対象の位置に移動するように当該移動機器を制御し、かつ、前記移動機器が前記監視対象の存在する位置でのサウンドを採集するように当該移動機器を制御するように構成される第３の制御サブモジュールと、を有する。
【００１７】
本開示の実施例の第３の態様によれば、監視画面サウンド採集装置を提供する。前記装置は、プロセッサと、前記プロセッサが実行可能な指令を記憶するためのメモリと、を備え、前記プロセッサは、監視画面がモニタ機器のカメラにより採集されたとき、前記監視画面にサウンドを発した監視対象が存在するか否かを検出し、前記監視画面に前記サウンドを発した監視対象が存在する場合、サウンド取得機器で採集された前記監視対象のサウンド信号強度が前記モニタ機器で採集された前記監視対象のサウンド信号強度よりも大きいという所定条件を満たすサウンド取得機器を特定し、前記サウンド取得機器が前記監視対象から発せられたサウンドを採集するように当該サウンド取得機器を制御するように構成される。
本開示の実施例の第４の態様によれば、プロセッサに実行されることにより、本開示の実施例の第１の態様に記載の監視画面サウンド採集方法を実現するプログラムを提供する。
本開示の実施例の第５の態様によれば、本開示の実施例の第４の態様に記載のプログラムが記録された記録媒体を提供する。
【発明の効果】
【００１８】
本開示の実施例による技術案は、以下の格別な作用効果を含むことができる。
【００１９】
サウンドを発した監視対象を監視画面において特定し、監視対象が発したサウンドを採集するように、採集された監視対象のサウンド信号強度がモニタ機器で採集された監視対象のサウンド信号強度よりも大きいサウンド取得機器を制御することにより、モニタ機器が当該モニタ機器から遠く離れている監視対象によって発せられたサウンドを明確に取得できないという課題を解決し、サウンド取得機器が監視対象から発せられたサウンドを採集するようにモニタ機器が制御でき、モニタされる情報がより充実するという効果を奏する。
【００２０】
上述した一般的な記述および後続の詳細な記述は、単に例示的および解釈的なものであり、本発明を制限できるものでないと理解されるべきである。
【図面の簡単な説明】
【００２１】
ここでの図面は、明細書を構成する一部として見なされ、本開示に適した実施例を示し、かつ、明細書の文字記載とともに本開示の仕組みを解釈するために用いられる。
【図１】ある実施例による監視画面サウンド採集方法を示すフローチャートである。
【図２Ａ】ある実施例による監視画面にサウンドを発した監視対象が存在するか否かを検出するフローチャートである。
【図２Ｂ】ある実施例による監視画面にサウンドを発した監視対象が存在するか否かを検出する方法を示すフローチャートである。
【図２Ｃ】ある実施例による監視対象が監視画面に入っている模式図である。
【図２Ｄ】ある実施例による監視画面には口形の変化がある監視対象が存在する模式図である。
【図２Ｅ】ある実施例による監視画面における指定種類対象がサウンドを発した模式図である。
【図２Ｆ】ある実施例による検出機器からレポートされた指定指標に基づいて、監視画面にサウンドを発した監視対象が存在するか否かを検出する模式図である。
【図２Ｇ】ある実施例による所定条件を満たすサウンド取得機器を特定する方法を示すフローチャートである。
【図２Ｈ】ある実施例による最も強いサウンド信号を採集したサウンド取得機器を、所定条件を満たすサウンド取得機器として特定する模式図である。
【図２Ｉ】ある実施例によるモニタ機器とバインディングされた全てのサウンド取得機器のうち、監視画面におけるサウンドを発した監視対象に最も近いサウンド取得機器を取得する方法を示すフローチャートである。
【図２Ｊ】ある実施例によるサウンドを発した監視対象をリスリングするためのサウンド取得機器をモニタ機器が特定する模式図である。
【図２Ｋ】ある実施例によるサウンド取得機器が監視対象から発せられたサウンドを採集するように当該サウンド取得機器を制御する方法を示すフローチャートである。
【図２Ｌ】ある実施例による移動機器が監視画面におけるサウンドを発した監視対象の位置に移動するようにモニタ機器が当該移動機器を制御する模式図である。
【図３】ある実施例による監視画面サウンド採集装置を示すブロック図である。
【図４】別の実施例による監視画面サウンド採集装置を示すブロック図である。
【図５】ある実施例による監視画面のサウンドを採集するためのブロック図である。
【発明を実施するための形態】
【００２２】
次に、実施例を詳細に説明し、例示が図に示されている。以下の記述が図に係る場合、別途にて示さない限り、異なる図面における同じ符号は、同じまたは類似する要素を示す。以下の実施例に記述される実施形態は、本発明と一致する全ての実施形態を代表するとは限らない。逆に、それらは、添付の特許請求の範囲に記載されているように、本発明の一部の局面と一致する装置および方法の例に過ぎない。
【００２３】
図１は、ある実施例による監視画面サウンド採集方法を示すフローチャートである。図１に示すように、当該監視画面サウンド採集方法は、以下のステップを含む。
【００２４】
ステップ１０１では、監視画面がモニタ機器のカメラにより採集されたとき、監視画面にサウンドを発した監視対象が存在するか否かを検出する。
【００２５】
通常のモニタ機器は、監視画面を採集できるだけではなく、監視画面における監視対象が発したサウンドをも採集できる。
【００２６】
ステップ１０２では、監視画面にサウンドを発した監視対象が存在する場合、サウンド取得機器で採集された監視対象のサウンド信号強度がモニタ機器で採集された監視対象のサウンド信号強度よりも大きいという所定条件を満たすサウンド取得機器を特定する。
【００２７】
現在では、モニタ機器は監視画面をきれいに採集できるが、監視画面における監視対象のサウンドに対する採集効果があまり良くなく、例えば、監視画面における監視対象の発したサウンドが非常に微弱であり、または、監視画面における監視対象がモニタ機器から遠く離れているため、当該監視対象の発したサウンドが、モニタ機器により明確に採集されず、ひいては、モニタ機器により自動でフィルタリングされる可能性があり、このとき、所定条件のサウンド取得機器を別途設けて当該監視対象のサウンドを採集する必要がある。
【００２８】
ここで言う所定条件は、サウンド取得機器で採集された監視対象のサウンド信号強度がモニタ機器で採集された監視対象のサウンド信号強度よりも大きいことである。所定条件を満たす場合、当該サウンド取得機器を起動して当該監視対象のサウンドを採集する。
【００２９】
ここで言うサウンド取得機器は、携帯電話、オーディオ、ブルートゥースヘッドフォンといったサウンド採集部材を有する機器である。
【００３０】
ステップ１０３では、サウンド取得機器が監視対象から発せられたサウンドを採集するように当該サウンド取得機器を制御する。
【００３１】
モニタ機器は、監視画面における監視対象がサウンドを発したことを検出するが、監視対象の発したサウンドが微弱過ぎ、または、監視対象がモニタ機器からも遠く離れるため、監視対象の発したサウンドを明確に採集できず、このとき、監視対象が発したサウンドを採集するように、所定条件を満たすサウンド取得機器を制御する。
【００３２】
以上により、本開示の実施例による監視画面サウンド採集方法によれば、サウンドを発した監視対象を監視画面において特定し、監視対象が発したサウンドを採集するように、採集された監視対象のサウンド信号強度がモニタ機器で採集された監視対象のサウンド信号強度よりも大きいサウンド取得機器を制御することにより、モニタ機器が当該モニタ機器から遠く離れている監視対象によって発せられたサウンドを明確に取得できないという課題を解決し、サウンド取得機器が監視対象から発せられたサウンドを採集するようにモニタ機器が制御でき、モニタされる情報がより充実するという効果を奏する。
【００３３】
ある可能な実現方式では、図１におけるステップ１０２をさらにステップ１０２ａ乃至ステップ１０２ｂで置換しても良い。図２Ａは、ある実施例による監視画面にサウンドを発した監視対象が存在するか否かを検出するフローチャートである。図２Ａに示すように、モニタ機器が、監視画面にサウンドを発した監視対象が存在するか否かを検出するとき、以下のステップを含む。
【００３４】
ステップ１０２ａでは、モニタ機器で採集された監視画面に対応するサウンドが所定サウンド閾値よりも小さいか否かを検出する。
【００３５】
監視画面における監視対象の発したサウンドが非常に微弱であり、または、監視画面における監視対象がモニタ機器から遠く離れているとき、当該監視対象の発したサウンドが、モニタ機器により明確に採集されることができない可能性があるので、ここで言う所定サウンド閾値とは、モニタ機器が監視画面に対応するサウンドを明確に採集できるか否かの限界値である。モニタ機器で採集された監視画面に対応するサウンドが所定サウンド閾値よりも小さいことは、モニタ機器が当該監視画面に対応するサウンドを一時に採集できないことを意味する。
【００３６】
ステップ１０２ｂでは、モニタ機器で採集された監視画面に対応するサウンドが所定サウンド閾値よりも小さい場合、所定条件を満たすサウンド取得機器を特定する。
【００３７】
モニタ機器で採集された監視画面に対応するサウンドが所定サウンド閾値よりも小さいことは、モニタ機器が当該監視画面に対応するサウンドを一時に採集できないことを意味するため、所定条件を満たすサウンド取得機器を特定してモニタ機器を替えて当該監視画面に対応するサウンドを採集する必要がある。
【００３８】
以上により、本開示の実施例による監視画面サウンド採集方法によれば、サウンドを発した監視対象を監視画面において特定し、監視対象が発したサウンドを採集するように、採集された監視対象のサウンド信号強度がモニタ機器で採集された監視対象のサウンド信号強度よりも大きいサウンド取得機器を制御することにより、モニタ機器が当該モニタ機器から遠く離れている監視対象によって発せられたサウンドを明確に取得できないという課題を解決し、サウンド取得機器が監視対象から発せられたサウンドを採集するようにモニタ機器が制御でき、モニタされる情報がより充実するという効果を奏する。
【００３９】
また、モニタ機器が監視対象の発したサウンドを明確に採集できないとき、所定条件を満たすサウンド取得機器へ採集指令を送信して、監視対象を採集する旨を当該サウンド取得機器に命令しても良く、当該所定条件は、監視対象に最も近く離れること、または、採集されたサウンド信号が最も強いこと、または、モニタ機器とバインディングされた移動機器であっても良い。
【００４０】
ある可能な実現方式では、図２Ｂは、ある実施例による監視画面にサウンドを発した監視対象が存在するか否かを検出する方法を示すフローチャートである。図２Ｂに示すように、ステップ１０１は、以下の３つの方式を含んでも良い。
【００４１】
第１の方式１０１ａとしては、監視画面にサウンドを発した画像変化要素が存在するか否かを検出し、画像変化要素は、監視画面に入っている監視対象、あるいは、口形の変化がある監視対象を含む。
【００４２】
ここで言う画像変化要素は、監視画面に移動している人または物であっても良いし、人または動物の口の口形変化であっても良い。
【００４３】
図２Ｃは、ある実施例による監視対象が監視画面に入っている模式図である。図２Ｃに示すように、モニタ機器１０で監視される画面には、人１１、猫１２及び犬１３が入っている場合、モニタ機器１０は、人１１、猫１２及び犬１３を監視対象としても良い。図２Ｄは、ある実施例による監視画面には口形の変化がある監視対象が存在する模式図である。図２Ｄに示すように、モニタ機器１０で監視される画面における人１１ａ及び人１１ｂが対話をしている場合、モニタ機器１０は、人１１ａ及び人１１ｂの口形が変化したことを検出したとき、人１１ａ及び人１１ｂを監視対象としても良い。
【００４４】
第２の方式１０１ｂとしては、監視画面における指定種類対象がサウンドを発したか否かを検出し、指定種類対象は、ドア、窓及び家電製品のうちの少なくとも１つを含む。
【００４５】
時には、監視画面におけるドア、窓及び家電製品がサウンドを発し、例えば、誰かがノッキングし、テレビを起動し、ファンを回転するといったことをしたが、監視画面が大きく変化しておらず、よって、ここで言う指定種類対象とは、自身が移動できず、カメラが採集されたサウンドによってサウンドを取得すべき対象を判断する必要があるものである。
【００４６】
図２Ｅは、ある実施例による監視画面における指定種類対象がサウンドを発した模式図である。図２Ｅに示すように、監視画面におけるドア１４がノッキングされ、テレビ１５が起動され、及びファン１６が回転しているとき、全体の監視画面が大きく変化していないが、モニタ機器１０は依然としてノッキングのサウンド、テレビ番組のサウンド、羽回転のサウンドに基づいて、ドア１４、テレビ１５、ファン１６を監視対象と見なしても良い。
【００４７】
第３の方式１０１ｃとしては、検出機器からレポートされた指定指標に基づいて、監視画面にサウンドを発した監視対象が存在するか否かを検出し、検出機器は、モニタ機器とバインディングされた、指定指標をモニタリングするための機器であり、指定指標は、オン・オフ状態、空気品質パラメータ、温度、熱源変化パラメータあるいは生理特徴パラメータである。
【００４８】
監視画面における監視対象の発したサウンドが微弱過ぎる場合、モニタ機器は、検出機器によって、画面におけるどちらの監視対象がサウンドを発したかを判断しても良く、ここで言う検出機器は、監視対象周囲または監視対象に取り付けられて監視対象状態を監視するための検出機器である。
【００４９】
１つの例としては、検出機器を電器のスイッチに取り付けており、電器を起動した場合、検出機器は、起動状態データをモニタ機器へフィードバックし、モニタ機器は、データを受信した後、当該電器を監視対象として特定し、採集指令を、条件を満たしているサウンド取得機器へ送信して、当該電器から発せられたサウンドを採集する旨を、条件を満たしているサウンド取得機器に命令する。もう１つ例としては、検出機器を窓またはドア近傍に取り付けており、窓またはドアが開けられた場合、検出機器は、周囲空気温度が変化したことを感知したとき、温度変化データをモニタ機器へフィードバックし、モニタ機器は、データを受信した後、窓またはドアを監視対象として特定し、採集指令を、条件を満たしているサウンド取得機器へ送信して、当該電器から発せられたサウンドを採集する旨を、条件を満たしているサウンド取得機器に命令する。
【００５０】
図２Ｆは、ある実施例による検出機器からレポートされた指定指標に基づいて、監視画面にはサウンドを発した監視対象が存在するか否かを検出する模式図である。図２Ｆに示すように、監視画面におけるドア１８が開けられた後、ドア１８上方に取り付けられたセンサ１７は、周囲空気温度が変化したことを感知したとき、温度変化データをモニタ機器１０へフィードバックし、モニタ機器１０は、フィードバックデータを受信した後、条件を満たしているサウンド取得機器へ採集指令を送信して、ドア１８の発したサウンドを採集する旨を、命令条件を満たしているサウンド取得機器に命令しても良い。
【００５１】
ある可能な実現方式では、図２Ｇは、ある実施例による所定条件を満たすサウンド取得機器を特定する方法を示すフローチャートである。図２Ｇに示すように、所定条件を満たすサウンド取得機器を特定し、実際の実現時、ステップ１０２ｂは、以下の３つの方式を含んでも良い。
【００５２】
第１の方式１０２ｂ１としては、モニタ機器とバインディングされた全てのサウンド取得機器から、サウンドを発した監視対象に最も近いサウンド取得機器を取得し、取得されたサウンド取得機器を、所定条件を満たすサウンド取得機器として特定する。
【００５３】
所定条件が最も近い距離である場合、モニタ機器は、監視画面によって、サウンドを発した監視対象に最も近いサウンド取得機器を特定し、当該サウンド取得機器を、所定条件を満たすサウンド取得機器として特定しても良い。
【００５４】
第２の方式１０２ｂ２としては、モニタ機器とバインディングされた全てのサウンド取得機器がサウンドの元となる監視対象から発せられたサウンドを採集するように当該サウンド取得機器を制御し、最も強いサウンド信号を採集したサウンド取得機器を、所定条件を満たすサウンド取得機器として特定する。
【００５５】
所定条件が最も強いサウンド信号である場合、モニタ機器は、採集指令を全てのサウンド取得機器へ送信しても良く、当該採集指令は、当該監視画面における監視対象に対してサウンドを採集する旨を全てのサウンド取得機器に命令するために用いられる。全てのサウンド取得機器は、当該採集指令を受信した後、当該監視対象に対してサウンドを採集し始め、採集されたサウンドをモニタ機器へ送信して一括テストを行わせ、モニタ機器は、全てのサウンド取得機器で採集されたサウンドを受信且つテストした後、採集サウンド信号が最も強いサウンド取得機器を特定し、当該サウンド取得機器を、所定条件を満たすサウンド取得機器として特定しても良い。
【００５６】
図２Ｈは、ある実施例による最も強いサウンド信号を採集したサウンド取得機器を、所定条件を満たすサウンド取得機器として特定する模式図である。図２Ｈに示すように、監視画面には、オーディオ１９、ブルートゥースヘッドフォン２０及び携帯電話２１という３つのサウンド取得機器があり、当該監視画面に人１１が入っている場合、モニタ機器１０は、人１１を監視対象として特定した後、オーディオ１９、ブルートゥースヘッドフォン２０及び携帯電話２１へ採集指令を送信しても良く、この３つのサウンド取得機器は、当該採集指令を受信した後、それぞれ人１１が発したサウンドを採集し、採集されたサウンドをモニタ機器１０へ送信し、モニタ機器１０は、この３つのサウンド取得機器で採集されたサウンドをテストして、採集サウンド信号が最も強いブルートゥースヘッドフォン２０を特定し、かつ、ブルートゥースヘッドフォン２０を、所定条件を満たすサウンド取得機器として特定する。
【００５７】
第３の方式１０２ｂ３としては、モニタ機器とバインディングされた少なくとも１つの移動機器を、所定条件を満たすサウンド取得機器として特定する。
【００５８】
モニタ機器は、移動端末、ロボット掃除機、リモコン航空機といった室内に移動便利な移動機器とバインディングしても良く、監視対象がモニタ機器から遠く離れている場合、これらの移動機器を、所定条件を満たすサウンド取得機器として特定する。
【００５９】
ある可能な実現方式では、図２Ｉは、ある実施例によるモニタ機器とバインディングされた全てのサウンド取得機器のうち、監視画面におけるサウンドを発した監視対象に最も近いサウンド取得機器を取得する方法を示すフローチャートである。図２Ｉに示すように、ステップ１０２ｂにおける第１の方式１０２ｂ１は、以下の２つの方式を含んでも良い。
【００６０】
第１の方式１０２ｂ１ａとしては、モニタ機器とバインディングされた全てのサウンド取得機器のうち、サウンドを発した監視対象に最も近いサウンド取得機器を室内測位技術によって特定する。
【００６１】
モニタ機器を複数の部屋に取り付けても良く、全てのモニタ機器を無線または有線ネットワークを介して互いに接続して、室内測位システムを形成し、室内空間での人、動物、電器などの物体に対する監視を図れる。あるモニタ機器の監視画面には、サウンドを発した監視対象が出現しているとき、モニタ機器とバインディングされた全てのサウンド取得機器から、当該監視対象に最も近い１つのサウンド取得機器を特定し、当該サウンド取得機器へ採集指令を送信して、当該監視対象が発したサウンドを採集する旨を当該サウンド取得機器に命令しても良い。
【００６２】
第２の方式１０２ｂ１ｂとしては、サウンドを発した監視対象が存在する位置を画像識別技術によって特定し、サウンド取得機器のそれぞれに対応するリスリング領域範囲に基づいて、サウンドを発した監視対象をリスリングするためのサウンド取得機器を特定する。
【００６３】
サウンド取得機器毎は、それぞれ対応するリスリング領域範囲を有している。全てのサウンド取得機器の監視範囲データをモニタ機器に入力し、モニタ機器は、監視画面によって、サウンドを発した監視対象がどのサウンド取得機器のリスリング領域範囲内にあるかを特定し、当該監視対象を監視するためのサウンド取得機器を特定することができる。
【００６４】
図２Ｊは、ある実施例によるモニタ機器がサウンドを発した監視対象をリスリングするためのサウンド取得機器を特定する模式図である。図２Ｊに示すように、現在の画面には２つの隅があり、この２つの隅にはそれぞれモニタ機器１０ａとモニタ機器１０ｂが取り付けられており、モニタ機器１０ａとモニタ機器１０ｂを、無線または有線ネットワークを介して互いに接続して、室内測位システムを形成する。モニタ機器１０ａで監視される画面にあるテレビ１５が起動された後、モニタ機器１０ａは、監視画面によって、オーディオ１９というたった１つのサウンド取得機器があることを特定するが、テレビ１５がオーディオ１９のリスリング領域範囲１９ａ内に位置しておらず、このとき、モニタ機器１０ａはモニタ機器１０ｂへ問い合わせ指令を送信し、当該問い合わせ指令は、モニタ機器１０ｂで監視される画面には、全てのモニタ機器とバインディングされた移動機器が存在するか否かをモニタ機器１０ｂに問い合わせるために用いられる。モニタ機器１０ｂは問い合わせ指令を受信した後、対応する監視画面において、全てのモニタ機器とバインディングされたロボット掃除機２３を特定し、かつ、ロボット掃除機２３へ移動指令を送信し、モニタ機器１０ａの監視画面に移動する旨をロボット掃除機２３に命令し、モニタ機器１０ａがロボット掃除機２３へ移動指令及び採集指令を送信し、移動指令は、ロボット掃除機２３をテレビ１５の存在する位置近傍に移動し、テレビ１５をロボット掃除機２３のリスリング領域範囲２３ａ内に配置するようにロボット掃除機２３を制御するために用いられ、採集指令は、テレビ１５が発したサウンドを採集するようにロボット掃除機２３を制御するために用いられる。
【００６５】
依然として図２Ｊを参照すると、モニタ機器１０ｂに監視される画面には犬１３が入っている場合、モニタ機器１０ｂは、監視画面によって、携帯電話２１及びロボット掃除機２３という２つのサウンド取得機器があることを特定し、犬１３が携帯電話２１のリスリング領域範囲２１ａ内にあるが、ロボット掃除機２３のリスリング領域範囲２３ａ内に位置しておらず、このとき、モニタ機器１０ｂは、携帯電話２１へ採集指令を送信し、犬１３が発したサウンドを採集する旨を携帯電話２１に命令しても良い。また、より良いサウンド採集効果を得るために、モニタ機器１０ｂは、ロボット掃除機２３へ移動指令及び採集指令を送信しても良く、移動指令は、ロボット掃除機２３を犬１３の存在する位置近傍に移動し、犬１３をロボット掃除機２３のリスリング領域範囲２３ａ内に配置するように、ロボット掃除機２３を制御するために用いられ、採集指令は、犬１３が発したサウンドを採集するようにロボット掃除機２３を制御するために用いられる。
【００６６】
ある可能な実現方式では、図２Ｋは、ある実施例によるサウンド取得機器が監視対象から発せられたサウンドを採集するように当該サウンド取得機器を制御する方法を示すフローチャートである。図２Ｋに示すように、ステップ１０３は、以下の３つの方式を含んでも良い。
【００６７】
第１の方式１０３ａとしては、所定条件を満たすサウンド取得機器がサウンドを発した監視対象に最も近いサウンド取得機器である場合、サウンド取得機器がサウンドを採集するように当該サウンド取得機器を制御する。
【００６８】
モニタ機器は、当該監視画面においてサウンドを発した監視対象に対応するサウンドを一時に採集できないとき、採集指令を、サウンドを発した監視対象に最も近いサウンド取得機器に出しても良く、当該採集指令は、監視対象が発したサウンドを採集する旨を、当該サウンド取得機器に命令するために用いられる。
【００６９】
第２の方式１０３ｂとしては、所定条件を満たすサウンド取得機器が最も強いサウンド信号を採集したサウンド取得機器である場合、サウンド取得機器がサウンドを継続して採集するように当該サウンド取得機器を制御する。
【００７０】
モニタ機器は、当該監視画面においてサウンドを発した監視対象に対応するサウンドを一時に採集できないとき、採集サウンド信号が最も強いサウンド取得機器へ採集指令を送信しても良く、当該採集指令は、監視対象が発したサウンドを採集する旨を、当該採集サウンド信号が最も強いサウンド取得機器に命令するために用いられる。
【００７１】
第３の方式１０３ｃとしては、所定条件を満たすサウンド取得機器がモニタ機器とバインディングされた移動機器である場合、移動機器が監視画面におけるサウンドを発した監視対象の位置に移動するように当該移動機器を制御し、かつ、移動機器が監視対象の存在する位置でのサウンドを採集するように当該移動機器を制御する。
【００７２】
モニタ機器で特定された所定条件を満たすサウンド取得機器がモニタ機器とバインディングされた移動機器である場合、モニタ機器は、当該移動機器へ移動指令及び採集指令を送信しても良く、移動指令は、監視画面におけるサウンドを発した監視対象の位置近傍に移動するように当該移動機器を制御するために用いられてもよく、採集指令は、監視対象が発したサウンドを採集するように移動機器を制御するために用いられる。
【００７３】
図２Ｌは、ある実施例による移動機器が監視画面におけるサウンドを発した監視対象の位置に移動するようにモータ機器が移動機器を制御する模式図である。図２Ｌに示すように、モニタ機器１０は、猫１２が発したサウンドを検出できず、所定条件を満たすサウンド取得機器を、当該モニタ機器１０とバインディングされているリモコン飛行機２２及びロボット掃除機２３として特定した場合、リモコン飛行機２２またはロボット掃除機２３へ移動指令及び採集指令を出しても良く、移動指令は、猫１２の存在する位置近傍に移動するようにリモコン飛行機２２またはロボット掃除機２３を制御するために用いられ、採集指令は、猫１２が発したサウンドを採集するようにリモコン飛行機２２またはロボット掃除機２３を制御するために用いられる。
【００７４】
以下は本開示の装置の実施例であり、本開示の方法の実施例を実行するために用いることができる。本開示の装置の実施例に開示されていない具体的なものは、本開示の方法の実施例を参照すれば良い。
【００７５】
図３は、ある実施例による監視画面サウンド採集装置を示すブロック図である。図３に示すように、当該監視画面サウンド採集装置は、検出モジュール２０１と特定モジュール２０２と制御モジュール２０３とを備えるが、これらに限定されない。
【００７６】
検出モジュール２０１は、監視画面がモニタ機器のカメラにより採集されたとき、監視画面にはサウンドを発した監視対象が存在するか否かを検出するように構成される。
【００７７】
特定モジュール２０２は、監視画面にサウンドを発した監視対象が存在すると当該検出モジュール２０１により検出されたとき、サウンド取得機器で採集された監視対象のサウンド信号強度がモニタ機器で採集された監視対象のサウンド信号強度よりも大きいという所定条件を満たすサウンド取得機器を特定するように構成される。
【００７８】
制御モジュール２０３は、監視対象が発したサウンドを採集するように、当該特定モジュール２０２により特定されたサウンド取得機器を制御するように構成される。
【００７９】
ある可能な実現方式では、図４は、別の実施例による監視画面サウンド採集装置を示すブロック図である。図４に示すように、当該検出モジュール２０１は、第１の検出サブモジュール２０１ａと第２の検出サブモジュール２０１ｂと第３の検出サブモジュール２０１ｃとを備える。
【００８０】
第１の検出サブモジュール２０１ａは、監視画面にサウンドを発した画像変化要素が存在するか否かを検出するように構成され、画像変化要素は、監視画面に入っている監視対象、あるいは、口形の変化がある監視対象を含み、または、
第２の検出サブモジュール２０１ｂは、監視画面における指定種類対象がサウンドを発したか否かを検出するように構成され、指定種類対象は、ドア、窓及び家電製品のうちの少なくとも１つを含み、または、
第３の検出サブモジュール２０１ｃは、検出機器からレポートされた指定指標に基づいて、監視画面にサウンドを発した監視対象が存在するか否かを検出するように構成され、検出機器は、モニタ機器とバインディングされた、指定指標をモニタリングするための機器であり、指定指標は、オン・オフ状態、空気品質パラメータ、温度、熱源変化パラメータあるいは生理特徴パラメータであり、または、
ある可能な実現方式では、依然として図４を参照すると、当該特定モジュール２０２は、第４の検出サブモジュール２０２ａと第１の特定サブモジュール２０２ｂとを有する。
【００８１】
第４の検出サブモジュール２０２ａは、モニタ機器で採集された監視画面に対応するサウンドが所定サウンド閾値よりも小さいか否かを検出するように構成される。
【００８２】
第１の特定サブモジュール２０２ｂは、モニタ機器で採集された監視画面に対応するサウンドが所定サウンド閾値よりも小さいと当該第４の検出サブモジュール２０２ａにより検出されたとき、所定条件を満たすサウンド取得機器を特定するように構成される。
【００８３】
ある可能な実現方式では、依然として図４を参照すると、当該第１の特定サブモジュール２０２ｂは、第１の取得サブモジュール２０２ｂ１と第２の取得サブモジュール２０２ｂ２と第２の特定サブモジュール２０２ｂ３とを有する。
【００８４】
第１の取得サブモジュール２０２ｂ１は、モニタ機器とバインディングされた全てのサウンド取得機器から、サウンドを発した監視対象に最も近いサウンド取得機器を取得し、取得されたサウンド取得機器を、所定条件を満たすサウンド取得機器として特定するように構成される。
【００８５】
第２の取得サブモジュール２０２ｂ２は、モニタ機器とバインディングされた全てのサウンド取得機器がサウンドの元となる監視対象から発せられたサウンドを採集するように当該サウンド取得機器を制御し、最も強いサウンド信号を採集したサウンド取得機器を、所定条件を満たすサウンド取得機器として特定するように構成される。
【００８６】
第２の特定サブモジュール２０２ｂ３は、モニタ機器とバインディングされた少なくとも１つの移動機器を、所定条件を満たすサウンド取得機器として特定するように構成される。
【００８７】
ある可能な実現方式では、依然として図４を参照すると、当該第１の取得サブモジュール２０２ｂ１は、第３の特定サブモジュール２０２ｂ１ａと第４の特定サブモジュール２０２ｂ１ｂとを有する。
【００８８】
第３の特定サブモジュール２０２ｂ１ａは、モニタ機器とバインディングされた全てのサウンド取得機器のうち、サウンドを発した監視対象に最も近いサウンド取得機器を室内測位技術によって特定するように構成され、または、
第４の特定サブモジュール２０２ｂ１ｂは、サウンドを発した監視対象が存在する位置を画像識別技術によって特定し、サウンド取得機器のそれぞれに対応するリスリング領域範囲に基づいて、サウンドを発した監視対象をリスリングするためのサウンド取得機器を特定するように構成される。
【００８９】
ある可能な実現方式では、依然として図４を参照すると、当該制御モジュール２０３は、第１の制御サブモジュール２０３ａと第２の制御サブモジュール２０３ｂと第３の制御サブモジュール２０３ｃとを有する。
【００９０】
第１の制御サブモジュール２０３ａは、所定条件を満たすサウンド取得機器がサウンドを発した監視対象に最も近いサウンド取得機器である場合、サウンド取得機器がサウンドを採集するように当該サウンド取得機器を制御するように構成される。
【００９１】
第２の制御サブモジュール２０３ｂは、所定条件を満たすサウンド取得機器が最も強いサウンド信号を採集したサウンド取得機器である場合、サウンド取得機器がサウンドを継続して採集するように当該サウンド取得機器を制御するように構成される。
【００９２】
第３の制御サブモジュール２０３ｃは、所定条件を満たすサウンド取得機器がモニタ機器とバインディングされた移動機器である場合、移動機器が監視画面におけるサウンドを発した監視対象の位置に移動するように当該移動機器を制御し、かつ、移動機器が監視対象の存在する位置でのサウンドを採集するように当該移動機器を制御するように構成される。
【００９３】
以上により、本開示の実施例による監視画面サウンド採集装置によれば、サウンドを発した監視対象を監視画面において特定し、監視対象が発したサウンドを採集するように、採集された監視対象のサウンド信号強度がモニタ機器で採集された監視対象のサウンド信号強度よりも大きいサウンド取得機器を制御することにより、モニタ機器が当該モニタ機器から遠く離れている監視対象によって発せられたサウンドを明確に取得できないという課題を解決し、サウンド取得機器が監視対象から発せられたサウンドを採集するようにモニタ機器を制御でき、モニタされる情報がより充実するという効果を奏する。
【００９４】
また、モニタ機器は監視対象が発したサウンドを明確に採集できないとき、所定条件を満たすサウンド取得機器へ採集指令を送信して、監視対象に対してサウンドを採集する旨を当該サウンド取得機器に命令しても良く、当該所定条件は、監視対象に最も近いこと、または、採集されたサウンド信号が最も強いこと、または、モニタ機器とバインディングされた移動機器にすることであっても良い。
【００９５】
上記実施例における装置中の各モジュールが操作を実行する具体的な形態は、当該方法に関する実施例において詳細に記述されているため、ここで詳細に説明しない。
【００９６】
本開示のある実施例は、本開示による監視画面サウンド採集方法を実現可能な監視画面サウンド採集装置を提供する。監視画面サウンド採集装置は、プロセッサと、プロセッサが実行可能な指令を記憶するためのメモリと、を備え、プロセッサは、監視画面がモニタ機器のカメラにより採集されたとき、監視画面にはサウンドを発した監視対象が存在するか否かを検出し、監視画面にサウンドを発した監視対象が存在する場合、サウンド取得機器で採集された監視対象のサウンド信号強度がモニタ機器で採集された監視対象のサウンド信号強度よりも大きいという所定条件を満たすサウンド取得機器を特定し、サウンド取得機器が監視対象から発せられたサウンドを採集するように当該サウンド取得機器を制御するように構成される。
【００９７】
図５は、ある実施例による監視画面のサウンドを採集するためのブロック図である。例えば、装置４００は、携帯電話、コンピュータ、デジタル放送端末、メッセージ送受信機器、ゲームコンソール、タブレットデバイス、医療設備、フィットネス機器、ＰＤＡなどであってもよい。
【００９８】
図５を参照すると、装置４００は、以下の１つ又は複数のユニット、すなわち、処理ユニット４０２、メモリ４０４、電源ユニット４０６、マルチメディアユニット４０８、オーディオユニット４１０、入力／出力（Ｉ／Ｏ）インターフェース４１２、センサユニット４１４及び通信ユニット４１６を備えてもよい。
【００９９】
処理ユニット４０２は通常、装置４００の全般操作、例えば、表示、電話発呼、データ通信、カメラ操作及び記録操作に関連する操作を制御する。処理ユニット４０２は、前記方法のステップの全部又は一部を実行するように、指令を実行する１つ又は複数のプロセッサ４１８を備えてもよい。また、処理ユニット４０２は、処理ユニット４０２と他のユニットとの間の相互作用を容易にするように、１つ又は複数のモジュールを備えてもよい。例えば、処理ユニット４０２は、マルチメディアユニット４０８と処理ユニット４０２との間の相互作用を容易にするように、マルチメディアモジュールを備えてもよい。
【０１００】
メモリ４０４は、装置４００での操作をサポートするために、各種別のデータを記憶するように構成される。これらのデータの例示は、装置４００で操作する如何なるアプリケーションプログラムまたは方法の指令、連絡先データ、電話帳データ、メッセージ、ピクチャ、映像などを含む。メモリ４０４は、如何なる種別の揮発性もしくは不揮発性記憶デバイスまたはそれらの組合せ、例えば、静的ランダムアクセスメモリ（ＳＲＡＭ）、電気的に消去可能なプログラマブル読み出し専用メモリ（ＥＥＰＲＯＭ）、消去可能なプログラマブル読み出し専用メモリ（ＥＰＲＯＭ）、プログラマブル読み出し専用メモリ（ＰＲＯＭ）、読み出し専用メモリ（ＲＯＭ）、磁気メモリ、フラッシュメモリ、磁気ディスクまたは光ディスクによって実現されてもよい。
【０１０１】
電源ユニット４０６は、装置４００のユニットのそれぞれに電力を供給する。電源ユニット４０６は、電源管理システム、１つまたは複数の電源、並びに、装置４００用の電力を生成、管理および配分するに関する他のユニットを含んでもよい。
【０１０２】
マルチメディアユニット４０８は、装置４００とユーザとの間に１つの出力インターフェースを供給するスクリーンを備える。一部の実施例では、スクリーンは、液晶ディスプレイ（ＬＣＤ）およびタッチパネル（ＴＰ）を含んでも良い。スクリーンは、タッチパネルを含む場合、ユーザからの入力信号を受信するように、タッチスクリーンとして実現されてもよい。タッチパネルは、タッチ、スライドおよびタッチパネルでのジェスチャーを感知するように、１つまたは複数のタッチセンサを含む。タッチセンサは、タッチまたはスライド動作の境界を感知するだけではなく、タッチまたはスライド操作と関連する持続時間および圧力をさらに検出することができる。一部の実施例では、マルチメディアユニット４０８は、１つのフロントカメラおよび／またはバックカメラを含む。装置４００が操作モード、例えば、撮像モードまたは映像モードにあるとき、フロントカメラおよび／またはバックカメラは、外部のマルチメディアデータを受信することができる。フロントカメラおよびバックカメラのそれぞれは、１つの固定の光学レンズシステムであってもよいし、焦点距離および光学ズーム能力を有するものであってもよい。
【０１０３】
オーディオユニット４１０は、オーディオ信号を出力および／または入力するように構成される。例えば、オーディオユニット４１０は、マイク（ＭＩＣ）を備え、装置４００が操作モード、例えば、発呼モード、記録モードおよび音声識別モードにあるとき、マイクは、外部オーディオ信号を受信するように構成される。受信されたオーディオ信号は、さらに、メモリ４０４に記憶される、または、通信ユニット４１６を介して送信されることができる。一部の実施例では、オーディオユニット４１０は、さらに、オーディオ信号を出力するためのスピーカをさらに含む。
【０１０４】
Ｉ／Ｏインターフェース４１２は、処理ユニット４０２とペリフェラルインターフェースモジュールとの間でインターフェースを供給するものであり、前記ペリフェラルインターフェースモジュールは、キーボード、クリックホイール、ボタンなどであってもよい。これらのボタンは、ホームページボタン、ボリュームボタン、起動ボタンおよびロックボタンを含んでも良いが、それらに限定されない。
【０１０５】
センサユニット４１４は、様々な側面での状態推定を装置４００に供給するための１つまたは複数のセンサを含む。例えば、センサユニット４１４は、装置４００のオン／オフ状態、ユニットの相対位置を検出することができ、例えば、ユニットは、装置４００のディスプレイおよびキーパッドである。センサユニット４１４は、さらに、装置４００もしくは装置４００の１つのユニットの位置変更、ユーザと装置４００との接触の存在もしくは不存在、装置４００の方位または加速／減速および装置４００の温度変化をさらに検出することができる。センサユニット４１４は、如何なる物理的接触もないとき、周辺にある物体の存在を検出するための近接センサを含んでもよい。センサユニット４１４は、さらに、イメージングアプリケーションに使用される光センサ、例えばＣＭＯＳまたはＣＣＤ画像センサを含んでも良い。一部の実施例では、当該センサユニット４１４は、さらに、加速度センサ、ジャイロセンサ、磁気センサ、圧力センサまたは温度センサを含んでも良い。
【０１０６】
通信ユニット４１６は、装置４００と他の機器間の無線または有線方式の通信が便利になるように構成される。装置４００は、通信規格に基づく無線ネットワーク、例えば、ＷｉＦｉ、２Ｇもしくは３Ｇ、またはそれらの組合せにアクセスすることができる。ある実施例では、通信ユニット４１６は、外部ブロードキャスト管理システムからのブロードキャスト信号またはブロードキャスト関連情報をブロードキャストチャネルを介して受信する。ある実施例では、前記通信ユニット４１６は、さらに、短距離通信を容易にするように、ニアフィールド通信（ＮＦＣ）モジュールを含んでも良い。例えば、ＮＦＣモジュールでは、無線周波数識別（ＲＦＩＤ）技術、赤外データ協会（ＩｒＤＡ）技術、超広帯域（ＵＷＢ）技術、ブルートゥース（登録商標）（ＢＴ）技術および他の技術によって実現されてもよい。
【０１０７】
実施例では、装置４００は、上記監視画面サウンド採集方法を実行するための１つ又は複数の特定用途向け集積回路（ＡＳＩＣ）、デジタル信号プロセッサ（ＤＳＰ）、デジタル信号処理デバイス（ＤＳＰＤ）、プログラマブルロジックデバイス（ＰＬＤ）、フィールドプログラマブルゲートアレイ（ＦＰＧＡ）、コントローラ、マイクロコントローラ、マイクロプロセッサまたは他の電子部品によって実現されてもよい。
【０１０８】
実施例では、指令を含む非一時的コンピュータ読み取り可能な記憶媒体、例えば、指令を含むメモリ４０４をさらに提供し、上記指令が装置４００のプロセッサ４１８によって実行されることで上記監視画面サウンド採集方法を実施させることができる。例えば、前記非一時的コンピュータ読み取り可能な記憶媒体は、ＲＯＭ、ランダムアクセスメモリ（ＲＡＭ）、ＣＤ-ＲＯＭ、磁気テープ、フロッピーディスク（登録商標）および光データ記憶機器などであっても良い。
【０１０９】
当業者は、明細書を考慮し、ここに公開された開示を実践した後、本開示の他の実施案を容易に想到する。本願は、本開示の如何なる変形、用途または適応的変化もカバーすることを意図する。これらの変形、用途または適応的変化は、本開示の一般的な仕組みに従い、かつ、本開示に開示されていない当分野における公知常識または慣用技術手段を含む。明細書および実施例は単なる例示と見なされ、本開示の本当の範囲および思想は添付の特許請求の範囲によって与えられる。
【０１１０】
本開示が以上で記載され、且つ図面に示された正確な構造に限定されるものでなく、その要旨を逸脱しない範囲で様々な補正や変更も可能であることは理解されるべきである。本開示の範囲は、添付する特許請求の範囲のみによって限定される。
【０１１１】
本発明は、出願番号がＣＮ２０１５１０４６２７９２．９であり、出願日が２０１５年７月３１日である中国特許出願を基に提出するものであり、当該中国特許出願の優先権を主張し、当該中国特許出願の全ての内容は、参照のため本願に援用される。
【図１】
0006386187.tif 000002
【図２Ａ】
0006386187.tif 000003
【図２Ｂ】
0006386187.tif 000004
【図２Ｃ】
0006386187.tif 000005
【図２Ｄ】
0006386187.tif 000006
【図２Ｅ】
0006386187.tif 000007
【図２Ｆ】
0006386187.tif 000008
【図２Ｇ】
0006386187.tif 000009
【図２Ｈ】
0006386187.tif 000010
【図２Ｉ】
0006386187.tif 000011
【図２Ｊ】
0006386187.tif 000012
【図２Ｋ】
0006386187.tif 000013
【図２Ｌ】
0006386187.tif 000014
【図３】
0006386187.tif 000015
【図４】
0006386187.tif 000016
【図５】
0006386187.tif 000017