(57)【要約】  本開示は、モノのインターネット（ＩｏＴ）に基づく統合デバイスを使用する環境のリアルタイム監視／モニタリングに関する。統合デバイスは、プロセッサに通信可能に接続された、交換可能なセンサ及びプログラム可能な画像／ビデオ・キャプチャ・デバイスを備える。プロセッサは、センサ・データと交換可能なセンサ及びプログラム可能な画像／ビデオ・キャプチャ・デバイスから受信された画像、音声及びビデオに関するデータとを相互に関連付けて、環境における事象の発生を検証する。その後、検証された事象に関する情報が、エッジ・ノード、クラウド・サーバ、ユーザ・デバイス又は発生した事象の効果的モニタリングのために他のセンサ・ノードに送信される。交換可能なセンサとのプログラム可能な画像／ビデオ・キャプチャ・デバイスの統合は、誤った事象検出の可能性を減らすのを助けると共に、様々な事象の検出のための画像キャプチャ・デバイスをユーザがプログラムすることを可能にする。また、様々なセンサの統合は、電気的配線及びデバイス全体の複雑性を低減するのを助ける。
2021508189.tif 000002
【特許請求の範囲】
【請求項１】
環境（１００）における１つ又は複数の事象をモニタ及び制御するためのモノのインターネット（ＩｏＴ）に基づく統合デバイス（１０１）であって、
前記環境（１００）における前記１つ又は複数の事象を検出するための１つ又は複数の交換可能なセンサ（１０３）と、
リアルタイムで前記環境（１００）の１つ又は複数の画像及びビデオをキャプチャするために、前記１つ又は複数の交換可能なセンサ（１０３）とインターフェースされた、少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）と、
前記１つ又は複数の交換可能なセンサ（１０３）の各々及び前記少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）に通信可能に接続されたプロセッサ（１０９）と、
前記プロセッサ（１０９）に通信可能に結合されたメモリであって、実行されると、
センサ・データ（１０３）及び前記１つ又は複数の事象に関する前記１つ又は複数の画像及びビデオに関するデータ（１０６）を、前記１つ又は複数の交換可能なセンサ（１０３）及び前記少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）からそれぞれ受信すること、
前記１つ又は複数の事象の発生を検証するための１つ又は複数の相関ルールを使用して、前記センサ・データ（１０３）と、前記１つ又は複数の画像及びビデオに関する前記データ（１０６）とを相互に関連付けること、及び、
検証されている前記１つ又は複数の事象に関する情報を、エッジ・ノード（１１５Ａ）、クラウド・サーバ（１１５Ｂ）、１つ又は複数のユーザ・デバイス（１１５Ｃ）、或いは前記統合デバイス（１０１）に関連付けられた１つ又は複数のセンサ・ノードのうちの少なくとも１つに送信すること
を前記プロセッサ（１０９）に行わせるプロセッサ実行可能命令を記憶する前記メモリと
を備えた、統合デバイス（１０１）。
【請求項２】
前記プロセッサ（１０９）が、前記１つ又は複数の事象の前記発生を検証するために前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を使用する、請求項１に記載の統合デバイス（１０１）。
【請求項３】
前記１つ又は複数の交換可能なセンサ（１０３）が、煙検出センサ、火災検出センサ、パッシブ赤外線（ＰＩＲ）センサ、空調制御モジュール、温度センサ、湿度センサ、ノイズ・センサ、ドア・センサ、占有検出センサ、光センサ、又は運動センサのうちの少なくとも１つを含む、請求項１に記載の統合デバイス（１０１）。
【請求項４】
ユーザに関連付けられた１つ又は複数のユーザ・デバイスを介して前記環境（１００）に関連付けられた前記ユーザに前記１つ又は複数の事象の前記発生を通知するために前記プロセッサ（１０９）に関連付けられた通知ユニット（１１２）をさらに備える、請求項１に記載の統合デバイス（１０１）。
【請求項５】
前記通知ユニット（１１２）が、１つ又は複数のプログラム可能な発光ダイオード（ＬＥＤ）インジケータ（２１１）、アラーム又はスピーカ（２１３）のうちの少なくとも１つを備える、請求項４に記載の統合デバイス（１０１）。
【請求項６】
前記センサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を前記プロセッサ（１０９）に送信する前に前記センサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を処理するための信号処理ユニットをさらに備える、請求項１に記載の統合デバイス（１０１）。
【請求項７】
前記１つ又は複数の交換可能なセンサ（１０３）によって前記１つ又は複数の事象を検出したときに、前記少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）が起動されて前記環境（１００）の前記１つ又は複数の画像及びビデオをキャプチャするように、前記１つ又は複数の交換可能なセンサ（１０３）及び前記少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）がインターフェースされている、請求項１に記載の統合デバイス（１０１）。
【請求項８】
前記少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）は、前記１つ又は複数の事象の前記１つ又は複数の画像及びビデオをキャプチャしたときに、前記１つ又は複数の事象に関するセンサ・データ（１０３）をキャプチャするように前記１つ又は複数の交換可能なセンサ（１０３）をトリガする、請求項７に記載の統合デバイス（１０１）。
【請求項９】
前記１つ又は複数の相関ルールが、前記クラウド・サーバ（１１５Ｂ）及び前記エッジ・ノード（１１５Ａ）から取得された１つ又は複数の事前に構成された相関ルール、或いは、過去の相関データからの自己学習に基づいてリアルタイムで取得される１つ又は複数の動的相関ルールのうちの少なくとも１つである、請求項１に記載の統合デバイス（１０１）。
【請求項１０】
１つ又は複数の交換可能なセンサ（１０３）のそれぞれを前記プロセッサ（１０９）及び前記メモリとインターフェースするために、及び前記信号処理ユニットから取得されたデジタル情報を分析して前記１つ又は複数の事象の発生を検出するために、前記プロセッサ（１０９）と、信号処理ユニットと、それぞれの前記１つ又は複数の交換可能なセンサ（１０３）とに通信可能に結合された、コプロセッサ（１０７）をさらに備える、請求項１に記載の統合デバイス（１０１）。
【請求項１１】
前記センサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を結合して、前記クラウド・サーバ（１１５Ｂ）に送信するためのＩｏＴゲートウェイとして構成された、請求項１に記載の統合デバイス（１０１）。
【請求項１２】
１つ又は複数の分離されたセンサ及び１つ又は複数の分離されたプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）が前記センサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を前記クラウド・サーバ（１１５Ｂ）に透過的に送信することを容易にするためにＩｏＴゲートウェイとして構成された、請求項１に記載の統合デバイス（１０１）。
【請求項１３】
前記環境（１００）の１つ又は複数の画像、ビデオ、及び音声を記録するために、及び前記記録された１つ又は複数の画像、ビデオ及び音声を前記プロセッサ（１０９）に送信するために、画像及びビデオ・レコーダ（２０３）及び音声レコーダ（２０５）をさらに備える、請求項１に記載の統合デバイス（１０１）。
【請求項１４】
前記環境（１００）において通信インターフェースが利用可能でないときに、前記センサ・データ（１０３）、前記１つ又は複数の画像及びビデオに関する前記データ（１０６）、及び音声に関するデータを前記メモリに記録及び記憶するために、或いは、前記環境（１００）において通信インターフェースが利用可能であるときに、前記記録されたセンサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を前記クラウド・サーバ（１１５Ｂ）に送信するために、データ・レコーダをさらに備える、請求項１に記載の統合デバイス（１０１）。
【請求項１５】
前記１つ又は複数の事象に関する情報を、前記エッジ・ノード（１１５Ａ）、前記クラウド・サーバ（１１５Ｂ）、前記１つ又は複数のユーザ・デバイス（１１５Ｃ）、或いは前記ユーザに関連付けられた１つ又は複数のユーザ・デバイスのうちの少なくとも１つに送信するために、通信ユニット（１１３）をさらに備える、請求項１に記載の統合デバイス（１０１）。
【請求項１６】
前記エッジ・ノード（１１５Ａ）、１つ又は複数の分離されたセンサ、前記クラウド・サーバ（１１５Ｂ）、前記１つ又は複数のユーザ・デバイス（１１５Ｃ）のうちの少なくとも１つと、それぞれの前記１つ又は複数の交換可能なセンサ（１０３）との間でデータを受信及び送信するために、低電力ワイヤレス送受信器をさらに備える、請求項１に記載の統合デバイス（１０１）。
【請求項１７】
前記統合デバイスに電力を供給するための電源（２０１）をさらに備える、請求項１に記載の統合デバイス（１０１）。
【請求項１８】
前記電源（２０１）が、再充電可能バッテリ、発電機、又は交換可能なバッテリのうちの少なくとも１つである、請求項１５に記載の統合デバイス（１０１）。
【請求項１９】
屋内環境（１００）又は屋外環境（１００）のうちの少なくとも１つにおいて屋根に取り付けられた形、壁に取り付けられた形、又はポールに取り付けられた形のうちの少なくとも１つから選択される１つ又は複数の形で配備された、請求項１に記載の統合デバイス（１０１）。
【請求項２０】
前記環境（１００）に配備された１つ又は複数の電子デバイスを通信及び制御するために赤外線（ＩＲ）コントローラをさらに備える、請求項１に記載の統合デバイス（１０１）。
【請求項２１】
環境（１００）における１つ又は複数の事象をモニタ及び制御するための方法であって、
それぞれ、１つ又は複数の交換可能なセンサ（１０３）及び少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）から、センサ・データ（１０３）と前記１つ又は複数の事象に関する１つ又は複数の画像及びビデオに関するデータ（１０６）とを、統合デバイス（１０１）のプロセッサ（１０９）によって、受信することであって、
前記１つ又は複数の交換可能なセンサ（１０３）が、前記環境（１００）における前記１つ又は複数の事象を検出するように構成され、
少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）が、前記１つ又は複数の交換可能なセンサ（１０３）とインターフェースされ、リアルタイムで前記環境（１００）の１つ又は複数の画像及びビデオをキャプチャするように構成された、受信することと、
前記１つ又は複数の事象の発生を検証するための１つ又は複数の相関ルールを使用して、前記センサ・データ（１０３）と、前記１つ又は複数の画像及びビデオに関するデータ（１０６）とを、プロセッサ（１０９）によって、相互に関連付けることと、
検証されている前記１つ又は複数の事象に関する情報を、エッジ・ノード（１１５Ａ）、クラウド・サーバ（１１５Ｂ）、１つ又は複数のユーザ・デバイス（１１５Ｃ）、或いは前記統合デバイス（１０１）に関連付けられた１つ又は複数のセンサ・ノードのうちの少なくとも１つに、前記プロセッサ（１０９）によって、送信することと
を含む、方法。
【請求項２２】
前記１つ又は複数の事象の前記発生が、前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を使用して検証される、請求項２１に記載の方法。
【請求項２３】
前記１つ又は複数の交換可能なセンサ（１０３）が、煙検出センサ、火災検出センサ、パッシブ赤外線（ＰＩＲ）センサ、空調制御モジュール、温度センサ、湿度センサ、ノイズ・センサ、ドア・センサ、占有検出センサ、光センサ、又は運動センサのうちの少なくとも１つを含む、請求項２１に記載の方法。
【請求項２４】
前記統合デバイス（１０１）に関連付けられた通知ユニット（１１２）を使用して、ユーザに関連付けられた１つ又は複数のユーザ・デバイスを介して、前記環境（１００）に関連付けられた前記ユーザに前記１つ又は複数の事象の前記発生を通知することをさらに含む、請求項２１に記載の方法。
【請求項２５】
前記通知ユニット（１１２）が、１つ又は複数のプログラム可能な発光ダイオード（ＬＥＤ）インジケータ（２１１）、アラーム又はスピーカ（２１３）のうちの少なくとも１つを備える、請求項２４に記載の方法。
【請求項２６】
前記センサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を前記プロセッサ（１０９）に送信する前に、前記統合デバイス（１０１）に関連付けられた信号処理ユニットを使用して、前記センサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を処理することをさらに含む、請求項２１に記載の方法。
【請求項２７】
前記１つ又は複数の交換可能なセンサ（１０３）及び前記少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）をインターフェースすることが、前記１つ又は複数の交換可能なセンサ（１０３）によって前記１つ又は複数の事象を検出したときに前記環境（１００）の前記１つ又は複数の画像及びビデオをキャプチャするために前記少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）を起動することを含む、請求項２１に記載の方法。
【請求項２８】
前記１つ又は複数の交換可能なセンサ（１０３）は、前記１つ又は複数の事象の前記１つ又は複数の画像及びビデオをキャプチャしたときに、前記１つ又は複数の事象に関するセンサ・データ（１０３）をキャプチャするように前記少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）によってトリガされる、請求項２７に記載の方法。
【請求項２９】
前記１つ又は複数の相関ルールが、前記クラウド・サーバ（１１５Ｂ）及び前記エッジ・ノード（１１５Ａ）から又はユーザ・デバイス（１１５Ｃ）から取得された１つ又は複数の事前に構成された相関ルール、或いは、過去の相関データから自己学習に基づいてリアルタイムで取得される１つ又は複数の動的相関ルールのうちの少なくとも１つである、請求項２１に記載の方法。
【請求項３０】
１つ又は複数の交換可能なセンサ（１０３）のそれぞれをプロセッサ（１０９）及び前記統合デバイス（１０１）内に構成されたメモリとインターフェースすることと、前記プロセッサ（１０９）に通信可能に結合されたコプロセッサ（１０７）、信号処理ユニット、及びそれぞれの前記１つ又は複数の交換可能なセンサ（１０３）を使用して前記信号処理ユニットから取得された情報を分析することとをさらに含む、請求項２１に記載の方法。
【請求項３１】
前記センサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を結合して、前記クラウド・サーバ（１１５Ｂ）に送信するためのＩｏＴゲートウェイとして前記統合デバイス（１０１）を構成することをさらに含む、請求項２１に記載の方法。
【請求項３２】
１つ又は複数の分離されたセンサと１つ又は複数の分離されたプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）が前記センサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を前記クラウド・サーバ（１１５Ｂ）に送信するのを容易にするためのＩｏＴゲートウェイとして、前記統合デバイス（１０１）を構成することをさらに含む、請求項２１に記載の方法。
【請求項３３】
前記統合デバイス（１０１）に関連付けられた画像及びビデオ・レコーダ（２０３）又は音声レコーダ（２０５）を使用して、前記環境（１００）の１つ又は複数の画像及びビデオを記録することと、前記記録された１つ又は複数の画像及びビデオを前記プロセッサ（１０９）に送信することとをさらに含む、請求項２１に記載の方法。
【請求項３４】
前記統合デバイス（１０１）に関連付けられたデータ・レコーダを使用して、前記センサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を記録することをさらに含み、前記データ・レコーダが、
前記環境（１００）において通信インターフェースが利用可能でないときに、前記記録されたセンサ・データ（１０３）、前記１つ又は複数の画像及びビデオに関する前記データ（１０６）、及び音声に関するデータを前記メモリに記憶すること、或いは、
前記環境（１００）において通信インターフェースが利用可能であるときに、前記記録されたセンサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を前記クラウド・サーバ（１１５Ｂ）に送信すること
を含む、請求項２１に記載の方法。
【請求項３５】
前記統合デバイス（１０１）内に構成された通信ユニット（１１３）を使用して、前記エッジ・ノード（１１５Ａ）及び前記クラウド・サーバ（１１５Ｂ）のうちの少なくとも１つ、或いは前記ユーザに関連付けられた１つ又は複数のユーザ・デバイス（１１５Ｃ）に、前記１つ又は複数の事象に関する情報を送信することをさらに含む、請求項２１に記載の方法。
【請求項３６】
前記統合デバイス（１０１）内に構成された低電力ワイヤレス送受信器を使用して、前記エッジ・ノード（１１５Ａ）、前記クラウド・サーバ（１１５Ｂ）、１つ又は複数の分離されたセンサ、前記１つ又は複数のユーザ・デバイス（１１５Ｃ）のうちの少なくとも１つと、前記１つ又は複数の交換可能なセンサ（１０３）のそれぞれとの間でデータを送信及び受信することをさらに含む、請求項２１に記載の方法。
【請求項３７】
前記統合デバイス（１０１）が、再充電可能バッテリ、発電機、外部電源、又は交換可能なバッテリのうちの少なくとも１つを備える電源（２０１）を使用して、電力を供給される、請求項２１に記載の方法。
【請求項３８】
前記統合デバイス（１０１）が、屋内環境（１００）又は屋外環境（１００）のうちの少なくとも１つにおいて屋根に取り付けられた形、壁に取り付けられた形、又はポールに取り付けられた形のうちの少なくとも１つから選択される１つ又は複数の形において配備された、請求項２１に記載の方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本主題は、一般に、リアルタイム・モニタリング・デバイスに関し、より詳細には、排他的ではないが、環境における１つ又は複数の事象をモニタ及び制御するための、モノのインターネット（ＩｏＴ：Ｉｎｔｅｒｎｅｔ  ｏｆ  Ｔｈｉｎｇｓ）に基づく統合デバイスに関する。
【背景技術】
【０００２】
現在、商業ビルディング、オフィス空間、小売店、小さな店、中位及び最高級の住居、無人のキオスク、通信塔、銀行のＡＴＭ所在地、銀行の支店、保険会社のオフィス、金融機関、官庁又は宝石店のような環境は、これらの周辺における様々な事象をモニタするための、煙センサ、エネルギー・メーター、ドア・センサ、人感センサ、監視カメラなどのような、ある種のモニタリング・デバイスと共に構成される。現在、アラーム及び指示は、モニタリング・デバイスによってローカルに生成され、広域ネットワークを介してリアルタイムで関係者に通知されない。たとえば、人が周りにいない夜間の小売店における火災事象の場合、店の所有者は、火の勢いが強まって初めて、又は火災事象が起きた後に店の所有者が店を訪れた場合にのみ、火災事象について通知されることになる。
【０００３】
さらに、今日存在するほぼすべてのモニタリング・デバイスは、本質的に独立型であり、それらは独立して配備され、複数のワイヤ又はワイヤレス接続を介してコントローラに接続されている。このことは、電気配線及び接続の数の増加とともに、部屋に配備されるセンサの数を増やすことになる。このことは、次いで、高い所有コスト、部屋に多数のセンサが設置されることによる見た目の悪さ、配線の問題による低信頼性、及びさらなる複雑性をもたらすことになる。さらに、現在、モニタリング・デバイスそれぞれのコントローラを介して通信することなしにこれらのモニタリング・デバイスと直接通信するための手段は存在しない。また、これらのモニタリング・デバイスはいずれも、様々な用途のために構成することはできず、したがって、その使用は特定の用途に限定される。
【０００４】
加えて、監視カメラと画像及び／又はビデオ・キャプチャ・デバイスとが環境をモニタするために使用される場合、それらのデバイスによってキャプチャされた画像及びビデオは、分析及び相関のためにエッジ・ノード又はクラウド・サーバに送信される必要がある。しかしながら、定期的にこれらの外部ノードに相当な数の画像及びビデオを送信することは、多くのネットワーク資源を消費することになり、したがって、効率的ではない。
【発明の概要】
【０００５】
本明細書で開示されるのは、環境において１つ又は複数の事象をモニタ及び制御するためのモノのインターネット（ＩｏＴ）に基づく統合デバイスである。本統合デバイスは、環境において１つ又は複数の事象を検出するために、１つ又は複数の交換可能なセンサを備える。統合デバイスはまた、リアルタイムで環境の１つ又は複数の画像及びビデオをキャプチャするために、１つ又は複数の交換可能なセンサとインターフェースされた、少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイスを備える。さらに、統合デバイスは、プロセッサを備える。プロセッサは、それぞれの１つ又は複数の交換可能なセンサ及び少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイスに通信可能に接続される。さらに、統合デバイスは、プロセッサに通信可能に結合されたメモリを備える。メモリは、プロセッサ実行可能命令を記憶し、このプロセッサ実行可能命令は、実行時に、それぞれ１つ又は複数の交換可能なセンサ及び少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイスからセンサ・データと１つ又は複数の事象に関する１つ又は複数の画像及びビデオに関するデータとをプロセッサに受信させる。データを受信したとき、プロセッサは、１つ又は複数の事象の発生を検証するために、１つ又は複数の相関ルールを使用して、センサ・データと、１つ又は複数の画像及びビデオに関するデータとを相互に関連付ける。最後に、プロセッサは、検証されている１つ又は複数の事象に関する情報をエッジ・ノード、クラウド・サーバ、又は統合デバイスに関連付けられた１つ若しくは複数のセンサ・ノード、或いはユーザ・デバイスのうちの少なくとも１つに送信する。
【０００６】
さらに、本開示は、環境における１つ又は複数の事象をモニタ及び制御するための方法を開示する。本方法は、それぞれ１つ又は複数の交換可能なセンサ及び少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイスからセンサ・データと１つ又は複数の事象に関する１つ又は複数の画像及びビデオに関するデータとを統合デバイスのプロセッサによって受信することを含む。１つ又は複数の交換可能なセンサは、環境において１つ又は複数の事象を検出するように構成される。また、少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイスは、１つ又は複数の交換可能なセンサとインターフェースされ、リアルタイムで環境の１つ又は複数の画像及びビデオをキャプチャするように構成される。データを受信したとき、本方法は、１つ又は複数の事象の発生を検証するための１つ又は複数の相関ルールを使用して、センサ・データと、１つ又は複数の画像及びビデオに関するデータとを相互に関連付けることを含む。１つ又は複数の事象の発生の検証に基づいて、本方法は、検証されている１つ又は複数の事象に関する情報をエッジ・ノード、クラウド・サーバ、又は統合デバイスに関連付けられた１つ若しくは複数のセンサ・ノード、或いは１つ又は複数のユーザ・デバイスのうちの少なくとも１つに送信することをさらに含む。
【０００７】
前述の概要は、単に例示であり、決して制限することは意図されていない。例示的な態様、実施例、及び前述の特徴に加えて、さらなる態様、実施例、及び特徴が、図面及び以下の詳細な記述を参照することによって、明らかとなろう。
【０００８】
本開示に組み込まれている及びその一部を構成する、添付の図面は、例示的な実施例を示し、記述とともに、開示される原理を説明する。図において、参照番号の最も左の桁は、その参照番号が最初に現れた図を識別する。類似の特徴及び構成要素を参照するために、同じ番号が、複数の図を通して使用される。本主題の実施例によるシステム及び／又は方法のいくつかの実施例が、単に実例として、以下のような添付の図面に関して、ここで説明される。
【図面の簡単な説明】
【０００９】
【図１】本開示のいくつかの実施例による、環境における１つ又は複数の事象をモニタ及び制御するための統合デバイスを備えた例示的環境を示す図である。
【図２Ａ】本開示のいくつかの実施例による統合デバイスの機能ブロック図を示す。
【図２Ｂ】本開示のいくつかの実施例による統合デバイスの例示的な絵を示す図である。
【図３】本開示のいくつかの実施例による、環境における１つ又は複数の事象をモニタ及び制御するための方法を説明する流れ図である。
【発明を実施するための形態】
【００１０】
本明細書に記載されたいずれのブロック図も、本主題の原理を実施する例示的システムの概念図を表すことが、当業者には理解されるはずである。同様に、いずれのフローチャート、流れ図、状態遷移図、疑似コード、及び同類のものも、そのようなコンピュータ又はプロセッサが明示的に示されていてもいなくても、実質的にコンピュータ可読媒体によって表され得る及びコンピュータ又はプロセッサによって実行され得る様々なプロセスを表すことが理解されよう。
【００１１】
本明細書において、「例示的」という用語は、「実例、例、又は説明の役割を果たすこと」を意味するために本明細書で使用される。「例示的」として本明細書に記載された本主題の実施例又は実装形態は、必ずしも他の実施例より好ましい又は有利なものとして解釈されるべきではない。
【００１２】
本開示は、様々な修正形態及び代替形態が可能であるが、本開示の特定の実施例が、実例として図に示されており、詳しく後述される。しかしながら、開示されている特定の形態に本開示を制限することは意図されておらず、そうではなくて、本開示は、本開示の範囲内にあるすべての修正形態、同等物、及び代替を含むものであることを理解されたい。
【００１３】
「備える」、「備えている」、「含む」という用語、又は他の任意のその変化形は、非排他的包含を含むことを意図されており、構成要素又はステップのリストを含むセットアップ、デバイス又は方法は、それらの構成要素又はステップのみを含むのではなく、明示的に列挙されていない或いはそのようなセットアップ又はデバイス又は方法に固有の他の構成要素又はステップを含み得る。言い換えれば、「・・・を備える」によって続けられるシステム又は装置内の１つ又は複数の要素は、さらなる制約がなければ、システム又は方法における他の要素又は追加の要素の存在を排除しない。
【００１４】
本開示は、プログラム可能な画像／ビデオ・キャプチャ・デバイス、煙検出センサ、パッシブ赤外線（ＰＩＲ：Ｐａｓｓｉｖｅ  Ｉｎｆｒａｒｅｄ）センサ、アラーム、空調ＩＲコントローラ、ＩＲコード学習装置、低電力ワイヤレス（ＬＰＷ：Ｌｏｗ  Ｐｏｗｅｒ  Ｗｉｒｅｌｅｓｓ）アクセス・ポイント、温度センサ、基本ネットワーク・ビデオ・レコーダ（ＮＶＲ：Ｎｅｔｗｏｒｋ  Ｖｉｄｅｏ  Ｒｅｃｏｒｄｅｒ）、湿度センサ、光レベル検出センサ、ノイズ検出センサ、マイクロフォン及びスピーカ、並びに単一ユニット内の他の類似のセンサなど、様々な事象モニタリング・センサとコントローラとの機能を統合するＩｏＴセンサである、統合デバイスに関する。
【００１５】
一実施例において、統合デバイスは、構成可能な論理を使用して、１つのコントローラによって制御される単一センサ組立部品に前述の事象モニタリング・センサのそれぞれを統合することができる。プログラム可能な画像／ビデオ・キャプチャ・デバイスは、プログラム可能な画像／ビデオ・キャプチャ・デバイスでの様々な画像分析機能を統合することによって、スマートにされ得る。さらに、各通信インターフェース、コントローラ機能性、センサ及びアクチュエータは、統合デバイス内に統合され、それにより、所有及び配備のコストを削減し、信頼性を向上させ、センサの設置及びコミッショニングを可能にし、環境の美観を大きく改善する。
【００１６】
本開示は、環境の画像のキャプチャ及び／又はビデオの記録に加えて、プログラム可能な画像／ビデオ・キャプチャ・デバイスが、ドア・センサ、煙センサ、火災センサ、占有センサ及び他の類似のセンサのように動作することができるように、少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイスをセンサ組立部品と統合するコンセプトを開示する。事象モニタリング・センサによって検出された事象は、プログラム可能な画像／ビデオ・キャプチャ・デバイスによって記録された画像及び／又はビデオに基づいて、相互に点検され得るので、このコンセプトは、センサ組立部品の性能を証明し、信頼性を向上させる。たとえば、煙センサが環境における煙の存在の検出に失敗した場合でも、プログラム可能な画像／ビデオ・キャプチャ・デバイスは、プログラム可能な画像／ビデオ・キャプチャ・デバイスにおいて構成された画像分析に基づいて、煙の存在を検出することができる。
【００１７】
本開示の実施例の以下の詳細な説明において、その一部を形成する、及び本開示が実施され得る例示的な特定の実施例として示される、添付の図面が参照される。これらの実施例は、本開示を当業者が実施できるようにするために十分に詳しく説明されており、他の実施例が使用され得ることと、本開示の範囲を逸脱せずに変更が行われ得ることとを理解されたい。したがって、以下の説明は、制限的な意味で解釈されるべきではない。
【００１８】
図１は、本開示のいくつかの実施例による環境１００における１つ又は複数の事象をモニタ及び制御するための統合デバイス１０１を備えた例示的環境１００を示す。
【００１９】
一実施例において、環境１００は、継続的監視／モニタリングを必要とする、商業ビルディング、オフィス空間、小売店、小さな店、中級及び最高級住居、無人のキオスク、通信塔、銀行のＡＴＭ、保険会社のオフィス、金融機関、官庁、宝石店などの任意のユーザ周辺でもよい。一実装形態において、統合デバイス１０１は、環境１００において生じる１つ又は複数の事象をモニタ及び制御するための１つ又は複数の交換可能なセンサ１０３を備える。一実例として、環境１００において生じ得る１つ又は複数の事象は、環境１００における火災／煙の発生、環境１００における窃盗、侵入盗、又は侵入、或いは環境１００の通常の状態における任意の予期しない変動を含み得るが、これらに限定されない。さらに、１つ又は複数の交換可能なセンサ１０３は、煙検出センサ、火災検出センサ、パッシブ赤外線（ＰＩＲ）センサ、空調制御モジュール、温度センサ、湿度センサ、ノイズ・センサ、ドア・センサ、占有検出センサ、光センサ、又は運動センサを含み得るが、これらに限定されない。
【００２０】
一実施例において、それぞれの１つ又は複数の交換可能なセンサ１０３は、プロセッサ１０９から１つ又は複数の命令を受信するために統合デバイス１０１内のプロセッサ１０９に通信で接続され得、センサ・データ１０４をプロセッサ１０９に送信する。いくつかの実装形態において、１つ又は複数の交換可能なセンサ１０３は、環境１００のモニタリングの適用分野及び特質に基づいて、統合デバイス１０１から動的に分離及び／又は置換され得る。同様に、ユーザは、環境１００のモニタリングの要件及び特質に基づいて、統合デバイス１０１内の既に存在する１つ又は複数の交換可能なセンサ１０３と１つ又は複数の新しいセンサを動的に添える／追加する、及びインターフェースすることができる。
【００２１】
さらに、統合デバイス１０１は、１つの環境１００の１つ又は複数の画像及びビデオをキャプチャするための少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５を備える。名前が示すように、少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５は、１つ又は複数の所定の動作を実行するようにプログラムされ得る。一実例として、プログラム可能な画像／ビデオ・キャプチャ・デバイス１０５は、環境１００における１つ又は複数の事象の発生を検出するための環境１００の１つ又は複数の画像の画像分析を実行するように構成され得る。統合デバイス１０１内のプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５の統合の利点は、環境１００の１つ又は複数のキャプチャされた画像及びビデオのそれぞれが、統合デバイス１０１自体においてローカルに処理及び分析され得、それにより、サーバなどの計算プラットフォームに１つ又は複数のキャプチャされた画像及びビデオを送信する必要をなくすということである。したがって、統合デバイス１０１においてローカルに画像分析を実行することは、コストの削減と動作の速度の向上とをもたらす。
【００２２】
いくつかの実装形態において、少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５が、１つ又は複数の交換可能なセンサ１０３による１つ又は複数の事象の検出時に、環境１００の１つ又は複数の画像及びビデオをキャプチャするために起動されるように、１つ又は複数の交換可能なセンサ１０３及び少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５はインターフェースされ得る。別法として、少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５は、１つ又は複数の事象の１つ又は複数の画像及びビデオをキャプチャしたときに、１つ又は複数の交換可能なセンサ１０３をトリガして１つ又は複数の事象に関するセンサ・データ１０４をキャプチャすることができる。
【００２３】
一実施例において、プロセッサ１０９は、コプロセッサ１０７に関連付けられる。コプロセッサ１０７は、それぞれの１つ又は複数の交換可能なセンサ１０３からセンサ・データ１０４を受信する責任を負い得る。一実施例において、コプロセッサ１０７は、受信されたセンサ・データ１０４の値に偏差が存在するかを判定するために、受信されたセンサ・データ１０４を分析し、受信されたセンサ・データ１０４の値を１セットの所定の値と比較することができる。
【００２４】
さらに、コプロセッサ１０７は、センサ・データ１０４における偏差を判定したとき、ユーザへの適切なアラーム及び／又は通知を生成する責任を負い得る。一実例として、環境１００において配備された統合デバイス１０１内の温度センサが、環境１００の温度を継続的にモニタし、１分ごとの記録された温度データをコプロセッサ１０７に送信することになると仮定する。続いて、コプロセッサ１０７は、環境１００の温度における偏差を判定するために、受信された温度データを所定の温度値と比較することになる。所定の温度値はセ氏３０度であると仮定する。ここで、記録された温度値が、所定の温度値より大きい、たとえばセ氏３１度である場合、次いで、コプロセッサ１０７は、温度値における偏差を検出することになりし、環境１００における火災、煙、又は空調装置の故障若しくは超高温の可能性を示すために、スピーカ２１３を介してアラーム／サイレンを発することになる、又はユーザに通知を送信する。相互に関連付けられた画像／ビデオは、火災又は煙は存在せず、それは単に空調装置の故障であることを示すことになる。
【００２５】
一実施例において、プロセッサ１０９は、それぞれの１つ又は複数の交換可能なセンサ１０３、コプロセッサ１０７、少なくとも１つのプログラム可能な画像／ビデオ／音声キャプチャ・デバイス１０５及び統合デバイス１０１内の他の構成要素を連係させる責任を負い得る。一部の実装形態では、プロセッサ１０９は、モニタリングの必要な適用分野により少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５を再構成又はプログラムするために使用され得る。
【００２６】
一実例として、最初に少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５が、環境１００のキャプチャされた画像及びビデオを環境１００の所定の画像と比較することによって環境１００における火災の発生を検出することができる画像分析命令で構成されたと仮定する。続いて、少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５が、環境１００への侵入を検出するために追加で構成されなければならない場合、次いで、侵入検出のために必要な画像分析命令が、エッジ・ノード１１５Ａ、クラウド・サーバ１１５Ｂ、１つ又は複数のユーザ・デバイス１１５Ｃ或いはプロセッサ１０９を使用する統合デバイス１０１に関連付けられた１つ又は複数のセンサ・ノードのうちの少なくとも１つを介して、少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス上にプログラム又は構成され得る。一実例として、エッジ・ノード１１５Ａは、組み込まれたエッジ／ゲートウェイ・ノードを含み得、これに限定されない。１つ又は複数のユーザ・デバイス１１５Ｃは、ユーザに関連付けられたパーソナル・コンピュータ、ラップトップ及び／又はスマートフォンを含み得、これに限定されない。一実装形態において、ユーザは、ユーザに関連付けられたスマートフォン又は任意の他のユーザ・デバイス１１５Ｃで実行するモバイル・アプリケーションを介して少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５の構成を修正することによってユーザにとって興味のある１つ又は複数の事象の発生をモニタするために、画像キャプチャ・デバイス１０１を柔軟に修正することができる。
【００２７】
加えて、プロセッサ１０９は、環境１００における任意の事象の発生を検証及び点検するための１つ又は複数の画像及びビデオ１０６に関するデータとセンサ・データ１０４を相互に関連付ける責任を負い得る。環境１００において「火災」の事象が存在すると仮定する。ここで、環境１００において配備された統合デバイス１０１内の温度センサによって取得される、センサ・データ１０４は、高い範囲の温度値を示すことになる。
【００２８】
同様に、少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５によってキャプチャされた１つ又は複数の画像及びビデオは、環境１００における火災の発生を示すことになる。ここで、プロセッサ１０９は、環境１００における火災の発生を検証するために少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５から受信された１つ又は複数の画像及びビデオに関するデータ１０６と温度センサから取得されたセンサ・データ１０４を相互に関連付けることができる。センサ・データ１０４と１つ又は複数の画像及びビデオに関するデータ１０６とを相互に関連付けることによって、プロセッサ１０９は、環境１００の監視／モニタリングの精度を上げ、誤ったアラーム又は通知がユーザに提供される機会をなくす。
【００２９】
一実施例において、通信ユニット１１３は、事象情報１１１のさらなる分析及び記憶のためにエッジ・ノード１１５Ａ、クラウド・サーバ１１５Ｂ又は１つ若しくは複数のユーザ・デバイス１１５Ｃのうちの少なくとも１つに環境１００において生じた事象に関する事象情報１１１を送信する責任を負い得る。事象情報１１１は、発生した事象の名前、事象の発生後に経過した合計時間など、１つ又は複数の事象に関する情報を含む。外部事象が存在しないときでも、センサ・データ１０４及び１つ又は複数の画像／ビデオに関するデータ１０６を含む定期的メッセージ（３０分ごとに１回）が１つ又は複数のエッジ・ノード１１５Ａ、クラウド・サーバ１１５Ｂ、或いは１つ又は複数のユーザ・デバイス１１５Ｃに送信され得ることもまた可能である。一実例として、通信ユニット１１３は、イーサネット（登録商標）ＬＡＮ又はゲートウェイ・インターフェースなどのワイヤード・ネットワーク・インターフェースと、Ｗｉ−Ｆｉ及び／又はＷｉ−Ｆｉホットスポット・インターフェース、ブルートゥース（登録商標）・インターフェース、赤外線インターフェース、特定用途向けの低電力ワイヤレス・インターフェース、及びワイヤレス双方向通信インターフェースの２Ｇ、３Ｇ、４Ｇ又は任意の他の互換性のあるバージョンのうちの１つなどの１つ又は複数のワイヤレス・ネットワーク・インターフェースとを含み得る。いくつかの実装形態において、通信ユニット１１３はまた、エッジ・ノード１１５Ａ、クラウド・サーバ１１５Ｂ、１つ又は複数のユーザ・デバイス１１５Ｃ、或いは統合デバイス１０１に関連付けられた１つ又は複数のセンサ・ノードからプロセッサ１０９に１つ又は複数の命令及び／又は構成詳細を送信するために使用され得る。
【００３０】
一実装形態において、プロセッサ１０９、エッジ・ノード１１５Ａ、クラウド・サーバ１１５Ｂ、１つ又は複数のユーザ・デバイス１１５Ｃ、或いは統合デバイス１０１に関連付けられた１つ又は複数のセンサ・ノードの間のデータ及び／又は命令の送信は、特定用途向けの安全なパケット・サービス又は標準ハイパー・テキスト転送プロトコル保護（ＨＴＴＰＳ：Ｈｙｐｅｒ  Ｔｅｘｔ  Ｔｒａｎｓｆｅｒ  Ｐｒｏｔｏｃｏｌ  Ｓｅｃｕｒｅ）プロトコル又は任意の他のセキュリティ機構によって保護され得る。統合デバイス１０１がＩｏＴゲートウェイ、クラウド・アプリケーション又は任意の他のサード・パーティ・クラウド・アプリケーション及びソフトウェアに接続され得るように、データ及び／又は命令のパケット構造は、オープン標準に基づいて決定され得る。
【００３１】
一実施例において、通知ユニット１１２は、統合デバイス１０１に関連付けられたユーザに又は環境１００に関係している１人又は複数の人に１つ又は複数の事象の発生を通知する責任を負い得る。通知ユニット１１２は、アラーム／サイレン、１つ又は複数の発光ダイオード（ＬＥＤ）インジケータ２１１及びスピーカ２１３を含み得るが、これらに限定されない。
【００３２】
いくつかの実装形態において、統合デバイス１０１は、統合デバイス１０１がＩｏＴゲートウェイの機能もまた果たすように構成され得る。そのようなシナリオでは、環境１００のモニタリングに加えて、統合デバイス１０１はまた、それぞれの１つ又は複数の交換可能なセンサ１０３及びプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５からの１つ又は複数の画像及びビデオに関するデータ１０６とセンサ・データ１０４とを結合することと、次いで、収集されたデータをクラウド・サーバ１１５Ｂと直接通信することとによって、ＩｏＴゲートウェイとして機能し得る。承認された外部センサ（統合デバイス上に物理的に存在しない）が安全な方式で統合デバイス１０１上のＩｏＴゲートウェイを介してクラウド・サーバと通信することもまた可能である。
【００３３】
図２Ａは、本開示のいくつかの実施例による統合デバイス１０１の機能ブロック図を示す。
【００３４】
図２Ａに示すように、それぞれの１つ又は複数の交換可能なセンサ１０３は、コプロセッサ１０７に通信可能に接続される。コプロセッサ１０７は、センサ・データ１０４を１つ又は複数の交換可能なセンサ１０３から受信し、環境１００における１つ又は複数の事象の発生を判定するために、受信されたセンサ・データ１０４を処理する。さらに、コプロセッサ１０７は、センサ・データ１０４を１つ又は複数の画像及びビデオに関するデータ１０６と相互に関連付けるために、プロセッサ１０９に処理されたセンサ・データ１０４を通信し、それにより、１つ又は複数の事象の発生を検証する。
【００３５】
一実施例において、少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５によってキャプチャされた１つ又は複数の画像及びビデオは、画像／ビデオ・プロセッサ２０４によって処理され得、画像／ビデオ・プロセッサ２０４は、１つ又は複数の画像を１つ又は複数の画像及びビデオに関するデジタル情報フォーマットのデータ１０６に変換する。デジタル情報の形である、１つ又は複数の画像及びビデオに関するデータ１０６が、プロセッサ１０９によって受信され、１つ又は複数の事象の発生を検証するためのセンサ・データ１０４と相互に関連付けられる。
【００３６】
一実施例において、統合デバイス１０１は、１つ又は複数の事象の発生を判定するために環境１００における１つ又は複数の音をキャプチャ及び記憶するための、マイクロフォンなどの、音声レコーダ２０５と構成され得る。さらに、音声レコーダ２０５によって記録された１つ又は複数の音は、音声プロセッサ２０７によって処理される。音声プロセッサ２０７は、１つ又は複数の記録された音をデジタル・フォーマットに変換し、これは、続いて、１つ又は複数の事象の発生を判定するためにプロセッサ１０９に送信される。さらに、統合デバイス１０１は、環境１００の１つ又は複数の画像及びビデオを記録するためのビデオ・レコーダと構成され得、続いて、記録された１つ又は複数の画像及びビデオをさらなる分析及び処理のためにプロセッサ１０９に送信するように構成され得る。
【００３７】
一実施例において、統合デバイス１０１は、赤外線（ＩＲ）コントローラ２０２と構成され得る。ＩＲコントローラ２０２は、環境１００内に存在する１つ又は複数の電子デバイス、たとえば、テレビジョン、空調装置など、を操作及び制御するために、交換可能なセンサ１０３及び少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５とインターフェースされ得る。たとえば、統合デバイス１０１がユーザの居間に配備されていると考える。居間はテレビジョン（ＴＶ）を含み、ユーザが居間に入ると直ぐに、ユーザはＴＶの電源を入れると仮定する。その後、ユーザは、ＴＶの電源を切らずに、居間を出ることがある。しかしながら、統合デバイス１０１は、少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５によってキャプチャされた１つ又は複数の画像／ビデオに基づいて、居間にユーザがいないことを判定することになる。続いて、統合デバイス１０１内のコプロセッサ１０７は、ユーザが居間にいないことを示す、信号をＩＲコントローラ２０２に送信する。結果として、ＩＲコントローラ２０２は、ＴＶの電源を自動的に切ることになる。
【００３８】
したがって、環境１００における１つ又は複数の事象のモニタリングに加えて、統合デバイス１０１はまた、ＩＲコントローラ２０２を使用して環境１００における１つ又は複数の他のデバイスを操作及び制御するために使用され得る。さらに、統合デバイス１０１は、環境１００において１つ又は複数のデバイスとのワイヤレス接続を確立するために、及び１つ又は複数のデバイスの動作を制御するために、ゲートウェイ・ネットワーク又はワイヤレス通信インターフェースとインターフェースされ得る。
【００３９】
一実施例において、通知ユニット１１２は、統合デバイス１０１のユーザに又は環境１００に関係している１人又は複数の人に１つ又は複数の事象の発生を通知する責任を負い得る。通知ユニット１１２は、アラーム／サイレン、１つ又は複数の発光ダイオード（ＬＥＤ）インジケータ２１１及びスピーカ２１３を含み得るが、これらに限定されない。一実装形態において、各ＬＥＤインジケータ２１１が１つ又は複数の事象に関連付けられ、１つ又は複数の事象の発生が、ＬＥＤインジケータ２１１が点灯されている色に基づいて、容易に識別され得るように、統合デバイス１０１は、１セットの多色ＬＥＤインジケータ２１１を備え得る。一実施例において、統合デバイス１０１は、アラーム及び／又はスピーカ２１３を使用して１つ又は複数の事象の発生をユーザに知らせることができる。いくつかの実装形態において、ユーザが環境１００の近くにいないときでも、事象の発生に関してユーザが通知を受けるように、通知ユニット１１２は、通信ユニット１１３を介して、１つ又は複数の事象の発生に関してユーザが即座に通知を受けるためにユーザに関連付けられた１つ又は複数のユーザ・デバイスに適切なメッセージを送信することができる。
【００４０】
一実施例において、通信ユニット１１３は、統合デバイス１０１とエッジ・ノード１１５Ａ、クラウド・サーバ１１５Ｂ、１つ若しくは複数のユーザ・デバイス１１５Ｃ又は統合デバイス１０１に関連付けられた１つ若しくは複数のセンサ・ノードとの間でデータ及び／又は命令を交換する責任を負い得る。一実例として、通信ユニット１１３は、イーサネット（登録商標）ＬＡＮ又はゲートウェイ・インターフェースなどの、ワイヤード・ネットワーク・インターフェースと、Ｗｉ−Ｆｉ及び／又はＷｉ−Ｆｉホットスポット・インターフェース、ブルートゥース（登録商標）・インターフェース、赤外線インターフェース、特定用途向けの低電力ワイヤレス・インターフェース、及び、２Ｇ、３Ｇ、４Ｇ若しくは任意の他の互換性のあるバージョンのワイヤレス双方向通信インターフェースのうちの１つなどの、１つ又は複数のワイヤレス・ネットワーク・インターフェースとを含み得る。
【００４１】
一実施例において、それぞれの１つ又は複数の交換可能なセンサ１０３、少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５、コプロセッサ１０７、プロセッサ１０９、通知ユニット１１２、通信ユニット１１３、及び、統合デバイス１０１の他の構成要素は、電源２０１によって電力を供給される。一実装形態において、電源２０１は、統合デバイス１０１の各構成要素に必要な量の電力を適切に分配するように構成され得る。一実例として、電源２０１は、交流（Ａ／Ｃ：Ａｌｔｅｒｎａｔｅ  Ｃｕｒｒｅｎｔ）電力供給装置、直流（ＤＣ：Ｄｉｒｅｃｔ  Ｃｕｒｒｅｎｔ）電力供給装置、再充電可能バッテリ、太陽熱利用の再充電可能バッテリなどを含み得、これらに限定されない。さらに、電源２０１は、充電中の過充電カットオフ値、放電中の不足電圧カットオフ値、高温カットオフなどの様々なカットオフ・パラメータをモニタ及び管理して任意の電気損傷から電源２０１及び統合デバイス１０１を保護するように構成され得る。
【００４２】
本開示の実施例によれば、１つ又は複数の事象の発生を検出するために環境１００の１つ又は複数の画像で実行されることを必要とされる、画像分析が、プログラム可能な画像／ビデオ・キャプチャ・デバイス１０５自体でローカルに実行されるというような方式で、統合デバイス１０１内の少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５が、プログラムされ得る。プログラム可能な画像／ビデオ・キャプチャ・デバイス１０５でローカルに必要な画像分析を実行することによって、統合デバイス１０１は、１つ又は複数のキャプチャされた画像及びビデオで画像分析を実行するための、エッジ・ノード１１５Ａ、クラウド・サーバ１１５Ｂ、１つ又は複数のユーザ・デバイス１１５Ｃ或いは統合デバイス１０１に関連付けられた１つ又は複数のセンサ・ノードなどの中央の場所に１つ又は複数のキャプチャされた画像及びビデオを送信するために必要とされる帯域幅及び他のネットワーク資源の量を減らすことになる。
【００４３】
さらに、環境１００の継続的モニタリングとは対照的に、プログラム可能な画像／ビデオ・キャプチャ・デバイス１０５は、モニタリングの特定の適用分野に関係する１つ又は複数の事象の発生中にのみ環境１００の１つ又は複数の画像及びビデオを検出及びキャプチャするようにプログラムされ得る。たとえば、学校内の各生徒の行動及び動きをモニタするための学校の敷地において構成された統合デバイス１０１を考える。ここで、統合デバイス１０１内のプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５は、学校の稼働時間中にのみ学校環境の１つ又は複数の画像及びビデオをキャプチャするように、並びに学校の非稼働時間中にスリープ・モードのままであるようにカスタマイズされ得る。前述のカスタマイズは、プログラム可能な画像／ビデオ・キャプチャ・デバイス１０５によってキャプチャされる画像及びビデオの数を減らすことになり、それにより、１つ又は複数のキャプチャされた画像及びビデオを記憶するために必要とされる記憶空間を減らし、実行を必要とされる画像分析の量もまた減らすことになる。
【００４４】
前述の実例では、プログラム可能な画像／ビデオ・キャプチャ・デバイス１０５に加えて、１つ又は複数の交換可能なセンサ１０３が、学校環境のモニタリングの精度を上げるために学校環境において構成され得る。ここで、プログラム可能な画像／ビデオ・キャプチャ・デバイス１０５は、１つ又は複数の交換可能なセンサ１０３とインターフェースされ得、１つ又は複数の交換可能なセンサ１０３による事象の検出に応答して学校環境の１つ又は複数の画像及びビデオをキャプチャするように構成され得る。言い換えれば、１つ又は複数の交換可能なセンサ１０３は、プログラム可能な画像／ビデオ・キャプチャ・デバイス１０５を起動して、学校環境における事象の検出に基づいて学校環境の画像及びビデオをキャプチャすることになる。
【００４５】
図２Ｂは、本開示のいくつかの実施例による統合デバイス１０１の透視図を示す。
【００４６】
いくつかの実施例において、統合デバイス１０１は、様々なチップセット製造会社プラットフォームに基づいて様々な物理的構成で設計され得る。以下は、統合デバイス１０１が環境１００において配備され得る物理的構成及び／又は形のうちのいくつかである：
・屋根に取り付けられた統合デバイス１０１（図２Ｂに示すような）
・壁に取り付けられた統合デバイス１０１
・屋内空気品質をモニタするための追加のセンサを有する、壁に取り付けられた統合デバイス１０１。
・スマート・シティ、交通管理及び電気通信サービスの管理のような屋外適用例のためのポールに取り付けられた統合デバイス１０１。
・遠隔の交通信号、作物管理の圃場、及び同類のもののような遠隔の無人の場所のための太陽光発電の統合デバイス１０１。
・特に工学的な、特定用途向けの統合デバイス１０１。
【００４７】
図２Ｂは、屋根に取り付けられた統合デバイス１０１の底面図を示す。１つ又は複数の交換可能なセンサ１０３は、コプロセッサ１０７及びプロセッサ１０９（図２Ｂに示さず）に内部で接続されたセンサの単一組立部品に統合される。環境１００の最大領域が、少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５のカバレッジのもとにあるように、少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５が、統合デバイス１０１のどちらかの側に構成され得る。ＬＥＤインジケータ２１１が、環境１００における事象の発生によりそれらが点灯されるときに、はっきりと見えるように、多色ＬＥＤインジケータ２１１が、統合デバイス１０１の外面に構成され得る。図２Ｂにおける統合デバイス１０１の表現は決定的ではなく、統合デバイス１０１の実際の構造／構成は、交換可能なセンサ１０３の利便性、数、及びタイプ、監視／モニタリングの適用分野、環境１００の特質及び他の要因に基づいて、修正され得る。
【００４８】
図３は、本開示のいくつかの実施例による環境１００における１つ又は複数の事象をモニタ及び制御するための方法を説明する流れ図を示す。
【００４９】
図３に示すように、方法３００は、統合デバイス１０１を使用する環境１００における１つ又は複数の事象をモニタ及び制御するための方法を説明する１つ又は複数のブロックを含む。方法３００は、コンピュータ実行可能命令との一般的関連で記述され得る。一般に、コンピュータ実行可能命令は、特定の機能を実行する又は特定の抽象データ・タイプを実装する、ルーチン、プログラム、オブジェクト、構成要素、データ構造体、手続き、モジュール、及び機能を含み得る。
【００５０】
方法３００が記述されている順番は、制限として解釈されることを意図されておらず、任意の数の記載された方法のブロックが、本方法を実装するために、任意の順番で、結合され得る。加えて、個々のブロックが、本明細書に記載の主題の趣旨及び範囲を逸脱せずに、本方法から削除され得る。さらに、本方法は、任意の適切なハードウェア、ソフトウェア、ファームウェア、又はその組合せにおいて実装され得る。
【００５１】
ブロック３０１において、方法３００は、それぞれ１つ又は複数の交換可能なセンサ１０３及び少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５からセンサ・データ１０４と１つ又は複数の事象に関する１つ又は複数の画像及びビデオに関するデータ１０６とを、統合デバイス１０１のプロセッサ１０９によって、受信することを含む。１つ又は複数の交換可能なセンサ１０３は、環境１００における１つ又は複数の事象の検出のために構成され得る。一実例として、１つ又は複数の交換可能なセンサ１０３は、煙検出センサ、火災検出センサ、パッシブ赤外線（ＰＩＲ）センサ、空調制御モジュール、温度センサ、湿度センサ、ノイズ・センサ、ドア・センサ、占有検出センサ、光センサ、又は運動センサを含み得、これらに限定されない。一実施例において、少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５は、１つ又は複数の交換可能なセンサ１０３とインターフェースされ得、リアルタイムで環境１００の１つ又は複数の画像及びビデオをキャプチャするように構成され得る。
【００５２】
一実装形態において、少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５が、１つ又は複数の交換可能なセンサ１０３によって１つ又は複数の事象を検出したときに、起動されて環境１００の１つ又は複数の画像及びビデオをキャプチャするように、１つ又は複数の交換可能なセンサ１０３及び少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５は、インターフェースされ得る。さらに、少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５は、１つ又は複数の事象の１つ又は複数の画像及びビデオをキャプチャしたときに、１つ又は複数の事象に関するセンサ・データ１０４をキャプチャするように１つ又は複数の交換可能なセンサ１０３をトリガし得る。
【００５３】
一実施例において、１つ又は複数の事象の発生は、１つ又は複数の画像及びビデオに関するデータ１０６を使用して検証され得る。少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５は、統合デバイス１０１が配備された環境１００の１つ又は複数の画像及びビデオを継続的にモニタ及びキャプチャするように構成され得る。「火災」事象が環境１００で生じたと仮定する。ここで、統合デバイス１０１は、環境１００の１つ又は複数の画像及び／又はビデオで画像分析を実行することによって、環境１００における「火災」事象の発生を検出することになる。したがって、統合デバイス１０１は、環境１００の１つ又は複数の画像に基づいて、１つ又は複数の事象の発生を検出及び検証することができる。
【００５４】
ブロック３０３において、方法３００は、１つ又は複数の事象の発生を検証するための１つ又は複数の相関ルールを使用して、センサ・データ１０４と、１つ又は複数の画像及びビデオに関するデータ１０６とを、プロセッサ１０９によって、相互に関連付けることを含む。いくつかの実施例において、１つ又は複数の相関ルールは、エッジ・ノード１１５Ａから、クラウド・サーバ１１５Ｂから或いは１つ又は複数のユーザ・デバイス１１５Ｃを介して取得された１つ又は複数の事前に構成された相関ルールである。他の実施例において、１つ又は複数の相関ルールは、過去の相関データからの自己学習に基づいてリアルタイムで取得される１つ又は複数の動的相関ルールである。
【００５５】
たとえば、統合デバイス１０１内の煙センサは、環境１００における煙又は火災の発生を検出及び点検するように事前に構成された相関ルールで構成され得る。最初に、煙センサは、煙の存在を検出し、環境１００における煙の存在に関してコプロセッサ１０７に通知することができる。続いて、コプロセッサ１０７は、少なくとも１つのプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５によって、リアルタイムでキャプチャされた、環境１００の１つ又は複数の画像／ビデオに基づいて環境１００における煙の存在を点検するために、事前に構成された相関ルールを使用することができる。１つ又は複数の画像／ビデオが環境１００における煙の存在を示すと仮定すると、次いで、環境１００における煙の発生が点検及び確認される。別法として、１つ又は複数の画像／ビデオが火災の存在を示した場合、次いで、火災の発生が環境１００において確認される。前述の状況、すなわち煙又は火災の発生、のそれぞれにおいて、コプロセッサ１０７は、プロセッサ１０９を介してユーザにアラーム／通知を提示することができる。
【００５６】
他方で、１つ又は複数の画像／ビデオが環境における煙と火災との両方の兆候を示さない場合、次いで、コプロセッサ１０７は、環境１００における煙の検出を誤った事象として扱う。前述の実例の実施例は、煙センサとプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５との組合せに限定されない。そうではなく、プログラム可能な画像／ビデオ・キャプチャ・デバイス１０５は、環境１００における様々な事象の発生を点検及び確認するために、統合デバイス１０１内の任意の他の交換可能なセンサ１０３とインターフェースされ得る。したがって、前述の配置は、環境１００における事象の発生に関係する誤ったアラーム又は通知を減らす及び／又はなくすのを助ける。
【００５７】
一実装形態において、プロセッサ１０９はさらに、統合デバイス１０１に関連付けられた通知ユニット１１２を使用して、ユーザに関連付けられた１つ又は複数のユーザ・デバイスを介して、環境１００に関連付けられたユーザに１つ又は複数の事象の発生を通知することを含む。一実例として、通知ユニット１１２は、１つ又は複数のプログラム可能な発光ダイオード（ＬＥＤ）インジケータ２１１、アラーム又はスピーカ２１３のうちの少なくとも１つを含み得るが、これらに限定されない。
【００５８】
ブロック３０５で、方法３００は、検証されている１つ又は複数の事象に関する情報をエッジ・ノード１１５Ａ、クラウド・サーバ１１５Ｂ、１つ又は複数のユーザ・デバイス１１５Ｃ或いは統合デバイス１０１に関連付けられた１つ又は複数のセンサ・ノードのうちの少なくとも１つに、プロセッサ１０９によって、送信することを含む。加えて、統合デバイス１０１は、統合デバイス１０１の１人若しくは複数のユーザに及び／又は環境１００に関係している１人若しくは複数の人に事象情報１１１を送信するように構成され得る。
【００５９】
一実施例において、それぞれの１つ又は複数の交換可能なセンサ１０３は、プロセッサ１０９、並びにプロセッサ１０９及びそれぞれの１つ又は複数の交換可能なセンサ１０３に通信可能に結合されたコプロセッサ１０７を使用する統合デバイス１０１内に構成されたメモリとインターフェースされ得る。コプロセッサ１０７は、それぞれの１つ又は複数の交換可能なセンサ１０３をプロセッサ及びメモリとインターフェースすること、及び１つ又は複数の事象の発生を検出するために信号処理ユニットから取得されたデジタル情報を分析する責任を負い得る。信号処理ユニットは、センサ・データ１０４と１つ又は複数の画像及びビデオに関するデータ１０６とをコプロセッサ１０７に送信する前にセンサ・データ１０４と１つ又は複数の画像及びビデオに関するデータ１０６とを処理するために構成され得る。
【００６０】
一実施例において、１つ又は複数の事象に関する情報が、エッジ・ノード１１５Ａ、クラウド・サーバ１１５Ｂ、統合デバイス１０１に関連付けられた１つ又は複数のセンサ・ノード或いは統合デバイス１０１内に構成された通信ユニット１１３を使用するユーザと関連付けられた１つ又は複数のユーザ・デバイス１１５Ｃのうちの少なくとも１つに送信され得る。さらに、統合デバイス１０１は、記録されたデータをクラウド・サーバ１１５Ｂに送信するために環境１００において利用可能な通信インターフェースが存在しないときに統合デバイス１０１のメモリにセンサ・データ１０４と１つ又は複数の画像及びビデオに関するデータ１０６とを記録及び記憶するように構成され得る、データ・レコーダを備え得る。データ・レコーダに記憶されたデータは、通信インターフェースが環境１００において利用可能になり次第、クラウド・サーバ１１５Ｂに送信され得る。データは、通信インターフェースが利用可能であるときでも、バックアップを目的として同様に記憶され得る。
【００６１】
一実装形態において、記録されたデータは、エッジ・ノード１１５Ａ、クラウド・サーバ１１５Ｂ、１つ又は複数のユーザ・デバイス１１５Ｃ或いは統合デバイス１０１に関連付けられた１つ又は複数のセンサ・ノードのうちの少なくとも１つと、統合デバイス１０１において構成された低電力ワイヤレス送受信器を使用するそれぞれの１つ又は複数の交換可能なセンサ１０３との間で送信され得る。
【００６２】
一実施例において、統合デバイス１０１内のプロセッサ１０９は、統合デバイス１０１内に構成された音声レコーダ２０５を使用して環境１００において音声情報を記録するようにさらに構成され得る。いくつかの実装形態において、統合デバイス１０１は、電源２０１を使用して電力を供給され得る。一実例として、電源２０１は、再充電可能バッテリ、発電機、又は交換可能なバッテリのうちの少なくとも１つを含み得るが、これらに限定されない。
【００６３】
いくつかの訴えにおいて、統合デバイス１０１は、屋内環境又は屋外環境のうちの少なくとも１つにおいて、屋根に取り付けられた形、壁に取り付けられた形、又はポールに取り付けられた形のうちの少なくとも１つから選択される１つ又は複数の形で配備され得る。他の実装形態において、統合デバイス１０１は、センサ・データ１０４と１つ又は複数の画像及びビデオに関するデータ１０６とを結合してクラウド・サーバ１１５Ｂに送信するためのモノのインターネット（ＩｏＴ）ゲートウェイとして構成され得る。したがって、統合デバイス１０１は、ＩｏＴゲートウェイとして、１つ又は複数の分離されたセンサ及び１つ又は複数の分離されたプログラム可能な画像／ビデオ・キャプチャ・デバイス１０５がセンサ・データ１０４と１つ又は複数の画像及びビデオに関するデータ１０６とをクラウド・サーバ１１５Ｂに送信するのを容易にする。
【００６４】
システム・アーキテクチャ：
一実装形態において、プロセッサ１０９は、本開示に従うプログラム構成要素を実行するための少なくとも１つのデータ・プロセッサを含み得る。プロセッサ１０９はまた、本開示の範囲内で必要な、専門の処理ユニット、たとえば、集積システム（バス）コントローラ、メモリ管理制御ユニット、浮動小数点ユニット、グラフィックス処理ユニット、デジタル信号処理ユニットなど、を含み得る。
【００６５】
また、プロセッサ１０９は、通信ユニット１１３に関連付けられたＩ／Ｏインターフェースを介する１つ又は複数のユーザ・デバイスとの通信において配置され得る。Ｉ／Ｏインターフェースは、音声、アナログ、デジタル、ステレオ、ＩＥＥＥ−１３９４、シリアル・バス、ユニバーサル・シリアル・バス（ＵＳＢ：Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）、赤外線、ＰＳ／２、ＢＮＣ、同軸、構成要素、コンポジット、デジタル・ビジュアル・インターフェース（ＤＶＩ：Ｄｉｇｉｔａｌ  Ｖｉｓｕａｌ  Ｉｎｔｅｒｆａｃｅ）、高精細マルチメディア・インターフェース（ＨＤＭＩ（登録商標）：ｈｉｇｈ−ｄｅｆｉｎｉｔｉｏｎ  ｍｕｌｔｉｍｅｄｉａ  ｉｎｔｅｒｆａｃｅ）、無線周波数（ＲＦ：Ｒａｄｉｏ  Ｆｒｅｑｕｅｎｃｙ）アンテナ、Ｓ−ビデオ、ビデオ・グラフィックス・アレイ（ＶＧＡ：Ｖｉｄｅｏ  Ｇｒａｐｈｉｃｓ  Ａｒｒａｙ）、ＩＥＥＥ８０２．ｎ／ｂ／ｇ／ｎ／ｘ、ブルートゥース（登録商標）、セルラ（たとえば、符号分割多重アクセス（ＣＤＭＡ：Ｃｏｄｅ−Ｄｉｖｉｓｉｏｎ  Ｍｕｌｔｉｐｌｅ  Ａｃｃｅｓｓ）、高速パケットアクセス（ＨＳＰＡ＋：Ｈｉｇｈ−Ｓｐｅｅｄ  Ｐａｃｋｅｔ  Ａｃｃｅｓｓ）、グローバル・システム・フォー・モバイル通信（ＧＳＭ（登録商標）：Ｇｌｏｂａｌ  Ｓｙｓｔｅｍ  Ｆｏｒ  Ｍｏｂｉｌｅ  Ｃｏｍｍｕｎｉｃａｔｉｏｎｓ）、ロング・ターム・エボリューション（ＬＴＥ：Ｌｏｎｇ−Ｔｅｒｍ  Ｅｖｏｌｕｔｉｏｎ）などの、これらに限定されない、通信プロトコル／方法を使用し得る。
【００６６】
通信ユニット１１３は、直接接続、イーサネット（登録商標）（たとえば、ツイスト・ペア１０／１００／１０００ベースＴ）、伝送制御プロトコル／インターネット・プロトコル（ＴＣＰ／ＩＰ：Ｔｒａｎｓｍｉｓｓｉｏｎ  Ｃｏｎｔｒｏｌ  Ｐｒｏｔｏｃｏｌ／Ｉｎｔｅｒｎｅｔ  Ｐｒｏｔｏｃｏｌ）、トークン・リング、ＩＥＥＥ８０２．１１ａ／ｂ／ｇ／ｎ／ｘなどを含むが、これらに限定されない、接続プロトコルを使用し得る。一実装形態において、通信ユニット１１３を使用して、統合デバイス１０１は、環境１００において検証されている１つ又は複数の事象に関する情報を送信するためにエッジ・ノード１１５Ａ、クラウド・サーバ１１５Ｂ、１つ又は複数のユーザ・デバイス１１５Ｃ或いは統合デバイス１０１に関連付けられた１つ又は複数のセンサ・ノードのうちの少なくとも１つと通信し得る。
【００６７】
いくつかの実施例において、プロセッサ１０９は、メモリ（たとえば、ストレージ・インターフェースを介する、ＲＡＭ、又はＲＯＭ）との通信において配置され得る。ストレージ・インターフェースは、シリアル・アドバンスト・テクノロジ・アタッチメント（ＳＡＴＡ：Ｓｅｒｉａｌ  Ａｄｖａｎｃｅｄ  Ｔｅｃｈｎｏｌｏｇｙ  Ａｔｔａｃｈｍｅｎｔ）、ＩＤＥ（Ｉｎｔｅｇｒａｔｅｄ  Ｄｒｉｖｅ  Ｅｌｅｃｔｒｏｎｉｃｓ）、ＩＥＥＥ−１３９４、ユニバーサル・シリアル・バス（ＵＳＢ：Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ）、ファイバ・チャネル、小型コンピュータ用周辺機器インターフェース（ＳＣＳＩ：Ｓｍａｌｌ  Ｃｏｍｐｕｔｅｒ  Ｓｙｓｔｅｍｓ  Ｉｎｔｅｒｆａｃｅ）などの接続プロトコルを使用することによって、メモリに接続することができる。メモリ・ドライブはさらに、ドラム、磁気ディスク・ドライブ、磁気光学ドライブ、光学式ドライブ、独立ディスクの冗長アレイ（ＲＡＩＤ：Ｒｅｄｕｎｄａｎｔ  Ａｒｒａｙ  ｏｆ  Ｉｎｄｅｐｅｎｄｅｎｔ  Ｄｉｓｃ）、ソリッドステート・メモリ・デバイス、ソリッドステート・ドライブなどを含み得る。
【００６８】
さらに、１つ又は複数のコンピュータ可読記憶媒体が、本発明に従う実施例の実装において使用され得る。コンピュータ−可読記憶媒体は、プロセッサ１０９又はコプロセッサ１０７によって読み取り可能な情報又はデータが記憶され得る任意のタイプの物理メモリを指す。したがって、コンピュータ−可読記憶媒体は、本明細書に記載の実施例に従うステップ又はステージをプロセッサに実行させるための命令を含む、１つ又は複数のプロセッサによって実行するための命令を記憶し得る。「コンピュータ可読媒体」という用語は、有形の項目を含み、搬送波及び過渡信号、すなわち、非一時的、を除外すると理解されるべきである。
【００６９】
本開示の実施例の利点が本明細書で説明される。
一実施例において、本開示は、環境において生じる１つ又は複数の事象のリアルタイム・モニタリングのためのモノのインターネット（ＩｏＴ）に基づく統合デバイスを開示する。
【００７０】
一実施例において、本開示の統合デバイスは、プログラム可能な画像／ビデオ・キャプチャ・デバイスを１つ又は複数のセンサと統合し、それにより、センサによって検出された実際の事象の証明を提供する。したがって、統合デバイスは、センサ・データの質を高め、信頼性を向上させ、より優れた価値をユーザに提供する。
【００７１】
一実施例において、統合デバイスにおいて使用されるプログラム可能な画像／ビデオ・キャプチャ・デバイスは、環境の画像の分析を実行して事象の発生を検出するようにローカルに構成することができ、それにより、キャプチャされた画像及びビデオを分析のためにクラウド・サーバ、エッジ・ノード、又は統合デバイスに関連付けられた１つ又は複数のセンサ・ノードに送信する必要性をなくす。
【００７２】
一実施例において、本開示の統合デバイスは、必要とされるモニタリング適用分野に対応しなければならないときにはいつでもユーザが統合デバイスの設計観点から任意のセンサ・ユニットを容易に追加する及び／又は取り除くことを可能にする。
【００７３】
一実施例において、センサ間のデータの相関がより容易であり、自動的アクションが容易に取られ得るように、本開示の統合デバイスは、様々なセンサを統合する。センサ間の相関は、誤ったアラームを減らすのに役立つ。
【００７４】
一実施例において、本開示の統合デバイスは、センサ間の電気配線をなくし／減らし、それにより、デバイスの設置及びコミッショニングを容易にし、環境の監視／モニタリングの信頼性を向上させ、電気的配線及びユーザの保守費用を減らす。
【００７５】
「一実施例」、「実施例」、「複数の実施例」、「その実施例」、「それらの実施例」、「１つ又は複数の実施例」、「いくつかの実施例」、及び「１つの実施例」という用語は、特に明示的な指定のない限り、「発明の１つ又は複数の（しかし、すべてではない）実施例」を意味する。
【００７６】
「含む」、「備える」、「有する」という用語及びその変化形は、特に明示的な指定のない限り、「含むがこれらに限定されない」ことを意味する。
【００７７】
項目の列挙されたリストは、特に明示的な指定のない限り、任意の又はすべての項目が相互に排他的であることを暗示しない。
【００７８】
「一」、「１つの」及び「その」という用語は、特に明示的な指定のない限り、「１つ又は複数の」を意味する。互いに通信しているいくつかの構成要素を有する実施例の記述は、そのような構成要素がすべて必要とされることを暗示しない。反対に、様々な任意選択の構成要素が、本発明の多種多様な可能な実施例を説明するために、記述されている。
【００７９】
単一のデバイス又は品目が本明細書に記載されているとき、複数のデバイス／品目（それらが協力していてもいなくても）が単一のデバイス／品目の代わりに使用され得ることは容易に明らかとなろう。同様に、複数のデバイス又は品目が本明細書に記載されているとき（それらが協力していてもいなくても）、単一デバイス／品目が複数のデバイス又は品目の代わりに使用されてもよく、或いは、異なる数のデバイス／品目が、示されている数のデバイス又はプログラムの代わりに、使用されてもよいことが容易に明らかとなろう。別法として、デバイスの機能性及び／又は特徴は、そのような機能性／特徴を有するものとして明示的に記述された１つ又は複数の他のデバイスによって実施され得る。したがって、本発明の他の実施例は、デバイス自体を含む必要はない。
【００８０】
最後に、本明細書で使用される言語は、主に読み易さ及び指導を目的として選択されており、本発明の主題を明確に描く又は制限するために選択されていないことがある。したがって、本発明の範囲はこの詳細な説明によって制限されず、そうではなくて、本明細書に基づく出願で公表する特許請求の範囲によって制限されることが意図されている。したがって、本発明の実施例は、例示を意図されており、本発明の範囲を限定することは意図されておらず、本発明の範囲は、以下の特許請求の範囲に明記されている。
【００８１】
様々な態様及び実施例が本明細書で開示されているが、他の態様及び実施例が当業者には明らかとなろう。本明細書で開示される様々な態様及び実施例は、例示を目的としており、以下の特許請求の範囲によって指示されている真の範囲及び趣旨を制限することは意図されていない。
【符号の説明】
【００８２】
１００  環境
１０１  統合デバイス
１０３  交換可能なセンサ
１０４  センサ・データ
１０５  プログラム可能な画像／ビデオ・キャプチャ・デバイス
１０６  画像及びビデオに関するデータ
１０７  コプロセッサ
１０９  プロセッサ
１１１  事象情報
１１２  通知ユニット
１１３  通信ユニット
１１５Ａ  エッジ・ノード
１１５Ｂ  クラウド・サーバ
１１５Ｃ  ユーザ・デバイス
２０１  電源
２０２  ＩＲコントローラ
２０３  ビデオ・レコーダ
２０４  画像／ビデオ・プロセッサ
２０５  音声レコーダ
２０７  音声プロセッサ
２１１  ＬＥＤインジケータ
２１３  スピーカ
【図１】
2021508189.tif 000003
【図２Ａ】
2021508189.tif 000004
【図２Ｂ】
2021508189.tif 000005
【図３】
2021508189.tif 000006
【手続補正書】
【提出日】令和2年10月14日(2020.10.14)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
環境（１００）における１つ又は複数の事象をモニタ及び制御するためのモノのインターネット（ＩｏＴ）に基づく統合デバイス（１０１）であって、
前記環境（１００）における前記１つ又は複数の事象を検出するための１つ又は複数の交換可能なセンサ（１０３）と、
リアルタイムで前記環境（１００）の１つ又は複数の画像及びビデオをキャプチャするために、前記１つ又は複数の交換可能なセンサ（１０３）とインターフェースされた、少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）と、
前記１つ又は複数の交換可能なセンサ（１０３）の各々及び前記少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）に通信可能に接続されたプロセッサ（１０９）と、
前記プロセッサ（１０９）に通信可能に結合されたメモリであって、実行されると、
センサ・データ（１０３）及び前記１つ又は複数の事象に関する前記１つ又は複数の画像及びビデオに関するデータ（１０６）を、前記１つ又は複数の交換可能なセンサ（１０３）及び前記少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）からそれぞれ受信すること、
前記１つ又は複数の事象の発生を検証するための１つ又は複数の相関ルールを使用して、前記センサ・データ（１０３）と、前記１つ又は複数の画像及びビデオに関する前記データ（１０６）とを相互に関連付けること、及び、
前記１つ又は複数の事象の検証の際に、前記１つ又は複数の事象に関する情報を、エッジ・ノード（１１５Ａ）、クラウド・サーバ（１１５Ｂ）、１つ又は複数のユーザ・デバイス（１１５Ｃ）、或いは前記統合デバイス（１０１）に関連付けられた１つ又は複数のセンサ・ノードのうちの少なくとも１つに送信すること
を前記プロセッサ（１０９）に行わせるプロセッサ実行可能命令を記憶する前記メモリと
を備えた、統合デバイス（１０１）。
【請求項２】
前記プロセッサ（１０９）が、前記１つ又は複数の事象の前記発生を検証するために前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を使用する、請求項１に記載の統合デバイス（１０１）。
【請求項３】
前記１つ又は複数の交換可能なセンサ（１０３）が、煙検出センサ、火災検出センサ、パッシブ赤外線（ＰＩＲ）センサ、空調制御モジュール、温度センサ、湿度センサ、ノイズ・センサ、ドア・センサ、占有検出センサ、光センサ、又は運動センサのうちの少なくとも１つを含む、請求項１に記載の統合デバイス（１０１）。
【請求項４】
ユーザに関連付けられた１つ又は複数のユーザ・デバイスを介して前記環境（１００）に関連付けられた前記ユーザに前記１つ又は複数の事象の前記発生を通知するために前記プロセッサ（１０９）に関連付けられた通知ユニット（１１２）をさらに備える、請求項１に記載の統合デバイス（１０１）。
【請求項５】
前記通知ユニット（１１２）が、１つ又は複数のプログラム可能な発光ダイオード（ＬＥＤ）インジケータ（２１１）、アラーム又はスピーカ（２１３）のうちの少なくとも１つを備える、請求項４に記載の統合デバイス（１０１）。
【請求項６】
前記センサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を前記プロセッサ（１０９）に送信する前に前記センサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を処理するための信号処理ユニットをさらに備える、請求項１に記載の統合デバイス（１０１）。
【請求項７】
前記１つ又は複数の交換可能なセンサ（１０３）によって前記１つ又は複数の事象を検出したときに、前記少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）が起動されて前記環境（１００）の前記１つ又は複数の画像及びビデオをキャプチャするように、前記１つ又は複数の交換可能なセンサ（１０３）及び前記少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）がインターフェースされている、請求項１に記載の統合デバイス（１０１）。
【請求項８】
前記少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）は、前記１つ又は複数の事象の前記１つ又は複数の画像及びビデオをキャプチャしたときに、前記１つ又は複数の事象に関するセンサ・データ（１０３）をキャプチャするように前記１つ又は複数の交換可能なセンサ（１０３）をトリガする、請求項７に記載の統合デバイス（１０１）。
【請求項９】
前記１つ又は複数の相関ルールが、前記クラウド・サーバ（１１５Ｂ）及び前記エッジ・ノード（１１５Ａ）から取得された１つ又は複数の事前に構成された相関ルール、或いは、過去の相関データからの自己学習に基づいてリアルタイムで取得される１つ又は複数の動的相関ルールのうちの少なくとも１つである、請求項１に記載の統合デバイス（１０１）。
【請求項１０】
１つ又は複数の交換可能なセンサ（１０３）のそれぞれを前記プロセッサ（１０９）及び前記メモリとインターフェースするために、及び前記信号処理ユニットから取得されたデジタル情報を分析して前記１つ又は複数の事象の発生を検出するために、前記プロセッサ（１０９）と、信号処理ユニットと、それぞれの前記１つ又は複数の交換可能なセンサ（１０３）とに通信可能に結合された、コプロセッサ（１０７）をさらに備える、請求項１に記載の統合デバイス（１０１）。
【請求項１１】
前記センサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を結合して、前記クラウド・サーバ（１１５Ｂ）に送信するためのＩｏＴゲートウェイとして構成された、請求項１に記載の統合デバイス（１０１）。
【請求項１２】
１つ又は複数の分離されたセンサ及び１つ又は複数の分離されたプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）が前記センサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を前記クラウド・サーバ（１１５Ｂ）に透過的に送信することを容易にするためにＩｏＴゲートウェイとして構成された、請求項１に記載の統合デバイス（１０１）。
【請求項１３】
前記環境（１００）の１つ又は複数の画像、ビデオ、及び音声を記録するために、及び前記記録された１つ又は複数の画像、ビデオ及び音声を前記プロセッサ（１０９）に送信するために、画像及びビデオ・レコーダ（２０３）及び音声レコーダ（２０５）をさらに備える、請求項１に記載の統合デバイス（１０１）。
【請求項１４】
前記環境（１００）において通信インターフェースが利用可能でないときに、前記センサ・データ（１０３）、前記１つ又は複数の画像及びビデオに関する前記データ（１０６）、及び音声に関するデータを前記メモリに記録及び記憶するために、或いは、前記環境（１００）において通信インターフェースが利用可能であるときに、前記記録されたセンサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を前記クラウド・サーバ（１１５Ｂ）に送信するために、データ・レコーダをさらに備える、請求項１に記載の統合デバイス（１０１）。
【請求項１５】
前記１つ又は複数の事象に関する情報を、前記エッジ・ノード（１１５Ａ）、前記クラウド・サーバ（１１５Ｂ）、前記１つ又は複数のユーザ・デバイス（１１５Ｃ）、或いは前記ユーザに関連付けられた１つ又は複数のユーザ・デバイスのうちの少なくとも１つに送信するために、通信ユニット（１１３）をさらに備える、請求項１に記載の統合デバイス（１０１）。
【請求項１６】
前記エッジ・ノード（１１５Ａ）、１つ又は複数の分離されたセンサ、前記クラウド・サーバ（１１５Ｂ）、前記１つ又は複数のユーザ・デバイス（１１５Ｃ）のうちの少なくとも１つと、それぞれの前記１つ又は複数の交換可能なセンサ（１０３）との間でデータを受信及び送信するために、低電力ワイヤレス送受信器をさらに備える、請求項１に記載の統合デバイス（１０１）。
【請求項１７】
前記統合デバイスに電力を供給するための電源（２０１）をさらに備える、請求項１に記載の統合デバイス（１０１）。
【請求項１８】
前記電源（２０１）が、再充電可能バッテリ、発電機、又は交換可能なバッテリのうちの少なくとも１つである、請求項１５に記載の統合デバイス（１０１）。
【請求項１９】
屋内環境（１００）又は屋外環境（１００）のうちの少なくとも１つにおいて屋根に取り付けられた形、壁に取り付けられた形、又はポールに取り付けられた形のうちの少なくとも１つから選択される１つ又は複数の形で配備された、請求項１に記載の統合デバイス（１０１）。
【請求項２０】
前記環境（１００）に配備された１つ又は複数の電子デバイスを通信及び制御するために赤外線（ＩＲ）コントローラをさらに備える、請求項１に記載の統合デバイス（１０１）。
【請求項２１】
環境（１００）における１つ又は複数の事象をモニタ及び制御するための方法であって、
それぞれ、１つ又は複数の交換可能なセンサ（１０３）及び少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）から、センサ・データ（１０３）と前記１つ又は複数の事象に関する１つ又は複数の画像及びビデオに関するデータ（１０６）とを、統合デバイス（１０１）のプロセッサ（１０９）によって、受信することであって、
前記１つ又は複数の交換可能なセンサ（１０３）が、前記環境（１００）における前記１つ又は複数の事象を検出するように構成され、
少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）が、前記１つ又は複数の交換可能なセンサ（１０３）とインターフェースされ、リアルタイムで前記環境（１００）の１つ又は複数の画像及びビデオをキャプチャするように構成された、受信することと、
前記１つ又は複数の事象の発生を検証するための１つ又は複数の相関ルールを使用して、前記センサ・データ（１０３）と、前記１つ又は複数の画像及びビデオに関するデータ（１０６）とを、プロセッサ（１０９）によって、相互に関連付けることと、
前記１つ又は複数の事象の検証の際に、前記１つ又は複数の事象に関する情報を、エッジ・ノード（１１５Ａ）、クラウド・サーバ（１１５Ｂ）、１つ又は複数のユーザ・デバイス（１１５Ｃ）、或いは前記統合デバイス（１０１）に関連付けられた１つ又は複数のセンサ・ノードのうちの少なくとも１つに、前記プロセッサ（１０９）によって、送信することと
を含む、方法。
【請求項２２】
前記１つ又は複数の事象の前記発生が、前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を使用して検証される、請求項２１に記載の方法。
【請求項２３】
前記１つ又は複数の交換可能なセンサ（１０３）が、煙検出センサ、火災検出センサ、パッシブ赤外線（ＰＩＲ）センサ、空調制御モジュール、温度センサ、湿度センサ、ノイズ・センサ、ドア・センサ、占有検出センサ、光センサ、又は運動センサのうちの少なくとも１つを含む、請求項２１に記載の方法。
【請求項２４】
前記統合デバイス（１０１）に関連付けられた通知ユニット（１１２）を使用して、ユーザに関連付けられた１つ又は複数のユーザ・デバイスを介して、前記環境（１００）に関連付けられた前記ユーザに前記１つ又は複数の事象の前記発生を通知することをさらに含む、請求項２１に記載の方法。
【請求項２５】
前記通知ユニット（１１２）が、１つ又は複数のプログラム可能な発光ダイオード（ＬＥＤ）インジケータ（２１１）、アラーム又はスピーカ（２１３）のうちの少なくとも１つを備える、請求項２４に記載の方法。
【請求項２６】
前記センサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を前記プロセッサ（１０９）に送信する前に、前記統合デバイス（１０１）に関連付けられた信号処理ユニットを使用して、前記センサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を処理することをさらに含む、請求項２１に記載の方法。
【請求項２７】
前記１つ又は複数の交換可能なセンサ（１０３）及び前記少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）をインターフェースすることが、前記１つ又は複数の交換可能なセンサ（１０３）によって前記１つ又は複数の事象を検出したときに前記環境（１００）の前記１つ又は複数の画像及びビデオをキャプチャするために前記少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）を起動することを含む、請求項２１に記載の方法。
【請求項２８】
前記１つ又は複数の交換可能なセンサ（１０３）は、前記１つ又は複数の事象の前記１つ又は複数の画像及びビデオをキャプチャしたときに、前記１つ又は複数の事象に関するセンサ・データ（１０３）をキャプチャするように前記少なくとも１つのプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）によってトリガされる、請求項２７に記載の方法。
【請求項２９】
前記１つ又は複数の相関ルールが、前記クラウド・サーバ（１１５Ｂ）及び前記エッジ・ノード（１１５Ａ）から又はユーザ・デバイス（１１５Ｃ）から取得された１つ又は複数の事前に構成された相関ルール、或いは、過去の相関データから自己学習に基づいてリアルタイムで取得される１つ又は複数の動的相関ルールのうちの少なくとも１つである、請求項２１に記載の方法。
【請求項３０】
１つ又は複数の交換可能なセンサ（１０３）のそれぞれをプロセッサ（１０９）及び前記統合デバイス（１０１）内に構成されたメモリとインターフェースすることと、前記プロセッサ（１０９）に通信可能に結合されたコプロセッサ（１０７）、信号処理ユニット、及びそれぞれの前記１つ又は複数の交換可能なセンサ（１０３）を使用して前記信号処理ユニットから取得された情報を分析することとをさらに含む、請求項２１に記載の方法。
【請求項３１】
前記センサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を結合して、前記クラウド・サーバ（１１５Ｂ）に送信するためのＩｏＴゲートウェイとして前記統合デバイス（１０１）を構成することをさらに含む、請求項２１に記載の方法。
【請求項３２】
１つ又は複数の分離されたセンサと１つ又は複数の分離されたプログラム可能な画像又はビデオ・キャプチャ・デバイス（１０５）が前記センサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を前記クラウド・サーバ（１１５Ｂ）に送信するのを容易にするためのＩｏＴゲートウェイとして、前記統合デバイス（１０１）を構成することをさらに含む、請求項２１に記載の方法。
【請求項３３】
前記統合デバイス（１０１）に関連付けられた画像及びビデオ・レコーダ（２０３）又は音声レコーダ（２０５）を使用して、前記環境（１００）の１つ又は複数の画像及びビデオを記録することと、前記記録された１つ又は複数の画像及びビデオを前記プロセッサ（１０９）に送信することとをさらに含む、請求項２１に記載の方法。
【請求項３４】
前記統合デバイス（１０１）に関連付けられたデータ・レコーダを使用して、前記センサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を記録することをさらに含み、前記データ・レコーダが、
前記環境（１００）において通信インターフェースが利用可能でないときに、前記記録されたセンサ・データ（１０３）、前記１つ又は複数の画像及びビデオに関する前記データ（１０６）、及び音声に関するデータを前記メモリに記憶すること、或いは、
前記環境（１００）において通信インターフェースが利用可能であるときに、前記記録されたセンサ・データ（１０３）及び前記１つ又は複数の画像及びビデオに関する前記データ（１０６）を前記クラウド・サーバ（１１５Ｂ）に送信すること
を含む、請求項２１に記載の方法。
【請求項３５】
前記統合デバイス（１０１）内に構成された通信ユニット（１１３）を使用して、前記エッジ・ノード（１１５Ａ）及び前記クラウド・サーバ（１１５Ｂ）のうちの少なくとも１つ、或いは前記ユーザに関連付けられた１つ又は複数のユーザ・デバイス（１１５Ｃ）に、前記１つ又は複数の事象に関する情報を送信することをさらに含む、請求項２１に記載の方法。
【請求項３６】
前記統合デバイス（１０１）内に構成された低電力ワイヤレス送受信器を使用して、前記エッジ・ノード（１１５Ａ）、前記クラウド・サーバ（１１５Ｂ）、１つ又は複数の分離されたセンサ、前記１つ又は複数のユーザ・デバイス（１１５Ｃ）のうちの少なくとも１つと、前記１つ又は複数の交換可能なセンサ（１０３）のそれぞれとの間でデータを送信及び受信することをさらに含む、請求項２１に記載の方法。
【請求項３７】
前記統合デバイス（１０１）が、再充電可能バッテリ、発電機、外部電源、又は交換可能なバッテリのうちの少なくとも１つを備える電源（２０１）を使用して、電力を供給される、請求項２１に記載の方法。
【請求項３８】
前記統合デバイス（１０１）が、屋内環境（１００）又は屋外環境（１００）のうちの少なくとも１つにおいて屋根に取り付けられた形、壁に取り付けられた形、又はポールに取り付けられた形のうちの少なくとも１つから選択される１つ又は複数の形において配備された、請求項２１に記載の方法。
【国際調査報告】
2021508189.tif 000007