(57)【要約】【課題】画像解析装置の解析結果を連結し、対象を追跡することが可能な分散型対象追跡システムを提供すること。【解決手段】分散型対象追跡システムは、複数の画像解析装置および複数の画像解析装置に接続されているクラスタ管理サービス装置を含み、各画像解析装置は、対応するリアルタイムビデオストリーム内の対象を解析し、対象を追跡するための解析結果を生成し、クラスタ管理サービス装置は、複数の画像解析装置の各々によって生成される解析結果に従って対象の軌道を形成するための追跡モジュールを含む。【選択図】図1
2020184292.tif 000002
【特許請求の範囲】
【請求項１】
複数の画像解析装置であって、前記複数の画像解析装置の各々は、少なくとも1つの対応するカメラ装置に接続され、前記少なくとも1つの対応するカメラ装置によって送信される少なくとも1つの対応するリアルタイムビデオストリーム内の対象を解析して前記対象の解析結果を生成する、複数の画像解析装置と、
前記複数の画像解析装置に接続されているクラスタ管理サービス装置であって、前記クラスタ管理サービス装置は、前記対象の軌道を生成するために前記複数の画像解析装置の各々によって生成される前記解析結果を連結する、クラスタ管理サービス装置と、
を備える、分散型対象追跡システム。
【請求項２】
前記複数の画像解析装置の各々は、複数の対応するカメラ装置に接続され、前記複数の対応するカメラ装置によって送信される複数の対応するリアルタイムビデオストリーム内の前記対象を解析して前記対象の前記解析結果を生成する、請求項1に記載の分散型対象追跡システム。
【請求項３】
前記複数の画像解析装置の各々は、複数の対応するカメラ装置に接続され、前記複数の対応するカメラ装置によって送信される複数の対応するリアルタイムビデオストリーム内の前記対象を解析して前記対象の対応する副軌道を生成し、前記クラスタ管理サービス装置は、前記対象の軌道を生成するために前記複数の画像解析装置の各々によって生成される前記副軌道を連結する、請求項1に記載の分散型対象追跡システム。
【請求項４】
前記対象は、人であり、前記解析結果は、前記人の顔の特徴を含む、請求項1に記載の分散型対象追跡システム。
【請求項５】
前記対象は、スーツケースであり、前記解析結果は、前記スーツケースの特性を含む、請求項1に記載の分散型対象追跡システム。
【請求項６】
前記分散型対象追跡システムは、前記対象の入力画像に基づいて、前記対象を追跡する、請求項1に記載の分散型対象追跡システム。
【請求項７】
前記複数の画像解析装置は、検出領域内に分散されており、前記検出領域内の特定の対象は、追跡されないように予め決定されている、請求項1に記載の分散型対象追跡システム。
【請求項８】
前記複数の画像解析装置は、検出領域内に分散されており、前記検出領域は駅を含み、駅職員のメンバーは、追跡されないように予め決定されている、請求項1に記載の分散型対象追跡システム。
【請求項９】
前記複数の画像解析装置は、検出領域内に分散されており、特定の対象が前記検出領域内で所定の時間より長く検出されないときには、前記複数の画像解析装置は、前記特定の対象を追跡するのを止める、請求項1に記載の分散型対象追跡システム。
【請求項１０】
前記複数の画像解析装置は、検出領域内に分散されており、特定の対象が前記検出領域内の特定のエリア内に所定の時間より長くとどまるときには、警報が、前記分散型対象追跡システムによって生成される、請求項1に記載の分散型対象追跡システム。
【請求項１１】
第1の複数の画像解析装置であって、前記第1の複数の画像解析装置の各々は、少なくとも1つの第1の対応するカメラ装置に接続されて、前記少なくとも1つの第1の対応するカメラ装置によって送信される少なくとも1つの第1の対応するリアルタイムビデオストリーム内の対象を解析して、前記対象の第1の解析結果を生成する、第1の複数の画像解析装置と、
第2の複数の画像解析装置であって、前記第2の複数の画像解析装置の各々は、少なくとも1つの第2の対応するカメラ装置に接続されて、前記少なくとも1つの第2の対応するカメラ装置によって送信される少なくとも1つの第2の対応するリアルタイムビデオストリーム内の前記対象を解析して、前記対象の第2の解析結果を生成する、第2の複数の画像解析装置と、
前記第1の複数の画像解析装置に接続されている第1のクロスカメラ追跡装置であって、前記第1のクロスカメラ追跡装置は、前記第1の複数の画像解析装置の各々によって生成される前記対象の前記第1の解析結果を連結して、前記対象の第1の副軌道を生成する、第1のクロスカメラ追跡装置と、
前記第2の複数の画像解析装置に接続されている第2のクロスカメラ追跡装置であって、前記第2のクロスカメラ追跡装置は、前記第2の複数の画像解析装置の各々によって生成される前記対象の前記第2の解析結果を連結して、前記対象の第2の副軌道を生成する、第2のクロスカメラ追跡装置と、
前記第1のクロスカメラ追跡装置および前記第2のクロスカメラ追跡装置に接続されているクラスタ管理サービス装置であって、前記クラスタ管理サービス装置は、前記対象の軌道を生成するために前記対象の前記第1の副軌道および前記第2の副軌道を連結する、クラスタ管理サービス装置と、
を備える、分散型対象追跡システム。
【請求項１２】
前記複数の画像解析装置の各々は、複数の対応するカメラ装置に接続されて、前記対象を解析する、請求項11に記載の分散型対象追跡システム。
【請求項１３】
前記分散型対象追跡システムは、前記対象の入力画像に基づいて、前記対象を追跡する、請求項11に記載の分散型対象追跡システム。
【請求項１４】
前記第1の複数の画像解析装置は、第1の検出領域内に分散されており、前記第2の複数の画像解析装置は、第2の検出領域内に分散されており、前記第1の検出領域および前記第2の検出領域内の特定の対象は、追跡されないように予め決定されている、請求項11に記載の分散型対象追跡システム。
【請求項１５】
前記第1の複数の画像解析装置は、第1の検出領域内に分散されており、前記第2の複数の画像解析装置は、第2の検出領域内に分散されており、特定の対象が前記第1の検出領域内でも前記第2の検出領域内でも所定の時間より長く検出されないときには、前記第1の複数の画像解析装置および前記第2の複数の画像解析装置は、前記特定の対象を追跡するのを止める、請求項11に記載の分散型対象追跡システム。
【請求項１６】
前記第1の複数の画像解析装置は、第1の検出領域内に分散されており、前記第2の複数の画像解析装置は、第2の検出領域内に分散されており、特定の対象が特定領域内に所定の時間より長くとどまるときには、警報が、前記分散型対象追跡システムによって生成される、請求項11に記載の分散型対象追跡システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、対象追跡システムに関するものであり、より詳しくは分散型対象追跡システムに関するものである。
【背景技術】
【０００２】
従来、各画像解析装置は、単一のカメラから入力される単一のビデオストリームに基づいて、画像解析を実行し、各画像解析装置は、独立してビデオストリーム内の対象の解析結果を生成し、それゆえ、画像解析装置の解析結果を連結し、対象を追跡することは困難である。このように、当産業分野では、上述した問題を解決するために、より良好な解決法が必要である。
【発明の概要】
【課題を解決するための手段】
【０００３】
本発明の一実施形態では、分散型対象追跡システムが提供され、分散型対象追跡システムは、複数の画像解析装置および複数の画像解析装置に接続されているクラスタ管理サービス装置を備え、各画像解析装置は、対応するリアルタイムビデオストリーム内の対象を解析し、対象を追跡するための解析結果を生成し、クラスタ管理サービス装置は、複数の画像解析装置の各々によって生成される解析結果に従って対象の軌道を形成するための追跡モジュールを含む。
【０００４】
本発明の一実施形態では、分散型対象追跡システムが提供され、分散型対象追跡システムは、複数の画像解析装置であって、複数の画像解析装置の各々は、少なくとも1つの対応するカメラ装置に接続され、少なくとも1つの対応するカメラ装置によって送信される少なくとも1つの対応するリアルタイムビデオストリーム内の対象を解析し、前記対象の解析結果を生成する、複数の画像解析装置と、複数の画像解析装置に接続されているクラスタ管理サービス装置であって、クラスタ管理サービス装置は、複数の画像解析装置の各々によって生成される前記対象の解析結果を連結し、前記対象の軌道を生成する、クラスタ管理サービス装置とを備える。
【０００５】
一実施形態では、複数の画像解析装置の各々は、複数の対応するカメラ装置に接続され、複数の対応するカメラ装置によって送信される複数の対応するリアルタイムビデオストリーム内の対象を解析し、前記対象の解析結果を生成する。
【０００６】
一実施形態では、複数の画像解析装置は、検出領域内に分散されており、特定の対象が検出領域内で所定の時間より長く検出されないときには、複数の画像解析装置は、前記特定の対象を追跡するのを止める。
【０００７】
一実施形態では、複数の画像解析装置は、検出領域内に分散されており、特定の対象が検出領域内の特定のエリア内に所定の時間より長くとどまるときには、警報が、分散型対象追跡システムによって生成される。
【０００８】
本発明の上述したおよび他の特徴および効果をより理解可能にするために、図面を伴ういくつかの実施形態は、以下に詳細に記載されている。
【０００９】
添付図面は、本発明のさらなる理解を提供するために含まれ、この明細書に組み込まれ、この明細書の一部を構成する。図面は、本発明の実施形態を示し、説明とともに本発明の原理を説明するのに有用である。
【図面の簡単な説明】
【００１０】
【図１】本発明の一実施形態に従う分散型対象追跡システムの概略図を示す。
【図２】本発明の一実施形態に従う分散型対象追跡システムの概略図を示す。
【図３】本発明の一実施形態に従う分散型対象追跡システムの概略図を示す。
【図４】本発明の一実施形態に従う分散型対象追跡システムの概略図を示す。
【発明を実施するための形態】
【００１１】
本発明の上述したおよび他の技術的内容、特徴および効果は、図面の好適実施形態を参照し、以下の詳細な説明から明らかになる。しかしながら、以下の実施形態が本発明を制限することを意図しない点に留意されたい。
【００１２】
図1は、本発明の一実施形態に従う分散型対象追跡システムを示す。図1を参照すると、分散型対象追跡システムは、複数の画像解析装置105,106であって、画像解析装置105,106の各々は、カメラ装置101および102によって捕えられる対応するリアルタイムビデオストリーム内の対象を解析し、対象の対応する解析結果を生成する対応する画像解析モジュール105a,105bを備える、複数の画像解析装置105,106と、複数の画像解析装置105,106に接続されているクラスタ管理サービス装置であって、クラスタ管理サービス装置110は、複数の画像解析装置105,106によって生成される対象の解析結果を連結し、対象の軌道を生成するための追跡モジュール110aを備える、クラスタ管理サービス装置とを備える。
【００１３】
一実施形態では、複数の画像解析装置の各々は、複数のカメラ装置に接続され、複数のカメラ装置によって送信される複数のリアルタイムビデオストリーム内の対象を解析し、対象の解析結果を生成する。
【００１４】
一実施形態では、複数の画像解析装置の各々は、複数のカメラ装置に接続され、複数の対応するカメラ装置によって送信される複数のリアルタイムビデオストリーム内の対象を解析し、前記対象の副軌道を生成し、クラスタ管理サービス装置は、複数の画像解析装置の各々によって生成される対象の副軌道を連結し、対象の軌道を生成する。
【００１５】
一実施形態では、対象は人を含み、解析結果は人の顔の特徴を含む。
【００１６】
一実施形態では、対象はスーツケースを含み、解析結果はスーツケースの特性を含む。
【００１７】
一実施形態では、複数の画像解析装置は、検出領域内に分散されており、検出領域内の特定の対象は、追跡されないように予め決定されている。
【００１８】
一実施形態では、検出領域は駅を含み、駅職員は、追跡されないように予め決定されている。
【００１９】
図2は、本発明の一実施形態に従う分散型対象追跡システムを示す。図2を参照すると、分散型対象追跡システムは、複数の画像解析装置205,206であって、画像解析装置205,206の各々は、複数の対応するカメラ装置201,202,203,204に接続され、複数のカメラ装置201,202,203,204によって捕えられる対応するリアルタイムビデオストリーム内の対象を解析し、対象の対応する解析結果を生成する複数の対応する画像解析モジュール205a,205b,206a,206bを備える、複数の画像解析装置205,206と、複数の画像解析装置205,206に接続されているクラスタ管理サービス装置210であって、クラスタ管理サービス装置210は、複数の画像解析装置205,206によって生成される解析結果を連結し、対象の軌道を生成するための追跡モジュール210aを備える、クラスタ管理サービス装置210とを備える。
【００２０】
図3は、本発明の一実施形態に従う分散型対象追跡システムを示す。図3を参照すると、分散型対象追跡システムは、複数の画像解析装置310,311であって、画像解析装置310,311は、カメラ装置301,302,303および304によって捕えられる対応するリアルタイムビデオストリーム内の対象を解析する複数の画像解析モジュール310a,310b,311aおよび311bを備え、画像解析装置310,311の各々は、対象の解析結果を連結し、対象の対応する副軌道を生成するための追跡モジュール310c,311cを備える、複数の画像解析装置310,311と、複数の画像解析装置310,311に接続されているクラスタ管理サービス装置320であって、クラスタ管理サービス装置320は、複数の画像解析装置310,311によって生成される対象の副軌道を連結し、対象の軌道を生成するための追跡モジュール320aを備える、クラスタ管理サービス装置320とを備える。
【００２１】
一実施形態では、分散型対象追跡システムは、複数の検出領域に分割可能である。一実施形態では、各画像解析装置は、顔検出または人間以外の他の対象検出をリアルタイムに実行することができる。一実施形態では、追跡される必要がない対象は除外可能である。例えば、駅において、追跡されるべきではない駅職員を特定および識別することができる。追跡される必要がある特定の対象、例えばスーツケースを特定することもできる。
【００２２】
一実施形態では、検出領域内の特定の対象が所定の時間より長く検出されないときには、複数の画像解析装置は、特定の対象をもはや追跡しない。
【００２３】
一実施形態では、特定の対象が特定領域内に所定の時間より長くとどまり続けるときには、警報を生成することができる。
【００２４】
図4は、本発明の一実施形態に従う分散型対象追跡システムを示す。図4を参照すると、分散型対象追跡システムは、第1の複数の画像解析装置411,412であって、画像解析装置411,412の各々は、複数のカメラ装置401,402によって捕えられる対応するリアルタイムビデオストリーム内の対象を解析し、対象の第1の解析結果を生成する、第1の複数の画像解析装置411,412と、第1の複数の画像解析装置411,412に接続されている第1のクロスカメラ追跡装置431であって、第1のクロスカメラ追跡装置431は、第1の複数の画像解析装置411,412の各々によって生成される対象の第1の解析結果を連結し、対象の第1の副軌道を生成するための追跡モジュール431aを備える、第1のクロスカメラ追跡装置431と、第2の複数の画像解析装置421,422であって、第2の画像解析装置421,422の各々は、複数のカメラ装置403,404によって捕えられる対応するリアルタイムビデオストリーム内の対象を解析し、対象の第2の解析結果を生成する、第2の複数の画像解析装置421,422と、第2の複数の画像解析装置421,422に接続されている第2のクロスカメラ追跡装置432であって、第2のクロスカメラ追跡装置432は、第2の複数の画像解析装置421,422の各々によって生成される対象の第2の解析結果を連結し、対象の第2の副軌道を生成するための追跡モジュール432aを備える、第2のクロスカメラ追跡装置432と、第1のクロスカメラ追跡装置431および第2のクロスカメラ追跡装置432に接続されているクラスタ管理サービス装置440であって、クラスタ管理サービス装置440は、第1の副軌道および第2の副軌道を連結し、対象の軌道を生成するための追跡モジュール440aを備える、クラスタ管理サービス装置440と、を備える。
【００２５】
図4の画像解析装置411,412,421および422の各々が図1、図2または図3の画像解析装置を置換してもよい点に留意されたい。
【００２６】
一実施形態では、分散型対象追跡システムは、対象の入力画像に基づいて、対象を追跡する。
【００２７】
一実施形態では、複数の画像解析装置の各々は、複数のカメラ装置に接続され、対象を解析する。
【００２８】
一実施形態では、第1の複数の画像解析装置は、第1の検出領域内に分散されており、第2の複数の画像解析装置は、第2の検出領域内に分散されており、第1および第2の検出領域内の少なくとも1つの特定の対象は、追跡されないように予め決定されている。
【００２９】
一実施形態では、第1の複数の画像解析装置は、第1の検出領域内に分散されており、第2の複数の画像解析装置は、第2の検出領域内に分散されており、特定の対象が第1の検出領域内でも第2の検出領域内でも所定の時間より長く検出されないときには、第1の複数の画像解析装置および第2の複数の画像解析装置は、前記特定の対象を追跡するのを止める。
【００３０】
一実施形態では、第1の複数の画像解析装置は、第1の検出領域内に分散されており、第2の複数の画像解析装置は、第2の検出領域内に分散されており、特定の対象が第1の検出領域または第2の検出領域内の特定領域内に所定の時間より長くとどまるときには、警報が、分散型対象追跡システムによって生成される。
【００３１】
本発明のクラスタ管理装置は、インターネットを介して複数の画像解析装置と通信するためのインターネットアドレス、例えば固定のインターネットアドレスを有することができ、クラスタ管理装置および複数の画像解析装置は、通信プロトコルを用いて互いに通信することができる。クラスタ管理装置は、ユーザが複数の画像解析装置を管理するための管理インタフェースを備えることができる。一実施形態では、管理インタフェースは、複数の画像解析装置の位置の分散マップをスクリーン上に表示することができる。一実施形態では、管理インタフェースは、対象画像の入力により、対象を追跡することを可能にする。
【００３２】
一実施形態では、本発明の分散型対象追跡システムは、対象をリアルタイムに追跡することができ、検出領域内で見つかる任意の疑わしい対象がある場合、機関に知らせることができる。
【００３３】
一実施形態では、本発明の画像解析装置は、対象を追跡するためのPTZカメラのレンズを制御することができ、PTZカメラは、左右(パン)および上下(タイル)に回転することができ、かつ、ズーム(ズーム)することができる。
【００３４】
一実施形態では、クラスタ管理装置は、画像解析能力を有する。
【００３５】
一実施形態では、クラスタ管理装置は、画像解析装置に統合され、システムコストを下げることができる。
【００３６】
一実施形態では、クラスタ管理装置は、画像解析能力を有さない。
【００３７】
一実施形態では、本発明の画像解析装置の追跡モジュールは、少なくとも1つの中央処理ユニット(CPU)を含む。
【００３８】
一実施形態では、本発明の画像解析装置の追跡モジュールは、少なくとも1つのCPUおよび少なくとも1つのグラフィックス処理ユニット(GPU)または画像処理ハードウェアアクセラレータを含む。
【００３９】
一実施形態では、本発明の画像解析装置の追跡モジュールは、少なくとも1つのCPUおよび画像処理ハードウェアアクセラレータを含む。
【００４０】
本発明は、好適実施形態に関連して記載されてきたが、本発明の範囲を制限することを意図しない。いかなる当業者も、本発明の精神および範囲から逸脱することなく何らかの変形および修正を行うことができる。それゆえ、本発明の特許権保護の範囲は、本明細書に添付する特許出願の範囲の定義によって決まるものとする。
【符号の説明】
【００４１】
101  カメラ装置
102  カメラ装置
105  画像解析装置
105a  画像解析モジュール
106  画像解析装置
106a  画像解析モジュール
110  クラスタ管理サービス装置
110a  追跡モジュール
201  カメラ装置
202  カメラ装置
203  カメラ装置
204  カメラ装置
205  画像解析装置
205a  画像解析モジュール
205b  画像解析モジュール
206  画像解析装置
206a  画像解析モジュール
206b  画像解析モジュール
210  クラスタ管理サービス装置
210a  追跡モジュール
301  カメラ装置
302  カメラ装置
303  カメラ装置
304  カメラ装置
310  画像解析装置
310a  画像解析モジュール
310b  画像解析モジュール
310c  追跡モジュール
311  画像解析装置
311a  画像解析モジュール
311b  画像解析モジュール
311c  追跡モジュール
320  クラスタ管理サービス装置
320a  追跡モジュール
401  カメラ装置
402  カメラ装置
403  カメラ装置
404  カメラ装置
411  画像解析装置
412  画像解析装置
421  第2の画像解析装置
422  第2の画像解析装置
431  クロスカメラ追跡装置
431a  追跡モジュール
432  第2のクロスカメラ追跡装置
432a  追跡モジュール
440  クラスタ管理サービス装置
440a  追跡モジュール
【図１】
2020184292.tif 000003
【図２】
2020184292.tif 000004
【図３】
2020184292.tif 000005
【図４】
2020184292.tif 000006
【外国語明細書】
2020184292000001.pdf