(57)【要約】【課題】利用者が移動する際に、視野範囲外の情報を提供し、利用者が目的地までの経路選択を適切に行えるよう支援することを目的とする。【解決手段】監視対象地域内の映像を撮影する複数の撮影装置から映像を受信し、記録する記録手段と、携帯端末装置を携帯する情報取得者の行動情報に基づき複数の撮影装置から候補の撮影装置を選定する選定手段と、複数の撮影装置からの映像を解析し、イベントを検知する検知手段と、選定手段による選定結果と、検知手段による検知結果と、に基づいて情報取得者の目的地までの経路選択に係る映像を携帯端末装置に送信する送信手段と、を有することによって課題を解決する。【選択図】図２
2015082820.tif 000002
【特許請求の範囲】
【請求項１】
監視対象地域内の映像を撮影する複数の撮影装置から映像を受信し、記録する記録手段と、
携帯端末装置を携帯する情報取得者の行動情報に基づき前記複数の撮影装置から候補の撮影装置を選定する選定手段と、
前記複数の撮影装置からの映像を解析し、イベントを検知する検知手段と、
前記選定手段による選定結果と、前記検知手段による検知結果と、に基づいて前記情報取得者の目的地までの経路選択に係る映像を前記携帯端末装置に送信する送信手段と、
を有するサーバ装置。
【請求項２】
前記検知手段は、前記記録手段により記録された映像と、撮影装置で撮影されている現映像と、から映像を抽出し、抽出した映像を解析し、前記イベントを検知する請求項１記載のサーバ装置。
【請求項３】
前記検知手段は、同一の撮影装置の前記記録された複数の映像と前記現映像とを比較し、時間的特徴を抽出し、抽出した時間的特徴に基づき前記イベントを検知する請求項２記載のサーバ装置。
【請求項４】
前記検知手段は、前記記録手段により記録された異なる撮影装置で撮影された複数の映像から映像を抽出し、抽出した映像を比較し、空間的特徴を抽出し、抽出した空間的特徴に基づき前記イベントを検知する請求項１記載のサーバ装置。
【請求項５】
携帯端末装置からの映像の取得要求に応じて、前記携帯端末装置を携帯する情報取得者の行動情報を取得する取得手段と、
前記取得手段により取得された前記行動情報を解析する解析手段と、
を更に有し、
前記選定手段は、前記解析手段による前記行動情報の解析の結果に基づき前記複数の撮影装置から候補の撮影装置を選定する請求項１乃至４何れか１項記載のサーバ装置。
【請求項６】
監視対象地域内の映像を撮影する複数の撮影装置から映像を受信し、記録する記録手段と、
情報取得者の行動情報に基づき前記複数の撮影装置から候補の撮影装置を選定する選定手段と、
前記複数の撮影装置からの映像を解析し、イベントを検知する検知手段と、
前記選定手段による選定結果と、前記検知手段による検知結果と、に基づいて前記情報取得者の目的地までの経路選択に係る映像を表示する表示手段と、
を有するシステム。
【請求項７】
サーバ装置と、携帯端末装置と、を含むシステムであって、
前記サーバ装置は、
監視対象地域内の映像を撮影する複数の撮影装置から映像を受信し、記録する記録手段と、
前記携帯端末装置を携帯する情報取得者の行動情報に基づき前記複数の撮影装置から候補の撮影装置を選定する選定手段と、
前記複数の撮影装置からの映像を解析し、イベントを検知する検知手段と、
前記選定手段による選定結果と、前記検知手段による検知結果と、に基づいて前記情報取得者の目的地までの経路選択に係る映像を前記携帯端末装置に送信する送信手段と、
を有し、
前記携帯端末装置は、
前記送信手段により送信された映像を受信する受信手段と、
前記受信手段により受信された映像を表示する表示手段と、
を有するシステム。
【請求項８】
前記携帯端末装置は、前記映像の取得要求を前記サーバ装置に送信する取得要求送信手段を更に有し、
前記サーバ装置は、
前記取得要求に応じて、前記携帯端末装置を携帯する情報取得者の行動情報を取得する取得手段と、
前記取得手段により取得された前記行動情報を解析する解析手段と、
を更に有し、
前記選定手段は、前記解析手段による前記行動情報の解析の結果に基づき前記複数の撮影装置から候補の撮影装置を選定する請求項７記載のシステム。
【請求項９】
サーバ装置が実行する情報処理方法であって、
監視対象地域内の映像を撮影する複数の撮影装置から映像を受信し、記録する記録ステップと、
携帯端末装置を携帯する情報取得者の行動情報に基づき前記複数の撮影装置から候補の撮影装置を選定する選定ステップと、
前記複数の撮影装置からの映像を解析し、イベントを検知する検知ステップと、
前記選定ステップにより選定された候補の撮影装置からのイベントの前記検知ステップによる検知結果に基づいて前記情報取得者の目的地までの経路選択に係る映像を前記携帯端末装置に送信する送信ステップと、
を含む情報処理方法。
【請求項１０】
システムが実行する情報処理方法であって、
監視対象地域内の映像を撮影する複数の撮影装置から映像を受信し、記録する記録ステップと、
情報取得者の行動情報に基づき前記複数の撮影装置から候補の撮影装置を選定する選定ステップと、
前記複数の撮影装置からの映像を解析し、イベントを検知する検知ステップと、
前記選定ステップにより選定された候補の撮影装置からのイベントの前記検知ステップによる検知結果に基づいて前記情報取得者の目的地までの経路選択に係る映像を表示する表示ステップと、
を含む情報処理方法。
【請求項１１】
サーバ装置と、携帯端末装置と、を含むシステムにおける情報処理方法であって、
前記サーバ装置が、監視対象地域内の映像を撮影する複数の撮影装置から映像を受信し、記録する記録ステップと、
前記サーバ装置が、前記携帯端末装置を携帯する情報取得者の行動情報に基づき前記複数の撮影装置から候補の撮影装置を選定する選定ステップと、
前記サーバ装置が、前記複数の撮影装置からの映像を解析し、イベントを検知する検知ステップと、
前記サーバ装置が、前記選定ステップにより選定された候補の撮影装置からのイベントの前記検知ステップによる検知結果に基づいて前記情報取得者の目的地までの経路選択に係る映像を前記携帯端末装置に送信する送信ステップと、
前記携帯端末装置が、前記送信ステップにより送信された映像を受信する受信ステップと、
前記携帯端末装置が、前記受信ステップにより受信された映像を表示する表示ステップと、
を含む情報処理方法。
【請求項１２】
コンピュータに、
監視対象地域内の映像を撮影する複数の撮影装置から映像を受信し、記録する記録ステップと、
携帯端末装置を携帯する情報取得者の行動情報に基づき前記複数の撮影装置から候補の撮影装置を選定する選定ステップと、
前記複数の撮影装置からの映像を解析し、イベントを検知する検知ステップと、
前記選定ステップにより選定された候補の撮影装置からのイベントの前記検知ステップによる検知結果に基づいて前記情報取得者の目的地までの経路選択に係る映像を前記携帯端末装置に送信する送信ステップと、
を実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、サーバ装置、システム、情報処理方法及びプログラムに関する。
【背景技術】
【０００２】
利用者が移動する際の経路選択を行うことを支援するシステムとしてはナビゲーションシステムがよく知られている。ナビゲーションシステムは、目的地や要望、例えば食事等を指定すると、適合する目的地を検索して経路を表示することができる。
特許文献１では、携帯電話等のカメラで撮影した画像を解析し、抽出される位置情報を基に、利用者の要望に適合する目的地或いは経由地を検索し誘導するという方法が提案されている。
特許文献２では、自分以外の移動体に装着された撮像装置を利用者が指定し、上記撮像装置で撮像された画像を表示装置で表示することにより、利用者が自分以外の移動体から見える光景を任意に、かつ、容易にみることのできる方法が提案されている。
特許文献３では、利用者が保持する移動端末装置と特定の場所に固定設置される顧客検出装置で利用者の位置情報を把握し、上記移動端末装置に与えるサービスコンテンツを抽出して提供するというシステムが提案されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−１００２７５号公報
【特許文献２】特開２００８−１５４１９２号公報
【特許文献３】特開２００７−２０００１３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記先行技術文献で提案されている方法では、移動経路上や選択可能な経路上でリアルタイムに発生するイベント等の情報を入手することが困難である。
【０００５】
本発明は、利用者が移動する際に、視野範囲外の情報を提供し、利用者が目的地までの経路選択を適切に行えるよう支援することを目的とする。
【課題を解決するための手段】
【０００６】
そこで、本発明のサーバ装置は、監視対象地域内の映像を撮影する複数の撮影装置から映像を受信し、記録する記録手段と、携帯端末装置を携帯する情報取得者の行動情報に基づき前記複数の撮影装置から候補の撮影装置を選定する選定手段と、前記複数の撮影装置からの映像を解析し、イベントを検知する検知手段と、前記選定手段による選定結果と、前記検知手段による検知結果と、に基づいて前記情報取得者の目的地までの経路選択に係る映像を前記携帯端末装置に送信する送信手段と、を有する。
【発明の効果】
【０００７】
本発明によれば、視野範囲外の情報を提供し、利用者が目的地までの経路選択を適切に行えるよう支援することができる。
【図面の簡単な説明】
【０００８】
【図１】サーバ装置のハードウェア構成の一例を示す図である。
【図２】カメラシステムのシステム構成及びシステムを構成する各装置の機能構成等の一例を示す図である。
【図３】映像フィルタ部の詳細を示す図である。
【図４】実施形態１におけるカメラシステムを適用する状況を示す概念図である。
【図５】実施形態１におけるカメラシステムを適用した場合の状況変化を示す概念図である。
【図６】実施形態２におけるカメラシステムを適用する状況を示す概念図である。
【図７】実施形態２におけるカメラシステムを適用した場合の状況変化を示す概念図である。
【図８】実施形態２におけるカメラシステムを適用した場合の状況変化を示す概念図である。
【図９】実施形態３におけるカメラシステムを適用する状況を示す概念図である。
【図１０】実施形態３におけるカメラシステムを適用した場合の状況変化を示す概念図である。
【発明を実施するための形態】
【０００９】
以下、本発明の実施形態について図面に基づいて説明する。
【００１０】
＜ハードウェア構成＞
図１は、サーバ装置のハードウェア構成の一例を示す図である。
ＣＰＵ１０２は、サーバ装置の全体を制御する。ＲＯＭ１０３は、プログラム等を格納する。ＲＡＭ１０４は、ＣＰＵ１０２等において処理中のデータ等を一時記憶する。外部記憶装置１０５は、記憶装置の一例であり、例えば、磁気ディスク等である。
ネットワークインターフェース１０６は、サーバ装置をＬＡＮやＷＡＮと接続し、遠隔地の装置と通信を行う。操作部１０８は、サーバ装置の操作を行うキーボード等である。表示部１０７は、サーバ装置の状態や作業者への情報を表示する。タッチパネル液晶モニターのように、操作部１０８と表示部１０７とが一体となっていてもよい。
これら各構成要素はシステムバス１０１上に配置される。
ＣＰＵ１０２が、ＲＯＭ１０３、又は外部記憶装置１０５等に記憶されているプログラムに基づきＲＡＭ１０４等を使用しながら処理を実行することによって、サーバ装置の機能や後述するフローチャートの処理が実現される。
なお、後述するカメラや携帯端末装置もＣＰＵやメモリ等を有する。そして、各装置のＣＰＵが各装置のメモリに記憶されているプログラムに基づき処理を実行することによって各装置の機能等が実現される。
【００１１】
＜システム構成＞
図２は、カメラシステムのシステム構成及びシステムを構成する各装置の機能構成等の一例を示す図である。
カメラシステムは、システム構成として、撮影システム１、サーバ装置２、携帯端末装置３を含む。ここで、サーバ装置２は、情報取得意思管理部２１と、映像受信部２２と、映像送信部２３と、行動情報フィルタ部４と、映像フィルタ部５と、を機能構成として含む。更に、行動情報フィルタ部４は、行動情報取得部４１と、行動情報解析部４２と、行動予測部４３と、カメラ候補選定部４４と、を機能構成として含む。また、映像フィルタ部５は、映像抽出部５１と、映像解析部５２と、映像選定部５３と、を機能構成として含む。
撮影システム１は、複数のカメラを含み、監視対象地域内の特定領域の映像をリアルタイムに撮影し、記録する。
サーバ装置２は、撮影システム１によって撮影された映像を受信し、記録を行う。そして、サーバ装置２は、情報取得者が携帯する携帯端末装置３が監視対象地域に入り、自動或いは手動で監視対象地域内の映像（映像情報）を取得する意思表示をした場合、携帯端末装置３に映像を送信する。サーバ装置２は、行動情報フィルタ部４及び映像フィルタ部５のカメラの選定結果と、イベントの検知結果と、を基に映像を携帯端末装置３に送信する。
【００１２】
携帯端末装置３の情報取得意思表示部３１を用いて情報取得者が情報取得意思を示すことを引き金として、行動情報解析部４２は、行動情報フィルタ部４の行動情報取得部４１によって取得される情報取得者の行動情報を解析する。
情報取得意思を示すことは、取得要求の一例である。
行動予測部４３は、解析結果を基に情報取得者の今後の行動を予測、類推する。
カメラ候補選定部４４は、その予測、類推情報を基に監視対象内にある複数のカメラの中から表示すべきカメラの候補を選定する。選定されたカメラ候補は映像フィルタ部５に送られる。
映像抽出部５１は、行動情報フィルタ部４から送られたカメラ候補情報の現映像及び記録映像の中から映像を抽出する。
映像解析部５２は、抽出された映像を解析し、映像からイベントを検知する。
映像選定部５３は、イベントの検知結果に基づいて情報取得者が携帯する携帯端末装置３に送信する、情報取得者の目的地までの経路選択に係る映像を選定する。つまり、映像選定部５３は、カメラ候補の選定結果と、イベントの検知結果と、に基づいて、携帯端末装置３に送信する映像を選定する。
選定された映像はサーバ装置２の映像送信部２３によって携帯端末装置３に送信され、表示され情報取得者が映像を確認することができる。情報取得者が移動した際には逐次、同様の情報取得、解析及び映像表示のサイクルが行われるシステムとなっており、情報取得者が自身の行動に合わせたリアルタイムな映像の取得、確認ができる。
【００１３】
＜撮影システム＞
撮影システム１は、特定領域を撮像するカメラ、例えば、図２においてはカメラＡ１１、カメラＢ１２、カメラＣ１３のように複数のカメラと、カメラ間を連携するネットワーク１４を含む。カメラの台数は監視する地域の広さや監視する内容によって決められればよく、特に限定されない。またネットワークの帯域や転送速度も情報取得者に適切に映像を提供できる容量であればよく、特に限定されない。
カメラは例えば道路上においては監視したい領域を撮影可能なように設置される。監視したい領域とは路面や、路面から数メートル上方、人や障害物等の存在を撮影できる領域のことである。道路脇にある塀などが存在する場合、その裏側を撮影可能なようにカメラが設置されることもある。このような場所は死角になりやすく、なんらかの異常状態、例えば人の潜みや危険物の放置等が発生しやすい場所でもあるため効果的に異常（イベント）を撮影できる可能性がある。また、１台のカメラの撮影領域は定期的或いは不定期に変更することができる。例えば、カメラは、サーバ装置２等からの制御に基づき、上下左右方向の撮像方向の変更やズームや広角撮影を行うことができる。このことにより、カメラの設置台数を少なくする効果が期待できる。各カメラは各々がネットワークで連携できるシステム構成となっており、カメラ間連携は有線でも無線でもよい。各カメラが撮影した映像はサーバ装置２の映像受信部２２に送信され、記録されるが、各カメラが撮影した映像を記録する映像記録部がカメラ毎や撮影システムのネットワーク内にあってもよく、撮影された映像の記録、保管場所は特に限定されない。
【００１４】
＜サーバ装置＞
サーバ装置２は、上述したように、機能構成として、情報取得意思管理部２１、映像受信部２２、映像送信部２３を含む。なお、行動情報フィルタ部４や映像フィルタ部５も含むがこれらは後述する。
情報取得意思管理部２１は、携帯端末装置３からの信号によって、情報取得者が監視対象地域内の映像を取得する意思の確認と管理とを行う。映像取得の意思確認を行うことによって、携帯端末装置３を持つが情報が不要な情報取得者がいた場合には映像を送らないことができ、ネットワーク負荷の軽減や不要な情報漏洩の危険を回避することができる。情報取得意思管理部２１が情報取得意思の管理を行うことで、監視対象地域内に複数の情報取得者が存在する場合でも、各情報取得者に適した映像を適切なタイミングで各々の携帯端末装置３に送信し、個々の情報取得者に有益な映像を送信することができる。
映像受信部２２は、撮影システム１によって撮影された映像を受信し、記録する。映像フィルタ部５によって複数カメラ間の映像比較や時間的変化の比較解析を行う場合、撮影システム１のカメラ単体に存在する記録部のみでは比較が困難である場合がある。その場合、映像受信部２２にて一括に比較対象を管理し、そこから記録映像を抽出することでカメラ単体の記録容量や演算力不足による問題を回避することができる。
映像送信部２３は、情報取得意思管理部２１と連動し、行動情報フィルタ部４、映像フィルタ部５の解析結果を受けて選定された映像を携帯端末装置３に送信する。これにより情報取得者が、適切なタイミングで適切な映像を確認することができる。
【００１５】
＜携帯端末装置＞
携帯端末装置３は、情報取得者によって携帯され、情報取得意思表示部３１、情報受信部３２及び映像表示部３３を少なくとも含む。
情報取得意思表示部３１は、情報取得者が監視対象地域内に存在する場合に自動或いは手動で情報取得の意思表示を行う機能である。監視対象地域内で携帯端末装置の個体識別が行われるため、携帯端末装置３には個体識別ＩＤが割り振られることが望ましい。個体識別ＩＤは、固定のものでも監視対象地域内に出入りする毎に変更されるものでもよい。カメラシステムは、情報取得者に適切な情報を提供するため、情報を必要とする情報取得者が監視対象地域内に存在することを確認する必要がある。
そのため、例えば、情報取得者自らが撮影システム１のカメラに対して携帯端末装置３を撮影させる、或いは情報取得者自らが携帯端末装置３を用いて個体識別ＩＤを情報取得意思管理部２１に送信する。このようにして情報取得者が監視対象地域内に存在することをカメラシステムに認識させることができる。また、情報取得者の移動に伴い、携帯端末装置３が監視対象地域内に入った際に自動で情報取得意思を示すこともできる。例えば、ＧＰＳを利用し携帯端末装置３が監視対象地域内に入った際に携帯端末装置３が自動で個体識別ＩＤを情報取得意思管理部２１に無線送信するようにしてもよい。情報取得者が同一グループとして複数人存在する場合、各情報取得者に独立の映像を提示する場合と全情報取得者に同じ映像を提示する場合とがある。これは情報取得者を識別する個体識別ＩＤに加え、同一グループ識別ＩＤを割り振ることで対応できる。同一グループ識別ＩＤの登録は予め決められた個体識別ＩＤを用いるのがセキュリティの観点では好ましいが、特にそれには限定されない。
情報取得意思表示部３１による情報取得意思管理部２１への情報の送信は、取得要求送信の処理の一例である。
【００１６】
情報受信部３２は、撮影システム１のカメラで撮影され、記録された映像の中から配信される映像を受信することができる。情報受信部３２が受信した少なくとも１つの映像を映像表示部３３で表示することで、情報取得者は監視対象地域内の目視確認できない領域についての映像を入手することができる。
携帯端末装置３は、行動情報入力部を有することもできる。行動情報入力部とは、例えば、現在地や目的地、移動速度等の情報の入力部である。行動情報入力部が携帯端末装置３に備わることで、情報取得者が能動的に現在地や目的地、経由地、目的地に到着しなければならない時間等の情報を入力できる。これにより、より詳細な行動の推測ができ、行動情報フィルタ部４及び映像フィルタ部５により選定される映像が情報取得者の要求に適合しやすくなるという効果がある。
【００１７】
＜行動情報フィルタ部＞
行動情報フィルタ部４は、行動情報取得部４１、行動情報解析部４２、行動予測部４３、カメラ候補選定部４４を含む。
行動情報取得部４１は、撮影システム１による情報取得者自身の記録映像や、上述の行動情報入力部により入力される情報を基に情報取得者の行動情報を取得する。その情報は例えば、現在地、目的地、現在時刻、到達目標時刻、制限時間、天候、経由希望地、移動方向、警戒対象事象、移動速度、体調、精神状態等、情報取得者の要求や行動を推測するために必要な情報のことである。上記の情報は一例であり、情報取得者の要求や行動を推測するための情報であればこれらに限定されない。
行動情報取得部４１が現在地及び目的地の情報を入手した場合、行動情報解析部４２がその情報を解析し情報取得者がどの程度の距離を移動する必要があるかを算出することができる。詳細な地図情報を用いることで、行動情報解析部４２は、実際の選択可能な経路毎に距離算出を行うこともできる。目的地の入力情報は住所や建造物名などでもよいし、知人の名前やテーマパークにおける人気キャラクターの名称などでもよい。
カメラシステムによれば、情報取得者の行動情報に合わせて目的地までの映像を情報取得者に提供できる。そのため、カメラシステムは、目的地（接近したい興味対象の居場所を含む）が時間経過に伴って変化した場合においても追跡し、そこに至る経路上の映像を提供する。この情報取得者は、適切な経路選択が可能となる。
【００１８】
また、現在時刻、到達目標時刻の情報を行動情報取得部４１が入手した場合、行動情報解析部４２によって算出される移動距離を用いて目的地に到達するためにどの程度の速度で移動する必要があるかを算出することができる。
一般道路上であれば、行動予測部４３等は、現在時刻の入力から明るさを予測することができる。これらの情報を基に行動予測部４３は、例えば、昼間で明るい場合、情報取得者の精神状態は安定しているが、夜間で暗い場合は警戒対象に対する不安が大きくなることを予測する。
また、経由希望地の情報が行動情報取得部４１によって取得されれば、行動予測部４３は、選択しうる経路を限定することが可能となる。このことにより、後述する映像フィルタ部５において抽出、解析される映像を限定することができる。
また移動速度の情報を行動情報解析部４２によって解析する。そして、行動予測部４３が選択しうる経路の選択を可能にし、更には行動予測部４３によって情報取得者の状況を推定することができる可能性がある。例えば、行動予測部４３は、情報取得者が速度情報を基に立ち止まっている、歩いている、走っている等の行動を解析する。成人男性の通常の歩行速度が８０ｍ／分であるとすると、１５０ｍ／分の速度で移動していると入力される場合、行動予測部４３は、急いでいると推測する。速度情報は例えば、携帯端末装置３に速度情報を直接入力することもできるし、ＧＰＳによる位置情報と時刻情報とから行動予測部４３等が移動速度を算出することもできる。しかし、これらに限定されない。例えば、カメラシステムは、撮影された情報取得者自身の振る舞いによって、行動情報を取得することもできる。
【００１９】
カメラシステムは、撮影された情報取得者の移動距離と時刻情報とから移動速度を算出することもできる。また、顔の向きや動きを行動情報解析部４２が解析することによって、行動予測部４３は、情報取得者の興味や心理的要因、精神状態を類推することもできる。例えば、頻繁に上を向いている場合、上空に興味ある物体がある場合や、天候の変化を予想している場合などが想像されるが、行動予測をするために使用される情報であれば上記に記載されたことに限定されない。更に、カメラシステムは、体調予測としては熱（体温）や怪我の有無、精神状態予測としては心拍や脈拍等の生理的な情報等を利用することができる。例えば、行動予測部４３は、急いでいる、緊張している、一人歩きのため不安である、暗くて怖い、時間があるので出来るだけ安全に行動したい等、行動情報や体調、精神状態等を組み合わせた解析を行い情報取得者の行動を予測する。カメラシステムでは、その予測を基に映像候補を選定することで、情報取得者が必要とする映像の提供が可能となる。
行動情報解析部４２は、行動情報取得部４１が取得した上記のような行動情報を、解析する。そして、行動予測部４３は、解析の結果に基づき情報取得者の行動を予測する。カメラ候補選定部４４は、予測結果に適合する経路にあるカメラを選択することができる。上記の行動情報は携帯端末装置３への手動入力に限らず自動での取得でもよい。自動で取得する場合は、携帯端末装置３にこれらの情報を取得できる機能を搭載しておけばよく、例えば時計やＧＰＳ機能、脈拍計測センサー等がそれにあたる。携帯端末装置３に内蔵されるカメラや、監視対象地域にあるカメラで情報取得者自身を撮影しその情報を携帯端末装置３に送ることで、例えば骨折などの外傷等を行動情報としてカメラシステムに入力することもできる。
【００２０】
＜映像フィルタ部＞
映像フィルタ部５は、映像抽出部５１、映像解析部５２、映像選定部５３を含む。
映像抽出部５１は、行動情報フィルタ部４のカメラ候補選定部４４によって選定されたカメラの記録映像を抽出する。抽出される映像は一定期間前の過去の映像であっても現在の映像であってもよく、過去から現在にわたる一連の映像であってもよい。
映像解析部５２は、映像抽出部５１によって抽出された映像を解析する。例えば、映像解析部５２は、複数のカメラの現時点の映像で映っている人数を比較することで、混雑具合を検知することができる。また、映像解析部５２は、通常道路上にはない通行止め看板や標識を検知し、移動する上で障害となる通行止め区間の検知をすることもできる。
混雑具合はイベントの一例である。また、通行止め区間の発生もイベントの一例である。
【００２１】
映像フィルタ部５は、データベースを有することもできる。上述の看板や、標識のように道路交通法上で定められた規格のものは予め前記データベースに登録しておき、映像解析部５２は、記録映像とデータベースとを照合して、データベースに登録されている物体が道路上にある場合、警戒区間として抽出することもできる。或いは、映像解析部５２は、複数のカメラに映る人の流れや車の流れを比較することで、障害物検知をすることができる。また、複数カメラの映像が共に混雑している場合でも、映像解析部５２は、人の流れに着目し、特定のカメラでは全員が同じ方向に移動しており、他の特定のカメラでは一部逆流している場合、逆流を異常ととらえその人物を警戒対象として抽出することができる。或いは、映像解析部５２は、逆流が発生している領域を警戒対象として抽出することもできる。
逆流はイベントの一例である。
このように様々な映像を映像フィルタ部５によって抽出することができ、図３において、カメラＡ１１及びカメラＢ１２に対応する現映像確認部５２１Ａ、５２１Ｂで各々のカメラの現映像を確認する。そして、カメラ間映像比較部５２３は、両映像を比較する。そして、空間的特徴抽出部５２４は、上述のような様々な空間的な差異を異常（イベント）として抽出する。このことで上述した処理を実現できる。
上述のような様々な空間的な差異は、空間的特徴の一例である。
【００２２】
また、映像解析部５２は、同一人物が同一のカメラに一定時間の間に複数回映っている場合、その人物の行動が不審であると考え警戒対象人物として抽出することができる。例えば、図３において、カメラＡ１１に同一人物が一定時間内に複数回映っている場合を考える。カメラＡ１１に対応する現映像確認部５２１Ａと記録映像確認部５２２Ａとの映像を比較対象とし、同一カメラ映像比較部５２５Ａで映像を比較解析する。そして、時間的特徴抽出部５２６で同一人物の出現頻度を抽出することで実現できる。
同一人物の出現頻度は、時間的特徴の一例である。また、不審な行動もイベントの一例である。
更に、映像解析部５２は、記録映像内に複数回出現する人物の出現時間間隔と最終出現時刻から現在時刻までの時間間隔との差異を解析する。このことで、映像解析部５２は、その警戒対象人物が現在も該当カメラ近隣にいるかどうかを推測し、引き続き該当人物を警戒対象とするかどうかを解析することができる。或いは、映像解析部５２は、特定のカメラの人の流れや車の流れの時間的変化を追跡することで、異常を抽出することができる。カメラＡ１１に混雑状態が記録されて現在もその状態が継続しているとして、あるときに一定方向に直線的に移動していた人の流れが蛇行するようになったとする。この場合、蛇行し始める空間のあたりに何かしらの異常、例えば、誰かが倒れている状況や混雑の中でけんかが発生した状況などの可能性が示唆される。映像解析部５２は、このように空間的には同一で時間的に連続な映像を比較することで、異常状態（イベント）を検知することもできる。
【００２３】
更に、映像解析部５２は、同一カメラに一定時間の間に複数回映る同一人物がいることをカメラＡ１１の記録映像の解析結果で発見した場合、監視対象地域内の他のカメラの映像を解析する。このことで、映像解析部５２は、監視対象地域内に現在も該当人物が潜伏している可能性を推測することができる。また、映像解析部５２がこの解析を行うことで、警戒対象人物として抽出された人物が、現在も警戒対象として考える必要があるかどうかを判断し、情報取得者への映像の提供の必要性を判断し映像を選定することができる。これは、図３においては、カメラＡ１１の解析において抽出された人物を、カメラＢ１２に対応する現映像確認部５２１Ｂと記録映像確認部５２２Ｂとの映像とをカメラ間映像比較部５２３で比較解析することで実現できる。
また、複数のカメラに異なる人物が一人映っている場合があるとき、一方のカメラの人物は移動し、一定時間前にはそのカメラには映っておらず、他方のカメラの人物は移動しておらず一定時間前にもそのカメラに映っている場合を想定する。このような場合、移動していない人物が何かの機会をうかがい潜んでいる可能性が考えられる。
【００２４】
このような人物を検出する場合、まずは図３において、カメラＡ１１とカメラＢ１２との各々の現映像を現映像確認部５２１Ａ及び５２１Ｂで確認することになる。両者に１人の人物が記録されており、人数の面で警戒対象レベルの比較ができないため、カメラＡ１１及びカメラＢ１２其々について現映像確認部５２１Ａ、５２１Ｂと記録映像確認部５２２Ａ、５２２Ｂとの比較を同一カメラ映像比較部５２５Ａ、５２５Ｂで行う。その結果、カメラＡ１１の記録映像では、一定時間前には無人であり、カメラＢ１２の記録映像では、一定時間前にも同一人物が映っていたことが解析により発見される。これらの結果を空間的／時間的特徴抽出部５２７を用いて比較し、カメラＡ１１に記録された人物は通常の移動をしている人物であるが、カメラＢ１２に記録された人物は潜伏している可能性がある人物として、警戒対象として抽出することができる。
前記警戒対象は、空間的／時間的特徴の一例である。潜伏もイベントの一例である。
【００２５】
これらのように、映像解析部５２が複数のカメラ間の比較により空間的な違いや異常を検知したり、同一のカメラの時間的な映像の違いや異常を検知したりすることで、映像選定部５３は、送信する映像を選定することができる。一つのカメラの映像から映像を解析する手段としては、例えば、特開２００６−７９２７２に開示されている異常動作検出方法を用いる事ができる。
上記のように抽出される空間的、時間的な異常が映像解析部５２の結果として利用され、図３のように行動情報フィルタ部４の行動予測部４３の結果とあわせて情報取得者に提供される映像が映像選定部５３で選定される。
映像の異常としてとらえられる事象は上記の状況にかかわらず、情報取得者が得たいと設定した情報や、普段と異なる状況であれば上記に限定されない。更に、情報取得者が認識した警戒対象を追跡したい場合、カメラシステムは、映像から特徴を抽出して警戒対象を認識し、その警戒対象の挙動を優先的に情報取得者に送信するということもできる。この映像から特徴を抽出する方法は、画像認識技術や人物識別技術など複数の技術を用いることができるが、特徴抽出技術の内容には特に限定されない。
【００２６】
＜実施形態１：警戒対象回避事例＞
以下、図２、図３、図４、図５に従い、実施形態１の情報処理について説明する。
本実施形態では、ある監視対象地域２００に配置されたカメラ及び情報取得者が保持する携帯端末装置を含むカメラシステムについて述べる。携帯端末装置３はスマートフォンなどであってもよい。
情報取得者２１０にとって、監視対象地域２００の回避したい事象や安全を阻害する予兆となると思われる対象を警戒対象３００、３０１、３０２、３０３とする。
例えば本実施形態では監視対象地域２００において、警戒対象３００、３０１、３０２、３０３は事件や犯罪の現場等の明確な危険や、道路工事による通行止め区域が考えられる。警戒対象３００、３０１、３０２、３０３はこれに限定するものではなく、例えば、暗がりなどで一定時間以上屯している人物や、長時間エンジン稼働状態で停車している車、或いは周囲をうろつき短時間に複数回同一カメラに表示される人物の存在などが考えられる。上記に挙げた例のように、明らかに危険と判断することはできないが、情報取得者の接近により犯罪に結びつく可能性がある危険の予兆であれば警戒対象としてよいものとする。
警戒対象３００、３０１、３０２、３０３は情報取得者２１０が監視対象地域２００を移動中に発生する場合もありうる。予め設定された情報ではなく、カメラシステムが、監視対象地域２００のカメラ（２３１〜２４０）映像をリアルタイムに解析し、情報取得者２１０の行動情報に照らして適切な映像を送る。このことで情報取得者２１０が望まない警戒対象３００、３０１、３０２、３０３を回避して目的地へ到達することができる。
【００２７】
図４において、情報取得者２１０の現在地から目的地２５０まで移動する必要がある場合を考える。情報取得者２１０は携帯端末装置３により現在地と目的地２５０、現在時刻が２３：００であり、不安であるという情報を行動情報取得部４１に与えたとする。行動情報解析部４２はこのような行動情報を基に行動情報を解析する。そしてその結果を基に行動予測部４３は情報取得者が目的地まで安全に危険を回避して到達したいと考えていると予測する。このような予測結果を基にし、カメラ候補選定部４４が映像フィルタ部５の解析対象となるカメラを選定する。例えば、移動距離が少ない経路として点線の矢印４００の経路の組み合わせが考えられる。これらの経路を撮影するカメラとして、カメラ２３１、２３２、２３４、２３５、２３６、２３７、２３８、２３９、２４０が選択される。カメラ２３３が撮影する上下方向の経路は、情報取得者２１０の現在地と目的地２５０との方向には逆方向になり遠回りとなるため、移動距離が長くなることが想定される。そのためカメラ２３３は、カメラ候補選定部４４によって除かれる。
【００２８】
選定されたカメラ映像を基に、映像フィルタ部５が映像を解析する。映像フィルタ部５の映像抽出部５１が現映像確認部５２１を用いて各カメラの現映像を確認する。そして映像解析部５２においてカメラ間の現在映像を比較する。その結果、カメラ２３２に警戒対象３０１が、カメラ２３６に警戒対象３００が、カメラ２３９に警戒対象３０３が、カメラ２４０に警戒対象３０２が記録される。一方、カメラ２３１、２３４、２３５、２３７、２３８には何れの警戒対象も記録されていないという情報が抽出される。この結果、カメラ２３２、２３６、２３９、２４０が撮影する経路を通る移動では警戒対象３００、３０１、３０２、３０３の何れかに遭遇することが推測される。一方、カメラ２３１、２３４、２３５、２３７、２３８が撮影する経路を通る移動では警戒対象３００、３０１、３０２、３０３の何れにも遭遇しないことが推測される。
【００２９】
＜実施形態２：興味対象接近事例＞
以下、実施形態２の情報処理について説明する。
監視対象地域２００内に、情報取得者２１０が積極的に接近したい興味の対象を興味対象２６０と、回避したい事象や安全を阻害する予兆となると思われる対象となる警戒対象３１０、３１１、３１２、３１３と、が共存する場合が考えられる（図６）。このような場合の実施形態として、例えば、テーマパークでの人気キャラクターの居場所等を興味対象とし、その居場所に至るまでの経路上の混雑している場所を警戒対象として設定する。このような場合、極力混雑状態である警戒対象は避け、興味対象の居場所に早く到着したいという要求が考えられる。
本実施形態では、ユーザは、テーマパーク内の人気キャラクターを予め映像フィルタ部５のデータベースに興味対象として登録しておくことができる。この場合、ユーザは、情報取得者の行動情報として現在地として、また、データベースに登録されたキャラクターの中から興味のあるキャラクターの居場所を目的地として設定することができる。
【００３０】
図６において、情報取得者２１０の現在地から人気キャラクター２６０の居場所まで移動する必要があり、監視対象地域２００内に混雑している場所３１０、３１１、３１２、３１３が４個所存在している場合を考える。
情報取得者２１０は携帯端末装置３により現在地と目的地として人気キャラクター２６０の名称とを行動情報として入力する。行動情報取得部４１は、この行動情報を得て設定する。
現在時刻が未入力の場合でも、監視対象地域２００がテーマパークで目的地が人気キャラクターの居場所であるから、行動予測部４３は、行動情報解析部４２の解析結果を基に情報取得者２１０が人気キャラクター２６０に早く会いたいと考えていると予測する。
そして、カメラ候補選定部４４は、最短経路のカメラを映像フィルタ部５の解析対象となるカメラとして選定する。
人気キャラクター２６０の居場所まで早く移動したいと予測されているため、映像フィルタ部５は、混雑していない経路の映像を優先的に選択するものとする。
【００３１】
例えば、移動距離が少ない経路として点線の矢印の経路４０２の組み合わせが考えられる。行動情報フィルタ部４によって、上記点線矢印の経路を撮影するカメラ２３１、２３２、２３３、２３４、２３６、２３７、２３８が選択される。映像フィルタ部５の映像抽出部５１で上記選定された各カメラの現映像が抽出される。
そして、映像解析部５２によって上記各カメラの現映像が比較解析されることで、混雑している場所３１０、３１１、３１２、３１３が警戒対象として抽出される。この場合、カメラ２３２、２３６が混雑している場所３１１と３１０とを各々撮影していることになる。そのため、携帯端末装置３に優先的に送信されるカメラは、カメラ２３１、２３３、２３４、２３７、２３８が選定される。
この選定された複数のカメラの撮影範囲を通って人気キャラクター２６０の居場所へ遠回りせずに移動する経路は、例えば図７の点線矢印で示した経路４０３、４０４、４０５が考えられる。各経路を撮影するカメラの組み合わせは、カメラ２３１、２３７、２３８の組み合わせ、カメラ２３１、２３４、２３７、２３８の組み合わせ、カメラ２３３、２３４、２３２、２３７、２３８の組み合わせが考えられる。
【００３２】
これらの経路は距離的に大差がないため、それぞれのカメラ映像の組み合わせを順番に携帯端末装置３に表示させることができる。或いは、映像解析部５２が上記の各経路を撮影するカメラの組み合わせ数を比較する。そして、映像選定部５３がカメラ設置場所と地図とを照会して曲がり角が少ない経路４０３を撮影するカメラ２３１、２３７、２３８を優先表示するように選定することもできる。
複数のカメラ映像が選択された場合は、携帯端末装置３の映像表示部３３を分割して表示することもできるし、情報取得者２１０の現在地に近い順番、或いは目的地である人気キャラクター２６０の居場所に近い順番に表示することもできる。
【００３３】
本実施形態においては人気キャラクター２６０が移動することが想定されるため、人気キャラクター２６０の移動に合わせて提示する優先度を決定するということを、行動情報を利用するのがよい場合がある。例えば、図８は、上述のように優先表示されたカメラ２３１、２３７、２３８の映像に従って情報取得者２１０が４０６のように移動した場合の一例を示す図である。
しかし、このとき目的地である人気キャラクター２６０も４０７のように移動しており、先の情報に従って行動を継続しては、情報取得者２１０は人気キャラクター２６０に会うことができない可能性が高い。そのため、人気キャラクター２６０の移動が発生した場合、本実施形態のカメラシステムでは、情報取得者２１０の現在地情報を基に解析候補カメラの選定を逐次行い、再解析をすることができる。再解析を行うとき情報取得者２１０が人気キャラクター２６０の基に移動する経路は図８の点線矢印４０８のような経路が考えられる。先の解析によって混雑している場所３１０、３１１、３１２、３１３は把握されているため、カメラ候補選定部４４は、予め混雑している場所を避ける経路を撮影するカメラ２３１、２３３、２３４、２３５、２３７、２４０を選定する。混雑している場所が変わっている場合や、他の異常が発生している場合は、その解析結果を勘案して候補カメラが選定されるようにしてもよい。
【００３４】
人気キャラクター２６０に会うことが目的であるため、人気キャラクター２６０の挙動を予測することは映像フィルタ部５の解析項目として必要であり、この場合、人気キャラクター２６０の進行方向の予測を行うことになる。経路４０７のように移動した人気キャラクター２６０は、カメラ２３８の記録映像の中で時系列的に物体として大きさが小さくなっていき、遠くへ移動していることが観察される。カメラ２３７及びカメラ２４０ではある時刻から人気キャラクター２６０が撮影範囲内に観察され、更に時系列的にはカメラ２３８の映像と同様、カメラ２３７、カメラ２４０の場所と逆方向へ移動していることが観察される。また、カメラ２３５は図８中右から左の方向に人気キャラクター２６０の存在を撮影したことが観察される。このように時系列的に個々のカメラの記録映像を比較することと、カメラ２３５、２３７、２３８、２４０の３つのカメラ映像を比較解析することで、人気キャラクター２６０の移動方向をカメラ２３３の方向へ移動する可能性があると予測できる。
【００３５】
この解析結果を基に、映像選定部５３は、カメラ２３１、２３３、２４０の映像を優先的に表示するカメラ映像と選定する。そして、映像送信部２３は、情報取得者２１０の携帯端末装置３へ映像を送信する。
その結果、情報取得者２１０は、現時点の人気キャラクター２６０の居場所と進行方向とを携帯端末装置３に表示される映像から把握し、リアルタイムに対応を考えることができる。この場合、監視対象地域２００内をカメラ２３７の方向へ進行していたが、カメラ２３１の方向へ経路変更した方が人気キャラクター２６０の出会う確率が高いと考えられる。そのため、情報取得者２１０はカメラ２３１の方角へ向けて方向を転換すると判断することができる。
【００３６】
上記のように、興味対象として設定された人気キャラクター２６０及び警戒対象として設定された混雑している場所３１０、３１１、３１２、３１３は時間に伴い場所の移動や状況の変化が生じることが予想される。そのため、行動情報に合わせて現在の映像を確認できることは効果的である。また、上述の例では人気キャラクターを予め設定したが、テーマパークの場合、人気キャラクターの周囲やイベントがある場所は混雑していることが多いと考えられる。その場合、混雑しているところを積極的に探しだすということも用途によっては考えられ、カメラシステムの応用用途は上記実施形態に記載された例に限定されない。
【００３７】
＜実施形態３：危機発見事例＞
以下、実施形態３の情報処理について説明する。
情報取得者が複数存在する場合を示す。このような状況のより具体的な例としては例えば、警官や町内会等の治安維持活動における見回り等が挙げられる（図９）。
情報取得者として警官２２０、２２１、２２２、２２３が監視対象地域２００の治安維持活動をすると設定する。警官２２０、２２１、２２２、２２３は単独行動する場合と連携行動をする場合とがあるため、携帯端末装置は予め設定された個別識別ＩＤ及びグループ識別ＩＤを有する。本実施形態では警戒対象の例として深夜に屯する複数の少年少女とする。
警官２２０、２２１、２２２、２２３は監視対象地域２００をパトロールしており、各警官の現在値と進行方向とが各々の行動情報フィルタ部４の情報として使用される。例えば、パトロール範囲として各々の持ち場があり、自分を中心とした同心円を中心に見回りをすると設定する。このようなパトロールの場合、其々の持ち場はあるが、互いに連携して行動することが想定される。そのため、各警官同士の情報共有は密に行う方が好ましい。この場合、各個人へ独立に映像を提供する場合と、全員に同じ映像を提供する場合とでパトロールの効果を高めることがありうる。
【００３８】
監視対象地域２００内の各カメラは、警官２２０、２２１、２２２、２２３の現在値情報から、最近接している警官に対してそのカメラの情報を送る。図９の場合、各警官の行動情報フィルタ部４は、警官２２０にはカメラ２３１、２３４、２３６のカメラを、警官２２１にはカメラ２３７、２３９を、警官２２２にはカメラ２３２、２３３、２３５を、警官２２３にはカメラ２３８、２４０を選定する。
行動情報フィルタ部４は、各警官と各カメラの現在地情報とから距離を割り出し、各々の距離を比較することで選定することができる。
この後、映像フィルタ部５は、各警官には選定されたカメラ候補の中で空間的、或いは時間的な異変がないかを映像を基に解析する。その中で異変度が高い映像から各警官の携帯端末装置３に映像が送信される。
本実施形態では、警官２２２への提示候補として選定されたカメラ２３２の映像が映像解析部５２によって他のカメラとの空間的差異である警戒対象３２０、３２１、３２２、３２３の屯を検出する。その後、映像選定部５３によって選定されたカメラ２３２の映像が、映像送信部２３によって、警官２２２の携帯端末装置３に優先的に送信、表示される。そのため、警官２２２は警戒対象３２０、３２１、３２２、３２３の存在を素早く察知し対応にあたることができる。
【００３９】
このようなパトロールの場合、警官２２２が単独で対応にあたると警官２２２自身が危険にさらされる場合が生じうる。そのため、警官２２２は、警官２２０、２２１、２２３へ警戒対象３２０、３２１、３２２、３２３の存在を連絡し応援を要請することがあり、無線や携帯電話で容易に応援を要請することができる。
しかし、カメラシステムを用いれば、グループ識別ＩＤによってグルーピングされた複数の情報取得者は、カメラシステムの映像フィルタ部５による選定によって容易に同様の情報を共有することができる。例えば、警官２２０、２２１、２２２、２２３の各々への携帯端末装置３に送信表示された映像を更に映像フィルタ部５を用いて解析する。このことで、全警官に送信された映像の中で最も異変度が高い映像を全ての警官２２０、２２１、２２２、２２３に送信することができる。これによって警戒対象３２０、３２１、３２２、３２３を発見した警官２２２以外の警官２２０、２２１、２２３も警官２２２の持ち場への注意ができ、場合によっては連携して対応することができるという効果がある。
このように同一グループの情報取得者がいる場合、映像フィルタ部５とサーバ装置２とは、各情報取得者の携帯端末装置３に独立の映像を送信すると同時に各々の送信映像を比較し、特に異常度の高い映像をグループ内で共有するよう優先的に送信することもできる。
【００４０】
一方、同時に異変が生じる場合もありうるため、各情報取得者が映像を共有しないこともできる。また、上記のように各情報取得者が受信した画像を比較解析し、映像を共有した後で、カメラシステムが、各情報取得者の持ち場の映像を各情報取得者に優先的に送信する。そして、各情報取得者は、携帯端末装置３で映像を表示するということもできる。これらの情報の共有は自動でもできるし手動でもでき、手法には限定されない。
このようなパトロールの場合、上述のように警戒対象３２０、３２１、３２２、３２３を認識した後、映像解析による特徴抽出をして警戒対象毎を認識できるようにすることもできる。その場合、図１０のように警戒対象３２０、３２１、３２２、３２３が逃走をはかった場合でもカメラが追跡し警戒対象の特定が可能となる効果がある。警戒対象３２０、３２１、３２２、３２３が離散して逃走を図った場合、各カメラには監視対象が一人ずつ映ることになる。その場合は空間的な差が異変とは検知されないが、同一カメラの時系列的変化を抽出することで監視対象の逃走映像が各警官に送信され携帯端末装置に表示される。これにより監視対象の追跡或いは、逃走方向をリアルタイムで確認しながら応援要請を行うことができる。
【００４１】
＜その他の実施形態＞
また、本発明は、以下の処理を実行することによっても実現される。即ち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【００４２】
以上、上述した各実施形態によれば、視野範囲外の情報を提供し、利用者が目的地までの経路選択を適切に行えるよう支援することができる。
【００４３】
以上、本発明の好ましい実施形態について詳述したが、本発明は係る特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。
例えば、上述した実施形態では、同一のサーバ装置内に行動情報フィルタ部４や映像フィルタ部５等の複数の機能があるものとして説明を行った。しかしながら、複数のサーバ装置で構成されるシステムにおいて、行動情報フィルタ部４や映像フィルタ部５が実現されるようにしてもよい。また、行動情報フィルタ部４や映像フィルタ部５は、別個独立した他の装置においてそれぞれ実装されていてもよい。
【符号の説明】
【００４４】
４  行動情報フィルタ部、５  映像フィルタ部、１０２  ＣＰＵ
【図１】
2015082820.tif 000003
【図２】
2015082820.tif 000004
【図３】
2015082820.tif 000005
【図４】
2015082820.tif 000006
【図５】
2015082820.tif 000007
【図６】
2015082820.tif 000008
【図７】
2015082820.tif 000009
【図８】
2015082820.tif 000010
【図９】
2015082820.tif 000011
【図１０】
2015082820.tif 000012