(57)【要約】  映像における発生場所が予め定まっていない関心領域の画質の低下を抑制しながら、その映像の送信に必要なネットワーク帯域を削減できる映像処理技術を提供する。  本発明の一態様に係る映像処理装置１０５は、映像において、事象が発生すると推定された発生位置に基づく第１領域を決定する決定部１３１と、前記第１領域を符号化する第１条件と、前記映像に含まれ前記第１領域以外の領域である第２領域を符号化する第２条件とを、前記第１領域が前記第２領域よりも高画質になるように設定する設定部１３２と、を備える。
2018037890.tif 000002
【特許請求の範囲】
【請求項１】
映像において、事象が発生すると推定された発生位置に基づく第１領域を決定する決定手段と、
前記第１領域を符号化する第１条件と、前記映像に含まれ前記第１領域以外の領域である第２領域を符号化する第２条件とを、前記第１領域が前記第２領域よりも高画質になるように設定する設定手段と、
を備える映像処理装置。
【請求項２】
前記設定手段は、前記映像が配信される通信ネットワークにおいて利用可能な通信帯域に基づいて、前記第１条件と前記第２条件とを設定する
請求項１に記載の映像処理装置。
【請求項３】
センサによって取得したデータに基づいて、前記発生位置を推定する位置推定手段
をさらに備える請求項１又は２に記載の映像処理装置。
【請求項４】
前記位置推定手段は、前記映像において映像パターンを前記事象として検出し、当該事象が検出された位置を前記発生位置として推定する
請求項３に記載の映像処理装置。
【請求項５】
前記位置推定手段は、２以上のマイクロホンによって集音された音声のデータに基づいて音源の方向を特定し、当該音源の方向が示す、前記映像における位置を、前記発生位置として推定する
請求項３又は４に記載の映像処理装置。
【請求項６】
前記位置推定手段は、前記音声のデータにおいて所定の音声パターンを検出し、当該音声パターンを含む前記音声の前記音源の方向を特定する
請求項５に記載の映像処理装置。
【請求項７】
前記第１領域を前記第１条件のもとに符号化し、前記第２領域を前記第２条件のもとに符号化する符号化手段
をさらに備える請求項１から６のいずれか１項に記載の映像処理装置。
【請求項８】
請求項１から７のいずれか１項に記載の映像処理装置と、受信装置とを含み、
前記映像処理装置は、
符号化された前記映像の映像データと前記第１領域の範囲を示す領域情報とを送信する第１通信手段
をさらに備え、
前記受信装置は、
前記映像データと前記領域情報とを受信する第２通信手段と、
前記映像データを復号することによって復号映像を生成する制御手段と、
前記復号映像における前記領域情報が示す領域において鮮明化を行う鮮明化手段と、
前記鮮明化が行われた前期復号映像を表示する表示手段と、
を備える
映像処理システム。
【請求項９】
映像において、事象が発生すると推定された発生位置に基づく第１領域を決定し、
前記第１領域を符号化する第１条件と、前記映像に含まれ前記第１領域以外の領域である第２領域を符号化する第２条件とを、前記第１領域が前記第２領域よりも高画質になるように設定する、
映像処理方法。
【請求項１０】
前記映像が配信される通信ネットワークにおいて利用可能な通信帯域に基づいて、前記第１条件と前記第２条件とを設定する
請求項９に記載の映像処理方法。
【請求項１１】
センサによって取得したデータに基づいて、前記発生位置を推定する
請求項９又は１０に記載の映像処理方法。
【請求項１２】
前記映像において映像パターンを前記事象として検出し、当該事象が検出された位置を前記発生位置として推定する
請求項１１に記載の映像処理方法。
【請求項１３】
２以上のマイクロホンによって集音された音声のデータに基づいて音源の方向を特定し、当該音源の方向が示す、前記映像における位置を、前記発生位置として推定する
請求項１１又は１２に記載の映像処理方法。
【請求項１４】
前記音声のデータにおいて所定の音声パターンを検出し、当該音声パターンを含む前記音声の前記音源の方向を特定する
請求項１３に記載の映像処理方法。
【請求項１５】
前記第１領域を前記第１条件のもとに符号化し、前記第２領域を前記第２条件のもとに符号化する
請求項９から１４のいずれか１項に記載の映像処理方法。
【請求項１６】
コンピュータに、
映像において、事象が発生すると推定された発生位置に基づく第１領域を決定する決定処理と、
前記第１領域を符号化する第１条件と、前記映像に含まれ前記第１領域以外の領域である第２領域を符号化する第２条件とを、前記第１領域が前記第２領域よりも高画質になるように設定する設定処理と、
を実行させるプログラムを記憶する記憶媒体。
【請求項１７】
前記設定処理は、前記映像が配信される通信ネットワークにおいて利用可能な通信帯域に基づいて、前記第１条件と前記第２条件とを設定する
請求項１６に記載の記憶媒体。
【請求項１８】
コンピュータに、
センサによって取得したデータに基づいて、前記発生位置を推定する位置推定処理
をさらに実行させる前記プログラムを記憶する請求項１６又は１７に記載の記憶媒体。
【請求項１９】
前記位置推定処理は、前記映像において映像パターンを前記事象として検出し、当該事象が検出された位置を前記発生位置として推定する
請求項１８に記載の記憶媒体。
【請求項２０】
前記位置推定処理は、２以上のマイクロホンによって集音された音声のデータに基づいて音源の方向を特定し、当該音源の方向が示す、前記映像における位置を、前記発生位置として推定する
請求項１８又は１９に記載の記憶媒体。
【請求項２１】
前記位置推定処理は、前記音声のデータにおいて所定の音声パターンを検出し、当該音声パターンを含む前記音声の前記音源の方向を特定する
請求項２０に記載の記憶媒体。
【請求項２２】
コンピュータに、
前記第１領域を前記第１条件のもとに符号化し、前記第２領域を前記第２条件のもとに符号化する符号化処理
をさらに実行させる前記プログラムを記憶する請求項１６から２１のいずれか１項に記載の記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、映像を処理する技術に関する。
【背景技術】
【０００２】
警察や消防などの公共機関においては、例えば、行事や催し物における警備業務を行う場合、及び、災害、事件、事故などが発生した場合に、映像を活用した、現場の状況把握、不審者及び不審物の検知などの業務の高度化が求められている。このような業務に活用される映像を配信するための、臨時の映像配信向け自営ネットワークの構築や、携帯キャリア網の活用などの取り組みもなされている。また、将来的には、公共向けＬＴＥ（Ｌｏｎｇ  Ｔｅｒｍ  Ｅｖｏｌｕｔｉｏｎ）の構築も検討されている。公共向けＬＴＥは、ＰＳ−ＬＴＥ（Ｐｕｂｌｉｃ  Ｓａｆｅｔｙ  ＬＴＥ）とも呼ばれる。【０００３】
公共業務の高度化に向けて映像解析技術を活用するためには、高画質な映像が求められる。災害、事件、事故などの発生時の現場の状況を映像によって把握するため、及び、事件、事故の予兆を検知するためには、災害、事件、事故などが発生しうる場所の映像を、発生の前から得る必要がある。そのためには、映像を、災害、事件、事故などが発生しうる場所から送信するための通信インフラが必要である。しかし、災害、事件、及び、事故などが発生する時刻及び場所は予測できない。そのため、大容量な公共向け通信インフラを、災害、事件、及び、事故などが発生しうる全ての場所に予め構築しておくことは現実的ではない。従って、映像を利用した公共の業務に、既存の公共向けネットワークの帯域を有効に活用することが求められる。公共の業務に映像を使用する場合、映像の全ての領域が重要であるとは限らない。重要な領域は、例えば災害、事件、事故などに関連する領域である。そのような、例えば重要かつ必要な対象物が映る領域は、関心のある領域（ＲＯＩ：Ｒｅｇｉｏｎ  ｏｆ  Ｉｎｔｅｒｅｓｔ）と呼ばれる。以下の説明では、ＲＯＩは、関心領域とも表記される。また、以下の説明では、ＲＯＩは、例えば、映像として撮影されている環境において、状況の把握が求められる事象が生じる領域を指す。【０００４】
例えば特許文献１には、予め設定されたＲＯＩがそれ以外の領域よりも高画質になるように制御する監視システムが開示されている。【０００５】
特許文献２には、異なる複数のＲＯＩ認識方法から選択された方法によって認識されたＲＯＩを、ＲＯＩ領域として設定するＲＯＩ領域設定装置が開示されている。【０００６】
特許文献３には、事故、事件、災害などの所定のイベントが同時に複数発生した場合に、発生したイベントの相対優先度に基づいて、監視カメラの撮影領域を調整する監視カメラ及び監視システムが開示されている。【０００７】
特許文献４には、映像を配信するネットワーク帯域に合わせて階層符号化された映像データの一部のデータを切り捨てるトランスコードを行う前に、ＲＯＩ以外の領域の映像データの符号量を削減する動画像通信システムが開示されている。特許文献５には、他の領域よりも画質が高くなるよう設定されている領域の大きさを、測定された通信レートに応じて、縮小又は拡大させる動画像通信システムが開示されている。【０００８】
特許文献６には、検出されたユーザの視線方向に基づいて、ユーザが注視する注視領域を、映像が分割された複数の領域から選択し、選択された注視領域の符号化品質を向上させる映像配信装置が開示されている。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２００６−２０３３９５号公報
【特許文献２】特開２００４−０７２６５５号公報
【特許文献３】特開２００９−２９０５０１号公報
【特許文献４】特開２００５−３４１０７６号公報
【特許文献５】特開２０１５−２０８０２１号公報
【特許文献６】特開２００５−１３０２５１号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
公共機関の業務、例えば警察による行事や催し物における警備業務では、テロや事件などを未然に防ぐためには、特にＲＯＩの映像を、高画質で、確実に遠隔の本部に配信する必要がある。警備業務におけるＲＯＩは、例えば、不審者、不審物、人が多く集まる場所、悲鳴などが聞こえた方向の場所などである。このような、警備業務におけるＲＯＩは、いつどこで発生するか予測できない。【００１１】
特許文献１の技術によると、ＲＯＩは予め設定されている。そのため、特許文献１の技術を、ＲＯＩが発生する場所を予め特定できない映像に適用することは困難である。また、特許文献２及び特許文献３には、映像の送信に使用する通信ネットワークの帯域の削減は開示されていない。特許文献２及び特許文献３の技術では、映像のＲＯＩの画質を低下させずに、その映像の送信に使用する通信ネットワークの帯域を削減することはできない。【００１２】
特許文献４の画像通信システムは、まず、ＲＯＩ以外の領域の、拡張レイヤの符号量を削減し、さらに、トランスコードにおいて、拡張レイヤの下位プレーン、拡張レイヤの上位プレーン、基本レイヤの順にデータを切り捨てる。この場合、トランスコードにおいてＲＯＩのデータも切り捨てられるので、ＲＯＩの画質も低下する。すなわち、特許文献４の技術では、ＲＯＩの画質を低下させずに、映像の送信に必要なネットワーク帯域を削減することはできない。【００１３】
特許文献５の技術では、通信帯域によっては、画質が高くなるように設定されている領域（以下、「高画質領域」と表記）の大きさが縮小する。例えば、映像に映っている対象物が興味の対象である場合、その対象物の領域が、本来のＲＯＩである。特許文献５では、高画質領域は、必ずしもＲＯＩと一致しない。例えば、最初はＲＯＩが高画質領域に含まれていても、特許文献５の画像通信システムによって、高画質領域の大きさが縮小された場合、ＲＯＩが高画質領域からはみ出すことがありうる。また、高画質領域がＲＯＩより小さくなることもありうる。そのような場合、ＲＯＩのうち、高画質領域に含まれない領域の画質は低下する。すなわち、特許文献５の技術では、ＲＯＩの画質を低下させずに、映像の送信に必要なネットワーク帯域を削減することはできない。【００１４】
特許文献６において、ユーザがＲＯＩを注視していない場合、注視領域はＲＯＩではない。その場合、特許文献６の技術では、ＲＯＩが注視領域として特定されるとは限らない。従って、注視領域の符号化品質を向上させたとしても、ＲＯＩの符号化品質を向上させることができるとは限らない。ＲＯＩが注視されていない場合、ＲＯＩの画質は低下する。すなわち、特許文献６の技術では、ＲＯＩの画質を低下させずに、映像の送信に必要なネットワーク帯域を削減することはできない。【００１５】
本発明は、上記課題を解決するためになされた。本発明の目的の１つは、映像における発生場所が予め定まっていない関心領域の画質の低下を抑制しながら、その映像の送信に必要なネットワーク帯域を削減できる映像処理技術を提供することである。
【課題を解決するための手段】
【００１６】
本発明の一態様に係る映像処理装置は、映像において、事象が発生すると推定された発生位置に基づく第１領域を決定する決定手段と、前記第１領域を符号化する第１条件と、前記映像に含まれ前記第１領域以外の領域である第２領域を符号化する第２条件とを、前記第１領域が前記第２領域よりも高画質になるように設定する設定手段と、を備える。【００１７】
本発明の一態様に係る映像処理方法は、映像において、事象が発生すると推定された発生位置に基づく第１領域を決定し、前記第１領域を符号化する第１条件と、前記映像に含まれ前記第１領域以外の領域である第２領域を符号化する第２条件とを、前記第１領域が前記第２領域よりも高画質になるように設定する。【００１８】
本発明の一態様に係る記憶媒体は、コンピュータに、映像において、事象が発生すると推定された発生位置に基づく第１領域を決定する決定処理と、前記第１領域を符号化する第１条件と、前記映像に含まれ前記第１領域以外の領域である第２領域を符号化する第２条件とを、前記第１領域が前記第２領域よりも高画質になるように設定する設定処理と、を実行させるプログラムを記憶する。本発明は、上記記憶媒体に格納されているプログラムによっても実現される。
【発明の効果】
【００１９】
本発明には、映像における発生場所が予め定まっていない関心領域の画質の低下を抑制しながら、その映像の送信に必要なネットワーク帯域を削減できるという効果がある。
【図面の簡単な説明】
【００２０】
【図１】図１は、本発明の第１の実施形態に係る映像処理システムの構成の例を示すブロック図である。
【図２】図２は、本発明の第１の実施形態に係る映像処理装置の構成の例を示すブロック図である。
【図３】図３は、本発明の第１の実施形態に係る受信装置の構成例を示すブロック図である。
【図４】図４は、本発明の第１の実施形態に係る映像処理システムの詳細な全体像を表すブロック図である。
【図５】図５は、本発明の第１の実施形態に係る映像処理装置の動作の例を示すフローチャートである。
【図６】図６は、本発明の第１の実施形態に係る映像処理装置の初期化処理の動作の例を表すフローチャートである。
【図７】図７は、本発明の第１の実施形態に係る映像処理装置のイベント検出処理の動作の例を示すフローチャートである。
【図８】図８は、本発明の第１の実施形態に係る受信装置の動作の例を示すフローチャートである。
【図９】図９は、本発明の第２の実施形態に係る映像処理システムの構成の例を表すブロック図である。
【図１０】図１０は、本発明の第２の実施形態に係る映像処理装置の動作を表すフローチャートである。
【図１１】図１１は、本発明の第２の実施形態に係る映像処理装置の初期化処理における動作の例を表すフローチャートである。
【図１２】図１２は、本発明の第２の実施形態に係る映像処理装置の、イベント検出処理推定動作を示すフローチャートである。
【図１３】図１３は、本発明の第３の実施形態に係る映像処理システムの構成の例を表すブロック図である。
【図１４】図１４は、本発明の第３の実施形態に係る映像処理装置の動作の例を表すフローチャートである。
【図１５】図１５は、本発明の第３の実施形態に係る受信装置の動作を示すフローチャートである。
【図１６】図１６は、本発明の第４の実施形態に係る映像処理システムの構成の例を表すブロック図である。
【図１７】図１７は、本発明の第４の実施形態に係る映像処理装置の動作の例を示すフローチャートである。
【図１８】図１８は、本発明の第４の実施形態に係る映像処理装置の、イベント情報受信処理における動作の例を表すフローチャートである。
【図１９】図１９は、本発明の第４の実施形態に係る受信装置の動作の例を示すフローチャートである。
【図２０】図２０は、本発明の第４の実施形態に係る受信装置のイベント検出処理の動作の例を表すフローチャートである。
【図２１】図２１は、本発明の第５の実施形態に係る映像処理システムの構成の例を表すブロック図である。
【図２２】図２２は、本発明の第５の実施形態に係る映像処理装置の動作の例を表すフローチャートである。
【図２３】図２３は、本発明の第５の実施形態に係る映像処理装置の符号化条件決定処理の動作の例を表すフローチャートである。
【図２４】図２４は、本発明の第５の実施形態に係る受信装置の動作の例を表すフローチャートである。
【図２５】図２５は、本発明の第６の実施形態に係る映像処理装置の構成の例を表すブロック図である。
【図２６】図２６は、本発明の第６の実施形態に係る映像処理装置の動作の例を表すフローチャートである。
【図２７】図２７は、本発明の各実施形態に係る、映像処理装置及び受信装置を実現できる、コンピュータの構成の例を示すブロック図である。
【発明を実施するための形態】
【００２１】
＜第１の実施の形態＞
＜＜構成＞＞
次に、本発明の第１の実施形態について、図面を参照して説明する。
【００２２】
図１は、本発明の第１の実施形態の映像処理システム５００の構成の例を示すブロック図である。映像処理システム５００は、１以上の映像処理装置１００と、受信装置２００と、を含む。１以上の映像処理装置１００、および、受信装置２００は、通信ネットワーク３００を介して互いに通信可能に接続されていればよい。図１に示す例では、映像処理装置１００の例として映像処理装置１００Ａ、１００Ｂ、・・・１００Ｍが示されている。映像処理装置１００Ａ、１００Ｂ、・・・１００Ｍは、以下で映像処理装置１００の構成として示す共通の構成を含んでいればよい。以下では、映像処理装置１００Ａ、１００Ｂ、・・・１００Ｍを、映像処理装置１００と総称する。映像処理装置１００は、無線通信機能を有していてもよい。無線通信機能は、例えば、ＬＴＥに準拠した無線通信を行う機能であってもよい。無線通信機能は、Ｗｉ−Ｆｉ（Ｗｉｒｅｌｅｓｓ  Ｆｉｄｅｌｉｔｙの略、登録商標）の規格に従う無線ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）によって通信を行う機能であってもよい。映像処理装置１００は、これらの無線通信機能を用いて、通信ネットワーク３００を介して、具体的には、通信ネットワーク３００の基地局や無線アクセスポイントなどを介して、受信装置２００と通信可能に接続されていてもよい。受信装置２００は、Ｅｔｈｅｒｎｅｔ（登録商標）などの規格に従う有線通信機能を有し、有線通信機能により通信ネットワーク３００に接続されている。なお、少なくとも一部の映像処理装置１００は、有線通信機能を有し、有線通信機能により通信ネットワーク３００に接続されてもよい。同様に、受信装置２００は、無線通信機能を有し、無線通信機能により通信ネットワーク３００に接続されてもよい。
【００２３】
図２は、第１の実施形態の映像処理装置１００の構成の例を示すブロック図である。映像処理装置１００は、映像受信部１１５と、エンコード部１２０（符号化部とも表記される）と、位置推定部１３０と、決定部１３１と、設定部１３２と、第１記憶部１４０と、帯域推定部１５０と、第１通信部１６０を含む。映像処理装置１００は、カメラ部１１０と通信可能に接続されている。
【００２４】
カメラ部１１０は、例えば、映像処理装置１００に備え付けられたカメラである。カメラ部１１０は、映像処理装置１００に内蔵されていてもよいし、ケーブル類により映像処理装置１００に接続されていてもよい。また、カメラ部１１０は、映像と同時に音声を録音するマイクが備えていてもよい。カメラ部１１０は、撮影した映像を、映像処理装置１００の例えば映像受信部１１５に送信する。
【００２５】
エンコード部１２０、位置推定部１３０、決定部１３１、設定部１３２、帯域推定部１５０は、例えば、プログラム制御により処理を実行するＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）によって実現されていてもよい。具体的には、エンコード部１２０、位置推定部１３０、決定部１３１、設定部１３２、帯域推定部１５０は、例えば、映像処理装置１００に搭載されたＯＳ（Ｏｐｅｒａｔｉｎｇ  Ｓｙｓｔｅｍ）に基づいて動作するアプリケーションソフトウェアに従って処理を実行するＣＰＵによって実現されていてもよい。言い換えると、ＣＰＵは、メモリにロードされたプログラムを実行することによって、エンコード部１２０、位置推定部１３０、決定部１３１、設定部１３２、および、帯域推定部１５０として動作してもよい。なお、エンコード部１２０、位置推定部１３０、帯域推定部１５０は、それぞれの機能を高速に処理するための、例えば回路などのハードウェアエンジンとして実装されていてもよい。
【００２６】
映像受信部１１５は、カメラ部１１０が撮影した映像のデータである映像データを受信する。受信した映像データが符号化されている映像データである場合、映像受信部１１５は、その映像データを復号すればよい。映像受信部１１５は、受信した映像データを、エンコード部１２０および位置推定部１３０に送信する。映像受信部１１５は、受信した映像データを、例えばフレーム毎に、エンコード部１２０および位置推定部１３０に送信すればよい。カメラ部１１０が音声入力機能を備えている場合、映像受信部１１５は、カメラ部１１０から、映像データに加えて、音声データを受信してもよい。本実施形態では、映像受信部１１５は、音声データをエンコード部１２０に送信してもよい。その場合、後述されるエンコード部１２０は、映像データに加えて、音声データを既存の符号化方法のいずれかにより符号化してもよい。その場合、さらに、第１通信部１６０は、符号化された映像データと共に符号化された音声データを、受信装置２００に送信してもよい。本実施形態の映像受信部１１５は、音声データを位置推定部１３０に送信しなくてよい。
【００２７】
位置推定部１３０は、センサによって取得したデータに基づいて、映像における、事象が発生する位置である、事象の発生位置を推定する。具体的には、位置推定部１３０は、例えば、映像のフレームにおける、事象の発生位置を推定する。以下の説明では、映像における位置は、映像のフレームにおける位置を表す。映像における領域は、映像のフレームにおける領域を表す。位置推定部１３０は、映像のフレーム毎に、事象の発生位置を推定すればよい。
【００２８】
事象の発生位置は、領域を示すデータによって表されていてもよい。領域を示すデータは、例えば、領域の範囲を特定するデータである。領域を示すデータは、例えば、四辺形の４つの頂点の座標、平行四辺形の特定の１点（例えば、２つの座標の値が共に最小である点）及び２辺を表す２つのベクトル、円の中心の座標及び半径、又は、領域に含まれる各画素の座標の組などである。領域を示すデータは、これらの例に限られない。事象の発生位置は、点の座標によって表されていてもよい。以下の説明では、発生する事象を「イベント」とも表記する。事象の発生位置は、イベントの発生位置とも表記される。位置推定部１３０は、センサによって取得したデータから、そのデータに現れる所定の特徴パターンを、発生する事象として検出すればよい。位置推定部１３０は、検出された特徴パターンが現れた領域を、事象の発生位置として推定してもよい。
【００２９】
本実施形態では、センサはカメラ部１１０である。センサによって取得したデータは映像のデータである。特徴パターンは、後で詳述される映像パターンである。すなわち、位置推定部１３０は、カメラ部１１０によって撮影された映像の映像データから、発生する事象として、例えば、あらかじめ定められた映像パターンを検出する。位置推定部１３０は、検出された映像パターンに基づいて、事象の発生方向を推定する。事象の発生方向、すなわち、発生する事象の方向は、例えば、カメラ部１１０から、事象が発生する位置への方向である。さらに具体的には、事象の発生方向は、例えば、カメラ部１１０のカメラ中心から、事象が発生する位置への方向である。発生する事象は、例えば、災害、事件、事故など、それらに繋がる可能性のある前兆（例えば、対象人物または対象物）などである。映像パターンは、例えば、あらかじめ顔の情報が登録されている対象人物であってもよい。映像パターンは、例えば、特定の動きをする人物であってもよい。映像パターンは、例えば、あらかじめ形状等が登録されている対象物の、形状の変化であってもよい。映像パターンは、例えば、あらかじめ形状および典型的な動きのパターンが登録されている対象物のうち、登録されている動きのパターンと異なる動きを行う対象物であってもよい。事象の発生位置は、検出された人物の顔の領域であってもよい。事象の発生位置は、検出された人物全体の領域であってもよい。事象の発生位置は、顔が検出された人物の全体の領域であってもよい。事象の発生位置は、検出された対象物の領域であってもよい。
【００３０】
位置推定部１３０は、まず、発生する事象の方向である、事象の発生方向を推定してもよい。そして、位置推定部１３０は、推定した発生方向が示す、映像における点（例えば、画素）の座標を、事象の発生位置として推定してもよい。事象の発生方向は、例えば、検出された人物の顔の方向、すなわち、カメラ部１１０から人物の顔への方向であってもよい。人物の顔の方向は、例えば、検出された人物の顔の中心の方向、すなわち、カメラ部１１０から人物の顔の中心への方向であってもよい。顔の中心の方向は、顔の領域の例えば重心によって示されていてもよい。位置推定部１３０は、顔の中心の方向を、映像から検出された顔の部品（目、鼻、及び、口等）の位置と、例えば予め実験的に得られている、顔の部品の位置と顔の中心の位置との関係とに基づいて決定してもよい。事象の発生方向は、顔が検出された人物の方向であってもよい。人物の方向は、例えば、カメラ部１１０から、人物の身体に予め定められている点（例えば胴体の重心等）への方向であってもよい。位置推定部１３０は、映像において顔が検出された人物の身体の領域をさらに検出し、検出された身体の領域において上述の予め定められている点を特定してもよい。位置推定部１３０は、予め実験的に導出されている、顔の位置及び大きさと予め定められている点との間の位置関係と、検出された顔の領域とを使用して、顔が検出された人物の身体に予め定められている点を算出してもよい。位置推定部１３０は、人物の方向として、顔の方向を使用してもよい。事象の発生方向は、例えば、対象物の方向、すなわち、カメラ部１１０から対象物への方向であってもよい。対象物の方向は、例えば、その対象物の領域の重心によって示される方向であってもよい。位置推定部１３０は、事象の発生方向を、他の方法によって推定してもよい。
【００３１】
詳しくは後述されるように、位置推定部１３０が検出する、発生する事象を示す情報（以下、照合データとも表記）が、第１記憶部１４０に予め格納されている。本実施形態では、映像パターンが、位置推定部１３０によって、発生する事象として検出される。第１記憶部１４０に格納されている照合データは、発生する事象として検出される、映像パターンを表す。
【００３２】
以下では、映像パターンの例として、特定の人物の顔を検出する場合について説明する。第１記憶部１４０には、特定の人物の顔を表す情報（例えば、顔の特徴を表し、照合に使用可能な情報）が、照合データとして格納されている。以下では、顔の特徴を表す情報を、「顔特徴」と表記する。第１記憶部１４０には、複数の人物の各々について、顔特徴が照合データとして格納されていてもよい。以下の説明では、照合データに情報が含まれている顔（すなわち、検出される顔）を、「登録顔」と表記する。
【００３３】
位置推定部１３０は、カメラ部１１０によって撮影された映像の映像データにおいて、人物の顔（以下、「検出顔」とも表記）を検出する。具体的には、位置推定部１３０は、人物の顔の領域を検出する。位置推定部１３０は、検出した顔の領域から、その顔の顔特徴を抽出すればよい。位置推定部１３０は、検出した顔の顔照合を行う。具体的には、位置推定部１３０は、検出した顔の顔特徴と、第１記憶部１４０に格納されている照合データとを照合することによって、検出した顔が、第１記憶部１４０に照合データが格納されている人物の顔（すなわち、登録顔）であるか否かを推定する。照合の結果、検出顔が、照合データのいずれかの登録顔と同じであると判定した場合、位置推定部１３０は、その検出顔を、上述の、発生する事象として検出すればよい。位置推定部１３０は、照合の結果、登録顔と判定された顔を、発生する事象として検出すればよい。映像から顔を検出する方法として、さまざまな顔検出の方法が適用可能である。顔の照合を行う方法としても、さまざまな顔照合の方法が適用可能である。
【００３４】
位置推定部１３０は、同じ映像フレームにおいて、複数の検出顔を、発生する事象として検出してもよい。検出顔が登録顔と判定された場合、位置推定部１３０は、前のフレームにおいて登録顔と判定された検出顔の領域の近くで検出された、現フレームにおいて検出された検出顔（例えば、登録顔の中心から所定距離以内に中心が存在する検出顔）を、登録顔と判定された検出顔と同じ顔とみなしてもよい。位置推定部１３０は、例えば、現フレームにおいて検出された検出顔の領域が、前のフレームで登録顔と判定された検出顔の領域と重なる場合、現フレームの検出顔が、前のフレームで登録顔と判定された検出顔の領域の近くにおいて検出されたとみなしてもよい。そして、位置推定部１３０は、前のフレームで登録顔と判定された検出顔が、現フレームにおいて、検出された顔の位置に移動したとみなしてもよい。言い換えると、位置推定部１３０は、登録顔と判定された検出顔の追跡を行ってもよい。その場合、位置推定部１３０は、検出顔の追跡ができている間、検出顔の照合を行わなくてもよい。
【００３５】
決定部１３１は、事象が発生する位置として推定された発生位置に基づく関心領域（以下、ＲＯＩとも表記）を、その発生位置を含む範囲が撮影された映像において決定する。上述のように、発生位置は、発生方向が示す、映像における点（例えば画素）であってもよい。決定部１３１は、映像において発生方向が示す点（すなわち、発生位置である点）を含む領域を、ＲＯＩに設定してもよい。発生位置を示す点は、例えば、登録顔を判定された顔の領域の中心（例えば、重心）であってもよい。決定部１３１は、登録顔と判定された顔の中心を含む、所定サイズの領域を、ＲＯＩに設定してもよい。決定部１３１は、登録顔と判定された顔の領域を、ＲＯＩに設定してもよい。決定部１３１は、顔が登録顔であると判定された人物の領域を、ＲＯＩに設定してもよい。決定部１３１は、顔が登録顔であると判定された人物の領域を含み、動きのある領域を、ＲＯＩに設定してもよい。
【００３６】
決定部１３１は、ＲＯＩが、エンコード部１２０による符号化の単位としてのブロック集合であるように、ＲＯＩを決定してもよい。決定部１３１は、例えば、エンコード部１２０による符号化の単位としてのブロックのうち、事象の発生位置（例えば、上述の顔の領域）の少なくとも一部を含むブロックを、ＲＯＩに設定してもよい。以下の説明では、ＲＯＩを「第１領域」とも表記する。ＲＯＩは、「高画質領域」と表記されることもある。映像のフレームのＲＯＩ以外の領域を、「第２領域」と表記する。映像のフレームのＲＯＩ以外の領域は、「低画質領域」と表記されることもある。決定部１３１が決定するＲＯＩは、以上の例に限られない。
【００３７】
第１記憶部１４０は、例えば、メモリなどの記憶媒体である。第１記憶部１４０は、位置推定部１３０が、事象の発生方向を推定するために使用される情報（例えば、上述の照合データ）を記憶する。事象は、例えば、災害、事件、事故などに繋がる可能性のある対象人物や対象物などである。上述の例では、照合データは、例えば１人以上の人物の各々についての、顔の特徴を表すデータである。第１記憶部１４０は、さらに、ＲＯＩを決定するために使用される情報を記憶していてもよい。ＲＯＩを決定するために使用される情報は、例えば、ＲＯＩとして設定する領域の大きさであってもよい。
【００３８】
帯域推定部１５０は、その帯域推定部１５０が含まれる映像処理装置１００が利用できる通信ネットワーク３００の帯域（以下の説明では、「可用帯域」と表記）を推定する。帯域推定部１５０が可用帯域を推定する方法として、既存のさまざまな方法が適用可能である。
【００３９】
設定部１３２は、映像のフレームのうち、第１領域を符号化する条件（以下、第１条件とも表記）と、第１領域以外の領域（すなわち、上述の第２領域）を符号化する条件（以下、第２条件とも表記）を、第１領域が第２領域より高画質になるように設定する。領域を符号化する条件は、例えば、符号化の際に削減するデータの割合等を示すパラメータ（符号化パラメータ）によって表されていてもよい。設定部１３２は、推定された可用帯域に基づいて、第１条件及び第２条件を設定してもよい。設定部１３２は、例えば、エンコード部１２０によって符号化される映像データのビットレート（すなわち、単位時間当たりのデータ量）が、推定された可用帯域のもとで転送可能であるように、第１条件及び第２の条件を設定すればよい。その際、設定部１３２は、推定された可用帯域に、０より大きく１以下である定数を掛けた値を、ビットレートの上限に設定してもよい。
【００４０】
設定部１３２は、例えば、第１条件を予め定められた条件としてもよい。そして、設定部１３２は、符号化された第２領域のビットレートが、予測された可用帯域と、第１条件のもとで符号化されたＲＯＩの部分のビットレートとの差以下になるように、第２条件を設定してもよい。第１条件が予め定められた条件である場合に符号化されたＲＯＩのデータを推定された可用帯域のもとで転送できない場合、設定部１３２は、フレームレートを下げることによって、符号化データのビットレートを低減してもよい。この場合、フレームレート以外のパラメータは変更しなくてもよい。設定部１３２は、ＲＯＩ以外の領域のみのフレームレートを下げてもよい。その場合、設定部１３２は、ＲＯＩ以外の領域が、複数のフレームで同じになるよう、第２条件を設定すればよい。言い換えると、設定部１３２は、それらの複数のフレームが符号化された符号化データにおいて、ＲＯＩのみが変化し、ＲＯＩ以外の領域が変化しないように、第１条件及び第２条件を設定してもよい。第１条件が予め定められた条件である場合に符号化されたＲＯＩのデータを推定された可用帯域のもとで転送できない場合、設定部１３２は、推定された可用帯域のもとで符号化されたＲＯＩのデータが転送可能であるように、ＲＯＩのビットレートを下げてもよい。
【００４１】
なお、発生する事象が検出されなかった場合、設定部１３２は、例えば、映像の画面の全ての領域について同じ符号化の条件を設定すればよい。その場合、設定部１３２は、符号化データのビットレートが可用帯域に収まるよう、符号化の条件を設定すればよい。その際、設定部１３２は、推定された可用帯域に、０より大きく１以下である定数を掛けた値を、ビットレートの上限に設定してもよい。ビットレートの下限が決められていてもよい。設定部１３２は、可用帯域が予め定められたビットレートの下限を下回る場合、フレームレート以外の符号化パラメータの値はビットレートが下限である場合の値のままとし、フレームレートを下げてもよい。
【００４２】
エンコード部１２０は、カメラ部１１０によって撮影された映像の、映像受信部１１５が受信した映像データの符号化を行う。エンコード部１２０による符号化の規格は、符号化されたデータの量を、符号化の条件（例えば符号化のパラメータである符号化パラメータ）を変更することによって、映像の画面内の場所に応じて変更できる規格であればよい。通常、符号化されたデータの量を増加させた場合、そのデータを復号することによって得られる映像の画質は向上する。符号化されたデータの量を減少させた場合、そのデータを復号することによって得られる映像の画質は低下する。エンコード部１２０は、映像の高画質領域の部分を、設定部１３２によって設定された第１条件のもとで符号化し、高画質領域以外の部分（低画質領域／第２領域）を、設定部１３２によって設定された第２条件のもとで符号化すればよい。上述のように、第１条件及び第２条件は、高画質領域の画質が低画質領域以外の領域の画質より高くなるように設定される。エンコード部１２０は、第１条件及び第２条件のもとで符号化された映像データ（以下、「符号化データ」とも表記）を、第１通信部１６０と通信ネットワーク３００とを介して受信装置２００に送信する。
【００４３】
なお、決定部１３１が決定するＲＯＩ（すなわち第１領域）は、エンコード部１２０による符号化の最小単位であるブロックの集合でなくてもよい。言い換えると、ＲＯＩの境界に、いずれかのブロックの境界の少なくとも一部ではない部分が含まれていてもよい。ＲＯＩの境界の全てが、いずれかのブロックの境界の少なくとも一部でなくてもよい。その場合、エンコード部１２０は、ＲＯＩの少なくとも一部を含むブロックを、第１条件に基づいて符号化し、ＲＯＩの少なくとも一部を含まないブロックを、第２条件に基づいて符号化してもよい。
【００４４】
第１通信部１６０は、例えば、ＯＳのカーネルによって制御されるプロセッサと、そのプロセッサに通信可能に接続されている通信インタフェースとによって実現されてもよい。その場合、第１通信部１６０は、例えば、トランスポート層の処理、ネットワーク層の処理、及び、ＭＡＣ（Ｍｅｄｉａ  Ａｃｃｅｓｓ  Ｃｏｎｔｒｏｌ）などの処理を行えばよい。トランスポート層の処理は、例えば、ＴＣＰ（Ｔｒａｎｓｍｉｓｓｉｏｎ  Ｃｏｎｔｒｏｌ  Ｐｒｏｔｏｃｏｌ）やＵＤＰ（Ｕｓｅｒ  Ｄａｔａｇｒａｍ  Ｐｒｏｔｏｃｏｌ）などの処理である。ネットワーク層の処理は、例えば、ＩＰ（Ｉｎｔｅｒｎｅｔ  Ｐｒｏｔｏｃｏｌ）などの処理である。第１通信部１６０は、ＬＴＥ又は無線ＬＡＮなどの規格に従った通信を行う通信モジュールであってもよい。第１通信部１６０は、エンコード部１２０から符号化された映像データを受け取り、その符号化データを、通信ネットワーク３００を介して受信装置２００に送信する。
【００４５】
図３は、本実施形態の受信装置２００の構成例を示すブロック図である。受信装置２００は、入出力部２１０と、制御部２２０と、第２記憶部２３０と、第２通信部２４０を含む。
【００４６】
入出力部２１０は、例えば、受信装置２００に備え付けられた、ディスプレイ又はタッチパネルなどの表示機能を備える出力装置と、タッチパネル、キーボード、及び、マウスなどの入力装置とによって実現される。入出力部２１０は、受信装置２００に通信可能に接続されていてもよい。入出力部２１０は、例えば制御部２２０の制御に従って、映像を表示する。入出力部２１０は、さらに、ユーザによる指示を受け付ける。具体的には、入出力部２１０は、１つ以上の映像処理装置１００からの映像のうち、表示する映像の指示を促す表示を行う。表示する映像の指示を促す表示は、例えば、受信中の映像のサムネイル画像であってもよい。表示する映像の指示を促す表示は、例えば、映像処理装置１００の、装置名等の識別子及び設置場所などのリストであってもよい。入出力部２１０は、ユーザによって入力された、表示する映像の指示を受け付ける。表示する映像の指示は、複数の映像処理装置１００からの映像を表示する指示であってもよい。入出力部２１０は、ユーザによって入力された、表示する映像の指示によって特定される、映像の識別子を、制御部２２０に通知する。映像の識別子は、その映像を送信する映像処理装置１００の識別子であってもよい。入出力部２１０は、表示が指示された映像の映像データを制御部２２０から受信し、受信した映像データを表示する。
【００４７】
制御部２２０は、例えば、プログラム制御に従って処理を実行するＣＰＵによって実現される。具体的には、制御部２２０は、例えば、受信装置２００に搭載されたＯＳに基づいて動作するアプリケーションソフトウェアの制御に従って処理を実行するＣＰＵによって実現される。制御部２２０は、第２通信部２４０が受信した符号化データを第２通信部２４０から受け取る。制御部２２０は、受け取った符号化データに、その符号化データが表す映像を撮影した映像処理装置１００を関連付け、撮影した映像処理装置１００が関連付けられた符号化データを第２記憶部２３０に格納する。また、入出力部２１０から受信した識別子が示す映像（すなわち、表示が指示された映像）の符号化データを復号することによってその映像の映像データを生成し、生成した映像データを入出力部２１０に送信する。すなわち、入出力部は、表示が指示された映像を入出力部２１０に表示させる。
【００４８】
第２記憶部２３０は、第２通信部２４０を介して制御部２２０が受信した、符号化された映像データすなわち符号化データを記憶する。
【００４９】
第２通信部２４０は、映像処理装置１００における第１通信部１６０と同様に実現される。第２通信部２４０は、通信ネットワーク３００を介して、映像処理装置１００からの符号化された映像データ（すなわち符号化データ）を受信する。第２通信部２４０は、受信した符号化データを、制御部２２０へ送信する。
【００５０】
図４は、本実施形態の映像処理システム５００の詳細な全体像を表すブロック図である。図４に示す映像処理システムは、１つ以上の映像処理装置１００と、受信装置２００を含む。１つ以上の映像処理装置１００の各々は、それぞれ、通信ネットワーク３００を介して、受信装置２００に通信可能に接続されている。図４に示す映像処理装置１００の各々は、図２に示す映像処理装置１００である。図４に示す受信装置２００は、図３に示す受信装置２００である。
【００５１】
＜＜動作＞＞
次に、本実施形態の映像処理装置１００の動作について説明する。
【００５２】
図５は、本実施形態の映像処理装置１００の動作の例を示すフローチャートである。なお、図５に示す動作とは独立に、帯域推定部１５０は、映像処理装置１００が、通信可能な状態になると、可用帯域の推定を開始してもよい。その場合、映像処理装置１００は、後述するステップＳ１０２の動作を行わなくてもよい。帯域推定部１５０は、可用帯域の推定を、例えば定期的に行ってもよい。帯域推定部１５０は、推定された可用帯域の情報を、エンコード部１２０に通知してもよい。
【００５３】
ステップＳ１０１：
映像処理装置１００は、例えば、映像処理装置１００の電源が投入されると、初期化処理を行う。映像処理装置１００は、例えば、受信装置２００からの指示に従って初期化処理を行ってもよい。その場合の指示を送信する信号線は、図４では簡単のため省略されている。初期化処理によって設営が開始され、映像データがカメラ部１１０から映像受信部１１５に送信され始める。初期化処理の動作については後で詳述する。
【００５４】
ステップＳ１０２：
帯域推定部１５０は、可用帯域、すなわち、映像処理装置１００から受信装置２００への符号化データの送信に使用できる、通信ネットワーク３００の通信の帯域を推定する。帯域推定部１５０が可用帯域の測定を行うタイミングは、図５に示す例に限られない。設定部１３２は、符号化の条件（例えば上述の第１条件及び第２条件）を決定する際に、最後に推定された可用帯域に基づいて符号化の条件を設定すればよい。
【００５５】
ステップＳ１０３：
次に、映像処理装置１００は、カメラ部１１０から入力された映像データから、災害、事件、事故など、又はそれらの予兆を、イベントとして検出するイベント検出処理を行う。ステップＳ１０３において、発生したイベントに関する領域として、関心領域（ＲＯＩ）が決定部１３１によって決定される。ステップＳ１０３において、映像処理装置１００は、映像の現フレームよりも前のフレームにおいて検出されたイベントの追跡を行ってもよい。イベントが検出されＲＯＩが決定された場合、ＲＯＩの場所を表す情報が、決定部１３１から設定部１３２に通知される。イベントが検出されずＲＯＩが決定されない場合、ＲＯＩが存在しないこと（すなわち、イベントが検出されないこと）を表す情報が、決定部１３１から設定部１３２に通知される。イベント検出処理の動作の詳細については後述する。
【００５６】
ステップＳ１０４：
ステップＳ１０３においてイベントが検知されない場合（ステップＳ１０４においてＮＯ）、映像処理装置１００は、ステップＳ１０６の動作を行う。ステップＳ１０３においてイベントが検知された場合（ステップＳ１０４においてＹＥＳ）、映像処理装置１００は、ステップＳ１０５の動作を行う。
【００５７】
ステップＳ１０５：
設定部１３２は、使用可能な通信の帯域である可用帯域と、決定部１３１によって決定された第１領域とに基づいて、第１領域と映像における第１領域以外の領域の各々における、符号化の条件を決定する。
【００５８】
ステップＳ１０６：
設定部１３２は、推定された通信の帯域、すなわち、可用帯域に基づいて符号化の条件を決定する。
【００５９】
ステップＳ１０７：
エンコード部１２０は、決定された条件に基づいて、映像の符号化を実行する。イベントが検出された場合、すなわち、関心領域が決定された場合、エンコード部１２０は、第１領域の符号化の条件と、第１領域以外の符号化の条件とに従って、第１領域の画質がそれ以外の領域の画質より高くなるよう、映像データの符号化を行う。イベントが検出されなかった場合、すなわち、関心領域が存在しない場合、エンコード部１２０は、映像のフレームの全域を、同一の条件で符号化すればよい。例えばエンコード部１２０は、符号化された映像のデータである符号化データに、映像の識別子を付与してもよい。映像の識別子は、映像にユニークに付与された名称であってもよい。映像の識別子は、例えば、その映像を撮影した映像処理装置１００の識別子と、時刻（例えば、撮影開始時刻）との組み合わせであってもよい。第１通信部１６０が、映像に映像の識別子を付与してもよい。
【００６０】
ステップＳ１０８：
第１通信部１６０は、エンコード部１２０によって符号化された映像のデータである符号化データを、通信ネットワーク３００を介して、受信装置２００に送信する。
【００６１】
ステップＳ１０９：
映像処理装置１００は、撮影が終了した場合（ステップＳ１０９においてＹＥＳ）、図５に示す処理を終了する。例えば、カメラ部１１０の電源がＯＦＦにされた場合、カメラ部１１０又は映像処理装置１００の撮影停止ボタンが押された場合、撮影は終了する。カメラ部１１０の電源が場合、及び、カメラ部１１０の撮影停止ボタンが押された場合、カメラ部１１０から映像データが送信されなくなる。映像処理装置１００は、カメラ部１１０からの映像データの送信が停止した場合、撮影が終了したと判定してもよい。映像処理装置１００が受信装置２００から撮影を終了する指示を受信した場合、映像処理装置１００は、撮影が終了したと判定してもよい。撮影がまだ終了していない場合（ステップＳ１０９においてＮＯ）、映像処理装置１００の動作はステップＳ１０２に戻る。
【００６２】
次に、本実施形態の映像処理装置１００の初期化処理の動作について、図面を参照して詳細に説明する。
【００６３】
図６は、本実施形態の映像処理装置１００の初期化処理の動作の例を表すフローチャートである。
【００６４】
ステップＳ１１１：
例えば、映像処理装置１００の電源が投入されるのに応じて、映像処理装置１００はカメラ部１１０を起動する。
【００６５】
ステップＳ１１２：
カメラ部１１０は、撮影を開始する。カメラ部１１０は、撮影した映像の映像データの、映像受信部１１５への送信を開始する。
【００６６】
次に、本実施形態の映像処理装置１００のイベント検出処理の動作について、図面を参照して詳細に説明する。
【００６７】
図７は、本実施形態の映像処理装置１００のイベント検出処理の動作の例を示すフローチャートである。イベント検出処理の動作は、図４に示すステップＳ１０３の動作である。図７を用いて、ステップＳ１０３の動作の例として、撮影された映像に、顔の照合データに顔が予め登録されている人物と判定される人物が映った場合に、イベントを検出したと判断する場合の動作の詳細を説明する。
【００６８】
ステップＳ１２１：
位置推定部１３０は、センサによって取得したデータにおいて、特徴パターンをイベントとして検出する。本実施形態では、センサはカメラ部１１０である。データは映像のデータである。特徴パターンは、映像パターンである。さらに、映像パターンは、特定の人の顔である。具体的には、位置推定部１３０は、映像データが表す映像において、顔を検出する。
【００６９】
具体的には、位置推定部１３０は、カメラ部１１０から入力された映像データが表す映像のフレームにおいて、人物の顔を検出する。さらに具体的には、位置推定部１３０は、人物の顔の領域を検出する。そして、位置推定部１３０は、第１記憶部１４０から予め登録されている顔の照合データを読み出し、読み出した照合データにデータが含まれる顔と、映像のフレームにおいて検出した顔とを照合する。さらに具体的には、位置推定部１３０は、例えば、映像のフレームにおいて検出された顔（上述の検出顔）の領域から顔の特徴を抽出し、抽出した特徴と、照合データに含まれている顔（登録顔）の特徴とを比較する。照合の結果、照合データのいずれかの登録顔と検出した検出顔が同じ顔であると判定された場合、位置推定部１３０は、その顔を映像パターン、すなわち、特徴パターン（言い換えると、発生するイベント）として検出する。映像から顔の領域が検出されなかった場合、及び、映像から検出された顔がどの登録顔とも異なる顔であると判定された場合、位置推定部１３０は、すなわち、特徴パターン（言い換えると、発生するイベント）を検出しない。
【００７０】
ステップＳ１２２：
ステップＳ１２２において特徴パターン（言い換えると、発生するイベント）が検出されなかった場合（ステップＳ１２２においてＮＯ）、映像処理装置１００は、図７に示す動作を終了する。すなわち、照合の結果、登録顔のいずれかと同じ顔が検出されなかった場合、映像処理装置１００は、図７に示す動作を終了する。その場合、映像処理装置１００は、次に、図５に示すステップＳ１０４の動作を行う。
【００７１】
ステップＳ１２２において特徴パターン（言い換えると、発生するイベント）が検出された場合（ステップＳ１２２においてＹＥＳ）、映像処理装置１００は、次に、ステップＳ１２３の動作を行う。言い換えると、照合の結果、照合リストに登録されているいずれかの顔と同じ顔が検出された場合、映像処理装置１００は、次に、ステップＳ１２３の動作を行う。
【００７２】
ステップＳ１２３：
位置推定部１３０は、映像のフレームにおいて、イベントとして検出された映像パターンの位置（例えば、登録顔と同じ顔として検出した検出顔の領域）に基づいて、事象の発生位置を推定する。上述のように、位置推定部１３０は、登録顔と同じ顔として検出した検出顔の領域を、事象の発生位置として推定してもよい。位置推定部１３０は、顔が登録顔と同じ顔として検出した検出顔である人物の領域を、事象の発生位置として推定してもよい。
【００７３】
位置推定部１３０は、事象の発生方向を決定し、決定された事象の発生方向に基づいて、事象の発生位置（例えば、映像のフレームにおける点の座標）を推定してもよい。この場合、上述のように、事象の発生方向は、例えば、顔が検出された人物の方向であってもよい。事象の発生方向は、検出された顔の方向であってもよい。顔の方向は、カメラ部１１０から顔の領域の重心への方向であってもよい。本実施形態では、決定部１３１は、顔が検出された人物の方向を、事象の発生方向に決定する。決定部１３１は、人物の方向として、カメラ部１１０から映像のフレームにおいて検出された顔の位置への方向を特定する。
【００７４】
ステップＳ１２４：
決定部１３１は、事象の発生位置に基づく領域を、関心領域すなわちＲＯＩとして決定する。事象の発生位置が領域によって表される場合、決定部１３１は、事象の発生位置を関心領域にしてもよい。事象の発生位置が点の座標によって表される場合、決定部１３１は、事象の発生位置が表す点を含む領域を、関心領域にしてもよい。例えば、決定部１３１は、映像のフレームにおいて、ステップＳ１２３において推定した人物の方向が示す点を中心とする領域、具体的には、顔の方向が示す点を中心とする領域を、ＲＯＩに決定してもよい。決定部１３１は、検出された顔の領域、又は、検出された顔の領域を中心とした一定の大きさの領域をＲＯＩに決定してもよい。ＲＯＩが決定されると、映像処理装置１００は、図７に示す動作を終了する。その後、映像処理装置１００は、図５に示すステップＳ１０４の動作を行う。
【００７５】
決定部１３１は、予め設定した上限値を超えない数のＲＯＩを決定してもよい。決定部１３１は、検出した全ての顔の領域に基づいてＲＯＩを決定してもよい。上述のように、決定部１３１は、登録顔と判定された顔の領域を含む領域を、ＲＯＩに設定してもよい。具体的には、決定部１３１は、例えば、エンコード部１２０による符号化の単位としてのブロックのうち、登録顔と判定された顔の領域の少なくとも一部を含むブロックを、ＲＯＩに設定してもよい。決定部１３１は、顔が登録顔であると判定された人物の領域を含む領域を、ＲＯＩに設定してもよい。具体的には、決定部１３１は、例えば、エンコード部１２０による符号化の単位としてのブロックのうち、顔が登録顔であると判定された人物の領域の少なくとも一部を含むブロックを、ＲＯＩに設定してもよい。決定部１３１は、検出された顔の領域の周囲に所定画素数の幅のマージンを設け、検出された顔の領域及びマージンの少なくとも一部を含むブロックを、ＲＯＩに設定してもよい。決定部１３１は、予め定められた方法に従って、ＲＯＩを決定すればよい。
【００７６】
続いて、本発明の第１の実施形態の受信装置２００の動作について説明する。
【００７７】
図８は、本実施形態の受信装置２００の動作の例を示すフローチャートである。
【００７８】
ステップＳ１３１：
受信装置２００の制御部２２０は、映像処理装置１００からの映像の受信を開始する。制御部２２０は、通信ネットワーク３００と第２通信部２４０とを介して、複数の映像処理装置１００から送信された、符号化された映像データすなわち符号化データを受信する。制御部２２０は、受信した符号化データを送信した映像処理装置１００ごとに、符号化データを第２記憶部２３０に格納する。上述のように、映像処理装置１００の各々から送信される符号化データには、映像の識別子が付与されていてもよい。上述のように、映像の識別子は、例えば、映像にユニークなコンテンツ名又は映像を撮影した映像処理装置１００の識別子とその映像が撮影された時刻の情報の組み合わせなどであってもよい。制御部２２０は、さらに、受信している符号化データ毎に、その符号化データが表す最新のフレームをサムネイル形式で入出力部２１０に表示し、表示している最新フレームを定期的に更新してもよい。
【００７９】
ステップＳ１３２：
入出力部２１０は、ユーザからの、選択された映像の指示を受け付ける。入出力部２１０は、ユーザからの、選択された複数の映像の指示を受け付けてもよい。入出力部２１０は、例えば、サムネイル形式で表示している映像のうち、ユーザが選択した映像の、タッチパネル、キーボード、又は、マウスなどによる指示を受けると、その指示を制御部２２０に通知する。指示は、選択された映像の識別子であってもよい。指示は、サムネイル形式で表示されている映像に関連付けられた番号であってもよい。指示は、ユーザがタッチ又はクリックした場所の座標であってもよい。その場合、制御部２２０は、入出力部２１０から指示を受信し、受信した指示に基づいて、選択された映像（すなわち、映像の識別子）を特定すればよい。
【００８０】
ステップＳ１３３：
制御部２２０は、ユーザによって選択された映像、すなわち、ユーザによる指示に基づいて特定される映像の符号化データを、第２記憶部２３０に格納するのに加えて復号する。制御部２２０は、符号化データを復号することによって得られた映像データ表す映像を、入出力部２１０に表示する。ユーザによって複数の映像が選択された場合、制御部２２０は、入出力部２１０の表示画面を、選択された映像の数と同じ数の領域に分割し、分割した領域の各々に、選択された映像のいずれかを表示してもよい。
【００８１】
また、制御部２２０は、表示している映像を変更できるよう、受信しているが表示していない映像のサムネイルを、入出力部２１０の画面の隅に表示しておいてもよい。映像が表示されている間に、ユーザが、例えば、入出力部２１０を介してサムネイルを選択することによって他の映像を選択した場合、制御部２２０は、表示する映像を、新たに選択された映像に変更してもよい。言い換えると、映像を変更する指示は、映像が表示されている間に、表示されていない映像のサムネイルを選択することであってもよい。入出力部２１０は、例えばサムネイルの選択を検出した場合、選択された映像（すなわち、サムネイルが選択された映像）の識別子を、映像を変更する指示として制御部２２０に送信してもよい。映像を変更する指示は、以上の例に限られない。例えば、表示する映像を変更する指示と、新たに表示する映像として選択された映像の指示は別であってもよい。
【００８２】
制御部２２０は、予め用意された映像表示用のＧＵＩ（Ｇｒａｐｈｉｃ  Ｕｓｅｒ  Ｉｎｔｅｒｆａｃｅ）を介して映像を表示してもよい。そのＧＵＩでは、メニューを切り替えることによって全ての受信している映像のサムネイルが表示されてもよい。そのＧＵＩは、そのサムネイルを選択することによって映像を選択できるように設定されていてもよい。映像処理装置１００は、例えばＧＰＳ（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｎｇ  Ｓｙｓｔｅｍ）を利用して位置を特定し、特定した位置の情報を受信装置２００に送信するように設定されていてもよい。受信装置２００は、映像処理装置１００の各々の位置の情報を収集してもよい。そして、受信装置２００は、マップを表示し、収集した映像処理装置１００の位置を、その映像処理装置１００から送信された映像のサムネイルと共にそのマップ上に表示してもよい。以上の説明のように、受信装置２００は、ＧＵＩを介して、受信している映像を、ユーザに対して表示してもよい。受信装置２００は、そのＧＵＩを介して、映像を撮影し送信する映像処理装置１００の位置を、ユーザに対して表示してもよい。受信装置２００は、そのＧＵＩを介して、ユーザが映像を選択できる仕組みを提供すればよい。このようなＧＵＩは、様々な形態で実装できる。
【００８３】
ステップＳ１３４：
入出力部２１０が、表示している映像を変更する指示をユーザから受け取ると（ステップＳ１３４においてＹＥＳ）、受信装置２００の動作は、ステップＳ１３２に戻る。表示している映像を変更する指示をユーザから受け取らない場合（ステップＳ１３４においてＮＯ）、受信装置２００の動作は、ステップＳ１３５に移る。
【００８４】
上述のように、表示する映像を変更する指示と、新たに表示する映像として選択された映像の指示は別であってもよい。その場合、入出力部２１０は、ステップＳ１３４において、表示する映像を変更する指示を受信した場合、ステップＳ１３２において、選択された映像の指示を受信すればよい。
【００８５】
新たに表示する映像として選択された映像の指示が、表示する映像を変更する指示を兼ねていてもよい。すなわち、上述のように、映像が表示されている間に、ユーザが、例えば、入出力部２１０を介してサムネイルを選択することによって他の映像を選択した場合、制御部２２０は、表示する映像を、新たに選択された映像に変更してもよい。言い換えると、映像を変更する指示は、映像が表示されている間に、表示されていない映像のサムネイルを選択することであってもよい。その場合、ステップＳ１３４において、新たに表示する映像として選択された映像の指示を、表示する映像を変更する指示として受信してもよい。この動作が、次のステップＳ１３２の動作を兼ねていてもよい。
【００８６】
ステップＳ１３５：
入出力部２１０は、映像の表示を終了する指示を受け取ってもよい。
【００８７】
入出力部２１０が、映像の表示を終了する指示をユーザから受け取った場合（ステップＳ１３５においてＹＥＳ）、受信装置２００は、図８に示す動作を終了してもよい。映像の表示を終了する指示をユーザから受け取らない場合（ステップＳ１３５においてＮＯ）、受信装置２００は、ステップＳ１３３以降の動作を引き続き行う。なお、ユーザから映像の表示を終了する指示を受け取った場合（ステップＳ１３５においてＹＥＳ）、制御部２２０は、入出力部２１０によるその映像のみを終了し、受信装置２００が映像処理装置１００から映像を受信している間、受信した映像を第２記憶部２３０に格納する動作を継続してもよい。
【００８８】
以上で説明した本実施形態には、映像における発生場所が予め定まっていない関心領域の画質の低下を抑制しながら、その映像の送信に必要なネットワーク帯域を削減できるという効果がある。その理由は、決定部１３１が、イベントが発生する方向として推定された方向に基づいて、映像のフレームにおいて関心領域（すなわち第１領域）を決定するからである。そして、設定部１３２が、第１領域を符号化する条件と第１領域以外の映像の領域を符号化する条件とを、第１領域の画質が第１領域以外の領域の画質より高くなるように設定するからである。そのように決定された符号化の条件に従って符号化した映像のデータを送信することによって、映像における発生場所が予め定まっていない関心領域の画質の低下を抑制することができる。さらに、その映像の符号化データを送信するのに必要なネットワーク帯域を削減できる。
【００８９】
具体的には、例えば、上述のイベントは、映像パターンとして検出される、災害、事件、事故など、又は、それらの予兆としての対象物である。本実施形態の映像処理装置１００によると、そのようなイベントとして推定された対象物が映るＲＯＩが他の領域と比較して高画質であり、ビットレートが削減された、映像の符号化データを生成することができる。それにより、映像の送信に必要な通信帯域の抑制が可能となり、さらに、同じ通信ネットワーク３００を介して送信できる映像の数を増加させることが可能となる。
【００９０】
＜第２の実施の形態＞
＜＜構成＞＞
次に、本発明の第２の実施の形態の映像処理システム５０１について図面を参照して詳細に説明する。
【００９１】
図９は、本実施形態の映像処理システム５０１の構成の例を表すブロック図である。本実施形態の映像処理システム５０１は、１台以上の映像処理装置１０１と、受信装置２００とを含む。映像処理装置１０１は、通信ネットワーク３００を介して、受信装置２００と通信可能に接続されている。
【００９２】
本実施形態の映像処理システム５０１は、図４に示す第１の実施形態における映像処理システム５００と比較すると、映像処理装置１００の代わりに映像処理装置１０１を含んでいる。受信装置２００及び通信ネットワーク３００は、それぞれ、第１の実施形態の受信装置２００及び通信ネットワーク３００と同じである。
【００９３】
図９を参照すると、本実施形態の映像処理装置１０１は、図４に示す第１の実施形態の映像処理装置１００の構成要素と同じ構成要素を含む。図９に示すように、本実施形態の映像処理装置１０１は、さらに、音声受信部１７５を含む。本実施形態の映像処理装置１０１は、さらに、音声入力部１７０と通信可能に接続されている。本実施形態の映像処理装置１０１は、以下で説明する相違を除いて、図２に示す第１の実施形態の映像処理装置１００と同じ構成を備え、同様に動作する。本実施形態の映像処理装置１０１の構成要素は、以下で説明する相違を除いて、同じ符号が付与されている、第１の実施形態の映像処理装置１００の構成要素と同じ動作を行う。
【００９４】
第１の実施形態における映像処理装置１００は、カメラ部１１０で撮影した映像データを用いて決定部１３１がＲＯＩを決定する。それに対し、本実施形態の映像処理装置１０１の決定部１３１は、音声入力部１７０から入力された音声データに基づいてＲＯＩを決定する。
【００９５】
音声入力部１７０は、例えば、２以上のマイクを備えるマイクロフォンアレイである。音声入力部１７０は、音を集音し、集音した音を表す音データを、映像処理装置１０１の音声受信部１７５に入力する。音声入力部１７０及びカメラ部１１０は、音声入力部１７０とカメラ部１１０との間の相対位置が変化しないように、設置されていればよい。音声入力部１７０は、カメラ部１１０に固定されていてもよい。音声入力部１７０とカメラ部１１０との間の相対位置は、予め測定されていればよい。
【００９６】
音声受信部１７５は、音声入力部１７０が備える複数のマイクの各々から、集音された音データを受け取る。
【００９７】
本実施形態の第１記憶部１４０は、照合データとして、特定の音声パターン（例えば、悲鳴、及び、特定のフレーズ等）を示すデータを、予め記憶している。本実施形態の第１記憶部１４０は、照合データとして、特定の音声パターン（例えば、悲鳴、及び、特定のフレーズ等）の特徴を示すデータ（例えば特徴量）を、予め記憶していてもよい。特定の音声パターンとして、特定の人物の音声の特徴を、予め記憶していてもよい。
【００９８】
本実施形態の位置推定部１３０は、複数のマイクから入力された音データが表す音の位相差をもとにその音を発した音源の方向を、事象の発生方向として推定する。位置推定部１３０は、既存の、音源の方向を推定する方法に従って、音源の方向を推定すればよい。音源の方向を推定する方法は、例えば特許文献３でも開示されている。より具体的には、位置推定部１３０は、まず、第１記憶部１４０に照合データとして予め登録（格納）されている音声（例えば、悲鳴又は特定のフレーズ等）と、音声入力部１７０から入力された音データが表す音とを照合してもよい。第１記憶部１４０には、特定の音声パターンから抽出された特徴量が格納されていてもよい。位置推定部１３０は、音声受信部１７５が受信した音声データから特徴量を抽出し、抽出した特徴量と、第１記憶部１４０に格納されている特徴量とを比較する照合を行ってもよい。位置推定部１３０は、第１記憶部１４０に音声の特徴が格納されている、特定の人物の音声を、音声受信部１７５が受信した音声において検出してもよい。
【００９９】
位置推定部１３０は、入力された音が照合データとして登録されているいずれかの音声と一致すると判定した場合、その音を、災害、事件、事故などのイベントとして検出すればよい。位置推定部１３０は、イベントとして検出された音の音源の方向を推定すればよい。
【０１００】
本実施形態の決定部１３１は、位置推定部１３０によって推定された音源の方向に基づいて、映像受信部１１５によって受信された映像のおける領域を、ＲＯＩに決定する。決定部１３１は、例えば、推定された音源の方向（すなわち事象の発生方向）が示す、映像における点を、事象の発生位置として特定し、特定された点を含む領域を、ＲＯＩに決定してもよい。決定部１３１は、特定された点を中心とする予め定められたサイズの領域を、ＲＯＩに決定してもよい。決定部１３１は、ＲＯＩとして決定する領域のサイズを、例えば、イベントとして検出された音の大きさに応じて決定してもよい。例えば、音声入力部１７０が２個のマイクを備える場合のように、推定された音源の方向が示す、映像における点が１点に定まらない場合、決定部１３１は、推定された音源の方向によって示され映像に含まれる全ての点を含む領域を、ＲＯＩに決定してもよい。決定部１３１は、予め定められたルールに従って、推定された音源の方向に基づいてＲＯＩを決定すればよい。
【０１０１】
＜＜動作＞＞
次に、本実施形態の映像処理装置１０１の動作について説明する。
【０１０２】
図１０は、本実施形態の映像処理装置１０１の動作を表すフローチャートである。図１０に示す、本実施形態の映像処理装置１０１の動作は、図５に示す本発明の第１の実施形態の映像処理装置１００の動作と、ステップＳ２０１及びステップＳ２０３における動作において異なる。本実施形態の映像処理装置１０１は、図１０に示すステップＳ２０１及びＳ２０３以外のステップでは、図５に示す、同じ符号が付与されたステップの動作と同様に動作する。
【０１０３】
図１１は、本実施形態の映像処理装置１０１の初期化処理における動作の例を表すフローチャートである。図１１に示すステップＳ１１１及びステップＳ１１２における動作は、それぞれ、図６に示すステップＳ１１１及びステップＳ１１２における動作と同じである。
【０１０４】
ステップＳ２１３：
映像処理装置１０１は、例えば映像処理装置１０１又は音声入力部１７０の電源が投入されるのに応じて、音声入力部１７０を起動する。映像処理装置１０１は、例えば、受信装置２００からの指示に従って、音声入力部１７０を起動してもよい。その場合の指示を送信する信号線は、図１１では簡単のため省略されている。映像処理装置１０１は、音声入力部１７０として使用されているマイクの電源が投入されるのに応じて、音声入力部１７０を起動してもよい。映像処理装置１０１は、例えば集音開始ボタンが押されるのに応じて、音声入力部１７０を起動してもよい。
【０１０５】
ステップＳ２１４：
音声入力部１７０が起動されると、音声入力部１７０は、複数のマイクによる音声の取得（すなわち、集音）を開始する。音声入力部１７０は、取得した音声を表す音データの、音声受信部１７５への送信を開始する。音声受信部１７５は、音声入力部１７０によって取得された音声を表す音声データの受信を開始する。
【０１０６】
図１２は、本実施形態の映像処理装置１０１の、イベント検出処理推定動作を示すフローチャートである。
【０１０７】
ステップＳ２２１：
位置推定部１３０は、音声入力部１７０によって複数のマイクを使用して集音された音声の、音声受信部１７５が受信した音データにおいて、イベントとして、例えば第１記憶部１４０に登録されている特定の音声パターンである、特徴のパターンを探索する。
【０１０８】
ステップＳ２２２：
音声受信部１７５が受信した音声データにおいて、第１記憶部１４０に登録されている特定の音声パターンが検出されなかった場合（ステップＳ２２２においてＮＯ）、映像処理装置１０１は、図１２に示す動作を終了する。音声受信部１７５が受信した音声データにおいて、登録されている特定の音声パターンのいずれかが検知された場合（ステップＳ２２２においてＹＥＳ）、映像処理装置１０１は、次に、ステップＳ２２３の動作を行う。
【０１０９】
ステップＳ２２３：
決定部１３１は、音声受信部１７５が受信した音声データとして記録されている複数のマイクから入力された音の位相差から、例えば音声入力部１７０の方向に対する、検出された音声パターンの音を発した音源の方向を推定する。決定部１３１によって最終的に推定される音源の方向は、撮影している映像のフレームにおける音源の方向である。決定部１３１は、さらに、例えば、カメラ部１１０の方向と音声入力部１７０の方向との関係に基づいて、検出された音声パターンの音を発した音源への方向が示す、映像のフレームにおける点の座標を推定すればよい。カメラ部１１０の方向は、例えば、カメラ中心から画像の中心への方向であってもよい。
【０１１０】
例えば、カメラ部１１０は、映像処理装置１０１に固定されていてもよい。その場合、映像処理装置１０１の方向と、カメラ部１１０の方向との関係は、予め測定されていてもよい。音声入力部１７０は、映像処理装置１０１に固定されていてもよい。その場合、映像処理装置１０１の方向と、音声入力部１７０の方向との関係は、予め測定されていてもよい。カメラ部１１０は、映像処理装置１０１に、方向を制御できるよう取り付けられていてもよい。その場合、映像処理装置１０１は、例えばカメラ部１１０の方向を制御するモータの回転角度に基づいて、カメラ部１１０の方向と映像処理装置１０１の方向との関係を特定可能であればよい。音声入力部１７０は、映像処理装置１０１に、方向を制御できるよう取り付けられていてもよい。その場合、映像処理装置１０１は、例えば音声入力部１７０の方向を制御するモータの回転角度に基づいて、音声入力部１７０の方向と映像処理装置１０１の方向との関係を特定可能であればよい。例えば、カメラ部１１０及び音声入力部１７０は、それぞれ、例えば磁気センサ等によって方向を測定する機能を備えていてもよい。そして、決定部１３１は、カメラ部１１０の方向を、例えば映像受信部１１５及び位置推定部１３０を介して、取得してもよい。決定部１３１は、音声入力部１７０の方向を、例えば音声受信部１７５及び位置推定部１３０を介して、取得してもよい。カメラ部１１０及び音声入力部１７０の双方が、映像処理装置１０１に固定されている場合、カメラ部１１０の方向と、音声入力部１７０の方向との関係は、予め測定されていてもよい。
【０１１１】
ステップＳ２２４：
次に、決定部１３１は、映像のフレームにおいて、音源の方向が示す点を含む領域を、関心領域（すなわち、ＲＯＩ）として決定する。決定部１３１は、例えば、音源の方向を示す、映像のフレームにおける座標を中心とする、予め定められている大きさの領域を、ＲＯＩに決定してもよい。決定部１３１は、検出された音声パターンの音の大きさを判定してもよい。そして、決定部１３１は、例えば、音源の方向を示す、映像のフレームにおける座標を中心とする、検出された音声パターンの音の大きさに応じた大きさの領域を、ＲＯＩに決定してもよい。決定部１３１は、例えば、検出された音声パターンの音の大きさが大きいほど、ＲＯＩの大きさが大きくなるように、ＲＯＩを決定してもよい。ＲＯＩの決定方法は、以上の例に限られない。
【０１１２】
以上で説明した本実施形態には、第１の実施形態と同じ効果がある。その理由は、第１の実施形態の効果が生じる理由と同じである。
【０１１３】
ただし、本実施形態のイベントは、具体的には、例えば、音声パターンとして検出される音を発する、災害、事件、事故など、又は、それらの予兆としての対象物である。特定の音声パターンの音の音源の方向が示す点を含むＲＯＩには、その音を発した対象物が映っているはずである。本実施形態の映像処理装置１０１によると、そのようなイベントとして推定された対象物が映るであろうＲＯＩが映像のフレームにおけるＲＯＩ以外の領域と比較して高画質であり、ビットレートが削減された、映像の符号化データを生成することができる。それにより、映像の送信に必要な通信帯域の抑制が可能となり、さらに、同じ通信ネットワーク３００を介して送信できる映像の数を増加させることが可能となる。
【０１１４】
（変形例）
本実施形態の位置推定部１３０は、さらに、第１の実施形態の位置推定部１３０と同じ機能を備え、同じ動作を行ってもよい。具体的には、本実施形態の位置推定部１３０は、さらに、カメラ部１１０によって撮影された映像における映像パターンを、イベントとして検出してもよい。
【０１１５】
詳細には、本変形例の位置推定部１３０は、イベントとして検出する特徴パターンとして、映像データにおける特定の映像パターンを検出してもよい。本変形例の位置推定部１３０は、イベントとして検出する特徴パターンとして、音声データにおける特定の音声パターンを検出してもよい。本変形例の位置推定部１３０は、さらに、イベントとして検出する特徴パターンとして、映像データにおける特定の映像パターンと音声データにおける音声パターンとの組み合わせを検出してもよい。
【０１１６】
決定部１３１は、音データにおいて検出されたイベントに基づくＲＯＩに加えて、映像データにおいて検出されたイベントに基づくＲＯＩを決定してもよい。決定部１３１は、音データと映像データの双方からイベントが検出された発生方向にもとづいて、ＲＯＩを決定してもよい。
【０１１７】
本変形例には、さまざまなイベントを検出できるという効果がある。その理由は、本変形例の位置推定部１３０は、イベントの特徴パターンとして、音声データにおける音声パターン、映像データにおける映像パターン、及び、音声データにおける音声パターンと映像データにおける映像パターンとの組み合わせを検出できるからである。
【０１１８】
従って、本変形例の位置推定部１３０は、音声パターンと映像パターンとのさまざまな組み合わせに基づく特徴パターンを検出することによって、例えば以下のようなさまざまなイベントを検出することができる：
（１）特定の音声パターンは検出されるが特定の映像パターンは検出されないイベント、
（２）特定の映像パターンは検出されるが特定の音声パターンは検出されないイベント、
（３）特定の映像パターン及び特定の音声パターンの組み合わせとして検出されるが、その特定の映像パターンのみ、又は、その特定の音声パターンのみが検出される場合は発生しないイベント、及び、
（４）特定の映像パターン、特定の音声パターン、又は、特定の映像パターンと特定の音声パターンとの組み合わせとして検出されるイベント。
【０１１９】
＜第３の実施の形態＞
＜＜構成＞＞
次に、本発明の第３の実施の形態について、図面を参照して詳細に説明する。
【０１２０】
図１３は、本実施形態の映像処理システム５０２の構成の例を表すブロック図である。本実施形態の映像処理システム５０２は、１つ以上の映像処理装置１０２と、受信装置２０２とを含む。１つ以上の映像処理装置１０２の各々は、通信ネットワーク３００を介して、受信装置２０２に接続されている。図４に示す第１の実施形態における映像処理システム５００と比較すると、本実施形態の映像処理システム５０２は、映像処理装置１００の代わりに映像処理装置１０２を含み、受信装置２００の代わりに受信装置２０２を含む。本実施形態の映像処理システム５０２は、他の点では、第１の実施形態の映像処理システム５００と同じである。
【０１２１】
図１３に示すように、本実施形態の映像処理装置１０２は、第１の実施形態の映像処理装置１００と比較すると、帯域推定部１５０を含んでいなくてもよい。本実施形態の映像処理装置１０２は、その他では、図５に示す第１の実施形態の映像処理装置１００と同じである。本実施形態の映像処理装置１０２の構成要素は、以下で説明する相違を除いて、同じ符号が付与されている、第１の実施形態の映像処理装置１００の構成要素と同じ動作を行う。
【０１２２】
本実施形態の決定部１３１は、決定されたＲＯＩの位置を表す情報を、例えば設定部１３２とエンコード部１２０と第１通信部１６０と通信ネットワーク３００とを介して、受信装置２０２の第２通信部２４０に送信する。決定部１３１は、ＲＯＩの位置の情報を、例えば、設定部１３２とエンコード部１２０とを介さずに、第１通信部１６０と通信ネットワーク３００とを介して、第２通信部２４０に送信してもよい。決定部１３１は、ＲＯＩが決定された、映像のフレームのフレーム番号を、ＲＯＩの位置の情報に関連付け、フレーム番号が関連付けられたＲＯＩの位置の情報を、受信装置２０２の第２通信部２４０に送信してもよい。
【０１２３】
第１通信部１６０は、エンコード部１２０によって符号化された符号化データに加えて、決定部１３１によって決定されたＲＯＩの位置の情報を、通信ネットワーク３００を介して、受信装置２０２の第２通信部２４０に送信する。
【０１２４】
また、図１３に示すように、本実施形態の受信装置２０２は、図４に示す第１の実施形態の受信装置２００の各構成要素に加えて、鮮明化部２５０を含む。他の点では、本実施形態の受信装置２０２は、第１の実施形態の受信装置２００と同じである。本実施形態の受信装置２０２の構成要素は、以下で説明する相違を除いて、同じ符号が付与されている、第１の実施形態の受信装置２００の構成要素と同じ動作を行う。
【０１２５】
本実施形態の第２通信部２４０は、符号化データに加えて、ＲＯＩの位置の情報を、通信ネットワーク３００を介して第１通信部１６０から受信する。第２通信部２４０は、受信した符号化データとＲＯＩの位置の情報とを、制御部２２０に送信する。
【０１２６】
本実施形態の制御部２２０は、第２通信部２４０を介して、映像処理装置１０２から、符号化データとＲＯＩの位置の情報とを受信し、受信した符号化データとＲＯＩの位置の情報とを制御部２２０に送信する。なお、ＲＯＩの位置の情報には、映像のフレームのフレーム番号が関連付けられていればよい。
【０１２７】
制御部２２０は、符号化データとＲＯＩの情報とを、通信ネットワーク３００と第２通信部２４０とを介して受信する。制御部２２０は、符号化データとＲＯＩの位置情報とを関連付け、ＲＯＩの位置情報が関連付けられた符号化データを、第２記憶部２３０に格納する。制御部２２０は、選択された映像の符号化データを復号し、復号によって生成された映像データとＲＯＩの位置の情報とを、鮮明化部２５０に送信する。
【０１２８】
第２記憶部２３０は、ＲＯＩの位置情報が関連付けられた符号化データを記憶する。
【０１２９】
鮮明化部２５０は、選択された映像の、復号によって生成された映像データと、ＲＯＩのデータとを、制御部２２０から受信する。鮮明化部２５０は、受信した映像データの、ＲＯＩの位置の情報に関連付けられているフレーム番号のフレームの、そのＲＯＩの位置の情報によって表される領域に対して、鮮明化の処理を行う。鮮明化部２５０による映像の鮮明化の方法は、例えば、コントラストの改善、ノイズの除去、及び、超解像などの既存の映像の鮮明化の方法の少なくともいずれかである。
【０１３０】
＜＜動作＞＞
次に、本実施形態の映像処理装置１０２の動作について説明する。
【０１３１】
図１４は、本実施形態の映像処理装置１０２の動作の例を表すフローチャートである。図１４と図５とを比較すると、本実施形態の映像処理装置１０２の動作は、以下の相違を除いて、図５に示す第１の実施形態の映像処理装置１００の動作と同じである。本実施形態の決定部１３１は、イベントが検出された場合（ステップＳ１０４においてＹＥＳ）、ステップＳ３０５の動作を行ってからステップＳ１０５の動作を行う。本実施形態の映像処理装置１０２は、他のステップでは、第１の実施形態の映像処理装置１００の、同じ符号が付与されたステップの動作と同じ動作を行う。
【０１３２】
ステップＳ３０５：
決定部１３１は、決定したＲＯＩの領域の位置を表す情報に、例えば、そのＲＯＩが検出された映像の識別子、及び、そのＲＯＩが検出されたフレームのフレーム番号を付与する。ＲＯＩの位置を表す情報は、ＲＯＩの大きさと、ＲＯＩのフレーム内における位置とを特定する情報であればよい。そして、決定部１３１は、映像の識別子及びフレーム番号が付与されたＲＯＩの位置を表す情報を、受信装置２０２の第２通信部２４０に送信する。
【０１３３】
なお、上述のように、本実施形態の帯域推定部１５０は存在しなくてもよい。その場合、映像処理装置１０２は、ステップＳ１０３におけるイベント検出処理の動作を行わなくてよい。さらに、ステップＳ１０５において、設定部１３２は、ＲＯＩにおける符号化の条件（例えば符号化パラメータ）とＲＯＩ以外の領域における符号化の条件（例えば符号化パラメータ）とを、それぞれ、予め定められている条件（例えば符号化パラメータ）に設定すればよい。この際、ＲＯＩにおける符号化の条件とＲＯＩ以外の領域における符号化の条件は同一であってもよい。すなわち、設定部１３２は、フレーム全体で同一の符号化の条件を用いてもよい。また、ステップＳ１０６において、設定部１３２は、フレーム全体の符号化の条件を、予め定められている条件（例えば符号化パラメータ）に設定すればよい。
【０１３４】
図１５は、本実施形態の受信装置２０２の動作を示すフローチャートである。本実施形態の受信装置２０２は、図１５に示すステップＳ１３１、Ｓ１３２、Ｓ１３３、Ｓ１３４、及び、Ｓ１３５において、以下で説明する相違を除いて、図８に示す同じ符号が付与されたステップの動作と同じ動作を行う。
【０１３５】
ステップＳ１３１：
制御部２２０は、映像の受信、すなわち、映像の符号化データの受信を開始する。本実施形態の制御部２２０は、映像の符号化データに加えて、ＲＯＩの位置の情報を受信する。制御部２２０は、受信したＲＯＩの位置の情報を、そのＲＯＩが検出された映像の符号化データに関連付け、ＲＯＩの位置の情報が関連付けられた符号化データを、第２記憶部２３０に格納する。
【０１３６】
ステップＳ１３２：
制御部２２０は、第１の実施形態の制御部２２０と同様に、選択された映像の指示を受け付ける。
【０１３７】
ステップＳ３３３：
制御部２２０は、選択された映像の、関心領域の情報（すなわちＲＯＩの位置の情報）の送信の有無を検出する。制御部２２０は、選択された映像の符号化データに、ＲＯＩの位置の情報が関連付けられているか否かを検出すればよい。
【０１３８】
ステップＳ３３４：
関心領域の情報（すなわち、ＲＯＩの位置の情報）が送信されていない場合（ステップＳ３３４においてＮＯ）、受信装置２０２は、ステップＳ１３３以降の動作を行う。本実施形態の受信装置２０２のステップＳ１３３以降の動作は、第１の実施形態の受信装置２００のステップＳ１３３以降の動作と同じである。関心領域の情報（すなわち、ＲＯＩの位置の情報）が送信された場合（ステップＳ３３４においてＹＥＳ）、受信装置２０２は、ステップＳ３３５の動作を行う。
【０１３９】
ステップＳ３３５：
鮮明化部２５０は、選択された映像の符号化データの復号によって得られた映像データの、ＲＯＩの位置の情報によって表される領域に鮮明化の処理を行う。ステップＳ３３５の動作の後、受信装置２０２のステップＳ１３３以降の動作を行う。上述のように、本実施形態の受信装置２０２のステップＳ１３３以降の動作は、第１の実施形態の受信装置２００のステップＳ１３３以降の動作と同じである。
【０１４０】
以上で説明した本実施形態には、第１の実施形態と同じ効果がある。その理由は、第１の実施形態の効果が生じる理由と同じである。
【０１４１】
本実施形態には、さらに、ＲＯＩの画質を向上させることができるという効果がある。その理由は、決定部１３１が、ＲＯＩの位置の情報を、受信装置２０２に送信するからである。そして、受信装置２０２の鮮明化部２５０が、映像処理装置１０２から受信した符号化データを復号することによって得られる映像データの、ＲＯＩの位置によって表される領域において、鮮明化を行うからである。
【０１４２】
また、本実施形態の映像処理装置１０２は、第２の実施形態の映像処理装置１０１のように、音声入力部１７０と音声受信部１７５とを備えていてもよい。本実施形態の映像処理システム５０２は、映像処理装置１０２の代わりに、第２の実施形態の映像処理装置１０１を含んでいてもよい。そして、音声入力部１７０、音声受信部１７５、位置推定部１３０、及び、決定部１３１が、それぞれ、第２の実施形態の音声入力部１７０、音声受信部１７５、位置推定部１３０、及び、決定部１３１と同様に動作してもよい。その場合、本実施形態には、第２の実施形態と同じ効果がある。
【０１４３】
＜第４の実施の形態＞
＜＜構成＞＞
次に、本発明の第４の実施の形態について図面を参照して詳細に説明する。
【０１４４】
図１６は、本実施形態の映像処理システム５０３の構成の例を表すブロック図である。
【０１４５】
本実施形態の映像処理システム５０３は、図１及び図４に示す第１の実施形態における映像処理システム５００と、以下で説明する点を除き、同じである。本実施形態の映像処理システム５０３は、映像処理装置１００の代わりに映像処理装置１０３を含み、受信装置２００の代わりに受信装置２０３を含む。
【０１４６】
図１６に示すように、本実施形態の映像処理装置１０３は、図２及び図４に示す第１の実施形態の映像処理装置１００が含む構成要素のうち、位置推定部１３０と、第１記憶部１４０とを含まなくてもよい。本実施形態の映像処理装置１０３は、位置推定部１３０と第１記憶部１４０とを含んでいてもよい。以下の本実施形態の説明では、主に、映像処理装置１０３が位置推定部１３０と第１記憶部１４０とを含まない場合について説明する。後述の本実施形態の変形例の説明において、映像処理装置１０３が位置推定部１３０と第１記憶部１４０とを含む場合について説明する。本実施形態の映像処理装置１０３の他の構成要素は、図２及び図４に示す第１の実施形態の映像処理装置１００の、同じ番号が付与された構成要素と、以下で説明する相違を除いて、同様に動作する。
【０１４７】
本実施形態の決定部１３１は、第２通信部２４０と、通信ネットワーク３００と、第１通信部１６０とを介して、後で詳述される受信装置２０３から、事象の発生位置を、イベント情報として受信する。本実施形態の決定部１３１は、第１の実施形態の決定部１３１と同様にして、受信した、事象の発生位置に基づいて、ＲＯＩ（すなわち、第１領域）を決定する。
【０１４８】
本実施形態の第１通信部１６０は、さらに、受信装置２０３から受信した事象の発生位置を、決定部１３１に送信する。
【０１４９】
また、図１６に示すように、本実施形態の受信装置２０３は、第１の実施形態の受信装置２００の各構成要素に加えて、第２位置推定部２６０を含む。本実施形態の受信装置２０３は、さらに、第２決定部２６１を含んでいてもよい。受信装置２０３が第２決定部２６１を含む場合については、本実施形態の変形例として説明する。本実施形態の受信装置２０３の他の構成要素は、図３及び図４に示す第１の実施形態の受信装置２００の、同一の番号が付与されている構成要素と、以下で説明する相違を除いて、同様に動作する。
【０１５０】
本実施形態の制御部２２０は、通信ネットワーク３００及び第２通信部２４０を介して映像処理装置１０３から受信した符号化データを復号することによって得られた映像データを、さらに、第２位置推定部２６０に送信する。
【０１５１】
第２記憶部２３０は、さらに、第１の実施形態では第１記憶部１４０が記憶する、照合データを記憶する。
【０１５２】
第２位置推定部２６０は、制御部２２０から映像データを受信し、受信した映像において、第１の実施形態の位置推定部１３０と同様にして、例えば第２記憶部が記憶する照合データを使用して、事象の発生位置を検出する。第２位置推定部２６０は、第２通信部２４０及び通信ネットワーク３００を介して、事象の発生位置（具体的には、事象の発生位置を表す情報）を、受信した映像データが生成された符号化データを送信した映像処理装置１０３に送信する。
【０１５３】
＜＜動作＞＞
次に、本実施形態の映像処理装置１０３の動作について説明する。
【０１５４】
図１７は、本実施形態の映像処理装置１０３の動作の例を示すフローチャートである。本実施形態に係る映像処理装置１０３の動作は、図５に示す本発明の第１の実施形態の映像処理装置１００の動作と、以下で説明する相違を除いて同じである。映像処理装置１０３の動作は、ステップＳ１０３及びステップＳ１０４の代わりに、ステップＳ４０３及びステップＳ４０４の動作を含む。本実施形態の映像処理装置１０３は、ステップＳ４０３及びステップＳ４０４以外のステップでは、同じ符号が付与されているステップの動作と同じ動作を行う。
【０１５５】
ステップＳ４０３：
決定部１３１は、イベント情報受信処理を行う。イベント情報受信処理では、受信装置２０３からイベント情報が送信された場合、決定部１３１は、通信ネットワーク３００及び第１通信部１６０を介して、受信装置２０３から、イベント情報を受信する。本実施形態のイベント情報は、受信装置２０３の第２位置推定部２６０によって推定された事象の発生位置の情報である。そして、決定部１３１は、受信した事象の発生位置の情報に基づいて、ＲＯＩ（すなわち、第１領域）を決定する。受信装置２０３からイベント情報が送信されなかった場合、決定部１３１は、第１領域を決定しない。イベント情報受信処理については、後で詳細に説明する。ステップＳ４０３においてイベント情報を受信した場合、決定部１３１は、イベントを検出したと判定したと見なすこともできる。
【０１５６】
ステップＳ４０４：
決定部１３１がイベント情報を受信した場合（ステップＳ４０４においてＹＥＳ）、すなわち、決定部１３１が受信装置２０３から事象の発生位置の情報を受信した場合、設定部１３２は、次に、ステップＳ１０５の動作を行う。決定部１３１がイベント情報を受信しなかった場合（ステップＳ４０４においてＮＯ）、すなわち、決定部１３１が事象の発生位置の情報を受信しなかった場合、設定部１３２は、次に、ステップＳ１０６の動作を行う。
【０１５７】
図１８は、本実施形態の映像処理装置１０３の、イベント情報受信処理における動作の例を表すフローチャートである。本実施形態の映像処理装置１０３は、図１７及び図１８に示す動作とは独立に、受信装置２０３から送信されるイベント情報を受信する。
【０１５８】
ステップＳ４２１：
決定部１３１は、受信装置２０３からのイベント情報の送信の有無を確認する。決定部１３１は、受信装置２０３から、イベント情報（例えば、事象の発生位置の情報）を、受信したか否かを確認すればよい。
【０１５９】
ステップＳ４２２：
イベント情報の送信が無い場合、例えば、受信装置２０３から事象の発生位置の情報を受信していない場合（ステップＳ４２２においてＮＯ）、映像処理装置１０３は、図１８に示す動作を終了する。イベント情報の送信がある場合、例えばＲＯＩの位置の情報を受信した場合（ステップＳ４２２においてＹＥＳ）、映像処理装置１０３は、次にステップＳ４２３の動作を行う。
【０１６０】
ステップＳ４２３：
決定部１３１は、受信したイベント情報（例えば事象の発生位置の情報）に基づいて、ＲＯＩ（すなわち、上述の第１領域）を決定する。そして、映像処理装置１０３は、図１８に示す動作を終了する。
【０１６１】
図１９は、本実施形態の受信装置２０３の動作の例を示すフローチャートである。図１９に示す本実施形態の受信装置２０３の、ステップＳ１３１、Ｓ１３２、Ｓ１３３、Ｓ１３４、及び、Ｓ１３５の動作は、それぞれ、図６に示す、本発明の第１の実施形態の受信装置２００の、同じ符号が付与されたステップの動作と、以下で説明する相違を除いて、同じである。
【０１６２】
本実施形態の受信装置２０３は、ステップＳ１３１及びステップＳ１３２において、第１の実施形態の受信装置２００のステップＳ１３１及びステップＳ１３２の動作と同じ動作を行う。本実施形態の受信装置２０３は、ステップＳ１３３において、以下で説明する相違を除いて、第１の実施形態の受信装置２００のステップＳ１３３の動作と同じ動作を行う。
【０１６３】
ステップＳ１３３：
本実施形態の制御部２２０は、さらに、通信ネットワーク３００及び第２通信部２４０を介して映像処理装置１０３から受信した符号化データを復号し、符号化データを復号することによって生成された映像データを、第２位置推定部２６０に送信する。制御部２２０は、複数の映像処理装置１０３から符号化データを受信した場合、符号化データを送信した映像処理装置１０３ごとに、生成した映像データを第２位置推定部２６０に送信すればよい。この場合、受信装置２０３は、ステップＳ４３３からステップＳ４３５の動作を、複数の映像処理装置１０３から送信された符号化データから生成された映像データのそれぞれについて行えばよい。
【０１６４】
本実施形態の制御部２２０は、複数の映像処理装置１０３から送信された符号化データから生成された映像データの全てを、第２位置推定部２６０に送信しなくてもよい。本実施形態の制御部２２０は、例えば、選択された映像の符号化データを復号することによって生成した映像データを、さらに、第２位置推定部２６０に送信してもよい。この場合、受信装置２０３は、ステップＳ４３３からステップＳ４３５の動作を、受信した映像データについて行えばよい。
【０１６５】
制御部２２０は、映像データに加えて、その映像データが生成された符号化データを送信した映像処理装置１０３を特定する情報を、第２位置推定部２６０に送信する。映像処理装置１０３を特定する情報は、例えば、ＩＰアドレス、又は、他の識別子などである。
【０１６６】
ステップＳ４３３：
本実施形態の受信装置２０３は、ステップＳ４３３において、ステップＳ１２４の動作を除く、図７に示す第１の実施形態の映像処理装置１００によるイベント検出処理と同様の動作を行う。ただし、本実施形態では、第２位置推定部２６０が、制御部２２０から受信した映像データに対して、第１の実施形態の映像処理装置１００の位置推定部１３０によるイベント検出処理における動作と同様に動作する。具体的には、第２位置推定部２６０は、第１の実施形態の位置推定部１３０による特徴パターンの有無を確認する方法と同様の方法によって、特徴パターンの有無を確認する。特徴パターンが検出された場合、第２位置推定部２６０は、第１の実施形態の位置推定部１３０による事象の発生位置を推定する方法と同様の方法によって、検出した特徴パターンに基づいて事象の発生位置を推定する。
【０１６７】
受信装置２０３は、制御部２２０から受信した映像データの全てに対して、ステップＳ４３３の動作を行えばよい。
【０１６８】
ステップＳ４３４：
受信したいずれかの映像データからイベントが検出された場合（ステップＳ４３４においてＹＥＳ）、受信装置２０３は、次に、ステップＳ４３５の動作を行う。受信した全ての映像データからイベントが検出されなかった場合（ステップＳ４３４においてＮＯ）、受信装置２０３は、次に、ステップＳ１３４の動作を行う。
【０１６９】
ステップＳ４３５：
受信装置２０３の第２決定部２６１は、イベントが検出された映像データが生成された符号化データを送信した映像処理装置１０３に、その映像データが示す映像において決定されたＲＯＩの位置の情報を送信する。受信装置２０３の第２決定部２６１は、イベントが検出された映像データが生成されなかった符号化データを送信した映像処理装置１０３に、ＲＯＩの位置の情報を送信しなくてよい。受信装置２０３は、次に、ステップＳ１３４の動作を行う。
【０１７０】
本実施形態の受信装置２０３は、ステップＳ１３４において、第１の実施形態の受信装置２００の、ステップＳ１３４における動作と同じ動作を行う。同様に、本実施形態の受信装置２０３は、ステップＳ１３５において、第１の実施形態の受信装置２００の、ステップＳ１３５における動作と同じ動作を行う。
【０１７１】
図２０は、本実施形態の受信装置２０３のイベント検出処理の動作の例を表すフローチャートである。
【０１７２】
図２０に示す動作は、図７に示す本発明の第１の実施形態に係る映像処理装置１００の動作と、処理の対象であるデータと、動作の主体とが異なる。また、本実施形態の受信装置２０は、図２０に示すステップＳ１２４の動作を行わなくてよい。図２０に示すステップＳ１２４の動作については、後で本実施形態の変形例１の説明において述べる。
【０１７３】
ステップＳ４４１：
第２位置推定部２６０は、制御部２２０から受信した映像データにおいて、イベントとして検出する特徴パターンとして、映像パターンを探索する。第２位置推定部２６０によるステップＳ４４１において映像パターンを探索する方法は、図７に示す、第１の実施形態の映像処理装置１００の位置推定部１３０によるステップＳ１２１の動作において映像パターンを探索する方法と同じである。
【０１７４】
ステップＳ１２２：
特徴パターンが検出されない場合（ステップＳ１２２においてＮＯ）、受信装置２０３は、図２０に示す動作を終了する。特徴パターンが検出された場合（ステップＳ１２２においてＹＥＳ）、受信装置２０３は、次に、ステップＳ１２３の動作を行う。
【０１７５】
ステップＳ１２３：
第２位置推定部２６０は、特徴パターンが検出された、映像のフレームにおける位置に基づいて、事象の発生方向を推定する。第２位置推定部２６０による、ステップＳ１２３において事象の発生方法を推定する方法は、図７に示す、第１の実施形態の映像処理装置１００の位置推定部１３０による、ステップＳ１２３におけるイベントの発生方向を推定する方法と同じである。そして、受信装置２０３は、図２０に示す動作を終了する。
【０１７６】
以上で説明した本実施形態には、映像処理装置１０３の処理能力が低い場合であっても、映像における発生場所が予め定まっていない関心領域の画質の低下を抑制しながら、その映像の送信に必要なネットワーク帯域を削減できるという効果がある。その理由は、受信装置２０３の第２位置推定部２６０が、映像処理装置１０３から送信された符号化データから生成された映像データにおいて、事象の発生位置を推定するからである。受信装置２０３は、推定した、事象の発生位置の情報を、映像処理装置１０３に送信する。映像処理装置１０３の決定部１３１は、事象の発生位置に基づいてＲＯＩの位置を決定する。設定部１３２は、決定したＲＯＩにおける画質が、映像のフレームにおけるＲＯＩ以外の領域の画質より高くなるよう、ＲＯＩを符号化する第１条件と、ＲＯＩ以外の領域を符号化する第２条件とを決定する。映像処理装置１０３によっては、搭載されている専用の回路によって撮影した映像の符号化を高速に行うことができるが、画像の処理等の他の処理を行う能力が低いことがある。そのような場合、映像処理装置１０３が、処理能力の不足により、事象の発生位置の推定をできないことがある。そのような場合であっても、受信装置２０３の第２位置推定部２６０が、本実施形態では画像の処理を伴う、事象の発生位置の推定を行うので、映像処理装置１０３は、事象の発生位置を得ることができる。
【０１７７】
本実施形態では、事象の発生位置の推定に使用する照合データは、映像処理装置１０３ではなく、受信装置２０３に格納される。従って、本実施形態では、さらに、例えば、照合データが、警察における機密情報などの、現場に配置される映像処理装置１０３に登録すること避けたい情報である場合であっても、そのような照合データを用いてＲＯＩを決定することが可能となる。
【０１７８】
次に、本実施形態の変形例について説明する。
【０１７９】
（第１の変形例）
本実施形態の第１の変形例の映像処理システム５０３は、以下で説明する点において、本実施形態の映像処理システム５０３と異なる。
【０１８０】
本実施形態の第１の変形例に係る映像処理装置１０３は、決定部１３１を含んでいなくてもよい。その場合、第１通信部１６０と設定部１３２とが、通信可能に接続されていてもよい。そして、受信装置２０３が、第２決定部２６１を含んでいればよい。
【０１８１】
第２決定部２６１は、本実施形態の決定部１３１と同様に、第２位置推定部２６０によって推定された事象の発生位置に基づいて、ＲＯＩを決定する（図２０に示すステップＳ１２４）。第２決定部２６１は、第２通信部２４０及び通信ネットワーク３００を介して、ＲＯＩの位置を表す情報（すなわち、ＲＯＩの領域を特定する情報）を、映像処理装置１０３に送信する。
【０１８２】
本変形例の設定部１３２は、通信ネットワーク３００及び第１通信部１６０を介して、受信装置２０３から、ＲＯＩの位置を表す情報を受信する。
【０１８３】
本実施形態の第１の変形例の映像処理システム５０３は、以上の相違を除いて、本実施形態の映像処理システム５０３と同じである。
【０１８４】
本変形例には、映像処理装置１０３の負荷をさらに軽減できるという効果がある。
【０１８５】
（第２の変形例）
本実施形態の第２の変形例の映像処理システム５０３は、以下で説明する点において、本実施形態の映像処理システム５０３と異なる。
【０１８６】
本変形例の映像処理装置１０３は、位置推定部１３０と、第１記憶部１４０とを含む。本変形例の第１記憶部１４０は、第１の実施形態の第１記憶部１４０と同じであってもよい。
【０１８７】
本変形例の位置推定部１３０は、例えば決定部１３１から、第２位置推定部２６０によって推定された事象の発生位置の情報を受け取る。位置推定部１３０は、映像受信部１１５からカメラ部１１０が撮影した映像の映像データを受信し、受信した映像データにおいて、発生位置の情報を受け取った事象の追跡を行う。
【０１８８】
具体的には、例えば、位置推定部１３０は、事象の発生位置を推定し、発生位置を推定した事象が、第２位置推定部２６０が発生位置を推定した事象と同一の事象であるか判定する。位置推定部１３０は、推定した事象の発生位置のうち、第２位置推定部２６０が発生位置を推定した事象と同一の事象と判定された事象の発生位置を、決定部１３１に送信する。
【０１８９】
さらに具体的には、事象の発生位置は、例えば、検出された顔が登録顔と同じ顔であると判定された人物の領域を表してもよい。位置推定部１３０は、例えば、映像受信部１１５から受信した映像において人物の顔を検出し、さらに、顔が検出された人物の領域を検出してもよい。位置推定部１３０は、検出した人物の領域の、事象の発生位置が表す領域との重なりの割合を算出してもよい。そして、位置推定部１３０は、例えば、算出した割合が所定値より大きい人物の領域のうち、その割合が最も大きい人物の領域を、発生位置の情報を受け取った事象と、同じ事象の発生位置と推定してもよい。この場合、第１記憶部１４０は、検出する映像パターンを表す情報（例えば、顔領域として検出する領域が備える特徴）を記憶していればよい。第１記憶部１４０は、顔の照合データを記憶していなくてもよい。
【０１９０】
本変形例の決定部１３１は、通信ネットワーク３００及び第１通信部１６０を介して、受信装置２０３から、事象の発生位置を受信する。決定部１３１は、受信装置２０３から受信した事象の発生位置を、位置推定部１３０に送信する。本変形例の決定部１３１は、さらに、位置推定部１３０から事象の発生位置を受信する。そして、決定部１３１は、受信した事象の発生位置に基づいて、ＲＯＩを決定する。
【０１９１】
本実施形態の第２の変形例の映像処理システム５０３は、以上の相違を除いて、本実施形態の映像処理システム５０３と同じである。
【０１９２】
以上で説明した本変形例には、照合データが、現場に配置される映像処理装置１０３に登録すること避けたい情報である場合であっても、そのような照合データを用いて、受信装置２０３の負荷を軽減しながら、ＲＯＩを決定することができるという効果がある。
【０１９３】
（第３の変形例）
また、本変形例では、第２位置推定部２６０は、受信装置２０３ではなく、受信装置２０３とは別の情報処理装置に含まれていてもよい。その情報処理装置は、受信装置２０３が接続されているＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）に、受信装置２０３と通信可能に接続されていればよい。その場合、制御部２２０は、映像処理装置１０３から受信した符号化データを復号することによって得られた映像データと、その映像処理装置１０３の識別子とを、その情報処理装置に送信すればよい。その情報処理装置の第２位置推定部２６０は、受信した映像データにおいて事象の発生位置を推定し、推定した事象の発生位置を、その映像処理装置１０３に送信すればよい。
【０１９４】
＜第５の実施形態＞
＜＜構成＞＞
次に、本発明の第５の実施形態について、図面を参照して詳細に説明する。
【０１９５】
図２１は、本実施形態の映像処理システム５０４の構成の例を表すブロック図である。
【０１９６】
図２１を参照すると、本実施形態の映像処理システム５０４は、１台以上の映像処理装置１０４と、受信装置２０４とを含む。１台以上の映像処理装置１０４の各々は、通信ネットワーク３００を介して、受信装置２０４と、通信可能に接続されている。
【０１９７】
本実施形態の映像処理装置１０４は、第１の実施形態の映像処理装置１００の各構成要素に加えて、音声入力部１７０と音声受信部１７５とを含む。映像処理装置１０４の音声入力部１７０及び音声受信部１７５以外の構成要素は、以下で説明する相違を除いて、第１の実施形態の映像処理装置１００の、同じ番号が付与された構成要素と同様に動作する。本実施形態の音声入力部１７０及び音声受信部１７５は、それぞれ、第２の実施形態の音声入力部１７０及び音声受信部１７５と同様に動作する。
【０１９８】
本実施形態の位置推定部１３０は、さらに、第２の実施形態の位置推定部と同様に、音声受信部１７５から受信した音声データに基づいて、事象の発生位置を推定する。
【０１９９】
本実施形態の決定部１３１は、位置推定部１３０から、事象の発生位置の情報を受信する。決定部１３１は、さらに、通信ネットワーク３００及び第１通信部を介して、受信装置２０４から事象の発生位置の情報を受信する。決定部１３１は、情報を受信した発生位置の各々に基づいて、ＲＯＩを決定する。本実施形態の決定部１３１は、第３の実施形態の決定部と同様に、決定したＲＯＩの位置を表す情報を、第１通信部１６０と通信ネットワーク３００とを介して、受信装置２０４に送信する。
【０２００】
本実施形態の受信装置２０４は、第１の実施形態の受信装置２００の各構成要素に加えて、鮮明化部２５０と、第２位置推定部２６０とを含む。鮮明化部２５０は、第３の実施形態の鮮明化部２５０と同じである。第２位置推定部２６０は、第４の実施形態の第２位置推定部２６０と同じである。制御部２２０は、第３の実施形態の制御部２２０の動作と同じ動作に加えて、第４の実施形態の制御部２２０の動作と同じ動作を行う。
【０２０１】
＜＜動作＞＞
次に、本実施形態の映像処理装置１０４の動作について、図面を参照して詳細に説明する。
【０２０２】
図２２は、本実施形態の映像処理装置１０４の動作の例を表すフローチャートである。図２２に示す、映像処理装置１０４のステップＳ２０１の動作は、図１０のステップＳ２０１の動作、すなわち、図１１に示す動作と同じである。ステップＳ２０１において、映像処理装置１０４は、図１１に示す動作を行う。また、本実施形態の映像処理装置１０４のステップＳ１０２の動作は、図５に示す、第１の実施形態の映像処理装置１００の、ステップＳ１０２の動作と同じである。ステップＳ１０２において、映像処理装置１０４は、図５に示す、第１の実施形態の映像処理装置１００の、ステップＳ１０２の動作と同じ動作を行う。
【０２０３】
ステップＳ５０３：
映像処理装置１０４は、符号化条件決定処理を行う。そして、映像処理装置１０４は、ＲＯＩ（第１領域）の画質が、映像のフレームのＲＯＩ以外の領域（すなわち第２領域）の画質より高くなるように、ＲＯＩを符号化する条件（すなわち第１条件）と、第１領域を符号化する条件（第２条件）とを決定する。符号化条件決定処理については、後で詳細に説明する。
【０２０４】
ステップＳ１０７、ステップＳ１０８、及び、ステップＳ１０９の動作は、図５に示す、第１の実施形態の映像処理装置１００の、同じ符号が付与されているステップの動作と同じである。ステップＳ１０７、ステップＳ１０８、及び、ステップＳ１０９において、映像処理装置１０４は、図５に示す、第１の実施形態の映像処理装置１００の、同じ符号が付与されているステップの動作と同じ動作を行う。
【０２０５】
図２３は、本実施形態の映像処理装置１０４の符号化条件決定処理の動作の例を表すフローチャートである。なお、本実施形態の映像処理装置１０４の決定部１３１は、図２２及び図２３に示す動作とは独立に、受信装置２０４から、受信装置２０４の第２位置推定部２６０が推定したイベント情報（すなわち、事象の発生位置の情報）を受信する。なお、受信装置２０４の第２位置推定部２６０が事象の発生位置を推定しなかった場合、決定部１３１は、受信装置２０４からイベント情報を受信しない。
【０２０６】
図２３に示すステップＳ４０３の動作は、図１７に示すステップＳ４０３の動作、すなわち、図１８に示す動作と同じである。映像処理装置１０４は、ステップＳ４０３において、図１８に示す動作を行う。同様に、映像処理装置１０４の、ステップＳ１０３の動作は、図５に示す、第１の実施形態の映像処理装置１００の、同じ符号が付与されているステップの動作と同じである。
【０２０７】
ステップＳ５０５：
ステップＳ４０３において、受信装置２０４の第２位置推定部２６０が推定したイベント情報（すなわち、事象の発生位置の情報）を受信した場合、決定部１３１によりＲＯＩ（すなわち、上述の第１領域）が決定される。また、ステップＳ１０３においてイベントが検出された場合も、決定部１３１によりＲＯＩが決定される。ＲＯＩが決定された場合（ステップＳ５０５においてＹＥＳ）、映像処理装置１０４は、次に、ステップＳ３０５及びステップＳ１０５の動作を行う。ＲＯＩが決定されない場合（ステップＳ５０５においてＮＯ）、映像処理装置１０４は、次に、ステップＳ１０６の動作を行う。
【０２０８】
本実施形態の映像処理装置１０４の、ステップＳ３０５の動作は、図１４に示す、第３の実施形態の、ステップＳ３０５における動作と同じである。本実施形態の映像処理装置１０４は、図１４に示す、第３の実施形態の、ステップＳ３０５における動作と同じ動作を行う。また、映像処理装置１０４の、ステップＳ１０５及びステップＳ１０６における動作は、図５に示す、第１の実施形態の映像処理装置１００の、ステップＳ１０５及びステップＳ１０６における動作と同じである。映像処理装置１０４は、ステップＳ１０５及びステップＳ１０６において、第１の実施形態の映像処理装置１００の、ステップＳ１０５及びステップＳ１０６における動作と同じ動作を行う。
【０２０９】
次に、本実施形態の受信装置２０４の動作について、図面を参照して詳細に説明する。
【０２１０】
図２４は、本実施形態の受信装置２０４の動作の例を表すフローチャートである。
【０２１１】
図２４に示す、ステップＳ１３１及びステップＳ１３２において、受信装置２０４は、図８に示す、第１の実施形態の受信装置２００の、ステップＳ１３１及びステップＳ１３２の動作と同じ動作を行う。
【０２１２】
図２４に示す、ステップＳ４３３からステップＳ４３５までの動作において、本実施形態の受信装置２０４は、図１９に示す、第４の実施形態の受信装置２０３の、同じ符号が付与されているステップの動作と同じ動作を行う。
【０２１３】
図２４に示す、ステップＳ３３３の動作において、本実施形態の受信装置２０４は、図１５に示す、第３の実施形態の受信装置２０２の、同じ番号が付与されているステップの動作と同じ動作を行う。受信装置２０４は、ステップＳ３３３の次に、ステップＳ５１４の動作を行う。
【０２１４】
ステップＳ５１４：
ステップＳ３３３においてＲＯＩの情報の送信があった場合、決定されたＲＯＩの情報は存在する。決定されたＲＯＩの情報が存在する場合（ステップＳ５１４においてＹＥＳ）、受信装置２０４は、次に、ステップＳ３３５の動作を行う。決定されたＲＯＩの情報が存在しない場合（ステップＳ５１４においてＮＯ）、受信装置２０４は、次に、ステップＳ１３３の動作を行う。なお、ステップＳ４３３において、第２位置推定部２６０がＲＯＩを決定してもよい。すなわち、第２位置推定部２６０は、図２０に示すステップＳ１２４の動作を行ってもよい。その場合、図２３に示すステップＳ３０５において、映像処理装置１０４の決定部１３１は、受信装置２０４から受信したイベント情報に基づくＲＯＩの情報を、受信装置２０４に送信しなくてもよい。ステップＳ４３３においてＲＯＩが決定された場合、ステップＳ３３３においてＲＯＩの情報の送信が無くても、決定されたＲＯＩの情報は存在する。
【０２１５】
図２４に示す、ステップＳ３３５の動作において、本実施形態の受信装置２０４は、図１５に示す、第３の実施形態の受信装置２０２の、同じ番号が付与されているステップの動作と同じ動作を行う。
【０２１６】
図２４に示す、ステップＳ１３３、ステップＳ１３４及びステップＳ１３５において、受信装置２０４は、図８に示す、第１の実施形態の受信装置２００の、同じ符号が付与されているステップの動作と同じ動作を行う。ただし、ステップＳ１３５において表示を終了しない場合（ステップＳ１３５においてＮＯ）、受信装置２００の動作は、ステップＳ４３３に戻る。
【０２１７】
以上で説明した本実施形態には、さまざまな種類の関心領域について、映像における発生場所が予め定まっていない関心領域の画質の低下を抑制しながら、その映像の送信に必要なネットワーク帯域を削減できる。
【０２１８】
その理由は、位置推定部１３０が、カメラ部１１０によって得られた映像データ及び音声入力部１７０によって得られた音声データから、事象の発生位置を推定するからである。そして、第２位置推定部２６０が、映像処理装置１０４から受信した符号化データを復号することによって得られる映像データから、事象の発生位置を推定するからである。さらに、決定部１３１が、それらの事象の発生位置に基づいて、ＲＯＩを決定するからである。
【０２１９】
本実施形態には、さらに、第３の実施形態と同じ効果がある。その理由は、第３の実施形態の効果が生じる理由と同じである。
【０２２０】
（変形例）
本実施形態は、第２の実施形態の変形例と同様の変形が可能である。その場合、第２の実施形態の変形例と同じ効果がある。また、第４の実施形態の第２及び第３の変形例と同様の変形も可能である。
【０２２１】
＜第６の実施形態＞
次に、本発明の第６の実施形態について、図面を参照して詳細に説明する。
【０２２２】
＜＜構成＞＞
図２５は、本実施形態の映像処理装置１０５の構成の例を表すブロック図である。
【０２２３】
図２５を参照すると、本実施形態の映像処理装置１０５は、決定部１３１と、設定部１３２とを含む。決定部１３１は、映像において、事象が発生すると推定された発生位置に基づく第１領域を決定する。設定部１３２は、第１領域を符号化する第１条件（すなわち、関心領域）と、映像に含まれ第１領域以外の領域である第２領域（すなわち、関心領域以外の領域）を符号化する第２条件とを、第１領域が第２領域よりも高画質になるように設定する。
【０２２４】
＜＜動作＞＞
図２６は、本実施形態の映像処理装置１０５の動作の例を表すフローチャートである。
【０２２５】
Ｓ６０１：
決定部１３１は、映像において、事象が発生すると推定された発生位置に基づく第１領域を決定する。
【０２２６】
Ｓ６０２：
設定部１３２は、第１領域を符号化する第１条件（すなわち、関心領域）と、映像に含まれ第１領域以外の領域である第２領域（すなわち、関心領域以外の領域）を符号化する第２条件とを、第１領域が第２領域よりも高画質になるように設定する。
【０２２７】
以上で説明した本実施形態には、映像における発生場所が予め定まっていない関心領域の画質の低下を抑制しながら、その映像の送信に必要なネットワーク帯域を削減できるという効果がある。その理由は、決定部１３１が、映像において、事象が発生すると推定された発生位置に基づく第１領域を決定するからである。そして、設定部１３２が、第１領域を符号化する第１条件（すなわち、関心領域）と、映像に含まれ第１領域以外の領域である第２領域を符号化する第２条件とを、第１領域が第２領域よりも高画質になるように設定するからである。第１領域は、関心領域である。第２領域は、関心領域以外の領域である。例えば、第１領域の画質を保ったまま、第２の領域の画質を低下させるよう、第１条件及び第２条件を設定することによって、関心領域の画質の低下を抑制し、かつ、関心領域以外の領域の符号化データのデータ量を削減できる。
【０２２８】
＜その他の実施の形態＞
以上で説明した第１、第３、第４、及び第５の実施形態の例では、位置推定部１３０は、事象の発生位置として、例えば、顔照合に基づいて検出した顔又は人物の領域を検出する。位置推定部１３０が推定する事象の発生位置は、以上の例に限られない。位置推定部１３０は、例えば、不審な行動を行う人物（所定パターンの行動を行う人物）の位置、置き去りにされた物（不審物）の位置、又は、集合している多数の人物（所定範囲内に存在する所定数以上の人物）の位置などを、事象の発生位置として検出してもよい。不振な行動として、例えば、同じ場所に所定時間以上留まること、類似する経路を歩行することの繰り返し、及び、類似する行動パターンの繰り返しなどが挙げられる。
【０２２９】
また、上述の各実施形態に係る映像処理装置（すなわち、映像処理装置１００、１０１、１０２、１０３、及び、１０４）は、ディスプレイなどの表示部を備えていてもよい。上述の各実施形態係る映像処理装置は、災害、事件、事故及びそれらの予兆として事象の発生位置を検出した場合、ＲＯＩが設定された地域の位置情報を、周辺の映像処理装置に通知してもよい。ＲＯＩが設定された地域の位置情報は、例えば、映像における事象の発生位置に基づいて推定した、その事象の発生位置が示す緯度及び経度等であってもよい。ＲＯＩが設定された地域の位置情報は、例えば、交差点の名称、通りの名称、又は、住所であってもよい。ＲＯＩが設定された地域の位置情報は、例えば、映像処理装置が設置されている地域が区切られた区画に予め付与された、識別子等であってもよい。ＲＯＩが設定された地域の位置情報は、例えば、ＲＯＩを決定した映像処理装置の、緯度及び経度などの位置を示す情報であってもよい。ＲＯＩが設定された地域の位置情報は、例えば、ＲＯＩを決定した映像処理装置の、緯度及び経度などの位置を示す情報と、カメラ部１１０の方向との組み合わせであってもよい。さらに、映像処理装置は、警察官などが保持する携帯端末であってもよい。
【０２３０】
これにより、位置情報を受信した映像処理装置である携帯端末を保持する付近の警察官などが、その位置情報が示す場所の付近に急行し、その映像処理装置によって、その場所の付近の映像を受信装置に配信することができる。この場合、映像処理装置は、ＧＰＳ情報や磁気センサによって撮影の場所及びカメラの方向を測定し、測定した撮影の場所及びカメラの方向を、本発明の実施形態に係る受信装置に通知してもよい。その受信装置は、通知された撮影の場所及びカメラの方向を、他の映像処理装置に通知してもよい。その受信装置は、通知された撮影の場所から一定の範囲内に存在する映像処理装置のみに、通知された撮影の場所を通知してもよい。
【０２３１】
第４及び第５実施形態の実施形態に係る受信装置は、映像処理装置から受信した映像を用いてＲＯＩを決定するのに加えて、インターネットにおいて得られる画像及び映像等を使用して、ＲＯＩを設定してもよい。その受信装置は、例えば、インターネット上のＳＮＳ（Ｓｏｃｉａｌ  Ｎｅｔｗｏｒｋｉｎｇ  Ｓｅｒｖｉｃｅ）から得られたデータにおいて、ビッグデータ解析などを用いて、災害、事件、事故及びそれらの予兆を検出してもよい。その受信装置は、さらに、災害、事件、事故及びそれらの予兆が検出された場所を特定してもよい。その受信装置は、さらに、特定された場所の付近の状況が映っている映像を特定し、特定された映像にＲＯＩを設定してもよい。その映像は、いずれかの映像処理装置によって撮影された映像であってもよい。
【０２３２】
なお、以上に述べた各実施形態に係る映像処理装置及び受信装置の各構成要素は、例えば、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ  Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ）を含む半導体処理部品として実装されている、専用の回路によって実現されてもよい。また、これらの構成要素は、これらの構成要素の機能を実現するプログラムが格納されたメモリと、そのプログラムを実行する少なくとも１つのプロセッサを含むコンピュータによって実現されてもよい。１つ以上のプロセッサは、例えば、マイクロプロセッサ（ＭＰＵ（Ｍｉｃｒｏ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ））、ＤＳＰ（Ｄｉｇｉｔａｌ  Ｓｉｇｎａｌ  Ｐｒｏｃｅｓｓｏｒ）、及び、それらの組み合わせなどである。
【０２３３】
図２７は、本発明の各実施形態に係る、映像処理装置及び受信装置を実現できる、コンピュータの構成の例を示すブロック図である。図２７を参照すると、コンピュータ１０００は、プロセッサ１００１と、メモリ１００２と、記憶装置１００３と、Ｉ／Ｏ（Ｉｎｐｕｔ／Ｏｕｔｐｕｔ）インタフェース１００４とを含む。また、コンピュータ１０００は、記録媒体１００５にアクセスすることができる。メモリ１００２と記憶装置１００３は、例えば、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、ハードディスクなどの記憶装置である。記録媒体１００５は、例えば、後で詳述する非一時的なコンピュータ可読媒体である。記憶装置１００３が記録媒体１００５であってもよい。プロセッサ１００１は、メモリ１００２と、記憶装置１００３に対して、データやプログラムの読み出しと書き込みを行うことができる。プロセッサ１００１は、Ｉ／Ｏインタフェース１００４を介して、例えば、通信ネットワーク３００に接続された他の装置にアクセスすることができる。プロセッサ１００１は、記録媒体１００５にアクセスすることができる。記録媒体１００５には、コンピュータ１０００を、本発明のいずれかの実施形態に係る映像処理装置又は受信装置として動作させるプログラムが格納されている。
【０２３４】
プロセッサ１００１は、記録媒体１００５に格納されているプログラムを、メモリ１００２にロードする。そして、プロセッサ１００１が、メモリ１００２にロードされたプログラムを実行することにより、コンピュータ１０００は、本発明のいずれかの実施形態に係る映像処理装置又は受信装置として動作する。
【０２３５】
具体的には、映像受信部１１５、エンコード部１２０、位置推定部１３０、決定部１３１、設定部１３２、第１記憶部１４０、帯域推定部１５０、第１通信部１６０、及び、音声受信部１７５の一部又は全部は、専用の回路によって実現できる。映像受信部１１５、エンコード部１２０、位置推定部１３０、決定部１３１、設定部１３２、帯域推定部１５０、第１通信部１６０、及び、音声受信部１７５は、これらの機能を実現するプログラムがロードされたメモリと、そのプログラムを実行する１つ以上のプロセッサとによって実現できる。第１記憶部１４０は、コンピュータが含む、メモリやハードディスク装置等の記憶装置によって実現できる。同様に、制御部２２０、第２記憶部２３０、第２通信部２４０、鮮明化部２５０、第２位置推定部２６０、及び、第２決定部２６１は、専用の回路によって実現できる。制御部２２０、第２通信部２４０、鮮明化部２５０、第２位置推定部２６０、及び、第２決定部２６１は、これらの機能を実現するプログラムがロードされたメモリと、そのプログラムを実行する１つ以上のプロセッサとによって実現できる。第２記憶部２３０は、コンピュータが含む、メモリやハードディスク装置等の記憶装置によって実現できる。
【０２３６】
上述のプログラムは、様々な種類の非一時的なコンピュータ可読媒体（ｎｏｎ−ｔｒａｎｓｉｔｏｒｙ  ｃｏｍｐｕｔｅｒ  ｒｅａｄａｂｌｅ  ｍｅｄｉｕｍ）に格納されて、コンピュータに提供可能である。非一時的なコンピュータ可読媒体は、様々な種類の記録媒体（ｔａｎｇｉｂｌｅ  ｓｔｏｒａｇｅ  ｍｅｄｉｕｍ）を含む。非一時的なコンピュータ可読媒体は、例えば、磁気記録媒体（例えばフレキシブルディスク、磁気テープ、ハードディスクなど）であってもよい。非一時的なコンピュータ可読媒体は、光磁気記録媒体（例えば光磁気ディスクなど）、ＣＤ−ＲＯＭ（Ｃｏｍｐａｃｔ  Ｄｉｓｃ  Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、ＣＤ−Ｒ（Ｃｏｍｐａｃｔ  Ｄｉｓｃ−Ｒｅｃｏｒｄａｂｌｅ）、ＣＤ−Ｒ／Ｗ（Ｃｏｍｐａｃｔ  Ｄｉｓｃ−Ｒｅｗｒｉｔａｂｌｅなど）であってもよい。非一時的なコンピュータ可読媒体は、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Ｐｒｏｇｒａｍｍａｂｌｅ  ＲＯＭ）、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ  ＰＲＯＭ）、フラッシュＲＯＭ、およびＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）など）であってもよい。また、プログラムは、様々な種類の一時的なコンピュータ可読媒体（ｔｒａｎｓｉｔｏｒｙ  ｃｏｍｐｕｔｅｒ  ｒｅａｄａｂｌｅ  ｍｅｄｉｕｍ）によってコンピュータに提供されてもよい。一時的なコンピュータ可読媒体の例は、電気信号、光信号、および電磁波を含む。一時的なコンピュータ可読媒体は、電線や光ファイバ等の有線通信路、または無線通信路を介して、プログラムをコンピュータに提供できる。
【０２３７】
また、上記の実施形態の一部又は全部は、以下の付記のようにも記載されうるが、以下には限られない。
【０２３８】
（付記１）
映像において、事象が発生すると推定された発生位置に基づく第１領域を決定する決定手段と、
前記第１領域を符号化する第１条件と、前記映像に含まれ前記第１領域以外の領域である第２領域を符号化する第２条件とを、前記第１領域が前記第２領域よりも高画質になるように設定する設定手段と、
を備える映像処理装置。
【０２３９】
（付記２）
前記設定手段は、前記映像が配信される通信ネットワークにおいて利用可能な通信帯域に基づいて、前記第１条件と前記第２条件とを設定する
付記１に記載の映像処理装置。
【０２４０】
（付記３）
センサによって取得したデータに基づいて、前記発生位置を推定する位置推定手段
をさらに備える付記１又は２に記載の映像処理装置。
【０２４１】
（付記４）
前記位置推定手段は、前記映像において映像パターンを前記事象として検出し、当該事象が検出された位置を前記発生位置として推定する
付記３に記載の映像処理装置。
【０２４２】
（付記５）
前記位置推定手段は、２以上のマイクロホンによって集音された音声のデータに基づいて音源の方向を特定し、当該音源の方向が示す、前記映像における位置を、前記発生位置として推定する
付記３又は４に記載の映像処理装置。
【０２４３】
（付記６）
前記位置推定手段は、前記音声のデータにおいて所定の音声パターンを検出し、当該音声パターンを含む前記音声の前記音源の方向を特定する
付記５に記載の映像処理装置。
【０２４４】
（付記７）
前記第１領域を前記第１条件のもとに符号化し、前記第２領域を前記第２条件のもとに符号化する符号化手段
をさらに備える付記１から６のいずれか１項に記載の映像処理装置。
【０２４５】
（付記８）
付記１から７のいずれか１項に記載の映像処理装置と、受信装置とを含み、
前記映像処理装置は、
符号化された前記映像の映像データと前記第１領域の範囲を示す領域情報とを送信する第１通信手段
をさらに備え、
前記受信装置は、
前記映像データと前記領域情報とを受信する第２通信手段と、
前記映像データを復号することによって復号映像を生成する制御手段と、
前記復号映像における前記領域情報が示す領域において鮮明化を行う鮮明化手段と、
前記鮮明化が行われた前期復号映像を表示する表示手段と、
を備える
映像処理システム。
【０２４６】
（付記９）
映像において、事象が発生すると推定された発生位置に基づく第１領域を決定し、
前記第１領域を符号化する第１条件と、前記映像に含まれ前記第１領域以外の領域である第２領域を符号化する第２条件とを、前記第１領域が前記第２領域よりも高画質になるように設定する、
映像処理方法。
【０２４７】
（付記１０）
前記映像が配信される通信ネットワークにおいて利用可能な通信帯域に基づいて、前記第１条件と前記第２条件とを設定する
付記９に記載の映像処理方法。
【０２４８】
（付記１１）
センサによって取得したデータに基づいて、前記発生位置を推定する
付記９又は１０に記載の映像処理方法。
【０２４９】
（付記１２）
前記映像において映像パターンを前記事象として検出し、当該事象が検出された位置を前記発生位置として推定する
付記１１に記載の映像処理方法。
【０２５０】
（付記１３）
２以上のマイクロホンによって集音された音声のデータに基づいて音源の方向を特定し、当該音源の方向が示す、前記映像における位置を、前記発生位置として推定する
付記１１又は１２に記載の映像処理方法。
【０２５１】
（付記１４）
前記音声のデータにおいて所定の音声パターンを検出し、当該音声パターンを含む前記音声の前記音源の方向を特定する
付記１３に記載の映像処理方法。
【０２５２】
（付記１５）
前記第１領域を前記第１条件のもとに符号化し、前記第２領域を前記第２条件のもとに符号化する
付記９から１４のいずれか１項に記載の映像処理方法。
【０２５３】
（付記１６）
コンピュータに、
映像において、事象が発生すると推定された発生位置に基づく第１領域を決定する決定処理と、
前記第１領域を符号化する第１条件と、前記映像に含まれ前記第１領域以外の領域である第２領域を符号化する第２条件とを、前記第１領域が前記第２領域よりも高画質になるように設定する設定処理と、
を実行させるプログラムを記憶する記憶媒体。
【０２５４】
（付記１７）
前記設定処理は、前記映像が配信される通信ネットワークにおいて利用可能な通信帯域に基づいて、前記第１条件と前記第２条件とを設定する
付記１６に記載の記憶媒体。
【０２５５】
（付記１８）
コンピュータに、
センサによって取得したデータに基づいて、前記発生位置を推定する位置推定処理
をさらに実行させる前記プログラムを記憶する付記１６又は１７に記載の記憶媒体。
【０２５６】
（付記１９）
前記位置推定処理は、前記映像において映像パターンを前記事象として検出し、当該事象が検出された位置を前記発生位置として推定する
付記１８に記載の記憶媒体。
【０２５７】
（付記２０）
前記位置推定処理は、２以上のマイクロホンによって集音された音声のデータに基づいて音源の方向を特定し、当該音源の方向が示す、前記映像における位置を、前記発生位置として推定する
付記１８又は１９に記載の記憶媒体。
【０２５８】
（付記２１）
前記位置推定処理は、前記音声のデータにおいて所定の音声パターンを検出し、当該音声パターンを含む前記音声の前記音源の方向を特定する
付記２０に記載の記憶媒体。
【０２５９】
（付記２２）
コンピュータに、
前記第１領域を前記第１条件のもとに符号化し、前記第２領域を前記第２条件のもとに符号化する符号化処理
をさらに実行させる前記プログラムを記憶する付記１６から２１のいずれか１項に記載の記憶媒体。
【０２６０】
なお、実施形態を参照して本発明を説明したが、本発明は、以上に述べた各実施形態に限られない。本発明の構成や詳細には、本発明の趣旨を逸脱しない範囲で当業者が理解し得る様々な変更をすることが可能である。
【０２６１】
上述した各実施形態は本件発明者により得られた技術思想の適用に関する例に過ぎない。すなわち、当該技術思想は、上述した実施形態のみに限定されるものではなく、種々の変更が可能であることは勿論である。
【０２６２】
この出願は、２０１６年８月２３日に出願された日本出願特願２０１６−１６２８５０を基礎とする優先権を主張し、その開示の全てをここに取り込む。
【産業上の利用可能性】
【０２６３】
本発明によれば、ネットワーク帯域が限られた環境での映像配信においても、注目すべき領域は高画質な映像を配信することが可能な映像処理装置や、それを用いた映像配信システム、それを実現するためのプログラムといった用途に適用できる。
【符号の説明】
【０２６４】
１００    映像処理装置
１０１    映像処理装置
１０２    映像処理装置
１０３    映像処理装置
１０４    映像処理装置
１０５    映像処理装置
１１０    カメラ部
１１５    映像受信部
１２０    エンコード部
１３０    位置推定部
１３１    決定部
１３２    設定部
１４０    第１記憶部
１５０    帯域推定部
１６０    第１通信部
１７０    音声入力部
１７５    音声受信部
２００    受信装置
２０２    受信装置
２０３    受信装置
２０４    受信装置
２１０    入出力部
２２０    制御部
２３０    第２記憶部
２４０    第２通信部
２５０    鮮明化部
２６０    第２位置推定部
２６１    第２決定部
３００    通信ネットワーク
５００    映像処理システム
５０１    映像処理システム
５０２    映像処理システム
５０３    映像処理システム
５０４    映像処理システム
１０００    コンピュータ
１００１    プロセッサ
１００２    メモリ
１００３    記憶装置
１００４    Ｉ／Ｏインタフェース
１００５    記録媒体
【図１】
2018037890.tif 000003
【図２】
2018037890.tif 000004
【図３】
2018037890.tif 000005
【図４】
2018037890.tif 000006
【図５】
2018037890.tif 000007
【図６】
2018037890.tif 000008
【図７】
2018037890.tif 000009
【図８】
2018037890.tif 000010
【図９】
2018037890.tif 000011
【図１０】
2018037890.tif 000012
【図１１】
2018037890.tif 000013
【図１２】
2018037890.tif 000014
【図１３】
2018037890.tif 000015
【図１４】
2018037890.tif 000016
【図１５】
2018037890.tif 000017
【図１６】
2018037890.tif 000018
【図１７】
2018037890.tif 000019
【図１８】
2018037890.tif 000020
【図１９】
2018037890.tif 000021
【図２０】
2018037890.tif 000022
【図２１】
2018037890.tif 000023
【図２２】
2018037890.tif 000024
【図２３】
2018037890.tif 000025
【図２４】
2018037890.tif 000026
【図２５】
2018037890.tif 000027
【図２６】
2018037890.tif 000028
【図２７】
2018037890.tif 000029
【手続補正書】
【提出日】平成31年2月21日(2019.2.21)
【手続補正２】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
映像において、事象が発生すると推定された発生位置に基づく第１領域を決定する決定手段と、
前記第１領域を符号化する第１条件と、前記映像に含まれ前記第１領域以外の領域である第２領域を符号化する第２条件とを、前記第１領域が前記第２領域よりも高画質になるように設定する設定手段と、
を備える映像処理装置。
【請求項２】
前記設定手段は、前記映像が配信される通信ネットワークにおいて利用可能な通信帯域に基づいて、前記第１条件と前記第２条件とを設定する
請求項１に記載の映像処理装置。
【請求項３】
センサによって取得したデータに基づいて、前記発生位置を推定する位置推定手段
をさらに備える請求項１又は２に記載の映像処理装置。
【請求項４】
前記位置推定手段は、前記映像において映像パターンを前記事象として検出し、当該事象が検出された位置を前記発生位置として推定する
請求項３に記載の映像処理装置。
【請求項５】
前記位置推定手段は、２以上のマイクロホンによって集音された音声のデータに基づいて音源の方向を特定し、当該音源の方向が示す、前記映像における位置を、前記発生位置として推定する
請求項３又は４に記載の映像処理装置。
【請求項６】
前記位置推定手段は、前記音声のデータにおいて所定の音声パターンを検出し、当該音声パターンを含む前記音声の前記音源の方向を特定する
請求項５に記載の映像処理装置。
【請求項７】
前記第１領域を前記第１条件のもとに符号化し、前記第２領域を前記第２条件のもとに符号化する符号化手段
をさらに備える請求項１から６のいずれか１項に記載の映像処理装置。
【請求項８】
請求項１から７のいずれか１項に記載の映像処理装置と、受信装置とを含み、
前記映像処理装置は、
符号化された前記映像の映像データと前記第１領域の範囲を示す領域情報とを送信する第１通信手段
をさらに備え、
前記受信装置は、
前記映像データと前記領域情報とを受信する第２通信手段と、
前記映像データを復号することによって復号映像を生成する制御手段と、
前記復号映像における前記領域情報が示す領域において鮮明化を行う鮮明化手段と、
前記鮮明化が行われた前期復号映像を表示する表示手段と、
を備える
映像処理システム。
【請求項９】
映像において、事象が発生すると推定された発生位置に基づく第１領域を決定し、
前記第１領域を符号化する第１条件と、前記映像に含まれ前記第１領域以外の領域である第２領域を符号化する第２条件とを、前記第１領域が前記第２領域よりも高画質になるように設定する、
映像処理方法。
【請求項１０】
コンピュータに、
映像において、事象が発生すると推定された発生位置に基づく第１領域を決定する決定処理と、
前記第１領域を符号化する第１条件と、前記映像に含まれ前記第１領域以外の領域である第２領域を符号化する第２条件とを、前記第１領域が前記第２領域よりも高画質になるように設定する設定処理と、
を実行させるプログラム。
【国際調査報告】
2018037890.tif 000030
2018037890.tif 000031
2018037890.tif 000032
2018037890.tif 000033