(57)【要約】【課題】画像表示切替における画像の特徴の活用効率を向上できる画像切替装置を提供する。【解決手段】画像切替装置は、撮像装置により撮像された画像を含むデータを取得するデータ取得部と、データの特徴量を検出する特徴量検出部と、データの特徴量に基づいて、特徴量が検出されたデータに対応する画像が表示装置に表示される場合の連続表示時間を指定する指定部と、連続表示時間毎に、各画像を表示装置に切り替えて表示させる画像表示制御部と、を備える。【選択図】図１
2015222917.tif 000002
【特許請求の範囲】
【請求項１】
撮像装置により撮像された画像を含むデータを取得するデータ取得部と、
前記取得されたデータの特徴量を検出する特徴量検出部と、
前記データの特徴量に基づいて、特徴量が検出されたデータに対応する画像が表示装置に表示される場合の連続表示時間を指定する指定部と、
前記指定された連続表示時間毎に、各画像を前記表示装置に切り替えて表示させる画像表示制御部と、
を備える画像切替装置。
【請求項２】
請求項１に記載の画像切替装置であって、
前記指定部は、前記特徴量検出部により特徴量が検出されたデータに対応する画像の数と、特徴量が検出されたデータに対応する画像が表示される最短表示時間と、画像が切り替えて表示される周期を示す画像切替周期と、に基づいて、前記表示装置に対する各画像の表示位置及び各画像の前記連続表示時間を指定し、
前記画像表示制御部は、前記指定された各画像の前記表示位置及び前記連続表示時間に基づいて、各画像を前記表示装置に切り替えて表示させる、画像切替装置。
【請求項３】
請求項１または２に記載の画像切替装置であって、更に、
前記データの特徴量に基づいて、前記画像を補正する第１の画像補正部を備え、
前記画像表示制御部は、前記補正された画像を前記表示装置に表示させる、画像切替装置。
【請求項４】
請求項１ないし３のいずれか１項に記載の画像切替装置であって、
前記データ取得部は、複数の撮像装置により撮像された複数の画像を含むデータを取得する、画像切替装置。
【請求項５】
請求項１ないし４のいずれか１項に記載の画像切替装置であって、更に、
画像を分割する画像分割部を備え、
前記データ取得部は、前記撮像装置により撮像された全方位画像を含むデータを取得し、
前記画像分割部は、前記全方位画像を分割し、
前記特徴量検出部は、分割された画像毎に特徴量を検出する、画像切替装置。
【請求項６】
請求項５に記載の画像切替装置であって、更に、
前記分割された複数の画像に対して歪補正する第２の画像補正部を備え、
前記特徴量検出部は、前記歪補正された画像の特徴量を検出する、画像切替装置。
【請求項７】
請求項６に記載の画像切替装置であって、更に、
前記データの特徴量に応じて、前記画像に対応する画像を撮像した撮像装置に対して、前記撮像装置による撮像形式を変更するよう指示する撮像形式指示部を備える、画像切替装置。
【請求項８】
請求項１ないし７のいずれか１項に記載の画像切替装置であって、
前記データの特徴量は、前記画像における人数、動きの有無、移動量、顔検出数、又は所定の顔の有無を含む、画像切替装置。
【請求項９】
請求項１ないし７のいずれか１項に記載の画像切替装置であって、
前記データ取得部は、前記撮像装置により収音された音声データを含むデータを取得し、
前記データの特徴量は、前記音声データに含まれる異常音の有無、所定のキーワードの有無、又は所定の信号レベル以上の音の有無、を含む、画像切替装置。
【請求項１０】
撮像装置と、表示装置と、画像切替装置と、がネットワークを介して接続された画像切替システムであって、
前記撮像装置は、
画像を撮像する撮像部と、
前記撮像された画像を含むデータを送信する第１の通信部と、
を備え、
画像切替装置は、
前記撮像装置からのデータを受信する第２の通信部と、
前記受信されたデータの特徴量を検出する特徴量検出部と、
前記データの特徴量に基づいて、特徴量が検出されたデータに対応する画像が前記表示装置に表示される場合の連続表示時間を指定する指定部と、
前記指定された連続表示時間毎に、各画像を前記表示装置に切り替えて表示させる画像表示制御部と、
を備え、
前記第２の通信部は、前記指定された連続表示時間毎に各画像を前記表示装置に切り替えて表示させるための制御データと、前記画像と、を前記表示装置へ送信し、
前記表示装置は、
前記制御データ及び前記画像を受信する第３の通信部と、
前記制御データに基づいて、前記指定された連続表示時間毎に、各画像を切り替えて表示する表示部と、
を備える画像切替システム。
【請求項１１】
画像切替装置における画像切替方法であって、
撮像装置により撮像された画像を含むデータを取得するステップと、
前記取得されたデータの特徴量を検出するステップと、
前記データの特徴量に基づいて、特徴量が検出されたデータに対応する画像が表示装置に表示される場合の連続表示時間を指定するステップと、
前記指定された連続表示時間毎に、各画像を前記表示装置に切り替えて表示させるステップと、
を備える画像切替方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像切替装置、画像切替システム、及び画像切替方法に関する。
【背景技術】
【０００２】
従来、複数の撮像装置により撮像された複数の画像を切り替えて表示する監視カメラ装置が知られている。この監視カメラ装置は、同じ監視カメラにより今回撮像された画像において、前回撮像された画像からの差が所定値を超えない場合、今回撮像された画像の表示をスキップさせる（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平５−０３５９９３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
特許文献１に開示された監視カメラ装置では、画像切替時に画像を表示するか否かの判断基準が、前後の画像における差異が一定値を超えるか超えないかである。この場合、例えば、前回撮像された画像に特徴的な部分が含まれていても、前後の画像において変化がない場合には、監視対象から除外される。また、撮像装置により撮像された画像には、注目すべき特徴量（例えば人数）が多く含まれるので、前後の画像における差異に基づく画像切替では、画像の特徴による表示方法が十分に活用されていないという問題がある。
【０００５】
本発明は、上記事情に鑑みてなされたものであり、画像表示切替における画像の特徴の活用効率を向上できる画像切替装置、画像切替システム、及び画像切替方法を提供する。
【課題を解決するための手段】
【０００６】
本発明の画像切替装置は、撮像装置により撮像された画像を含むデータを取得するデータ取得部と、前記取得されたデータの特徴量を検出する特徴量検出部と、前記データの特徴量に基づいて、特徴量が検出されたデータに対応する画像が表示装置に表示される場合の連続表示時間を指定する指定部と、前記指定された連続表示時間毎に、各画像を前記表示装置に切り替えて表示させる画像表示制御部と、を備える。
【０００７】
本発明の画像切替システムは、撮像装置と、表示装置と、画像切替装置と、がネットワークを介して接続された画像切替システムであって、前記撮像装置は、画像を撮像する撮像部と、前記撮像された画像を含むデータを送信する第１の通信部と、を備え、画像切替装置は、前記撮像装置からのデータを受信する第２の通信部と、前記受信されたデータの特徴量を検出する特徴量検出部と、前記データの特徴量に基づいて、特徴量が検出されたデータに対応する画像が前記表示装置に表示される場合の連続表示時間を指定する指定部と、前記指定された連続表示時間毎に、各画像を前記表示装置に切り替えて表示させる画像表示制御部と、を備え、前記第２の通信部は、前記指定された連続表示時間毎に各画像を前記表示装置に切り替えて表示させるための制御データと、前記画像と、を前記表示装置へ送信し、前記表示装置は、前記制御データ及び前記画像を受信する第３の通信部と、前記制御データに基づいて、前記指定された連続表示時間毎に、各画像を切り替えて表示する表示部と、を備える。
【０００８】
本発明の画像切替方法は、画像切替装置における画像切替方法であって、撮像装置により撮像された画像を含むデータを取得するステップと、前記取得されたデータの特徴量を検出するステップと、前記データの特徴量に基づいて、特徴量が検出されたデータに対応する画像が表示装置に表示される場合の連続表示時間を指定するステップと、前記指定された連続表示時間毎に、各画像を前記表示装置に切り替えて表示させるステップと、を備える。
【発明の効果】
【０００９】
本発明によれば、画像表示切替における画像の特徴量の活用効率を向上できる。
【図面の簡単な説明】
【００１０】
【図１】第１の実施形態における画像切替システムの構成例を示すブロック図
【図２】（Ａ），（Ｂ）第１の実施形態における撮像装置及び表示装置の構成例を示すブロック図
【図３】第１の実施形態における出力画像構成部の動作例を示すフローチャート
【図４】（Ａ），（Ｂ）第１の実施形態における画像レイアウトパターンとシーケンス切替総時間との関係の第１例を示す模式図
【図５】第１の実施形態における画像レイアウトパターンとシーケンス切替総時間との関係の第２例を示す模式図
【図６】（Ａ），（Ｂ）第１の実施形態における画像レイアウトパターンとシーケンス切替総時間との関係の第３例を示す模式図
【図７】第２の実施形態における画像切替システムの構成例を示すブロック図
【図８】（Ａ），（Ｂ）第２の実施形態における画像補正部の動作例を示すフローチャート
【図９】第３の実施形態における画像切替システムの構成例を示すブロック図
【図１０】第３の実施形態における画像補正部の動作例を示すフローチャート
【図１１】（Ａ），（Ｂ）第３の実施形態における画像レイアウトパターンとシーケンス切替総時間との関係の一例を示す模式図
【図１２】第４の実施形態における画像切替システムの構成例を示すブロック図
【図１３】（Ａ），（Ｂ）第４の実施形態における画像レイアウトパターンとシーケンス切替総時間との関係の一例を示す模式図
【発明を実施するための形態】
【００１１】
以下、本発明の実施形態について、図面を用いて説明する。
【００１２】
（第１の実施形態）
図１は、第１の実施形態における画像切替システム１の構成例を示すブロック図である。画像切替システム１は、撮像装置（カメラ）１０と、画像切替装置２０と、表示装置３０と、を備える。撮像装置１０、画像切替装置２０及び表示装置３０は、ネットワーク４０を介して接続されている。ネットワーク４０は、例えば、インターネット、有線ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、又は無線ＬＡＮ（例えばｗｉｆｉ（Ｗｉｒｅｌｅｓｓ  Ｆｉｄｅｌｉｔｙ））を含む。表示装置３０の１つが、画像切替装置２０に含まれてもよい。
【００１３】
撮像装置１０は、所定のエリアの画像を撮像し、画像データを得る。画像は、例えば、動画像、映像、静止画像を含む。撮像装置１０は、音声を収音し、音声データを得てもよい。撮像装置１０を用いることで、リアルタイムにモニタリングできる。撮像装置１０は、複数設けられ、各撮像装置１０により複数の画像データが得られてもよい。また、例えば、１つの撮像装置１０により、異なるエリアの画像が複数得られてもよい。また、これらが組み合わされてもよい。
【００１４】
図２（Ａ）は、撮像装置１０の構成例を示すブロック図である。撮像装置１０は、画像を撮像する撮像部１１と、撮像された画像データを含むデータを送信する通信部１２と、を備える。通信部１２は、第１の通信部の一例である。撮像装置１０は、周囲の音声を収音する収音部（不図示）を備えてもよい。音声は、様々な音を広く含む。通信部１２により送信されるデータは、収音部により収音された音声データを含んでもよい。
【００１５】
図１では、画像切替装置２０は、例えば、インタフェース２１、デコーダ２２、特徴量検出部２３、出力画像構成部２４、画像合成部２５、及び表示先切替部２６を備える。画像切替装置２０は、例えば、図示しないＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）又はＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）を備える。画像切替装置２０では、例えば、ＣＰＵがＲＯＭに格納されたプログラムを実行し、画像切替装置２０の各機能を実現する。
【００１６】
インタフェース２１は、ネットワーク４０を介して各種データを通信するためのインタフェースである。インタフェース２１は、例えば、撮像装置１０からのデータをネットワーク４０を介して受信する。撮像装置１０からのデータは、少なくとも画像データを含み、音声データを含んでもよい。インタフェース２１は、データ取得部、第２の通信部の一例である。
【００１７】
デコーダ２２は、例えば、符号化（例えばデータ圧縮、暗号化）された画像データを復号（デコード）し、デコード画像を導出する。デコーダ２２は、音声データを復号し、デコード音声を導出してもよい。デコーダ２２は、例えば複数設けられる。デコーダ２２は、デコード画像導出部の一例である。
【００１８】
特徴量検出部２３は、復号化されたデータ（例えばデコード画像、デコード音声）の特徴量を検出する。特徴量検出部２３は、例えば、デコード画像に対して所定の画像認識処理を行い、画像の特徴（例えば人物、人物の顔）を特定する。特徴量検出部２３は、例えば、デコード音声に対して所定の音声認識処理を行い、音声の特徴（例えば人物の音声、異常音、所定のキーワード）を特定する。
【００１９】
画像の特徴量は、例えば、デコード画像に含まれる人数、デコード画像に含まれる人物の動きの有無若しくは移動量、デコード画像に含まれる顔検出数、デコード画像に含まれる所定の顔の有無、を含む。所定の顔の有無は、例えば、予めデータベース（不図示）に登録された顔が、デコード画像から検出されたか否かにより、判別される。動きの有無は、例えば、ＶＭＤ（Ｖｉｄｅｏ  Ｍｏｔｉｏｎ  Ｄｅｔｅｃｔｏｒ）により検出される。ＶＭＤは、特徴量検出部２３に含まれる。
【００２０】
音声の特徴量は、例えば、デコード音声に含まれる異常音の有無、デコード音声に含まれる所定のキーワードの有無、又は、デコード音声に含まれる所定の信号レベル以上の音の有無、デコード音声に含まれる所定の人物の音声の有無を含む。所定のキーワードの有無は、例えば、予めデータベース（不図示）に登録されたキーワードが、デコード音声から検出されたか否かにより、判別される。所定の人物の音声の有無は、例えば、予めデータベース（不図示）に登録された注目すべき人物の音声のパターンが、デコード音声のパターンと一致するか否かにより、判別される。注目すべき人物は、例えば、ブラックリストに登録された人物、ＶＩＰ（Ｖｅｒｙ  Ｉｍｐｏｒｔａｎｔ  Ｐｅｒｓｏｎ）、を含む。
【００２１】
出力画像構成部２４は、例えば、デコード画像の特徴量に基づいて、表示装置３０にデコード画像が表示される場合の連続表示時間を指定する。出力画像構成部２４は、例えば、デコード音声の特徴量に基づいて、デコード音声に対応するデコード画像が表示装置３０に表示される場合の連続表示時間を指定する。
【００２２】
例えば、デコード音声とデコード画像とは、音声データの収音時刻と画像データの撮像時刻との一致度によって紐付けられる。収音時刻と撮像時刻とが一致する場合、収音時刻に収音された音声に基づくデコード音声と撮像時刻に撮像された画像に基づくデコード画像とが対応する。
【００２３】
出力画像構成部２４は、例えば、データ（画像又は音声を含む）の特徴量に基づいて、デコード画像を表示するための画像レイアウトパターンを指定する。画像レイアウトパターンは、例えば、表示装置３０の画面に対する各デコード画像の配置位置（表示位置）、各デコード画像の連続表示時間、を含む。
【００２４】
出力画像構成部２４は、例えば、特徴量が検出されたデコード画像の数と、最短表示時間と、シーケンス切替総時間Ｔと、に基づいて、画像レイアウトパターンを指定する。最短表示時間は、例えば、特徴量が検出されたデコード画像が最低限表示される時間であり、例えば２秒である。シーケンス切替総時間Ｔは、画像が切り替えて表示される周期を示す画像切替周期の一例であり、例えば１０秒である。この場合、例えば、特徴量が検出されたデコード画像数が４個の場合、後述する単画レイアウトパターンが指定され、特徴量が検出されたデコード画像数が５個の場合、後述する多画レイアウトパターンが指定される。尚、特徴量が検出されたデコード画像は、特徴量が検出されたデコード音声に対応するデコード画像を含む。
【００２５】
このように、出力画像構成部２４は、連続表示時間や画像レイアウトパターンを指定する指定部の一例である。
【００２６】
画像合成部２５は、例えば、出力画像構成部２４により指定された画像レイアウトパターン（例えば各画像の配置、各画像の表示時間）に従って、複数のデコード画像を、表示装置３０により出力可能な形式に合成する。
【００２７】
表示先切替部２６は、表示先としての表示装置３０に表示されるデコード画像を切り替えるよう制御する。表示先切替部２６は、例えば、画像レイアウトパターンに基づいて、連続表示時間毎に、各デコード画像を表示装置３０に切り替えて表示させる。表示先切替部２６は、画像表示制御部の一例である。尚、どのデコード画像がどの表示装置３０に表示されるかは、上位のアプリケーション層により決定される。例えば、監視センタの表示装置に表示されるデコード画像と、店の入口等に設置される表示装置に表示されるデコード画像とは、異なるようにすることが可能である。
【００２８】
図２（Ｂ）は、表示装置３０の構成例を示すブロック図である。表示装置３０は、通信部３１と、表示部３２と、を備える。通信部３１は、各種データを受信し、例えば、画像切替装置２０からのデコード画像と、各デコード画像を切り替えて表示させるための制御信号と、を受信する。表示部３２は、各種データを表示する。表示部３２は、例えば、受信された制御信号に基づいて、画像切替装置２０により指定された連続表示時間毎に、各デコード画像を切り替えて表示する。
【００２９】
表示装置３０は、複数設けられてもよい。例えば、複数設けられた表示装置３０の１つが、メインモニタとして監視センタに配置され、他の表示装置３０が、サブモニタとして店頭や店内に配置されてもよい。各表示装置３０は、同じデコード画像を表示してもよいし、異なるデコード画像を表示してもよい。つまり、各表示装置３０は、同じ画像レイアウトパターンに従って表示してもよいし、異なる画像レイアウトパターンに従って表示してもよい。
【００３０】
このように、表示装置３０は、例えば、監視センタ、モニタルーム、警備室、レジ近傍、店頭、又は店の入り口に設置されてもよい。表示装置３０は、例えば、所定のエリアのセキュリティ向上を目的として設置されても、顧客への注意喚起や注目を目的として設置されても良い。
【００３１】
次に、画像切替装置２０の出力画像構成部２４の動作例について説明する。
図３は、画像切替装置２０の出力画像構成部２４の動作例を示すフローチャートである。
【００３２】
まず、特徴量検出部２３は、各撮像装置１０により得られた各画像（各デコード画像）又は各音声（各デコード音声）の特徴量を検出する。出力画像構成部２４は、検出された特徴量に基づいて、シーケンス表示（順次表示）されるカメラ画像（映像）を決定する（Ｓ１）。
【００３３】
シーケンス表示では、例えば、特徴が検出されたデコード画像は表示対象とされ、特徴が検出されなかったデコード画像は、表示対象とされないとしてもよい。シーケンス表示では、例えば、特徴量が多い程、デコード画像の連続表示時間が長く設定され、特徴量が少ない程デコード画像の連続表示時間が短く設定されてもよい。シーケンス表示は、画像レイアウトパターンに応じて実施される。
【００３４】
出力画像構成部２４は、例えば、特徴量として検出された人数に応じて、人数が多いデコード画像が、表示装置３０により重点的に表示されるよう、画像レイアウトパターンを決定してもよい。重点的に表示されるとは、例えば、連続表示時間が長く設定されることを含む（以下同様）。
【００３５】
出力画像構成部２４は、例えば、特徴量として検出された人物の動きの有無や移動量に応じて、動きがある又は移動量が多いデコード画像が、表示装置３０により重点的に表示されるよう、画像レイアウトパターンを決定してもよい。
【００３６】
出力画像構成部２４は、例えば、特徴量として検出された顔検出数に応じて、顔検出数が多いデコード画像が、表示装置３０により重点的に表示されるよう、画像レイアウトパターンを決定してもよい。
【００３７】
出力画像構成部２４は、例えば、顔照合によりブラックリストに登録された人物が検出された場合、ブラックリストに登録された人物が含まれるデコード画像が、表示装置３０により表示されるよう、画像レイアウトパターンを決定してもよい。
【００３８】
ブラックリストは、画像切替装置２０における図示しないメモリに保持されてもよい。ブラックリストは、例えば、外部のサーバに保持され、ネットワーク４０を介して出力画像構成部２４により参照されてもよい。
【００３９】
出力画像構成部２４は、例えば、顔照合によりＶＩＰリストに登録された人物が検出された場合、ＶＩＰが含まれるデコード画像が、表示装置３０により重点的に表示されるよう、画像レイアウトパターンを決定してもよい。
【００４０】
ＶＩＰリストは、画像切替装置２０における図示しないメモリに保持されてもよい。ＶＩＰリストは、例えば、外部のサーバに保持され、ネットワーク４０を介して出力画像構成部２４により参照されてもよい。
【００４１】
出力画像構成部２４は、例えば、特徴量として異常音が検出された場合、異常音に対応するデコード画像が、表示装置３０により重点的に表示されるよう、画像レイアウトパターンを決定してもよい。例えば、異常音のパターンが予め登録されてもよいし、所定の波形を有する音が予め登録され、検出された異常音と比較されてもよい。
【００４２】
出力画像構成部２４は、例えば、特徴量として所定の信号レベル以上の大きな音が検出された場合、この大きな音に対応するデコード画像が、表示装置３０により重点的に表示されるよう、画像レイアウトパターンを決定してもよい。
【００４３】
出力画像構成部２４は、例えば、特徴量として予め登録された所定のキーワードが検出された場合、このキーワードを含む音声に対応するデコード画像が、表示装置３０により重点的に表示されるよう、画像レイアウトパターンを決定してもよい。
【００４４】
続いて、出力画像構成部２４は、シーケンス表示されるカメラ画像数と最短表示時間との乗算結果が、シーケンス切替総時間Ｔよりも小さいか否かを判定する（Ｓ２）。シーケンス切替総時間Ｔとは、１つのシーケンス全体の表示に要する時間であり、画像切替周期の一例である。最短表示時間とは、シーケンス切替総時間内で１つのデコード画像を表示する時間である。シーケンス切替総時間Ｔ及び最短表示時間は、例えば、操作部（不図示）を介して、任意に設定される。
【００４５】
Ｓ２における乗算結果がシーケンス切替総時間Ｔよりも小さい場合、出力画像構成部２４は、画像レイアウトパターンとして、単画レイアウトパターンを指定する（Ｓ３）。単画レイアウトパターンは、シーケンス切替総時間Ｔの各時間帯において、デコード画像を１つ表示するレイアウトパターンである。また、出力画像構成部２４は、単画レイアウトパターンの場合、例えば、各デコード画像の特徴量及びシーケンス切替総時間Ｔに基づいて、連続表示時間を指定する。画像合成部２５は、単画レイアウトパターンにおいて、Ｓ１において選択された各デコード画像を組み込み、各画面におけるデコード画像の連続表示時間の情報を組み込み、表示装置３０により表示されるシーケンスを決定する。
【００４６】
一方、Ｓ２における乗算結果がシーケンス切替総時間Ｔ以上である場合、出力画像構成部２４は、画像レイアウトパターンとして、多画レイアウトパターンを指定する。合成するシーケンス表示を決定する（Ｓ４）。多画レイアウトパターンは、各時間帯において画像を複数表示するレイアウトパターンである。また、出力画像構成部２４は、多画レイアウトパターンの場合、例えば、１画面に表示されるデコード画像の数（例えば４個、８個）、１画面に表示されるデコード画像の特徴量の合計、及びシーケンス切替総時間Ｔに基づいて、連続表示時間を指定する。画像合成部２５は、多画レイアウトパターンにおいて、Ｓ１において選択された各デコード画像を組み込み、各画面におけるデコード画像の連続表示時間の情報を組み込み、表示装置３０により表示されるシーケンスを決定する。
【００４７】
図３に示した処理によれば、画像切替装置２０は、撮像装置１０により取得されたデータ（例えば画像データ、音声データ）の特徴量を基に、画像レイアウトパターンを決定できる。また、画像切替装置２０は、撮像装置１０により取得されたデータ（例えば画像データ、音声データ）の特徴量を基に、表示対象の各画像が連続して表示される時間を決定できる。従って、例えば、監視者により監視すべき画像を優先的に監視でき、監視精度を向上できる。また、例えば、来客者に対して特徴的な画像（例えば店舗内において人数の多いエリア）を優先的に画像表示でき、来客の多い店舗であることを来客者に印象づけることができる。従って、販売促進効率を向上でき、効率的なマーケティングを行うことができる。
【００４８】
次に、画像レイアウトパターンとシーケンス切替総時間Ｔとの関係について説明する。
【００４９】
図４（Ａ），（Ｂ）は、画像レイアウトパターンとシーケンス切替総時間Ｔとの関係の第１例を示す模式図である。図４（Ａ），（Ｂ）では、画像レイアウトパターンが単画レイアウトである場合を例示する。
【００５０】
図４（Ａ）では、縦方向に、各撮像装置１０からの画像が復号された画像（デコード画像Ａ〜Ｈ）と、デコード画像から検出される特徴量を列挙している。図４では、特徴量として画像に含まれる人数を例示している。
【００５１】
図４（Ｂ）では、図４（Ａ）の場合における、画像レイアウトパターンと、各デコード画像Ａ，Ｅ，Ｈの連続表示時間（表示区間ともいう）と、シーケンス切替総時間Ｔと、を示す。出力画像構成部２４は、例えば、各表示区間の長さを、検出された特徴量の多さ（例えば人数の多さ）に応じて（例えば比例して）、決定する。
【００５２】
図４（Ｂ）では、デコード画像Ａ，Ｅ，Ｈのレイアウトが表示区間より短くなっているが、実際には表示区間の始点から終点まで画像が表示される。シーケンス切替総時間Ｔは、各デコード画像Ａ，Ｅ，Ｈの表示区間の合計時間に相当する。
【００５３】
例えば、デコード画像Ａでは、特徴量としての画像に含まれる人数が１０人である。デコード画像Ｅでは、特徴量としての画像に含まれる人数が５人である。デコード画像Ｈでは、特徴量としての画像に含まれる人数が３人である。デコード画像Ｂ，Ｃ，Ｄ，Ｆ，Ｇでは、特徴量としての画像に含まれる人数が０人であるので、シーケンス表示における表示対象とされない。
【００５４】
図４では、出力画像構成部２４は、例えば、シーケンス切替総時間Ｔと各デコード画像Ａ，Ｅ，Ｈに含まれる特徴量とに基づいて、各デコード画像の表示区間の長さを導出する。図４では、例えば、デコード画像Ａの表示区間は、Ｔ×（１０／１８）（秒）、デコード画像Ｅの表示区間は、Ｔ×（５／１８）（秒）、デコード画像Ｈの表示区間は、Ｔ×（３／１８）（秒）となる。
【００５５】
図４（Ａ），（Ｂ）に示した画像レイアウトパターンのシーケンスによれば、特徴量が検出されたデコード画像が少ない場合、１つのデコード画像を１画面において表示でき、デコード画像が撮像されたエリアの状態を確認し易くなる。従って、監視者は監視エリアを容易に監視できる。
【００５６】
図５は、画像レイアウトパターンとシーケンス切替総時間Ｔとの関係の第２例を示す模式図である。図５では、画像レイアウトパターンが多画レイアウトである場合を例示する。図５では、１つの表示装置３０の表示部３２に、４つの画像が等しい大きさで表示される多画レイアウトを例示している。
【００５７】
図５では、合成画像１，２のレイアウトが表示区間より短くなっているが、実際には表示区間の始点から終点まで合成画像１，２が表示される。シーケンス切替総時間Ｔは、各合成画像１，２の表示区間の合計時間に相当する。
【００５８】
例えば、デコード画像Ａでは、特徴量としての画像に含まれる人数が２０人である。以下同様に、デコード画像Ｂ〜Ｈにおいて、複数の人数が含まれる。特徴量の多い順に４画像分を並べると、デコード画像Ａでは２０人、デコード画像Ｇでは１８人、デコード画像Ｅでは１６人、デコード画像Ｃでは１５人が検出される。デコード画像Ａ，Ｇ，Ｅ，Ｃは、表示装置３０の１画面において均等に４分割され、合成画像１として表示される。
【００５９】
デコード画像Ａ，Ｇ，Ｅ，Ｃの次に、特徴量の多い順に４画像分を並べると、デコード画像Ｂでは１０人、デコード画像Ｆでは９人、デコード画像Ｈでは９人、デコード画像Ｄでは７人が検出される。デコード画像Ｂ，Ｆ，Ｈ，Ｄは、表示装置３０の１画面において均等に４分割され、合成画像２として表示される。
【００６０】
合成画像１の方が合成画像２より特徴量が多いため、シーケンス切替総時間Ｔ内では、合成画像１の表示区間は、合成画像２の表示区間よりも長くなる。図５では、出力画像構成部２４は、例えば、シーケンス切替総時間Ｔと各合成画像１，２に含まれる特徴量とに基づいて、各合成画像の表示区間の長さを導出する。例えば、出力画像構成部２４は、シーケンス切替総時間Ｔに対する、合成画像に含まれる特徴量の合計の割合に基づいて、各合成画像の表示区間の長さを算出する。図５では、例えば、合成画像１の表示区間は、Ｔ×（６９／１０４）（秒）、合成画像２の表示区間は、Ｔ×（３５／１０４）（秒）となる。
【００６１】
図５に示した画像レイアウトパターンのシーケンスによれば、特徴量の多いエリアの画像を優先的に確認できる。また、複数のエリアの画像を同時に確認できるので、監視効率を向上できる。また、マーケティングの側面では、例えば、どのエリアに人気商品が存在するかを、他のエリアと比較しながら迅速に判断でき、来客者は効率的に店舗内を歩き回ることができる。
【００６２】
なお、図５の多画レイアウトにおける各デコード画像の配置位置は一例であり、データの特徴量に基づけば、各デコード画像の配置位置は他の位置でもよい。
【００６３】
図６（Ａ）は、画像レイアウトパターンとシーケンス切替総時間Ｔとの関係の第３例を示す模式図である。図６（Ａ）では、画像レイアウトパターンが多画レイアウトである場合を例示する。図６（Ａ）では、１つの表示装置３０の表示部３２に、１つの画像が他の各画像よりも大きく表示され、他の各画像が均等に小さく表示される多画レイアウトを例示している。
【００６４】
図６（Ａ）では、合成画像３のレイアウトが表示区間より短くなっているが、実際には表示区間の始点から終点まで合成画像３が表示される。シーケンス切替総時間Ｔは、合成画像３の連続表示時間に相当する。つまり、図６（Ａ）では、表示切替されないことを例示している。
【００６５】
例えば、デコード画像Ａでは、特徴量としての画像に含まれる人数が８人である。以下同様に、デコード画像Ｂ〜Ｈにおいて、複数の人数が含まれる。特徴量の多い順に、デコード画像Ｅでは２０人、デコード画像Ｂでは１４人、デコード画像Ｈでは１２人、デコード画像Ｆでは１１人、デコード画像Ｄでは１０人、デコード画像Ｇでは９人、デコード画像Ａでは８人、デコード画像Ｃでは７人、が検出される。
【００６６】
図６（Ａ）では、特徴量が最も多いデコード画像Ｅが最大の表示領域に表示され、その他のデコード画像Ａ〜Ｄ，Ｆ〜Ｈが、デコード画像Ｅの周囲（例えば一側面又は底面に隣接する表示領域）に配列される。
【００６７】
図６（Ａ）に示した画像レイアウトパターンのシーケンスによれば、特徴量の多いエリアの画像を優先的に確認できる。また、複数のエリアの画像を同時に確認できるので、監視効率を向上できる。また、マーケティングの側面では、例えば、どのエリアに人気商品が存在するかを、他のエリアと比較しながら迅速に判断でき、来客者は効率的に店舗内を歩き回ることができる。
【００６８】
尚、図６（Ａ）では、合成画像３のように、８つの表示領域を有する多画レイアウトを例示したが、図６（Ｂ）に示すように、４つの領域を有する合成画像４とされてもよい。合成画像４では、特徴量が最も多いデコード画像Ｅが最大の表示領域に表示され、その他のデコード画像Ｂ，Ｈ，Ｆが、デコード画像Ｅの周囲（例えば一側面に隣接する表示領域）に配列される。
【００６９】
尚、合成画像３のように８画面とするか、合成画像４のように４画面とするかは、例えば、予め設定されていても良いし、なるべく同時表示数が少ない画面が選択されてもよい。例えば、出力画像構成部２４は、特徴量があるデコード画像が３つある場合には、合成画像４の多画レイアウトを選択し、特徴量があるデコード画像が６つある場合には、合成画像３を選択してもよい。
【００７０】
なお、図６（Ａ），（Ｂ）の多画レイアウトにおける各デコード画像の配置位置は一例であり、データの特徴量に基づけば、各デコード画像の配置位置は他の位置でもよい。
【００７１】
出力画像構成部２４は、画像レイアウトパターンを、例えば、シーケンス切替総時間Ｔの開始前や終了後に定期的に判定してもよい。各デコード画像における特徴量の多さの順番が変化した場合、出力画像構成部２４は、例えば、特徴量の多さに応じて、画像レイアウトパターンにおける各表示領域に対する各デコード画像の割当位置を変更する。
【００７２】
図４〜図６では、特徴量が、デコード画像に含まれる人数であることを例示したが、その他の特徴量（例えば人の動き、移動量）でも良い。また、出力画像構成部２４は、例えば、複数の特徴量（例えば人数及び動きの有無）を用いて、画像レイアウトパターンを決定し、シーケンスを決定してもよい。また、各特徴量の重み付け（例えば移動量や顔の検出結果を、何人分と同等に扱うか）は、任意に設定され、保持されていてもよい。
【００７３】
画像切替装置２０によれば、事前にどのデコード画像をどの表示装置３０により表示させるか、どのタイミングに画像を切り替えるか、どのような画面レイアウトとするか、を事前に決定しなくてよく、事前に登録しなくてよい。
【００７４】
画像切替装置２０によれば、特徴量に基づいて画像を表示する表示装置３０が、例えば店頭、店の入口に設置されることにより、店頭、店の入り口が監視エリアであることを客等に認識させることができる。また、特徴量が多いエリアが優先的に表示されることで、例えば人数の多いエリアが優先的に表示される。これにより、来客数の多い店であること等を顧客に気づかせることが可能であり、マーケティング効率を向上できる。
【００７５】
また、特徴量の多い画像、つまり特徴量の多い撮像エリアを容易に特定できる。そのため、例えば、どの監視エリア内において特徴的な事象が発生しているかを認識でき、監視効率を向上できる。
【００７６】
このように、画像表示切替における画像の特徴量の活用効率を向上でき、監視効率やマーケティング効率を向上できる。
【００７７】
また、例えば特徴量があるデコード画像が選択されて表示されるので、画像合成部２５による合成負荷、表示装置３０による表示負荷を低減できる。従って、画像切替装置２０は、フレームレートを低下させずに、より自然に且つ滑らかにデコード画像を表示させることができる。
【００７８】
また、デコード画像から特徴量を検出する場合、撮像装置１０の収音機能を省略でき、撮像装置１０を簡素化できる。
【００７９】
また、デコード音声から特徴量を検出する場合、デコード画像における特徴的な変化が少ない場合でも、音声に関する特徴的な事象（例えば異常音、大きな音）が発生した場合に、この音の発生エリアを優先的に画像表示できる。従って、セキュリティを強化できる。
【００８０】
（第２の実施形態）
図７は、第２の実施形態における画像切替システム１Ｂの構成例を示すブロック図である。画像切替システム１Ｂは、撮像装置１０、画像切替装置２０Ｂ、及び表示装置３０を備える。図７の画像切替システム１Ｂにおいて、図１の画像切替システム１と同様の構成については、同一の符号を付し、説明を省略又は簡略化する。
【００８１】
図７の画像切替装置２０Ｂは、図１の画像切替装置２０と比較すると、画像補正部２７を備える。画像補正部２７は、各々、デコーダ２２の後段に設けられ、入力されたデータに対して画像補正し、補正されたデコード画像を画像合成部２５及び特徴量検出部２３に送る。画像補正部２７は、第１の画像補正部の一例である。
【００８２】
本実施形態では、特徴量が所定の顔の有無（顔照合）であることを例示する。画像補正部２７は、例えば、特徴量検出部２３により検出された特徴量に応じて、デコード画像を補正する。つまり、画像補正部２７は、特徴量検出部２３により特徴量が検出された場合、特徴量検出部２３からフィードバックによる画像補正の指示（フィルタ処理の指示）を受ける。画像補正部２７は、例えば、デコード画像から所定の顔が検出された場合、デコード画像の解像度を低下させてデコード画像をぼかし、又は、デコード画像の解像度を上げてデコード画像を鮮明にする。
【００８３】
次に、画像補正部２７の動作例について説明する。
【００８４】
図８（Ａ）は、画像補正部２７の第１動作例を示すフローチャートである。図８（Ａ）は、ＶＩＰリストに登録された人物が検出された場合の動作例を示す。
【００８５】
特徴量検出部２３は、例えば、デコード画像に含まれる人物の顔と、予めＶＩＰリストに登録されている人物の顔と、を照合し、登録されている顔であるか否かを判定する（Ｓ１０）。
【００８６】
照合された人物の顔がＶＩＰリストに登録された人物の顔である場合（Ｓ１０のＹｅｓ）、特徴量検出部２３は、画像補正部２７にフィルタ処理を指示する。画像補正部２７は、例えば、フィルタ処理において、デコード画像の解像度を低下させる（Ｓ１１）。解像度を低下させる方法は、例えば、表示画素数を低下させる方法、ＬＰＦ（Ｌｏｗ  ｐａｓｓ  ｆｉｌｔｅｒ）によりフィルタ処理をする方法、を含む。
【００８７】
照合された人物の顔がＶＩＰリストに登録された人物の顔でない場合（Ｓ１０のＮｏ）、画像補正部２７は、デコード画像に対して画像補正せず、画像合成部２５及び特徴量検出部２３へ送る。
【００８８】
図８（Ａ）に示した処理によれば、ＶＩＰリストに登録された人物の判別を困難とし、プライバシーを保護できる。
【００８９】
図８（Ｂ）は、画像補正部２７の第２動作例を示すフローチャートである。図８（Ｂ）は、ブラックリストに登録された人物が検出された場合の動作例を示す。
【００９０】
特徴量検出部２３は、例えば、デコード画像に含まれる人物の顔と、予めブラックリストに登録されている人物の顔と、を照合し、登録されている顔であるか否かを判定する（Ｓ１５）。
【００９１】
照合された人物の顔がブラックリストに登録された人物の顔である場合（Ｓ１５のＹｅｓ）、特徴量検出部２３は、画像補正部２７にフィルタ処理を指示する。画像補正部２７は、例えば、フィルタ処理において、デコード画像の解像度を上げる（Ｓ１６）。解像度を上げる方法は、例えば、表示画素数を増やす方法、高解像度フィルタ処理をする方法、を含む。
【００９２】
照合された人物の顔がブラックリストに登録された人物の顔でない場合（Ｓ１５のＮｏ）、画像補正部２７は、デコード画像に対して画像補正せず、画像合成部２５及び特徴量検出部２３へ送る。
【００９３】
図８（Ｂ）に示した処理によれば、ブラックリストに登録された人物を容易に判別でき、セキュリティを確保できる。
【００９４】
本実施形態では、人物の顔に応じて、デコード画像の解像度を変更することを例示したが、これに限らない。例えば、出力画像構成部２４は、ブラックリストに登録された人物を含むデコード画像を長く表示するよう、デコード画像の連続表示時間を調整してもよい。例えば、出力画像構成部２４は、ＶＩＰリストに登録された人物を含むデコード画像を短く表示するよう、デコード画像の連続表示時間を調整してもよい。
【００９５】
本実施形態では、ブラックリストに登録された人物の顔の場合に、高解像度フィルタの処理が行われることを例示したが、これに限られない。例えば、画像補正部２７は、高画質フィルタを用いた画像補正が有効に設定されていることに基づいて、高解像度フィルタの処理（例えば図８（Ｂ）のＳ１６の処理に相当）を行っても良い。
【００９６】
画像切替装置２０Ｂによれば、特徴量検出部２３により顔照合され、画像補正部２７により画像補正されることより、セキュリティ向上とプライバシー保護とを両立できる。
【００９７】
（第３の実施形態）
図９は、第３の実施形態における画像切替システム１Ｃの構成例を示すブロック図である。画像切替システム１Ｃは、撮像装置１０、全方位カメラ１０１、画像切替装置２０Ｃ、及び表示装置３０を備える。図９の画像切替システム１Ｃにおいて、画像切替システム１，１Ｂと同様の構成については、同一の符号を付し、説明を省略又は簡略化する。全方位カメラ１０１以外の撮像装置１０が、設けられなくてもよい。
【００９８】
図９の画像切替装置２０Ｃは、画像切替装置２０，２０Ｂと比較すると、画像分割部２８と画像補正部２７１とを含む。画像補正部２７は、設けられなくてもよい。
【００９９】
全方位カメラ１０１は、１台以上設けられ、撮像レンズとして広角レンズの一種である魚眼レンズを用いており、３６０度の全方位を撮像可能である。全方位カメラ１０１は、撮像装置１０の一例である。全方位カメラ１０１は、複数設けられてもよい。
【０１００】
デコーダ２２は、全方位カメラ１０１により撮像された画像を復号し、デコード画像（魚眼デコード画像）を導出する。画像分割部２８は、魚眼デコード画像を複数のデコード画像（例えば９０度ずつ４分割された画像）に分割する。画像補正部２７１は、分割されたデコード画像に対して、魚眼レンズによる撮像に伴う歪に対して、歪補正する。画像補正部２７１は、第２の画像補正部の一例である。画像補正部２７１は、画像補正部２７の機能を有してもよい。画像補正部２７１は、複数設けられてもよい。
【０１０１】
次に、画像分割部２８及び画像補正部２７１の動作例について説明する。
図１０は、画像分割部２８及び画像補正部２７１の動作例を示すフローチャートである。
【０１０２】
画像分割部２８は、デコーダ２２により復号されたデコード画像が、魚眼レンズを用いて撮像された魚眼デコード画像であるか否かを判定する（Ｓ２０）。魚眼デコード画像であるか否かは、例えば、画像の送信元の撮像装置１０（全方位カメラ１０１）の識別情報により判別される。
【０１０３】
魚眼ストリームである場合（Ｓ２０のＹｅｓ）、画像分割部２８は、魚眼デコード画像を複数（例えば４つ）のデコード画像に分割する。画像補正部２７１は、分割されたデコード画像に対して、例えば、魚眼レンズの歪曲収差に応じて歪補正をする。
【０１０４】
一方、魚眼デコード画像でない場合（Ｓ２０のＮｏ）、画像分割部２８及び画像補正部２７１は、デコード画像を分割せず、画像処理せずに、画像合成部２５及び特徴量検出部２３へ送る。
【０１０５】
次に、画像レイアウトパターンとシーケンス切替総時間Ｔとの関係について説明する。
図１１（Ａ），（Ｂ）は、本実施形態における画像レイアウトパターンとシーケンス切替総時間Ｔとの関係の一例を示す模式図である。図１１（Ａ），（Ｂ）では、特徴量が、デコード画像に含まれる人数であることを例示する。図１１（Ａ）は、デコード画像又は魚眼デコード画像から画像の特徴量が検出されるまでの流れを例示する。図１１（Ｂ）は、本実施形態のシーケンスの一周期分を例示する。
【０１０６】
デコード画像Ａ、Ｂ、Ｃは、通常の（第１，第２の実施形態と同様の）撮像装置１０により撮像されてデコードされた画像である。魚眼デコード画像は、魚眼レンズを用いた全方位カメラ１０１により撮像されてデコードされた画像である。魚眼デコード画像は、画像分割部２８により例えば４分割され、画像補正部２７１により歪補正され、歪補正された補正画像Ｄ，Ｅ，Ｆ，Ｇが生成される。
【０１０７】
本実施形態では、デコード画像Ａ、Ｂ、Ｃ，及び、補正画像Ｄ，Ｅ，Ｆ，Ｇの特徴量の多さが比較される。図１１（Ａ）では、特徴量としての人数が多い順に、デコード画像Ａの特徴量が１０人、補正画像Ｅの特徴量が５人、補正画像Ｇの特徴量が３人である。そのため、出力画像構成部２４は、シーケンス切替総時間Ｔ内で、各表示区間の長さとして、デコード画像Ａの表示区間を最も長く、補正画像Ｅの表示区間を２番目に長く、補正画像Ｇの表示区間を最も短く設定する。
【０１０８】
尚、図１１（Ａ），（Ｂ）では、（シーケンス表示されるカメラ画像数×最短表示時間）＜シーケンス切替総時間Ｔ、であるため、出力画像構成部２４は、画像レイアウトパターンとして単画レイアウトを指定する。
【０１０９】
例えば、全方位カメラ１０１が、監視対象のエリアの中心に設置されることで、監視者は、１つのカメラにより、監視対象のエリアが分割された各エリア内の人の流れ等をモニタリングできる。この場合、撮像装置１０を４つ容易する必要がなく、低コスト化できる。
【０１１０】
画像切替装置２０Ｃによれば、魚眼レンズを含む全方位カメラ１０１により画像が撮像された場合でも、画像の特徴量に応じて、画像レイアウトパターンや各画像の連続表示時間を導出できる。従って、例えば、１つの全方位カメラ１０１を備え、他の撮像装置１０を備えない場合でも、全方位画像を分割して、各エリアにおける特徴的な事象を観察できる。また、全方位画像が分割されたデコード画像に対して歪補正されることで、特徴量の検出精度を向上できる。従って、全方位カメラ１０１を用いる場合でも、画像表示切替における画像の特徴の活用効率を向上できる。
【０１１１】
尚、図９において例示した画像分割部２８及び画像補正部２７１の配置位置は、任意であり、図９に限定されない。
【０１１２】
（第４の実施形態）
図１２は、第４の実施形態における画像切替システム１Ｄの構成例を示すブロック図である。画像切替システム１Ｄは、撮像装置１０、全方位カメラ１０１Ｄ、画像切替装置２０Ｄ、及び表示装置３０を備える。図１２の画像切替システム１Ｄにおいて、図９の画像切替システム１Ｃと同様の構成については、同一の符号を付し、説明を省略又は簡略化する。全方位カメラ１０１Ｄ以外の撮像装置１０が、設けられなくてもよい。
【０１１３】
図１２の画像切替装置２０Ｄは、画像切替装置２０，２０Ｂ，２０Ｃと比較すると、画像補正部２７１Ｄ及び画像分割部２８Ｄを含む。画像補正部２７１Ｄは、後述する全方位画像モードの場合、画像補正部２７１と同様の動作を行う。画像分割部２８は、後述する全方位画像モードの場合、画像分割部２８Ｄと同様の動作を行う。画像補正部２７は、設けられなくてもよい。
【０１１４】
第３の実施形態では、全方位カメラ１０１が、３６０度の全方位画像を取得したが、第４の実施形態では、全方位カメラ１０１Ｄは、全方位画像の他に、ダブルパノラマ（ＤＰ：Ｄｏｕｂｌｅ  Ｐａｎｏｒａｍａ）画像を撮像可能である。全方位カメラ１０１Ｄが全方位画像を撮像するかＤＰ画像を撮像するかは、例えば、ユーザによる操作部（不図示）を介した入力操作、画像切替装置２０からの画像切替指示に応じて決定される。全方位カメラ１０１Ｄは、複数設けられてもよい。また、画像切替システム１Ｄにおいて、全方位カメラ１０１Ｄと第３の実施形態の全方位カメラ１０１が混在してもよい。
【０１１５】
撮像形式指示部２９は、デコード画像又はデコード音声に対して検出された特徴量が所定基準を満たす場合、画像切替指示を全方位カメラ１０１Ｄへ送信する。画像切替指示は、例えば、インタフェース２１、ネットワーク４０を介して撮像形式指示部２９から全方位カメラ１０１Ｄへ送信される。画像切替指示は、全方位カメラ１０１Ｄによる撮像形式を切り替えるための指示信号である。撮像形式は、例えば、全方位画像を撮像するための全方位画像モード、ＤＰ画像を撮像するためのＤＰ画像モードを含む。
【０１１６】
撮像形式指示部２９は、例えば、特徴量検出部２３により検出された魚眼デコード画像に含まれる人数が、所定人数（例えば１０人）未満から所定人数以上へ変化した場合、画像切替指示を全方位カメラ１０１へ送信する。この場合、画像切替指示は、全方位画像モードからＤＰ画像モードへ撮像形式を変更するための指示を含む。これにより、より広いエリアを含む画像により、人物等を確認できる。
【０１１７】
撮像形式指示部２９は、例えば、特徴量検出部２３により検出されたＤＰデコード画像に含まれる人数が、所定人数以上から所定人数未満へ変化した場合、画像切替指示を全方位カメラ１０１へ送信する。この場合、画像切替指示は、ＤＰ画像モードから全方位画像モードへ撮像形式を変更するための指示を含む。これにより、より細分化されたエリア（例えば４分割されたエリア）を含む画像により、人物等を確認できる。
【０１１８】
ＤＰ画像モードにおいて、デコーダ２２がＤＰ画像を取得した場合、画像分割部２８及び画像補正部２７１は、ＤＰデコード画像を分割せず、画像処理せずに、画像合成部２５及び特徴量検出部２３へ送る。
【０１１９】
全方位カメラ１０１Ｄは、ＤＰ画像に対する歪補正機能を有する。例えば、全方位カメラ１０１Ｄは、ＤＰ画像を撮像する場合、全方位カメラ１０１Ｄ内において歪補正し、画像切替装置２０Ｄへ送信する。
【０１２０】
次に、画像レイアウトパターンとシーケンス切替総時間Ｔとの関係について説明する。
図１３（Ａ），（Ｂ）は、本実施形態における画像レイアウトパターンとシーケンス切替総時間Ｔとの関係の一例を示す模式図である。図１３（Ａ），（Ｂ）では、特徴量が、画像に含まれる人数であることを例示する。図１３（Ａ）は、デコード画像、魚眼デコード画像、又はＤＰデコード画像から画像の特徴量が検出されるまでの流れを例示する。図１１（Ｂ）は、本実施形態のシーケンスの一周期分を例示する。
【０１２１】
デコード画像Ａ、Ｂ、Ｃは、通常の（第１，第２の実施形態と同様の）撮像装置１０により撮像されてデコードされた画像である。ＤＰデコード画像は、全方位カメラ１０１ＤによりＤＰ画像モードにおいて撮像されたＤＰ画像である。ＤＰ画像は、全方位カメラ１０１Ｄにより全方位の画像が２分割された画像を含む。
【０１２２】
図１３（Ａ）では、特徴量としての人数が多い順に、ＤＰデコード画像Ｄの特徴量が１５人、デコード画像Ａの特徴量が８人である。そのため、出力画像構成部２４は、シーケンス切替総時間Ｔ内で、各表示区間の長さとして、ＤＰデコード画像Ｄの表示区間を長く、デコード画像Ａの表示区間を短く設定する。尚、ＤＰデコード画像の特徴量は、２分割された画像（図１３（Ａ）では上下に並んだ画像）の双方の特徴量の合計となる。
【０１２３】
尚、図１３（Ａ），（Ｂ）では、（シーケンス表示されるカメラ画像数×最短表示時間）＜シーケンス切替総時間Ｔ、であるため、出力画像構成部２４は、画像レイアウトパターンとして単画レイアウトを指定する。
【０１２４】
尚、図１３（Ａ），（Ｂ）では、デコーダ画像Ｄが単画レイアウトとして記載されているが、表示装置３０に表示される１つの画面に、１８０度ずつの２つの画像が表示されることを意図している。
【０１２５】
尚、撮像形式指示部２９は、人数以外のデータの特徴量に応じて、画像切替指示を全方位カメラ１０１Ｄへ送信してもよい。例えば、撮像形式指示部２９は、特徴量検出部２３によりＶＩＰリスト又はブラックリストに登録された人物又は人物の顔がデコード画像から検出された場合に、画像切替指示を全方位カメラ１０１Ｄへ送信してもよい。
【０１２６】
画像切替装置２０Ｄによれば、例えば、特徴量の変動によって全方位カメラ１０１Ｄの撮像形式を変更することにより、所定のエリアの人の流れ又は動きの確認を容易化でき、マーケティング効率や監視効率を向上できる。
【０１２７】
上記の実施形態における画像切替装置、画像切替システム、及び画像切替方法は、例えば、店舗、ホテル、オフィス、又は公共施設において用いられる。また、当該画像切替装置、画像切替システム、及び画像切替方法は、例えば、マーケティング、監視、又は防犯の効率向上を図る用途に適用される。
【０１２８】
画像切替装置は、例えば監視レコーダを含む。画像切替システムは、例えば監視システムを含む。
【０１２９】
尚、本発明は、上述した実施形態に限定されるものではなく、適宜、変形、改良、等が可能である。その他、上述した実施形態における各構成要素の材質、形状、寸法、数値、形態、数、配置箇所、等は本発明を達成できるものであれば任意であり、限定されない。
【０１３０】
上記実施形態では、撮像装置から符号化された画像データを受信することを例示したが、アナログの映像信号を受信してもよい。この場合、デコーダ２２は不要となる。
【０１３１】
（本発明の一態様の概要）
本発明の一態様の画像切替装置は、撮像装置により撮像された画像を含むデータを取得するデータ取得部と、前記取得されたデータの特徴量を検出する特徴量検出部と、前記データの特徴量に基づいて、特徴量が検出されたデータに対応する画像が表示装置に表示される場合の連続表示時間を指定する指定部と、前記指定された連続表示時間毎に、各画像を前記表示装置に切り替えて表示させる画像表示制御部と、を備える。
【０１３２】
この構成によれば、例えば、特徴量の多いエリアを容易に特定できる。特徴量が多いエリアが優先的に表示されることで、例えば人数の多いエリアが優先的に表示される。これにより、来客数の多い店であること等を来客者に認識させることが可能であり、マーケティング効率を向上できる。また、どのエリア内において特徴的な事象が発生しているかを認識できるので、監視効率を向上できる。このように、画像表示切替における画像の特徴量の活用効率を向上できる。
【０１３３】
本発明の一態様の画像切替装置は、前記指定部が、前記特徴量検出部により特徴量が検出されたデータに対応する画像の数と、特徴量が検出されたデータに対応する画像が表示される最短表示時間と、画像が切り替えて表示される周期を示す画像切替周期と、に基づいて、前記表示装置に対する各画像の表示位置及び各画像の前記連続表示時間を指定し、前記画像表示制御部は、前記指定された各レコード画像の前記表示位置及び前記連続表示時間に基づいて、各画像を前記表示装置に切り替えて表示させる、画像切替装置。
【０１３４】
この構成によれば、画像レイアウトパターン（例えば画像の表示画面に対する配置位置、各画像の連続表示時間）を指定でき、ユーザ（例えば監視センタの監視者、店舗への来客者）は容易に注目すべき画像やエリアを認識できる。
【０１３５】
本発明の一態様の画像切替装置は、前記データの特徴量に基づいて、前記画像を補正する第１の画像補正部を備え、前記画像表示制御部は、前記補正された画像を前記表示装置に表示させる。
【０１３６】
この構成によれば、例えば、特徴量の検出として、顔照合によりＶＩＰリストに登録された人物又は人物の顔が検出された場合、検出された人物の顔を判別し難くすることで、当該人物のプライバシーを保護できる。また、例えば、特徴量の検出として、顔照合によりブラックリストに登録された人物又は人物の顔が検出された場合、検出された人物の顔を判別し易くすることで、当該人物が存在するエリアのセキュリティを強化できる。
【０１３７】
本発明の一態様の画像切替装置は、前記データ取得部が、複数の撮像装置により撮像された複数の画像を含むデータを取得する。
【０１３８】
この構成によれば、例えば様々なエリアに撮像装置が設置されることで、各エリアの詳細なデータを取得でき、マーケティング効率及び監視効率を向上できる。
【０１３９】
本発明の一態様の画像切替装置は、画像を分割する画像分割部を備え、前記データ取得部が、前記撮像装置により撮像された全方位画像を含むデータを取得し、前記画像分割部が、前記全方位画像を分割し、前記特徴量検出部が、分割された画像毎に特徴量を検出する。
【０１４０】
この構成によれば、例えば、撮像装置の設置台数を削減した場合でも、複数のエリアの画像を得ることでき、マーケティング効率や監視効率の低下を抑制できる。
【０１４１】
本発明の一態様の画像切替装置は、前記分割された複数の画像に対して歪補正する第２の画像補正部を備え、前記特徴量検出部が、前記歪補正された画像の特徴量を検出する。
【０１４２】
この構成によれば、画像から特徴量が検出される場合、特徴量の検出精度を向上できる。従って、全方位画像を撮像する撮像装置を用いる場合でも、マーケティング効率や監視効率を向上でき、画像表示切替における画像の特徴の活用効率を向上できる。
【０１４３】
本発明の一態様の画像切替装置は、前記データの特徴量に応じて、前記画像に対応する画像を撮像した撮像装置に対して、前記撮像装置による撮像形式を変更するよう指示する撮像形式指示部を備える。
【０１４４】
この構成によれば、例えば、特徴量の変動によって撮像形式を変更させることができ、所定のエリアの人の流れ又は動きの確認を容易化でき、マーケティング効率や監視効率を向上できる。
【０１４５】
本発明の一態様の画像切替装置は、前記データの特徴量が、前記画像における人数、動きの有無、移動量、顔検出数、又は所定の顔の有無を含む。
【０１４６】
この構成によれば、撮像装置により撮像された画像を用いて、特徴量を検出できる。また、撮像装置による収音機能を省略でき、撮像装置を簡素化できる。
【０１４７】
本発明の一態様の画像切替装置は、前記データ取得部が、前記撮像装置により収音された音声データを含むデータを取得し、前記データの特徴量が、前記音声データに含まれる異常音の有無、所定のキーワードの有無、又は所定の信号レベル以上の音の有無、を含む。
【０１４８】
この構成によれば、画像における特徴的な変化が少ない場合でも、音声に関する特徴的な事象が発生した場合に、音声に関する特徴的な事象が発生したエリアを優先的に画像表示でき、セキュリティを強化できる。
【０１４９】
本発明の一態様の画像切替システムは、撮像装置と、表示装置と、画像切替装置と、がネットワークを介して接続された画像切替システムであって、前記撮像装置は、画像を撮像する撮像部と、前記撮像された画像を含むデータを送信する第１の通信部と、を備え、画像切替装置は、前記撮像装置からのデータを受信する第２の通信部と、前記受信されたデータの特徴量を検出する特徴量検出部と、前記データの特徴量に基づいて、特徴量が検出されたデータに対応する画像が前記表示装置に表示される場合の連続表示時間を指定する指定部と、前記指定された連続表示時間毎に、各画像を前記表示装置に切り替えて表示させる画像表示制御部と、を備え、前記第２の通信部は、前記指定された連続表示時間毎に各画像を前記表示装置に切り替えて表示させるための制御データと、前記画像と、を前記表示装置へ送信し、前記表示装置は、前記制御データ及び前記画像を受信する第３の通信部と、前記制御データに基づいて、前記指定された連続表示時間毎に、各画像を切り替えて表示する表示部と、を備える。
【０１５０】
この構成によれば、例えば、特徴量の多いエリアを容易に特定できる。特徴量が多いエリアが優先的に表示されることで、例えば人数の多いエリアが優先的に表示される。これにより、来客数の多い店であること等を来客者に認識させることが可能であり、マーケティング効率を向上できる。また、どのエリア内において特徴的な事象が発生しているかを認識できるので、監視効率を向上できる。このように、画像表示切替における画像の特徴量の活用効率を向上できる。
【０１５１】
本発明の一態様の画像切替方法は、画像切替装置における画像切替方法であって、撮像装置により撮像された画像を含むデータを取得するステップと、前記取得されたデータの特徴量を検出するステップと、前記データの特徴量に基づいて、特徴量が検出されたデータに対応する画像が表示装置に表示される場合の連続表示時間を指定するステップと前記指定された連続表示時間毎に、各画像を前記表示装置に切り替えて表示させるステップと、を備える。
【０１５２】
この方法によれば、例えば、特徴量の多いエリアを容易に特定できる。特徴量が多いエリアが優先的に表示されることで、例えば人数の多いエリアが優先的に表示される。これにより、来客数の多い店であること等を来客者に認識させることが可能であり、マーケティング効率を向上できる。また、どのエリア内において特徴的な事象が発生しているかを認識できるので、監視効率を向上できる。このように、画像表示切替における画像の特徴量の活用効率を向上できる。
【産業上の利用可能性】
【０１５３】
本発明は、画像表示切替における画像の特徴の活用効率を向上できる画像切替装置、画像切替システム、及び画像切替方法等に有用である。
【符号の説明】
【０１５４】
１，１Ｂ，１Ｃ，１Ｄ  画像切替システム
１０  撮像装置
１１  撮像部
１２  通信部
２０，２０Ｂ，２０Ｃ，２０Ｄ  画像切替装置
２１  インタフェース
２２  デコーダ
２３  特徴量検出部
２４  出力画像構成部
２５  画像構成部
２６  表示先切替部
２７  画像補正部
２７１，２７１Ｄ  画像補正部
２８，２８Ｄ  画像分割部
２９  撮像形式指示部
３０  表示装置
３１  通信部
３２  表示部
４０  ネットワーク
【図１】
2015222917.tif 000003
【図２】
2015222917.tif 000004
【図３】
2015222917.tif 000005
【図４】
2015222917.tif 000006
【図５】
2015222917.tif 000007
【図６】
2015222917.tif 000008
【図７】
2015222917.tif 000009
【図８】
2015222917.tif 000010
【図９】
2015222917.tif 000011
【図１０】
2015222917.tif 000012
【図１１】
2015222917.tif 000013
【図１２】
2015222917.tif 000014
【図１３】
2015222917.tif 000015