(57)【要約】【課題】  効率的な処理で、複数の表示装置に任意のレイアウトの映像表示が可能とする。【解決手段】  本発明はメディア処理装置に関する。そして本発明のメディア処理装置は、入力された複数のメディア信号を合成するメディア信号合成手段と、複数のメディア信号送信装置から送信されたメディア信号をメディア信号合成手段に入力するメディア信号入力手段と、合成メディア信号を複数のメディア信号受信装置に送信するメディア信号送信手段と、メディア信号の送信元情報と、メディア信号の合成処理条件情報と、メディア信号の送信先情報とを含むメディア信号処理条件情報の入力受付けを行う情報入力受付手段と、メディア信号処理条件情報に従った処理を行うように、メディア信号合成手段、メディア信号入力手段、及びメディア信号送信手段に指示を行うメディア信号処理指示手段とを有することを特徴とする。【選択図】      図１
2019041328.tif 000002
【特許請求の範囲】
【請求項１】
入力された複数のメディア信号を合成して合成メディア信号を生成する信号合成処理を行うメディア信号合成手段と、
メディア信号を送信するメディア信号送信処理部を有する複数のメディア信号送信装置から送信されたメディア信号を前記メディア信号合成手段に入力するメディア信号入力手段と、
前記メディア信号合成手段が生成した合成メディア信号を、メディア信号を受信するメディア信号受信処理部を有する複数のメディア信号受信装置に送信するメディア信号送信手段と、
前記メディア信号入力手段から前記メディア信号合成手段に供給させるメディア信号の送信元のメディア信号送信装置に係る送信元情報と、前記メディア信号合成手段が行うメディア信号合成処理の条件を記述した合成処理条件情報と、前記メディア信号送信手段に設定する送信先のメディア信号受信装置に係る送信先情報とを含むメディア信号処理条件情報の入力受付けを行う情報入力受付手段と、
前記情報入力受付手段が入力受付けしたメディア信号処理条件情報に従った処理を行うように、前記メディア信号合成手段、前記メディア信号入力手段、及び前記メディア信号送信手段に指示を行うメディア信号処理指示手段と
を有することを特徴とするメディア処理装置。
【請求項２】
前記合成処理条件情報には、合成メディア信号を構成する映像信号の画面におけるフレーム構成を記述したフレーム構成情報と、前記フレーム構成情報で記述された各フレームに適用するメディア信号の送信元となる前記メディア信号送信装置に係る情報を記述した送信元情報とが含まれていることを特徴とする請求項１に記載のメディア処理装置。
【請求項３】
前記メディア信号合成手段は、前記合成メディア信号の画面に、供給された各メディア信号を構成する映像信号の映像を、前記合成処理条件情報を従ったフレームに配置することを特徴とする請求項２に記載のメディア処理装置。
【請求項４】
前記メディア信号合成手段は、供給されたメディア信号の内容に応じて、前記合成メディア信号の内容を変更する画面における映像の表示内容を変更する表示内容変更処理を行うことを特徴とする請求項３に記載のメディア処理装置。
【請求項５】
前記メディア信号合成手段は、供給されたメディア信号のうち所定のイベントを検知したメディア信号があった場合、前記合成メディア信号の画面上で、当該メディア信号に対応するフレームを強調した表示に変更することを特徴とする請求項４に記載のメディア処理装置。
【請求項６】
前記メディア信号合成手段は、供給されたメディア信号を構成する映像信号に、所定の人物以外の顔画像が映っている場合に、前記所定のイベントを検知することを特徴とする請求項５に記載のメディア処理装置。
【請求項７】
前記メディア信号合成手段は、供給されたメディア信号のうち、音声信号に所定の人物以外の人物の音声が含まれている場合に、前記所定のイベントを検知することを特徴とする請求項５又は６に記載のメディア処理装置。
【請求項８】
コンピュータを、
入力された複数のメディア信号を合成して合成メディア信号を生成する信号合成処理を行うメディア信号合成手段と、
メディア信号を送信するメディア信号送信処理部を有する複数のメディア信号送信装置から送信されたメディア信号を前記メディア信号合成手段に入力するメディア信号入力手段と、
前記メディア信号合成手段が生成した合成メディア信号を、メディア信号を受信するメディア信号受信処理部を有する複数のメディア信号受信装置に送信するメディア信号送信手段と、
前記メディア信号入力手段から前記メディア信号合成手段に供給させるメディア信号の送信元のメディア信号送信装置に係る送信元情報と、前記メディア信号合成手段が行うメディア信号合成処理の条件を記述した合成処理条件情報と、前記メディア信号送信手段に設定する送信先のメディア信号受信装置に係る送信先情報とを含むメディア信号処理条件情報の入力受付けを行う情報入力受付手段と、
前記情報入力受付手段が入力受付けしたメディア信号処理条件情報に従った処理を行うように、前記メディア信号合成手段、前記メディア信号入力手段、及び前記メディア信号送信手段に指示を行うメディア信号処理指示手段と
して機能させることを特徴とするメディア処理プログラム。
【請求項９】
メディア処理装置が行うメディア処理方法において、
前記メディア処理装置は、メディア信号合成手段、メディア信号入力手段、メディア信号送信手段、情報入力受付手段、及びメディア信号処理指示手段を備え、
前記メディア信号合成手段は、入力された複数のメディア信号を合成して合成メディア信号を生成する信号合成処理を行い、
前記メディア信号入力手段は、メディア信号を送信するメディア信号送信処理部を有する複数のメディア信号送信装置から送信されたメディア信号を前記メディア信号合成手段に入力し、
前記メディア信号送信手段は、前記メディア信号合成手段が生成した合成メディア信号を、メディア信号を受信するメディア信号受信処理部を有する複数のメディア信号受信装置に送信し、
前記情報入力受付手段は、前記メディア信号入力手段から前記メディア信号合成手段に供給させるメディア信号の送信元のメディア信号送信装置に係る送信元情報と、前記メディア信号合成手段が行うメディア信号合成処理の条件を記述した合成処理条件情報と、前記メディア信号送信手段に設定する送信先のメディア信号受信装置に係る送信先情報とを含むメディア信号処理条件情報の入力受付けを行い、
前記メディア信号処理指示手段は、前記情報入力受付手段が入力受付けしたメディア信号処理条件情報に従った処理を行うように、前記メディア信号合成手段、前記メディア信号入力手段、及び前記メディア信号送信手段に指示を行う
ことを特徴とするメディア処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、メディア処理装置、プログラム及び方法に関し、例えば、ＩＰネットワークで接続された監視カメラから届く映像・音声データをサーバ上で加工し複数の表示装置に映像を表示させるシステムに適用し得る。
【背景技術】
【０００２】
従来の監視カメラを用いた監視システムでは、監視カメラが送信したデータをそのままディスプレイを備える表示装置に送信し、表示装置側で設定されたレイアウト（フレーム構成）で表示する（特許文献１参照）。
【０００３】
また、従来の監視システムでは、１つのカメラ映像を１つの表示装置に表示する場合と複数のカメラ映像を１つの表示装置に表示する場合があるが、後者の場合においても複数のカメラ映像をどのようにレイアウトするかはあらかじめ表示装置側で設定されており、決められたいくつかのパターンから選択するのが一般的である。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２０１４−１９２７１３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、従来の監視システムでは、ある表示装置に表示されている監視カメラ映像を他の複数の表示装置に表示したり、複数の表示装置でそれぞれ異なる映像を表示するシステムは存在するが、レイアウトの自由度が低く、同時に表示可能なレイアウト数などに制限が存在する等の問題がある。
【０００６】
上述のような問題に鑑みて、効率的な処理で、複数の表示装置に任意のレイアウトの映像表示が可能なメディア処理装置、プログラム及び方法が望まれている。
【課題を解決するための手段】
【０００７】
第１の本発明のメディア処理装置は、（１）入力された複数のメディア信号を合成して合成メディア信号を生成する信号合成処理を行うメディア信号合成手段と、（２）メディア信号を送信するメディア信号送信処理部を有する複数のメディア信号送信装置から送信されたメディア信号を前記メディア信号合成手段に入力するメディア信号入力手段と、（３）前記メディア信号合成手段が生成した合成メディア信号を、メディア信号を受信するメディア信号受信処理部を有する複数のメディア信号受信装置に送信するメディア信号送信手段と、（４）前記メディア信号入力手段から前記メディア信号合成手段に供給させるメディア信号の送信元のメディア信号送信装置に係る送信元情報と、前記メディア信号合成手段が行うメディア信号合成処理の条件を記述した合成処理条件情報と、前記メディア信号送信手段に設定する送信先のメディア信号受信装置に係る送信先情報とを含むメディア信号処理条件情報の入力受付けを行う情報入力受付手段と、（５）前記情報入力受付手段が入力受付けしたメディア信号処理条件情報に従った処理を行うように、前記メディア信号合成手段、前記メディア信号入力手段、及び前記メディア信号送信手段に指示を行うメディア信号処理指示手段とを有することを特徴とする。
【０００８】
第２の本発明のメディア処理プログラムは、コンピュータを、（１）入力された複数のメディア信号を合成して合成メディア信号を生成する信号合成処理を行うメディア信号合成手段と、（２）メディア信号を送信するメディア信号送信処理部を有する複数のメディア信号送信装置から送信されたメディア信号を前記メディア信号合成手段に入力するメディア信号入力手段と、（３）前記メディア信号合成手段が生成した合成メディア信号を、メディア信号を受信するメディア信号受信処理部を有する複数のメディア信号受信装置に送信するメディア信号送信手段と、（４）前記メディア信号入力手段から前記メディア信号合成手段に供給させるメディア信号の送信元のメディア信号送信装置に係る送信元情報と、前記メディア信号合成手段が行うメディア信号合成処理の条件を記述した合成処理条件情報と、前記メディア信号送信手段に設定する送信先のメディア信号受信装置に係る送信先情報とを含むメディア信号処理条件情報の入力受付けを行う情報入力受付手段と、（５）前記情報入力受付手段が入力受付けしたメディア信号処理条件情報に従った処理を行うように、前記メディア信号合成手段、前記メディア信号入力手段、及び前記メディア信号送信手段に指示を行うメディア信号処理指示手段として機能させることを特徴とする。
【０００９】
第３の本発明は、メディア処理装置が行うメディア処理方法において、（１）前記メディア処理装置は、メディア信号合成手段、メディア信号入力手段、メディア信号送信手段、情報入力受付手段、及びメディア信号処理指示手段を備え、（２）前記メディア信号合成手段は、入力された複数のメディア信号を合成して合成メディア信号を生成する信号合成処理を行い、（３）前記メディア信号入力手段は、メディア信号を送信するメディア信号送信処理部を有する複数のメディア信号送信装置から送信されたメディア信号を前記メディア信号合成手段に入力し、（４）前記メディア信号送信手段は、前記メディア信号合成手段が生成した合成メディア信号を、メディア信号を受信するメディア信号受信処理部を有する複数のメディア信号受信装置に送信し、（５）前記情報入力受付手段は、前記メディア信号入力手段から前記メディア信号合成手段に供給させるメディア信号の送信元のメディア信号送信装置に係る送信元情報と、前記メディア信号合成手段が行うメディア信号合成処理の条件を記述した合成処理条件情報と、前記メディア信号送信手段に設定する送信先のメディア信号受信装置に係る送信先情報とを含むメディア信号処理条件情報の入力受付けを行い、（５）前記メディア信号処理指示手段は、前記情報入力受付手段が入力受付けしたメディア信号処理条件情報に従った処理を行うように、前記メディア信号合成手段、前記メディア信号入力手段、及び前記メディア信号送信手段に指示を行うことを特徴とする。
【発明の効果】
【００１０】
本発明によれば効率的な処理で、複数の表示装置に任意のレイアウトの映像表示が可能なメディア処理装置、プログラム及び方法を提供することができる。
【図面の簡単な説明】
【００１１】
【図１】第１の実施形態に係る監視システムの全体構成について示したブロック図である。
【図２】第１の実施形態に係る監視サーバ（メディア合成部）が生成する合成メディア信号における画面のフレーム構成の例について示した説明図である。
【図３】第１の実施形態に係る監視サーバ（メディア提供管理部）が、メディア提供処理部の生成（新規に監視カメラの映像配信を行う設定）を受け付ける際の操作画面の例について示した説明図である。
【図４】第１の実施形態に係る監視サーバ（表示レイアウト要求受信部）が、フレーム構成情報の入力（選択）を受け付ける際の操作画面の例について示した説明図である。
【図５】第１の実施形態に係る監視サーバ（表示レイアウト要求受信部）が、送信元情報の入力（選択）を受け付ける際の操作画面の例について示した説明図である。
【図６】第１の実施形態に係る監視サーバ（表示レイアウト要求受信部）が、送信先情報の入力（選択）を受け付ける際の操作画面の例について示した説明図である。
【図７】第１の実施形態に係る監視サーバ（表示レイアウト要求受信部）が、送信先情報の入力（選択）を受け付ける際の操作画面の遷移の例について示した説明図である。
【図８】第２の実施形態に係る監視サーバ（メディア合成部）が行うフレーム強調処理の例について示した説明図である。
【図９】実施形態の変形例（本発明を会議サーバに適用した例）の全体構成について示したブロック図である。
【発明を実施するための形態】
【００１２】
（Ａ）第１の実施形態
以下、本発明によるメディア処理装置、プログラム及び方法の第１の実施形態を、図面を参照しながら詳述する。以下では、本発明のメディア処理装置、プログラム及び方法を監視サーバに適用する例について説明する。
【００１３】
（Ａ−１）第１の実施形態の構成
図１は、この実施形態に係る監視システム１の全体構成について示したブロック図である。
【００１４】
図１に示す監視システム１には、１０台の監視カメラ１０（１０−１〜１０−１０）と、各監視カメラ１０で撮影された映像等のメディア信号を処理する監視サーバ２０と、監視サーバ２０で処理された映像等のメディア信号を出力する５台の表示端末４０（４０−１〜４０−５）と、ユーザからの操作受付を行う表示レイアウト指示手段３０（３０−１〜３０−３）を有している。なお、監視システム１を構成する各要素の数は限定されないものである。また、監視システム１において、各装置間の接続方式（通信方式）は限定されないものである。監視システム１において、各装置間は、ＩＰネットワーク（イーサネット（登録商標））により接続するようにしてもよいし、直接接続（例えば、映像信号やオーディア信号の伝送ケーブルやＵＳＢケーブル等を用いて接続）するようにしてもよいが、以下では、各装置間はＩＰネットワーク（イーサネット）により接続されるものとして説明する。
【００１５】
監視カメラ１０の具体的な構成については限定されないものである。この実施形態では、監視カメラ１０は、ＩＰ通信により、監視サーバ２０にリアルタイムに映像信号等のメディア信号を送信可能な種々のカメラが適用されるものとして説明する。この実施形態では、各監視カメラ１０は、マイクＭ及びカメラＣを備え、マイクＭで捕捉した音声信号（音響信号）及びカメラＣで撮影（撮像）した映像信号を含むメディア信号を送信するものとして説明する。なお、図１では、各監視カメラ１０は、マイクＭ及びカメラＣを備える構成として図示しているが、各監視カメラ１０は、少なくとも映像信号を送出する構成であればよい。
【００１６】
各表示端末４０の具体的な構成は限定されないものである。この実施形態では、各表示端末４０は、例えば、ディスプレイ及びスピーカを備えるＰＣや、直接ＩＰネットワークに接続可能なディスプレイ装置（例えば、ＬＡＮインタフェースを備えるＴＶ装置）を適用することができる。この実施形態では、各表示端末４０は、スピーカ及びディスプレイを備え、供給されたメディア信号に含まれる音声信号（音響信号）をスピーカから出力し、供給されたメディア信号に含まれる映像信号をディスプレイから出力するものとして説明する。図１では、各表示端末４０は、ディスプレイＤ及びスピーカＳを備えるものとして図示しているが、各表示端末４０は、少なくとも映像信号を表示出力可能な構成であればよい。
【００１７】
各表示レイアウト指示手段３０は、例えば、ＧＵＩ画面、コマンドライン等のユーザインタフェースを用いて、ユーザからの操作を受け付け可能なものであれば、その具体的な構成は限定されないものである。各表示レイアウト指示手段３０としては、例えば、コンピュータ上で動作するＷｅｂブラウザを適用することができる。図１では、表示レイアウト指示手段３０と表示端末４０は別個の端末として図示しているが、いずれかの表示端末４０上に表示レイアウト指示手段３０を実現（例えば、所定のＷｅｂブラウザをインストールすることで実現）するようにしてもよい。
【００１８】
監視サーバ２０にはさらに図１に示すように、映像信号及び音声信号を含むメディア信号（メディアデータ）を処理するメディア処理部２００が含まれているものとする。なお、この実施形態の監視サーバ２０で処理されるメディア信号には映像信号及び音声信号（音響信号）が含まれるものとして説明するが、映像信号のみを処理する構成としてもよい。
【００１９】
メディア処理部２００（監視サーバ２０）は、ＰＣやワークステーションなどコンピュータ（１台に限定されず、複数台を分散処理し得るようにしたものであっても良い。）上にプログラム（実施形態のメディア処理プログラムを含む）をインストールすることにより、構築しても良く、その場合でも機能的には図１のように表すことができる。また、メディア処理部２００の一部又は全部の構成要素を、専用のハードウェア（例えば、専用の半導体チップ等）として構築するようにしても良い。
【００２０】
図１において、メディア処理部２００は、監視カメラ１０（１０−１〜１０−１０）からそれぞれ符号化されたメディア信号（映像信号を含むメディア信号）を受信するデータ受信部２１（２１−１〜２１−１０）と、データ受信部２１（２１−１〜２１−１０）で受信したメディア信号（符号化されたメディア信号）を復号するデコーダ２２（２２−１〜２２−１０）と、データ入力選択部２３と、データ出力選択部２４と、３つのメディア提供処理部２６（２６−１〜２６−３）と、メディア提供管理部２５とを有している。
【００２１】
データ入力選択部２３は、デコーダ２２（２２−１〜２２−１０）から供給されたメディア信号を、それぞれのメディア提供処理部２６からの要求に応じてスイッチング（分配供給）する処理を行う。例えば、図１の状態では、データ入力選択部２３は、メディア提供処理部２６−１の要求に応じ、メディア提供処理部２６−１に対して、デコーダ２２−１、２２−２、２２−３、２２−４から出力されたメディア信号をスイッチングしている。
【００２２】
データ出力選択部２４は、各メディア提供処理部２６が送信するメディア信号をスイッチング(分配供給)する処理を行う。データ出力選択部２４の詳細については後述する。
【００２３】
メディア提供管理部２５は、メディア提供処理部２６を管理する処理を行う。例えば、メディア提供管理部２５は、表示レイアウト指示手段３０からの指示（ユーザの操作）に応じて、メディア提供処理部２６を生成する処理（例えば、スレッド生成処理やリソースの割り当て処理）を行う。言い換えると、各メディア提供処理部２６は、メディア処理部２００内で、メディア提供管理部２５によりソフトウェア的に生成される構成要素である。
【００２４】
メディア提供管理部２５は、１つの表示レイアウト指示手段３０に対して１つのメディア提供処理部２６を生成する。図１では、３つの表示レイアウト指示手段３０−１、３０−２、３０−３が配置されているので、表示レイアウト指示手段３０−１、３０−２、３０−３のそれぞれに対応するメディア提供処理部２６−１〜２６−３が生成された状態となっている。
【００２５】
メディア提供管理部２５が表示レイアウト指示手段３０からの指示を受け付ける方式について限定されないものである。例えば、各表示レイアウト指示手段３０がＷｅｂブラウザを用いて構成されている場合、メディア提供管理部２５はＷｅｂサーバのプログラム上に表示レイアウト指示手段３０に提供するＷｅｂ画面（ＧＵＩ画面）のコンテンツを搭載することにより実現することができる。例えば、メディア提供管理部２５は、表示レイアウト指示手段３０（Ｗｅｂブラウザ）から所定のＵＲＬにアクセスがあった場合に、メディア提供処理部２６（例えば、新規の監視カメラ映像信号配信の設定）を生成することを受け付け可能なＷｅｂ画面（ＧＵＩ画面）を当該表示レイアウト指示手段３０に対して提供する。そして、メディア提供管理部２５は、表示レイアウト指示手段３０から受け付けた内容に基づいて、新たなメディア提供処理部２６の生成等の管理処理を実行する。
【００２６】
各メディア提供処理部２６は、対応する表示レイアウト指示手段３０からの指示に応じた監視カメラ１０（デコーダ２２）からのメディア信号を合成して、対応する表示レイアウト指示手段３０からの指示に応じた表示端末４０に合成したメディア信号（以下、「合成メディア信号」と呼ぶ）を送信する処理を行う。各メディア提供処理部２６は、表示レイアウト指示手段３０の制御に応じて、合成メディア信号の送信先（表示端末４０）を複数設定することができる。この場合、表示レイアウト指示手段３０は、複数の送信先（表示端末４０）に対して、同一の合成メディア信号を送信する処理を行う。
【００２７】
次に、各メディア提供処理部２６の内部構成について説明する。
【００２８】
各メディア提供処理部２６は、メディア合成部１０１、合成方法指示部１０２、エンコーダ１０３、表示レイアウト要求受信部１０４、及びデータ送信部１０５を有している。各メディア提供処理部２６は、合成メディア信号の送信先（表示端末４０）の数分生成される。例えば、図１において、メディア提供処理部２６−１において、送信先として表示端末４０−１、４０−２、４０−３が設定されているため、表示端末４０−１、４０−２、４０−３のそれぞれに対応するデータ送信部１０５−１、１０５−２、１０５−３が生成されている。
【００２９】
以下では、１つのメディア提供処理部２６から同一の合成メディア信号が供給される表示端末４０のグループをデータ送信グループ１００と呼ぶものとする。例えば、メディア提供処理部２６−１は、３つの表示端末４０−１〜４０−３に合成メディア信号を供給している。したがって、表示端末４０−１〜４０−３は、１つのデータ送信グループ１００−１を構成している。なお、データ送信グループ１００に設定される表示端末４０の数は１つ以上であればよい。図１では、メディア提供処理部２６−２の合成メディア信号の供給先が表示端末４０−４だけであるため、供給先が表示端末４０−４のみにより、１つのデータ送信グループ１００−２が構成されている。また、同様に、図１では、メディア提供処理部２６−３の合成メディア信号の供給先が表示端末４０−４だけであるため、供給先が表示端末４０−４のみにより、１つのデータ送信グループ１００−３が構成されている。
【００３０】
表示レイアウト要求受信部１０４は、表示レイアウト指示手段３０からの指示内容（ユーザの操作に応じた指示内容）を記述した情報（以下、「メディア信号処理条件情報」と呼ぶ）の入力を受け付け、入力を受け付けたメディア信号処理条件情報の内容に従った合成メディア信号を生成するように、当該メディア提供処理部２６内の各構成要素や、データ入力選択部２３を制御する。メディア信号処理条件情報には、合成メディア信号の合成条件が記述された情報（以下、「合成条件情報」と呼ぶ）、及び合成メディア信号の送信先（表示端末４０）の識別情報（例えば、各表示端末４０のＩＰアドレスやホスト名等）の一覧が記述された情報（以下、「送信先情報」と呼ぶ）が含まれる。言い換えると、各メディア提供処理部２６で処理される送信先情報は、各メディア提供処理部２６に対応するデータ送信グループ１００に所属する表示端末４０のリストとなっている。
【００３１】
合成条件情報には、例えば、合成メディア信号を構成する画面（１又は複数のフレームにより構成される画面）のフレーム構成を記述した情報（以下、「フレーム構成情報」と呼ぶ）と、各フレームに対応するメディア信号の送信元（監視カメラ１０（デコーダ２２））の識別情報（識別情報の一覧）を記述した情報（以下、「送信元情報」と呼ぶ）が含まれる。フレーム構成情報は、例えば、画面を構成する各フレームの領域（範囲）を定義した情報や、各フレームの位置や形状（フレームの輪郭の形状）を記述した情報や、フレーム構成のパターンを指定するコードとしてもよい。また、メディア処理部２００における各監視カメラ１０（デコーダ２２）の識別情報の形式は限定されないものである。以下では、例として、監視カメラ１０−１〜１０−１０（デコーダ２２−１〜２２−１０）の識別情報（ＩＤ）をそれぞれ１〜１０とする。
【００３２】
表示レイアウト要求受信部１０４が表示レイアウト指示手段３０からの指示を受け付ける方式について限定されないものである。例えば、表示レイアウト要求受信部１０４は、メディア提供管理部２５と同様に、Ｗｅｂサーバのプログラム上に表示レイアウト指示手段３０に提供するＷｅｂ画面（ＧＵＩ画面）のコンテンツを搭載することにより実現することができる。例えば、表示レイアウト要求受信部１０４は、表示レイアウト指示手段３０（Ｗｅｂブラウザ）から所定のＵＲＬにアクセスがあった場合に、メディア信号処理条件情報を受け付け可能なＷｅｂ画面（ＧＵＩ画面）を当該表示レイアウト指示手段３０に対して提供し、当該Ｗｅｂ画面の入力内容に基づいてメディア信号処理条件情報を取得する。
【００３３】
表示レイアウト指示手段３０の接続先を、メディア提供管理部２５からメディア提供処理部２６（表示レイアウト要求受信部１０４）に切り替える方法については限定されないものである。例えば、メディア提供処理部２６（Ｗｅｂサーバ）は、メディア提供処理部２６を生成することを受け付けた後、表示レイアウト指示手段３０（Ｗｅｂブラウザ）に対して、生成したメディア提供処理部２６の表示レイアウト要求受信部１０４（Ｗｅｂサーバ）に接続変更(生成したメディア提供処理部２６に対応するＵＲＬにリダイレクト)させる処理を行うようにしてもよい。
【００３４】
表示レイアウト要求受信部１０４は、メディア信号処理条件情報の合成条件情報に従ったメディア信号の合成処理を行うように、合成方法指示部１０２に指示する。
【００３５】
合成方法指示部１０２は、合成条件情報の送信元情報に識別情報が設定された監視カメラ１０（デコーダ２２）のメディア信号が、当該メディア提供処理部２６のメディア合成部１０１に供給されるように、データ入力選択部２３のスイッチングを設定する。そして、合成方法指示部１０２は、メディア信号処理条件情報の合成条件情報（フレーム構成情報、及び送信元情報）に従って、データ入力選択部２３から供給されるメディア信号を合成するように、メディア合成部１０１を制御する。
【００３６】
メディア合成部１０１は、データ入力選択部２３から供給されるメディア信号（送信元情報に識別情報が設定された監視カメラ１０（デコーダ２２）のメディア信号）を、合成方法指示部１０２の制御（合成条件情報のフレーム構成情報）に従って合成してメディア合成信号を生成し、エンコーダ１０３に供給する。この実施形態では、メディア合成部１０１は、メディア信号のうち、映像信号及び音声信号（音響信号）を合成処理するものとして説明するが、映像信号のみを合成するようにしてもよい。この実施形態において、メディア合成部１０１は、映像信号については、フレーム構成情報に従ったフレーム構成（画面構成）の各フレームに、供給される各監視カメラ１０の映像をはめ込んで合成する処理を行うものとする。また、メディア合成部１０１は、音声信号については、供給される各監視カメラ１０の音声信号をそのまま混合したり、所定の重み付けで利得（パワー）を調整して混合する等、種々の音声信号の混合手法を適用することができる。なお、メディア合成部１０１は、供給されるメディア信号に音声信号が含まれない場合には、当然のことながら音声信号の合成処理を行わない。
【００３７】
エンコーダ１０３は、供給された合成メディア信号を所定の方式で符号化（適用する符号化方式は限定されない）して、符号化された合成メディア信号をデータ出力選択部２４に供給する。
【００３８】
表示レイアウト要求受信部１０４は、メディア信号処理条件情報に含まれる送信先情報に設定された表示端末４０の識別情報の数分データ送信部１０５を生成し、それぞれのデータ送信部１０５に送信先となる表示端末４０の識別情報（例えば、ＩＰアドレスやホスト名）を設定する。また、表示レイアウト要求受信部１０４は、当該メディア提供処理部２６のエンコーダ１０３からデータ出力選択部２４に供給された合成メディア信号（符号化された合成メディア信号）が、生成したデータ送信部１０５のそれぞれに供給（分配）されるように、データ出力選択部２４のスイッチング設定を行う。これにより、エンコーダ１０３から出力される符号化された合成メディア信号が、各データ送信部１０５に供給される。そして、各データ送信部１０５は、データ出力選択部２４から供給された合成メディア信号（符号化された合成メディア信号）を、設定された送信先（表示端末４０）に送信する処理を行う。データ送信部１０５による合成メディア信号の送信方法（通信プロトコル）は限定されないものであるが、例えば、ＲＴＰ（Ｒｅａｌ−ｔｉｍｅ  Ｔｒａｎｓｐｏｒｔ  Ｐｒｏｔｏｃｏｌ）等のリアルタイム送信に対応した送信方法を適用するようにしてもよい。
【００３９】
例えば、図１のメディア提供処理部２６−１では、３つのデータ送信部１０５−１、１０５−２、１０５−３が生成された状態となっている。また、図１におけるデータ出力選択部２４は、メディア提供処理部２６−１のエンコーダ１０３から供給されたメディア信号（符号化された合成メディア信号）が、メディア提供処理部２６−１のデータ送信部１０５−１、１０５−２、１０５−３に供給（分配）されるようにスイッチング設定がなされている。さらに、図１のメディア提供処理部２６−１では、データ送信部１０５−１、１０５−２、１０５−３の送信先が、それぞれ表示端末４０−１、４０−２、４０−３に設定されている。
【００４０】
次に、メディア合成部１０１が行う合成処理の詳細について説明する。
【００４１】
上述の通り、メディア合成部１０１は、データ入力選択部２３から供給されるメディア信号を、合成方法指示部１０２の制御（合成条件情報のフレーム構成情報）に従って合成してメディア合成信号を生成し、エンコーダ１０３に供給する。
【００４２】
メディア合成部１０１は、例えば、図２に示すような種々のレイアウトに対応している。図２では、合成メディア信号の画面上に配置するフレーム内に当該フレームの符号（Ｆ１〜Ｆ４）を付している。
【００４３】
図２（ａ）では、合成メディア信号の画面上に全て同じ面積（等分した面積）のフレームＦ１〜Ｆ４を配置したレイアウト構成について示している。図２（ｂ）では、合成メディア信号の画面上に画面の半分以上の面積を占めるフレームＦ１と、残りの領域を３等分した面積の３つのフレームＦ２〜Ｆを配置したレイアウト構成について示している。図２（ｃ）では、合成メディア信号の画面上に画面上に１つのフレームＦ１だけを配置したレイアウト構成について示している。メディア合成部１０１が行うメディア信号の合成には、図２（ｃ）に示すように画面上にフレームを１つだけ配置したレイアウト構成もあり得る。例えば、メディア合成部１０１は、１つのフレームＦ１に所定間隔で異なる監視カメラ１０の映像に切り替えること（例えば、複数の監視カメラ１０の映像をローテーションさせること）によりメディア信号の合成処理を行うようにしてもよい。
【００４４】
（Ａ−２）第１の実施形態の動作
次に、以上のような構成を有する第１の実施形態の監視システム１の動作（実施形態に係るメディア処理方法）を説明する。
【００４５】
以下では、図１に示す表示レイアウト指示手段３０−１の指示によりメディア提供処理部２６−１が生成され、メディア信号合成の処理を開始するまでの動作について説明する。
【００４６】
上述の通り、メディア提供管理部２５は、表示レイアウト指示手段３０からの指示（ユーザの操作）に応じて、メディア提供処理部２６を生成する処理（例えば、スレッド生成処理やリソースの割り当て処理）を行う。
【００４７】
ここでは、例として、ユーザの操作により、表示レイアウト指示手段３０−１が、監視サーバ２０のメディア提供管理部２５に対応する所定のＵＲＬにアクセスしたものとする。
【００４８】
そして、メディア提供管理部２５は、表示レイアウト指示手段３０−１（Ｗｅｂブラウザ）からアクセスを受け付けると、新規にメディア提供処理部２６の生成を行うか否か（例えば、新規に監視カメラ１０の映像配信を設定するか否か）を受け付けるための操作画面（以下、「新規配信受付画面」と呼ぶ）を提供する。
【００４９】
図３は、新規配信受付画面の構成例について示した説明図である。
【００５０】
図３に示す新規配信受付画面では、「新規に監視カメラの映像配信を設定しますか？」というメッセージと共に、新規にメディア提供処理部２６の生成を行うことを受け付けるＯＫボタンＢ１０１と、新規にメディア提供処理部２６の生成を行わないことを受け付けるＣａｎｃｅｌボタンＢ１０２が配置されている。
【００５１】
ここでは、新規配信受付画面でＯＫボタンＢ１０１が押下され、メディア提供管理部２５は、新規にメディア提供処理部２６−１を生成したものとする。なお、メディア提供処理部２６−１の初期のデータ送信部１０５の数は１つとしてもよい。また、新規配信受付画面でＣａｎｃｅｌボタンＢ１０２が押下されるとメディア提供管理部２５は以後の処理を行わずに終了する。
【００５２】
メディア提供管理部２５は、メディア提供処理部２６−１を生成すると、表示レイアウト指示手段３０−１の接続先のＵＲＬを、メディア提供処理部２６−１の表示レイアウト要求受信部１０４に対応するＵＲＬにリダイレクト（切替）させる処理を行う。
【００５３】
これにより、表示レイアウト指示手段３０−１の接続先は、メディア提供処理部２６−１の表示レイアウト要求受信部１０４となる。
【００５４】
メディア提供処理部２６−１の表示レイアウト要求受信部１０４は、表示レイアウト指示手段３０−１からのアクセスを受けると、表示レイアウト指示手段３０−１に対して、メディア信号処理条件情報（合成条件情報（フレーム構成情報及び送信元情報）、及び送信先情報）の入力を要求するための操作画面（コンテンツ）を提供する。なお、メディア信号処理条件情報は、上述の通り合成条件情報及び送信先情報を含む情報により構成される。また、合成条件情報には、フレーム構成情報及び送信元情報が含まれる。
【００５５】
図４は、合成条件情報を構成するフレーム構成情報の入力を受け付ける操作画面（以下、「フレーム構成情報入力画面」と呼ぶ）の構成例について示した説明図である。
【００５６】
図４に示すように、フレーム構成情報入力画面では、複数のフレーム構成（レイアウト構成）の候補（パターン）からいずれかを選択する操作を受け付けることで、フレーム構成情報の入力を受け付けるようにしてもよい。
【００５７】
図４では、４つのフレーム構成（フレーム構成のパターン）に対応するラジオボタンＲＢ２０１〜ＲＢ２０４と、入力内容の決定を受け付けるためのＯＫボタンＢ２０１が配置されている。この場合、表示レイアウト要求受信部１０４は、図４に示すフレーム構成情報入力画面で、いずれかのフレーム構成に対応するラジオボタンが選択（押下）された後、ＯＫボタンＢ２０１が押下されると選択されたラジオボタンに対応するフレーム構成の情報を、フレーム構成情報として入力受付することになる。
【００５８】
ここでは、図４に示すように、メディア提供処理部２６−１の表示レイアウト要求受信部１０４において、ラジオボタンＲＢ２０３に対応するフレーム構成（図２（ｂ）に示すフレーム構成）が選択されたものとして以下の説明を行う。
【００５９】
図５は、合成条件情報を構成する送信元情報の入力を受け付ける操作画面（以下、「送信元情報入力画面」と呼ぶ）の構成例について示した説明図である。
【００６０】
図５に示す送信元情報入力画面では、フレーム構成情報入力画面で選択されたフレーム構成の各フレームについて、メディア信号の送信元となる監視カメラ１０（デコーダ２２）のＩＤの入力を受け付ける入力フィールドが配置されている。
【００６１】
図５では、４つのフレームＦ１〜Ｆ４に対応する監視カメラ１０（デコーダ２２）のＩＤ入力を受け付けるための入力フィールドＥ３０１〜Ｅ３０４と、入力内容の決定を受け付けるためのＯＫボタンＢ３０１が配置されている。
【００６２】
この場合、表示レイアウト要求受信部１０４は、図５に示す送信元情報入力画面で、入力フィールドＥ３０１〜Ｅ３０４に監視カメラ１０のＩＤが入力された後、ＯＫボタンＢ３０１が押下されると、入力フィールド３４０１〜３４０４に入力されたＩＤを、フィールドＦ１０１〜Ｆ１０４に対応する監視カメラ１０のＩＤとして認識し、認識した情報を送信元情報として取得する。図５では、入力フィールドＥ３０１〜Ｅ３０４に、それぞれ１、２、３、４のＩＤが入力されているため、メディア提供処理部２６−１の表示レイアウト要求受信部１０４は、フレームＦ１〜Ｆ４にそれぞれ監視カメラ１０−１〜１０−４のメディア信号が割り当てられる旨の情報（図５に示すテーブルの情報）を送信元情報として取得することになる。
【００６３】
図６は、送信先情報の入力を受け付ける操作画面（以下、「送信先情報入力画面」と呼ぶ）の構成例について示した説明図である。
【００６４】
図６に示す送信先情報入力画面では、合成メディア信号の送信先のリストを表示する表示フィールドＤ４０１と、送信先の入力を受け付ける入力フィールドＥ４０１と、入力フィールドＥ４０１に入力された送信先を表示フィールドＤ４０１のリストに追加する処理を受け付けるための追加ボタンＢ４０２と、表示フィールドＤ４０１に表示された送信先のリストを送信先情報として入力受付するためのＯＫボタンＢ４０１が配置されている。すなわち、図６に示す送信先情報入力画面では、入力フィールドＥ４０１に送信先が入力された後、追加ボタンＢ４０２が押下されると、表示フィールドＤ４０１のリストに送信先が追加される。
【００６５】
以下では、表示端末４０−１〜４０−５のホスト名をＨＯＳＴ１〜ＨＯＳＴ５として説明する。なお、送信先情報における送信先の識別子は、ＩＰアドレスやＭＡＣアドレス等の他の情報としてもよい。
【００６６】
図６の送信先情報入力画面では、表示フィールドＤ４０１に表示されたリストに、既にＨＯＳＴ１、ＨＯＳＴ２が表示（入力）されている。そして、図６では、入力フィールドＥ４０１にはＨＯＳＴ３が入力されているので、この状態で追加ボタンＢ４０２が押下されると、図７に示すように、表示フィールドＤ４０１のリストにＨＯＳＴ３が追加された状態となる。
【００６７】
そして、図７の状態でＯＫボタンＢ４０１が押下されると、メディア提供処理部２６−１の表示レイアウト要求受信部１０４は、表示フィールドＤ４０１に表示（入力）されたＨＯＳＴ１、ＨＯＳＴ２、ＨＯＳＴ３のリストを送信先情報として取得することになる。
【００６８】
以上のように、メディア提供処理部２６−１の表示レイアウト要求受信部１０４は、メディア信号処理条件情報を構成する合成条件情報（フレーム構成情報及び送信元情報）、及び送信先情報の入力を受け付けることができる。
【００６９】
そして、メディア提供処理部２６−１の表示レイアウト要求受信部１０４は、メディア信号処理条件情報の入力を受け付けると、そのメディア信号処理条件情報に従ってメディア信号が処理されるように、各構成要素の制御を行う。
【００７０】
まず、メディア提供処理部２６−１の表示レイアウト要求受信部１０４は、メディア信号処理条件情報を構成する送信先情報に登録された送信先の数分データ送信部１０５を生成して、それぞれのデータ送信部１０５の送信先（表示端末４０）を設定する。
【００７１】
上述の通り、ここでは、送信先情報に「ＨＯＳＴ１、ＨＯＳＴ２、ＨＯＳＴ３」が設定されているため、メディア提供処理部２６−１の表示レイアウト要求受信部１０４は、図１に示すように、３つのデータ送信部１０５−１〜１０５−３を生成する。そして、メディア提供処理部２６−１の表示レイアウト要求受信部１０４は、図１に示すように、データ送信部１０５−１〜１０５−３の送信先に、それぞれＨＯＳＴ１〜ＨＯＳＴ３（表示端末４０−１〜４０−３）を設定する。
【００７２】
また、メディア提供処理部２６−１の表示レイアウト要求受信部１０４は、合成方法指示部１０２に、メディア信号処理条件情報を構成する合成条件情報を供給して、合成条件情報に従ったメディア信号の合成処理を行うように命令する。
【００７３】
メディア提供処理部２６−１の合成方法指示部１０２は、合成条件情報を取得すると、合成条件情報を構成する送信元情報に記述された監視カメラ１０（デコーダ２２）のメディア信号が、メディア提供処理部２６−１のメディア合成部１０１に供給されるように、データ入力選択部２３のスイッチング設定を変更する。上述の通り、ここでは、送信元情報として「１、２、３、４」が設定されているため、メディア提供処理部２６−１の合成方法指示部１０２は、図１に示すように、監視カメラ１０−１〜１０−４（デコーダ２２−１〜２２−４）のメディア信号が、メディア提供処理部２６−１のメディア合成部１０１に供給されるように、データ入力選択部２３のスイッチング設定を変更する。
【００７４】
また、メディア提供処理部２６−１の合成方法指示部１０２は、合成条件情報を取得すると、合成条件情報（フレーム構成情報及び送信元情報）をメディア合成部１０１に供給して、合成条件情報に従った内容（条件）で、メディア信号を合成する処理（合成メディア信号の生成）を行うように命令する。
【００７５】
さらに、メディア提供処理部２６−１の合成方法指示部１０２は、エンコーダ１０３から出力されるメディア信号（符号化されたメディア信号）が、各データ送信部１０５（１０５−１〜１０５−３）に供給・分配されるようにデータ出力選択部２４のスイッチングを設定する。
【００７６】
以上のように、監視サーバ２０が動作することで、メディア提供処理部２６−１のメディア合成部１０１に、送信元情報に基づく監視カメラ１０−１〜１０−４のメディア信号が供給され、メディア合成部１０１で合成条件情報に基づくメディア信号の合成処理が行われて合成メディア信号が生成され、データ送信部１０５−１〜１０５−３を介して送信先情報に基づく送信先（表示端末４０−１〜４０−３）に合成メディア信号が配信されることになる。
【００７７】
また、メディア提供処理部２６−１の表示レイアウト要求受信部１０４は、メディア合成部１０１によるメディア合成処理が行われている途中であっても、上述の図４〜図６のような操作画面により、メディア信号処理条件情報（合成条件情報及び送信先情報）の入力（入力内容の変更）を受け付けるようにしてもよい。すなわち、表示レイアウト要求受信部１０４は、リアルタイムにメディア信号処理条件情報（合成条件情報及び送信先情報）の入力（入力内容の変更）を受け付け、新たに入力（変更）を受け付けたメディア信号処理条件情報に基づいてメディア合成処理を行うように各構成要素の制御を行うようにしてもよい。
【００７８】
（Ａ−３）第１の実施形態の効果
第１の実施形態によれば、以下のような効果を奏することができる。
【００７９】
第１の実施形態では、以下の（ａ）〜（ｄ）のような事項を同時に実現することが可能となる。
【００８０】
（ａ）第１の実施形態の監視サーバ２０（メディア処理部２００）では、各メディア提供処理部２６に、任意の組み合わせの監視カメラ１０（デコーダ２２）からのメディア信号を選択して供給し、合成することができる。
【００８１】
（ｂ）第１の実施形態の監視サーバ２０（メディア処理部２００）では、各メディア提供処理部２６のメディア合成部１０１で、任意のフレーム構成の画面でメディア信号（映像信号）を合成した合成メディア信号（映像信号）を複数の送信先（表示端末４０）に配信することができる。そして、第１の実施形態の監視サーバ２０（メディア処理部２００）では、選択した複数の監視カメラ１０の映像を、任意の表示端末４０上に任意のフレーム構成（合成条件情報に従ったフレーム構成）で表示させることができる。例えば、第１の実施形態の実施形態の監視サーバ２０（メディア処理部２００）では、合成条件情報の項目を追加すること等により、監視カメラ１０の映像の中の特定の箇所だけをズーム表示する事等を指定すること等も可能である。また、例えば、第１の実施形態の監視サーバ２０（メディア処理部２００）では、表示端末４０で映像表示中に表示レイアウト指示手段３０から合成条件情報を変更することにより、監視カメラ１０の選択、フレーム構成、ズーム表示等の変更をリアルタイムに受け付けることができる。
【００８２】
（ｃ）第１の実施形態の監視サーバ２０（メディア処理部２００）では、データ送信グループ１００ごとに、異なる合成条件情報でのメディア信号の配信を行うことができる。
【００８３】
（ｄ）第１の実施形態の監視サーバ２０（メディア処理部２００）では、ある表示端末４０に表示されている映像と同じ映像を、同時に複数の他の表示端末４０に表示することができる。また、第１の実施形態の監視サーバ２０（メディア処理部２００）では、どの表示端末４０にどのような合成条件情報の映像を表示するかをリアルタイムに変更できる。
【００８４】
上述の（ｄ）を前提とすると、従来技術では、上述の（ａ）〜（ｃ）を同時に実現することが困難であった。第１の実施形態の監視サーバ２０（メディア処理部２００）では、複数の表示端末４０に対して共通するメディア合成部１０１で合成メディア信号の生成処理を行っているため、上述の（ａ）〜（ｄ）を同時に実現することが可能となっている。
【００８５】
また、従来では、上述の（ｂ）を実現するシステムは存在するが、複数のカメラ映像をそのまま端末に配信するシステムは、大規模なシステム（多数のカメラと多数の表示装置）では帯域を多量に使用するため利用が困難であった。また、従来では、複数のカメラ映像をサーバのデジタルシグナルプロセッサで１つのストリームに再合成するシステムも存在するが、映像の表示レイアウトやサイズがあらかじめ決められていて稼働中に自由に変更したり、特定の箇所だけをズーム表示させる機能に対応することは困難であった。
【００８６】
（Ｂ）第２の実施形態
次に、本発明によるメディア処理装置、プログラム及び方法の第２の実施形態を、図面を参照しながら詳述する。以下では、本発明のメディア処理装置、プログラム及び方法を監視サーバに適用する例について説明する。
【００８７】
（Ｂ−１）第２の実施形態の構成及び動作
第２の実施形態の監視システム１（監視サーバ２０）についても上述の図１を用いて示すことができる。
【００８８】
第２の実施形態では、メディア合成部１０１の処理内容が異なっている。第１の実施形態では、メディア合成部１０１は、一旦合成方法指示部１０２から合成条件情報が供給されると、次の指示があるまでの間、合成条件情報に従ったメディア信号の合成処理を継続（同じ内容の合成処理を継続）するが、第２の実施形態では、メディア合成部１０１は、動的（自律的）に合成メディア信号における映像表示の内容を変更する。例えば、メディア合成部１０１は、動的に合成メディア信号における画面のフレーム構成を変更するようにしてもよい。
【００８９】
メディア合成部１０１が、合成メディア信号における映像表示の内容を変更するトリガについては限定されないものである。メディア合成部１０１は、例えば、合成するメディア信号の内容に応じて、合成メディア信号における映像信号の表示内容を変更する処理（以下、「表示内容変更処理」と呼ぶ）を行うようにしてもよい。
【００９０】
例えば、メディア合成部１０１が、各監視カメラ１０から取得したメディア信号（映像信号及び音声信号（音響信号））の内容を分析して、所定のイベント（例えば、障害、事故、犯罪行為や、障害／事故／犯罪行為の予兆等）を感知し、感知したイベントの内容や、感知したメディア信号の送信元（監視カメラ１０）に応じて、合成メディア信号に対する表示内容変更処理を行うようにしてもよい。
【００９１】
例えば、メディア合成部１０１は、各監視カメラ１０について、当該監視カメラ１０の設置場所に存在してもよい人物の声を示す情報（以下、「声情報」と呼ぶ）や、当該監視カメラ１０の設置場所に存在してもよい人物の顔を示す情報（以下、「顔情報」と呼ぶ）のデータベースを保持して、いずれかの監視カメラ１０のメディア信号から当該データベースに登録されていない声又は顔画像を検出した場合に、当該監視カメラ１０について障害（不審人物の存在）の発生（イベント発生）を感知（検知）するようにしてもよい。顔情報としては、当該監視カメラ１０の設置場所に存在してもよい人物の顔画像や、当該人物の顔の特徴量を適用してもよい。また、声情報としては、当該監視カメラ１０の設置場所に存在してもよい人物の音声（サンプル音声）や、当該人物の声の特徴量（例えば、声紋やスペクトラム等の情報）を適用するようにしてもよい。
【００９２】
そして、メディア合成部１０１は、障害（不審人物の存在；イベント）の発生を検知すると、障害を検知した監視カメラ１０の映像（フレーム）について強調した表示を行うようにしてもよい。
【００９３】
図８は、第２の実施形態のメディア合成部１０１が、表示内容変更処理（映像表示の変更処理）を行う場合の例について示した説明図である。
【００９４】
図８（ａ）は、表示内容変更処理を行う前（障害（イベント）が発生する前）の合成メディア信号における画面について示している。図８（ａ）に示す画面では、フレームＦ１〜Ｆ４の大きさが均等な状態となっている。また、図８（ｂ）〜図８（ｄ）は、それぞれ図８（ａ）の画面から表示内容変更処理を行った後の画面の例について示している。なお、フレームＦ１〜Ｆ４は、それぞれ監視カメラ１０−１〜１０−４に対応するフレームである。
【００９５】
ここで、合成メディア信号における画面が図８（ａ）の状態で、監視カメラ１０−１のメディア信号から障害（イベント）が検知された場合を想定する。
【００９６】
この場合、メディア合成部１０１は、図８（ｂ）〜図８（ｄ）に示すように、合成メディア信号の画面において、監視カメラ１０−１に対応するフレームＦ１の表示を強調することで表示内容変更処理を行う。以下では、表示内容変更処理で強調する対象となるフレーム（例えば、図８（ｂ）〜図８（ｄ）の場合はフレームＦ１）を「強調対象フレーム」と呼ぶ。
【００９７】
図８（ｂ）に示す画面では、表示内容変更処理前（図８（ａ））と比較して、強調対象フレームであるフレームＦ１の領域を広く変更し、その他のフレームＦ２〜Ｆ４の領域を狭く変更している。
【００９８】
また、図８（ｃ）に示す画面では、表示内容変更処理前（図８（ａ））と比較して、全領域（全画面）を強調対象フレームであるフレームＦ１の領域として、その他のフレームＦ２〜Ｆ４の領域を省略している。
【００９９】
さらに、図８（ｄ）に示す画面では、表示内容変更処理前（図８（ａ））と比較して、強調対象フレームであるフレームＦ１のフレーム枠に強調処理が行われている。図８（ｄ）では、図示の都合上、フレームＦ１のフレーム枠を太くしてハッチ（斜線）を付した表示としている。フレーム枠を強調する際の処理の方法は限定されないものであるが、例えば、フレーム枠の色を変更（例えば、黒色から赤色に変更）したり、フレーム枠の枠線を太くしたりすることが挙げられる。
【０１００】
（Ｂ−２）第２の実施形態の効果
第２の実施形態によれば、第１の実施形態の効果に加えて、以下のような効果を奏することができる。
【０１０１】
第２の実施形態では、１つのメディア合成部１０１を用いて、複数の表示端末４０に表示内容変更処理（例えば、フレーム強調処理）を行った合成メディア信号を送信する。したがって、第２の実施形態の監視サーバ２０では、動的に表示内容変更処理を行う場合でも、同じ画面となる複数の表示端末４０の表示内容変更処理を共通する１つのメディア合成部１０１で効率的に実行することができる。
【０１０２】
（Ｃ）他の実施形態
本発明は、上記の各実施形態に限定されるものではなく、以下に例示するような変形実施形態も挙げることができる。
【０１０３】
（Ｃ−１）第１及び第２の実施形態において、本発明のメディア処理システム（メディア処理装置）を監視システム１（監視サーバ２０）に適用する例について説明したが、会議システム（会議サーバ）に適用するようにしてもよい。
【０１０４】
図１に示す監視サーバ２０では、監視カメラ１０で取得されたメディア信号を表示端末４０に送信する片方向通信の構成となっているが、これを双方向とすることで図９に示すような会議システム１Ａ（会議サーバ２０Ａ）を構築するようにしてもよい。言い換えると、図９に示す会議システム１Ａでは、上記の各実施形態における監視カメラ１０及び表示端末４０が、双方とも会議端末１０Ａ（カメラＣ、ディスプレイＤ、マイクＭ、及びスピーカＳを備える端末）に置き換えられている。また、図９に示す会議システム１Ａでは、上記の各実施形態における監視サーバ２０が、双方向のメディア信号の処理を行うことが可能な会議サーバ２０Ａに置き換えられている。すなわち、図９に示す会議システム１Ａ（会議サーバ２０Ａ）では、会議サーバ２０Ａによる各方向のメディア信号の処理は、上記の各実施形態の監視サーバ２０と同様の処理となる。
【０１０５】
例えば、図９に示す会議システム１Ａでは、会議端末１０Ａ−１〜１０Ａ−４から送出されたメディア信号（映像信号及び音声信号）が、監視サーバ２０で合成（１つのメディア合成部１０１で合成）されて合成メディア信号が生成され、当該合成メディア信号が３つの会議端末１０Ａ−５〜１０Ａ−７に送信されることになる。
【０１０６】
そして、第２の実施形態の監視システム１（監視サーバ２０）を、会議システム１Ａ（会議サーバ２０Ａ）に適用する場合、会議サーバ２０Ａに搭載されたメディア合成部１０１においても、合成対象のメディア信号（会議端末１０Ａ−１〜１０Ａ−４から送信されたメディア信号）から、イベントの発生を検知して表示内容変更処理を行うことになる。この場合、会議サーバ２０Ａに搭載されたメディア合成部１０１は、会議端末１０Ａ−１〜１０Ａ−４の音声信号から発言（発話）をイベントとして検知し、合成メディア信号の画面において、発言（発話）を検知した会議端末１０Ａに対応するフレームを強調対象フレームとして処理するようにしてもよい。
【０１０７】
例えば、会議サーバ２０Ａに搭載されたメディア合成部１０１が、会議端末１０Ａ−１〜１０Ａ−４のメディア信号を合成する際、合成メディア信号の画面のフレームＦ１〜Ｆ４がそれぞれ会議端末１０Ａ−１〜１０Ａ−４に対応する場合を想定する。このとき、メディア合成部１０１が、会議端末１０Ａ−１から供給された音声信号から発言（発話）を検知した場合、合成メディア信号の画面において会議端末１０Ａ−１に対応するフレームＦ１に対して強調処理（例えば、図８に示すような強調処理）を行うことになる。
【符号の説明】
【０１０８】
２１、２１−１〜２１−１０…データ受信部、２２、２２−１〜２２−１０…デコーダ、２３…データ入力選択部、２４…データ出力選択部、２５…メディア提供管理部、２６、２６−１〜２６−３…メディア提供処理部、１０１…メディア合成部、１０２…合成方法指示部、１０３…エンコーダ、１０４…表示レイアウト要求受信部、１０５、１０５−１、１０５−２、１０５−３…データ送信部、２００…メディア処理部、３０、３０−１〜３０−３…表示レイアウト指示手段、４０、４０−１〜４０−５…表示端末、３０…表示レイアウト指示手段。
【図１】
2019041328.tif 000003
【図２】
2019041328.tif 000004
【図３】
2019041328.tif 000005
【図４】
2019041328.tif 000006
【図５】
2019041328.tif 000007
【図６】
2019041328.tif 000008
【図７】
2019041328.tif 000009
【図８】
2019041328.tif 000010
【図９】
2019041328.tif 000011