(57)【要約】【課題】映像会議システムにおける双方向映像通信に関する体感品質を向上させること。【解決手段】映像会議サーバ２は、各会議参加者の端末１から受信した複数の映像データを、受信した端末１とは別の会議参加者の端末１に配信する映像出力部２５と、各映像データのうちの発言者の端末１から送信される映像データの映像品質が、各映像データのうちの発言者ではない端末１から送信される映像データの映像品質よりも高い品質になるように、分析された映像品質から配信対象の映像品質を決定し、その決定した映像品質を映像出力部２５に指示する品質決定部２３とを有する。【選択図】図４
2015154315.tif 000002
【特許請求の範囲】
【請求項１】
各会議参加者の端末から送信される映像データを受信し、その受信した映像データごとの映像品質を分析する映像分析部と、
前記各会議参加者の端末から受信した複数の映像データを、受信した端末とは別の会議参加者の端末に配信する映像出力部と、
前記各映像データのうちの発言者の前記端末から送信される映像データの映像品質が、各映像データのうちの発言者ではない前記端末から送信される映像データの映像品質よりも高い品質になるように、前記分析された映像品質から配信対象の映像データの映像品質を決定し、その決定した映像品質を前記映像出力部に指示する品質決定部とを有することを特徴とする
映像会議サーバ。
【請求項２】
前記映像会議サーバは、さらに、前記受信した映像データから分析された映像品質に所望の映像品質が存在しないときに、前記受信した映像データの映像品質を、前記品質決定部が決定した映像品質になるようにアップコンバートまたはダウンコンバートにより変換する映像変換部を有することを特徴とする
請求項１に記載の映像会議サーバ。
【請求項３】
前記品質決定部は、前記各会議参加者の端末から会議参加者ごとに希望する映像品質の入力を受け付け、前記した発言者の映像品質を発言者ではない映像品質よりも高い品質に設定する範囲内で、前記入力された会議参加者ごとに希望する映像品質から前記配信対象の映像データの映像品質を決定することを特徴とする
請求項１に記載の映像会議サーバ。
【請求項４】
前記品質決定部は、前記各会議参加者の端末の通信能力値の入力を受け付け、前記決定された配信対象の映像データの映像品質を配信するための通信能力値よりも、前記入力された端末の通信能力値が劣っている場合には、前記決定された配信対象の映像データの映像品質を前記端末の通信能力値の範囲内に修正することを特徴とする
請求項１ないし請求項３のいずれか１項に記載の映像会議サーバ。
【請求項５】
各会議参加者の端末から送信される映像データを受信し、その受信した映像データごとの映像品質を分析する映像分析部と、
前記各会議参加者の端末から受信した複数の映像データを、受信した端末とは別の会議参加者の端末に配信する映像出力部と、
前記各映像データのうちの発言者の前記端末から送信される映像データの映像品質が、各映像データのうちの発言者ではない前記端末から送信される映像データの映像品質よりも高い品質になるように、前記分析された映像品質から配信対象の映像データの映像品質を決定し、その決定した映像品質を前記映像出力部に指示する品質決定部とを有する映像会議サーバ、および、
前記映像会議サーバから受信した前記複数の映像データを同じ画面内の別々の表示位置に表示する前記各会議参加者の端末を含めて構成されることを特徴とする
映像会議システム。
【請求項６】
映像分析部と、映像出力部と、品質決定部とを備える映像会議サーバによる映像会議方法であって、
前記映像分析部は、各会議参加者の端末から送信される映像データを受信し、その受信した映像データごとの映像品質を分析し、
前記映像出力部は、前記各会議参加者の端末から受信した複数の映像データを、受信した端末とは別の会議参加者の端末に配信し、
前記品質決定部は、前記各映像データのうちの発言者の前記端末から送信される映像データの映像品質が、各映像データのうちの発言者ではない前記端末から送信される映像データの映像品質よりも高い品質になるように、前記分析された映像品質から配信対象の映像データの映像品質を決定し、その決定した映像品質を前記映像出力部に指示することを特徴とする
映像会議方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像会議サーバ、映像会議システム、および、映像会議方法の技術に関する。
【背景技術】
【０００２】
会議参加者がそれぞれの端末を用いて、他の参加者との間で映像データの双方向通信を行う電子会議システムが提案されている。
例えば、特許文献１には、各参加者から受信した個別の符号化ストリームを１つの会議用の符号化ストリームへと合成する代わりに、個別の符号化ストリームの表示位置を合成画像の該当する表示位置に変更することで、再符号化する処理を不要とする旨が記載されている。
特許文献２には、各クライアント端末からの映像信号及び音声信号を、配信先で伸長可能なコーデックにより再圧縮する旨が記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−３４１３２５号公報
【特許文献２】特開２００６−３０４１７９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
会議参加者がそれぞれ用いる端末や通信回線の性能にはばらつきがあるので、会議参加者を映す映像データの映像品質にもばらつきが生じることも多い。もし、同じ会議参加者を映す映像データの映像品質を一律に定めてしまうと、その一律映像品質が高すぎて輻輳が発生し、映像データが途切れてしまったり、その一律映像品質が低すぎて映像がぼやけることで、会議内容の把握が困難になったりする。
【０００５】
一方、会議参加者が視聴する複数人の映像データには、ある重要人物を映す映像データは高品質が必要だが、別の人を映す映像データは低品質でもよいケースもある。このように、会議参加者によって別々の映像品質の映像データが提供されれば、映像品質を全員一律に高くする方式よりも、実質的な会議の体感品質を向上させることができる。
しかし、現状では、高性能な端末の使用者が重要人物であるとは限らないため、高品質で提供された映像データを、そのまま配信しても会議の体感品質を向上させることはできない。特許文献１，２などに記載された電子会議システムでは、会議主催者や会議参加者の品質希望を処理する手段は、記載されていない。
【０００６】
そこで、本発明は、映像会議システムにおける双方向映像通信に関する体感品質を向上させることを、主な課題とする。
【課題を解決するための手段】
【０００７】
前記課題を解決するために、本発明は、各会議参加者の端末から送信される映像データを受信し、その受信した映像データごとの映像品質を分析する映像分析部と、前記各会議参加者の端末から受信した複数の映像データを、受信した端末とは別の会議参加者の端末に配信する映像出力部と、前記各映像データのうちの発言者の前記端末から送信される映像データの映像品質が、各映像データのうちの発言者ではない前記端末から送信される映像データの映像品質よりも高い品質になるように、前記分析された映像品質から配信対象の映像データの映像品質を決定し、その決定した映像品質を前記映像出力部に指示する品質決定部とを有する映像会議サーバである。
または、本発明は、前記映像会議サーバに加えて、前記映像会議サーバから受信した前記複数の映像データを同じ画面内の別々の表示位置に表示する前記各会議参加者の端末を含めて構成される映像会議システムである。
【０００８】
これにより、発言者を映す映像データが高品質化されるので、会議内容を適切に会議参加者に把握させる上に、非発言者を映す映像データが低品質化されるので、通信資源を節約することができる。よって、映像会議システムにおける双方向映像通信に関する体感品質を向上させることができる。
【０００９】
本発明は、前記映像会議サーバが、さらに、前記受信した映像データから分析された映像品質に所望の映像品質が存在しないときに、前記受信した映像データの映像品質を、前記品質決定部が決定した映像品質になるようにアップコンバートまたはダウンコンバートにより変換する映像変換部を有することを特徴とする。
【００１０】
これにより、各会議参加者の端末は、配信先の映像データの映像品質になるようにあらかじめ映像データを作成する必要がなくなるため、携帯端末などの低性能な端末でも、会議に参加できる。
【００１１】
本発明は、前記品質決定部が、前記各会議参加者の端末から会議参加者ごとに希望する映像品質の入力を受け付け、前記した発言者の映像品質を発言者ではない映像品質よりも高い品質に設定する範囲内で、前記入力された会議参加者ごとに希望する映像品質から前記配信対象の映像データの映像品質を決定することを特徴とする。
【００１２】
これにより、自身の映像データを他の会議参加者に高品質で閲覧させなくない旨の希望や、注目する他の会議参加者の映像データを高品質で閲覧したい旨の希望など、会議参加者の希望が反映された映像データの配信処理が可能になる。
【００１３】
本発明は、前記品質決定部が、前記各会議参加者の端末の通信能力値の入力を受け付け、前記決定された配信対象の映像データの映像品質を配信するための通信能力値よりも、前記入力された端末の通信能力値が劣っている場合には、前記決定された配信対象の映像データの映像品質を前記端末の通信能力値の範囲内に修正することを特徴とする。
【００１４】
これにより、輻輳発生時には映像品質を落とすことで、遅延の発生を抑制することができる。
【発明の効果】
【００１５】
本発明によれば、映像会議システムにおける双方向映像通信に関する体感品質を向上させることができる。
【図面の簡単な説明】
【００１６】
【図１】本発明の一実施形態に関する映像会議システムの使用例を示す説明図である。図１（ａ）は、５人の会議参加者の使用例を示す説明図である。図１（ｂ）は、図１（ａ）の各参加者の画面表示例を示す。
【図２】本発明の一実施形態に関する映像会議システムの概要を示す構成図である。
【図３】本発明の一実施形態に関する映像データに着目した映像会議システムを示す構成図である。
【図４】本発明の一実施形態に関する制御データに着目した映像会議システムを示す構成図である。
【図５】本発明の一実施形態に関する映像データの入出力を示す説明図である。図５（ａ）は、映像データの入力の一例を示す。図５（ｂ）は、映像データの出力の一例を示す。
【図６】本発明の一実施形態に関する品質決定部の処理を示すフロー説明図である。
【発明を実施するための形態】
【００１７】
以下、本発明の一実施形態について、図面を参照して詳細に説明する。
【００１８】
図１は、映像会議システムの使用例を示す説明図であり、図１（ａ）は、５人の会議参加者の使用例を示す説明図である。会議の参加者は、各自で端末１を使用して映像会議を行う。
端末１は、自身を撮影して撮影データを作成するカメラと、自身のカメラの撮影データを映像会議サーバ２に送信する送信部１１（図３参照）と、他者のカメラの撮影データを映像会議サーバ２から受信する受信部１２（図３参照）と、各参加者の撮影データを表示するディスプレイとを有する。
映像会議サーバ２は、各端末１からの映像データを受信し、会議に参加する別の端末１に対して受信した映像データを転送（配信）する。
【００１９】
図１（ｂ）は、図１（ａ）の各参加者の画面表示例を示す。各端末１は、自身の撮影データと他者の撮影データとをもとに、各参加者の姿が領域分割されている１つの会議映像表示を作成し、その会議映像表示をディスプレイに表示する。
なお、端末１は、特許文献１に記載の技術のように、参加者ごとの映像データを受信し、それぞれの参加者の映像データの画面内での再生位置を互いに別々にする。これにより、映像データの受信側での再エンコーディング処理を行わずに済み、その処理に伴う遅延時間の発生を抑制できる。
【００２０】
ここで、本実施形態の映像会議システムの特徴として、会議の参加者ごとの映像品質を、会議における参加者の役割に応じてメリハリを付けて変化させることが挙げられる。例えば、図１（ｂ）では、映像会議サーバ２は、会議の発言者の映像品質を高品質にし、その他の聴講者の映像品質をそれよりも低い品質（中品質、低品質、静止画）に設定する。
【００２１】
図２は、映像会議システムの概要を示す構成図である。この映像会議システムは、３つのエリア９１，９２，９３をまたがるネットワークシステムとして構築される。エリア９１，９３は、それぞれ端末１を収容するアクセス網であり、エリア９２は、エリア間の通信を中継するコア網である。
そして、各アクセス網には映像会議サーバ２を配備し、コア網には品質管理装置３を配備する集中構成を採用する。なお、品質管理装置３は、図４で詳細に説明するが、映像データの通信品質などの映像会議サーバ２が映像品質を決定するための材料データを、映像会議サーバ２に提供する装置である。これにより、品質管理装置３を配備する台数を節約することができる。
【００２２】
各エリア間の通信は、通信装置８１，８２，８３によって中継される。例えば、エリア９１の端末１から送信される映像データは、通信装置８１，８２，８３を経由して、エリア９３の端末１へと送信される（図２の実線矢印）。また、エリア９３の端末１から送信される映像データは、通信装置８３，８２，８１を経由して、エリア９１の端末１へと送信される（図２の破線矢印）。
一方、同じエリアに収容される端末１間での映像データのやりとり（エリア内の折り返し通信）には、そのエリア内の映像会議サーバ２だけが転送処理を行い、他のエリアには映像データを流さない。これにより、各エリア間の中継回線の通信量を節約することができる。
【００２３】
図３は、映像データに着目した映像会議システムを示す構成図である。図３の太線矢印は、映像データの流れを示す。
端末１は、図１で前記したように、送信部１１と、受信部１２とを有する。なお、図３では、送信部１１を有する端末１と、受信部１２を有する端末１とを別々に記載しているが、図１で説明したように、１台の端末１が送信部１１および受信部１２を有する（送受信可能な）構成である。
映像会議サーバ２は、映像分析部２１と、映像データ記憶部２２と、品質決定部２３と、映像変換部２４と、映像出力部２５とを有する。
品質管理装置３は、設定受付部３１と、品質管理部３２とを有する（詳細は、図４）。なお、設定受付部３１と、品質管理部３２とは同一筐体に収容してもよいし、別々の筐体に収容してもよい。
これらの各装置（端末１、映像会議サーバ２、品質管理装置３）は、それぞれＣＰＵ（Central Processing Unit）とメモリとハードディスク（記憶手段）とネットワークインタフェースを有するコンピュータとして構成され、このコンピュータは、ＣＰＵが、メモリ上に読み込んだプログラムを実行することにより、各処理部を動作させる。
【００２４】
映像分析部２１は、各送信部１１からの映像データを受信して分析し、その分析結果を取得する。この分析結果には、例えば、各映像データについて、その配信に必要なネットワーク帯域などの通信能力や、映像データの映像品質が含まれる。
映像データ記憶部２２には、映像分析部２１により分析された各映像データが格納される。
ここで、端末１が映像会議サーバ２に送信する映像データの形式は、無圧縮のRAWデータまたはＪＰＥＧ（Joint Photographic Experts Group）規格などでフレーム内圧縮したデータが望ましい。一方、ＭＰＥＧ（Moving Picture Experts Group）規格などでフレーム間圧縮した映像データは、フレーム間圧縮処理では複数のフレームを蓄積後圧縮するという処理方式上、送信までに遅延が発生するため望ましくないが、採用してもよい。
【００２５】
映像出力部２５は、映像データ記憶部２２内の映像データ、および、映像変換部２４により変換された映像データをそれぞれ読み取り、その読み取った映像データを、会議に参加する端末１の受信部１２に向けて配信する。
ここで、映像出力部２５が配信する映像データの映像品質は、品質決定部２３により決定される。
もし、映像会議サーバ２から端末１に対して該当する映像品質を要求し、その要求に従って作成された映像品質の映像データを受信できたときには、映像変換部２４を介さずに（映像データ記憶部２２→映像出力部２５）、受信した映像データをそのまま配信してもよい。
【００２６】
一方、端末１から受信した映像データの映像品質と、これから端末１に配信する映像データの映像品質とが異なるときには、映像会議サーバ２は、受信した映像データの映像品質を映像変換部２４を介して変換してから配信する（映像データ記憶部２２→映像変換部２４→映像出力部２５）。
映像変換部２４は、該当する映像品質を得るために、入力される映像データから、フレームの間引き、フレーム単位の再変換（アップコンバート、または、ダウンコンバート）などの各種映像処理を行う。また、映像変換部２４は、音声データの品質変更（サンプリング周波数の変更など）を行ってもよい。なお、映像変換部２４は、遅延を抑制するため、フレーム間圧縮を行わないことが望ましい。
【００２７】
ここで、映像変換部２４を介するルート（映像変換あり）と、映像変換部２４を介さないルート（映像変換なし）との両方で所望の映像品質を得られるときには、以下に示すように、負荷状態に応じてルート選択する。
例えば、端末１の負荷状態や端末１から映像会議サーバ２への通信回線の負荷状態が所定閾値より高ければ、映像変換部２４を介するルートを採用してもよい（つまり、所望の映像品質を端末１に要求しない）。
または、映像変換部２４の負荷状態が所定閾値より高ければ、映像変換部２４を介さないルートを採用してもよい（つまり、所望の映像品質を端末１に要求する）。
各端末１は、映像会議サーバ２から要求される映像品質が１つであれば、単一の比較的高品質の映像を映像会議サーバ２に送信する。一方、要求される映像品質が複数であれば、同一内容の映像データを複数の映像品質で作成し、作成された各映像データを並列で映像会議サーバ２に送信する。
【００２８】
さらに、映像変換部２４は、映像品質を変換する処理に加えて、入力される映像データに対して様々な付加処理を行ってもよい。付加処理の一例として、映像変換部２４は、入力される映像データの音声を解析し、同時テキスト化して配信対象のテキストデータを議事録として抽出したり、抽出したテキストデータを他言語に翻訳して（日本語から英語に翻訳など）配信対象としたりしてもよい（同時通訳サービス）。
【００２９】
なお、映像出力部２５は、アーカイブ装置７にも映像データを送信し、アーカイブ装置７に対して映像データを保存（アーカイブ）させることで、会議のデータベースを構築してもよい。アーカイブ装置７は、ＮＡＳ（Network Attached Storage）などの網内ストレージであり、受信したデータを自身の記憶手段に格納する装置である。
ここで、アーカイブ装置７は、映像変換部２４の付加処理により作成される各付加データ（音声のテキストデータや、その翻訳データなど）も、受信した映像データに対応付けて格納してもよい。
これにより、１つの会議のデータベース内に「発言時刻、発言者、翻訳結果」などのテキストデータと、各参加者がアップロードした映像データとが保存されているため、リアルタイムに受信しなくても受信者ごとの会議の後日再生ができる。
【００３０】
図４は、制御データに着目した映像会議システムを示す構成図である。
設定受付部３１は、各参加者の端末１から、送信部１１から送信される映像データの品質設定（送信者指定の品質設定）、および、受信部１２が受信する映像データの品質設定（受信者指定の品質設定）をそれぞれ受信し、その受信した品質設定を品質決定部２３に通知する。
つまり、設定受付部３１は、各端末１に対して個々に表示品質を要求させるカスタマコントロールの機能を提供する。
設定受付部３１から品質設定の通知を受けた品質決定部２３は、送信者指定の品質設定を受信者指定の品質設定よりも優先させて、映像品質を決定する。
【００３１】
品質管理部３２は、ある会議に参加する各参加者が使用する端末１の通信能力を、品質決定部２３に通知する。そのため、品質管理部３２は、各端末１について、映像データの送受信についての通信能力を取得し、その取得した通信能力を品質決定部２３に通知する。
なお、品質管理部３２は、品質決定部２３に通知する通信能力について、品質決定部２３で決定された映像品質の送信に不足する場合（換言すると、実効帯域を上回る映像品質を送信しようとする場合）に限定してもよい。
【００３２】
なお、取得する通信能力は、パケット監視処理などにより計測した実効帯域などの実測値でもよいし、あらかじめ端末１ごとに設定されているカタログスペックの性能情報でもよい。カタログスペックとは、端末１の本体種別（ＰＣ、タブレット、スマートフォン）でもよいし、画面解像度などの端末１を構成する部品の性能情報でもよい。
ここで、通信能力と性能情報との関係について、端末１のハードウェアは時間変化しても変わらないため、そのＮＩＣ（Network Interface Controller）が提供する通信性能は変わらない（例えば、ギガビット・イーサネット（登録商標）なら、１ギガビット/秒の仕様）。しかし、端末１の通信能力とは、映像データの送受信を行う実効能力であり、映像会議サーバ２から端末１への通信路途中に輻輳が発生している場合などでは、低下してしまう。
品質管理部３２から通信能力の通知を受けた品質決定部２３は、例えば、「スマートフォンなら高品質を選択できない」などのようにして、映像品質を決定する。
なお、品質管理部３２から品質決定部２３に通知される情報（映像品質を決定するための情報）の一例として、輻輳が発生する各種状況の情報が挙げられる。各種状況とは、例えば、無線接続環境からの通信による割当て帯域が不足した状況や、無線という物理環境に依存する通信帯域の乱れが発生した状況である。
【００３３】
品質決定部２３は、ポリシおよび課金ルール機能（ＰＣＲＦ：Policy and Charging Rules Function）が実装されている処理部である。
品質決定部２３は、映像出力部２５から各端末１に配信する映像データの映像品質を決定する。決定された映像品質は、映像変換部２４に通知されて映像変換パラメータとして用いられるとともに、映像出力部２５に通知されて映像会議サーバ２からどの映像データを配信用に選択するかを特定するために用いられる。
品質決定部２３は、映像品質を決定するための入力として、映像分析部２１が分析した分析結果（入力された映像データの映像品質）と、設定受付部３１が受け付けた各参加者指定の品質設定と、品質管理部３２が取得した各端末１の通信能力とのうち、少なくとも１つを用いる。
【００３４】
なお、同一内容の映像データでも、作成される映像品質の種類が多いほど、映像データ記憶部２２の記憶容量や、映像変換部２４の処理負荷が増大してしまう。そこで、品質決定部２３は、映像品質の種類を減らすために、優先映像（高品質）の映像品質と、非優先映像（低品質）の映像品質とで合計２種類の映像品質を作成してもよい。
【００３５】
そのとき、低品質の映像品質は、会議参加者のうちの最低の受信性能をもつ端末１が、他の会議参加者からの映像データを受信できる程度に、低く設定される。例えば、１０人の会議参加者のうちの参加者Ａの端末１の受信性能が3[Mbps]であり、会議参加者のうちの最低の受信性能であるときに、他の９人の映像データを受信するためには、3[Mbps]／9[人]=0.33[Mbps]が低品質の映像品質となる。
【００３６】
そして、高品質の映像品質は、低品質の映像品質よりも高い品質が設定される。１０人の会議参加者のうちの端末１の受信性能の平均値が5[Mbps]であり、かつ、主に２人が発言者であるときには、受信性能の余裕分（5[Mbps]-3[Mbps]=2[Mbps]）を２人分で割った値（1[Mbps]）を、低品質の映像品質（0.33[Mbps]）に加算した値（1.33[Mbps]）を高品質の映像品質とする。
これにより、２人分の高品質の映像品質（1.33[Mbps]×２[人]=2.66[Mbps]）と、７人分の低品質の映像品質（0.33[Mbps]×７[人]=2.31[Mbps]）との和（4.97[Mbps]）は、受信性能の平均値（5[Mbps]）の範囲内になる。
品質決定部２３は、以上説明した映像品質の決定処理について、その決定処理に使用される入力パラメータが時間とともに変化するので（例えば、会議人数の変動、輻輳などによる通信能力の変動）、映像品質の決定処理を１回だけでなく、複数回実施してもよい。
【００３７】
図５は、映像データの入出力を示す説明図である。
図５（ａ）は、端末１から映像会議サーバ２への映像データの入力例を示す。参加者Ａの端末１からは、同一内容の映像データについて、２種類（高品質、低品質）の映像データが並列に入力される。一方、他の参加者Ｂ，Ｃからは、１種類の映像データが入力される。
図５（ｂ）は、映像会議サーバ２から端末１への映像データの出力例を示す。
１つめの端末１には、参加者Ａの高品質映像と、参加者Ｂの中品質映像と、参加者Ｃの静止画とがそれぞれ出力される。
２つめの端末１には、参加者Ａの低品質映像と、参加者Ｂの中品質映像と、参加者Ｃの静止画とがそれぞれ出力される。
３つめの端末１には、参加者Ａの高品質映像と、参加者Ｂの静止画と、参加者Ｃの静止画とがそれぞれ出力される。
なお、図５（ａ）では、参加者Ｂの静止画は、端末１から入力されていない。そこで、映像変換部２４は、品質決定部２３からの指示を受け、受信した映像会議サーバ２内の参加者Ｂの中品質映像を読み取り、参加者Ｂの静止画へと変換する。
【００３８】
図６は、品質決定部２３の処理を示すフロー説明図である。このフローは、会議主催者の要望（Ｓ２１の討論モード、Ｓ２２の講義モード）を会議参加者の要望よりも優先させ、かつ、会議参加者の要望では、映像データの送信者の要望（Ｓ２３の送信者指定）を映像データの受信者の要望（Ｓ２４の受信者指定）よりも優先させるようにするポリシ（指針）を具現化したものである。
【００３９】
まず、会議主催者によって討論モードが設定されているときには（Ｓ１１，Ｙｅｓ）、品質決定部２３は討論モードに従って各参加者の映像品質を決定し（Ｓ２１）、Ｓ１５へ処理を進める。
討論モードとは、聴講者を映す映像データの映像品質よりも、発言者を映す映像データの映像品質を高く設定するモードである。なお、このモードは、会議参加者のうちの発言者と聴講者とが時間経過とともに次々と変動する討論の特徴を踏まえている。つまり、討議モードとは、会議における各参加者の役割が変動するモードである。
【００４０】
そのため、品質決定部２３は、各映像データの音声トラヒックを分析したり、送信側の端末１により映像データに付加された「発言中である」旨のタグを読み取ったりすることで、リアルタイムに発言者と聴講者とを認識する。
さらに、品質決定部２３は、各映像データの画像から人物認識処理を行い、動きの少ない参加者を検出したときに、検出した参加者を静止画や表示省略に変更してもよい。そして、映像会議サーバ２は、静止画や表示省略とされた参加者の端末１に対しては、映像データの送信処理を停止させることで、端末１の処理負荷やネットワークの通信負荷を軽減できる。
【００４１】
次に、会議主催者によって講義モードが設定されているときには（Ｓ１２，Ｙｅｓ）、品質決定部２３は講義モードに従って各参加者の映像品質を決定し（Ｓ２２）、Ｓ１５へ処理を進める。講義モードとは、討論モードとは異なり、会議における各参加者の役割が固定であるモードである。
よって、講義モードでは、あらかじめ会議主催者によって指定された生徒を映す映像品質（静止画または表示省略など）よりも、あらかじめ会議主催者によって指定された講師を映す映像品質（動画など）を高く設定するモードである。
【００４２】
映像データの送信者によって映像品質が設定受付部３１に指定されているときには（Ｓ１３，Ｙｅｓ）、品質決定部２３は送信者指定に従って各参加者の映像品質を決定し（Ｓ２３）、Ｓ１５へ処理を進める。送信者指定とは、例えば、自身を映す映像データを、他の参加者は静止画でしか閲覧できないなどの指定である。
【００４３】
映像データの受信者によって映像品質が設定受付部３１に指定されているときには（Ｓ１４，Ｙｅｓ）、品質決定部２３は受信者指定に従って各参加者の映像品質を決定し（Ｓ２４）、Ｓ１５へ処理を進める。受信者指定とは、例えば、受信者が注目する所定の参加者の映像データを他の映像データよりも高品質にするなどの指定である。
【００４４】
以上、Ｓ２１〜Ｓ２４の各品質設定処理により、設定受付部３１は、各参加者の映像品質を決定する。これにより、同じ会議に参加する各参加者であっても、それぞれの映像品質を自由に決めることができる。なお、品質決定部２３は、Ｓ２１〜Ｓ２４の各品質設定処理について、優先度の高い順にいずれか１つの処理を採用する方式の代わりに、複数の処理を組み合わせることで、それぞれの映像品質を一意に特定してもよい。
例えば、品質決定部２３は、映像品質の候補が３ランク存在するときに（高品質、中品質、低品質）、Ｓ２１の討論モードで発言者Ａを高品質とし、Ｓ２３の送信者指定で聴講者Ｂを中品質とし、Ｓ２４の受信者指定で聴講者Ｃを低品質として、参加者Ｄにそれぞれ配信してもよい。
さらに、品質決定部２３は、優先度の高い品質設定処理（Ｓ２１など）で複数の映像品質の候補を列挙させ（例えば、聴講者は中品質か低品質）、優先度の低い品質設定処理（Ｓ２３など）でそれらの候補から採用する映像品質を絞り込み選択させてもよい（例えば、送信者指定で低品質を採用）。
【００４５】
さらに、品質決定部２３は、品質修正を行う必要があれば（Ｓ１５，Ｙｅｓ）、Ｓ２１〜Ｓ２４で設定された映像品質を修正してもよい（Ｓ２５）。例えば、品質決定部２３は、Ｓ２１で高品質の映像品質として決定されていても、品質管理部３２が取得した配信先である端末１の通信能力が高品質の映像品質を配信できないときには、映像品質を高品質から低品質に修正することで、現状の通信能力に見合った映像品質を決定できる。
【００４６】
以上説明した本実施形態では、映像会議サーバ２の品質決定部２３が、参加者を映す映像データごとに会議の視聴に適した映像品質を決定し、映像出力部２５がその決定した各映像データを端末１に配信し、端末１がそれぞれ配信された各映像データを同一画面内に表示する（図１（ｂ））映像会議システムを示した。
これにより、会議参加者の各映像データを１つの会議の映像データとして合成（再エンコーディング）を実行しなくて済み、映像会議システムとして重要な低遅延での映像データの双方向通信を実現できる。
【００４７】
品質決定部２３は、映像品質を決定する手がかりとして、会議主催者が設定した各モード（討論モード、講義モード）、設定受付部３１から受信した送信者指定や受信者指定、品質管理部３２から受信した端末１ごとの通信能力などを参照する。
そして、決定された各映像品質は、映像出力部２５が端末１に対して送信する映像データを選択する処理だけでなく、端末１に対する映像データの送信要求や、映像変換部２４映像データの変換要求にも使用される。
これにより、会議として重要な参加者の映像データを高品質にすることができるので、会議参加者の体感品質を向上させることができる。
【符号の説明】
【００４８】
１      端末
２      映像会議サーバ
３      品質管理装置
７      アーカイブ装置
１１    送信部
１２    受信部
２１    映像分析部
２２    映像データ記憶部
２３    品質決定部
２４    映像変換部
２５    映像出力部
３１    設定受付部
３２    品質管理部
８１〜８３  通信装置
９１〜９３  ネットワーク
【図１】
2015154315.tif 000003
【図２】
2015154315.tif 000004
【図３】
2015154315.tif 000005
【図４】
2015154315.tif 000006
【図５】
2015154315.tif 000007
【図６】
2015154315.tif 000008