(57)【特許請求の範囲】
【請求項１】
第１のメディア提供装置が第１のメディア使用装置へ第１のメディア告知メッセージを送信するステップであって、前記第１のメディア告知メッセージは、テレプレゼンス会議と関連付けられた少なくとも１つの個別メディアキャプチャおよび前記テレプレゼンス会議と関連付けられた少なくとも１つのマルチコンテンツ・メディア・キャプチャを含み、前記少なくとも１つの個別メディアキャプチャの各々は、第１のキャプチャ識別子およびキャプチャ属性情報を搬送し、前記少なくとも１つのマルチコンテンツ・メディア・キャプチャの各々は、第２のキャプチャ識別子を搬送する、ステップと、
前記第１のメディア提供装置が前記第１のメディア使用装置によって送信された第１のメディア構成メッセージを受信するステップであって、前記第１のメディア構成メッセージは、前記第１のメディア告知メッセージに従って前記第１のメディア使用装置によって選択される個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャを含む、ステップと、
前記第１のメディア提供装置が、前記選択された個別メディアキャプチャまたは前記選択されたマルチコンテンツ・メディア・キャプチャに従って、前記第１のメディア使用装置へ、対応するメディアストリームを送信するステップと
を含む
ことを特徴とするマルチコンテンツメディア通信方法。
【請求項２】
前記第１のメディア告知メッセージは、エントリ識別子を搬送する少なくとも１つのキャプチャ・シーン・エントリを含み、前記少なくとも１つのキャプチャ・シーン・エントリの各々は、同じ場面において収集される前記個別メディアキャプチャ、または前記マルチコンテンツ・メディア・キャプチャを含む
ことを特徴とする請求項１に記載の方法。
【請求項３】
前記第１のメディア提供装置は会議センタであり、第１のメディア提供装置が第１のメディア使用装置へ第１のメディア告知メッセージを送信する前に、前記方法は、
前記会議センタがマルチパーティ会議において各サイトの第１のメディア使用装置によって送信された第２のメディア告知メッセージを受信するステップであって、前記第２のメディア告知メッセージは、個別メディアキャプチャ、またはマルチコンテンツ・メディア・キャプチャを含む、ステップと、
前記会議センタが前記第２のメディア告知メッセージに従って前記第１のメディア告知メッセージを生成するステップと、
異なるサイトの個別メディアキャプチャ間、マルチコンテンツ・メディア・キャプチャ間、およびキャプチャ・シーン・エントリ間で識別子競合が発生する場合に、前記会議センタが、前記第１のメディア告知メッセージ内の前記個別メディアキャプチャおよび前記マルチコンテンツ・メディア・キャプチャの各々に、一意のキャプチャ識別子を割り当て、前記キャプチャ・シーン・エントリの各々に、一意のエントリ識別子を割り当てるように、再付番を行うステップと
をさらに含む
ことを特徴とする請求項２に記載の方法。
【請求項４】
前記第１のメディア提供装置が、前記個別メディアキャプチャまたは前記マルチコンテンツ・メディア・キャプチャにおいて符号化グループ属性情報を設定するステップ
をさらに含む
ことを特徴とする請求項１に記載の方法。
【請求項５】
前記マルチコンテンツ・メディア・キャプチャは、前記第１のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されており、前記複数の個別メディアキャプチャは時間的方式で、または空間的方式で複合されており、前記複合方式は、前記マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値を付加することによって設定され、前記最大キャプチャ数の前記属性値が１である場合、前記属性値は、前記複数の個別メディアキャプチャが時間に従って複合されていることを指示し、前記最大キャプチャ数の前記属性値が１より大である場合、前記属性値は、前記複数の個別メディアキャプチャが空間に従って複合されていることを指示する
ことを特徴とする請求項１に記載の方法。
【請求項６】
前記最大キャプチャ数の前記属性値が１より大である場合、前記属性値は、前記複数の個別メディアキャプチャが空間に従って複合されていることを指示し、前記方法は、異なる個別メディアキャプチャの空間的合成位置に関する情報を指示するために、前記マルチコンテンツ・メディア・キャプチャにキャプチャ領域属性を付加することを更に含む
ことを特徴とする請求項５に記載の方法。
【請求項７】
前記マルチコンテンツ・メディア・キャプチャは、前記マルチコンテンツ・メディア・キャプチャ内のコンテンツが表示される際に従う規則を決定するための複合ポリシ情報をさらに含む
ことを特徴とする請求項１に記載の方法。
【請求項８】
前記第１のメディア告知メッセージが複数のマルチコンテンツ・メディア・キャプチャを含む場合、前記第１のメディア提供装置は、異なるマルチコンテンツ・メディア・キャプチャにおいて場面同期属性を設定し、同じ値の前記場面同期属性を有する前記異なるマルチコンテンツ・メディア・キャプチャは、個別メディアキャプチャの切り替えを同時に行い、切り替え後の前記個別メディアキャプチャが同じキャプチャシーンに由来する
ことを特徴とする請求項１に記載の方法。
【請求項９】
少なくとも１つのハードウェアプロセッサと、
前記少なくとも１つのハードウェアプロセッサに結合され、前記少なくとも１つのハードウェアプロセッサによる実行のためのプログラミング命令を記憶する非一時的なコンピュータ読取可能記憶媒体と
を含み、前記プログラミング命令は、実行されると、前記少なくとも１つのハードウェアプロセッサに、
第１のメディア使用装置へ第１のメディア告知メッセージを送信することであって、前記第１のメディア告知メッセージは、テレプレゼンス会議と関連付けられた少なくとも１つの個別メディアキャプチャおよび前記テレプレゼンス会議と関連付けられた少なくとも１つのマルチコンテンツ・メディア・キャプチャを含み、前記少なくとも１つの個別メディアキャプチャの各々は、第１のキャプチャ識別子およびキャプチャ属性情報を搬送し、前記少なくとも１つのマルチコンテンツ・メディア・キャプチャは、第２のキャプチャ識別子を搬送する、ことと、
前記第１のメディア使用装置によって送信される第１のメディア構成メッセージを受信することであって、前記第１のメディア構成メッセージは、前記第１のメディア告知メッセージに従って前記第１のメディア使用装置によって選択される個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャを含む、ことと、
選択された個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャに従って、前記第１のメディア使用装置へ、対応するメディアストリームを送信することと
を命令する
ことを特徴とする装置。
【請求項１０】
前記第１のメディア使用装置へ前記第１のメディア告知メッセージを送信する前に、前記プログラミング命令は、実行されると、前記少なくとも１つのハードウェアプロセッサに、
マルチパーティ会議において各サイトによって送信される第２のメディア告知メッセージを受信することであって、前記第２のメディア告知メッセージは、前記個別メディアキャプチャ、または前記マルチコンテンツ・メディア・キャプチャを含む、ことと、
前記第２のメディア告知メッセージに従って、前記第１のメディア告知メッセージを生成することと、
異なるサイトの個別メディアキャプチャ間、マルチコンテンツ・メディア・キャプチャ間、およびキャプチャ・シーン・エントリ間で識別子競合が発生する場合に、前記第１のメディア告知メッセージ内の前記個別メディアキャプチャおよび前記マルチコンテンツ・メディア・キャプチャの各々に、一意のキャプチャ識別子を割り当て、前記キャプチャ・シーン・エントリの各々に、一意のエントリ識別子を割り当てるように、再付番を行うことと
を命令する
ことを特徴とする請求項９に記載の装置。
【請求項１１】
前記プログラミング命令は、実行されると、前記少なくとも１つのハードウェアプロセッサに、
前記個別メディアキャプチャまたは前記マルチコンテンツ・メディア・キャプチャにおいて符号化グループ属性情報を設定すること
を命令する
ことを特徴とする請求項９に記載の装置。
【請求項１２】
前記第１のメディア告知メッセージは、エントリ識別子を搬送する少なくとも１つのキャプチャ・シーン・エントリを含み、前記少なくとも１つのキャプチャ・シーン・エントリの各々は、同じ場面において収集される前記個別メディアキャプチャ、または前記マルチコンテンツ・メディア・キャプチャを含む
ことを特徴とする請求項９に記載の装置。
【請求項１３】
前記マルチコンテンツ・メディア・キャプチャは、前記マルチコンテンツ・メディア・キャプチャ内のコンテンツが表示される際に従う規則を決定するための複合ポリシ情報を含む
ことを特徴とする請求項９に記載の装置。
【請求項１４】
少なくとも１つのハードウェアプロセッサと、
前記少なくとも１つのハードウェアプロセッサに結合され、前記少なくとも１つのハードウェアプロセッサによる実行のためのプログラミング命令を記憶する非一時的なコンピュータ読取可能記憶媒体と
を含み、前記プログラミング命令は、実行されると、前記少なくとも１つのハードウェアプロセッサに、
第１のメディア提供装置によって送信される第１のメディア告知メッセージを受信することであって、前記第１のメディア告知メッセージは、テレプレゼンス会議と関連付けられた少なくとも１つの個別メディアキャプチャおよび前記テレプレゼンス会議と関連付けられた少なくとも１つのマルチコンテンツ・メディア・キャプチャを含み、前記少なくとも１つの個別メディアキャプチャの各々は、第１のキャプチャ識別子およびキャプチャ属性情報を搬送し、前記少なくとも１つのマルチコンテンツ・メディア・キャプチャは、第２のキャプチャ識別子を搬送する、ことと、
前記第１のメディア提供装置へ第１のメディア構成メッセージを送信することであって、前記第１のメディア構成メッセージは、前記第１のメディア告知メッセージに従って第１のメディア使用装置によって選択される個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャを含む、ことと、
前記第１のメディア提供装置によって送信されるメディアストリームを受信することであって、前記メディアストリームは、前記第１のメディア構成メッセージに含まれる前記個別メディアキャプチャおよび／または前記マルチコンテンツ・メディア・キャプチャに対応する、ことと、
前記第１のメディア提供装置によって送信される前記メディアストリームを表示することであって、前記メディアストリームは、前記第１のメディア構成メッセージに含まれる前記個別メディアキャプチャまたは前記マルチコンテンツ・メディア・キャプチャに対応する、ことと、
を命令する
ことを特徴とする装置。
【請求項１５】
前記プログラミング命令は、実行されると、前記少なくとも１つのハードウェアプロセッサに、
前記第１のメディア告知メッセージに従って、会議端末上で、メディアコンテンツ構成オプションを生成することと、
出席者によってなされる選択に従って前記第１のメディア構成メッセージを生成することであって、前記メディアコンテンツ構成オプションは、前記第１のメディア告知メッセージ内の前記マルチコンテンツ・メディア・キャプチャを形成するように複合されている前記マルチコンテンツ・メディア・キャプチャおよび個別メディアキャプチャに関する情報を含む、ことと、
前記第１のメディア提供装置へ前記第１のメディア構成メッセージを送信することと
を命令する
ことを特徴とする請求項１４に記載の装置。
【請求項１６】
前記第１のメディア告知メッセージは、エントリ識別子を搬送する少なくとも１つのキャプチャ・シーン・エントリを含み、前記少なくとも１つのキャプチャ・シーン・エントリの各々は、同じ場面において収集される少なくとも１つの個別メディアキャプチャ、または少なくとも１つのマルチコンテンツ・メディア・キャプチャを含む
ことを特徴とする請求項１４に記載の装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明の実施形態はネットワーク通信技術に関し、詳細には、マルチコンテンツメディア通信方法、装置、およびシステムに関する。
【背景技術】
【０００２】
ビデオ会議分野の発展と共に、ユーザの会議サイトは、1台のカメラ、1台のアクティブビデオ、および1台のアクティブ画像ディスプレイから複数のカメラ、複数のアクティブビデオ、および複数のアクティブ画像ディスプレイへと進化している。同じサイト内の複数のカメラ、複数のアクティブビデオ、および複数のアクティブ画像ディスプレイは、物理的関係または論理的関係によって関連付けられる。サイトAは3画面サイトであり、サイトBは2画面サイトであり、サイトCは1画面サイトである。サイトAのカメラ1はサイトA内の位置1のところの出席者の画像を取り込むことができ、この画像は、サイトA、サイトB、またはサイトCの画面1に表示される。
【０００３】
従来のテレプレゼンス技術においては、マルチ画面マルチディスプレイ要求シナリオが導入され、このシナリオでは、対応する画像コンテンツが会議において規則（例えばアクティビティレベル）に従って表示されることを可能にする。位置と関連付けられた画像がキャプチャシーン（Capture Scene）として定義され、同じサイトの異なる画像表示方式が異なるキャプチャ・シーン・エントリ（Capture Scene Entry、略してCSE）として定義される。先行技術においては、画像間の、すなわち、異なるキャプチャ・シーン・インスタンス間の切り替えは、例えば、同じサイト内の高アクティビティレベルを有する画像への切り替えなど、同じサイトに基づいて提供することしかできない。
【０００４】
先行技術における問題は、画像間の切り替えを同じキャプチャシーンに基づいて提供することしかできないことである。
【発明の概要】
【課題を解決するための手段】
【０００５】
本発明の実施形態は、画像間の切り替えを同じキャプチャシーンに基づいて行うことしかできない先行技術における問題を解決するのに使用される、マルチコンテンツメディア通信方法、マルチコンテンツメディア通信装置、およびマルチコンテンツメディア通信システムを提供する。
【０００６】
第1の態様によれば、本発明の一実施形態はマルチコンテンツメディア通信方法を提供し、本マルチコンテンツメディア通信方法は、
第1のメディア提供装置が第1のメディア使用装置へ第1のメディア告知メッセージを送信するステップであって、第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む、第1のメディア提供装置が第1のメディア使用装置へ第1のメディア告知メッセージを送信するステップと、
第1のメディア提供装置が第1のメディア使用装置によって送信された第1のメディア構成メッセージを受信するステップであって、第1のメディア構成メッセージは、第1のメディア告知メッセージに従って第1のメディア使用装置によって選択される個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャを含む、第1のメディア提供装置が第1のメディア使用装置によって送信された第1のメディア構成メッセージを受信するステップと、
第1のメディア提供装置が、選択された個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャに従って、第1のメディア使用装置へ対応するメディアストリームを送信するステップと
を含む。
【０００７】
第1の態様に関連して、第1の態様の第1の実施態様において、第1のメディア告知メッセージは、エントリ識別子を搬送する少なくとも1つのキャプチャ・シーン・エントリをさらに含み、各キャプチャ・シーン・エントリは、同じ場面において収集された少なくとも1つの個別メディアキャプチャ、または少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む。
【０００８】
第1の態様の第1の実施態様に関連して、第1の態様の第2の実施態様において、第1のメディア提供装置は具体的には会議センタであり、第1のメディア提供装置が第1のメディア使用装置へ第1のメディア告知メッセージを送信するステップの前に、本方法は、
会議センタがマルチパーティ会議において各サイトの第1のメディア使用装置によって送信された第2のメディア告知メッセージを受信するステップであって、第2のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、またはキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む、会議センタがマルチパーティ会議において各サイトの第1のメディア使用装置によって送信された第2のメディア告知メッセージを受信するステップと、
会議センタが第2のメディア告知メッセージに従って第1のメディア告知メッセージを生成するステップと、
異なるサイトの個別メディアキャプチャ間、マルチコンテンツ・メディア・キャプチャ間、およびキャプチャ・シーン・エントリ間で識別子競合が発生する場合に、会議センタが、第1のメディア告知メッセージ内の個別メディアキャプチャおよびマルチコンテンツ・メディア・キャプチャが各々一意のキャプチャ識別子を有し、キャプチャ・シーン・エントリが一意のエントリ識別子を有することを保証するように、再付番を行うステップと
を含む。
【０００９】
第1の態様または第1の態様の第1の実施態様に関連して、第1の態様の第3の実施態様において、本方法は、
第1のメディア提供装置が、個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャにおいて符号化グループ属性情報を設定するステップ
をさらに含む。
【００１０】
第1の態様または第1の態様の第1の実施態様に関連して、第1の態様の第4の実施態様において、マルチコンテンツ・メディア・キャプチャは第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されており、マルチコンテンツ・メディア・キャプチャが第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されていることは、
複数の個別メディアキャプチャは時間的方式で、または空間的方式で複合されており、
複合方式は、マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値を付加することによって設定され、最大キャプチャ数の属性値が1である場合、この属性値は、複数の個別メディアキャプチャが時間に従って複合されていることを指示し、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示すること
を含む。
【００１１】
第1の態様の第4の実施態様に関連して、第1の態様の第5の実施態様において、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示することは、
異なる個別メディアキャプチャの空間的合成位置に関する情報を指示するためにマルチコンテンツ・メディア・キャプチャにキャプチャ領域属性を付加すること
を含む。
【００１２】
第1の態様または第1の態様の第1の実施態様に関連して、第1の態様の第6の実施態様において、マルチコンテンツ・メディア・キャプチャは、
マルチコンテンツ・メディア・キャプチャ内のコンテンツが表示される際に従う規則を決定するための複合ポリシ情報
をさらに含む。
【００１３】
第1の態様または第1の態様の第1の実施態様に関連して、第1の態様の第7の実施態様において、
第1のメディア告知メッセージがキャプチャ識別子を搬送する複数のマルチコンテンツ・メディア・キャプチャを含む場合、第1のメディア提供装置は異なるマルチコンテンツ・メディア・キャプチャにおいて場面同期属性を設定し、同じ値の場面同期属性を有する異なるマルチコンテンツ・メディア・キャプチャは、切り替え後の個別メディアキャプチャが同じキャプチャシーンに由来することを保証するように、個別メディアキャプチャの切り替えを同時に行う。
【００１４】
第2の態様によれば、本発明の一実施形態は第1のメディア提供装置を提供し、本第1のメディア提供装置は、
第1のメディア使用装置へ第1のメディア告知メッセージを送信する送信モジュールであって、第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む、送信モジュールと、
第1のメディア使用装置によって送信される第1のメディア構成メッセージを受信する受信モジュールであって、第1のメディア構成メッセージは、第1のメディア告知メッセージに従って第1のメディア使用装置によって選択される個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャを含む、受信モジュールと
を含み、送信モジュールはさらに、受信モジュールによって受信される第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに従って、第1のメディア使用装置へ対応するメディアストリームを送信する。
【００１５】
第2の態様に関連して、第2の態様の第1の実施態様において、第1のメディア告知メッセージは、エントリ識別子を搬送する少なくとも1つのキャプチャ・シーン・エントリをさらに含み、各キャプチャ・シーン・エントリは、同じ場面において収集される少なくとも1つの個別メディアキャプチャ、および／または少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む。
【００１６】
第2の態様の第1の実施態様に関連して、第2の態様の第2の実施態様において、第1のメディア提供装置は具体的には会議センタであり、受信モジュールはさらに、
送信モジュールが第1のメディア使用装置へ第1のメディア告知メッセージを送信する前に、マルチパーティ会議において各サイトによって送信される第2のメディア告知メッセージを受信し、第2のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、またはキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、
それに対応して、第1のメディア提供装置は、第2のメディア告知メッセージに従って第1のメディア告知メッセージを生成する処理モジュール、をさらに含み、
処理モジュールはさらに、異なるサイトの個別メディアキャプチャ間、マルチコンテンツ・メディア・キャプチャ間、およびキャプチャ・シーン・エントリ間で識別子競合が発生する場合に、第1のメディア告知メッセージ内の個別メディアキャプチャおよびマルチコンテンツ・メディア・キャプチャが各々一意のキャプチャ識別子を有し、キャプチャ・シーン・エントリが一意のエントリ識別子を有することを保証するように、会議センタにより再付番を行う。
【００１７】
第2の態様または第2の態様の第1の実施態様に関連して、第2の態様の第3の実施態様において、処理モジュールはさらに、
個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャにおいて符号化グループ属性情報を設定する。
【００１８】
第2の態様または第2の態様の第1の実施態様に関連して、第2の態様の第4の実施態様において、マルチコンテンツ・メディア・キャプチャは第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されており、マルチコンテンツ・メディア・キャプチャが第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されていることは、
複数の個別メディアキャプチャは時間的方式で、または空間的方式で複合されており、
複合方式は、マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値を付加することによって設定され、最大キャプチャ数の属性値が1である場合、この属性値は、複数の個別メディアキャプチャが時間に従って複合されていることを指示し、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示すること
を含む。
【００１９】
第2の態様の第4の実施態様に関連して、第2の態様の第5の実施態様において、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示することは、
異なる個別メディアキャプチャの空間的合成位置に関する情報を指示するためにマルチコンテンツ・メディア・キャプチャにキャプチャ領域属性を付加すること
を含む。
【００２０】
第2の態様または第2の態様の第1の実施態様に関連して、第2の態様の第6の実施態様において、マルチコンテンツ・メディア・キャプチャは、
マルチコンテンツ・メディア・キャプチャ内のコンテンツが表示される際に従う規則を決定するための複合ポリシ情報
をさらに含む。
【００２１】
第2の態様または第2の態様の第1の実施態様に関連して、第2の態様の第7の実施態様において、処理モジュールはさらに、
第1のメディア告知メッセージがキャプチャ識別子を搬送する複数のマルチコンテンツ・メディア・キャプチャを含む場合、異なるマルチコンテンツ・メディア・キャプチャにおいて場面同期属性を設定し、同じ値の場面同期属性を有する異なるマルチコンテンツ・メディア・キャプチャは、切り替え後の個別メディアキャプチャが同じキャプチャシーンに由来することを保証するように、個別メディアキャプチャの切り替えを同時に行う。
【００２２】
第3の態様によれば、本発明の一実施形態は第1のメディア使用装置を提供し、本第1のメディア使用装置は、
第1のメディア提供装置によって送信される第1のメディア告知メッセージを受信する受信モジュールであって、第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む、受信モジュールと、第1のメディア提供装置へ第1のメディア構成メッセージを受信する送信モジュールであって、第1のメディア構成メッセージは、第1のメディア告知メッセージに従って第1のメディア使用装置によって選択される個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャを含む、送信モジュールと
を含み、受信モジュールはさらに、第1のメディア提供装置によって送信される、第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに対応するメディアストリームを受信し、本第1のメディア使用装置は、
第1のメディア提供装置によって送信される、第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに対応するメディアストリームを表示する、表示モジュール
を含む。
【００２３】
第3の態様に関連して、第3の態様の第1の実施態様において、第1のメディア使用装置は、
第1のメディア告知メッセージに従って会議端末上でメディアコンテンツ構成オプションを生成し、出席者によってなされる選択に従って第1のメディア構成メッセージを生成する処理モジュールであって、メディアコンテンツ構成オプションは、第1のメディア告知メッセージ内のマルチコンテンツ・メディア・キャプチャおよびマルチコンテンツ・メディア・キャプチャを形成するように複合されている個別メディアキャプチャに関する情報を含む、処理モジュール
をさらに含み、送信モジュールはさらに、第1のメディア提供装置、すなわち会議センタへ第1のメディア構成メッセージを送信する。
【００２４】
第3の態様または第3の態様の第1の実施態様に関連して、第3の態様の第2の実施態様において、第1のメディア告知メッセージは、エントリ識別子を搬送する少なくとも1つのキャプチャ・シーン・エントリをさらに含み、各キャプチャ・シーン・エントリは、同じ場面において収集される少なくとも1つの個別メディアキャプチャ、または少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む。
【００２５】
第3の態様または第3の態様の第1の実施態様および第2の実施態様のいずれか1つに関連して、第3の態様の第3の実施態様において、送信モジュールはさらに、
受信モジュールが第1のメディア提供装置によって送信される第1のメディア告知メッセージを受信する前に、会議センタへ第2のメディア告知メッセージを送信し、第2のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、またはキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、そのため、会議センタは、第2のメディア告知メッセージに従って第1のメディア告知メッセージを生成する。
【００２６】
第3の態様または第3の態様の第1の実施態様および第2の実施態様のいずれか1つに関連して、第3の態様の第4の実施態様において、マルチコンテンツ・メディア・キャプチャは第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されており、マルチコンテンツ・メディア・キャプチャが第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されていることは、
複数の個別メディアキャプチャは時間的方式で、または空間的方式で複合されており、
複合方式は、マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値を付加することによって設定され、最大キャプチャ数の属性値が1である場合、この属性値は、複数の個別メディアキャプチャが時間に従って複合されていることを指示し、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示すること
を含む。
【００２７】
第3の態様の第4の実施態様に関連して、第3の態様の第5の実施態様において、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示することは、
異なる個別メディアキャプチャの空間的合成位置に関する情報を指示するためにマルチコンテンツ・メディア・キャプチャにキャプチャ領域属性を付加すること
を含む。
【００２８】
第3の態様または第3の態様の第1の実施態様および第2の実施態様のいずれか1つに関連して、第3の態様の第6の実施態様において、マルチコンテンツ・メディア・キャプチャは、
マルチコンテンツ・メディア・キャプチャ内のコンテンツが表示される際に従う規則を決定するための複合ポリシ情報
をさらに含む。
【００２９】
第4の態様によれば、本発明の一実施形態はマルチコンテンツメディア通信システムを提供し、本マルチコンテンツメディア通信システムは、
第2の態様または第2の態様の第1の実施態様から第7の実施態様のいずれか1つによる少なくとも1つの第1のメディア提供装置と、第3の態様または第3の態様の第1の実施態様から第6の実施態様のいずれか1つによる少なくとも1つの第1のメディア使用装置と
を含む。
【００３０】
本発明の実施形態によるマルチコンテンツメディア通信方法、マルチコンテンツメディア通信装置、およびマルチコンテンツメディア通信システムにおいて、第1のメディア使用装置は、第1のメディア提供装置によって送信される、第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに対応するメディアストリームを受信する。したがって、各サイトがマルチコンテンツ・メディア・キャプチャを提供することができ、各サイトによって提供されるメディアキャプチャ間の切り替えが実現され、メディアコンテンツの受信者と送信者とが、切り替えコンテンツおよび切り替えポリシに関して折衝することができる。
【図面の簡単な説明】
【００３１】
本発明の実施形態における、または先行技術における技術的解決策をより明確に説明するために、以下に、各実施形態または先行技術を説明するのに必要とされる添付の図面について簡単に記述する。明らかに、以下の説明の添付の図面は本発明の一部の実施形態を示すものであり、当業者はこれら添付の図面から難なく他の図面をさらに導出することができる。
【００３２】
【図１】本発明によるマルチコンテンツメディア通信方法の実施形態1の流れ図である。
【図２】本発明によるマルチコンテンツメディア通信方法の実施形態2の流れ図である。
【図３】本発明によるマルチコンテンツメディア通信方法の実施形態2のシナリオの概略図である。
【図４】本発明によるマルチコンテンツメディア通信方法の実施形態4の流れ図である。
【図５】本発明による第1のメディア提供装置の実施形態1の概略的構造図である。
【図６】本発明による第1のメディア使用装置の実施形態1の概略的構造図である。
【図７】本発明によるマルチコンテンツメディア通信システムの実施形態1の概略的構造図1である。
【図８】本発明によるマルチコンテンツメディア通信システムの実施形態1の概略的構造図2である。
【図９】本発明による第1のメディア提供装置の実施形態1の概略的構造図である。
【図１０】本発明による第1のメディア使用装置の実施形態1の概略的構造図である。
【発明を実施するための形態】
【００３３】
本発明の実施形態の目的、技術的解決策、および利点をより明確にするために、以下で、本発明の実施形態における添付の図面に関連して本発明の実施形態における技術的解決策を明確に説明する。明らかに、説明する実施形態は本発明の実施形態の全部ではなく一部である。本発明の実施形態に基づいて当業者によって難なく得られる他のすべての実施形態は、本発明の保護範囲内に含まれるものとする。
【００３４】
図1は、本発明によるマルチコンテンツメディア通信方法の実施形態1の流れ図である。本実施形態は第1のメディア提供装置によって実行され、第1のメディア提供装置は、ソフトウェアおよび／またはハードウェアによって実現することができ、本実施形態においては、テレプレゼンス会議において適用される方法を一例として使用する。図1に示すように、本実施形態における方法は以下を含むことができる。
【００３５】
ステップ101：第1のメディア提供装置が第1のメディア使用装置へ第1のメディア告知メッセージを送信する。第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む。
【００３６】
マルチコンテンツ・メディア・キャプチャは第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合される。
【００３７】
本実施形態においては、中国深セン（Shenzhen）と中国香港（HongKong）にある2つのテレプレゼンス会議室で開催されるテレプレゼンス会議を一例として使用する。この会議はポイントツーポイントの2者会議であるため、会議センタといった別の仲介会議デバイスの関与は不要である。
【００３８】
メディアキャプチャ（Media Capture）は、リアルタイム通信におけるメディアコンテンツの基本記述であり、一般には、メディアデバイスから送信されるマルチメディアストリームを表す。メディアキャプチャがビデオコンテンツである場合、このメディアキャプチャをビデオキャプチャ（Video Capture、略してVC）と呼ぶことができ、メディアキャプチャがオーディオコンテンツである場合、このメディアキャプチャをオーディオキャプチャ（Audio Capture、略してAC）と呼ぶことができる。
【００３９】
本実施形態においては、メディアキャプチャは、個別メディアキャプチャ（Individual Media Capture）と、マルチコンテンツ・メディア・キャプチャ（Multi-Content Media Capture）とに分類され、マルチコンテンツ・メディア・キャプチャは、複合メディアキャプチャ（Compound Media Capture）あるいはマルチコンテンツキャプチャ（Multi-Content Capture、略してMCC）と呼ぶこともできる。各個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャはキャプチャ識別子を有する。例えば、典型的な3画面テレプレゼンス会議室においては、3つの基本的な個別メディアキャプチャを提供することができ、これらはVC0（Video Capture 1）、VC1（Video Capture 1）およびVC2（Video Capture 2）であり、VC0、VC1、およびVC2は、個別メディアキャプチャのキャプチャ識別子である。
【００４０】
個別メディアキャプチャ（Individual Media Capture）は、静的メディアキャプチャ（Static Media Capture）と呼ぶこともでき、単一の固定されたメディア収集デバイスによって生成されるマルチメディアストリームをいい、このマルチメディアストリームは、例えば、カメラ（camera）によって収集される単一のビデオ画像や、マイクロフォン（microphone）によって生成される独立したオーディオデータとすることができる。同じサイトにおいて、1つまたは複数の個別メディアキャプチャがキャプチャ・シーン・エントリ（Capture Scene Entry）を形成し、キャプチャ・シーン・エントリはキャプチャシーンについての提示方式を指示する。例えば、3画面テレプレゼンスサイトにおいて、3台のカメラによって収集される3つのビデオ画像が、そのサイトを提示するためのキャプチャ・シーン・エントリを形成しうる。
【００４１】
マルチコンテンツ・メディア・キャプチャは複数の個別メディアキャプチャから複合されたメディアキャプチャをいい、マルチコンテンツ・メディア・キャプチャの複合方式は、例えば、複数のビデオ画像を合成する（compose）、複数のオーディオデータをミキシングする（mix）といった空間的方式とすることもでき、あるいは例えば、複数のビデオ画像を時間的順序で順次に伝送し、再生する、複数のビデオ画像を、特定の規則（例えば、音響アクティビティレベル）に従って循環させるといった時間的方式とすることもできる。マルチコンテンツ・メディア・キャプチャのコンテンツソースは、個別メディアキャプチャ、キャプチャ・シーン・エントリ、またはこれら2つのランダムな組み合わせを含む。マルチコンテンツ・メディア・キャプチャと個別メディアキャプチャはどちらもメディアキャプチャであり、したがって、一貫したキャプチャ特性、例えば、識別子や場所や優先順位を有しうる。
【００４２】
具体的には、中国深センサイトにある会議端末といった第1のメディア提供装置は、中国香港サイトにある会議端末といった第1のメディア使用装置へ第1のメディア告知メッセージを送信し、第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、個別メディアキャプチャおよびマルチコンテンツ・メディア・キャプチャは、この通信のために深センサイトによって提供されうるメディアコンテンツである。
【００４３】
本実施形態においては、中国深センサイトは、（3台のカメラに対応する）3画面を有するテレプレゼンスサイトであり、3つのサイト画像の個別メディアキャプチャを提供することができ、キャプチャ識別子は、VC0、VC1、およびVC2であるものと仮定する。深センサイトを一例として用いると、第1のメディア提供装置は、中国香港サイトにある会議端末といった第1のメディア使用装置へ、以下の第1のメディア告知メッセージを送信する。
CaptureScene1
[
Description=ShenZhenTPRoom,
VC0{role=audience,capturearea=left},
VC1{role=speaker,capturearea=central},
VC2{role=audience,capturearea=right},
MCC1(VC0, VC1, VC2){MaxCaptures:1}
]
【００４４】
前述の第1のメディア告知メッセージにおいて、CaptureScene1は、深センサイトのキャプチャシーンのサイト識別子情報を指示し、VC0、VC1、およびVC2は、深センサイトによって提供されうる3つの個別メディアキャプチャ（ビデオキャプチャ）であり、VC0は、深センサイトの左位置のところの聞き手の役割を果たす出席者のサイトビデオ画像を指示し、VC1は、深センサイトの中央位置における話し手の役割を果たす出席者のサイトビデオ画像を指示し、VC2は、深センサイトの右位置のところの聞き手の役割を果たす出席者のサイトビデオ画像を指示し、マルチコンテンツ・メディア・キャプチャMCC1がさらに含まれ、MCC1は、対応するキャプチャ識別子であり、第1のメディア告知メッセージ内の3つの個別メディアキャプチャVC0、VC1、およびVC2から複合されている。第1のメディア告知メッセージにおいて、｛｝内のコンテンツは、例えば、role=speaker、capturearea=centralおよびMaxCaptures:1などのメディアキャプチャの属性情報であり、MaxCaptures:1は、最大キャプチャ数の属性値が1である、すなわち、ただ1つの個別メディアキャプチャだけが同時に提供されることを指示する。ここには、例えば、異なるメディアキャプチャの連係情報や優先順位情報など、他の属性情報をさらに含むこともできる。
【００４５】
ステップ102：第1のメディア提供装置は第1のメディア使用装置によって送信された第1のメディア構成メッセージを受信する。第1のメディア構成メッセージは、第1のメディア告知メッセージに従って第1のメディア使用装置によって選択される個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャを含む。
【００４６】
具体的には、香港サイトがただ1つの画面を有するテレプレゼンスサイトである場合、深センサイトの3つの個別メディアキャプチャのビデオ画像を、深センサイトの実物大画像の解像度に従って同時に映写することができない。したがって、深センサイトのすべてのコンテンツがただ1つの画面上に表示されることが予期され、この場合には、深センサイトから送信された第1のメディア告知メッセージ内のマルチコンテンツ・メディア・キャプチャが選択される。香港サイトのデバイスといった第1のメディア使用装置によって送信される第1のメディア構成メッセージは、以下のコンテンツを含むことができる。
CaptureScene1
[
MCC1(VC0, VC1, VC2)
]
【００４７】
ステップ103：第1のメディア提供装置は、選択された個別メディアキャプチャまたはマルチコンテンツ・メディア・キャプチャに従って、第1のメディア使用装置へ対応するメディアストリームを送信する。
【００４８】
具体的には、深センサイトのデバイスといった第1のメディア提供装置は、香港サイトのデバイスといった第1のメディア使用装置によって送信された第1のメディア構成メッセージを受信し、第1のメディア構成メッセージに従って、MCC1画像切り替えの方式でVC0、VC1、およびVC2を複合し（ここでは、切り替え効果を提示するために時間的方式で複合されうる）、メディアストリームを用いて第1のメディア使用装置へ複合されたVC0、VC1、およびVC2を送信する。
【００４９】
本実施形態においては、第1のメディア提供装置を会議センタとすることもでき、会議センタ（または会議サーバと呼ばれる）は、マルチポイント制御ユニット（Multipoint Control Unit、略してMCU）によって実行され、MCUは、IPマルチメディアサブシステム（IP Multimedia Subsystem、略してIMS）におけるメディアリソース機能（Media Resource Function、略してMRF）、あるいは別の会議システムにおける会議センタ制御エンティティとすることができる。
【００５０】
好ましくは、本実施形態において、第1のメディア告知メッセージは、エントリ識別子を搬送する少なくとも1つのキャプチャ・シーン・エントリをさらに含み、各キャプチャ・シーン・エントリは、同じ画面で収集された少なくとも1つの個別メディアキャプチャおよび／または少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、
それに対応して、マルチコンテンツ・メディア・キャプチャのコンテンツは、複数の個別メディアキャプチャおよび／またはキャプチャ・シーン・エントリを含む。
【００５１】
具体的には、中国深センサイトを一例として用いると、第1のメディア提供装置として働く深センサイトの会議端末は以下の第1のメディア告知メッセージを送信する。
CaptureScene1
[
Description=ShenZhenTPRoom,
VC0{role=audience,capturearea=left},
VC1{role=speaker,capturearea=central},
VC2{role=audience,capturearea=right},
VC3{role=audience,capture=entire room},
CSE1{VC0, VC1, VC2},
CSE2{VC3},
MCC1(CSE1)
]
【００５２】
VC3は、焦点距離調整後にサイトカメラによって収集される深センサイト全体の個別メディアキャプチャを指示し、VC0、VC1、およびVC2はCSE1を形成し、CSE1は深センサイトの提示方式であり、VC3はCSE2を形成し、CSE2は深センサイトの第2の提示方式であり、マルチコンテンツ・メディア・キャプチャMCC1は、キャプチャ・シーン・エントリCSE1によって形成されうる。
【００５３】
本実施形態においては、第1のメディア提供装置が第1のメディア使用装置へ第1のメディア告知メッセージを送信し、第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、マルチコンテンツ・メディア・キャプチャは第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されており、第1のメディア提供装置は、第1のメディア使用装置によって送信された第1のメディア構成メッセージを受信し、第1のメディア構成メッセージは、第1のメディア告知メッセージに従って第1のメディア使用装置によって選択される個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャを含み、第1のメディア提供装置は、選択された個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに従って、第1のメディア使用装置へ対応するメディアストリームを送信する。したがって、各サイトがマルチコンテンツ・メディア・キャプチャを提供することができ、各サイトによって提供されるメディアキャプチャ間の切り替えが実現され、メディアコンテンツの受信者と送信者とが、切り替えコンテンツおよび切り替えポリシに関して折衝することができる。
【００５４】
図2は、本発明によるマルチコンテンツメディア通信方法の実施形態2の流れ図である。図3は、本発明によるマルチコンテンツメディア通信方法の実施形態2のシナリオの概略図である。図1に示す方法実施形態に基づき、本実施形態における方法は以下を含むことができる。
【００５５】
ステップ201：会議センタがマルチパーティ会議において各サイトの第1のメディア使用装置によって送信された第2のメディア告知メッセージを受信する。第2のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、またはキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含む。
【００５６】
本実施形態においては、第1のメディア提供装置が会議センタである。4者会議のシナリオを一例として使用し、会議に関与する4つの異なるサイトに加えて、会議センタ（または会議サーバ）の実行本体として働くマルチポイント制御ユニット（Multipoint Control Unit、略してMCU）がさらに含まれる。会議センタ（MCU）は、各会議当事者と対話して、各会議当事者によって提供されうる個別メディアキャプチャおよび／またはマルチメディアキャプチャを獲得する。
【００５７】
中国深セン（Shenzhen）、米国ダラス（Dallas）、スペインマドリード（Madrid）、および中国香港（HongKong）にある4つのテレプレゼンス会議室で開催されるテレプレゼンス会議室を一例として使用する。
【００５８】
具体的には、図3に示すように、中国深センサイト、米国ダラスサイト、スペイン・マドリード・サイトは、各々、（3台のカメラに対応する）3画面を有するテレプレゼンスサイトであり、中国香港サイトは、（1台のカメラに対応する）1画面を有するテレプレゼンス会議室であるものと仮定する。メディア提供者として、各サイトは各々、対応する数の個別メディアキャプチャをしかるべく提供することができ、例えば、中国深センサイトは、少なくとも、3台のカメラによってリアルタイムで収集される個別メディアキャプチャ、すなわち、VC0、VC1、およびVC2を提供することができる。対応するメディアコンテンツ受信機として、会議センタ（MCU）は、各サイトと対話して、各サイトから、キャプチャ識別子およびキャプチャ属性情報を搬送する個別メディアキャプチャ、ならびに／またはキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを受信する。
【００５９】
会議センタ（MCU）は、異なる第1のメディア使用装置によって送信される第2のメディア告知メッセージを別々に用いて、中国深センサイト、米国ダラスサイト、およびスペイン・マドリード・サイトのメディアキャプチャを獲得することができる。
【００６０】
例えば、中国深センサイトは以下を送信する。
CaptureScene1
[
Description=ShenZhenTPRoom,
VC0{role=audience,capturearea=left},
VC1{role=speaker,capturearea=central},
VC2{role=audience,capturearea=right},
VC3{role=audience,capture=entire room},
CSE1{VC0, VC1, VC2},
]
米国ダラスサイトは以下を送信する。
CaptureScene1
[
Description=DallasTPRoom,
VC0{role=audience,capturearea=left},
VC1{role=chairman,capturearea=central},
VC2{role=secretary,capturearea=right},
CSE1{VC0, VC1, VC2},
]
スペイン・マドリード・サイトは以下を送信する。
CaptureScene1
[
Description=MadridTPRoom,
VC0{role=audience,capturearea=left},
VC1{role=audience,capturearea=central},
VC2{role=audience,capturearea=right},
CSE1{VC0, VC1, VC2},
]
【００６１】
ステップ202：会議センタは第2のメディア告知メッセージに従って第1のメディア告知メッセージを生成する。
【００６２】
具体的には、会議センタは、第2のメディア告知メッセージに従って第1のメディア告知メッセージを生成することができる。独立した第2のメディア告知メッセージにおいては、各CaptureScene識別子およびVC識別子は、ローカルに一意、すなわち、このメッセージ内で一意であり、探索可能である。
【００６３】
異なるサイトの個別メディアキャプチャ間、マルチコンテンツ・メディア・キャプチャ間、およびキャプチャ・シーン・エントリ間で識別子競合が発生する場合に、会議センタは、第1のメディア告知メッセージ内の個別メディアキャプチャおよびマルチコンテンツ・メディア・キャプチャが各々一意のキャプチャ識別子を有し、キャプチャ・シーン・エントリが一意のエントリ識別子を有することを保証するように、再付番を行う。
【００６４】
例えば、MCUは、異なる会議当事者から受信された第2のメディア告知メッセージについて競合処理を行い、以下の第1のメディア告知メッセージを生成する。
エンドポイント深セン
CaptureSceneID1
[
Description=ShenZhenTPConfRoom,
VC0{role=audience,capturearea=left},
VC1{role=speaker,capturearea=central},
VC2{role=audience,capturearea=right},
VC3{role=audience,capture=entire room},
CSE1{VC0, VC1, VC2},
]
エンドポイントダラス
CaptureSceneID2
[
Description=DallasTPConfRoom,
VC4{role=audience,capturearea=left},
VC5{role=chairman,capturearea=central},
VC6{role=secretary,capturearea=right},
CSE2{VC4, VC5, VC6},
]
エンドポイントマドリード
CaptureSceneID3
[
Description=MadridTPConfRoom,
VC7{role=audience,capturearea=left},
VC8{role=audience,capturearea=central},
VC9{role=audience,capturearea=right},
CSE3{VC7, VC8, VC9},
]
【００６５】
深セン、ダラス、およびマドリードから受信されたメディア告知メッセージ内のキャプチャシーン、個別メディアキャプチャ、およびキャプチャ・シーン・エントリの識別子間で競合が発生するため、MCUは、異なるキャプチャシーン、個別メディアキャプチャ、およびキャプチャ・シーン・エントリに、それらの識別子が、MCUによって生成される第1のメディア告知メッセージにおいて一意であることを保証するように再付番する。
【００６６】
MCUは、提供された個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに従って、1つまたは複数のマルチコンテンツ・メディア・キャプチャを含む以下の第1のメディア告知メッセージをさらに生成することができる。
【００６７】
1．第1のメディア告知メッセージは1つのマルチコンテンツ・メディア・キャプチャを含む。
CaptureScene4
[
VC3{role=audience,capture=entire room},
VC4{role=audience,capturearea=left},
VC5{role=chairman,capturearea=central},
VC6{role=secretary,capturearea=right},
VC7{role=audience,capturearea=left},
VC8{role=audience,capturearea=central},
VC9{role=audience,capturearea=right},
MCC1(VC4, VC5, VC6, VC7, VC8, VC9),
CSE4(MCC1, VC3)
]
【００６８】
本例において、CaptureScene4は、MCUによって提供されうる第4のキャプチャシーンである。深センサイト、ダラスサイト、およびマドリードサイトをそれぞれ表すCaptureScene1、CaptureScene2、およびCaptureScene3と比べて、CaptureScene4は、この場合、仮想キャプチャシーンとほぼ同義である。この場合、MCUは、マルチコンテンツ・メディア・キャプチャMCC1を定義し、MCC1は、個別メディアキャプチャVC4、VC5、VC6、VC7、VC8、およびVC9に基づいく複合によって形成され、その複合方式は、パラメータによって指定されるように、時間による切り替えまたは空間による複合とすることができる。さらに、MCUは、マルチコンテンツ・メディア・キャプチャMCC1を含むキャプチャ・シーン・エントリCSE4を提供すること、すなわち、MCC1およびVC3の画像を用いて仮想キャプチャシーンCaptureScene4を表示することができる。
【００６９】
2．第1のメディア告知メッセージは複数のマルチコンテンツ・メディア・キャプチャを含む。
CaptureScene5
[
VC0{role=audience,capturearea=left},
VC1{role=speaker,capturearea=central},
VC2{role=audience,capturearea=right},
VC4{role=audience,capturearea=left},
VC5{role=chairman,capturearea=central},
VC6{role=secretary,capturearea=right},
VC7{role=audience,capturearea=left},
VC8{role=audience,capturearea=central},
VC9{role=audience,capturearea=right},
MCC2(VC0, VC4, VC7),
MCC3(VC1, VC5, VC8),
MCC4(VC2, VC6, VC9),
CSE5(MCC1, MCC2, MCC3)
]
【００７０】
本例において、CaptureScene5は、MCUによって提供されうる別のキャプチャシーンである。深センサイト、ダラスサイト、およびマドリードサイトをそれぞれ表すCaptureScene1、CaptureScene2、およびCaptureScene3と比べて、この場合のCaptureScene5もまた、仮想キャプチャシーンである。この場合、MCUは複数のマルチコンテンツ・メディア・キャプチャを定義し、MCC2は、深センサイト、ダラスサイト、およびマドリードサイトにおける左領域を表す個別メディアキャプチャVC0、VC4、およびVC7に基づく複合によって形成され、MCC3は、深センサイト、ダラスサイト、およびマドリードサイトにおける中央領域を表す個別メディアキャプチャVC1、VC5、およびVC8に基づく複合によって形成され、MCC4は、深センサイト、ダラスサイト、およびマドリードサイトにおける右領域を表す個別メディアキャプチャVC2、VC6、およびVC9に基づく複合によって形成される。各複合方式はこの場合、パラメータによって指定されるように、時間による切り替えまたは空間による複合とすることができる。さらに、MCUは、マルチコンテンツ・メディア・キャプチャMCC2、MCC3、およびMCC4を含むキャプチャ・シーン・エントリCSE5を提供すること、すなわち、MCC2、MCC3、およびMCC4の画像を用いて仮想キャプチャシーンCaptureScene5を表示することができる。
【００７１】
本実施形態においては、各サイトへ送信される第1のメディア告知メッセージは、同じであっても異なっていてもよく、例えば、あるサイトへ送信される第1のメディア告知メッセージがそのサイトの個別メディアキャプチャを含まない場合もある。したがって、MCUによって深センサイトへ送信される第1のメディア告知メッセージに含まれるメディアキャプチャを、ダラスサイト、マドリードサイト、および香港サイトによって提供されたメディアキャプチャから複合することができる。
【００７２】
ステップ203：第1のメディア提供装置、すなわち会議センタは、第1のメディア使用装置へ第1のメディア告知メッセージを送信する。
【００７３】
本ステップの原理は図1に示す実施形態の原理と同様であり、ここでは繰り返さない。
【００７４】
本実施形態においては、会議センタが、マルチパーティ会議における各サイトの第1のメディア使用装置によって送信された第2のメディア告知メッセージを受信し、第2のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびに／またはキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、会議センタは第2のメディア告知メッセージに従って第1のメディア告知メッセージを生成し、第1のメディア提供装置、すなわち会議センタは、第1のメディア使用装置へ第1のメディア告知メッセージを送信する。したがって、各サイトによって提供されるメディアキャプチャ間の切り替えが実現され、メディアコンテンツの受信者と送信者とが、切り替えコンテンツおよび切り替えポリシに関して折衝することができる。
【００７５】
本発明によるマルチコンテンツメディア通信方法の実施形態3においては、図1および図2に示す方法実施形態に基づき、本実施形態においては、第1のメディア提供装置は、個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャにしかるべく使用することのできる符号化、ならびに第1のメディア提供装置が同時に送信することのできるメディアストリームの数を決定するように、個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャにおいて符号化グループ属性情報を設定する。
【００７６】
具体的には、符号化グループ属性情報は、使用することのできる符号化インスタンスの数、および特定の対応する符号化パラメータ、例えば解像度を指示する。メディアキャプチャのための符号化グループ属性情報を設定することによって、メディアキャプチャに使用することのできる符号化、および、符号化グループによって含められる符号化インスタンスの数、すなわち、同時に送信することのできるメディアストリームの数に従って決定される、同時に符号化することのできるメディアストリームの数を決定することができる。
【００７７】
例えば、マルチコンテンツ・メディア・キャプチャにおいて、符号化グループ属性情報の1形態は以下のように設定される。
MCC2(VC0, VC4, VC7){encoding group1}
これは、MCC2が、符号化グループ「encoding group1」を用いて符号化されることを指示する。このようにして、MCC2内のビデオキャプチャの符号化属性が、「encoding group1」に含まれる符号化インスタンスによって決定される。例えば、「encoding group1」が1つの1080p符号化インスタンスのみを含む場合、これは、MCC2によって提供されるビデオキャプチャの最大解像度が1080pであり、ただ1つの1080pビデオ画像を同時に生成することができることを指示する。
【００７８】
好ましくは、本実施形態において、マルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合され、マルチコンテンツ・メディア・キャプチャが第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されることは、
複数の個別メディアキャプチャが時間的方式で、または空間的方式で複合されること、を含む。
【００７９】
複合方式は、マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値を付加することによって設定され、マルチコンテンツ・メディア・キャプチャにおいて同時に符号化することのできる最大個別メディアキャプチャ数を指示する。最大キャプチャ数の属性値が1である場合、この属性値は、複数の個別メディアキャプチャが時間に従って複合されていることを指示し、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示する。
【００８０】
具体的には、複数のメディアキャプチャ間の切り替えまたは複数のメディアキャプチャの合成の効果を達成するために、複数の個別メディアキャプチャを時間的方式で、または空間的方式で複合することができる。例えば、切り替えは、異なるメディアキャプチャ画像の循環式切り替えとすることができ、合成は、異なる音響のミキシング（mix）や異なるメディアキャプチャ画像の合成（compose）とすることができる。本実施形態においては、個別メディアキャプチャの複合方式が、マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値（MaxCaptures）を付加することによって設定される。例えば、MCC1(VC4, VC5, VC6, VC7, VC8, VC9){MaxCaptures:1}において、MaxCapturesの値が1である場合、この値は、ただ1つの個別メディアキャプチャが同時に提供されること、すなわち、複数の個別メディアキャプチャは時間に従って切り替えられるを指示し、このプロセスにおいて、各個別メディアキャプチャが持続する時間、および異なる個別メディアキャプチャ間の切り替えのトリガ条件を、別の属性を用いて、または別のやり方で設定することができる。MaxCapturesの値が1より大である場合、この値は、複数の個別メディアキャプチャが同時に提供されること、すなわち、複数の個別メディアキャプチャは空間に従って複合されることを指示する。MaxCapturesの値は、同じ画像において同時に表示される個別メディアキャプチャ画像の数を指示し、異なる個別メディアキャプチャの空間的複合のための相対的な位置および距離、それがピクチャ・イン・ピクチャ（Picture in Picture）であるかどうかなどを、他の属性を用いて、または他のやり方で設定することができる。
【００８１】
好ましくは、本実施形態においては、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されることを指示することは、
異なる個別メディアキャプチャの空間的合成位置に関する情報を指示するためにマルチコンテンツ・メディア・キャプチャにキャプチャ領域属性を付加すること
を含みうる。
【００８２】
具体的には、例えば、MCC1(VC4, VC5, VC6, VC7, VC8, VC9){MaxCaptures:2}は、2つの異なる個別メディアキャプチャがマルチコンテンツ・メディア・キャプチャを形成するように複合されることを指示し、それら2つの異なる個別メディアキャプチャの空間的合成位置に関する情報、例えば、一方が他方の左側に配置されること、または一方が他方の上方に配置されることなどを指示するためのキャプチャ領域属性をさらに搬送することができる。
【００８３】
好ましくは、本実施形態において、マルチコンテンツ・メディア・キャプチャは、
マルチコンテンツ・メディア・キャプチャ内のコンテンツが表示される際に従う規則を決定するための複合ポリシ情報
をさらに含む。
【００８４】
例えば、以下のマルチコンテンツ・メディア・キャプチャ、
MCC2(VC0, VC4, VC7){policy=voice activity}
において、「policy」は異なるポリシ値を有しうる。例えば、「voice activity」は、複数のメディアキャプチャが音声アクティビティレベルまたは音量に従って複合され、または切り替えられることを指示し、「round robin」は、複数のメディアキャプチャが時間に従う順次循環の方式で複合され、または切り替えられることを指示し、「role」は、複数のメディアキャプチャが、それらのメディアキャプチャが表す役割に従って複合され、または切り替えられることを指示する。
【００８５】
好ましくは、本実施形態においては、第1のメディア告知メッセージがキャプチャ識別子を搬送する複数のマルチコンテンツ・メディア・キャプチャを含む場合、第1のメディア提供装置は異なるマルチコンテンツ・メディア・キャプチャにおいて場面同期属性を設定し、同じ値の場面同期属性を有する異なるマルチコンテンツ・メディア・キャプチャは、切り替え後の個別メディアキャプチャが同じキャプチャシーンに由来することを保証するように、個別メディアキャプチャの切り替えを同時に行う。
【００８６】
例えば、場面同期属性は、マルチコンテンツ・メディア・キャプチャにおいて{Scene-synchID1}として設定され、第1のメディア告知メッセージの1形態は以下のとおりである。
CaptureScene5
[
VC0{role=audience,capturearea=left},
VC1{role=speaker,capturearea=central},
VC2{role=audience,capturearea=right},
VC4{role=audience,capturearea=left},
VC5{role=chairman,capturearea=central},
VC6{role=secretary,capturearea=right},
VC7{role=audience,capturearea=left},
VC8{role=audience,capturearea=central},
VC9{role=audience,capturearea=right},
MCC2(VC0, VC4, VC7) {Scene-synchID1},
MCC3(VC1, VC5, VC8) {Scene-synchID1},
MCC4(VC2, VC6, VC9) {Scene-synchID1},
CSE5(MCC1, MCC2, MCC3)
]
【００８７】
このメッセージが指示しているのは、マルチコンテンツ・メディア・キャプチャについて複合（例えば、時間的切り替えや空間的合成）が行われる場合に、同じ場面同期属性（すなわち、Scene-synchID1）を有する第1のメディア告知メッセージ内のいくつかのマルチコンテンツ・メディア・キャプチャについての複合後の個別メディアキャプチャが同じキャプチャシーンに由来することを保証することが必要とされ、VC0、VC1、およびVC2は深センサイトからのものであり、VC4、VC5、およびVC6はダラスサイトからのものであり、VC7、VC8、およびVC9はマドリードサイトからのものであることである。したがって、実際の適用において、このメッセージが指示するのは、MCC2がVC0からVC4に切り替わるときに、MCC3およびMCC4は、それぞれ、VC1からVC5、VC2からVC6に切り替わることである。
【００８８】
好ましくは、本実施形態においては、第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャの全部または一部である。
【００８９】
例えば、第1のメディア告知メッセージは以下の情報を含む。
CaptureScene5
[
VC0{role=audience,capturearea=left},
VC1{role=speaker,capturearea=central},
VC2{role=audience,capturearea=right},
VC4{role=audience,capturearea=left},
VC5{role=chairman,capturearea=central},
VC6{role=secretary,capturearea=right},
VC7{role=audience,capturearea=left},
VC8{role=audience,capturearea=central},
VC9{role=audience,capturearea=right},
MCC2(VC0, VC4, VC7) {Scene-synchID1},
MCC3(VC1, VC5, VC8) {Scene-synchID1},
MCC4(VC2, VC6, VC9) {Scene-synchID1},
CSE5(MCC1, MCC2, MCC3)
]
【００９０】
深センサイトおよびダラスサイトのメディアキャプチャ画像が香港サイトにおいて表示されることが予期されるにすぎない場合、第1のメディア構成メッセージは以下のコンテンツを含むことができる。
CaptureScene5
[
MCC2(VC0, VC4) {Scene-synchID1},
MCC3(VC1, VC5) {Scene-synchID1},
MCC4(VC2, VC6) {Scene-synchID1},
CSE5(MCC1, MCC2, MCC3)
]
【００９１】
すなわち、MCUの第1のメディア告知メッセージ内の一部のメディアキャプチャが選択される。
【００９２】
本実施形態においては、第1のメディア提供装置が、個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャにしかるべく使用することのできる符号化、ならびに第1のメディア提供装置が同時に送信することのできるメディアストリームの数を決定するように、個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャにおいて符号化グループ属性情報を設定する。各サイトはマルチコンテンツ・メディア・キャプチャを提供することができ、マルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合され、マルチコンテンツ・メディア・キャプチャが第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されることは、複数の個別メディアキャプチャが時間的方式で、または空間的方式で複合されること、を含む。複合方式は、マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値を付加することによって設定され、マルチコンテンツ・メディア・キャプチャにおいて同時に符号化することのできる最大個別メディアキャプチャ数を指示する。最大キャプチャ数の属性値が1である場合、この属性値は、複数の個別メディアキャプチャが時間に従って複合されていることを指示し、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示し、属性値が複数の個別メディアキャプチャが空間に従って複合されていることを指示することは、この場合、異なる個別メディアキャプチャの空間的合成位置に関する情報を指示するためにマルチコンテンツ・メディア・キャプチャにキャプチャ領域属性を付加することを含みうる。マルチコンテンツ・メディア・キャプチャは、マルチコンテンツ・メディア・キャプチャ内のコンテンツが表示される際に従う規則を決定するための複合ポリシ情報をさらに含む。第1のメディア告知メッセージがキャプチャ識別子を搬送する複数のマルチコンテンツ・メディア・キャプチャを含む場合、第1のメディア提供装置は異なるマルチコンテンツ・メディア・キャプチャにおいて場面同期属性を設定し、同じ値の場面同期属性を有する異なるマルチコンテンツ・メディア・キャプチャは、切り替え後の個別メディアキャプチャが同じキャプチャシーンに由来することを保証するように、個別メディアキャプチャの切り替えを同時に行う。したがって、各サイトによって提供されるメディアキャプチャ間の切り替えが実現され、メディアコンテンツの受信者と送信者とが、切り替えコンテンツおよび切り替えポリシに関して折衝することができる。
【００９３】
図4は、本発明によるマルチコンテンツメディア通信方法の実施形態4の流れ図である。本実施形態は第1のメディア使用装置によって実行され、第1のメディア使用装置は、ソフトウェアおよび／またはハードウェアによって実現することができ、本実施形態においては、テレプレゼンス会議における適用を一例として使用する。図4に示すように、本実施形態における方法は以下を含むことができる。
【００９４】
ステップ401：第1のメディア使用装置が第1のメディア提供装置によって送信された第1のメディア告知メッセージを受信する。第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、マルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されている。
【００９５】
本実施形態においては、中国深セン（Shenzhen）と中国香港（HongKong）にある2つのテレプレゼンス会議室で開催されるテレプレゼンス会議を一例として使用する。この会議はポイントツーポイントの2者会議であるため、会議センタといった別の仲介会議デバイスの関与は不要である。
【００９６】
中国深センは、（3台のカメラに対応する）3画面を有するテレプレゼンスサイトであり、3つのサイト画像の個別メディアキャプチャを提供することができ、キャプチャ識別子キャプチャ識別子は、VC0、VC1、およびVC2であるものと仮定する。深センサイトを一例として用いると、第1のメディア提供装置は以下の第1のメディア告知メッセージを送信する。
CaptureScene1
[
Description=ShenZhenTPRoom,
VC0{role=audience,capturearea=left},
VC1{role=speaker,capturearea=central},
VC2{role=audience,capturearea=right},
MCC1(VC0, VC1, VC2)
]
【００９７】
第1のメディア使用装置として働く中国香港サイトの会議端末が第1のメディア告知メッセージを受信し、第1のメディア告知メッセージにおいて、CaptureScene1は、深センサイトのキャプチャシーンのサイト識別子情報を指示し、VC0、VC1、およびVC2は、深センサイトによって提供されうる3つの個別メディアキャプチャ（ビデオキャプチャ）であり、VC0は、深センサイトの左位置のところの聞き手の役割を果たす出席者のサイトビデオ画像を指示し、VC1は、深センサイトの中央位置における話し手の役割を果たす出席者のサイトビデオ画像を指示し、VC2は、深センサイトの右位置のところの聞き手の役割を果たす出席者のサイトビデオ画像を指示し、マルチコンテンツ・メディア・キャプチャMCC1がさらに含まれ、MCC1は、対応するキャプチャ識別子であり、第1のメディア告知メッセージ内の3つの個別メディアキャプチャVC0、VC1、およびVC2に基づく複合によって形成される提供方式である。第1のメディア告知メッセージにおいて、{}内のコンテンツは、例えば、role=speaker、capturearea=centralなど、メディアキャプチャの属性情報であり、ここでは、例えば、異なるメディアキャプチャの連係情報や優先順位情報など、他の属性情報をさらに含むこともできる。
【００９８】
ステップ402：第1のメディア使用装置は第1のメディア提供装置へ第1のメディア構成メッセージを送信する。第1のメディア構成メッセージは、第1のメディア告知メッセージに従って第1のメディア使用装置によって選択される個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャを含む。
【００９９】
具体的には、香港サイトがただ1つの画面を有するテレプレゼンスサイトである場合、深センサイトの3つの個別メディアキャプチャのビデオ画像を、深センサイトの実物大画像の解像度に従って同時に映写することができない。したがって、深センサイトのすべてのコンテンツがただ1つの画面上に表示されることが予期され、この場合には、深センサイトの第1のメディア告知メッセージ内のマルチコンテンツ・メディア・キャプチャが選択される。香港サイトの会議端末といった第1のメディア使用装置によって送信される第1のメディア構成メッセージは、以下のコンテンツを含むことができる。
CaptureScene1
[
MCC1(VC0, VC1, VC2)
]
【０１００】
ステップ403：第1のメディア使用装置は、第1のメディア提供装置によって送信される、第1のメディア構成メッセージに従って選択された個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに対応するメディアストリームを受信し、表示する。
【０１０１】
具体的には、香港サイトの会議端末といった第1のメディア使用装置は、深センサイトのデバイスといった第1のメディア提供装置によって送信される、第1のメディア構成メッセージに従って選択された個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに対応するメディアストリームを受信する。例えば、VC0、VC1、およびVC2がMCC1画像切り替えの方式で複合され（ここでは、切り替え効果を提示するために時間的方式で複合することができる）、メディアストリームを用いて第1のメディア使用装置へ送信される。
【０１０２】
本実施形態においては、第1のメディア使用装置が第1のメディア提供装置によって送信された第1のメディア告知メッセージを受信し、第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、マルチコンテンツ・メディア・キャプチャは第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されており、第1のメディア使用装置は第1のメディア提供装置へ第1のメディア構成メッセージを送信し、第1のメディア構成メッセージは、第1のメディア告知メッセージに従って第1のメディア使用装置によって選択される個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャを含み、第1のメディア使用装置は、第1のメディア提供装置によって送信される、第1のメディア構成メッセージに従って選択された個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに対応するメディアストリームを受信し、表示する。したがって、各サイトがマルチコンテンツ・メディア・キャプチャを提供することができ、各サイトによって提供されるメディアキャプチャ間の切り替えが実現され、メディアコンテンツの受信者と送信者とが、切り替えコンテンツおよび切り替えポリシに関して折衝することができる。
【０１０３】
本発明によるマルチコンテンツメディア通信方法の実施形態5においては、図4に示す方法実施形態に基づき、第1のメディア使用装置は、第1のメディア告知メッセージに従って、会議端末上でメディアコンテンツ構成オプションを生成し、出席者によってなされた選択に従って第1のメディア構成メッセージを生成し、第1のメディア構成メッセージを第1のメディア提供装置、すなわち、会議センタへ送信し、メディアコンテンツ構成オプションは、マルチコンテンツ・メディア・キャプチャおよびマルチコンテンツ・メディア・キャプチャのための複合に際して含まれる個別メディアキャプチャに関する情報を含む。
【０１０４】
具体的には、MCUによって送信された第1のメディア告知メッセージを受信した後で、第1のメディア使用装置として働く会議端末が、第1のメディア告知メッセージに従ってサイト内の会議端末上でメディアコンテンツ構成オプションをさらに生成することができ、メディアコンテンツ構成オプションは例えば以下を含む。
【０１０５】
（1）メディア・キャプチャ・コンテンツ、例えば、利用可能な個別メディアキャプチャおよびマルチコンテンツ・メディア・キャプチャ。
【０１０６】
（2）複合ポリシ情報。この値は、「voice（音声）」とすることができる。すなわち、対応するMCUによって提供される切り替え告知メッセージ内のポリシが音声アクティビティと等しい。またこの値は「role（役割）」とすることもできる。すなわち、対応するMCUによって提供される切り替え告知メッセージ内のポリシは役割または役割／話し手と等しく、役割については、話し手、聞き手などといったさらに異なるオプションがあってもよく、役割だけが選択されてもよく、MCUは、優先順位に従って、切り替えのための役割タイプの画像を選択する。またこの値は「image quality（画像品質）」とすることもできる。すなわち、対応するMCUによって提供される第1のメディア告知メッセージはメディアキャプチャ画像品質に関する情報を含み、各サイトによって提供される第2のメディア告知メッセージもメディアキャプチャ画像品質に関する情報を含み、これは例えば、VC0{role=audience,capturearea=left, resolution=1080p}などであり、resolution=1080pは、画像解像度が1080pであることを指示する。あるいは、切り替えポリシの値を「round robin（ラウンドロビン）」とすることもでき、例えば、別のサイトのメディアキャプチャ画像がある時間に従ってあるサイト（会議の中心的話し手のサイト）において循環式に切り替えられる。
【０１０７】
（3）複合方式、例えば、時間的切り替えや空間的複合。
【０１０８】
（4）場面同期、例えば、場面同期がサポートされているサイトに従った切り替えや、メディアキャプチャが独立して切り替えられる画面に従った切り替え。
【０１０９】
サイトに従った切り替えは、サイトに従った全般的切り替えをいう。すなわち、同じサイトのメディアキャプチャ画像が受信者の画面上に同時に表示され、例えば、サイトの受信者が、全般的切り替えを行うために、サイトの画面受信能力に従って、ピアサイトのすべてのメディアキャプチャ画像を完全に表示することのできるサイトを選択する。
【０１１０】
画面に従った切り替えは、単一のメディアキャプチャ画像に従った切り替えをいう。
【０１１１】
各サイト出席者は、前述のオプションのうちの1つまたは複数のオプションの組み合わせを選択することができ、それらのオプションは、例えば、MCUによって提供される画像コンテンツプレビューをさらに含むことができる。
【０１１２】
本実施形態においては、第1のメディア使用装置が、第1のメディア告知メッセージに従って、会議端末上でメディアコンテンツ構成オプションを生成し、出席者によってなされた選択に従って第1のメディア構成メッセージを生成し、第1のメディア構成メッセージを第1のメディア提供装置、すなわち、会議センタへ送信し、メディアコンテンツ構成オプションは、マルチコンテンツ・メディア・キャプチャおよびマルチコンテンツ・メディア・キャプチャのための複合に際して含まれる個別メディアキャプチャに関する情報を含む。したがって、各サイトによって提供されるメディアキャプチャ間の切り替えが実現され、メディアコンテンツの受信者と送信者とが、切り替えコンテンツおよび切り替えポリシに関して折衝することができる。
【０１１３】
図5は、本発明による第1のメディア提供装置の実施形態1の概略的構造図である。本実施形態における第1のメディア提供装置は、各サイトの会議端末とすることができ、また、会議センタ、例えばMCUとすることもできる。図5に示すように、本実施形態における第1のメディア提供装置50は、送信モジュール501と受信モジュール502とを含むことができる。送信モジュール501は、第1のメディア使用装置へ第1のメディア告知メッセージを送信し、第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、マルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合される。受信モジュール502は、第1のメディア使用装置によって送信される第1のメディア構成メッセージを受信し、第1のメディア構成メッセージは、第1のメディア告知メッセージに従って第1のメディア使用装置によって選択される個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャを含む。送信モジュール501はさらに、受信モジュール502によって受信される第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに従って、第1のメディア使用装置へ対応するメディアストリームを送信する。
【０１１４】
本実施形態における第1のメディア提供装置は、図1に示す方法実施形態における技術的解決策を実行することができ、その実施原理および技術的効果は同様であり、ここでは繰り返さない。
【０１１５】
好ましくは、第1のメディア告知メッセージは、エントリ識別子を搬送する少なくとも1つのキャプチャ・シーン・エントリをさらに含み、各キャプチャ・シーン・エントリは、同じ画面で収集された少なくとも1つの個別メディアキャプチャおよび／または少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、
それに対応して、マルチコンテンツ・メディア・キャプチャのコンテンツは、複数の個別メディアキャプチャおよび／またはキャプチャ・シーン・エントリを含む。
【０１１６】
好ましくは、第1のメディア提供装置は具体的には会議センタであり、受信モジュール502はさらに、
送信モジュール501が第1のメディア使用装置へ第1のメディア告知メッセージを送信する前に、マルチパーティ会議において各サイトによって送信される第2のメディア告知メッセージを受信し、第2のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびに／またはキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、
それに対応して、第1のメディア提供装置は、第2のメディア告知メッセージに従って第1のメディア告知メッセージを生成する処理モジュール503をさらに含み、
処理モジュール503はさらに、異なるサイトの個別メディアキャプチャ間、マルチコンテンツ・メディア・キャプチャ間、およびキャプチャ・シーン・エントリ間で識別子競合が発生する場合に、第1のメディア告知メッセージ内の個別メディアキャプチャおよびマルチコンテンツ・メディア・キャプチャが各々一意のキャプチャ識別子を有し、キャプチャ・シーン・エントリが一意のエントリ識別子を有することを保証するように、会議センタにより再付番を行う。
【０１１７】
好ましくは、処理モジュール503はさらに、
個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャにしかるべく使用することのできる符号化、ならびに第1のメディア提供装置が同時に送信することのできるメディアストリームの数を決定するように、個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャにおいて符号化グループ属性情報を設定する。
【０１１８】
好ましくは、マルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合され、マルチコンテンツ・メディア・キャプチャが第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されることは、
複数の個別メディアキャプチャが時間的方式で、または空間的方式で複合されること、を含む。
【０１１９】
複合方式は、マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値を付加することによって設定され、マルチコンテンツ・メディア・キャプチャにおいて同時に符号化することのできる最大個別メディアキャプチャ数を指示する。最大キャプチャ数の属性値が1である場合、この属性値は、複数の個別メディアキャプチャが時間に従って複合されていることを指示し、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示する。
【０１２０】
好ましくは、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示することは、
異なる個別メディアキャプチャの空間的合成位置に関する情報を指示するためにマルチコンテンツ・メディア・キャプチャにキャプチャ領域属性を付加すること
を含む。
【０１２１】
好ましくは、マルチコンテンツ・メディア・キャプチャは、
マルチコンテンツ・メディア・キャプチャ内のコンテンツが表示される際に従う規則を決定するための複合ポリシ情報
をさらに含む。
【０１２２】
好ましくは、処理モジュール503はさらに、
第1のメディア告知メッセージがキャプチャ識別子を搬送する複数のマルチコンテンツ・メディア・キャプチャを含む場合、異なるマルチコンテンツ・メディア・キャプチャにおいて場面同期属性を設定し、同じ値の場面同期属性を有する異なるマルチコンテンツ・メディア・キャプチャは、切り替え後の個別メディアキャプチャが同じキャプチャシーンに由来することを保証するように、個別メディアキャプチャの切り替えを同時に行う。
【０１２３】
好ましくは、第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャの全部または一部である。
【０１２４】
図6は、本発明による第1のメディア使用装置の実施形態1の概略的構造図である。本実施形態における第1のメディア使用装置は各サイトの会議端末とすることができる。図6に示すように、本実施形態における第1のメディア使用装置60は、受信モジュール601と、送信モジュール602と表示モジュール603とを含むことができる。受信モジュール601は、第1のメディア提供装置によって送信される第1のメディア告知メッセージを受信し、第1のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびにキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、マルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されている。送信モジュール602は、第1のメディア提供装置へ第1のメディア構成メッセージを送信し、第1のメディア構成メッセージは、第1のメディア告知メッセージに従って第1のメディア使用装置によって選択される個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャを含む。受信モジュール601はさらに、第1のメディア提供装置によって送信される、第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに対応するメディアストリームを受信する。表示モジュール603は、第1のメディア提供装置によって送信される、第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャに対応するメディアストリームを表示する。
【０１２５】
本実施形態における第1のメディア使用装置は、図4に示す方法実施形態における技術的解決策を実行することができ、その実施原理および技術的効果は同様であり、ここでは繰り返さない。
【０１２６】
好ましくは、本実施形態において、第1のメディア使用装置60は、
第1のメディア告知メッセージに従って会議端末上でメディアコンテンツ構成オプションを生成し、出席者によってなされる選択に従って第1のメディア構成メッセージを生成する処理モジュール604、をさらに含むことができ、メディアコンテンツ構成オプションは、第1のメディア告知メッセージ内のマルチコンテンツ・メディア・キャプチャおよびマルチコンテンツ・メディア・キャプチャを形成するように複合されている個別メディアキャプチャに関する情報を含み、送信モジュール602はさらに、第1のメディア提供装置、すなわち会議センタへ第1のメディア構成メッセージを送信する。
【０１２７】
本実施形態における第1のメディア使用装置は、方法実施形態4における技術的解決策を実行することができ、その実施原理および技術的効果は同様であり、ここでは繰り返さない。
【０１２８】
好ましくは、第1のメディア告知メッセージは、エントリ識別子を搬送する少なくとも1つのキャプチャ・シーン・エントリをさらに含み、各キャプチャ・シーン・エントリは、同じ画面で収集された少なくとも1つの個別メディアキャプチャおよび／または少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、
それに対応して、マルチコンテンツ・メディア・キャプチャのコンテンツは、複数の個別メディアキャプチャおよび／またはキャプチャ・シーン・エントリを含む。
【０１２９】
好ましくは、送信モジュール602はさらに、
受信モジュール601が第1のメディア提供装置によって送信される第1のメディア告知メッセージを受信する前に、会議センタへ第2のメディア告知メッセージを送信し、第2のメディア告知メッセージは、キャプチャ識別子およびキャプチャ属性情報を搬送する少なくとも1つの個別メディアキャプチャ、ならびに／またはキャプチャ識別子を搬送する少なくとも1つのマルチコンテンツ・メディア・キャプチャを含み、そのため、会議センタは、第2のメディア告知メッセージに従って第1のメディア告知メッセージを生成する。
【０１３０】
好ましくは、マルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されており、マルチコンテンツ・メディア・キャプチャは、第1のメディア告知メッセージ内の複数の個別メディアキャプチャから複合されていることは、
複数の個別メディアキャプチャが時間的方式で、または空間的方式で複合されており、
複合方式は、マルチコンテンツ・メディア・キャプチャに最大キャプチャ数の属性値を付加することによって設定され、マルチコンテンツ・メディア・キャプチャにおいて同時に符号化することのできる最大個別メディアキャプチャ数を指示すること
を含む。最大キャプチャ数の属性値が1である場合、この属性値は、複数の個別メディアキャプチャが時間に従って複合されていることを指示し、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示する。
【０１３１】
好ましくは、最大キャプチャ数の属性値が1より大である場合、この属性値は、複数の個別メディアキャプチャが空間に従って複合されていることを指示することは、
異なる個別メディアキャプチャの空間的合成位置に関する情報を指示するためにマルチコンテンツ・メディア・キャプチャにキャプチャ領域属性を付加すること
を含む。
【０１３２】
好ましくは、マルチコンテンツ・メディア・キャプチャは、
マルチコンテンツ・メディア・キャプチャ内のコンテンツが表示される際に従う規則を決定するための複合ポリシ情報
をさらに含む。
【０１３３】
好ましくは、第1のメディア構成メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャは、
第1のメディア告知メッセージに含まれる個別メディアキャプチャおよび／またはマルチコンテンツ・メディア・キャプチャの全部または一部である。
【０１３４】
図7は、本発明によるマルチコンテンツメディア通信システムの実施形態1の概略的構造図1である。図8は、本発明によるマルチコンテンツメディア通信システムの実施形態1の概略的構造図2である。図7に示すように、本実施形態におけるシステムは、少なくとも1つの第1のメディア提供装置50と、少なくとも1つの第1のメディア使用装置60とを含む。第1のメディア提供装置50は、第1のメディア提供装置の構造実施形態における構造のいずれか1つを使用することができ、それに対応して、方法実施形態1および方法実施形態3における技術的解決策のいずれか1つを実行することができる。第1のメディア使用装置60は、第1のメディア使用装置の構造実施形態における構造のいずれか1つを使用することができ、それに対応して、方法実施形態4および方法実施形態5における技術的解決策のいずれか1つを実行することができる。その実施原理および技術的解決策は同様であり、ここでは繰り返さない。
【０１３５】
好ましくは、図8に示すように、本実施形態におけるシステムは、第1のメディア提供装置、すなわち会議センタをさらに含むことができ、会議センタは、第1のメディア提供装置の構造実施形態における構造のいずれか1つを使用することができ、それに対応して、方法実施形態2における技術的解決策を実行することができる。
【０１３６】
図9は、本発明による第1のメディア提供装置の実施形態1の概略的構造図である。図9に示すように、本実施形態において提供される第1のメディア提供装置90は、プロセッサ901とメモリ902とを含む。メモリ902は実行命令を記憶する。第1のメディア提供装置90が作動するときに、プロセッサ901はメモリ902と通信し、プロセッサ901は、第1のメディア提供装置90が本発明の方法実施形態1から方法実施形態3による技術的解決策のいずれか1つの方法を実行するように、メモリ902内の実行命令を呼び出す。その実施原理および技術的解決策は同様であり、ここでは繰り返さない。
【０１３７】
図10は、本発明による第1のメディア使用装置の実施形態1の概略的構造図である。図10に示すように、本実施形態において提供される第1のメディア使用装置100は、プロセッサ1001とメモリ1002とを含む。メモリ1002は実行命令を記憶する。第1のメディア使用装置100が作動するときに、プロセッサ1001はメモリ1002と通信し、プロセッサ1001は、第1のメディア使用装置100が本発明の方法実施形態4から方法実施形態5による技術的解決策のいずれか1つの方法を実行するように、メモリ1002内の実行命令を呼び出す。その実施原理および技術的解決策は同様であり、ここでは繰り返さない。
【０１３８】
本発明で提供されるいくつかの実施形態においては、開示の装置および方法を他のやり方で実現することもできることを理解すべきである。例えば、説明した装置実施形態は単なる例示にすぎない。例えば、ユニット分割は単なる論理的機能分割にすぎず、実際の実装に際しては他の分割も可能である。例えば、複数のユニットまたはコンポーネントを組み合わせ、または統合して別のシステムにする場合もあり、ある特徴が無視され、または実行されない場合もある。加えて、表示された、または論じられた相互結合または直接結合または通信接続を、いくつかのインターフェースを介して実現することもできる。装置間またはユニット間の間接結合または通信接続は、電気的形態、機械的形態、または他の形態として実現することができる。
【０１３９】
別々の部品として記述されたユニットは物理的に分離していてもそうでなくてもよく、ユニットとして表示された部品は、物理的ユニットであってもそうでなくてもよく、1つの位置に位置していてもよく、複数のネットワークユニット上に分散されていてもよい。ユニットの一部または全部を、各実施形態の解決策の目的を達成するための実際の必要に従って選択することもできる。
【０１４０】
加えて、本発明の各実施形態における機能ユニットを1つの処理ユニットへ統合することもでき、ユニットの各々が物理的に独立して存在していてもよく、または2つ以上のユニットが1つのユニットへ統合される。統合ユニットはハードウェアの形態で実現することもでき、ソフトウェア機能ユニットを組み合わせたハードウェアの形態で実現することもできる。
【０１４１】
前述の統合ユニットがソフトウェア機能ユニットの形態で実現される場合には、その統合ユニットをコンピュータ可読記憶媒体に記憶することができる。ソフトウェア機能ユニットは記憶媒体に記憶されており、（パーソナルコンピュータ、サーバ、ネットワークデバイスなどとすることができる）コンピュータデバイスまたはプロセッサ（processor）に、本発明の実施形態において記述されている方法のステップの一部を実行するよう命令するためのいくつかの命令を含む。前述の記憶媒体は、USBフラッシュドライブ、取り外し可能ハードディスク、読取り専用メモリ（Read-Only Memory、ROM）、ランダム・アクセス・メモリ（Random Access Memory、RAM）、磁気ディスク、光ディスクといった、プログラムコードを記憶することができる任意の媒体を含む。
【０１４２】
好都合で簡潔な説明を目的として、前述の機能モジュールの分割が例示のための一例として使用されており、実際の実装において、前述の機能は、異なるモジュールに割り振り、必要に応じて実装することができること、すなわち、装置の内部構造は、前述の機能の全部または一部を実装するために異なる機能モジュールへ分割されることを、当業者は明確に理解することができる。前述の装置の詳細な動作プロセスについては、前述の方法実施形態における対応するプロセスを参照することができ、ここでは詳細を繰り返さない。
【０１４３】
最後に、前述の実施形態は、本発明を限定するためのものではなく、本発明の技術的解決策を説明するためのものにすぎないことに留意すべきである。本発明は前述の実施形態に関連して詳細に説明されているが、当業者は、前述の実施形態において記述されている技術的解決策に対する改変、または、前述の実施形態に記述されている技術的解決策の一部または全部の技術的特徴に対する等価の置換を、そうした改変または置換が対応する技術的解決策の本質を本発明の実施形態の技術的解決策の範囲から逸脱させない限りにおいてさらに行いうることを理解するはずである。
【符号の説明】
【０１４４】
50  第1のメディア提供装置
501  送信モジュール
502  受信モジュール
503  処理モジュール
60  第1のメディア使用装置
601  受信モジュール
602  送信モジュール
603  表示モジュール
604  処理モジュール
90  第1のメディア提供装置
901  プロセッサ
902  メモリ
100  第1のメディア使用装置
1001  プロセッサ
1002  メモリ
【図１】
0006255616.tif 000002
【図２】
0006255616.tif 000003
【図３】
0006255616.tif 000004
【図４】
0006255616.tif 000005
【図５】
0006255616.tif 000006
【図６】
0006255616.tif 000007
【図７】
0006255616.tif 000008
【図８】
0006255616.tif 000009
【図９】
0006255616.tif 000010
【図１０】
0006255616.tif 000011