(57)【要約】【課題】パケット損失が生じた場合でもネットワークリソースが限られた状況の中で通信者が主観的に感じるコミュニティ全体の品質を維持する。【解決手段】メディア情報配信装置１０の発言者判別部１４により、各通信者端末３０Ａ〜３０Ｃからのメディア情報に基づいてこれらメディア情報のうちのいずれが発言者のものかどうかを判別し、各通信者端末３０Ａ〜３０Ｃからのメディア情報を符号化した符号化データを符号化部１５により生成する。そして冗長データ処理部１６により、符号化部１５で生成された符号化データのうち発言者判別部１４で判別された発言者の符号化データについて冗長データを生成し当該符号化データに付加し、冗長データが付加された発言者の符号化データと傍聴者の符号化データとを各通信者端末３０Ａ〜３０Ｃへ配信する。【選択図】  図１
2006080784.tif 000002
【特許請求の範囲】
【請求項１】
多地点に配置されている複数の通信者端末と通信ネットワークを介して接続し、これら通信者端末から送信された映像および音声を含むメディア情報を中継配信処理することにより前記各通信者端末に対して多地点映像コミュニケーションサービスを提供するメディア情報配信装置であって、
前記各通信者端末からのメディア情報に基づいて、これらメディア情報のうちのいずれが発言者のものかどうかを判別する発言者判別部と、
前記各通信者端末からのメディア情報を符号化した符号化データを生成する符号化部と、
前記符号化部で生成された符号化データのうち前記発言者判別部で判別された発言者の符号化データについて冗長データを生成し当該符号化データに付加する冗長データ処理部と、
前記冗長データ処理部で冗長データが付加された発言者の符号化データと前記符号化部からの発言者以外の傍聴者の符号化データとを前記各通信者端末へ配信する制御部と
を備えることを特徴とするメディア情報配信装置。
【請求項２】
請求項１に記載のメディア情報配信装置において、
前記各通信者端末からのメディア情報が発言者のものか傍聴者のものかに応じて、当該メディア情報に対する符号量を決定する符号量決定部をさらに備え、
前記符号化部は、前記符号量決定部で決定された符号量に基づき前記メディア情報を符号化した符号化データを生成する
ことを特徴とするメディア情報配信装置。
【請求項３】
多地点に配置されている複数の通信者端末と通信ネットワークを介して接続されるメディア情報配信装置で用いられ、これら通信者端末から送信された映像および音声を含むメディア情報を中継配信処理することにより前記各通信者端末に対して多地点映像コミュニケーションサービスを提供するメディア情報配信方法であって、
前記各通信者端末からのメディア情報に基づいて、これらメディア情報のうちのいずれが発言者のものかどうかを判別する発言者判別ステップと、
前記各通信者端末からのメディア情報を符号化した符号化データを生成する符号化ステップと、
前記符号化部で生成された符号化データのうち前記発言者判別部で判別された発言者の符号化データについて冗長データを生成し当該符号化データに付加する冗長データ処理ステップと、
前記冗長データ処理ステップで冗長データが付加された発言者の符号化データと前記符号化ステップからの発言者以外の傍聴者の符号化データとを前記各通信者端末へ配信する制御ステップと
を備えることを特徴とするメディア情報配信方法。
【請求項４】
請求項３に記載のメディア情報配信方法において、
前記各通信者端末からのメディア情報が発言者のものか傍聴者のものかに応じて、当該メディア情報に対する符号量を決定する符号量決定ステップをさらに備え、
前記符号化ステップは、前記符号量決定部で決定された符号量に基づき前記メディア情報を符号化した符号化データを生成する
ことを特徴とするメディア情報配信方法。
【発明の詳細な説明】
【技術分野】
【０００１】
近年、インターネットに代表される通信ネットワークにおけるアクセス回線のブロードバンド化に応じて、比較的容量の大きいストリーミング系の映像や音声を含むメディア情報の配信サービスが提供されつつある。特に、インターネットでは、そのアクセス回線を用いて複数の端末間で映像・音声メディアをやり取りする、いわゆるテレビ会議などの多地点映像コミュニケーションサービスが注目されている。
【０００２】
この種の多地点映像コミュニケーションサービスでは、通信者が会話する場合、傍聴者の映像に対してはあまり注目せず発言者の映像に注目して会話を進めることが多く、通信者間の立場によって映像の重要度が異なる。
従来、このような多地点映像コミュニケーションの特性に着目し、各通信者端末からの映像・音声を中継配信処理するメディア情報配信装置で、発言者の映像を他の傍聴者の映像より拡大して配信するようにしたものが提案されている（例えば、特許文献１など参照）。
【０００３】
これによれば、例えば通信者Ａが発言している期間については、通信者Ａの映像が他の通信者に比較して大きく画面表示され、通信者Ｂが発言している期間については、通信者Ｂの映像が他の通信者に比較して大きく画面表示される。
これにより、ネットワークリソースが限られた状況の中で、より鮮明な映像を得て臨場感あるコミュニケーションシステムが実現される。
【０００４】
なお、出願人は、本明細書に記載した先行技術文献情報で特定される先行技術文献以外には、本発明に関連する先行技術文献を出願時までに発見するには至らなかった。
【特許文献１】特開平５−１０３３２４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、このような従来技術では、通信ネットワーク内で発言者のメディア情報についてパケット損失が発生した場合、重要度の高い発言者の音声および映像に歪みが生じ、さらにはその損失したパケットの再送により途切れが生じるため、スムーズにコミュニケーションできず、多地点映像コミュニケーションサービスにおいて、通信者が主観的に感じるコミュニティ全体の品質が低下するという問題がある。
【０００６】
本発明はこのような課題を解決するためのものであり、多地点映像コミュニケーションサービスにおいて、パケット損失が生じた場合でもネットワークリソースが限られた状況の中で通信者が主観的に感じるコミュニティ全体の品質を維持できるメディア情報配信装置および方法を提供することを目的としている。
【課題を解決するための手段】
【０００７】
このような目的を達成するために、本発明にかかるメディア情報配信装置は、多地点に配置されている複数の通信者端末と通信ネットワークを介して接続し、これら通信者端末から送信された映像および音声を含むメディア情報を中継配信処理することにより各通信者端末に対して多地点映像コミュニケーションサービスを提供するメディア情報配信装置であって、各通信者端末からのメディア情報に基づいて、これらメディア情報のうちのいずれが発言者のものかどうかを判別する発言者判別部と、各通信者端末からのメディア情報を符号化した符号化データを生成する符号化部と、符号化部で生成された符号化データのうち発言者判別部で判別された発言者の符号化データについて冗長データを生成し当該符号化データに付加する冗長データ処理部と、冗長データ処理部で冗長データが付加された発言者の符号化データと符号化部からの発言者以外の傍聴者の符号化データとを各通信者端末へ配信する制御部とを備えている。
【０００８】
この際、各通信者端末からのメディア情報が発言者のものか傍聴者のものかに応じて、当該メディア情報に対する符号量を決定する符号量決定部をさらに設け、符号化部で、符号量決定部で決定された符号量に基づきメディア情報を符号化した符号化データを生成するようにしてもよい。
【０００９】
また、本発明にかかるメディア情報配信方法は、多地点に配置されている複数の通信者端末と通信ネットワークを介して接続されるメディア情報配信装置で用いられ、これら通信者端末から送信された映像および音声を含むメディア情報を中継配信処理することにより各通信者端末に対して多地点映像コミュニケーションサービスを提供するメディア情報配信方法であって、各通信者端末からのメディア情報に基づいて、これらメディア情報のうちのいずれが発言者のものかどうかを判別する発言者判別ステップと、各通信者端末からのメディア情報を符号化した符号化データを生成する符号化ステップと、符号化部で生成された符号化データのうち発言者判別部で判別された発言者の符号化データについて冗長データを生成し当該符号化データに付加する冗長データ処理ステップと、冗長データ処理ステップで冗長データが付加された発言者の符号化データと符号化ステップからの発言者以外の傍聴者の符号化データとを各通信者端末へ配信する制御ステップとを備えている。
【００１０】
この際、各通信者端末からのメディア情報が発言者のものか傍聴者のものかに応じて、当該メディア情報に対する符号量を決定する符号量決定ステップをさらに設け、符号化ステップは、符号量決定部で決定された符号量に基づきメディア情報を符号化した符号化データを生成するようにしてもよい。
【発明の効果】
【００１１】
本発明によれば、メディア情報配信装置において、各通信者端末から受信したメディア情報を符号化して各通信者端末へ配信する際、各メディア情報のうち発言者のメディア情報についてのみ、その符号化データに冗長データが付加されて配信されるため、発言者のメディア情報について冗長性を持たせて配信することができる。
これにより、発言者のメディア情報を傍聴者のそれに比較して、高い通信品質で配信することができるため、通信ネットワーク内でのパケット損失の発生に起因して、メディア情報に歪みや途切れが生じるような場合でも、コミュニケーションで重要となる発言者のメディア情報については歪みや途切れを抑制することができる。
【００１２】
したがって、多地点映像コミュニケーションサービスにおいて、パケット損失が生じた場合でも、ネットワークリソースが限られた状況の中で通信者が主観的に感じるコミュニティ全体の品質を維持することができる。
【発明を実施するための最良の形態】
【００１３】
次に、本発明の実施の形態について図面を参照して説明する。
［第１の実施の形態］
まず、図１を参照して、本発明の第１の実施の形態にかかるメディア情報配信装置について説明する。図１は、本発明の第１の実施の形態にかかるメディア情報配信装置の構成を示すブロック図である。
【００１４】
メディア情報配信装置（多地点接続装置／ＭＣＵ：Multipoint Communication Unit）１０は、全体としてサーバなどの情報処理装置からなり、インターネットに代表される通信ネットワーク２０を介して、異なる地点に配置されている複数の通信者端末３０（３０Ａ〜３０Ｃ）と接続し、これら通信者端末からの映像および音声を含むメディア情報を中継配信処理することにより多地点映像コミュニケーションサービスを提供する装置である。
通信者端末３０は、パソコンなどの情報処理端末装置からなり、所定のアプリケーションプログラムを実行することにより、メディア情報配信装置１０で提供される多地点映像コミュニケーションサービスを利用する装置である。
【００１５】
本実施の形態では、このメディア情報配信装置１０において、各通信者端末３０から受信したメディア情報を符号化して各通信者端末３０へ配信する際、各メディア情報の送信元通信者端末３０の通信者が発言者の場合にのみ、当該メディア情報を符号化して得られた符号化データに冗長性を持たせて配信するようにしたものである。
【００１６】
次に、図１を参照して、本実施の形態にかかるメディア情報配信装置１０の構成について説明する。以下では、３つの通信者端末３０Ａ〜３０Ｃが、メディア情報配信装置１０で提供される多地点映像コミュニケーションサービスを利用する場合を例として説明する。
【００１７】
このメディア情報配信装置１０には、通信インターフェース部（以下、通信Ｉ／Ｆ部という）１１、制御部１２、復号部１３、発言者判別部１４、符号化部１５、および冗長データ処理部１６が設けられている。
【００１８】
通信Ｉ／Ｆ部１１は、通信ネットワーク２０を介して各通信者端末３０Ａ〜３０Ｃと各種データを送受信することにより、通信者端末３０Ａ〜３０Ｃからのメディア情報を受信し、これらを合成したメディア情報を通信者端末３０Ａ〜３０Ｃへ配信する回路部である。
制御部１２は、ＣＰＵなどのマイクロプロセッサとその周辺回路を有し、記憶部（図示せず）から所定のプログラムを読み込んで実行することにより、上記ハードウェアとプログラムとを協働させて、所定の通信プロトコルに応じた各種通信処理を行う機能部である。
【００１９】
復号部１３は、通信Ｉ／Ｆ部１１および制御部１２を介して受信した各通信者端末３０Ａ〜３０Ｃからのメディア情報を復号する回路部である。
発言者判別部１４は、復号部１３で得られた各通信者端末３０からのメディア情報に含まれる音声のレベル、あるいはパケットに含まれるメディア情報のビットストリームに応じて、各メディア情報のうちのいずれが発言者のものであるかを判別する回路部である。
符号化部１５は、予め設定されている符号量に基づき、復号部１３で得られた各通信者端末３０Ａ〜３０Ｃからのメディア情報を符号化した符号化データを生成する回路部である。
【００２０】
冗長データ処理部１６は、符号化部１５で符号化されたメディア情報のうち、発言者の符号化データに対して冗長データを生成して付加する回路部である。
これら冗長データは、受信側でのエラー訂正に用いるための情報であり、ストリーミング系データ通信に適用可能で再送制御が不要となる公知の誤り訂正方式（例えばＦＥＣ：Forward Error Correctionなど）に基づき生成すればよい。受信側の通信者端末３０Ａ〜３０Ｃでは、本来の映像あるいは音声の符号化データが欠損した場合、上記誤り訂正方式に基づきこの冗長データを用いて欠損した符号化データが復元される。
【００２１】
なお、以上では、復号部１３、発言者判別部１４、符号化部１５、および冗長データ処理部１６が回路部から構成される場合を例として説明したが、これに限定されるものではない。これら各部のうちのいずれかまたはすべてを、前述した制御部１２で実現される機能部によりその一部またはすべてを構成してもよい。
【００２２】
［第１の実施の形態の動作］
次に、図２を参照して、本実施の形態にかかるメディア情報配信装置１０の動作について説明する。図２は、本実施の形態にかかるメディア情報配信装置１０の中継配信処理を示すフローチャートである。ここでは、発言者のメディア情報のうち映像および音声の両方の符号化データに冗長データを付加して配信する場合を例として説明する。
【００２３】
メディア情報配信装置１０は、まず、制御部１２により、通信ネットワーク２０および通信Ｉ／Ｆ部１１を介して、通信者端末３０Ａ〜３０Ｃからのメディア情報を受信し（ステップ１００）、復号部１３へ出力する。
復号部１３は、通信者ごとにメディア情報を復号し（ステップ１０２）、そのメディア情報を符号化部１５に出力するとともに、メディア情報のうちの音声については発言者判別部１４に出力する。発言者判別部１４は、音量の大きい通信者を発言者として判別し（ステップ１０３）、判別結果を符号化部１５と冗長データ処理部１６に出力する。
【００２４】
符号化部１５は、予め設定されている所定の符号量に応じた量子化ステップ幅を用いて、各通信者からのメディア情報を符号化し（ステップ１０４）、得られた符号化データを冗長データ処理部１６へ出力する。
冗長データ処理部１６は、入力された符号化データのうち発言者の符号化データについてのみ冗長データを生成して付加し、制御部１２へ出力する（ステップ１０５）。なお、冗長データ処理部１６では、傍聴者の符号化データについては冗長データを付加せずそのまま制御部１２へ出力する。
【００２５】
制御部１２は、冗長データが付加された発言者の符号化データを受け取るとともに、冗長データが付加されていない傍聴者の符号化データを受け取り、これら符号化データを、通信Ｉ／Ｆ部１１および通信ネットワーク２０を介して、各通信者端末３０Ａ〜３０Ｃへ配信する（ステップ１０６）。
【００２６】
このようにして、各通信者端末３０Ａ〜３０Ｃから送信されたメディア情報は、メディア情報配信装置１０で、逐次、上記のような中継配信処理が行われて各通信者端末３０Ａ〜３０Ｃへ配信される。この際、発言者のメディア情報については冗長性を持って配信される。
これにより、通信ネットワーク内でパケット損失が発生した場合でも、各通信者端末３０Ａ〜３０Ｃでは、発言者のメディア情報について、その冗長データに基づき誤り訂正処理が行われ、元のメディア情報が正常に復号されて通信者へ提供される。
【００２７】
したがって、メディア情報配信装置１０から配信されるメディア情報は、図３のように制御される。図３は、本実施の形態にかかるメディア情報配信装置でのメディア情報の配信制御を示すタイミングチャートである。
【００２８】
図３において、通信者Ａが発言している期間ＴＡでは、通信者Ａの符号化データに対して冗長データが付加されて配信され、傍聴者である通信者Ｂ，Ｃの符号化データについては冗長データなしで配信される。
その後、時刻Ｔに発言者が通信者Ａから通信者Ｂに切り替わった場合、それ以降の通信者Ｂが発言している期間ＴＢでは、通信者Ｂの符号化データに対して冗長データが付加されて配信され、傍聴者である通信者Ａ，Ｃの符号化データについては冗長データなしで配信される。
【００２９】
このように、本実施の形態では、メディア情報配信装置１０において、各通信者端末３０から受信した各メディア情報を符号化して各通信者端末３０へ配信する際、各メディア情報の送信元通信者端末３０の通信者が発言者の場合にのみ、その符号化データに冗長データを付加して配信するようにしたので、発言者のメディア情報に冗長性を持たせて配信することができる。
【００３０】
これにより、発言者のメディア情報を傍聴者のそれに比較して、高い通信品質で配信することができるため、通信ネットワーク内でのパケット損失の発生に起因して、メディア情報に歪みや途切れが生じるような場合でも、コミュニケーションで重要となる発言者のメディア情報については歪みや途切れを抑制することができる。
したがって、多地点映像コミュニケーションサービスにおいて、パケット損失が生じた場合でも、ネットワークリソースが限られた状況の中でネットワークリソースの増大を必要とすることなく、通信者が主観的に感じるコミュニティ全体の品質を維持することができる。
【００３１】
［第２の実施の形態］
次に、図４を参照して、本発明の第２の実施の形態にかかるメディア情報配信装置について説明する。図４は、本発明の第２の実施の形態にかかるメディア情報配信装置の構成を示すブロック図である。
前述した第１の実施の形態では、発言者のメディア情報について冗長性を持たせて配信する場合について説明した。本実施の形態では、発言者のメディア情報について冗長性を持たせて配信する際、発言者か否かに応じて当該通信者のメディア情報の符号量を調整する場合について説明する。
【００３２】
ネットワークリソースが限られた状況の中で、メディア情報配信装置１０から各通信者のメディア情報を配信するとともに発言者の冗長データを配信する場合、冗長データを配信しない場合と比較して、より多くのネットワークリソースを必要とする。したがって、量子化ステップ幅などを調整して各通信者のメディア情報の符号量を一律に削減し、その削減分のネットワークリソースで冗長データを配信する方法が考えられる。しかし、各通信者のメディア情報の符号量を一律に削減した場合、発言者のメディア情報が劣化するため、通信者が主観的に感じるコミュニティ全体の品質が低下する。
【００３３】
本実施の形態では、メディア情報について冗長性を持たせて配信する際、発言者か否かに応じて当該通信者のメディア情報の符号量を調整し、傍聴者の符号量に比較して発言者の符号量を多くするよう調整している。
本実施の形態にかかるメディア情報配信装置１０（図４参照）には、前述した第１の実施の形態にかかるメディア情報配信装置１０（図１参照）と比較して符号量決定部１７が追加されている。なお、図４において、図１と同じまたは同等部分には同一符号を付してあり、詳細な説明については省略する。
【００３４】
符号量決定部１７は、発言者判別部１４での判別結果に応じて、各通信者端末からのメディア情報に対する符号量を決定する回路部である。
符号量とは、例えば映像（画像）の場合、その映像を構成する１画素（１ピクセル）あたりに用いるビット数（bits/pel：pel=pixel element）であり、映像（画像）の精細度を左右する。この符号量が大きい場合は、１画素を表現するために用いるデータ量が多くなり映像が精細になる。逆に、符号量が小さい場合は、１画素を表現するために用いるデータ量が少なくなり映像が粗くなる。
【００３５】
デジタル映像の符号化方式として広く用いているＭＰＥＧ（Moving Picture Expert Group）などの符号化方式では、入力された映像データをＤＣＴ（離散余弦変換：Discrete Cosine Transform）処理などの周波数変換処理を行った後に量子化し、これを２次元ハフマン符号に割り当てることにより元の映像データを圧縮処理しており、ＩＴＵ−Ｔ  Ｈ．２６Ｘシリーズ、モーションＪＰＥＧ（Motion-JPEG:Joint Photographic Experts Group）、あるいはＪＰＥＧ２０００などの符号化方式でも同様である。
【００３６】
量子化処理では、ＤＣＴ処理で得られた各ＤＣＴ係数を、デフォルトで設定されている量子化テーブルの対応する量子化係数でそれぞれ除算することにより量子化している。したがって、高周波数成分に対応する量子化係数を大きくしておくことにより、除算結果のうち高周波成分のＤＣＴ係数に対する除算結果が小さくなって、その値を表現するのに必要な情報量も少なくなり、結果として圧縮されたことになる。
【００３７】
上記量子化処理では、量子化テーブルの量子化係数を調整することにより、圧縮の度合いを制御する符号量制御方式が利用されている。例えば、デフォルトの量子化係数を少し大きくすれば、上記除算結果が小さくなるＤＣＴ係数が多くなり圧縮率が増加し、結果として符号量が小さくなる。逆にデフォルトの量子化係数を少し小さくすれば、上記除算結果が小さくなるＤＣＴ係数が少なくなり圧縮率が低下し、結果として符号量が大きくなる。
【００３８】
本実施の形態では、このような量子化係数の調整幅すなわち量子化ステップ幅を、符号量決定部１７で決定された符号量に応じて制御することにより、発言者および傍聴者に対する符号量を制御している。
なお、ＭＰＥＧ以外の符号化方式でも、上記と同様に量子化処理において符号量を制御するパラメータが用意されており、これらパラメータを用いて符号量を制御すればよい。例えば、ＪＰＥＧ２０００では、ＤＣＴ処理に代えてウェーブレット変換処理が用いられているが、この場合も上記と同様の量子化ステップ幅を用いて符号量を制御できる。
【００３９】
［第２の実施の形態の動作］
次に、図５を参照して、本実施の形態にかかるメディア情報配信装置１０の動作について説明する。図５は、本実施の形態にかかるメディア情報配信装置１０の中継配信処理を示すフローチャートである。前述した図２中継配信処理と比較して、ステップ１０３とステップ１０４との間に、メディア情報の符号量を決定するための処理としてステップ１１０が追加されている。なお、図５において、図２と同じまたは同等部分については同一符号を付してある。ここでは、発言者のメディア情報のうち映像および音声の両方の符号化データに冗長データを付加して配信する場合を例として説明する。
【００４０】
メディア情報配信装置１０は、まず、制御部１２により、通信ネットワーク２０および通信Ｉ／Ｆ部１１を介して、通信者端末３０Ａ〜３０Ｃからのメディア情報を受信し（ステップ１００）、復号部１３へ出力する。
復号部１３は、通信者ごとにメディア情報を復号し（ステップ１０２）、そのメディア情報を符号化部１５に出力するとともに、メディア情報のうちの音声については発言者判別部１４に出力する。発言者判別部１４は、音量の大きい通信者を発言者として判別し（ステップ１０３）、判別結果を符号化部１５、冗長データ処理部１６、および符号量決定部１７に出力する。
【００４１】
ここで、符号量決定部１７は、発言者判別部１４からの判別結果に基づき、各通信者のうち傍聴者のメディア情報の符号化に用いる符号量を、発言者の符号量より小さく設定する（ステップ１１０）。
符号化部１５は、発言者および傍聴者ごとに符号量決定部１７によって設定された符号量に応じた量子化ステップ幅を個別に用いて、発言者および傍聴者からのメディア情報をそれぞれ符号化し（ステップ１０４）、得られた符号化データを冗長データ処理部１６へ出力する。
【００４２】
冗長データ処理部１６は、入力された符号化データのうち発言者の符号化データについてのみ冗長データを生成して付加し、制御部１２へ出力する（ステップ１０５）。なお、冗長データ処理部１６では、傍聴者の符号化データについては冗長データを付加せずそのまま制御部１２へ出力する。
制御部１２は、冗長データが付加された発言者の符号化データを受け取るとともに、冗長データが付加されていない傍聴者の符号化データを受け取り、これら符号化データを、通信Ｉ／Ｆ部１１および通信ネットワーク２０を介して、各通信者端末３０Ａ〜３０Ｃへ配信する（ステップ１０６）。
【００４３】
このようにして、各通信者端末３０Ａ〜３０Ｃから送信されたメディア情報は、メディア情報配信装置１０で、逐次、上記のような中継配信処理が行われて各通信者端末３０Ａ〜３０Ｃへ配信される。この際、発言者に比較して傍聴者のメディア情報の符号量が少なくなるよう配信されるとともに、発言者のメディア情報については冗長性を持って配信される。
【００４４】
したがって、符号量の調整を行わない本発明の第１の実施の形態にかかるメディア情報配信装置１０と、上記のような符号量の調整を行う本発明の第２の実施の形態にかかるメディア情報配信装置１０とでは、冗長データを付加する際に図６および図７のような制御が行われる。図６は、符号量の調整を行わない場合（第１の実施の形態）の冗長データの付加制御を示す説明図である。図７は、符号量の調整を行う場合（第２の実施の形態）の冗長データの付加制御を示す説明図である。なお、これら図６，図７では、ネットワークリソースが限られた状況を想定し、冗長データを付加した場合でもネットワークリソース（通信帯域幅）は拡張されず、配信可能な全符号量を増加できない場合を前提としている。
【００４５】
まず、図６に示すように、冗長データを付加しない場合、メディア情報配信装置１０から各通信者端末３０Ａ〜３０Ｃへ配信できる全符号量をＷとし、これを各通信者からのメディア情報の符号化データで均等に使用した場合、各通信者の符号量ＷＤは、ＷＤ＝Ｗ／３となる。このとき各通信者の量子化ステップ幅をＳとする。
【００４６】
次に、各通信者の符号量を調整せずに冗長データを付加する場合、各通信者で同じＳより大きい量子化ステップ幅Ｓ’を用いて、各通信者の符号量を上記ＷＤより小さいＷＤ’とし、その余剰分を利用して、発言者この場合は通信者Ａの冗長データを配信することになる。したがって、冗長データの符号量をＷＰとした場合、冗長データを付加した際の発言者である通信者Ａの符号量ＷＡは、ＷＤ’＝（Ｗ−ＷＰ）／３となり、冗長データを付加しない場合の符号量ＷＤより小さくなる。これにより、冗長データを付加しない場合と比較して発言者の符号量が低減し、受信側において発言者のメディア情報も傍聴者と同程度に低精細となる。
【００４７】
一方、図７において、各通信者の符号量を調整して冗長データを付加する場合、傍聴者となる通信者Ｂ，ＣでＳより大きい量子化ステップ幅Ｓ’（＞Ｓ）を用いて通信者Ｂ，Ｃの符号量をＷＤより小さいＷＤ’とし、その余剰分を利用して、発言者である通信者Ａの符号データと冗長データを配信することになる。この際、傍聴者のＳ’を調整すれば、発言者である通信者ＡでＳと等しい量子化ステップ幅Ｓ”（＝Ｓ）を用いることができる。したがって、冗長データを付加した際の発言者である通信者Ａの符号量ＷＡは、ＷＤ’＝Ｗ−２・ＷＤ’−ＷＰで表され、冗長データを付加しない場合の符号量ＷＤと等しくなる。
【００４８】
このように、本実施の形態では、メディア情報配信装置１０において、メディア情報について冗長性を持たせて配信する際、発言者か否かに応じて当該通信者のメディア情報の符号量を調整し、発言者の符号量に比較して傍聴者の符号量が少なくなるよう調整するようにしたので、受信側において傍聴者のメディア情報の精細度が低下するものの、発言者のメディア情報については所望の精細度を得ることができる。したがって、各通信者のメディア情報の符号量を一律に削減した場合と比較して、冗長データを付加した場合でも発言者のメディア情報の劣化を抑制でき、通信者が主観的に感じるコミュニティ全体の品質の低下を抑制することができる。
【００４９】
なお、前述した各実施の形態では、発言者のメディア情報のうち映像および音声の両方について冗長データを生成して付加する場合を例として説明したが、これに限定されるものではなく、例えば冗長データ処理部１６において、映像または音声のいずれか一方についてのみ冗長データを生成して付加するようにしてもよく、前述と同様の作用効果が得られる。
【００５０】
また、前述した第２の実施の形態では、図７において、冗長データを付加する場合の発言者の量子化ステップ幅Ｓ”について冗長データを付加しない場合のＳと等しくした場合について説明したが、これに限定されるものではなく、傍聴者の量子化ステップ幅Ｓ’より小さい量子化ステップ幅Ｓ”＜Ｓ’を用いれば、前述した作用効果を得ることができる。したがって、Ｓ”とＳとの関係はあまり重要ではなく、Ｓ”＜Ｓ＜Ｓ’であっても、Ｓ＜Ｓ”＜Ｓ’であってもよい。発言者の量子化ステップ幅Ｓ”としてＳ”＞Ｓを用いた場合、発言者の符号量ＷＤ”は、Ｗを等分した際のＷＤより大きくなり、発言者のメディア情報としてより精細なメディア情報を配信できる。
【００５１】
なお、メディア情報配信時において、冗長データが付加されない期間が存在する場合、図６や図７のように、各通信者の符号量ＷＤを等しくする必要はなく、例えば通信者ごとに個別の符号量ＷＤを用いてもよい。
また、冗長データを付加する際、図６では各通信者の符号量ＷＤ’を等しくした場合、図７では各傍聴者の符号量ＷＤ’を等しくした場合を、それぞれ例として説明したが、これに限定されるものではなく、例えば通信者ごとあるいは傍聴者ごとに個別の符号量ＷＤ’を用いてもよく、前述と同様の作用効果が得られる。
【００５２】
また、前述した各実施の形態では、発言者が１人の場合を例として説明したが、発言者が複数の場合でも、前述と同様にして各実施の形態を適用でき、前述と同様の作用効果が得られる。特に、第２の実施の形態では、発言者が複数の場合でも、Ｓ”＜Ｓ’の関係を維持しつつＳ”，Ｓ’を調整することにより、冗長データを付加した場合でも発言者のメディア情報の劣化を抑制でき、通信者が主観的に感じるコミュニティ全体の品質の低下を抑制することができる。
【図面の簡単な説明】
【００５３】
【図１】本発明の第１の実施の形態にかかるメディア情報配信装置の構成を示すブロック図である。
【図２】本発明の第１の実施の形態にかかるメディア情報配信装置の中継配信処理を示すフローチャートである。
【図３】本発明の第１の実施の形態にかかるメディア情報配信装置での映像・音声の配信制御を示すタイミングチャートである。
【図４】本発明の第２の実施の形態にかかるメディア情報配信装置の構成を示すブロック図である。
【図５】本発明の第２の実施の形態にかかるメディア情報配信装置の中継配信処理を示すフローチャートである。
【図６】本発明の第１の実施の形態にかかるメディア情報配信装置での冗長データの付加制御を示す説明図である。
【図７】本発明の第２の実施の形態にかかるメディア情報配信装置での冗長データの付加制御を示す説明図である。
【符号の説明】
【００５４】
１０…メディア情報配信装置、１１…通信Ｉ／Ｆ部、１２…制御部、１３…復号部、１４…発言者判別部、１５…符号化部、１６…冗長データ処理部、１７…符号量決定部、２０…通信ネットワーク、３０Ａ〜３０Ｃ…通信者端末。
【図１】
2006080784.tif 000003
【図２】
2006080784.tif 000004
【図３】
2006080784.tif 000005
【図４】
2006080784.tif 000006
【図５】
2006080784.tif 000007
【図６】
2006080784.tif 000008
【図７】
2006080784.tif 000009