(57)【要約】  符号化ビデオデータを生成する方法は、ビデオデータを収集するステップと、前記収集されたビデオデータを識別するタグを生成するステップと、異なるビデオクオリティレベルを表す少なくとも２つの符号化データセットを生成するため、前記収集されたビデオデータを符号化するステップと、前記タグを各符号化ビデオデータセットに添付するステップとを有する。タグは、好ましくは一意的であり、収集されたビデオデータから導出されるかもしれない。
2009521174.tif 000002
【特許請求の範囲】
【請求項１】
符号化ビデオデータを生成する方法であって、
ビデオデータを収集するステップと、
前記収集されたビデオデータを識別するタグを生成するステップと、
異なるビデオクオリティレベルを表す少なくとも２つの符号化データセットを生成するため、前記収集されたビデオデータを符号化するステップと、
前記タグを各符号化ビデオデータセットに添付するステップと、
を有する方法。
【請求項２】
前記タグは、前記収集されたビデオデータから導出され、好ましくは、フィンガープリント技術により生成される、請求項１記載の方法。
【請求項３】
前記タグは、データパケット又はストリームのユーザデータセクションに挿入される、請求項１記載の方法。
【請求項４】
前記タグは一意的なものである、請求項１記載の方法。
【請求項５】
復号化ビデオデータを生成する方法であって、
タグ情報を検出するため、入力ビデオストリームを構文解析するステップと、
前記検出されたタグ情報に応じて各ビデオストリームを復号化するステップと、
を有する方法。
【請求項６】
同一のタグ又はタグの同一の部分を有する異なるビデオクオリティレベルを表す異なる符号化データセットを関連付けるステップをさらに有する、請求項５記載の方法。
【請求項７】
請求項１記載の方法を実行するコンピュータプログラム。
【請求項８】
符号化ビデオデータを生成する装置であって、
ビデオデータを収集するデータ収集ユニットと、
前記収集されたビデオデータを識別するタグを生成するビデオ解析ユニットと、
異なるビデオクオリティレベルを表す少なくとも２つの符号化データセットを生成するため、前記収集されたビデオデータを符号化する符号化ユニットと、
前記タグを各符号化ビデオデータセットに添付するデータ挿入ユニットと、
を有する装置。
【請求項９】
前記ビデオ解析ユニットは、前記収集されたビデオデータから前記タグを導出するよう構成される、請求項８記載の装置。
【請求項１０】
復号化ビデオデータを生成する装置であって、
タグ情報を検出するため、入力ビデオストリームを構文解析する構文解析ユニットと、
各入力ビデオストリームを復号化する復号化ユニットと、
前記検出されたタグ情報に応じて各入力ビデオストリームを復号化ユニットに転送する接続ユニットと、
を有する装置。
【請求項１１】
請求項８記載のビデオ符号化装置及び／又は請求項１０記載のビデオ復号化装置を有するビデオシステム。
【請求項１２】
相互に関連するビデオストリームを識別するタグを有する信号。
【請求項１３】
各ビデオパケットは、復号化後に最後の残りのビデオ関連パケットヘッダにおいて、前記パケットが特定のプログラム又はマルチメディアコンテンツアイテムの異なるビデオクオリティレベルを表す対応する符号化データセットに属することを識別するタグを有する、請求項１２記載の信号。
【請求項１４】
請求項１２又は１３記載の信号が格納されるデータキャリア。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ビデオ符号化及び復号化に関する。より詳細には、本発明は、基本となるビデオクオリティを提供するベースレイヤと付加的なビデオクオリティを提供するエンハンスメントレイヤなどの少なくとも２つのレイヤを構成するビデオデータを符号化する装置及び方法に関する。
【背景技術】
【０００２】
ビデオストリームやビデオフレームなどのビデオデータを符号化することは周知である。ビデオデータは、動画像、静止画像又はその両方を表すかもしれない。ビデオデータは、典型的には、データ量を減少させるため、伝送又は格納前に符号化される。複数の規格が符号化及び圧縮を規定し、最も有力なものはＭＰＥＧ−２とＭＰＥＧ−４である。（ｈｔｔｐ：／／ｗｗｗ．ｃｈｉａｒｉｇｌｉｏｎｅ．ｏｒｇ／ｍｐｅｇを参照されたい。）
【０００３】
ＭＰＥＧ規格は、スケーラブルなビデオ、すなわと、第１又はベースレイヤが低クオリティ（低解像度など）ビデオを提供し、第２又はエンハンスメントレイヤがベースレイヤと合成されるとより高いクオリティ（高解像度など）ビデオを可能にする少なくとも２つのレイヤに符号化されたビデオを規定する。複数のエンハンスメントレイヤが、利用可能である。
【０００４】
各チャネルが個々の画像又はビデオシーケンスを表す複数のビデオチャネルが、異なるソースから送信され、同時に所与の宛先において処理されるかもしれない。例えば、ホームストレージ装置から送信される第１ビデオシーケンス、衛星オペレータにより放送される第２ビデオシーケンス及びインターネットを介し送信される第３ビデオシーケンスのすべてが、テレビ装置により受信可能であり、１つのビデオシーケンスがメイン画面に表示され、他の２つのビデオシーケンスが、ＰｉＰ（Ｐｉｃｔｕｒｅ−ｉｎ−Ｐｉｃｔｕｒｅ）などの補助画面に表示される。各チャネルは、典型的には、２以上のレイヤを有するため、多数のビデオレイヤが同時に送信されるかもしれない。
【０００５】
宛先は、ビデオレイヤと同数のデコーダを起動することが可能である。各デコーダインスタンス、すなわち、所与のレイヤのデコーダの各起動は、宛先における個別のプロセッサにより実現可能である（パラレルデコーダインスタンス）。あるいは、各デコーダインスタンスは、共通のプロセッサを使用して異なる時点で実現されてもよい（シーケンシャルデコーダインスタンス）。
【０００６】
複数のレイヤを受け取ったデコーダは、ベースレイヤとエンハンスメントレイヤとの間の関係、すなわち、何れのエンハンスメントレイヤが何れのベースレイヤに属するか、を判断することができる必要がある。データパケットレベルでは、データストリームの各パケットを当該ストリームの一部として識別するパケット識別子（ＰＩＤ）を使用して行われるかもしれない。しかしながら、複数のビデオストリームが復号装置により受信されるとき、ベースレイヤとエンハンスメントレイヤとの関係は規定されておらず、所望のクオリティレベルによるビデオストリームの復号化は不可能である。
【０００７】
周知のＭＰＥＧ−４規格は、一意的な数値による識別子（エレメンタリストリームＩＤ）などのストリームデータのソースに関する情報を含むエレメンタリストリーム記述子（ｅｌｅｍｅｎｔａｒｙ  ｓｔｒｅａｍ  ｄｅｓｃｒｉｐｔｏｒ）について記述していることに留意されたい。この規格は、エレメンタリストリーム記述子へのリファレンスを利用して、例えば、スケーラブルなオブジェクト表現におけるエンハンスメントストリームのベースストリームへの依存を示すなど、ストリーム間の依存性を示すことを提案している。しかしながら、依存性についてこれらのエレメンタリストリーム記述子の使用は、特にデータが他の規格のフォーマットによるものであるとき、典型的なビデオデータでは規定されていない可能性があるオブジェクトに限定される。さらに、エレメンタリストリーム記述子は、ＭＰＥＧ−４規格によるスケーラブルデコーダにおいてのみ利用可能である。実際、これら相対的に複雑なスケーラブルデコーダは、しばしば複数の非スケーラブルデコーダに置換される。しかしながら、これは、エレメンタリストリーム記述子とそれらの依存性の指標の使用を妨げる。
【発明の開示】
【発明が解決しようとする課題】
【０００８】
本発明の課題は、上記及び他の従来技術の問題点を解決し、第１レイヤと何れかの第２レイヤとの関係をモニタ及び維持することを可能にするビデオ符号化装置及び方法を提供することである。
【課題を解決するための手段】
【０００９】
従って、本発明は、符号化ビデオデータを生成する方法であって、ビデオデータを収集するステップと、前記収集されたビデオデータを識別するタグを生成するステップと、異なるビデオクオリティレベルを表す少なくとも２つの符号化データセットを生成するため、前記収集されたビデオデータを符号化するステップと、前記タグを各符号化ビデオデータセットに添付するステップとを有する方法を提供する。
【００１０】
収集されたビデオデータを識別するタグを生成し、このタグを各符号化ビデオデータセットに添付することによって、各セットは、それらに共通のタグにより識別可能となる。すなわち、共通のタグは、何れのエンハンスメントレイヤが所与のベースレイヤに属するか決定することを可能にする。
【００１１】
タグ又は識別子は、好ましくは、他の同一のタグとの可能性のある混同を回避するため、一意的なものである。もちろん、実際には、一意性は利用可能なビット数及び適用可能な他の何れかの制約により制限されるが、これらの制約の範囲内で、タグの重複は好ましくは回避される。このため、タグは、例えば、ハッシュ関数や入力データセットに基づき１つの値を生成する他の何れか適切な関数を利用して、収集されたデータから一意的に導出されることが好ましい。あるいは、タグは、カウンタ値、カウンタ値から導出される値、又は乱数が想定されるかもしれない。乱数が使用されるとき、好ましくは、タグの偶然的な重複を回避するための措置がとられる。
【００１２】
特定のビデオチャネル又はビデオストリームを識別する１つのタグの代わりに、複数の相互に関連するタグが利用可能である。各タグは、例えば、固定された共通部分と、シーケンス番号などの可変的な個別部分とを有することが可能である。タグはまた、データ記述子セットを有することが可能である。既知のフィンガープリント技術が、タグを構成するのに利用可能である。
【００１３】
タグを収集されたデータに添付することは、各種方法により実現可能である。タグは符号化データの適切な位置に添付又は挿入されるか、又は符号化データの一部若しくはすべてが送信されるデータパケットに挿入されることが好ましい。ＭＰＥＧ準拠システムでは、タグは、ＭＰＥＧ４等により設けられるデータパケット又はストリームのユーザデータセクションに挿入可能である。
【００１４】
本発明はまた、上述した方法を実行するコンピュータプログラムを提供する。コンピュータプログラムは、ＣＤやＤＶＤなどのデータキャリアに格納されるコンピュータにより実行可能な命令セットを有するかもしれない。プログラム可能なコンピュータが上述した方法を実行することを可能にするコンピュータにより実行可能な命令セットはまた、リモートサーバからインターネットなどを介しダウンロードするため利用可能であるかもしれない。
【００１５】
本発明はさらに、符号化ビデオデータを生成する装置であって、ビデオデータを収集するデータ収集ユニットと、前記収集されたビデオデータを識別するタグを生成するビデオ解析ユニットと、異なるビデオクオリティレベルを表す少なくとも２つの符号化データセットを生成するため、前記収集されたビデオデータを符号化する符号化ユニットと、前記タグを各符号化ビデオデータセットに添付するデータ挿入ユニットとを有する装置を提供する。
【００１６】
ビデオ解析ユニットは、好ましくは、収集されたビデオデータから導出可能な実質的に一意的なタグを生成するよう構成される。このタグは、各セットの関係が容易に確立されるように、各出力データセット（符号化ビデオデータ）に添付される。タグをデータに添付することによって、データパケット又は他の伝送フォーマットへの依存が解消される。
【００１７】
本発明はまた、上述した装置を有するビデオシステムと共に、上述したタグを有する信号を提供する。
【発明を実施するための最良の形態】
【００１８】
図１に概略的に示される従来技術によるビデオ復号化装置１は、一緒になってスケーラブルな符号化ビデオ信号を構成する入力信号ＢＬ（Ｂａｓｅ  Ｌａｙｅｒ）、ＥＬ１（Ｅｎｈａｎｃｅｍｅｎｔ  Ｌａｙｅｒ  １）及びＥＬ２（Ｅｎｈａｎｃｅｍｅｎｔ  Ｌａｙｅｒ  ２）を受け付けるための３つの入力ターミナルを有する単一の一体化された復号化（ＤＥＣ）ユニット１０を有する。このような一体化されたビデオ復号化ユニットは、例えば、ＭＰＥＧ−４規格に規定され、実現するのがやや難しい。上記及び他の理由のため、実際には、一体化されたビデオデコーダは、図２及び３に示されるような複合的なデコーダと置換されている。
【００１９】
図２に概略的に示される従来技術による複合型のデコーダ１’は、各入力信号ＢＬ、ＥＬ１及びＥＬ２をそれぞれ復号化する３つの異なるビデオ復号化（ＤＥＣ）ユニット１１、１２及び１３を有する。復号化されたビデオ信号ＢＬ及びＥＬ１が、必要に応じて、それぞれアップサンプリングユニット１７及び１８においてアップサンプリングされる。アップサンプリングユニット１７及び１８は、第１合成ユニット１９ａに組み合わされる。図示された実施例では、最も高いレベルの入力信号（エンハンスメントレイヤ）であるＥＬ２はアップサンプリングされず、復号化されたビデオ（ＤＶ）出力信号を生成するため、第２合成ユニット１９ｂにおいてアップサンプリング及び合成された信号ＢＬ及びＥＬ１と合成される。
【００２０】
あるいは、図３に示されるように、復号化及びアップサンプリングされた各信号ＢＬ、ＥＬ１及びＥＬ２を合成するため、１つの合成ユニット１９しか利用しなくてもよい。いくつかの実施例では、最も高いレベルの入力信号ＥＬ２もまたアップサンプリングされるかもしれないが、これは図３の例では該当しないことに留意されたい。
【００２１】
図２及び３の復号化装置１’は、相対的にシンプルであるという効果を提供し、図１の装置１’’より経済的に実現可能である。しかしながら、図２及び３の装置１’は、典型的には、ＭＰＥＧ−４規格に規定されるなど、オブジェクト間の関係を追跡するなど高度な機能を提供することはできない。
【００２２】
この問題を解決するため、本発明は、入力信号間の相互関係をモニタ及びチェックすることを可能にするタグを提供することが可能な符号化装置を提供する。本発明はまた、関連する入力信号を示すタグを検出可能なビデオ復号化装置を提供する。
【００２３】
図４において単に限定的でなく例示されるビデオ符号化装置２は、入力ビデオストリームＶＳを受け取り、成分信号ＢＬ、ＥＬ１及びＥＬ２を有するレイヤ化された（すなわち、スケーラブルな）符号化ビデオ出力信号を生成する従来の符号化（ＥＮＣ）ユニットであるかもしれない符号化ユニット２０を有する。符号化ユニット２０は、符号化されるデータを収集するよう構成されるデータ収集（ＤＣ）ユニット２１を有する。
【００２４】
従来の符号化ユニットと対照的に、図４のデータ収集ユニット２１は、収集されたデータを符号化ユニット２０の適切な部分だけでなく、ビデオ解析（ＶＡ）ユニット２３にも転送する。ビデオ解析ユニット２３は、ビデオストリームＶＳを一意的に又は実質的に一意的に特定するタグを生成する。ビデオ解析ユニット２３は、適切なタグを生成するため、カウンタ又は乱数生成手段を有することが可能であるが、タグは、好ましくは、以下でより詳細に説明されるように、一意的な数又は他の識別子を生成するため、収集されたデータから導出される。
【００２５】
データ挿入（ＤＩ）ユニット２２は、符号化ユニット２０から符号化データと共に、ビデオ解析ユニット２３からタグを受け取り、このタグを出力信号ＢＬ、ＥＬ１及びＥＬ２に挿入する。この挿入は、タグをパケットヘッダ又は他の送信に固有の情報に挿入する代わりに、又はそれに加えて、タグを符号化データに添付することを伴う。タグは、信号ＢＬ、ＥＬ１及びＥＬ２に共通しており、これらの信号が関連しているという事実を特定する情報を含む。例えば、タグは、ビデオデータのソースを特定する情報を有するかもしれない。
【００２６】
ビデオ解析ユニット２３は、何れか関連付けされたヘッダを含むビデオデータを既知の方法により構文解析するパーサを有するかもしれない。所与のフォーマット（例えば、ＭＰＥＧ−４による、いわゆるユーザデータなど）に対応する適切なデータが存在する場合、当該データからタグが抽出される。ユーザデータの具体例を利用して、ユーザデータのヘッダスタートコード（０ｘ００，０ｘ００，０ｘＢ２）に遭遇するまで、ビデオストリームは構文解析される。その後、次のスタートコード（０ｘ００，０ｘ００，０ｘ０１）まで当該データが読み込まれ、中間データがユーザデータとなる。このデータが所与の（所定の）タグフォーマットに従う場合、タグ情報がこのデータから抽出されるかもしれない。
【００２７】
ビデオストリームからタグを導出又は抽出することは、ビデオストリームの特別な特徴、特にビデオコンテンツを生成及び／又は収集することにより実現されるかもしれない。これらの特徴は、カラー情報（カラーヒストグラム、画像における散乱したポジション内の各ブロックの選択の特定のＤＣＴ係数の選択、支配的なカラー情報、統計的なカラーモーメントなど）、テクスチャ（エッジネス（ｅｄｇｅ−ｎｅｓｓ）やテクスチャ変換などの統計的なテクスチャ特徴、同質性及び／又はエッジ密度などの構造的特徴）、及び／又は形状（境界やモーメントなどの再生特徴、及び／又は境界、コーナー及び／又は重心などの測定特徴）を含む可能性がある。他の特徴もまた、考えられるかもしれない。例えば、ショット内の動きの大まかな指標は、それをやや一意的に特徴付けるのに十分であるかもしれない。さらに又はあるいは、タグ情報は、暗号化の分野において周知な、いわゆる、“ハッシュ”関数などの特別な関数を利用して、ビデオストリームから求められるかもしれない。いわゆる、既知のフィンガープリント技術もまた、タグを求めるのに利用されるかもしれない。このような技術は、例えば、画像ブロックのＤＣコンポーネント又は動きベクトル（の分散）などからフィンガープリントを生成することを伴うかもしれない。
【００２８】
タグのフォーマットは、ＭＰＥＧ−２及び／若しくはＭＰＥＧ−４規格並びに／又は適用可能な他の規格によるストリームシンタックスに従うことが好ましい。例えば、タグがユーザデータヘッダなどのヘッダに設けられる場合、ＭＰＥＧスタートコードとしてデコーダにより認識可能なサブセットを含むべきでなく、この場合、０ｘ００，０ｘ００，０ｘ０１のバイトシーケンスは許されない。このようなバイトシーケンスを回避するため、収集された情報の文字列表現が好まれる。タグを生成する非限定的な具体例が、以下に与えられる。
【００２９】
タグの生成にカラーヒストグラムが使用される場合、例えば、ビデオフレームにおける特定のカラー値の出現回数が記録され、ヒストグラムビン（ヒストグラムの粒度を規定するビンの個数）に配置される。その後、ヒストグラムは加算され、ビデオストリーム全体又は所定数のフレームについて正規化される。このように取得された値は、整数表現から文字列表現に変換され、結果として得られる文字列はタグのコアを構成する。このコアに加えて、部分文字列‘ＢＬ００’又は‘ＥＬｘｘ’が、レイヤ間の関係を特定するため、それぞれ数ｘｘを有するベースレイヤ又はエンハンスメントレイヤのタグの始めに追加されるべきである。
【００３０】
この具体例を示すため、１０個のビンを有するカラーヒストグラムがビデオデータセットについて生成されることが仮定される。合計及び正規化されたヒストグラムデータは、例えば、
０．１１２７，０．０８８８，０．２３０２，０．３３１４，０．０３４５，０．０８３５，０．０６００，０．０２３５，０．０２９７，０．００５６
などである。
【００３１】
これらのデータを文字列表現に変換するとき、先頭のゼロは省略されるが、小数点は各値の境界を示すため維持され、
‘．１１２７．０８８８．２３０２．３３１４．０３４５．０８３５．０６００．０２３５．０２９７．００５６’とされる。
【００３２】
ベースレイヤ（ＢＬ）について、結果として得られるタグは、
‘ＢＬ００．１１２７．０８８８．２３０２．３３１４．０３４５．０８３５．０６００．０２３５．０２９７．００５６’
となり、第１エンハンスメントレイヤ（ＥＬ１）については、
‘ＥＬ０１．１１２７．０８８８．２３０２．３３１４．０３４５．０８３５．０６００．０２３５．０２９７．００５６’
となり、第２エンハンスメントレイヤ（ＥＬ２）については、
‘ＥＬ０２．１１２７．０８８８．２３０２．３３１４．０３４５．０８３５．０６００．０２３５．０２９７．００５６’
となる。
【００３３】
同様に、追加的なレイヤが存在する場合には、さらなるタグが生成可能である。
【００３４】
図４の実施例では、ビデオ解析ユニット２３は、符号化装置２の一部であるが、符号化ユニット２０の外部にある。図５の実施例では、データ挿入ユニット２２とビデオ解析ユニット２３の両方が、符号化ユニット２０に含まれる。図６の実施例では、データ収集ユニット２１、データ挿入ユニット２２及びビデオ解析ユニット２３の何れもが、符号化ユニット２０の外部にある。符号化装置２はハードウェア及び／又はソフトウェアにより実現可能であることが理解されるであろう。
【００３５】
図７に非限定的に図示される本発明のビデオデータ要素６０は、要素ヘッダＨとペイロードＰを有する。データ要素６０は、例えば、ピクチャ、ピクチャグループ（ＧｏＰ）又はビデオシーケンスであるかもしれず、ＭＰＥＧ−２又はＭＰＥＧ−４規格に準拠している場合、それはユーザデータセクションＵを有する。本発明のさらなる特徴によると、ビデオソース情報を含むタグＴが、このユーザデータセクションに挿入されるかもしれない。この結果、いくつかの実施例では、タグはまたペイロードにも挿入されるかもしれないが、図示された具体例では、タグＴはヘッダの一部となる。ヘッダのスペースを利用する効果は、ペイロードが通常の符号化ビデオデータとすることが可能となることである。
【００３６】
現在のビデオ符号化及び伝送システムでは（そこでは、伝送は、一般に記憶媒体などへの伝送から構成されるものとして読まれるべきである）、典型的には、いくつかのネストされたヘッダがパケットに付属される（例えば、ネットワーク伝送では、これらのパケットは連続的に互いに属する）。しかしながら、これらのヘッダの情報は、例えば、他のすべてのヘッダがストリップされているとき、最後の復号化に近い単一のシステムにおいて、また最も可能性があるが、復号化の一部が異なる装置、異なるコンテンツプロバイダ若しくは仲介者により実行される分散システムにおいてなど、いくつかのシステムにおいて消失するかもしれない。
【００３７】
従って、互いに所属するビデオデータの関連付けを可能にする情報（ベースレイヤについてはエンハンスメントレイヤなどであるが、またブラックバーを充填するため、若しくは他の表示レシオフォーマットなどに移行するためのさらなる付属信号なども）が、可能な限り長く関連付け可能であり、このため、それは、好ましくは、復号化される最後のビデオヘッダにおいて、実ビデオ信号を符号化したペイロードに可能な限り近接して（さらにおそらく）符号化される必要がある。各ビデオデータ要素６０が本発明による少なくとも１つのタグを含むことが好ましい。
【００３８】
パケット識別情報（ＰＩＤ）やエレメンタリストリーム識別情報（ＥＳＩＤ）などのさらなるソース情報が含まれてもよい。しかしながら、このようなソース情報は、パケットの多重化又は転送時に消失するかもしれないが、ペイロード情報は維持されるべきである。この結果、タグは維持され、スケーラブルビデオの各種信号の間の関係を特定することが可能となる。
【００３９】
図８において、本発明によるビデオ復号化装置１の第１実施例が概略的に示される。図示された実施例では、装置１は、それぞれがビデオストリームＳ１〜Ｓ６を受信及び出力する６つのパーサ（Ｐ）ユニット３１〜３６を有する。さらに、パーサユニットはタグ情報を抽出する。これらのストリームＳ１〜Ｓ６と係るタグ情報が、コネクタ（Ｃ）ユニット３０にわたされる。タグ情報に基づき、コネクタユニット３０は、各ストリームＳ１〜Ｓ６を特定し、当該ストリームを該当するデコーダに転送（又は送信）する。図８の実施例では、各ビデオストリームのベースレイヤＢＬを復号化する２つのデコーダ１１、エンハンスメントレイヤＥＬ１を復号化する２つのデコーダ１２、及びエンハンスメントレイヤＥＬ２を復号化する２つのデコーダ１３による２つのデコーダセットが示される。このため、各ストリームは、関連付けされたタグ情報に基づき適切な復号化ユニットに供給される。対応するレイヤは、復号化ビデオ（ＤＶ）信号ＤＶ１及びＤＶ２を生成するため、それぞれ合成ユニット３８及び３９において合成される。
【００４０】
例えば、入力ストリームＳ２は、第２ビデオ信号ＤＶ２のベースレイヤ（ＢＬ）を含むかもしれず、下位のデコーダ１１に供給されるべきである。パーサ３３により読み込まれるタグ情報は、このために利用される。
【００４１】
図９において、本発明によるビデオ復号化装置１の第２実施例が概略的に示される。図９の実施例では、装置１はまた、それぞれがビデオストリームＳ１〜Ｓ６とタグ情報を受信及び出力する６つのパーサ（Ｐ）ユニット３１〜３６を有する。これらのストリームＳ１〜Ｓ６と関連するタグ情報が、ビデオ信号ＤＶ１及びＤＶ２と関連するタグ情報に対するレイヤストリームＢＬ、ＥＬ１及びＥＬ２を出力するデコーダ１１〜１６に転送される。タグ情報に基づき、コネクタユニット３０が各ストリームＳ１〜Ｓ６を特定し、復号化ビデオ信号ＤＶ１とＤＶ２をそれぞれ生成するため、該当する合成ユニット３８又は３９にストリームを転送する。図９の実施例では、レイヤＢＬ、ＥＬ１などがコネクタユニット３０に供給される前に復号化され、図８の実施例では、コネクタユニット３０は符号化レイヤを処理する。
【００４２】
レイヤＢＬ、ＥＬ１などが図９に示される順序は単なる一例であることに留意されたい。例えば、（第１）デコーダ１１により出力されるベースレイヤＢＬは、第２の復号化ビデオ信号ＤＶ２のベースレイヤとすることが可能である。同様に、入力ストリームＳ１は、ＤＶ１又はＤＶ２の符号化エレメンタリレイヤＥＬ１を等しく含むことが可能である。
【００４３】
タグ情報が復号化ユニット（デコーダ）１１〜１６により生成され、個別のパーサは設けられないビデオ復号化装置１の実施例が想定可能である。
【００４４】
図１０において、本発明を有するビデオシステムが概略的に示される。ビデオシステムは、パーサ３１〜３７、コネクタユニット３０、デコーダ１１〜１６及び合成ユニット３８〜３９を有するビデオ復号化装置（図８では１）を有する。さらに、ビデオシステムは、例えば、周知のＰｉＰ（Ｐｉｃｔｕｒｅ−ｉｎ−Ｐｉｃｔｕｒｅ）技術又はサイド・バイ・サイド（ｓｉｄｅ−ｂｙ−ｓｉｄｅ）を利用して、スクリーンセクションＭＶ１及びＭＶ２に少なくとも２つのビデオチャネルを同時に表示可能なテレビ装置７０を有する。
【００４５】
本例では、ビデオシステムは、ケーブルテレビネットワーク、ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、インターネット、他の何れか適切な伝送パス又は伝送パスの組み合わせであるかもしれない通信ネットワーク（ＣＷ）５０からビデオストリームを受信する。情報の一部は第１ネットワークタイプ、例えば、衛星などからのものであり（現在再生中のＢＢＣ１のプログラムなど）、ＢＢＣ１のプログラムのさらなるエンハンスメントデータなどの他の情報は、異なるセットトップボックスなどを介しインターネットを通じて受信されるかもしれないことに留意すべきである。ビデオストリームは、それぞれがチャネル（テレビ装置７０上にＭＶ１及びＭＶ２としてレンダリングされるプログラムの少なくとも一部のレイヤを有する）２つのチューナ４１及び４２により受信される。第１チューナ（Ｔ１）４１はパーサ３１〜３４に接続され、第２チューナ（ｔ２）はパーサ３５〜３７に接続される。各チューナ４１、４２は、複数のビデオストリームをパーサに転送する。
【００４６】
本発明によると、ビデオストリームは、ストリーム間の相互関係を特定したタグ（識別データ）を含む。例えば、ビデオストリームは、それが識別情報０５２７（ｔｅｌｅｔｕｂｂｉｅｓプログラムなど）を有するエンハンスメントレイヤ（第２レベル）データストリームであることを示したタグＥＬＩＤ０５２７を有することが可能である。
【００４７】
チューナＴ１がロックオンされる第１チャネル（ＵＨＦ６７０＋０〜５ＭＨｚなど）は、ＭＶ２サブウィンドウで現在視聴されている料理番組の２つのレイヤ（ベースとＥＬ１）と、ＭＶ１で視聴されているｔｅｌｅｔｕｂｂｉｅｓプログラムの最初の２つのレイヤ（ベースとＥＬ１）とを有することが例示的に示されている。ｔｅｌｅｔｕｂｂｉｅｓプログラムの第３レイヤ（ＥＬ２）は、第２チャネル（ＶＨＦ１５０ＭＨｚ＋０〜５ＭＨｚなど）により送信され、チューナ２を介し受信される。それはまた、表示又は利用されていないため現在破棄することが可能な１つのレイヤ化されたニュースプログラムとおそらくイントラネット若しくはビデオフォンデータなどの他の２つのプログラムレイヤを有する。
【００４８】
このとき、コネクタは、タグの対応関係を解析することによって、正しいレイヤを加算手段に接続することが可能であり、この結果、ｔｅｌｅｔｕｂｂｙゴースト差動更新信号は料理番組の画像に加えられることはない。
【００４９】
このとき、対応するビデオストリームは、タグＢＬ＿ＩＤ０５２７とＥＬ１＿ＩＤ０５２７（及び第３レベルエンハンスメントレイヤが存在する場合、ＥＬ３＿ＩＤ０５２７を有することが可能である。パーサは、これらのタグを検出し、タグ情報に基づき、コネクタユニット３０は対応するデコーダにルーティングされるビデオストリームをルーティングする。
【００５０】
タグはまた、ビデオストリームが空間、時間又はＳＮＲ（Ｓｉｇｎａｌ−Ｎｏｉｓｅ−Ｒａｔｉｏ）スケーラビリティを利用して符号化されているか示すことが可能である。例えば、タグＳＥＬ２＿ＩＤ０５２７は、ビデオストリームがＩＤ番号０５２７を有する空間スケーラブルなエンハンスメントレイヤ（レベル２）に対応することを示すことができる。同様に、ＴＥＬ２＿ＩＤ０５２７及びＮＥＬ２＿ＩＤ０５２７は、それの時間及びＳＮＲ符号化された対応するものを示すことが可能である。
【００５１】
システムは、何れのタグが存在するかについて知るため複数の方法により実現可能である。例えば、１以上のネットワーク接続の１以上のチャネル上の利用可能なタグのテーブルが、一定の間隔により送信可能であり、このとき、システムは現在視聴されているプログラムの適切な関連付けをすることが可能である。あるいは、システムは、接続されているネットワークの各パケットを介し何れのタグが入力されたか解析し、生成されたテーブルを維持することにより、より動的なものとすることが可能である。例えば、いくつかのパケットの後、システムは、ＴＡＧ＝“ｔｅｌｅｔｕｂｂｉｅｓ”（この文字列は、入力されたメタデータからコンテンツプロバイダにより生成される）が存在することを知り、ＢＬ＿ｔｅｌｅｔｕｂｂｉｅｓとＥＬ１＿ｔｅｌｅｔｕｂｂｉｅｓとは別のさらなるいくつかのパケットの後、ある入力を介しさらなるエンハンスメントデータＥＬ２＿ｔｅｌｅｔｕｂｂｉｅｓを受け取る可能性がある（例えば、チューナの１つに利用可能なすべての接続チャネルのパケットをシーケンシャルにスキャンさせることによって、又はネットワークチャネル上で何が利用可能であるかに関するメタデータを受け取ることによってなど）。
【００５２】
図１１において、異なる装置間に拡げられたときのビデオシステムの可能性が例示される。それは、本発明によるビデオ復号化装置（図８及び９における１）が搭載されるデジタルテレビ装置７０を有する。テレビ装置７０はまた、通信ネットワーク（ＣＷ）５０から（符号化）ビデオストリームを受信する。各種チャネルは、テレビ装置７０又はネットワーク５０に各種伝送パスを介し到達することが可能である。１つの配信ステーションはケーブルネットワークを利用可能であり、他のステーションはそれのプログラムを衛星を介し送信可能である。
【００５３】
テレビ装置７０又はそれのビデオ復号化装置１は、ホームネットワークＨＮを介し少なくとも２つのレイヤを、例えば、Ｐｈｉｌｉｐｓ  Ｐｒｏｎｔｏ（登録商標）ラインのリモコンユニットなどのインテリジェントリモコンユニット８０などの他の（ポータブルなど）ビデオディスプレイに送信する。１つのレイヤ（ＢＬなど）は、矢印７１により示されるようにテレビ装置から直接送信され、他方のレイヤ（ＥＬ１など）は、矢印７２により示されるように、ホームネットワーク（ＨＮ）７５を介し送信される。テレビ装置から（矢印７１）直接送信されるベースレイヤは、リモコンユニット８０において復号化可能な符号化（圧縮）レイヤであり、ホームネットワーク（矢印７２）を介し送信されるエンハンスメントレイヤＥＬは、リモコンユニットにおけるさらなる復号化が不要な復号化された通常のビデオ信号レイヤであるかもしれない。再び、正しく対応する信号がＰｒｏｎｔｏに加えられるように調整される必要がある。例えば、典型的には、テレビ７０が、個別のパス上の２つの信号が互いに所属しているかチェックし、何れの又は複数の時点において、圧縮ホームネットワークリンクを介し送信されるタグＴの指標が存在する場合、Ｐｒｏｎｔｏは、受信した圧縮データのビデオヘッダのタグＴとの対応関係をダブルチェックすることが可能である。
【００５４】
本発明は、スケーラブルなビデオシステムにおける複数のビデオ信号の間の関係が示される必要があるという洞察に基づくものである。本発明は、何れかの方法により提供されていたが、削除された場合であっても、符号化ビデオデータにタグを添付することがこの関係を確立することを可能にするというさらなる洞察を利用している。
【００５５】
この明細書に使用される用語は、本発明の範囲を限定するように解釈されるべきでないことに留意されたい。特に、“有する”という用語は、具体的には述べられていない何れかの要素を排除することを意味するものでない。単一の（回路）要素は、複数の（回路）要素又はその均等物と置換可能である。
【００５６】
本発明が上述した実施例に限定されるものでなく、添付した請求項に規定されるような本発明の範囲から逸脱することなく多数の変更及び追加が可能であることは、当業者に理解されるであろう。
【図面の簡単な説明】
【００５７】
【図１】図１は、従来技術によるマルチレイヤビデオ復号化装置の第１実施例を概略的に示す。
【図２】図２は、従来技術によるマルチレイヤビデオ復号化装置の第２実施例を概略的に示す。
【図３】図３は、従来技術によるマルチレイヤビデオ復号化装置の第３実施例を概略的に示す。
【図４】図４は、本発明によるビデオ符号化装置の第１実施例を概略的に示す。
【図５】図５は、本発明によるビデオ符号化装置の第２実施例を概略的に示す。
【図６】図６は、本発明によるビデオ符号化装置の第３実施例を概略的に示す。
【図７】図７は、本発明によるスケーラブルビデオを送信又は格納するデータ要素を概略的に示す。
【図８】図８は、本発明による復号化装置の第１実施例を概略的に示す。
【図９】図９は、本発明による復号化装置の第２実施例を概略的に示す。
【図１０】図１０は、本発明による復号化装置を有するビデオシステムの第１実施例を概略的に示す。
【図１１】図１１は、本発明による復号化装置を有するビデオシステムの第２実施例を概略的に示す。
【図１】
2009521174.tif 000003
【図２】
2009521174.tif 000004
【図３】
2009521174.tif 000005
【図４】
2009521174.tif 000006
【図５】
2009521174.tif 000007
【図６】
2009521174.tif 000008
【図７】
2009521174.tif 000009
【図８】
2009521174.tif 000010
【図９】
2009521174.tif 000011
【図１０】
2009521174.tif 000012
【図１１】
2009521174.tif 000013
【手続補正書】
【提出日】平成20年6月24日(2008.6.24)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
符号化ビデオデータを生成する方法であって、
ビデオデータを収集するステップと、
前記収集されたビデオデータを識別するタグを生成するステップと、
異なるビデオクオリティレベルを表す少なくとも２つの符号化ビデオデータセットを生成するため、前記収集されたビデオデータを符号化するステップと、
前記タグを共通のタグとして各符号化ビデオデータセットに添付するステップと、
を有し、
前記符号化ビデオデータセットは、基本となるビデオクオリティを提供するベースレイヤと、付加的なビデオクオリティを提供する少なくとも第１エンハンスメントレイヤとを有する方法。
【請求項２】
前記タグは、前記収集されたビデオデータから導出され、好ましくは、フィンガープリント技術により生成される、請求項１記載の方法。
【請求項３】
前記タグは、データパケット又はストリームのユーザデータセクションに挿入される、請求項１記載の方法。
【請求項４】
前記タグは一意的なものである、請求項１記載の方法。
【請求項５】
前記符号化ビデオデータセットは、少なくともベースレイヤと、第１エンハンスメントレイヤと、第２エンハンスメントレイヤとを有し、
前記共通のタグが、前記各符号化ビデオデータセットに添付される、請求項１記載の方法。
【請求項６】
前記各符号化ビデオデータセットに添付されるタグは、セットタグの一部として添付され、
前記各符号化ビデオデータセットに添付されるセットタグはさらに、前記符号化ビデオデータセットのビデオクオリティを示すことによって、前記セット間の相互関係を示す表示データを有する、請求項１又は５記載の方法。
【請求項７】
前記各符号化ビデオデータセットに添付されるタグは、前記ビデオデータセットを符号化するのに使用されるスケーラビリティ方法を示す表示データを有する、請求項１、５又は６記載の方法。
【請求項８】
復号化ビデオデータを生成する方法であって、
タグ情報を検出するため、入力ビデオストリームを構文解析するステップと、
前記検出されたタグ情報に応じて各ビデオストリームを復号化するステップと、
少なくともベースレイヤとエンハンスメントレイヤとを表す異なるビデオクオリティレベルを表す少なくとも２つの異なる符号化データセットを関連付けるステップと、
を有し、
前記符号化データセットは、同一のタグ又は同一のタグの部分を有する方法。
【請求項９】
ベースレイヤと、第１エンハンスメントレイヤと、第２エンハンスメントレイヤとを表す少なくとも３つの異なる符号化データセットが、関連付けされる、請求項８記載の方法。
【請求項１０】
請求項１記載の方法を実行するコンピュータプログラム。
【請求項１１】
符号化ビデオデータを生成する装置であって、
ビデオデータを収集するデータ収集ユニットと、
前記収集されたビデオデータを識別するタグを生成するビデオ解析ユニットと、
異なるビデオクオリティレベルを表す少なくとも２つの符号化データセットを生成するため、前記収集されたビデオデータを符号化する符号化ユニットと、
前記タグを共通のタグとして各符号化ビデオデータセットに添付するデータ挿入ユニットと、
を有し、
前記符号化ビデオデータセットは、基本となるビデオクオリティを提供するベースレイヤと、付加的なビデオクオリティを提供する少なくとも第１エンハンスメントレイヤとを有する装置。
【請求項１２】
前記ビデオ解析ユニットは、前記収集されたビデオデータから前記タグを導出するよう構成される、請求項１１記載の装置。
【請求項１３】
前記符号化ユニットは、少なくとも３つの符号化データセットを生成するよう構成され、
前記符号化ビデオデータセットは、ベースレイヤと、少なくとも第１エンハンスメントレイヤと、第２エンハンスメントレイヤとを有し、
前記データ挿入ユニットは、前記共通のタグを前記各符号化ビデオデータセットに添付するよう構成される、請求項１１記載の装置。
【請求項１４】
前記ビデオ解析ユニット及び／又は前記データ挿入ユニットは、前記各符号化ビデオデータセットに添付されるタグに、前記符号化ビデオデータセットのビデオクオリティを示すことによって前記セット間の相互関係を示す表示データを追加するよう構成される、請求項１１又は１３記載の装置。
【請求項１５】
前記ビデオ解析ユニット及び／又は前記データ挿入ユニットは、前記各符号化ビデオデータセットに添付されるタグに、前記ビデオデータセットを符号化するのに使用されるスケーラビリティ方法を示す表示データを追加するよう構成される、請求項１１又は１３記載の装置。
【請求項１６】
復号化ビデオデータを生成する装置であって、
タグ情報を検出するため、入力ビデオストリームを構文解析する構文解析ユニットと、
各入力ビデオストリームを復号化する復号化ユニットと、
前記検出されたタグ情報に応じて各入力ビデオストリームを復号化ユニットに転送する接続ユニットと、
を有し、
前記入力ビデオストリームは、基本となるビデオクオリティを提供するベースレイヤと、付加的なビデオクオリティを提供する少なくとも第１エンハンスメントレイヤとを有し、
前記入力ビデオストリームは、共通のタグを有し、
前記接続ユニットは、共通するタグを有するビデオストリームを復号化のための該当する各デコーダユニットに転送するよう構成され、
当該装置は、該当する各デコーダユニットからの復号化ビデオストリームを合成する合成ユニットを有する装置。
【請求項１７】
復号化ビデオデータを生成する装置であって、
タグ情報を検出するため、入力ビデオストリームを構文解析する構文解析ユニットと、
各入力ビデオストリームを復号化する復号化ユニットと、
前記検出されたタグ情報に応じて各復号化ビデオストリームを合成ユニットに転送する接続ユニットと、
を有し、
前記入力ビデオストリームは、基本となるビデオクオリティを提供するベースレイヤと、付加的なビデオクオリティを提供する少なくとも第１エンハンスメントレイヤとを有し、
前記入力ビデオストリームは、共通のタグを有し、
前記接続ユニットは、共通するタグを有するビデオストリームを該当する合成ユニットに転送するよう構成される装置。
【請求項１８】
前記接続ユニット、前記復号化ユニット及び前記合成ユニットは、復号化ビデオデータを生成するよう構成され、
前記入力ビデオストリームは、少なくともベースレイヤ、第１エンハンスメントレイヤ及び第２エンハンスメントレイヤを有する、請求項１６又は１７記載の装置。
【請求項１９】
請求項１１記載のビデオ符号化装置及び／又は請求項１６又は１７記載のビデオ復号化装置を有するビデオシステム。
【請求項２０】
相互に関連するビデオストリームを識別するタグを有するビデオ信号であって、
前記タグは、パケットが特定のプログラム又はマルチメディアコンテンツアイテムの異なるビデオクオリティレベルを表す対応する符号化データセットに属することを識別し、
前記ビデオクオリティレベルは、基本となるビデオクオリティを提供するベースレイヤレベルと、付加的なビデオクオリティを提供する少なくとも第１エンハンスメントレイヤとを有するビデオ信号。
【請求項２１】
各ビデオパケットは、復号化後の最後の残りのビデオに関連するパケットヘッダに前記タグを有する、請求項２０記載のビデオ信号。
【請求項２２】
前記タグは、前記符号化ビデオデータセットのビデオクオリティを示すことによって、前記セット間の相互関係を示す表示データを有する、請求項２０記載のビデオ信号。
【請求項２３】
前記タグは、前記ビデオデータセットを符号化するのに使用されるスケーラビリティ方法を示す表示データを有する、請求項２０記載のビデオ信号。
【請求項２４】
前記クオリティレベルは、ベースレイヤ、第１エンハンスメントレイヤ及び少なくとも第２エンハンスメントレイヤを有する、請求項２０記載のビデオ信号。
【請求項２５】
請求項２０乃至２４何れか一項記載のビデオ信号が格納されるデータキャリア。
【請求項２６】
請求項２０乃至２４何れか一項記載のビデオ信号が、前記受信信号が復号化される請求項１６乃至１８何れか一項記載のデコーダ装置により受信される、ビデオ信号を復号化する方法。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ビデオ符号化及び復号化に関する。より詳細には、本発明は、基本となるビデオクオリティを提供するベースレイヤと付加的なビデオクオリティを提供するエンハンスメントレイヤとを有する少なくとも２つのレイヤを構成するビデオデータを符号化する装置及び方法に関する。
【背景技術】
【０００２】
ビデオストリームやビデオフレームなどのビデオデータを符号化することは周知である。ビデオデータは、動画像、静止画像又はその両方を表すかもしれない。ビデオデータは、典型的には、データ量を減少させるため、伝送又は格納前に符号化される。複数の規格が符号化及び圧縮を規定し、最も有力なものはＭＰＥＧ−２とＭＰＥＧ−４である。（ｈｔｔｐ：／／ｗｗｗ．ｃｈｉａｒｉｇｌｉｏｎｅ．ｏｒｇ／ｍｐｅｇを参照されたい。）
【０００３】
ＭＰＥＧ規格は、スケーラブルなビデオ、すなわと、第１又はベースレイヤが低クオリティ（低解像度など）ビデオを提供し、第２又はエンハンスメントレイヤがベースレイヤと合成されるとより高いクオリティ（高解像度など）ビデオを可能にする少なくとも２つのレイヤに符号化されたビデオを規定する。複数のエンハンスメントレイヤが、利用可能である。
【０００４】
各チャネルが個々の画像又はビデオシーケンスを表す複数のビデオチャネルが、異なるソースから送信され、同時に所与の宛先において処理されるかもしれない。例えば、ホームストレージ装置から送信される第１ビデオシーケンス、衛星オペレータにより放送される第２ビデオシーケンス及びインターネットを介し送信される第３ビデオシーケンスのすべてが、テレビ装置により受信可能であり、１つのビデオシーケンスがメイン画面に表示され、他の２つのビデオシーケンスが、ＰｉＰ（Ｐｉｃｔｕｒｅ−ｉｎ−Ｐｉｃｔｕｒｅ）などの補助画面に表示される。各チャネルは、典型的には、２以上のレイヤを有するため、多数のビデオレイヤが同時に送信されるかもしれない。
【０００５】
宛先は、ビデオレイヤと同数のデコーダを起動することが可能である。各デコーダインスタンス、すなわち、所与のレイヤのデコーダの各起動は、宛先における個別のプロセッサにより実現可能である（パラレルデコーダインスタンス）。あるいは、各デコーダインスタンスは、共通のプロセッサを使用して異なる時点で実現されてもよい（シーケンシャルデコーダインスタンス）。
【０００６】
複数のレイヤを受け取ったデコーダは、ベースレイヤとエンハンスメントレイヤとの間の関係、すなわち、何れのエンハンスメントレイヤが何れのベースレイヤに属するか、を判断することができる必要がある。データパケットレベルでは、データストリームの各パケットを当該ストリームの一部として識別するパケット識別子（ＰＩＤ）を使用して行われるかもしれない。しかしながら、複数のビデオストリームが復号装置により受信されるとき、ベースレイヤとエンハンスメントレイヤとの関係は規定されておらず、所望のクオリティレベルによるビデオストリームの復号化は不可能である。
【０００７】
周知のＭＰＥＧ−４規格は、一意的な数値による識別子（エレメンタリストリームＩＤ）などのストリームデータのソースに関する情報を含むエレメンタリストリーム記述子（ｅｌｅｍｅｎｔａｒｙ  ｓｔｒｅａｍ  ｄｅｓｃｒｉｐｔｏｒ）について記述していることに留意されたい。この規格は、エレメンタリストリーム記述子へのリファレンスを利用して、例えば、スケーラブルなオブジェクト表現におけるエンハンスメントストリームのベースストリームへの依存を示すなど、ストリーム間の依存性を示すことを提案している。しかしながら、依存性についてこれらのエレメンタリストリーム記述子の使用は、特にデータが他の規格のフォーマットによるものであるとき、典型的なビデオデータでは規定されていない可能性があるオブジェクトに限定される。さらに、エレメンタリストリーム記述子は、ＭＰＥＧ−４規格によるスケーラブルデコーダにおいてのみ利用可能である。実際、これら相対的に複雑なスケーラブルデコーダは、しばしば複数の非スケーラブルデコーダに置換される。しかしながら、これは、エレメンタリストリーム記述子とそれらの依存性の指標の使用を妨げる。
【発明の開示】
【発明が解決しようとする課題】
【０００８】
本発明の課題は、上記及び他の従来技術の問題点を解決し、第１レイヤと何れかの第２レイヤとの関係をモニタ及び維持することを可能にするビデオ符号化装置及び方法を提供することである。
【課題を解決するための手段】
【０００９】
従って、本発明は、符号化ビデオデータを生成する方法であって、ビデオデータを収集するステップと、前記収集されたビデオデータを識別するタグを生成するステップと、異なるビデオクオリティレベルを表す少なくとも２つの符号化データセットを生成するため、前記収集されたビデオデータを符号化するステップと、前記タグを共通のタグとして各符号化ビデオデータセットに添付するステップと、
を有し、前記符号化ビデオデータセットは、基本となるビデオクオリティを提供するベースレイヤと、付加的なビデオクオリティを提供する少なくとも第１エンハンスメントレイヤとを有する方法を提供する。
【００１０】
収集されたビデオデータを識別するタグを生成し、このタグを各符号化ビデオデータセットに添付することによって、各セットは、それらに共通のタグにより識別可能となる。すなわち、共通のタグは、何れのエンハンスメントレイヤが所与のベースレイヤに属するか決定することを可能にする。
【００１１】
タグ又は識別子は、好ましくは、他の同一のタグとの可能性のある混同を回避するため、一意的なものである。もちろん、実際には、一意性は利用可能なビット数及び適用可能な他の何れかの制約により制限されるが、これらの制約の範囲内で、タグの重複は好ましくは回避される。このため、タグは、例えば、ハッシュ関数や入力データセットに基づき１つの値を生成する他の何れか適切な関数を利用して、収集されたデータから一意的に導出されることが好ましい。あるいは、タグは、カウンタ値、カウンタ値から導出される値、又は乱数が想定されるかもしれない。乱数が使用されるとき、好ましくは、タグの偶然的な重複を回避するための措置がとられる。
【００１２】
特定のビデオチャネル又はビデオストリームを識別する１つのタグの代わりに、複数の相互に関連するタグが利用可能である。各タグは、例えば、固定された共通部分と、シーケンス番号などの可変的な個別部分とを有することが可能である。タグはまた、データ記述子セットを有することが可能である。既知のフィンガープリント技術が、タグを構成するのに利用可能である。
【００１３】
タグを収集されたデータに添付することは、各種方法により実現可能である。タグは符号化データの適切な位置に添付又は挿入されるか、又は符号化データの一部若しくはすべてが送信されるデータパケットに挿入されることが好ましい。ＭＰＥＧ準拠システムでは、タグは、ＭＰＥＧ４等により設けられるデータパケット又はストリームのユーザデータセクションに挿入可能である。
【００１４】
本発明はまた、上述した方法を実行するコンピュータプログラムを提供する。コンピュータプログラムは、ＣＤやＤＶＤなどのデータキャリアに格納されるコンピュータにより実行可能な命令セットを有するかもしれない。プログラム可能なコンピュータが上述した方法を実行することを可能にするコンピュータにより実行可能な命令セットはまた、リモートサーバからインターネットなどを介しダウンロードするため利用可能であるかもしれない。
【００１５】
本発明はさらに、符号化ビデオデータを生成する装置であって、ビデオデータを収集するデータ収集ユニットと、前記収集されたビデオデータを識別するタグを生成するビデオ解析ユニットと、異なるビデオクオリティレベルを表す少なくとも２つの符号化データセットを生成するため、前記収集されたビデオデータを符号化する符号化ユニットと、前記タグを共通のタグとして各符号化ビデオデータセットに添付するデータ挿入ユニットとを有し、前記符号化ビデオデータセットは、基本となるビデオクオリティを提供するベースレイヤと、付加的なビデオクオリティを提供する少なくとも第１エンハンスメントレイヤとを有する装置を提供する。
【００１６】
ビデオ解析ユニットは、好ましくは、収集されたビデオデータから導出可能な実質的に一意的なタグを生成するよう構成される。このタグは、各セットの関係が容易に確立されるように、各出力データセット（符号化ビデオデータ）に添付される。タグをデータに添付することによって、データパケット又は他の伝送フォーマットへの依存が解消される。
【００１７】
本発明はまた、上述した装置を有するビデオシステムと共に、上述したタグを有する信号を提供する。
【発明を実施するための最良の形態】
【００１８】
図１に概略的に示される従来技術によるビデオ復号化装置１は、一緒になってスケーラブルな符号化ビデオ信号を構成する入力信号ＢＬ（Ｂａｓｅ  Ｌａｙｅｒ）、ＥＬ１（Ｅｎｈａｎｃｅｍｅｎｔ  Ｌａｙｅｒ  １）及びＥＬ２（Ｅｎｈａｎｃｅｍｅｎｔ  Ｌａｙｅｒ  ２）を受け付けるための３つの入力ターミナルを有する単一の一体化された復号化（ＤＥＣ）ユニット１０を有する。このような一体化されたビデオ復号化ユニットは、例えば、ＭＰＥＧ−４規格に規定され、実現するのがやや難しい。上記及び他の理由のため、実際には、一体化されたビデオデコーダは、図２及び３に示されるような複合的なデコーダと置換されている。
【００１９】
図２に概略的に示される従来技術による複合型のデコーダ１’は、各入力信号ＢＬ、ＥＬ１及びＥＬ２をそれぞれ復号化する３つの異なるビデオ復号化（ＤＥＣ）ユニット１１、１２及び１３を有する。復号化されたビデオ信号ＢＬ及びＥＬ１が、必要に応じて、それぞれアップサンプリングユニット１７及び１８においてアップサンプリングされる。アップサンプリングユニット１７及び１８は、第１合成ユニット１９ａに組み合わされる。図示された実施例では、最も高いレベルの入力信号（エンハンスメントレイヤ）であるＥＬ２はアップサンプリングされず、復号化されたビデオ（ＤＶ）出力信号を生成するため、第２合成ユニット１９ｂにおいてアップサンプリング及び合成された信号ＢＬ及びＥＬ１と合成される。
【００２０】
あるいは、図３に示されるように、復号化及びアップサンプリングされた各信号ＢＬ、ＥＬ１及びＥＬ２を合成するため、１つの合成ユニット１９しか利用しなくてもよい。いくつかの実施例では、最も高いレベルの入力信号ＥＬ２もまたアップサンプリングされるかもしれないが、これは図３の例では該当しないことに留意されたい。
【００２１】
図２及び３の復号化装置１’は、相対的にシンプルであるという効果を提供し、図１の装置１’’より経済的に実現可能である。しかしながら、図２及び３の装置１’は、典型的には、ＭＰＥＧ−４規格に規定されるなど、オブジェクト間の関係を追跡するなど高度な機能を提供することはできない。
【００２２】
この問題を解決するため、本発明は、入力信号間の相互関係をモニタ及びチェックすることを可能にするタグを提供することが可能な符号化装置を提供する。本発明はまた、関連する入力信号を示すタグを検出可能なビデオ復号化装置を提供する。
【００２３】
図４において単に限定的でなく例示されるビデオ符号化装置２は、入力ビデオストリームＶＳを受け取り、成分信号ＢＬ、ＥＬ１及びＥＬ２を有するレイヤ化された（すなわち、スケーラブルな）符号化ビデオ出力信号を生成する従来の符号化（ＥＮＣ）ユニットであるかもしれない符号化ユニット２０を有する。符号化ユニット２０は、符号化されるデータを収集するよう構成されるデータ収集（ＤＣ）ユニット２１を有する。
【００２４】
従来の符号化ユニットと対照的に、図４のデータ収集ユニット２１は、収集されたデータを符号化ユニット２０の適切な部分だけでなく、ビデオ解析（ＶＡ）ユニット２３にも転送する。ビデオ解析ユニット２３は、ビデオストリームＶＳを一意的に又は実質的に一意的に特定するタグを生成する。ビデオ解析ユニット２３は、適切なタグを生成するため、カウンタ又は乱数生成手段を有することが可能であるが、タグは、好ましくは、以下でより詳細に説明されるように、一意的な数又は他の識別子を生成するため、収集されたデータから導出される。
【００２５】
データ挿入（ＤＩ）ユニット２２は、符号化ユニット２０から符号化データと共に、ビデオ解析ユニット２３からタグを受け取り、このタグを出力信号ＢＬ、ＥＬ１及びＥＬ２に挿入する。この挿入は、タグをパケットヘッダ又は他の送信に固有の情報に挿入する代わりに、又はそれに加えて、タグを符号化データに添付することを伴う。タグは、信号ＢＬ、ＥＬ１及びＥＬ２に共通しており、これらの信号が関連しているという事実を特定する情報を含む。例えば、タグは、ビデオデータのソースを特定する情報を有するかもしれない。
【００２６】
ビデオ解析ユニット２３は、何れか関連付けされたヘッダを含むビデオデータを既知の方法により構文解析するパーサを有するかもしれない。所与のフォーマット（例えば、ＭＰＥＧ−４による、いわゆるユーザデータなど）に対応する適切なデータが存在する場合、当該データからタグが抽出される。ユーザデータの具体例を利用して、ユーザデータのヘッダスタートコード（０ｘ００，０ｘ００，０ｘＢ２）に遭遇するまで、ビデオストリームは構文解析される。その後、次のスタートコード（０ｘ００，０ｘ００，０ｘ０１）まで当該データが読み込まれ、中間データがユーザデータとなる。このデータが所与の（所定の）タグフォーマットに従う場合、タグ情報がこのデータから抽出されるかもしれない。
【００２７】
ビデオストリームからタグを導出又は抽出することは、ビデオストリームの特別な特徴、特にビデオコンテンツを生成及び／又は収集することにより実現されるかもしれない。これらの特徴は、カラー情報（カラーヒストグラム、画像における散乱したポジション内の各ブロックの選択の特定のＤＣＴ係数の選択、支配的なカラー情報、統計的なカラーモーメントなど）、テクスチャ（エッジネス（ｅｄｇｅ−ｎｅｓｓ）やテクスチャ変換などの統計的なテクスチャ特徴、同質性及び／又はエッジ密度などの構造的特徴）、及び／又は形状（境界やモーメントなどの再生特徴、及び／又は境界、コーナー及び／又は重心などの測定特徴）を含む可能性がある。他の特徴もまた、考えられるかもしれない。例えば、ショット内の動きの大まかな指標は、それをやや一意的に特徴付けるのに十分であるかもしれない。さらに又はあるいは、タグ情報は、暗号化の分野において周知な、いわゆる、“ハッシュ”関数などの特別な関数を利用して、ビデオストリームから求められるかもしれない。いわゆる、既知のフィンガープリント技術もまた、タグを求めるのに利用されるかもしれない。このような技術は、例えば、画像ブロックのＤＣコンポーネント又は動きベクトル（の分散）などからフィンガープリントを生成することを伴うかもしれない。
【００２８】
タグのフォーマットは、ＭＰＥＧ−２及び／若しくはＭＰＥＧ−４規格並びに／又は適用可能な他の規格によるストリームシンタックスに従うことが好ましい。例えば、タグがユーザデータヘッダなどのヘッダに設けられる場合、ＭＰＥＧスタートコードとしてデコーダにより認識可能なサブセットを含むべきでなく、この場合、０ｘ００，０ｘ００，０ｘ０１のバイトシーケンスは許されない。このようなバイトシーケンスを回避するため、収集された情報の文字列表現が好まれる。タグを生成する非限定的な具体例が、以下に与えられる。
【００２９】
タグの生成にカラーヒストグラムが使用される場合、例えば、ビデオフレームにおける特定のカラー値の出現回数が記録され、ヒストグラムビン（ヒストグラムの粒度を規定するビンの個数）に配置される。その後、ヒストグラムは加算され、ビデオストリーム全体又は所定数のフレームについて正規化される。このように取得された値は、整数表現から文字列表現に変換され、結果として得られる文字列はタグのコアを構成する。このコアに加えて、部分文字列‘ＢＬ００’又は‘ＥＬｘｘ’が、レイヤ間の関係を特定するため、それぞれ数ｘｘを有するベースレイヤ又はエンハンスメントレイヤのタグの始めに追加されるべきである。
【００３０】
この具体例を示すため、１０個のビンを有するカラーヒストグラムがビデオデータセットについて生成されることが仮定される。合計及び正規化されたヒストグラムデータは、例えば、
０．１１２７，０．０８８８，０．２３０２，０．３３１４，０．０３４５，０．０８３５，０．０６００，０．０２３５，０．０２９７，０．００５６
などである。
【００３１】
これらのデータを文字列表現に変換するとき、先頭のゼロは省略されるが、小数点は各値の境界を示すため維持され、
‘．１１２７．０８８８．２３０２．３３１４．０３４５．０８３５．０６００．０２３５．０２９７．００５６’とされる。
【００３２】
ベースレイヤ（ＢＬ）について、結果として得られるタグは、
‘ＢＬ００．１１２７．０８８８．２３０２．３３１４．０３４５．０８３５．０６００．０２３５．０２９７．００５６’
となり、第１エンハンスメントレイヤ（ＥＬ１）については、
‘ＥＬ０１．１１２７．０８８８．２３０２．３３１４．０３４５．０８３５．０６００．０２３５．０２９７．００５６’
となり、第２エンハンスメントレイヤ（ＥＬ２）については、
‘ＥＬ０２．１１２７．０８８８．２３０２．３３１４．０３４５．０８３５．０６００．０２３５．０２９７．００５６’
となる。
【００３３】
同様に、追加的なレイヤが存在する場合には、さらなるタグが生成可能である。
【００３４】
図４の実施例では、ビデオ解析ユニット２３は、符号化装置２の一部であるが、符号化ユニット２０の外部にある。図５の実施例では、データ挿入ユニット２２とビデオ解析ユニット２３の両方が、符号化ユニット２０に含まれる。図６の実施例では、データ収集ユニット２１、データ挿入ユニット２２及びビデオ解析ユニット２３の何れもが、符号化ユニット２０の外部にある。符号化装置２はハードウェア及び／又はソフトウェアにより実現可能であることが理解されるであろう。
【００３５】
図７に非限定的に図示される本発明のビデオデータ要素６０は、要素ヘッダＨとペイロードＰを有する。データ要素６０は、例えば、ピクチャ、ピクチャグループ（ＧｏＰ）又はビデオシーケンスであるかもしれず、ＭＰＥＧ−２又はＭＰＥＧ−４規格に準拠している場合、それはユーザデータセクションＵを有する。本発明のさらなる特徴によると、ビデオソース情報を含むタグＴが、このユーザデータセクションに挿入されるかもしれない。この結果、いくつかの実施例では、タグはまたペイロードにも挿入されるかもしれないが、図示された具体例では、タグＴはヘッダの一部となる。ヘッダのスペースを利用する効果は、ペイロードが通常の符号化ビデオデータとすることが可能となることである。
【００３６】
現在のビデオ符号化及び伝送システムでは（そこでは、伝送は、一般に記憶媒体などへの伝送から構成されるものとして読まれるべきである）、典型的には、いくつかのネストされたヘッダがパケットに付属される（例えば、ネットワーク伝送では、これらのパケットは連続的に互いに属する）。しかしながら、これらのヘッダの情報は、例えば、他のすべてのヘッダがストリップされているとき、最後の復号化に近い単一のシステムにおいて、また最も可能性があるが、復号化の一部が異なる装置、異なるコンテンツプロバイダ若しくは仲介者により実行される分散システムにおいてなど、いくつかのシステムにおいて消失するかもしれない。
【００３７】
従って、互いに所属するビデオデータの関連付けを可能にする情報（ベースレイヤについてはエンハンスメントレイヤなどであるが、またブラックバーを充填するため、若しくは他の表示レシオフォーマットなどに移行するためのさらなる付属信号なども）が、可能な限り長く関連付け可能であり、このため、それは、好ましくは、復号化される最後のビデオヘッダにおいて、実ビデオ信号を符号化したペイロードに可能な限り近接して（さらにおそらく）符号化される必要がある。各ビデオデータ要素６０が本発明による少なくとも１つのタグを含むことが好ましい。
【００３８】
パケット識別情報（ＰＩＤ）やエレメンタリストリーム識別情報（ＥＳＩＤ）などのさらなるソース情報が含まれてもよい。しかしながら、このようなソース情報は、パケットの多重化又は転送時に消失するかもしれないが、ペイロード情報は維持されるべきである。この結果、タグは維持され、スケーラブルビデオの各種信号の間の関係を特定することが可能となる。
【００３９】
図８において、本発明によるビデオ復号化装置１の第１実施例が概略的に示される。図示された実施例では、装置１は、それぞれがビデオストリームＳ１〜Ｓ６を受信及び出力する６つのパーサ（Ｐ）ユニット３１〜３６を有する。さらに、パーサユニットはタグ情報を抽出する。これらのストリームＳ１〜Ｓ６と係るタグ情報が、コネクタ（Ｃ）ユニット３０にわたされる。タグ情報に基づき、コネクタユニット３０は、各ストリームＳ１〜Ｓ６を特定し、当該ストリームを該当するデコーダに転送（又は送信）する。図８の実施例では、各ビデオストリームのベースレイヤＢＬを復号化する２つのデコーダ１１、エンハンスメントレイヤＥＬ１を復号化する２つのデコーダ１２、及びエンハンスメントレイヤＥＬ２を復号化する２つのデコーダ１３による２つのデコーダセットが示される。このため、各ストリームは、関連付けされたタグ情報に基づき適切な復号化ユニットに供給される。対応するレイヤは、復号化ビデオ（ＤＶ）信号ＤＶ１及びＤＶ２を生成するため、それぞれ合成ユニット３８及び３９において合成される。
【００４０】
例えば、入力ストリームＳ２は、第２ビデオ信号ＤＶ２のベースレイヤ（ＢＬ）を含むかもしれず、下位のデコーダ１１に供給されるべきである。パーサ３３により読み込まれるタグ情報は、このために利用される。
【００４１】
図９において、本発明によるビデオ復号化装置１の第２実施例が概略的に示される。図９の実施例では、装置１はまた、それぞれがビデオストリームＳ１〜Ｓ６とタグ情報を受信及び出力する６つのパーサ（Ｐ）ユニット３１〜３６を有する。これらのストリームＳ１〜Ｓ６と関連するタグ情報が、ビデオ信号ＤＶ１及びＤＶ２と関連するタグ情報に対するレイヤストリームＢＬ、ＥＬ１及びＥＬ２を出力するデコーダ１１〜１６に転送される。タグ情報に基づき、コネクタユニット３０が各ストリームＳ１〜Ｓ６を特定し、復号化ビデオ信号ＤＶ１とＤＶ２をそれぞれ生成するため、該当する合成ユニット３８又は３９にストリームを転送する。図９の実施例では、レイヤＢＬ、ＥＬ１などがコネクタユニット３０に供給される前に復号化され、図８の実施例では、コネクタユニット３０は符号化レイヤを処理する。
【００４２】
レイヤＢＬ、ＥＬ１などが図９に示される順序は単なる一例であることに留意されたい。例えば、（第１）デコーダ１１により出力されるベースレイヤＢＬは、第２の復号化ビデオ信号ＤＶ２のベースレイヤとすることが可能である。同様に、入力ストリームＳ１は、ＤＶ１又はＤＶ２の符号化エレメンタリレイヤＥＬ１を等しく含むことが可能である。
【００４３】
タグ情報が復号化ユニット（デコーダ）１１〜１６により生成され、個別のパーサは設けられないビデオ復号化装置１の実施例が想定可能である。
【００４４】
図１０において、本発明を有するビデオシステムが概略的に示される。ビデオシステムは、パーサ３１〜３７、コネクタユニット３０、デコーダ１１〜１６及び合成ユニット３８〜３９を有するビデオ復号化装置（図８では１）を有する。さらに、ビデオシステムは、例えば、周知のＰｉＰ（Ｐｉｃｔｕｒｅ−ｉｎ−Ｐｉｃｔｕｒｅ）技術又はサイド・バイ・サイド（ｓｉｄｅ−ｂｙ−ｓｉｄｅ）を利用して、スクリーンセクションＭＶ１及びＭＶ２に少なくとも２つのビデオチャネルを同時に表示可能なテレビ装置７０を有する。
【００４５】
本例では、ビデオシステムは、ケーブルテレビネットワーク、ＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）、インターネット、他の何れか適切な伝送パス又は伝送パスの組み合わせであるかもしれない通信ネットワーク（ＣＷ）５０からビデオストリームを受信する。情報の一部は第１ネットワークタイプ、例えば、衛星などからのものであり（現在再生中のＢＢＣ１のプログラムなど）、ＢＢＣ１のプログラムのさらなるエンハンスメントデータなどの他の情報は、異なるセットトップボックスなどを介しインターネットを通じて受信されるかもしれないことに留意すべきである。ビデオストリームは、それぞれがチャネル（テレビ装置７０上にＭＶ１及びＭＶ２としてレンダリングされるプログラムの少なくとも一部のレイヤを有する）２つのチューナ４１及び４２により受信される。第１チューナ（Ｔ１）４１はパーサ３１〜３４に接続され、第２チューナ（ｔ２）はパーサ３５〜３７に接続される。各チューナ４１、４２は、複数のビデオストリームをパーサに転送する。
【００４６】
本発明によると、ビデオストリームは、ストリーム間の相互関係を特定したタグ（識別データ）を含む。例えば、ビデオストリームは、それが識別情報０５２７（ｔｅｌｅｔｕｂｂｉｅｓプログラムなど）を有するエンハンスメントレイヤ（第２レベル）データストリームであることを示したタグＥＬＩＤ０５２７を有することが可能である。
【００４７】
チューナＴ１がロックオンされる第１チャネル（ＵＨＦ６７０＋０〜５ＭＨｚなど）は、ＭＶ２サブウィンドウで現在視聴されている料理番組の２つのレイヤ（ベースとＥＬ１）と、ＭＶ１で視聴されているｔｅｌｅｔｕｂｂｉｅｓプログラムの最初の２つのレイヤ（ベースとＥＬ１）とを有することが例示的に示されている。ｔｅｌｅｔｕｂｂｉｅｓプログラムの第３レイヤ（ＥＬ２）は、第２チャネル（ＶＨＦ１５０ＭＨｚ＋０〜５ＭＨｚなど）により送信され、チューナ２を介し受信される。それはまた、表示又は利用されていないため現在破棄することが可能な１つのレイヤ化されたニュースプログラムとおそらくイントラネット若しくはビデオフォンデータなどの他の２つのプログラムレイヤを有する。
【００４８】
このとき、コネクタは、タグの対応関係を解析することによって、正しいレイヤを加算手段に接続することが可能であり、この結果、ｔｅｌｅｔｕｂｂｙゴースト差動更新信号は料理番組の画像に加えられることはない。
【００４９】
このとき、対応するビデオストリームは、タグＢＬ＿ＩＤ０５２７とＥＬ１＿ＩＤ０５２７（及び第３レベルエンハンスメントレイヤが存在する場合、ＥＬ３＿ＩＤ０５２７を有することが可能である。パーサは、これらのタグを検出し、タグ情報に基づき、コネクタユニット３０は対応するデコーダにルーティングされるビデオストリームをルーティングする。
【００５０】
タグはまた、ビデオストリームが空間、時間又はＳＮＲ（Ｓｉｇｎａｌ−Ｎｏｉｓｅ−Ｒａｔｉｏ）スケーラビリティを利用して符号化されているか示すことが可能である。例えば、タグＳＥＬ２＿ＩＤ０５２７は、ビデオストリームがＩＤ番号０５２７を有する空間スケーラブルなエンハンスメントレイヤ（レベル２）に対応することを示すことができる。同様に、ＴＥＬ２＿ＩＤ０５２７及びＮＥＬ２＿ＩＤ０５２７は、それの時間及びＳＮＲ符号化された対応するものを示すことが可能である。
【００５１】
システムは、何れのタグが存在するかについて知るため複数の方法により実現可能である。例えば、１以上のネットワーク接続の１以上のチャネル上の利用可能なタグのテーブルが、一定の間隔により送信可能であり、このとき、システムは現在視聴されているプログラムの適切な関連付けをすることが可能である。あるいは、システムは、接続されているネットワークの各パケットを介し何れのタグが入力されたか解析し、生成されたテーブルを維持することにより、より動的なものとすることが可能である。例えば、いくつかのパケットの後、システムは、ＴＡＧ＝“ｔｅｌｅｔｕｂｂｉｅｓ”（この文字列は、入力されたメタデータからコンテンツプロバイダにより生成される）が存在することを知り、ＢＬ＿ｔｅｌｅｔｕｂｂｉｅｓとＥＬ１＿ｔｅｌｅｔｕｂｂｉｅｓとは別のさらなるいくつかのパケットの後、ある入力を介しさらなるエンハンスメントデータＥＬ２＿ｔｅｌｅｔｕｂｂｉｅｓを受け取る可能性がある（例えば、チューナの１つに利用可能なすべての接続チャネルのパケットをシーケンシャルにスキャンさせることによって、又はネットワークチャネル上で何が利用可能であるかに関するメタデータを受け取ることによってなど）。
【００５２】
図１１において、異なる装置間に拡げられたときのビデオシステムの可能性が例示される。それは、本発明によるビデオ復号化装置（図８及び９における１）が搭載されるデジタルテレビ装置７０を有する。テレビ装置７０はまた、通信ネットワーク（ＣＷ）５０から（符号化）ビデオストリームを受信する。各種チャネルは、テレビ装置７０又はネットワーク５０に各種伝送パスを介し到達することが可能である。１つの配信ステーションはケーブルネットワークを利用可能であり、他のステーションはそれのプログラムを衛星を介し送信可能である。
【００５３】
テレビ装置７０又はそれのビデオ復号化装置１は、ホームネットワークＨＮを介し少なくとも２つのレイヤを、例えば、Ｐｈｉｌｉｐｓ  Ｐｒｏｎｔｏ（登録商標）ラインのリモコンユニットなどのインテリジェントリモコンユニット８０などの他の（ポータブルなど）ビデオディスプレイに送信する。１つのレイヤ（ＢＬなど）は、矢印７１により示されるようにテレビ装置から直接送信され、他方のレイヤ（ＥＬ１など）は、矢印７２により示されるように、ホームネットワーク（ＨＮ）７５を介し送信される。テレビ装置から（矢印７１）直接送信されるベースレイヤは、リモコンユニット８０において復号化可能な符号化（圧縮）レイヤであり、ホームネットワーク（矢印７２）を介し送信されるエンハンスメントレイヤＥＬは、リモコンユニットにおけるさらなる復号化が不要な復号化された通常のビデオ信号レイヤであるかもしれない。再び、正しく対応する信号がＰｒｏｎｔｏに加えられるように調整される必要がある。例えば、典型的には、テレビ７０が、個別のパス上の２つの信号が互いに所属しているかチェックし、何れの又は複数の時点において、圧縮ホームネットワークリンクを介し送信されるタグＴの指標が存在する場合、Ｐｒｏｎｔｏは、受信した圧縮データのビデオヘッダのタグＴとの対応関係をダブルチェックすることが可能である。
【００５４】
本発明は、スケーラブルなビデオシステムにおける複数のビデオ信号の間の関係が示される必要があるという洞察に基づくものである。本発明は、何れかの方法により提供されていたが、削除された場合であっても、符号化ビデオデータにタグを添付することがこの関係を確立することを可能にするというさらなる洞察を利用している。
【００５５】
この明細書に使用される用語は、本発明の範囲を限定するように解釈されるべきでないことに留意されたい。特に、“有する”という用語は、具体的には述べられていない何れかの要素を排除することを意味するものでない。単一の（回路）要素は、複数の（回路）要素又はその均等物と置換可能である。
【００５６】
本発明が上述した実施例に限定されるものでなく、添付した請求項に規定されるような本発明の範囲から逸脱することなく多数の変更及び追加が可能であることは、当業者に理解されるであろう。
【図面の簡単な説明】
【００５７】
【図１】図１は、従来技術によるマルチレイヤビデオ復号化装置の第１実施例を概略的に示す。
【図２】図２は、従来技術によるマルチレイヤビデオ復号化装置の第２実施例を概略的に示す。
【図３】図３は、従来技術によるマルチレイヤビデオ復号化装置の第３実施例を概略的に示す。
【図４】図４は、本発明によるビデオ符号化装置の第１実施例を概略的に示す。
【図５】図５は、本発明によるビデオ符号化装置の第２実施例を概略的に示す。
【図６】図６は、本発明によるビデオ符号化装置の第３実施例を概略的に示す。
【図７】図７は、本発明によるスケーラブルビデオを送信又は格納するデータ要素を概略的に示す。
【図８】図８は、本発明による復号化装置の第１実施例を概略的に示す。
【図９】図９は、本発明による復号化装置の第２実施例を概略的に示す。
【図１０】図１０は、本発明による復号化装置を有するビデオシステムの第１実施例を概略的に示す。
【図１１】図１１は、本発明による復号化装置を有するビデオシステムの第２実施例を概略的に示す。
【国際調査報告】
2009521174.tif 000014
2009521174.tif 000015
2009521174.tif 000016