(57)【要約】ピクチャ出力が所望されない場合の、復号ピクチャ出力およびアプリケーションを制御するための明示的な信号伝達要素が提供される。符号化ビデオストリームにおける構文要素等の信号要素を使用して、（1）特定の復号ピクチャが出力されるか否か、（2）組のピクチャが明示的に信号伝達されるか、または暗示的に導かれる場合に、特定の組のピクチャが出力されるか否か、あるいは（3）特定の部分のピクチャが出力されるか否かを示す。信号要素は、符号化ピクチャまたはアクセスユニットの一部であってもよく、シーケンスパラメータセット等の、符号化ピクチャもしくはアクセスユニットからの別々の構文構造に関連付けられてもよく、またはそこに存在してもよい。信号要素は、ビデオ符号化システムにおける符号化器および復号器の両方、ならびにビットストリームのサブセットを出力として生成する処理ユニットによって使用されることが可能である。【選択図】  図１
2010507310.tif 000002
【特許請求の範囲】
【請求項１】
ビデオコンテンツを符号化する方法であって、
複数のピクチャを符号化ビットストリームに符号化することと、
前記符号化ビットストリームに情報を提供することと、
を含み、但し前記情報は、前記符号化された複数のピクチャの少なくとも一部に関連付けられ、かつ所望の出力特性を示すものである、方法。  
【請求項２】
前記複数のピクチャに含まれる１つのピクチャの全体が出力されるべきか、該ピクチャの一部のみが出力されるべきかを示すものである、請求項１に記載の方法。
【請求項３】
前記情報は、少なくとも１つの識別子要素を含み、前記少なくとも１つの識別子要素は、出力されない一組のピクチャおよび一組のピクチャ部分のうちの１つを示す、請求項１に記載の方法。  
【請求項４】
前記複数の符号化ピクチャのうちの１つが背景ピクチャであり、前記情報は、前記背景ピクチャが出力されないことを示す、請求項１に記載の方法。  
【請求項５】
前記情報は、仮想参照ピクチャが出力されないことを示す、請求項１に記載の方法。  
【請求項６】
前記複数の符号化ピクチャのうちの１つが符号化されたロゴを含む、請求項１に記載の方法。  
【請求項７】
前記複数の符号化ピクチャのうちの前記１つは、スケーラブルな符号化ビデオビットストリームの上位階層に属する、請求項６に記載の方法。  
【請求項８】
前記複数の符号化ピクチャのうちの１つは、スケーラブルな符号化ビデオビットストリームの基底階層および上位階層のうちの１つに属する、請求項１に記載の方法。  
【請求項９】
前記情報は、ネットワーク抽象化階層ユニットヘッダにおいて符号化される、請求項１に記載の方法。  
【請求項１０】
前記情報は、スライスヘッダにおいて符号化される、請求項１に記載の方法。  
【請求項１１】
前記情報は、補助強化情報メッセージにおいて符号化される、請求項１に記載の方法。  
【請求項１２】
前記補助強化情報メッセージは、前記複数のピクチャのうちの１つに関連付けられる、請求項１１に記載の方法。  
【請求項１３】
前記補助強化情報メッセージは、アクセスユニットに関連付けられ、前記アクセスユニットは、前記複数のピクチャを含む、請求項１１に記載の方法。  
【請求項１４】
ビデオコンテンツを符号化するために、コンピュータ可読媒体に内蔵されるコンピュータプログラム製品であって、請求項１の処理を実行するように構成されるコンピュータコードを含む、コンピュータプログラム製品。  
【請求項１５】
プロセッサ及び該プロセッサに通信可能に関連付けられるメモリユニットを備え、該メモリユニットが、
複数のピクチャを符号化ビットストリームに符号化するためのコンピュータコードと、
前記符号化ビットストリームに情報を提供するためのコンピュータコードと、
を含み、但し前記情報は、前記符号化された複数のピクチャのうちの少なくとも一部に関連付けられ、かつ所望の出力特性を示すものである、符号化装置。
【請求項１６】
前記複数のピクチャに含まれる１つのピクチャの全体が出力されるべきか、該ピクチャの一部のみが出力されるべきかを示すインジケータを含む、請求項１５に記載の装置。  
【請求項１７】
前記情報は、少なくとも１つの識別子要素を含み、前記少なくとも１つの識別子要素は、出力されない一組のピクチャおよび一組のピクチャ部分のうちの１つを示す、請求項１５に記載の装置。  
【請求項１８】
前記複数の符号化ピクチャのうちの１つが背景ピクチャであり、前記情報は、前記背景ピクチャが出力されないことを示す、請求項１５に記載の装置。  
【請求項１９】
前記情報は、仮想参照ピクチャが出力されないことを示す、請求項１５に記載の装置。  
【請求項２０】
前記複数の符号化ピクチャのうちの１つが符号化されたロゴを含む、請求項１５に記載の装置。  
【請求項２１】
前記複数の符号化ピクチャのうちの１つは、スケーラブルな符号化ビデオビットストリームの基底階層および上位階層のうちの１つに属する、請求項１５に記載の装置。  
【請求項２２】
前記情報は、ネットワーク抽象化階層ユニットヘッダにおいて符号化される、請求項１５に記載の装置。
【請求項２３】
前記情報は、スライスヘッダにおいて符号化される、請求項１５に記載の装置。
【請求項２４】
前記情報は、補助強化情報メッセージにおいて符号化される、請求項１５に記載の装置。
【請求項２５】
前記補助強化情報メッセージは、前記複数のピクチャのうちの１つに関連付けられる、請求項２４に記載の装置。
【請求項２６】
前記補助強化情報メッセージは、アクセスユニットに関連付けられ、前記アクセスユニットは、前記複数のピクチャを含む、請求項２４に記載の装置。
【請求項２７】
複数のピクチャを選択的に出力する方法であって、
符号化ビットストリームから前記複数のピクチャを復号することと、
前記ビットストリームから情報を復号することと、
前記情報に基づいて、前記複数のピクチャを選択的に出力することと、
を含み、但し前記情報は、前記復号された複数のピクチャの少なくとも一部に関連付けられ、かつ所望の出力特性を示すものである、方法。
【請求項２８】
前記複数のピクチャに含まれる１つのピクチャの全体が出力されるべきか、該ピクチャの一部のみが出力されるべきかを示すインジケータを含む、請求項２７に記載の方法。
【請求項２９】
前記情報は、少なくとも１つの識別子要素を含み、前記少なくとも１つの識別子要素は、出力されない一組のピクチャおよび一組のピクチャ部分のうちの１つを示す、請求項２７に記載の方法。  
【請求項３０】
前記複数のピクチャのうちの１つは背景ピクチャであり、前記情報は、前記背景ピクチャが出力されないことを示す、請求項２７に記載の方法。  
【請求項３１】
前記情報は、仮想参照ピクチャが出力されないことを示す、請求項２７に記載の方法。  
【請求項３２】
前記複数ピクチャのうちの１つは、符号化されたロゴを含む、請求項２７に記載の方法。  
【請求項３３】
前記複数のピクチャのうちの前記１つは、スケーラブルな符号化ビデオビットストリームの上位階層に属する、請求項３２に記載の方法。  
【請求項３４】
前記複数のピクチャのうちの１つは、スケーラブルな符号化ビデオビットストリームの基底階層および上位階層のうちの１つに属する、請求項２７に記載の方法。  
【請求項３５】
前記情報は、ネットワーク抽象化階層ユニットヘッダから復号される、請求項２７に記載の方法。  
【請求項３６】
前記情報は、スライスヘッダから復号される、請求項２７に記載の方法。  
【請求項３７】
前記情報は、補助強化情報メッセージにおいて復号される、請求項２７に記載の方法。  
【請求項３８】
前記補助強化情報メッセージは、前記複数のピクチャのうちの１つに関連付けられる、請求項３７に記載の方法。  
【請求項３９】
前記補助強化情報メッセージは、アクセスユニットに関連付けられ、前記アクセスユニットは、前記複数のピクチャを含む、請求項３７に記載の方法。  
【請求項４０】
コンピュータ可読媒体に内蔵されるコンピュータプログラム製品であって、請求項２９の処理を実行するように構成されるコンピュータコードを含む、コンピュータプログラム製品。  
【請求項４１】
プロセッサ及び該プロセッサに通信可能に接続されるメモリを備える復号装置であって、前記メモリが、
符号化ビットストリームから前記複数のピクチャを符号化するためのコンピュータコードと、
前記ビットストリームから情報を復号し、該情報に基づいて前記複数のピクチャを選択的に出力するためのコンピュータコードと、
を含み、但し前記情報は、前記復号された複数のピクチャのうちの少なくとも一部に関連付けられ、かつ所望の出力特性を示すものである、復号装置。  
【請求項４２】
前記複数のピクチャに含まれる１つのピクチャの全体が出力されるべきか、該ピクチャの一部のみが出力されるべきかを示すインジケータを含む、請求項４１に記載の装置。  
【請求項４３】
前記情報は、少なくとも１つの識別子要素を含み、前記少なくとも１つの識別子要素は、出力されない一組のピクチャおよび一組のピクチャ部分のうちの１つを示す、請求項４１に記載の装置。  
【請求項４４】
前記複数のピクチャのうちの１つは背景ピクチャであり、前記情報は、前記背景ピクチャが出力されないことを示す、請求項４１に記載の装置。  
【請求項４５】
前記情報は、仮想参照ピクチャが出力されないことを示す、請求項４１に記載の装置。  
【請求項４６】
前記複数のピクチャのうちの１つは符号化されたロゴを含む、請求項４１に記載の装置。  
【請求項４７】
前記複数のピクチャのうちの１つは、スケーラブルな符号化ビデオビットストリームの基底階層および上位階層のうちの１つに属する、請求項４１に記載の装置。  
【請求項４８】
前記情報は、ネットワーク抽象化階層ユニットヘッダから復号される、請求項４１に記載の装置。  
【請求項４９】
前記情報は、スライスヘッダから復号される、請求項４１に記載の装置。  
【請求項５０】
前記情報は、補助強化情報メッセージにから復号される、請求項４１に記載の装置。  
【請求項５１】
前記補助強化情報メッセージは、前記複数のピクチャのうちの１つに関連付けられる、請求項５０に記載の装置。  
【請求項５２】
前記補助強化情報メッセージは、アクセスユニットに関連付けられ、前記アクセスユニットは、前記複数のピクチャを含む、請求項５０に記載の方法。  
【請求項５３】
ビットストリームからの情報を処理するためのコンピュータコードであって、前記情報は、第１の復号ピクチャの少なくとも一部が出力されるか否かを標示し、第１の符号化ピクチャの復号によって、前記第１の復号ピクチャがもたらされ、前記第１の符号化ピクチャおよび第２の符号化ピクチャの復号によって、前記第２の復号ピクチャがもたらされるコンピュータコードと、
前記情報の前記標示に基づいて、前記第１の復号ピクチャを選択的に出力するためのコンピュータコードと、
を含む、処理ユニット。  
【請求項５４】
プロセッサ及び該プロセッサに通信可能に接続されるメモリユニットを備える装置であって、
第１の符号化ピクチャ、第２の符号化ピクチャ、および第１の復号ピクチャの少なくとも一部が出力されるか否かを示す情報を受信し、前記第１の符号化ピクチャの復号は、前記第１の復号ピクチャをもたらし、前記第１の符号化ピクチャおよび前記第２の符号化ピクチャの復号は、第２の復号ピクチャをもたらし、
前記復号された情報の前記標示に基づいて、前記第２の復号ピクチャを選択的に伝送する、
ように構成される、装置。  
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ビデオの符号化に関する。より具体的には、本発明は、出力以外の目的で復号されたピクチャを使用することに関する。
【発明の背景】
【０００２】
本項は、請求項に列挙される本発明の背景または内容を提供することを目的とする。本項における説明は、追求されうる概念を含む可能性があり、必ずしも過去に着想または追求された概念ではない。したがって、別途明示されない限り、本項に記載される事項は、本願における発明の説明や特許請求の範囲に対する従来技術ではなく、本項に含まれることによって従来技術であるとされるべきものではない。
【０００３】
ビデオ符号化規格には、ITU-T H.261、ISO/IEC MPEG-1ビジュアル、ITU-T H.262またはISO/IEC MPEG-2ビジュアル、ITU-T H.263、ISO/IEC MPEG-4ビジュアル、およびITU-T H.264（ISO/IEC MPEG-4 AVCとしても知られている）がある。さらに新しいビデオ符号化規格の開発も進行中である。開発中のこのような規格の１つとして、スケーラブルビデオ符号化（Scalable Video Coding; SVC）規格が挙げられる。この規格は、H.264/AVCに対するスケーラブルな強化となる。開発中の別の規格として、マルチビデオ符号化規格（Multi Video Coding）が挙げられ、これも、H.264/AVCの強化である。さらに別のこのような取り組みには、中国におけるビデオ符号化規格の開発が含まれる。
【０００４】
次の非特許文献１にSVCの草案が示されている。また、次の非特許文献２にMVCの草案が示されている。これらの書類は、参照することによってその全体が本明細書に組み込まれる。
【非特許文献１】JVT-T201, "Joint Draft 7 of SVC Amendment," 20th JVT Meeting, Klagenfurt, Austria, July 2006http://ftp3.itu.ch/av-arch/jvt-site/2006_07_Klagenfurt/JVT-T201.zip
【非特許文献２】JVT-T208, "Joint Multiview Video Model (JMVM) 1.0", 20th JVT meeting, Klagenfurt, Austria, July 2006http://ftp3.itu.ch/av-arch/jvt-site/2006_07_Klagenfurt/JVT-T208.zip
【０００５】
スケーラブルビデオ符号化（SVC）において、ビデオ信号は、基底階層（Base Layer）と、ピラミッド状に構築される１つ以上の上位階層（又は強化階層若しくは拡張階層；Enhancement Layer）とに符号化されうる。上位階層は、別の階層や別の階層の一部によって表されるビデオコンテンツの時間分解能（つまりフレームレート）や空間分解能、品質を強化する。各階層は、その依存階層（Dependent Layer）とともに、ある空間分解能や、時間分解能、品質レベルにおけるビデオ信号の一表現をなす。スケーラブル階層は、その依存階層とともに「スケーラブル階層表現」と呼ばれる。スケーラブル階層表現に対応するスケーラブルビットストリームの一部は、抽出および復号されて、特定の忠実度で元々の信号の表現を生成することが可能である。
【０００６】
ある場合に、上位階層におけるデータは、特定の位置の後、または任意の位置切り詰められる（truncated）ことができ、この場合、各切り詰め位置は、視覚品質の強化の増加を表わす追加のデータを含んでもよい。このようなスケーラビリティは、細粒（粒度）スケーラビリティ（Fine-Grained Scalability; FGS）と呼ばれる。FGSとは対照的に、切り詰め不可能である上位階層によってもたらされるスケーラビリティは、粗粒（粒度）スケーラビリティ（Coarse-Grained Scalability; CGS）と呼ばれる。CGSは、従来の品質（SNR）スケーラビリティおよび空間スケーラビリティを総称して含む。
【０００７】
合同ビデオチーム（Joint Video Team; JVT）は、H.264/先進ビデオ符号化（Advanced Video Coding; AVC）規格に対する拡張として、SVC規格を開発しているところである。SVCは、H.264/AVCと同一の機構を使用し、時間スケーラビリティを提供する。AVCにおいて、時間スケーラビリティ情報の信号伝達は、サブシーケンス関連の補助強化情報（Supplemental Enhancement Information; SEI）メッセージを使用することによって実現される。
【０００８】
SVCは、階層間予測（Inter-layer prediction mechanism）機構を使用し、この機構では、現在再構築された階層または次の下位階層以外の階層から特定の情報を予測することが可能である。階層間予測可能な情報には、イントラテクスチャや動き、残差データ（residual data）が含まれる。階層間動き予測（Inter-layer motion prediction）には、ブロック符号化モードやヘッダ情報等の予測が含まれ、この場合、下位階層からの動き情報は、それより上位の階層の予測に使用されうる。イントラ符号化（intra coding）の場合、周囲のマクロブロックからの予測または下位階層の同一位置にあるマクロブロックからの予測が可能である。これらの予測技法は、動き情報を用いないため、イントラ予測技法（intra prediction technique）と呼ばれる。さらに下位階層からの残差データも、現在階層の予測に用いられることが可能である。
【０００９】
SVC符号化器の出力およびSVC復号器の入力のための基本的なユニットは、ネットワーク抽象化階層（Network Abstraction Layer; NAL）ユニットである。符号化器によって生成される一連のNALユニットは、NALユニットストリームと呼ばれる。パケット指向型ネットワークまたはストレージ上における構造化ファイルへの輸送に関し、NALユニットは、典型的には、パケットまたは類似の構造にカプセル化される。フレーミング構造を提供しない伝送環境またはストレージ環境において、開始コードベースのビットストリーム構造に類似するバイトストリームフォーマットが、H.264/AVC規格の付属書類Bに明記されている。バイトストリームフォーマットは、各NALユニットの前に開始コードを付加することによって、NALユニットを相互に分離する。
【００１０】
SEI （Supplemental Enhancement Information；補助強化情報）NALユニットは、１つ以上のSEIメッセージを含み、このメッセージは、出力ピクチャの復号には必要とされないが、ピクチャ出力タイミングやレンダリング、エラー検出、エラー隠蔽、リソース予約等の関連プロセスを支援する。H.264/AVC規格には約20個のSEIメッセージが定められており、その他についてはSVCで定められる。ユーザデータSEIメッセージによって、組織や企業は、自身の使用のためにSEIメッセージを特定することが可能になる。H.264/AVCおよびSVCは、定められたSEIメッセージのための構文（syntax）およびセマンティック（syntax）を含むが、受信者におけるメッセージ取り扱いプロセスは定義されていない。結果として、符号化器は、SEIメッセージを生成する際にH.264/AVCまたはSVC規格に従う必要があるが、H.264/AVCまたはSVC規格に準拠する復号器におけるSEIメッセージの処理については出力順序が一致している必要はない。SEIメッセージの構文およびセマンティックをH.264/AVCに含める理由の１つとして、SVCは、デジタルビデオブロードキャスト仕様等のシステム仕様が、補助情報を全く同じように解釈して相互運用できるようにすることが挙げられる。システム仕様が、符号化側および復号側の両方において特定のSEIメッセージの使用を要求することができることが意図されており、受信者におけるSEIメッセージの取り扱いプロセスが、システム仕様において、アプリケーションのために指定されうることが望まれる。
【００１１】
H.264/AVCおよびSVCにおいて、符号化されたビデオシーケンス中で変化しない符号化パラメータが、シーケンスパラメータセットに含まれている。復号プロセスに必須のパラメータに加え、シーケンスパラメータセットは、ビデオ有用性情報（Video Usability Information; VUI）を含んでもよく、このVUIは、バッファリング、ピクチャ出力タイミング、レンダリング、およびリソース予約に重要なパラメータを含む。シーケンスパラメータセットの搬送のために特定された２つの構造が存在するが、この２つの構造とは、H.264/AVCピクチャの全データをシーケンスに含むシーケンスパラメータセットNALユニットと、SVCのシーケンスパラメータセット拡張である。ピクチャパラメータセットは、いくつかの符号化ピクチャにおいて不変である可能性の高いパラメータを含む。頻繁に変化するピクチャレベルのデータは、各スライスヘッダにおいて反復され、ピクチャパラメータセットは、残りのピクチャレベルパラメータを運ぶ。H.264/AVC構文によれば、シーケンスパラメータセットおよびピクチャパラメータセットの多数のインスタンスが許されており、各インスタンスは一意の識別子で識別される。各スライドヘッダは、スライスを含むピクチャの復号に関してアクティブなピクチャパラメータセットの識別子を含み、各ピクチャパラメータセットは、アクティブなシーケンスパラメータセットの識別子を含む。結果的に、ピクチャパラメータセットおよびシーケンスパラメータセットの伝送は、スライスの伝送に正確に同期化される必要はない。代わりに、アクティブなシーケンスパラメータセットやピクチャパラメータセットは、参照される前の任意の瞬間に受信されることで十分である。これによって、パラメータセットの伝送、スライスデータのために使用されるプロトコルよりも、より信頼性の高い伝送機構によって行われることが可能になる。例えば、パラメータセットは、H.264/AVCリアルタイムプロトコル（Real-Time Protocol; RTP）セッションのセッション記述にMIMEパラメータとして含まれることが可能である。使用中のアプリケーションにおいて可能である場合はいつでも、帯域外の信頼性のある伝送機構を使用することが推奨される。パラメータセットが帯域内で伝送される場合、パラメータセットは、エラーに対するロバスト性を改善するように反復されてもよい。
【００１２】
マルチビュービデオ符号化（multi-view video coding）において、異なるビューに各々が対応する異なるカメラからのビデオシーケンス出力は、１つのビットストリームに符号化される。復号後、特定のビューを表示する場合、そのビューに属する復号ピクチャが再構築されて表示される。また、複数のビューが再構築されて表示されることも可能である。マルチビュービデオ符号化は、自由視点ビデオ/テレビ、3DTV、および監視を含む、幅広い多様なアプリケーションを有する。
【００１３】
264/AVC、SVC、またはMVCにおいて、符号化されたスライスまたはスライスデータパーティションを含むNALユニットは、ビデオ符号化層（Video Coding Layer; VCL）NALユニットと呼ばれる。その他のNALユニットは、非VCL NALユニットである。特定の時間に関する全NALユニットは、アクセスユニットを形成する。
【００１４】
オーバーレイ符号化（Overlay coding）は、シーン遷移のソースシーケンスおよびフェードの実行時間組成の独立符号化に基づくものである。オーバーレイ符号化において、２つのシーンからの再構築されたピクチャは、本明細書において、成分画像と呼ばれ、マルチピクチャバッファに格納されて、遷移中に効率的な動き補正が可能になる。クロスフェードのシーン遷移は、表示目的のためだけに、成分ピクチャから構成される。重複する成分画像は、上のピクチャが部分的に透明であるようにオーバーレイされる。下のピクチャは、ソースピクチャと呼ばれる。クロスフェードは、ソースピクチャとトップピクチャとの間のフィルタ動作として定義される。
【００１５】
多くのアプリケーションまたは事例において、符号化された参照ピクチャと、結果として復号された参照ピクチャのストレージとを必要とするが、同時に、復号されたピクチャを出力または表示しないようにすることが望ましい場合が存在する。このような状況は、スケーラブルビットストリームの符号化を伴い、ここで、基底階層は、品質強化階層（quality refinement enhancement layer）および空間強化階層（spatial refinement enhancement layer）の予測に使用される。この場合、基底階層は、表示するのに十分な品質まで、元々の非圧縮ピクチャを表現しない。品質強化階層は、空間強化階層から予測されず、また、その反対も同様である。復号器の能力に依存して、基底階層および品質強化階層のみ、または基底階層および空間強化階層のみが、復号のために提供されてもよい。この場合、品質強化階層および空間強化階層の両方を復号に提供することは有益ではない。表示するのに十分なほど基底階層が符号化されていないという標示を伝達することによって、復号器は、基底階層のみを復号しないようになり、またメディアアウェアネットワーク要素（Media-Aware Network Element; MANE）は、転送されたビットストリームの切り詰めにおいて、基底階層のみが残らないようにする。
【００１６】
別の状況において、参照ピクチャとしての符号化されたピクチャの復号および保存が望ましく、一方、復号されたピクチャを出力または表示しないようにすることは、多数の上位階層の事例を伴う。この場合、２つの上位階層AおよびBを想定することが役立ち、この場合、Aは基底階層に依存し、BはAに依存する。階層AまたはBは、品質上位階層または空間上位階層であってもよい。基底階層の品質は、表示するには十分高くなく、階層AおよびBの両方は、許容範囲の表示品質を提供することが可能である。ゆえに、必要に応じて、例えば、ネットワーク接続帯域幅変更影響に応じて、階層AとBを切り替えることが理想的である。同様に、上述のように、基底階層が表示するのに十分符号化されていないことを示す信号を伝達することによって、復号器は、基底階層のみを復号しないようになり、また、メディアアウェアネットワーク要素（MANE）は、転送されたビットストリームの切り詰めにおいて、基底階層のみが残らないようにする。
【００１７】
３番目のこのような状況は、復号器における出力ピクチャの合成が、出力されないピクチャに基づくことを含む。一例は、段階的シーン遷移の符号化のために提案されているオーバーレイ符号化を伴う。別の例は、放送局のロゴの挿入を伴う。このような場合、テレビ番組または類似のコンテンツは、ロゴとは独立して符号化される。ロゴは、関連の透明情報（例えば、αプレーン）を有する独立のピクチャとして符号化される。放送局は、ロゴの表示を委任したい。したがって、「主要」コンテンツのピクチャ上におけるロゴの混合は、ビデオ復号規格の規範的部分である。混合ピクチャのみが出力される一方で、「主要」コンテンツのピクチャおよびロゴピクチャ自体のピクチャが、出力されないようにマークされることが望ましい。
【００１８】
現在のところ、ピクチャが復号されるが出力されるべきではないことを示すというコンセプトは、特定の使用事例に限定されている。このような一事例において、H.263およびH.264/AVCのSEIメッセージに定められる、いくつかのピクチャ凍結コマンド（freeze picture command）が使用される。これらのSEIメッセージは、復号機器の表示プロセスに関する命令を行う。これらのSEIメッセージは、復号器自体の出力に影響を及ぼさない。全ピクチャ凍結要求機能は、以前表示されたビデオピクチャのコンテンツが、全ピクチャ凍結解除要求または中断の発生により通知されるまで、変わらずに維持されるべきであることを示す。部分的なピクチャ凍結要求は、全ピクチャ要求に類似するが、ピクチャ中の表示された長方形領域のみに関係する。
【００１９】
別のこのような使用事例において、背景ピクチャは、保持および更新される。背景ピクチャは、予測参照として使用可能であるが、決して出力されない。第１のINTRAフレームまたはシーン変更フレームが出現すると、背景ピクチャ全体がそのフレームと共に更新される。ブロックがゼロ動きベクトルを有し、背景ピクチャにおける対応するブロックよりも微細な量子化で符号化される場合は、背景ピクチャは、ブロック毎に更新される。
【００２０】
このような表示が提供される別の状況には、H.264/AVC規格においてno_output_of_prior_pics_flagの使用を伴うものがある。このフラグは、瞬時復号リフレッシュ（Instantaneous Decoding Refresh; IDR）ピクチャに存在する。これが１に設定されると、IDRピクチャの復号時に、復号順番がIDRピクチャの前のピクチャおよび復号されたピクチャのバッファに存在するピクチャは、出力されない。
【００２１】
このような表示が提供されるさらに別の状況には、SVC規格のlayer_base_flagの使用を伴うものがある。このフラグは、FGSピクチャの基本表現としてピクチャが復号および格納されることを示すために使用され、また、後のFGSピクチャのインター予測参照として使用される。復号された基本表現は、FGS強化ピクチャが受信されるまで出力されない。SVCの初期バージョンにおいて、1に等しいkey_pic_flagおよび0を超えるquality_levelを使用して、ピクチャが復号されて基本表現として格納されること、および前の基本表現が、このピクチャの予測参照として使用されることが示されていた。
【００２２】
最後に、対応するオーバーレイピクチャが受信される場合に、ピクチャが出力されない使用事例が存在する。オーバーレイ符号化（Overlay coding）は、シーン遷移のソースシーケンスおよびフェードの実行時間組成の独立符号化に基づく。第１のシーンのピクチャは、復号されるが、同一の時間時点のオーバーレイピクチャが受信されない場合は、出力されない。オーバーレイピクチャは、第２のシーン中のピクチャの符号化された表現と、第１のシーンおよび第２のシーンの復号されたピクチャ間に示された動作の成分のパラメータとを含む。復号器は、動作を実行し、結果として生じる動作のピクチャのみを出力するが、一方、第１のシーンのピクチャおよび第２のシーンのピクチャは、予測間参照として復号されたピクチャバッファに残る。このシステムは、2003年1月22日に出願された米国特許出願公開第2003/0142751号に詳細に記載されており、本公報は、参照することによってその全体が本明細書に組み込まれる。
【特許文献１】米国特許出願公開第2003/0142751号
【発明の概要】
【００２３】
本発明は、スケーラブルに符号化されたビデオビットストリームにおいて、構文要素などの１つ以上の信号伝達要素の使用を提供する。本発明の種々の実施形態によれば、符号化されたビデオビットストリームにおける構文要素等の１つ以上の信号要素が、次のことを示すために用いられる。
（１）ある復号ピクチャに対応する符号化ピクチャがあるときに、当該符号化ピクチャが、別の復号ピクチャを生成する際に別の符号化ピクチャと連携して使用されることが意図される場合に、当該復号ピクチャが有効であるか否か、及び／又はそうでなければ出力として望ましいか否か；
（２）あるピクチャの組に対応する符号化ピクチャがあるときに、当該符号化ピクチャが、別の復号ピクチャの組を生成する際に、強化スケーラブル階層等の別の符号化ピクチャと連携して使用されることが意図される場合に、当該スケーラブル階層等の特定の組のピクチャが有効であるか否か、及び／又はそうでなければ出力として望ましいか否か（ピクチャの組は、明示的に信号伝達されるか、または暗示的に導かれる）；
（３）ピクチャの或る部分に対応する符号化ピクチャの部分があるときに、当該符号化ピクチャが、別の復号ピクチャを生成する際に、別の符号化ピクチャに関連して使用されることが意図される場合に、上記特定の部分のピクチャが有効であり、及び／又はそうでなければ出力することを望まれるか否か、を示す。
例えば、基底階層およびその品質上位階層の両方が、２つのスライス群を含んでいてもよく、一方の群は関心領域を含み、別の群は「背景」のためのものを含む。種々の発明によると、基底階層ピクチャの背景が良好であること、及び／又はそうでなければ出力のために十分望ましいこと、一方、関心領域が、十分な品質のために、対応するスライス群の上位階層を必要とすることが伝達されることが可能である。信号要素は、符号化ピクチャまたはアクセスユニットの一部であってもよく、シーケンスパラメータセット等の、符号化ピクチャまたはアクセスユニットからの別々の構文構造に関連付けられるか、またはその中に含まれていてもよい。本発明の種々の実施形態は、シーケンス全体を再符号化せずに、ロゴを圧縮ビットストリームに挿入することに使用可能である。
【００２４】
さらに、本発明の種々の実施形態は、上述の信号要素をビットストリームに符号化する符号化器の使用を伴う。符号化器は、前述の使用事例のいずれかに従って動作するように構成されることが可能である。さらに、種々の実施形態は、信号要素を使用して、ピクチャ、一組のピクチャ、またはピクチャの一部を出力するか否かについて結論を出す復号器の使用を伴う。
【００２５】
またさらに、本発明の種々の実施形態は、本明細書に記載の信号要素を含むビットストリームを入力として取り込み、ビットストリームのサブセットを出力として生成する処理ユニットの使用を伴う。サブセットは、信号要素に従って出力されるように指示される少なくとも１つのピクチャを含む。処理ユニットの動作は、特定の最小出力ピクチャレートで出力を生成するように調整可能であり、この場合、サブセットは、少なくとも最小出力ビットレートで、提案された信号要素に従って処理されるように指示されるピクチャを含む。
【００２６】
ビットストリームの生成者が、少なくともいくつかの数のビューが表示に必要であると考えている場合、本発明の種々の実施形態は、マルチビュービデオ符号化に適用可能であることに留意されたい。例えば、ビットストリームが立体表示のために生成される場合、ビューのうちの１つのみを表示することは、生成者の美的な目標に十分ではない。このような状況において、復号器から１つだけのビューを出力することは、本発明の実施形態を使用して無効にすることが可能である。
【００２７】
本発明のこれらの利点および特徴ならびにその他の利点および特徴と、その動作の機構および方式とは、添付の図面を併用して、以下の発明を実施するための最良の形態より明白になるであろう。添付の図面に関し、後述のいくつかの図面において、同一要素は、同一の数表示を有する。
【図面の簡単な説明】
【００２８】
【図１】本発明が実装されうるシステムの概要図である。
【００２９】
【図２】本発明の実装において使用可能なモバイル機器の斜視図である。
【００３０】
【図３】図２のモバイル機器の回路に関する略図である。
【００３１】
【図４】基底階層と、ロゴを含む上位階層とに関する図である。
【実施例の詳細な説明】
【００３２】
図１は、汎用マルチメディア通信システムを示す。図１に示されるように、データソース100は、アナログフォーマット、非圧縮デジタルフォーマット、または圧縮デジタルフォーマット、あるいはこれらのフォーマットの任意の組み合わせでソース信号を提供する。符号化器110は、ソース信号を符号化メディアビットストリームに符号化する。符号化器110は、音声および映像等の複数のメディア型を符号化可能であってもよく、または異なるメディア型のソース信号を符号化するために、複数の符号化器110が必要とされてもよい。また、符号化器110は、グラフィックとテキスト等により合成的に生成される入力を受けてもよく、または、符号化器110は、合成メディアの符号化ビットストリームを生成可能であってもよい。以下において、説明を簡略化するために、１つのメディア型の１つの符号化メディアビットストリームの処理のみについて考察する。しかしながら、典型的には、リアルタイムブロードキャストサービスは、いくつかのストリーム（典型的には、少なくとも１つの音声、映像、およびテキストサブタイトルストリーム）を含むことに留意されたい。また、システムは、多数の符号化器を含んでもよいが、以下において、一般性を欠如することなく説明を簡略化するために、１つのみの符号化器110について考察する。
【００３３】
符号化メディアビットストリームは、ストレージ120に転送される。ストレージ120は、符号化メディアビットストリームを格納するために、任意のタイプの大容量メモリを備えてもよい。ストレージ120における符号化メディアビットストリームのフォーマットは、基本的な自立型ビットストリームフォーマットであってもよく、または１つ以上の符号化メディアビットストリームは、コンテナファイルにカプセル化されてもよい。いくつかのシステムは、「ライブ」で動作し、つまり、ストレージを省略して、符号化メディアビットストリームを符号化器110から直接送信機130に転送する。次に、符号化メディアビットストリームは、必要に応じて送信機130（サーバとも呼ばれる）に転送される。伝送に使用されるフォーマットは、基本的な自立型ビットストリームフォーマット、パケットストリームフォーマットであってもよく、または１つ以上の符号化メディアビットストリームは、コンテナファイルにカプセル化されてもよい。符号化器110、ストレージ120、および送信機130は、同一の物理的機器に存在してもよく、または別々の機器に含まれてもよい。符号化器110および送信機130は、ライブリアルタイムコンテンツで動作してもよく、この場合、符号化メディアビットストリームは、典型的には、永久的に格納されないが、コンテンツ符号化器110及び／又は送信機130において短期間バッファリングされて、処理遅延、転送遅延、および符号化メディアビットレートにおける変動を平均化する。
【００３４】
送信機130は、通信プロトコルスタックを使用して符号化メディアビットストリームを送信する。スタックには、リアルタイムトランスポートプロトコル（Real-Time Transport Protocol; RTP）、ユーザデータグラムプロトコル（User Datagram Protocol; UDP）、およびインターネットプロトコル（Internet Protocol; IP）が含まれてもよいがこれらに限定されない。通信プロトコルスタックがパケット指向型である場合、送信機130は、符号化メディアビットストリームをパケットにカプセル化する。例えば、RTPを使用する場合、送信機130は、RTFペイロードフォーマットに従って、符号化メディアビットストリームをRTPパケットにカプセル化する。典型的には、各メディア型は、専用RTPペイロードフォーマットを有する。前述のように、システムは複数の送信機130を含んでもよいが、簡略化するために、以下の説明では１つの送信機130についてのみ考察することに留意されたい。
【００３５】
送信機130は、通信ネットワークを介してゲートウェイ140に接続されてもよく、または接続されなくてもよい。ゲートウェイ140は、一方の通信プロトコルスタックに従うパケットストリームの別の通信プロトコルスタックへの変換、データストリームの統合および分岐、ダウンリンク能力や受信機能力に従うデータストリームの操作（例えば、転送されるストリームのビットレートを主なダウンリンクネットワーク状態に従って制御すること）などの、様々なタイプの機能を実行してもよい。ゲートウェイ140の例には、マルチポイント会議制御ユニット（multipoint conference control unit; MCU）、回路交換およびパケット交換映像電話間のゲートウェイ、プッシュトゥートークオーバーセルラ（Push-to-talk over Cellular; PoC）サーバ、デジタル映像ブロードキャストハンドヘルド（digital video broadcasting-handheld; DVB-H）システムにおけるIPエンカプスレータ、またはホーム無線ネットワームへ局所的にブロードキャスト伝送を転送するセットトップボックスが挙げられる。RTPを使用する際、ゲートウェイ140は、RTP混合器と呼ばれ、RTP接続の終点としての役割を果たす。
【００３６】
システムは、１つ以上の受信機150を含み、この受信機は、典型的には、伝送された信号を受信し、復調し、符号化メディアビットストリームを非カプセル化することが可能である。符号化メディアビットストリームは、典型的には、復号器160によってさらに処理され、復号器160は、１つ以上の非圧縮メディアストリームを出力する。復号されるべきビットストリームは、事実上任意のタイプのネットワーク内に位置する遠隔機器から受信されてもよいことに留意されたい。さらに、ビットストリームは、ローカルのハードウェアまたはソフトウェアから受け取ることもできる。最後に、レンダラ170は、例えば、拡声器またはディスプレイで非圧縮メディアストリームを再生成してもよい。受信機150、復号器160、およびレンダラ170は、同一の物理的機器に存在してもよく、または別々の機器に含まれてもよい。
【００３７】
ビットレート、復号複雑性、およびピクチャサイズに関するスケーラビリティは、異種混合環境やエラーを起こし易い環境において望ましい特性である。この特性は、ビットレートの制約、ディスプレイ解像度、ネットワークスループット、および受信機器の計算能力等の制限に対抗するために望ましい。
【００３８】
本明細書に含まれるテキストおよび例は、符号化プロセスについて具体的に述べているが、同一の概念および原理が、対応する復号プロセスにも当てはまること、またその反対も同様であることを、当業者が容易に理解し得ることを理解されたい。復号されるべきビットストリームは、事実上任意の種類のネットワーク内に位置する遠隔機器から受信されてもよいことに留意されたい。さらに、ビットストリームは、ローカルのハードウェアまたはソフトウェアから受け取ることも可能である。
【００３９】
本発明の通信機器は、種々の伝送技術を使用して通信してもよく、この通信技術には、符号分割多元接続（Code Division Multiple Access; CDMA）、モバイル通信のためのグローバルシステム（Global System for Mobile Communications; GSM）、ユニバーサル移動体通信システム（Universal Mobile Telecommunications System; UMTS）、時分割多元接続（Time Division Multiple Access; TDMA）、周波数分割多元接続（Frequency Division Multiple Access FDMA）、伝送制御プロトコル/インターネットプロトコル（Transmission Control Protocol/Internet Protocol; TCP/IP）、ショートメッセージサービス（Short Messaging Service; SMS）、マルチメディアメッセージングサービス（Multimedia Messaging Service; MMS）、電子メール、インスタントメッセージサービス（Instant Messaging Service; IMS）、Bluetooth、IEEE 802.11等が含まれるがこれらに限定されない。通信機器は、無線、赤外線、レーザ、ケーブル接続、およびその同等物を含むがこれらに限定されない種々のメディアを使用して通信してもよい。
【００４０】
図２および図３は、本発明が実装されうる１つの代表的なモバイル機器12を示す。しかしながら、本発明が、１つの特定の型のモバイル機器12またはその他の電子機器に限定されるように意図されないことを理解されたい。図5および図6に図示する特徴は、図１に示すシステムに利用されうる任意の機器または全ての機器に組み込まれうる。
【００４１】
図２および図３のモバイル機器12は、ハウジング30、液晶ディスプレイ形式のディスプレイ32、キーパッド34、マイクロホン36、イヤホン38、バッテリ40、赤外線ポート42、アンテナ44、本発明の一実施形態に従うUICC形式のスマートカード46、カード読み取り器48、無線インターフェース回路52、コーデック回路54、コントローラ56、およびメモリ58を含む。個々の回路および要素の全ては、例えばノキアの様々なモバイル機器で見られるように、当技術分野で良く知られている。
【００４２】
本発明は、スケーラブルに符号化されたビデオビットストリームにおいて、構文要素などの１つ以上の信号伝達要素の使用を提供する。本発明の種々の実施形態によれば、符号化されたビデオビットストリームにおける構文要素等の１つ以上の信号要素が、次のことを示すために用いられる。
（１）ある復号ピクチャに対応する符号化ピクチャがあるときに、当該符号化ピクチャが、別の復号ピクチャを生成する際に別の符号化ピクチャと連携して使用されることが意図される場合に、当該復号ピクチャが有効であるか否か、及び／又はそうでなければ出力として望ましいか否か；
（２）あるピクチャの組に対応する符号化ピクチャがあるときに、当該符号化ピクチャが、別の復号ピクチャの組を生成する際に、強化スケーラブル階層等の別の符号化ピクチャと連携して使用されることが意図される場合に、当該スケーラブル階層等の特定の組のピクチャが有効であるか否か、及び／又はそうでなければ出力として望ましいか否か（ピクチャの組は、明示的に信号伝達されるか、または暗示的に導かれる）；
（３）ピクチャの或る部分に対応する符号化ピクチャの部分があるときに、当該符号化ピクチャが、別の復号ピクチャを生成する際に、別の符号化ピクチャに関連して使用されることが意図される場合に、上記特定の部分のピクチャが有効であり、及び／又はそうでなければ出力することを望まれるか否か、を示す。
例えば、基底階層およびその品質上位階層の両方が、２つのスライス群を含んでいてもよく、一方の群は関心領域を含み、別の群は「背景」のためのものを含む。種々の発明によると、基底階層ピクチャの背景が良好であること、及び／又はそうでなければ出力のために十分望ましいこと、一方、関心領域が、十分な品質のために、対応するスライス群の上位階層を必要とすることが伝達されることが可能である。信号要素は、符号化ピクチャまたはアクセスユニットの一部であってもよく、シーケンスパラメータセット等の、符号化ピクチャまたはアクセスユニットからの別々の構文構造に関連付けられるか、またはその中に含まれていてもよい。
【００４３】
本発明の実施形態によると、図１に図示するタイプの符号化器110は、上述の信号要素をビットストリームに符号化することが可能である。符号化器110は、前述の実施シナリオのいずれかに従って動作するように構成可能である。同様に、復号器160は、ピクチャ、特定の組のピクチャ、または特定の部分のピクチャが出力されるか否かを判断するために、信号要素を使用することが可能である。
【００４４】
またさらに、本発明のその他の実施形態において、処理ユニットは、信号要素を含むビットストリームを入力として取り込み、ビットストリームのサブセットを出力として生成するように構成される。例えば、処理ユニットは、ストリーミングサーバ、またはRTP混合器等のゲートウェイ140であることが可能である。ビットストリームのこのサブセットは、信号要素に従って出力されるように指示される少なくとも１つのピクチャを含む。種々の実施形態において、処理ユニットの動作は、ある最大出力ビットレートで出力を生成するように調整可能であり、この場合、サブセットは、上記信号要素に従って、最大出力ビットレートを超えないように出力されるように指示されているピクチャを含む。
【００４５】
あるピクチャが出力されるか否かを示すための信号要素は、例えば、NALユニットヘッダ、スライスヘッダ、またはピクチャもしくはアクセスユニットに関連付けられる補助強化情報（SEI）メッセージに含まれることが可能である。SEIメッセージは、幅広い多様な目的でビデオの使用を強化するためにビットストリームに挿入可能な追加情報を含む。
【００４６】
以下の構文表は、SVC規格JVT-T201規格の草案に定められるような、NALユニットヘッダのSVC強化に対する修正を提示し、この修正は、本発明の種々の実施形態の実装を反映する。特定の構文が、取り消し線で示されるように削除されうる。
2010507310.tif 000003
【００４７】
output_flagのセマンティックは非VCL NALユニットに特定されない。output_flagがVCL NALユニットにおいてゼロに等しい場合、これは、VCL NALユニットに対応する復号ピクチャが出力されないことを示す。output_flagがVCL NALユニットにおいて１に等しい場合、これは、VCL NALユニットに対応する復号ピクチャが出力されることを示す。
【００４８】
特定のスケーラブル階層のピクチャ等の、特定の群のピクチャが出力されるか否かを示す信号要素は、例えば、シーケンスパラメータセットにおいて、またはSVCに定められるスケーラビリティ情報SEIメッセージにおいて含められることが可能である。以下の構文表は、JVT-T201において定められるような、シーケンスパラメータセットのSVC強化に修正を提示し、どのスケーラブル階層を出力しないかを示す。
2010507310.tif 000004
【００４９】
num_not_output_layers構文は、出力されないスケーラブル階層の数を示す。dependency_idがdependency_id[i]に等しく、かつquality_levelがquality_level[i]に等しいピクチャは、出力されない。
【００５０】
特定のピクチャの特定の部分が出力されるか否かを示す信号要素は、例えば、SEIメッセージ、NALユニットヘッダ、またはスライスヘッダに含まれることが可能である。以下のSEIメッセージは、ピクチャのどのスライス群を出力または表示しないべきかを示す。SEIメッセージは、スケーラブルなネスティングSEIメッセージ（JVT-T073）に含まれることが可能であり、これは、SEIメッセージが関連するアクセスユニット内の符号化スケーラブルピクチャを示す。
2010507310.tif 000005
【００５１】
num_slice_groups_in_setは、出力すべきではなく、代わりに前のピクチャにおける同一位置の復号データに置換されるスライス群の数を示し、ここで、同一位置の復号データは、このメッセージの影響を受けない。slice_group_id[i]は、出力すべきでないスライス群の数を示す。
【００５２】
ロゴの挿入に関して、全体のビデオシーケンスを再符号化せずに圧縮ビットストリームにロゴを挿入するために、本発明の種々の実施形態を実装することが可能である。このような行為が望ましい例には、映画スタジオ等のコンテンツ所有者が、コンテンツの圧縮版をサービス提供者に提供する状況が含まれる。圧縮版は、サービスに適切な特定のビットレートおよびピクチャサイズのために符号化される。ビットレートやピクチャサイズは、例えば、特定のデジタルビデオブロードキャスティング（Digital Video Broadcasting; DVB）仕様に定められる一体型受信機−復号器（Integrated Receiver-Decoder; IRD）のクラスに従って選択されることができる。結果的に、サービス提供者が、サービスのためにコンテンツを再符号化する必要がないため、コンテンツ所有者は、提供されたビデオ品質の完全な制御を有する。しかしながら、サービス提供者が、そのロゴをストリームに付加することが望ましくてもよい。
【００５３】
上記問題に対処するための一システムおよび方法は、図４に示され、概して以下の通りである。図４に示されるように、ビットストリームの基底階層400（つまり、第１の符号化ピクチャ）は不変である。上位階層410（つまり、第２の符号化ピクチャ）は、符号化され、ロゴ420が含まれる領域が１つ以上のスライスとして符号化されるようにする。上位階層の空間分解能は、基底階層の空間分解能と異なってもよい。複数のスライス群が、使用中のプロファイルにおいて可能になる場合、１つのスライス群においてロゴ420を含むことが可能であり、ゆえに１つのスライスにおいてロゴ420を含むことも可能である。次に、ロゴ420は、復号領域および非圧縮領域上で混合され、ロゴを含むスライスが、上位階層410について再符号化される。上位階層における残りのスライスのスライスヘッダにおける「スキップスライス」フラグは、１に設定される。スライスの「スキップスライス」フラグが１に等しいことは、スライスヘッダ以外の他の情報がそのスライスのために送信されないことを示し、この場合、マクロブロックの全ては、階層間予測のために使用される基底階層における配列されたマクロブロックの情報を使用して再構築される。ロゴ無し版のコンテンツのリッピングを違法にするために、復号器は、上位階層410がたとえ存在しなくても、基底階層復号ピクチャを出力してはならない。この特定の使用は、基底階層400の全NALユニットにおけるoutput_flagを0に設定することによって実装可能である。スケーラビリティ情報SEIメッセージにおけるlayer_output_flag[i]は、基底階層400について0に設定される。
【００５４】
本発明は、方法ステップの一般的な内容において説明され、これは、ネットワーク環境においてコンピュータにより実行されるプログラムコード等の、コンピュータにより実行可能な命令を含むプログラムによって一実施形態において実装されうる。一般的に、プログラムモジュールは、特定のタスクを実装するか、または特定の抽象データ型を実装するルーチン、プログラム、オブジェクト、構成要素、データ構造等を含む。コンピュータにより実行可能な命令、関連のデータ構造、およびプログラムモジュールは、本明細書に開示される方法のステップを実行するためのプログラムコードの例を表す。特定の一連のこのような実行可能な命令または関連のデータ構造は、このようなステップに記載される機能を実装するための対応する挙動の例を表す。
【００５５】
本発明のソフトウェアおよびウェブ実装は、種々のデータベース検索ステップ、相関ステップ、比較ステップ、および決定ステップを達成する法則ベースの論理およびその他の論理を含む標準的なプログラミング技法で達成されうる。また、本明細書および請求項で使用する際、単語の「構成要素」および「モジュール」は、１つ以上の種類のソフトウェアコード、及び／又はハードウェア実装、及び／又は手動入力を受信するための設備を使用する実装を包含するように意図されることに留意されたい。
【００５６】
本発明の実施形態に関する前述の説明は、例証目的および説明目的のために提示された。包括的であること、または開示される精密な形式に本発明を限定することは意図されず、上述の教示を考慮した修正および変形が可能であり、これらの修正および変形は、本発明の実践により入手されうる。本発明の原理およびその実践的なアプリケーションを説明して、種々の実施形態における本発明および想定される特定の使用に適合する種々の修正を有する本発明を当業者が利用可能になるように、実施形態は、選択および説明された。 
【図１】
2010507310.tif 000006
【図２】
2010507310.tif 000007
【図３】
2010507310.tif 000008
【図４】
2010507310.tif 000009
【手続補正書】
【提出日】平成21年5月18日(2009.5.18)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
ビデオコンテンツを符号化する方法であって、
複数のピクチャを符号化ビットストリームに符号化することと、
前記符号化ビットストリームに情報を提供することと、
を含み、但し前記情報は、前記符号化された複数のピクチャの少なくとも一部に関連付けられ、かつ所望の出力特性を示すものであり、また、前記複数のピクチャに含まれる１つのピクチャの全体が出力されるべきか、該ピクチャの一部のみが出力されるべきかを示すものである、方法。
【請求項２】
前記複数の符号化ピクチャのうちの１つが背景ピクチャであり、前記情報は、前記背景ピクチャが出力されないことを更に示す、請求項１に記載の方法。  
【請求項３】
前記複数の符号化ピクチャのうちの１つが符号化されたロゴを含む、請求項１又は２に記載の方法。
【請求項４】
前記複数の符号化ピクチャのうちの１つは、スケーラブルな符号化ビデオビットストリームの基底階層および上位階層のうちの１つに属する、請求項１から３のいずれかに記載の方法。
【請求項５】
装置のコントローラにより実行されることにより、該装置に請求項１から４のいずれかに記載の方法を実行させるように構成される、コンピュータ・プログラム。
【請求項６】
複数のピクチャを符号化ビットストリームに符号化するための手段と、
前記符号化ビットストリームに情報を提供するための手段と、
を含み、但し前記情報は、前記符号化された複数のピクチャのうちの少なくとも一部に関連付けられ、かつ所望の出力特性を示すものであり、また、前記複数のピクチャに含まれる１つのピクチャの全体が出力されるべきか、該ピクチャの一部のみが出力されるべきかを示すインジケータを含む、符号化装置。
【請求項７】
前記複数の符号化ピクチャのうちの１つが背景ピクチャであり、前記情報は、前記背景ピクチャが出力されないことを更に示す、請求項６に記載の装置。
【請求項８】
前記複数の符号化ピクチャのうちの１つが符号化されたロゴを含む、請求項６又は７に記載の装置。
【請求項９】
前記複数の符号化ピクチャのうちの１つは、スケーラブルな符号化ビデオビットストリームの基底階層および上位階層のうちの１つに属する、請求項６から８のいずれかに記載の装置。
【請求項１０】
複数のピクチャを選択的に出力する方法であって、
符号化ビットストリームから前記複数のピクチャを復号することと、
前記ビットストリームから情報を復号することと、
前記情報に基づいて、前記複数のピクチャを選択的に出力することと、
を含み、但し前記情報は、前記復号された複数のピクチャの少なくとも一部に関連付けられ、かつ所望の出力特性を示すものであり、また、前記複数のピクチャに含まれる１つのピクチャの全体が出力されるべきか、該ピクチャの一部のみが出力されるべきかを示すインジケータを含む、方法。
【請求項１１】
前記復号された複数のピクチャのうちの１つは背景ピクチャであり、前記情報は、前記背景ピクチャが出力されないことを更に示す、請求項１０に記載の方法。  
【請求項１２】
前記復号された複数ピクチャのうちの１つは、符号化されたロゴを含む、請求項１０又は１１に記載の方法。
【請求項１３】
前記復号された複数のピクチャのうちの１つは、スケーラブルな符号化ビデオビットストリームの基底階層および上位階層のうちの１つに属する、請求項１０から１２のいずれかに記載の方法。
【請求項１４】
装置のコントローラにより実行されることにより、該装置に請求項１０から１３のいずれかに記載の方法を実行させるように構成される、コンピュータ・プログラム。
【請求項１５】
符号化ビットストリームから前記複数のピクチャを符号化する手段と、
前記ビットストリームから情報を復号し、該情報に基づいて前記複数のピクチャを選択的に出力する手段と、
を含み、但し前記情報は、前記復号された複数のピクチャのうちの少なくとも一部に関連付けられ、かつ所望の出力特性を示すものであり、また、前記複数のピクチャに含まれる１つのピクチャの全体が出力されるべきか、該ピクチャの一部のみが出力されるべきかを示すインジケータを含む、復号装置。
【請求項１６】
前記復号された複数のピクチャのうちの１つは背景ピクチャであり、前記情報は、前記背景ピクチャが出力されないことを示す、請求項１５に記載の装置。
【請求項１７】
前記復号された複数のピクチャのうちの１つは符号化されたロゴを含む、請求項１５又は１６に記載の装置。
【請求項１８】
前記復号された複数のピクチャのうちの１つは、スケーラブルな符号化ビデオビットストリームの基底階層および上位階層のうちの１つに属する、請求項１５から１７のいずれかに記載の装置。
【国際調査報告】
2010507310.tif 000010
2010507310.tif 000011
2010507310.tif 000012