(57)【要約】    【課題】      ＩＤＲピクチャ以外のイントラピクチャを編集点として符号化データを切り出すこと。    【解決手段】  ＨＤＤ１０１から符号化データ抽出部１０２およびリオーダリング情報作成部１０４に符号化データが入力され、符号化データ抽出部１０２はその符号化データから外部のユーザ等による指定に応じて、編集点以降の符号化データを抽出しヘッダ情報変更部１０３に出力する。ヘッダ情報変更部１０３はその符号化データの先頭ピクチャのヘッダ情報を、ＩＤＲピクチャであることを示すものに変更するとともに、編集点から次のＩＤＲピクチャまでの間のヘッダ情報を変更し出力する。リオーダリング情報作成部１０４は符号化データの参照ピクチャの最大格納枚数に基づいてリオーダリング情報を作成し、リオーダリング情報挿入部１０５はヘッダ変更符号化データにリオーダリング情報を挿入して出力する。  【選択図】        図１
2007067842.tif 000002
【特許請求の範囲】
【請求項１】
動画像信号がピクチャ単位で符号化された符号化データを、任意の編集点で切り出す動画像符号化データ編集装置であって、
前記符号化データから前記編集点以降の符号化データを抽出する符号化データ抽出部と、
前記編集点以降の符号化データのヘッダ情報を、前記編集点を先頭とする内容に変更するヘッダ情報変更部と、
を有する動画像符号化データ編集装置。
【請求項２】
前記任意の編集点は、ある２つのＩＤＲ（Instantaneous Decoding Refresh）ピクチャ間のイントラピクチャである、
ことを特徴とする請求項１記載の動画像符号化データ編集装置。
【請求項３】
さらに、
前記符号化データの参照ピクチャの最大数に応じて参照ピクチャリオーダリング情報を作成するリオーダリング情報作成部と、
前記リオーダリング情報を、前記ヘッダ情報の内容が変更された前記編集点以降の符号化データに挿入するリオーダリング情報挿入部と、
を有することを特徴とする請求項１または請求項２記載の動画像符号化データ編集装置。
【請求項４】
前記ヘッダ情報変更部は、前記編集点以降の符号化データのヘッダ情報を、前記編集点を先頭とする内容に変更する際、前記編集点のピクチャのヘッダ情報におけるピクチャタイプを示す情報をＩＤＲピクチャタイプに変更する、
ことを特徴とする請求項２または請求項３記載の動画像符号化データ編集装置。
【請求項５】
さらに、  前記リオーダリング情報挿入部によって前記リオーダリング情報が挿入された編集点のピクチャに、デコード・ピクチャ・バッファのリセットを指示するＭＭＣＯ情報を挿入するＭＭＣＯ情報挿入部、
を有することを特徴とする請求項３記載の動画像符号化データ編集装置。
【請求項６】
前記リオーダリング情報作成部は、前記編集点以降の符号化データの参照ピクチャの数が前記符号化データに記録されている参照ピクチャの最大格納枚数と同じになるようにリオーダリング情報を作成する、
ことを特徴とする請求項３記載の動画像符号化データ編集装置。
【請求項７】
前記リオーダリング情報作成部は、前記編集点以降の符号化データの参照ピクチャの数が前記符号化データに記録されている参照ピクチャの最大格納枚数と同じになるように、符号化すべきピクチャに時間的に最も近いピクチャを参照画像として追加するリオーダリング情報を作成する、
ことを特徴とする請求項６記載の動画像符号化データ編集装置。
【請求項８】
前記リオーダリング情報作成部は、前記編集点以降の符号化データの参照ピクチャの数が前記符号化データに記録されている参照ピクチャの最大格納枚数と同じになるように、編集点のイントラピクチャを参照画像として追加するリオーダリング情報を作成する、
ことを特徴とする請求項６記載の動画像符号化データ編集装置。
【請求項９】
前記リオーダリング情報作成部は、前記編集点以降の符号化データの参照ピクチャの数が前記符号化データに記録されている参照ピクチャの最大格納枚数と同じになるように、参照ピクチャリストに掲載されているピクチャを参照画像として追加するリオーダリング情報を作成する、
ことを特徴とする請求項６記載の動画像符号化データ編集装置。
【請求項１０】
動画像信号がピクチャ単位で符号化された符号化データを、任意の編集点で切り出す動画像符号化データ編集方法であって、
前記符号化データから前記編集点以降の符号化データを抽出し、
前記編集点以降の符号化データのヘッダ情報を、前記編集点を先頭とする内容に変更する、動画像符号化データ編集方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、動画像信号がピクチャ単位で符号化された符号化データを切り出す動画像符号化データ編集装置および動画像符号化データ編集方法に関するものである。
【背景技術】
【０００２】
近年、動画像の高能率符号化方法として、ＭＰＥＧ２やＭＰＥＧ４方式が用いられている。これらの符号化方式では、まず１画面相当のデジタル画像データをいくつかの画素からなるブロックに分割し、ブロック毎に画像間の動きを示す動きベクトルを検出し、動き補償と呼ばれる予測画像の生成を行い、得られた予測画像と符号化対照ピクチャとの差分値に対して符号化を行う。
【０００３】
この予測画像の生成方法によって、ピクチャはいくつかのタイプに分けられる。参照画像を持たず、画面内の予測のみを用いるものをＩピクチャと呼び、１枚の参照画像を用いて画面間予測符号化を行うものをＰピクチャと呼び、２枚の参照画像を用いて画面間予測符号化を行うものをＢピクチャと呼ぶ。
【０００４】
図１８は、従来のＭＰＥＧ−２符号化における符号化方法を説明する図であり、図１８（ａ）は、表示時のフレームの並び、図１８（ｂ）は符号化時のフレームの並びを示す図である。図１８において、ＩピクチャＩ２は参照画像を用いずに符号化されている。Ｐピクチャは、直前の１枚のＩピクチャまたはＰピクチャを用いて予測が行われるので、例えば、ＰピクチャＰ５は直前のＩピクチャＩ２を用いて符号化されている。Ｂピクチャは、直前の１枚のＩピクチャまたはＰピクチャと、直後の１枚のＩピクチャまたはＰピクチャを用いて予測が行われるので、例えば、ＢピクチャＢ３は直前のＩピクチャＩ２と直後のＰピクチャＰ５を用いて符号化されている。
【０００５】
画面間予測符号化を用いた符号化においては、参照画像のデータが先に符号化されている必要があるため、ピクチャの並び替えを行ってから符号化を行う。つまり、図１８（ｂ）に示すように、例えば、ＢピクチャＢ３は直後のＰピクチャＰ５を用いて予測符号化を行うため、ＢピクチャＢ３より前にＰピクチャＰ５を符号化する。
【０００６】
また、ＭＰＥＧ−２符号化では、複数のピクチャをまとめたグループ・オブ・ピクチャ（ＧＯＰ）という階層が定義され、これを符号化処理の基本単位として符号化データの編集やランダムアクセスを実現している。ＧＯＰの構成は、例えば、図１８（ａ）に示すＧＯＰの場合、Ｂピクチャで始まっているが、最初のＢピクチャは前のＧＯＰのＰピクチャからも予測が行われるため、ＧＯＰ単位で切り出すことができない。そこで、前のＧＯＰからの予測を排除した構成とすることもできる。これがクローズドＧＯＰと呼ばれるものである。
【０００７】
図１９は、クローズドＧＯＰの場合の符号化方法を説明するもので、図１９（ａ）は表示時のフレームの並び、図１９（ｂ）は符号化時のフレームの並びを示す図である。例えば、図１９（ａ）に示すように、表示時のフレームの並びもＧＯＰの先頭にＩピクチャがくるようにして、図１９（ｂ）に示すように、ＧＯＰ単位で予測を完結、すなわち他のＧＯＰのピクチャは予測に使用しないようにしている。
【０００８】
一方、ＩＴＵで現在標準化中のＨ.２６４では、参照ピクチャは参照ピクチャリストと呼ばれる複数枚の候補の中から選んで使用することができるため、任意に離れたピクチャを参照することが可能となっている。
【０００９】
図２０は、Ｈ.２６４における符号化方法を説明する図である。
【００１０】
例えば、ＰピクチャＰ６は、直前のＰピクチャＰ３ではなく、もっと離れたＩピクチャＩＤＲ（instantaneous Ｄecorder Refresh）０を参照することが可能である。またＢピクチャもＢ１のように時間的に離れたピクチャであるＰピクチャＰ６を参照することが可能であるし、また、ＢピクチャＢ２のように時間的に後に位置するピクチャ２枚（Ｐ３、Ｐ６）を参照することも可能であるし、ＢピクチャＢ５のようにＢピクチャを参照画像とすることも可能である。なお、ＩＤＲ（instantaneous Ｄecorder Refresh）ピクチャとは、そのピクチャより前のピクチャ（スライス）の情報を使わなくても、それ以後のピクチャを正しく復号することができることを示す特別なＩピクチャであり、このピクチャをまたいで前のピクチャを参照することはできない。よって、図２０では、ＩＤＲ０より前のピクチャを参照することはできない。
【００１１】
前述したようにＨ.２６４では、任意に離れたピクチャを参照することが可能なため、デコードした画像をデコード・ピクチャ・バッファ（ＤＰＢ）と呼ばれるバッファに入れて管理を行う。
【００１２】
図２１は、Ｈ.２６４におけるＤＰＢの管理を説明する概念図である。
【００１３】
ＤＰＢには、デコード後の出力待ちピクチャ及び被参照ピクチャが格納される。各ピクチャには、ピクチャ・オーダー・カウント（ＰＯＣ）と呼ばれる表示順を表す番号が付与されている。また、被参照ピクチャにはフレームナンバ（ＦＮ）と呼ばれる番号が付与される。ＦＮは、符号化順、すなわち参照されるピクチャ順に１ずつ増加する番号である。
【００１４】
ＤＰＢに格納されるピクチャは、「参照画像として使用」(used for reference：以下、usedと呼ぶ)または「参照画像として不使用」(unused for reference：以下、unusedと呼ぶ)のどちらかにマークされる。さらに、「出力待ち」(needed for output：以下、neededと呼ぶ)または「出力済み」(not needed to output：以下、not neededと呼ぶ)のどちらかにマークされる。
【００１５】
なお、図２０（ｂ）に示す符号化順において、デコードすべき現在のピクチャ（カレントピクチャ）がＰ６の場合、ＤＰＢの１番目と２番目の記録エリアには、図２１に示すように、ＰＯＣやＦＮ、usedまたはunused、neededまたはnot neededが設定されたＩＤＲ０と、Ｐ３とが格納され、３番目の記録エリアは、空き（empty）ということになる。
【００１６】
図２２は、ピクチャに付与されるＰＯＣとＦＮを説明する図である。
【００１７】
Ｂピクチャなどで、他のピクチャから参照されないピクチャが入る場合、例えばＰ、Ｂ、Ｂ、Ｐという並びであると、ＦＮは、Ｎ、Ｎ＋１、Ｎ＋１、Ｎ＋１となるので、図２２に示す場合、ＦＮは、０、１、２、３、３、３，４，４、５、５となる。
【００１８】
次に、図２３を用いて、デコード後のＤＰＢの処理について説明する。ここで、ＤＰＢのフレーム数の上限(ＭａｘＤＰＢ)は３、参照ピクチャの最大格納枚数(no_of_ref)は３であるとする。図２３（ａ）は、図２２においてＰ６をデコードした後のＤＰＢの状態を示す図である。ＤＰＢに格納されているＩＤＲ０、Ｐ３、Ｐ６は全て被参照ピクチャであるので、usedにマークされている。また、Ｐ３、Ｐ６は出力待ちであるのでneededにマークされているが、ＩＤＲ０は出力済みなのでnot neededにマークされている。次に、Ｂ１をデコードする。Ｂ１は被参照ピクチャではないので、unusedにマークする。
【００１９】
次に、ＤＰＢに格納されているピクチャのＰＯＣと、ピクチャＢ１のＰＯＣを比較し、Ｂ１のＰＯＣが最小であるので、ピクチャＢ１を出力する。この場合、ピクチャＢ１は、ＤＰＢに格納する必要はない。Ｂ２も同様である。よって、Ｂ２をデコードした後のＤＰＢの状態も図２３（ａ）のままである。
【００２０】
次に、Ｂ４をデコードする。Ｂ４はＢピクチャであるが、被参照ピクチャであるので、unsedにマークされる。ここで、usedとマークされている参照ピクチャの数が４になり、no_of_refを上回ってしまうため、ＦＮの最も小さいピクチャをunusedにする。すなわち、ＩＤＲ０をunusedにマークする。これにより、unused でかつnot neededであるピクチャはこれ以降のデコード処理では不必要であるので、ＤＰＢから削除する。すなわち、ＩＤＲ０をＤＰＢから削除し、Ｂ４をＤＰＢに格納する。
【００２１】
図２３（ｂ)に、Ｂ４デコード後のＤＰＢの状態を示す。
【００２２】
Ｂ４の次はＢ５をデコードするが、Ｂ５は被参照ピクチャではないので、unusedとマークする。次に、ＤＰＢに格納されているピクチャのＰＯＣと、ピクチャＢ５のＰＯＣを比較するが、Ｂ５のＰＯＣは最小ではないので、neededとマークしＤＰＢに格納する。しかし、ＤＰＢは既に一杯であるので、ＰＯＣが最小のピクチャを出力し、not neededとする。すなわち、Ｐ３を出力しnot neededとするが、Ｐ３はusedとマークされているので、ＤＰＢから削除することはできない。そこで、さらにＰＯＣが最小のピクチャを出力する。この場合、Ｂ４が該当するが、Ｂ４もusedであり削除することはできない。そこでさらにＢ５を出力しnot neededとする。これにより、Ｂ５はunusedかつnot neededとなるので、ＤＰＢに格納することなく削除される。
【００２３】
図２３（ｃ)に、Ｂ５でコード後のＤＰＢの状態を示す。
【００２４】
Ｈ.２６４では前述したusedまたはunusedのマーク処理に関して、メモリ・マネジメント・コントロール・オペレーション（Memory management control operation；ＭＭＣＯ）コマンドという情報を付加することによって、ＤＰＢ内の任意のusedとマークされたピクチャをunusedとすることも可能である。
【００２５】
特別なイントラピクチャであるＩＤＲピクチャがデコードされると、ＤＰＢ内の画像は全てunusedとマークされ、ＰＯＣ順に全ての画像が出力され、消去される（符号化データ内の情報によって、画像の出力を行わないことも可能である）。よって、ＩＤＲピクチャをまたいで前の画像を参照することはできない。ＩＤＲピクチャではＰＯＣとＦＮは０にリセットされる。Ｈ.２６４では、符号化データの最初のピクチャはＩＤＲピクチャでなければならない。
【００２６】
また、ＭＭＣＯコマンドを用いて、特定のコマンドを付加した場合も、ＤＰＢ内の画像は全てunusedとなり、ＤＰＢ内の画像はＰＯＣ順に出力された上、全て削除される。
【００２７】
次に、参照ピクチャリストについて説明する。参照ピクチャリストは、ＤＰＢに格納されているピクチャのうち、usedとマークされているピクチャを順番に並べたものである。このリスト中の、何番目のピクチャを参照するという情報をマクロブロック（ＭＢ）またはサブＭＢ毎に付加することにより、参照ピクチャを指定する。
【００２８】
Ｐピクチャでは、ＤＰＢのピクチャをピクチャ・ナンバ（ＰＮ）の小さい順に並べる。ここで、ＰＮとは、ＦＮを元にフィールド順を加味したもので、フレームピクチャではＦＮと同等である。例えば、図２２において、Ｐ９をデコードするときのＤＰＢの状態は、図２３（ｃ)の状態であるので、参照ピクチャリストは「Ｐ３、Ｐ６、Ｂ４」となる。
【００２９】
Ｂピクチャでは、二つの参照ピクチャリストを用いる。一つはデコードしようとするピクチャよりＰＯＣの小さいピクチャをＰＯＣの大きな順に並べ、その後にデコードしようとするピクチャよりＰＯＣの大きなピクチャをＰＯＣの小さい順に並べたものである。もう一つはデコードしようとするピクチャよりＰＯＣの大きなピクチャをＰＯＣの小さい順に並べ、その後にデコードしようとするピクチャよりＰＯＣの小さいピクチャをＰＯＣの大きな順に並べたものである。例えば、図２２においてＢ５をデコードするときにＤＰＢの状態は、図２３（ｂ）の状態であるので、一つ目のリストは「Ｂ４、Ｐ３、Ｐ６」、二つ目のリストは「Ｐ６、Ｂ４、Ｐ３」となる。
【００３０】
さて、前述したように、ＭＰＥＧ−２符号化方式ではクローズドＧＯＰでないＧＯＰでは最初のＢピクチャは前のＧＯＰのＰピクチャからも予測が行われるため、ＧＯＰ単位で切り出すことができない。同様に、Ｈ.２６４においても、ＩＤＲピクチャでないイントラピクチャでは、その後の画像がイントラピクチャをまたいで前の画像を参照することができるため、符号化データを切り出すことはできない。
【００３１】
そこで、この問題を解決するために、例えば、特許文献１では、ＭＰＥＧ−２符号化方式においてクローズドＧＯＰでない符号化データ同士が接続されたとき、ＧＯＰの最初のＢピクチャを削除している。
【００３２】
また、特許文献２では、ＭＰＥＧ−２符号化方式において、クローズドＧＯＰでない符号化データが接続する場合、ＧＯＰの最初のＢピクチャを直前のピクチャで置き替えて再符号化する手法が開示されている。
【００３３】
さらに、特許文献３では、Ｈ.２６４符号化方式において、ＩＤＲピクチャ以外のピクチャでの編集によってＰＯＣの不連続が生じたときに、それを示すフラグを付加情報として格納し、再生時にそのフラグから編集ポイントを特定し、不整合が起こらないようにＤＰＢを管理する手法が開示されている。
【特許文献１】特開平１０-６６０８５号公報
【特許文献２】特開２０００-２９５５６７号公報
【特許文献３】特開２００４-２７４７３２号公報
【発明の開示】
【発明が解決しようとする課題】
【００３４】
しかし、従来の方法では、ＧＯＰの最初のＢピクチャを削除しているが、Ｈ.２６４符号化方式ではＢピクチャも被参照画像となり得るため、Ｂピクチャを削除するとその後の符号化に不整合が生じる可能性がある、という問題がある。
【００３５】
また、直前のピクチャで置きかえて再符号化する手法では、符号化データ編集装置に再符号化回路を持たせる必要があるが、符号化方式が複雑で回路が増大となるＨ.２６４方式では回路の大幅な増大を招く恐れがある、という問題もある。
【００３６】
また、前述した特許文献３に開示される手法では、編集によって生じる不整合を表すフラグを用いているが、復号時にそのフラグを用いて特定の動作をする必要があり、汎用性に欠ける、という問題もある。
【００３７】
そこで、本発明は以上の点に着目してなされたもので、任意の編集点にて符号化データを切り出すことができる動画像符号化データ編集装置および動画像符号化データ編集方法を提供することを目的とする。
【課題を解決するための手段】
【００３８】
上記目的を達成するため、本発明の画像符号化データ編集装置は、動画像信号がピクチャ単位で符号化された符号化データを、任意の編集点で切り出す動画像符号化データ編集装置であって、前記符号化データから前記編集点以降の符号化データを抽出する符号化データ抽出部と、前記編集点以降の符号化データのヘッダ情報を、前記編集点を先頭とする内容に変更するヘッダ情報変更部と、を有する。
【発明の効果】
【００３９】
本発明の画像符号化データ編集装置では、符号化データから編集点以降の符号化データを抽出し、編集点以降の符号化データのヘッダ情報を編集点を先頭とする内容に変更するので、任意の編集点にて符号化データを切り出すことができる。
【発明を実施するための最良の形態】
【００４０】
以下、図面を参照して、本発明の実施の形態を詳述する。
実施の形態１
【００４１】
図１は、本発明の符号化データ編集装置の実施の形態１を示すブロック図である。以下、図１を用いて実施の形態１の符号化データ編集装置の動作、すなわち符号化データ編集処方法を説明する。
【００４２】
図１において、本実施の形態１の符号化データ編集装置は、ＨＤＤ１０１、符号化データ抽出部１０２、ヘッダ情報変更部１０３、リオーダリング情報作成部１０４、リオーダリング情報挿入部１０５を有している。
【００４３】
次に動作の概要を説明する。
【００４４】
ＨＤＤ１０１に記憶された符号化データは、例えば、ＩＴＵ−Ｔ  Ｈ．２６４符号化方式にて符号化されたもので、符号化データ抽出部１０２およびリオーダリング情報作成部１０４に入力される。ここでは、符号化データは、ＨＤＤ１０１に記憶されているものとしているが、もちろん他の媒体でもよい。
【００４５】
符号化データ抽出部１０２は、ＨＤＤ１０１から抽出する符号化データから、外部のユーザ等により指定される編集点（切り出し点）と切り出し長さに応じて、編集点以降の符号化データを抽出し、抽出符号化データとしてヘッダ情報変更部１０３に出力する。なお、外部からユーザ等により指定される編集点（切り出し点）は、符号化データ抽出部１０２だけでなく、ヘッダ情報変更部１０３、リオーダリング情報作成部１０４、リオーダリング情報挿入部１０５にも入力している。これは、後述する他の実施の形態でも同様である。
【００４６】
すると、ヘッダ情報変更部１０３は、符号化データ抽出部１０２から入力された抽出符号化データの先頭のイントラピクチャのヘッダを、後述するように、ＩＤＲピクチャであることを示すものに変更するとともに、編集点から次のＩＤＲピクチャまでの間のヘッダ情報のＰＯＣ情報およびＦＮ情報を変更し、ヘッダ変更符号化データとして出力する。
【００４７】
リオーダリング情報作成部１０４は、ＨＤＤ１０１から入力される符号化データの参照ピクチャの最大格納枚数に基づいてリオーダリング情報を作成する。符号化データの参照ピクチャの最大格納枚数は、シーケンス全体の符号化データの先頭に付加あるいは予め送信されるシーケンスパラメ−タセット（ＳＰＳ）に記述されているもので、その符号化データのスライス単位毎にパラメータセットの適応的に一つとして選択している。
【００４８】
リオーダリング情報挿入部１０５は、ヘッダ情報変更部１０３から入力されるヘッダ変更符号化データにリオーダリング情報を追加し、編集済み符号化データとして出力する。
【００４９】
次に、動作の詳細を説明する。
【００５０】
図２は、本実施の形態１における符号化データ編集装置に入力される符号化データの一例である。
【００５１】
図２は、符号化データの一部を抜粋したもので、この前後にも符号化データは存在しているものとする。これは、後述する他の実施の形態でも同様である。また、図２に示す符号化データのＰＯＣはＦＮは、図２に示す通りで、編集点をイントラピクチャＩ６としている。なお、図２において、矢印は、予測するピクチャの関係を示している。
【００５２】
符号化データ抽出部１０３は、ＨＤＤ１０１からの符号化データから外部より指定される編集点（切り出し点）と切り出し長さに応じて、編集点以降の符号化データを抽出する。また、編集点より前の符号化データから、シーケンス・パラメータ・セットなどの符号化データ全体に係る情報も同時に抽出する。ここでは編集点および長さを外部から指定されるものとしているが、もちろん、この符号化データ編集装置自体に編集点を指定できるような装置を設け、それを用いて指定を行うものでもよい。
【００５３】
図３は、符号化データ抽出部１０２によって抽出された符号化データの例を示す図である。
【００５４】
なお、図３に示す符号化データは、抽出された符号化データの先頭の部分のみを示したものであり、シーケンス・パラメータ・セットなどは記載していない。また、この後にも符号化データが続いていても勿論よい。このことは、後述する他の実施の形態でも同様である。
【００５５】
ヘッダ情報変更部１０３は、符号化データ抽出部１０２によって抽出された図３に示すような符号化データのヘッダ情報を変更する。
【００５６】
図４は、ヘッダ情報変更部１０３におけるヘッダ情報変更処理の流れを示すフローチャートである。
【００５７】
まず、ヘッダ情報変更部１０３は、Ｓ４０１により、ヘッダ情報のうち、そのピクチャがＩＤＲピクチャであるか否かを示す情報をＩＤＲピクチャであることを示す情報に変更する。
【００５８】
次に、ヘッダ情報変更部１０３は、Ｓ４０２により、ＩＤＲピクチャに振られるＩＤなど、ＩＤＲピクチャのみに付加される情報を追加する。
【００５９】
次に、ヘッダ情報変更部１０３は、Ｓ４０３により、抽出符号化ストリームのＰＯＣとＦＮから、差分値を算出する。なお、符号化データ抽出部１０２によって抽出された抽出符号化ストリームのＰＯＣとＦＮとは、図３に示すようになっている。
【００６０】
そして、ヘッダ情報変更部１０３は、Ｓ４０４により、編集後の符号化ストリームの先頭ピクチャをＩＤＲピクチャとするため、先頭ピクチャのＦＮとＰＯＣは０にリセットすると共に、先頭ピクチャに続く他の抽出符号化データのピクチャのＰＯＣおよびＦＮの変更を行う。その際、先頭ピクチャのＰＯＣとＦＮの値が差分値となるので、先頭ピクチャのＰＯＣとＦＮの値を、他の抽出符号化データのピクチャのＰＯＣおよびＦＮの値から減算することによりその変更を行う。なお、この変更は、抽出符号化データの先頭ピクチャから次のＩＤＲピクチャの前のピクチャまで繰り返して行う。
【００６１】
図５に、このようにしてヘッダ情報が変更されたヘッダ変更符号化データのピクチャタイプおよびＰＯＣとＦＮを示す。
【００６２】
図５に示すヘッダ情報変更後の符号化データのＰＯＣとＦＮとを、図３に示すヘッダ情報変更前の符号化データのＰＯＣとＦＮと比較すると明らかだが、編集点のＩピクチャＩ６のピクチャタイプをＩＤＲ０というＩＤＲピクチャタイプに変更することにより、そのＦＮとＰＯＣは０にリセットされ、ＩＤＲ０に続くピクチャのＰＯＣとＦＮも、ＩピクチャＩ６のＦＮとＰＯＣのリセットに応じて相対的に、すなわちＩピクチャＩ６のＰＯＣの値６とＦＮの値３がそれぞれ減算されている。
【００６３】
次に、リオーダリング情報作成部１０４でのリオーダリング情報作成処理について説明する。
【００６４】
図６は、図５に示すヘッダ変更符号化データの先頭ピクチャＩＤＲ０をデコードした後のＤＰＢの状態を示す図である。
【００６５】
ここでは、ＤＰＢのフレーム（ピクチャ）数の上限（ＭＡＸ  ＤＰＢ）は、例えば２フレーム（ピクチャ）、参照ピクチャの最大格納枚数(no_of_ref)も、例えば、２フレーム（ピクチャ）であるとする。このように、ＩＤＲ０ピクチャのデコード直後は、ＤＰＢにはＩＤＲ０ピクチャのみが格納されている状態となる。よって、前述した参照ピクチャリストを作成しても、参照ピクチャリストには１枚のピクチャしか存在ない。
【００６６】
図７は、ＩＤＲ０の次のピクチャであるＢ５をデコードする際に用いられる参照ピクチャリストＭＰの一例を示したものである。この場合、図６に示すように、ＤＰＢには、ＩＤＲ０ピクチャしか格納されていないので、参照ピクチャリストＭＰは、ｉｄｘ０はＩＤＲ０、ｉｄｘ１はＮＯＮＥ（無し）に設定される。なお、Ｂピクチャをデコードする際には二つの参照ピクチャリストＭＰが用いられるが、ここではその一つを取って説明することとする。
【００６７】
なお、参照ピクチャリストは、スライス毎に付加されるスライスヘッダ内でリオーダリング情報を送ることにより、前述した参照ピクチャリストを並び替えることが可能である。リオーダリング情報を用いると、参照ピクチャリストに同じピクチャを複数いれることも可能である。
【００６８】
一方、図２に示す切り出す前の符号化データでは、Ｉ６ピクチャをデコードした後のＤＰＢの状態は図８のようになっている。
【００６９】
図８は、ＤＰＢにＰ４とＩ６が格納され、両方ともusedとneededにマークされていることを示す図である。
【００７０】
このように、図２に示すような切り出す前のＤＰＢの状態では、図８で示すように２枚のusedとマークされたピクチャがあるので、Ｂ５をデコードする際に使用する参照ピクチャリストＭＰには、図９に示すように、ｉｄｘ０、ｉｄｘ１として、２枚のピクチャＩ６、Ｐ４がそれぞれ存在することになる。
【００７１】
したがって、参照ピクチャとして、参照ピクチャリストの２番目のピクチャが指定される可能性があるが、ＤＰＢが例えば図６に示す状態であり、図７に示すような参照ピクチャリストである場合、ヘッダ変更符号化データでは参照ピクチャリストには１枚のピクチャしか存在しないため、不整合を生じることとなる。
【００７２】
そこで、本実施の形態１のリオーダリング情報作成部１０４では、編集点以降の符号化データの参照ピクチャリストのピクチャの数が、参照ピクチャの最大格納枚数(no_of_ref)と同じになるように、符号化すべきピクチャＢ５に時間的に最も近いピクチャを、参照ピクチャリストの空きに挿入するようにリオーダリング情報を作成する。その際、リオーダリング情報作成部１０４は、編集点であるイントラピクチャを挿入するようにリオーダリング情報を作成するようにしても勿論よいし、参照ピクチャリストに掲載されている、例えば、１番目のピクチャをコピーして参照ピクチャリストの空きに挿入するようにリオーダリング情報を作成するようにしても勿論よい。
【００７３】
図１０に、このようなリオーダリング情報を受け取った場合の、復号時の参照ピクチャリストを示す。
【００７４】
この場合、符号化すべきピクチャＢ５に時間的に最も近いピクチャは、ＩＤＲ０であるので、図７に示すように符号化データの任意の参照点における切り出しにより、参照ピクチャリストの後ろのｉｄｘ１にＮＯＮＥ（無し）が設定されることになった場合、本実施の形態１のリオーダリング情報作成部１０４では、ｉｄｘ１として、ＩＤＲ０を設定することになる。
【００７５】
従って、本実施の形態１のリオーダリング情報作成部１０４では、符号化データの任意の参照点における切り出しにより、参照ピクチャリストにＮＯＮＥ（無し）が設定されても、そのＮＯＮＥ（無し）に符号化すべきピクチャＢ５に時間的に最も近いピクチャを付加したリオーダリング情報を作成することにより、復号の際、参照ピクチャとして参照ピクチャリストの２番目のピクチャが指定されても、参照ピクチャの数が足りなくなるといる不整合を生じることを防ぐことができる。
【００７６】
そして、ＤＰＢは、次のＩＤＲピクチャが来ることでリセットされるので、リオーダリング情報作成部１０４は、編集点から次のＩＤＲピクチャまでの間のＤＰＢの状態を調べ、ＤＰＢの中の被参照ピクチャの数が参照ピクチャの最大格納枚数(no_of_ref)に満たないピクチャに同様にリオーダリング情報を追加する。
【００７７】
リオーダリング情報作成部１０４により作成されたリオーダリング情報は、オーダリング情報挿入部１０５へ出力され、リオーダリング情報挿入部１０５は、ヘッダ情報変更部１０３によりヘッダ情報が変更された編集点以降の符号化データに対し、リオーダリング情報を挿入する。
【００７８】
図１１に、本実施の形態１のリオーダリング情報挿入部１０５から出力される編集済み符号化データの一例を示す。
【００７９】
本実施の形態１のリオーダリング情報挿入部１０５は、ヘッダ情報変更部１０３によりヘッダ情報が変更された編集点以降の符号化データの各ピクチャにおけるスライスデータのスライスヘッダ内に、リオーダリング情報を挿入する。
【００８０】
このように、本実施の形態１の符号化データ編集装置によれば、符号化データの切り出し等の編集を行う編集点以降の符号化データを抽出し、編集点以降の符号化データのヘッダ情報を編集点を先頭とする内容に変更するので、任意の編集点にて符号化データを切り出すことができる。
【００８１】
特に、本実施の形態１では、Ｈ．２６４符号化方式にて符号化された符号化データの編集を行った後のＤＰＢに格納されている被参照画像の数と、参照ピクチャの最大格納枚数(no_of_ref)を比較し、被参照画像の数が少なかった場合には、編集点としたイントラピクチャを、参照ピクチャリストのピクチャの数が最大格納枚数となるまで参照ピクチャリストに追加することを指示するリオーダリング情報を挿入するとともに、編集点のピクチャのヘッダ情報をＩＤＲピクチャのものに書き換えるようにしたので、ＩＤＲピクチャ以外の任意のイントラピクチャにて切り出しをした符号化データを復号した場合でも、ＤＰＢにおける参照ピクチャの欠落を補填することができ、参照ピクチャの欠落による復号画像の品質劣化の防止を図りながらＩＤＲピクチャ以外のイントラピクチャを編集点として符号化データを切り出すことが可能となる。
【００８２】
なお、本実施の形態１では、リオーダリング情報挿入部１０５によってリオーダリング情報が挿入された編集済み符号化データを他の符号化データに接続する符号化データ接続部を設けずに説明したが、次に説明する実施の形態２（図１１参照）の符号化データ接続部２０７と同様に、符号化データ接続部２０７により、リオーダリング情報が挿入された編集済み符号化データを他の符号化データに接続するようにしても勿論よい。
【００８３】
実施の形態２．
図１２は、本発明の符号化データ編集装置の実施の形態２の構成例を示すブロック図である。なお、本実施の形態２において、上記実施の形態１と同一の構成要素には、同一符号を付して説明を省略する。
【００８４】
図１２において、実施の形態２の符号化データ編集装置は、ＨＤＤ１０１、符号化データ抽出部１０２、ヘッダ情報変更部２０３、リオーダリング情報作成部１０４、リオーダリング情報挿入部１０５、ＭＭＣＯ情報挿入部２０６、符号化データ接続部２０７より構成されている。
【００８５】
次に、動作の概要を説明する。
【００８６】
ＨＤＤ１０１に記憶された符号化データは、符号化データ抽出部１０２、リオーダリング情報作成部１０４、およびＭＭＣＯ情報挿入部２０６に入力される。ここでは、符号化データは、ＨＤＤ１０１に記憶されているものとしているが、もちろん他の媒体でもよい。本実施の形態２では、複数の符号化データを接続するので、ＨＤＤ１０１からは複数の符号化データが入力される。ここで、符号化データの切り出しを行う符号化データを接続符号化データ、それを接続する符号化データを被接続符号化データとよぶこととする。なお、本実施の形態２の符号化データ編集装置に入力される符号化データは、実施の形態１で説明したように、図２に示すような符号化ビットストリームである。
【００８７】
符号化データ抽出部１０２は、実施の形態１と同様に、外部から指定される編集点（切り出し点）と、切り出し長さに応じて、接続符号化データから編集点以降の符号化データを抽出し、抽出符号化データとしてヘッダ情報変更部２０３に出力する。なお、外部または内部よりユーザ等により指定される編集点（切り出し点）は、実施の形態１と同様に、符号化データ抽出部１０２だけでなく、ヘッダ情報変更部２０３、リオーダリング情報作成部１０４、リオーダリング情報挿入部１０５、およびＭＭＣＯ情報挿入部２０６に入力している一方、本実施の形態２の場合、符号化データ接続部２０７に、編集点にて切り出した符号化データの接続相手となる被接続符号化データを指定する情報が外部または内部よりユーザ等により指定される。また、編集点より前の符号化データから、シーケンス・パラメータ・セットなどの符号化データ全体に係る情報も同時に抽出する。ここでは編集点および長さを外部から指定されるものとしているが、もちろん符号化データ編集装置に編集点を指定できるような装置を設け、それを用いて指定を行うものでもよい。本実施の形態２では、編集点をイントラピクチャＩ６であるとする。なお、本実施の形態２の符号化データ抽出部１０３も、実施の形態１と同様に、図３に示すように符号化データを抽出する。
【００８８】
ヘッダ情報変更部２０３は、入力された抽出符号化データの編集点から次のＩＤＲピクチャまでの間のヘッダ情報のＰＯＣ情報およびＦＮ情報を後述するように変更し、ヘッダ変更符号化データとして、リオーダリング情報作成部１０４へ出力する。
【００８９】
リオーダリング情報作成部１０４は、実施の形態１と同様に、ＨＤＤ１０１から入力される符号化データの編集点における参照ピクチャの最大格納枚数に基づいてリオーダリング情報を作成する。リオーダリング情報挿入部１０５は、ヘッダ情報変更部２０３から入力されるヘッダ情報変更後の符号化データに、リオーダリング情報を追加して、ＭＭＣＯ情報挿入部２０６へ出力する。
【００９０】
ＭＭＣＯ情報挿入部２０６は、リオーダリング情報挿入部１０５によってリオーダリング情報が追加された編集点のピクチャのヘッダ部に、ＤＰＢのリセットを指示するＭＭＣＯ情報（以下、リセットＭＭＣＯコマンドと呼ぶ）を挿入し、ＭＭＣＯ挿入データとして符号化データ接続部２０７に出力する。
【００９１】
符号化データ接続部２０７は、外部または内部の指示により指定された被接続データの後ろに、編集点のピクチャ被接続のヘッダ部にＭＭＣＯ情報が挿入された当該編集点以降の接続符号化データを接続して、編集済み符号化データとして、復号装置や再度ＨＤＤ１０１等の記録装置へ出力する。
【００９２】
次に、実施の形態２の符号化データ編集装置における主要動作を詳細に説明する。
【００９３】
図１３は、本実施の形態２のヘッダ情報変更部２０３によるヘッダ情報変更処理の流れを示すフローチャートである。
【００９４】
まず、ヘッダ情報変更部２０３は、Ｓ４０１により、符号化データ抽出部１０２によって抽出された抽出符号化ストリームのＰＯＣとＦＮとから、その差分値を算出する。抽出符号化ストリームのＰＯＣとＦＮとは、図３に示すようになっており、編集後の符号化データは、編集点のピクチャのヘッダ部にＭＭＣＯリセットコマンドを付加しているので、編集点のピクチャ、すなわち接続符号化データの先頭ピクチャのＦＮとＰＯＣとは０にリセットされる。すなわち、抽出符号化データの先頭ピクチャのＰＯＣおよびＦＮが差分値となる。
【００９５】
次に、ヘッダ情報変更部２０３は、Ｓ４０２により、この差分値を用いてＦＮとＰＯＣの変更を行う。この変更は抽出符号化データの先頭ピクチャから次のＩＤＲピクチャの前のピクチャまで繰り返して行う。
【００９６】
図１４は、本実施の形態２によるヘッダ変更符号化データのピクチャタイプおよびＰＯＣとＦＮを示す図である。
【００９７】
図３に示すヘッダ情報が変更される前の符号化データのＰＯＣとＦＮと比較すると明らかだが、ＩピクチャＩ６のＦＮとＰＯＣとはそれぞれ０にリセットされ、ＩピクチャＩ６に続くピクチャのＰＯＣとＦＮも、ＩピクチャＩ６のＦＮとＰＯＣのリセットに応じて相対的に変更されている。つまり、図５に示す実施の形態１によるヘッダ情報が変更後符号化データと比べると、ピクチャＩ６がピクチャＩＤＲ０に変更されない点が異なる。
【００９８】
図１５は、図１３に示すヘッダ変更符号化データの先頭ピクチャＩ６をデコードした後のＤＰＢの状態を示す図である。
【００９９】
ここでは、ＤＰＢのフレーム数の上限（ＭａｘＤＰＢ）は２、参照ピクチャの最大格納枚数(no_of_ref)は２であるとする。このように、ＭＭＣＯリセットコマンドが付加されたピクチャの次のピクチャのデコード直後は、ＤＰＢにはそのピクチャのみが格納されている状態となる。よって、前述した参照ピクチャリストを作成しても、ＤＰＢには１枚のピクチャしか存在ない。なお、図６とは、ピクチャＩ６がピクチャＩＤＲ０に変更されない点が異なる。
【０１００】
すると、本実施の形態２でも、ピクチャＩ６の次のピクチャであるＢ５をデコードする際に用いられる参照ピクチャリストは、実施の形態１と同様に、図７に示すようになる。
【０１０１】
一方、図２に示す切り出す前の符号化データでは、ピクチャＩ６をデコードした後のＤＰＢの状態は、実施の形態１と同様に、図８のようになる。
【０１０２】
図８は、ＤＰＢにＰ４とＩ６が格納され、両方ともusedとneededにマークされていることを示す図である。図８に示すように、切り出す前のＤＰＢの状態では、２枚のusedとマークされたピクチャがあるので、Ｂ５をデコードする際に使用する参照ピクチャリストには、図９に示すように２枚のピクチャが存在している。したがって、参照ピクチャとして参照ピクチャリストの２番目のピクチャが指定される可能性があるが、前述したようにヘッダ変更符号化データでは参照ピクチャリストには１枚のピクチャしか存在しないため、不整合を生じることとなる。
【０１０３】
そこで、リオーダリング情報作成部１０４は、実施の形態１と同様に、前記編集点以降の符号化データの参照ピクチャリストのピクチャの数が、参照ピクチャの最大格納枚数(no_of_ref)と同じになるように、符号化すべきピクチャＢ５に時間的に最も近いピクチャを、参照ピクチャリストの空きに挿入するようにリオーダリング情報を作成してリオーダリング情報挿入部１０５へ出力する。その際、リオーダリング情報作成部１０４は、実施の形態１と同様に、編集点であるイントラピクチャを挿入するようにリオーダリング情報を作成するようにしても勿論よいし、参照ピクチャリストに掲載されている、例えば、１番目のピクチャをコピーして参照ピクチャリストの空きに挿入するようにリオーダリング情報を作成するようにしても勿論よい。
【０１０４】
リオーダリング情報挿入部１０５は、リオーダリング情報作成部１０４が作成したリオーダリング情報を、上述のようにヘッダ情報変更部２０３によってヘッダ情報が変更された編集点以降の符号化データの最初のピクチャ、すなわち編集点のピクチャのヘッダ情報に挿入して、ＭＭＣＯ情報挿入部２０６へ出力する。
【０１０５】
これにより、本実施の形態２でも、このようなリオーダリング情報を受け取った場合の復号時の参照ピクチャリストは、実施の形態１と同様に、図１０に示すようになり、このようにリオーダリング情報を付加することにより、参照ピクチャとして参照ピクチャの２番目のピクチャが指定されても参照ピクチャリストのピクチャの数が足りなくなるといる不整合を生じることを防ぐことができる。
【０１０６】
よって、ＤＰＢは、次のＩＤＲピクチャが来ることでリセットされるので、リオーダリング情報作成部１０４では、編集点から次のＩＤＲピクチャまでの間のＤＰＢの状態を調べ、ＤＰＢの中の被参照ピクチャの数が参照ピクチャの最大格納枚数(no_of_ref)に満たないピクチャに同様にリオーダリング情報を追加することになる。
【０１０７】
一方、ＭＭＣＯ情報挿入部２０６は、リオーダリング情報挿入部１０５によってリオーダリング情報が挿入された編集点のピクチャのヘッダ部に、ＤＰＢのリセットを指示するＭＭＣＯ情報（以下、リセットＭＭＣＯコマンドと呼ぶ）を挿入し、ＭＭＣＯ挿入データとして符号化データ接続部２０７に出力する。
【０１０８】
符号化データ接続部２０７は、被接続編集点のピクチャのヘッダ部にＭＭＣＯ情報挿入部２０６によりＭＭＣＯコマンドが挿入された編集点以降の符号化データを、内部または外部から指定された被接続符号化データの最後のピクチャの後ろに接続して、編集済み符号化データとして、復号装置（図示せず）やＨＤＤ１０１等へ出力する。これにより、復号装置（図示せず）等では、ピクチャＢ１８のデコード後、編集点のピクチャのヘッダ部のＭＭＣＯコマンドを復号した際、ＤＰＢ内の全てのピクチャをunusedとマークし出力した上で消去（リセット）して、その後編集点以降の符号化データをデコードすることになる。
【０１０９】
図１６は、被接続符号化データの一例を示す図である。
【０１１０】
図１６に示す被接続符号化データの例は、被接続符号化データの最後尾の部分のみを示しており、この前にも被接続符号化データは存在している。この場合、編集点以降の接続符号化データは、符号化データ接続部２０７によって、被接続符号化データの最後のピクチャＢ１８に接続されることになる。
【０１１１】
図１７に、本実施の形態２の符号化データ編集装置より出力される編集済み符号化データの一例を示す。
【０１１２】
つまり、本実施の形態２では、ヘッダ情報変更部１０３によりヘッダ情報が変更された編集点以降の符号化データの各ピクチャにおけるスライスデータのスライスヘッダ内に、リオーダリング情報挿入部１０５によってリオーダリング情報作成部１０４により作成されたリオーダリング情報と、ＭＭＣＯ情報挿入部１０６によってＭＭＣＯ情報とが挿入されることになる。
【０１１３】
このように、本実施の形態２の符号化データ編集装置によれば、符号化データの切り出し等の編集を行う編集点以降の符号化データを抽出し、編集点以降の符号化データのヘッダ情報を、編集点を先頭とする内容に変更するので、任意の編集点にて符号化データを切り出すことができる。
【０１１４】
特に、本実施の形態２では、Ｈ．２６４符号化方式にて符号化された符号化データの編集を行った後のＤＰＢに格納されている被参照画像の数と、参照ピクチャの最大格納枚数(no_of_ref)を比較し、被参照画像の数が少なかった場合には、編集点としたイントラピクチャを、参照ピクチャリストのピクチャの数が最大格納枚数となるまで参照ピクチャリストに追加することを指示するリオーダリング情報を挿入するとともに、被接続符号化データの最後のピクチャにＤＰＢ内の画像を参照不可として全て出力させるＤＰＢのリセットを指示するＭＭＣＯコマンド情報を追加するようにしたので、実施の形態１と同様に、ＩＤＲピクチャ以外の任意のイントラピクチャにて切り出しをした符号化データを復号した場合でも、ＤＰＢにおける参照ピクチャの欠落を補填することができ、参照ピクチャの欠落による復号画像の品質劣化の防止を図りながらＩＤＲピクチャ以外のイントラピクチャを編集点として符号化データを切り出して、他の符号化データに接続することが可能となる。
【０１１５】
なお、本実施の形態２では、符号化データ接続部２０７を設けて説明したが、本発明では、これに限らず、実施の形態１のように、符号化データ接続部２０７を設けずに、任意の編集点で符号化データを切り出して出力するだけでも勿論良い。
【０１１６】
また、本実施の形態２では、ＭＭＣＯ情報挿入部２６がリオーダリング情報挿入部１０５によってリオーダリング情報が挿入された編集点のピクチャのヘッダ部に、ＭＭＣＯ情報を挿入し、ＭＭＣＯ挿入データとして符号化データ接続部２０７に出力するように説明したが、これに限らず、リオーダリング情報とＭＭＣＯ挿入データの挿入のタイミングを逆にして、例えば、ＭＭＣＯ情報挿入部２６が編集点のピクチャのヘッダ部にＭＭＣＯ情報を挿入した後、リオーダリング情報挿入部１０５がリオーダリング情報作成部１０４からのリオーダリング情報を挿入するようにしても勿論かまわない。
【０１１７】
なお、上記実施の形態１，２では、ＩＴＵ−Ｔ  Ｈ．２６４符号化方式により符号化された符号化データを編集（切り出し）の対象として説明したが、本発明では、これに限るものではなく、他の符号化方式により符号化された符号化データを対象としても勿論よい。
【図面の簡単な説明】
【０１１８】
【図１】本発明の符号化データ編集装置の実施の形態１を示すブロック図である。
【図２】実施の形態１における符号化データ編集装置に入力される符号化データの一例である。
【図３】符号化データ抽出部によって抽出された符号化データの例を示す図である。
【図４】ヘッダ情報変更部におけるヘッダ情報変更処理の流れを示すフローチャートである。
【図５】ヘッダ情報が変更されたヘッダ変更符号化データのピクチャタイプおよびＰＯＣとＦＮを示す図である。
【図６】図５に示すヘッダ変更符号化データの先頭ピクチャＩＤＲ０をデコードした後のＤＰＢの状態を示す図である。
【図７】ＩＤＲ０の次のピクチャであるＢ５をデコードする際に用いられる参照ピクチャリストＭＰの一例を示す図である。
【図８】ＤＰＢにＰ４とＩ６が格納され、両方ともusedとneededにマークされていることを示す図である。
【図９】Ｂ５をデコードする際に使用する参照ピクチャリストＭＰの一例を示す図である。
【図１０】本実施の形態１によるリオーダリング情報を受け取った場合の復号時の参照ピクチャリストの一例を示す図である。
【図１１】本実施の形態１のリオーダリング情報挿入部１０５から出力される編集済み符号化データの一例を示す図である。
【図１２】本発明の符号化データ編集装置の実施の形態２の構成例を示すブロック図である。
【図１３】本実施の形態２のヘッダ情報変更部によるヘッダ情報変更処理の流れを示すフローチャートである。
【図１４】本実施の形態２によるヘッダ変更符号化データのピクチャタイプおよびＰＯＣとＦＮを示す図である。
【図１５】図１３に示すヘッダ変更符号化データの先頭ピクチャＩ６をデコードした後のＤＰＢの状態を示す図である。
【図１６】被接続符号化データの一例を示す図である。
【図１７】本実施の形態２の符号化データ編集装置より出力される編集済み符号化データの一例を示す図である。
【図１８】従来のＭＰＥＧ−２符号化における符号化方法を説明する図であり、（ａ）は、表示時のフレームの並び、（ｂ）は符号化時のフレームの並びを示す図である。
【図１９】クローズドＧＯＰの場合の符号化方法を説明するもので、（ａ）は表示時のフレームの並び、（ｂ）は符号化時のフレームの並びを示す図である。
【図２０】Ｈ.２６４における符号化方法を説明する図である。
【図２１】Ｈ.２６４におけるＤＰＢの管理を説明する概念図である。
【図２２】ピクチャに付与されるＰＯＣとＦＮを説明する図である。
【図２３】（ａ）は、図２２においてＰ６をデコードした後のＤＰＢの状態を示す図、（ｂ)は、Ｂ４デコード後のＤＰＢの状態を示す図、（ｃ)は、Ｂ５でコード後のＤＰＢの状態を示す図である。
【符号の説明】
【０１１９】
１０１  ＨＤＤ
１０２  符号化データ抽出部
１０３，２０３  ヘッダ情報変更部
１０４  リオーダリング情報作成部
１０５  リオーダリング情報挿入部
２０６  ＭＭＣＯ情報挿入部
２０７  符号化データ接続部
【図１】
2007067842.tif 000003
【図２】
2007067842.tif 000004
【図３】
2007067842.tif 000005
【図４】
2007067842.tif 000006
【図５】
2007067842.tif 000007
【図６】
2007067842.tif 000008
【図７】
2007067842.tif 000009
【図８】
2007067842.tif 000010
【図９】
2007067842.tif 000011
【図１０】
2007067842.tif 000012
【図１１】
2007067842.tif 000013
【図１２】
2007067842.tif 000014
【図１３】
2007067842.tif 000015
【図１４】
2007067842.tif 000016
【図１５】
2007067842.tif 000017
【図１６】
2007067842.tif 000018
【図１７】
2007067842.tif 000019
【図１８】
2007067842.tif 000020
【図１９】
2007067842.tif 000021
【図２０】
2007067842.tif 000022
【図２１】
2007067842.tif 000023
【図２２】
2007067842.tif 000024
【図２３】
2007067842.tif 000025