(57)【要約】【課題】画面を複数の領域に分割した場合の画面の端の領域の符号化や高解像度の画像を複数の領域に分割する符号化などにおいて符号化効率を向上させる。【解決手段】予測モード探索部１３は，予測画像を作成する際に使用する画像情報を定める複数のパターンに対応する予測モードの中から参照フレームと現フレーム間の幾何学情報に従って予測モードを探索し決定する。予測画像作成部１５は，決定された予測モードに従って前記幾何学情報を用いて予測画像を作成し，差分符号化部１６は，入力画像情報と予測画像との差分を符号化する。予測モード符号化部１４は，予測モードを符号化する。【選択図】図７
2005260464.tif 000002
【特許請求の範囲】
【請求項１】
参照画像を蓄積しておき，現フレームを分割した領域内の画像情報を，フレーム間予測符号化を用いて符号化する画像符号化装置であって，
複数フレームの参照画像を蓄積する参照画像メモリと，
予め設定された参照フレームと現フレーム間の幾何学情報を用いて，参照フレームの画像情報と現フレームの画像情報とから現フレームの予測画像を作成する予測画像作成部と，
前記現フレームを分割した領域内の画像情報と予測画像の差分を符号化する差分符号化部とを備える
ことを特徴とする画像符号化装置。
【請求項２】
参照画像を蓄積しておき，現フレームを分割した領域内の画像情報を，フレーム間予測符号化を用いて符号化する画像符号化装置であって，
符号化する現フレームの画像情報を取り込む画像入力部と，
複数フレームの参照画像を蓄積する参照画像メモリと，
参照フレームと現フレーム間の空間的な位置関係を示す幾何学情報を用いて，参照フレームの画像情報と現フレームの画像情報とから現フレームの予測画像を作成するにあたって，予測画像を作成する際に使用する画像情報を定める複数のパターンに対応する複数の予測モードの中から，前記幾何学情報に従って予測画像の作成に用いる予測モードを探索し決定する予測モード探索部と，
前記予測モードを符号化する予測モード符号化部と，
前記予測モードに従って予測画像を作成する予測画像作成部と，
入力画像情報と予測画像との差分を符号化する差分符号化部と，
前記差分符号化部で作成された差分符号化データを復号して復号画像を作成し前記参照メモリに格納する復号部とを備える
ことを特徴とする画像符号化装置。
【請求項３】
請求項２記載の画像符号化装置において，
前記参照画像メモリに蓄積された参照画像のうち前記予測画像作成部が参照する参照画像の指定情報を符号化する参照画像指定情報符号化部を備える
ことを特徴とする画像符号化装置。
【請求項４】
請求項２または請求項３記載の画像符号化装置において，
前記幾何学情報を符号化する幾何学情報符号化部を備える
ことを特徴とする画像符号化装置。
【請求項５】
参照画像を蓄積しておき，現フレームを分割した領域内の画像情報を，フレーム間予測符号化を用いて復号する画像復号装置であって，
複数フレームの参照画像を蓄積する参照画像メモリと，
差分画像情報を復号する差分復号部と，
予め設定された参照フレームと現フレーム間の幾何学情報を用いて，参照フレームの画像情報と現フレームの画像情報とから現フレームの予測画像を作成する予測画像作成部と，
予測画像と差分画像情報とから復号画像を作成する復号画像作成部とを備える
ことを特徴とする画像復号装置。
【請求項６】
参照画像を蓄積しておき，現フレームを分割した領域内の画像情報を，フレーム間予測符号化を用いて復号する画像復号装置であって，
復号する画像の差分画像情報の符号化データと，参照フレームと現フレーム間の空間的な位置関係を示す幾何学情報を用いて，参照フレームの画像情報と現フレームの画像情報とから現フレームの予測画像を作成するにあたって，予測画像を作成する際に使用する画像情報を定める複数のパターンに対応する複数の予測モードの中から，画像符号化装置が決定し符号化した予測モードの符号化データを入力する入力部と，
複数フレームの参照画像を蓄積する参照画像メモリと，
前記入力した予測モードの符号化データを復号する予測モード復号部と，
差分画像情報を復号する差分復号部と，
前記復号した予測モードに従って前記参照画像メモリに蓄積された参照画像の画像情報を用いて現フレームの予測画像を作成する予測画像作成部と，
予測画像と差分画像情報とから復号画像を作成し前記参照画像メモリに格納する復号画像作成部とを備える
ことを特徴とする画像復号装置。
【請求項７】
請求項６記載の画像復号装置において，
前記参照画像メモリに蓄積された参照画像のうち前記予測画像作成部が参照する参照画像の指定情報の符号化データを入力する入力部と，
入力した参照画像の指定情報の符号化データを復号する参照画像指定情報復号部とを備え，
前記予測画像作成部は，復号された参照画像の指定情報が示す参照画像を，前記参照画像メモリから読み出して予測画像の作成に使用する
ことを特徴とする画像復号装置。
【請求項８】
請求項６または請求項７記載の画像復号装置において，
前記幾何学情報を復号する幾何学情報復号部を備える
ことを特徴とする画像復号装置。
【請求項９】
参照画像を蓄積しておき，現フレームを分割した領域内の画像情報を，フレーム間予測符号化を用いて符号化する画像符号化方法であって，
予め設定された参照フレームと現フレーム間の幾何学情報を用いて，参照フレームの画像情報と現フレームの画像情報から現フレームの予測画像を作成する予測画像作成ステップと，
前記現フレームを分割した領域内の画像情報と予測画像の差分を符号化する差分符号化ステップとを実行する
ことを特徴とする画像符号化方法。
【請求項１０】
参照画像を蓄積しておき，現フレームを分割した領域内の画像情報を，フレーム間予測符号化を用いて復号する画像復号方法であって，
予め設定された参照フレームと現フレーム間の幾何学情報を用いて，参照フレームの画像情報と現フレームの画像情報から現フレームの予測画像を作成する予測画像作成ステップと，
差分画像情報を復号する差分復号ステップと，
予測画像と差分画像情報から復号画像を作成する復号画像作成ステップとを実行する
ことを特徴とする画像復号方法。
【請求項１１】
請求項１から請求項４までのいずれか１項に記載された画像符号化装置の各部の機能を，コンピュータに実現させるための画像符号化プログラム。
【請求項１２】
請求項５から請求項８までのいずれか１項に記載された画像復号装置の各部の機能を，コンピュータに実現させるための画像復号プログラム。
【請求項１３】
請求項１から請求項４までのいずれか１項に記載された画像符号化装置の各部の機能を，コンピュータに実現させるための画像符号化プログラムを，コンピュータ読み取り可能な記録媒体に記録したことを特徴とする画像符号化プログラム記録媒体。
【請求項１４】
請求項５から請求項８までのいずれか１項に記載された画像復号装置の各部の機能を，コンピュータに実現させるための画像復号プログラムを，コンピュータ読み取り可能な記録媒体に記録したことを特徴とする画像復号プログラム記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は，フレーム間予測符号化方式を用いた複数フレームの画像符号化に関する技術である。
【背景技術】
【０００２】
一般的に動画像符号化では，時間方向の相関を使って高い符号化効率を実現するため，フレーム間予測符号化を用いている。フレームの符号化モードには，フレーム間の相関を使わずに符号化するＩフレームと，過去に符号化した１フレームから予測するＰフレームと，過去に符号化した２フレームから予測することができるＢフレームとがある。
【０００３】
Ｂフレームでは，参照画像メモリに２フレーム分の復号画像を蓄積しておく必要がある。特に映像符号化方式Ｈ．２６３とＨ．２６４では，参照画像メモリに２フレーム以上の複数フレーム分の復号画像を蓄積しておき，その参照画像メモリから参照画像を選択して予測することができる。
【０００４】
参照画像はブロックごとに選択することができ，参照画像を指定する参照画像指定情報を符号化する。参照画像メモリには，短時間用（ＳＴＲＭ）と長時間用（ＬＴＲＭ）があり，ＳＴＲＭには現フレームの復号画像を蓄積していき，ＬＴＲＭにはＳＴＲＭに蓄積されている画像を選択して蓄積する。ＬＴＲＭとＳＴＲＭの制御方法について記載した文献としては，例えば下記の非特許文献１が挙げられる。
【０００５】
参照画像指定情報としては，Ｈ．２６３  Ａｎｎｅｘ  ＮのようにＴＲ（Temporal Reference）を用いる手法や，Ｈ．２６３  Ａｎｎｅｘ  ＵやＨ．２６４のように，別途ｉｎｄｅｘを定義する手法が提案されている。
【０００６】
ＴＲは，ＭＰＥＧ−１，ＭＰＥＧ−２やＨ．２６１，Ｈ．２６３といった国際標準動画像符号化で採用されている各フレームの出力時刻の情報であり，フレームごとに固定長符号化される。システムで基準となる時間間隔を予め設定しておき，その時間間隔とＴＲの積でシーケンス先頭からの時刻を示す。エンコーダでは，入力画像の時刻情報をＴＲに設定して各フレームを符号化し，デコーダでは，各フレームの復号画像をＴＲで指定された時刻に出力する。
【０００７】
このＴＲを用いる場合には，ＴＲは一般的に固定長で符号化されるため参照画像指定情報の発生頻度を反映しておらず，符号化効率が悪い。別途ｉｎｄｅｘを用いる手法では，ｉｎｄｅｘを例えば可変長符号化することにより，参照画像指定情報の発生頻度を反映してエントロピー符号化を行うことができる。
【０００８】
また，特に静止画像の場合，現フレームの既に復号した画像情報を使って予測画像を作成して残差信号を符号化するイントラ予測符号化もある。
【０００９】
図１８は，ＪＰＥＧ−ＬＳにおける予測に使用する画素位置の例を示す図である。例えばＪＰＥＧ−ＬＳでは，図１８に示すような符号化対象画素の周辺の画像情報から予測画像を作成する。図１８において，画素ｘの予測画像は，画素ａ，ｂ，ｃ，ｄの復号画像から作成される。
【００１０】
図１９は，Ｈ．２６４におけるイントラ予測の例を示す図である。Ｈ．２６４のイントラ予測では，周囲のブロックの復号画像から予測画像を作成する手法が採用されている。このようなイントラ予測では，予測画像を作成する方法が複数モードあり，最も符号化効率のよいモードを探索し，そのモード情報も符号化する。図１９において，ａ，ｂ，…，ｐは現ブロックの画素を示し，Ａ，Ｂ，…，Ｑは既に復号された画素を示す。図１９に示した矢印に載る画素位置の予測画像は，画素Ｄ，Ｅ，Ｆの画像情報から作成される。
【００１１】
図２０は，内挿補間の例を示す図である。図１９のように外挿補間により予測画像を作成するのではなく，図２０に示すように，まだ符号化されていない画素位置の画像情報を用い，その画像情報と既に符号化され復号されている画像情報との補間により，予測画像を作成する内挿補間手法も提案されている（例えば，非特許文献２参照）。この場合，符号化されていない位置の画像情報と，予測方法とを探索して決定する。この場合には，符号化されていない位置の画像情報と，予測モードと予測残差とが符号化される。もっとも，まだ符号化されていない位置の画像情報も，既に符号化され復号された画像情報から予測画像を作成して，その予測残差を符号化するようにしてもよい。
【００１２】
これらの内挿補間と外挿補間との違いは，予測される順序が異なるだけである。基本的には，どちらも現フレーム内の画像情報を使って予測する。一般的に，内挿補間の方が外挿補間よりも予測に使用する画像情報を多く選択できるため，予測効率は高い。
【００１３】
他方，超広角カメラを使って撮影される全方位映像がある。全方位映像の符号化方法としては，全方位映像を一度３次元ポリゴンの表面にマッピングし，さらに全ポリゴン平面を矩形の２次元画像にマッピングして，２次元映像として符号化する手法が提案されている。
【００１４】
図２１は，全方位映像の８面体への投影の例を示す図である。３次元ポリゴンの形状は任意であるが，例えば，非特許文献３では，図２１に示すような８面体を用いる手法が提案されている。図２１（ａ）に示すような８面体に投影された全方位映像から，図２１（ｂ）に示すような上の四角錐の画像と下の四角錐の画像とが作成され，再配列により，図２１（ｃ）に示すような全方位映像を１つの矩形画面にマッピングした画像が作成される。
【００１５】
これらの方式では全方位の映像を１つの矩形の画面にマッピングしているが，複数の画面にマッピングしてもよい。例えば８面体の場合には，上の四角錐からの画像情報を１つの画面として，下の四角錐からの画像情報を１つの画面として，合計２画面の画像情報として扱ってもよい。このようにすれば，全方位の映像を１つの画面にマッピングする手法よりも低い空間解像度の画像を複数持つ構成にすることが可能である。復号側では，低い解像度の画面にすれば，画面全体の画像情報を復号するための時間が少なくなり，より早く再生画面の表示が可能となる利点がある。
【００１６】
このような複数の画面で構成される画像を画面ごとに個別に符号化してもよいし，各画面を１つの映像の個々のフレームに対応させて１つの映像として符号化してもよい。これらの映像は，１つの映像中で１フレームおきに符号化してもよい。フレームごとに，時刻情報ＴＲの他に，もともとどの映像に属していたのかを示すカテゴリ情報を符号化しておく。
【００１７】
図２２は，全方位映像の立方体への投影の例を示す図である。全方位映像を投影する多面体は，図２１に示すような８面体に限らず，例えば図２２に示すような立方体でもよい。映像Ｓ１の裏側に映像Ｓ６があり，映像Ｓ２の裏側に映像Ｓ５があり，映像Ｓ３の裏側に映像Ｓ４があるものとする。このような幾何学情報の関係がある場合に，映像Ｓ１から映像Ｓ６までをまとめて１つの映像として符号化してもよい。これらの映像は，１つの映像中で１フレームおきに符号化していく。フレームごとに，時刻情報ＴＲの他に，もともと映像Ｓ１から映像Ｓ６までのいずれの映像なのかを示すカテゴリ情報を符号化しておく。
【００１８】
また，高解像度の画像の符号化については，この画面を複数の領域に分割して個々の分割領域を符号化する手法がある。
【００１９】
図２３は，高解像度画像の画面分割の例を示す図である。例えば，図２３に示すように画面を縦方向に２分割する手法がある。この分割手法は，例えば解像度が大きくて復号するための演算処理時間が多くかかる場合に，領域ごとに復号器を備えることによって演算時間を短縮するために利用されたり，または，符号化データを伝送する場合の伝送エラーからの回復に利用される。
【００２０】
なお，後述する本発明の実施の形態に利用される技術が記載されている文献としては，非特許文献４，非特許文献５，非特許文献６などがある。
【非特許文献１】Thomas Wiegand, Xiaozheng Zhang, and Bernd Girod, “Long-Term Memory Motion-Compensated Prediction，”IEEE Transactions on Circuits and Systems for Video Technology，vol.9 ，no.1，pp.70-84，Feb.1999
【非特許文献２】羽鳥：“帰還差分量子化を用いた画像信号の内挿予測符号化，”信学論vol.J66-B ，no.5，pp.599-606，May 1983
【非特許文献３】“Report on 3DAV Exploration，”N5878 ，ISO/IEC JTC1/SC29/WG11（MPEG），2003
【非特許文献４】上倉一人，渡辺裕，小林直樹，一之瀬進，安田浩，“演算量低減を考慮したグローバル動き・輝度変化補償動画像符号化，”信学論（Ｂ），vol.J82-B ，no.9，pp.1676-1688，1999
【非特許文献５】Hideaki Kimata, Masaki Kitahara, and Yoshiyuki Yashima, “RECURSIVELY WEIGHTING PIXEL DOMAIN INTRA PREDICTION ON H.264, ”SPIE Visual Communication and Image Processing 2003 （VCIP），vol.5150, pp.2035-2042，2001
【非特許文献６】Marta Karczewicz，Jani Lainema，Joni Vahteri and Bogdan Dobrin，“Nokia MVC H.26L Proposal Description，”ITU-T SG16 Q.6 document Q15-J-19，May, 2000
【発明の開示】
【発明が解決しようとする課題】
【００２１】
画面を領域に分割してイントラ予測を行う符号化では，領域内の画像情報と予測画像との間の差分（予測残差）が少ないと符号化効率が高くなるため，このような予測符号化モードを探索し，決定する。
【００２２】
従来のイントラ予測符号化では，現フレームの既に符号化され復号された画像情報を使って予測画像を作成している。そのため，画面の端の部分では，既に符号化され復号されている部分が限定されており，予測方法が限定される問題があった。また，高解像度の画像を複数の領域に分割して符号化する場合においては，個々の分割領域は個別に符号化していたため，符号化効率が低減する問題があった。
【００２３】
本発明は，上記の問題点を解決し，画面を複数の領域に分割した場合の画面の端の領域の符号化や高解像度の画像を複数の領域に分割する符号化などにおいて，符号化効率を向上させることを目的とする。
【課題を解決するための手段】
【００２４】
上記課題を解決するため，本発明の画像符号化装置は，参照画像を蓄積しておき，現フレームを分割した領域内の画像情報を，フレーム間予測符号化を用いて符号化する画像符号化装置であって，複数フレームの参照画像を蓄積する参照画像メモリと，予め設定された参照フレームと現フレーム間の幾何学情報を用いて，参照フレームの画像情報と現フレームの画像情報とから現フレームの予測画像を作成する予測画像作成部と，前記現フレームを分割した領域内の画像情報と予測画像の差分を符号化する差分符号化部とを備えることを特徴とする。
【００２５】
また，本発明の画像復号装置は，参照画像を蓄積しておき，現フレームを分割した領域内の画像情報を，フレーム間予測符号化を用いて復号する画像復号装置であって，複数フレームの参照画像を蓄積する参照画像メモリと，差分画像情報を復号する差分復号部と，予め設定された参照フレームと現フレーム間の幾何学情報を用いて，参照フレームの画像情報と現フレームの画像情報とから現フレームの予測画像を作成する予測画像作成部と，予測画像と差分画像情報とから復号画像を作成する復号画像作成部とを備えることを特徴とする。
【００２６】
これにより，異なる撮影地点や撮影方向のカメラで撮影された複数の画像を複数のフレームとみなして符号化する場合について，既に符号化され復号されたフレーム（参照フレーム）の画像情報と，現フレームで既に符号化され復号された画素位置の画像情報とから予測画像を作成することができる。
【００２７】
例えば，図２１に示すような画像で領域Ｄ１からＤ４までの画像を符号化する際に，領域Ｕ１からＵ４までの画像が既に符号化され復号されているとすると，これらの画像情報を図１９の画素ＡからＰまでのいずれかとみなすことにより，図１９に示すような予測画像の作成を行うことができる。
【００２８】
また，例えば，図２３に示すように画面を分割する場合には，先に下の部分の画像を符号化して復号しておき，これを参照フレームとすれば，図２３の上の部分の画像情報について予測画像を作成する際に，下の部分の画像情報（参照フレーム）を使用することが可能となる。したがって，上の部分で既に符号化され復号された画像情報があるとすると，図２０に示すような内挿補間と同じになり，予測効率を向上することができる。なお，分割する目的が演算量の分散であるならば，上の部分で２ライン目を符号化する場合には既に下の部分の１ライン目を復号済みであるため，予測に使用することが可能である。
【００２９】
参照フレーム内から予測に使用する画素の位置を選択する際に，参照フレームと現フレームとの間の幾何学情報を使用する。上記の例のように，参照フレームの端の画像情報を使用してもよいし，参照フレーム内部の画像情報を使用してもよい。
【００３０】
図１は，複数カメラからの映像の例を示す図である。例えば，図１（ａ）に示すような幾何学情報の関係があるカメラＡとカメラＢの画像（図１（ｂ））の場合には，カメラＡの画像（参照フレーム）内部（位置Ｘ）の画像情報と，カメラＢの画像（現フレーム）の画像情報とを使って予測画像を作成する。図１（ｂ）において，カメラＡの画像の位置Ｘは，カメラＢの画像の左端に相当する。
【００３１】
また，この発明を動画像に適用してもよい。例えば，図２１に示した各領域が動画像を構成している場合には，現フレームの予測画像を作成するにあたり，より多くの参照フレームから候補を選択することが可能となる。また，これは特にカメラ撮像系が移動する場合に有効である。
【００３２】
図２は，カメラが移動した場合の予測画像作成の例を示す図である。図２（ａ）に示すように，１つのカメラの位置が移動（位置Ａ→位置Ｂ）した場合の手順を示す。この場合，１つの映像の中の，異なる時刻の参照フレームの画像情報と，現時刻のフレームの画像情報とから予測画像を作成することとなる。各時刻における映像の幾何学情報を測定しておき，図２（ｂ）に示すように，参照フレームと現フレームとの間の幾何学情報を決定する。フレームごとに，時刻情報ＴＲの他に，このような幾何学情報を符号化しておく。図２（ｂ）において，位置Ａの画像の位置Ｘは，位置Ｂの画像の左端に相当する。
【００３３】
なお，このように予測画像の作成に使用した参照フレームの画像情報と，現フレームでの符号化対象位置の復号画像との間で，適切なフィルタを適用してもよい。このフィルタの処理により，参照フレームと現フレームとの間の歪が平均化され，主観的な品質を向上することができる。
【００３４】
また，参照フレームから使用する画像情報を選択した後に，この画像情報の値を計算により変更し，それから使用するようにしてもよい。例えば，参照フレームと現フレームとの間で平均的な画素値が異なっている場合には，画素値を例えば非特許文献４の手法によって修正した後に使用するようにしてもよい。
【００３５】
なお，ロスレス符号化の場合には，既に符号化され復号された画像情報を参照フレームにするのではなく，参照フレームの原画像を使用してもよい。
【００３６】
画像間の幾何学情報は，撮像系を構築した際に予め測定したものを用いてもよいし，カメラ撮像系が移動する場合には，そのカメラ撮像系の位置情報の移動量を用いてもよい。この位置情報をＧＰＳ等を用いて計測することも可能である。特に，動画像において撮像系が固定の場合には，幾何学情報を毎フレーム符号化する必要はなく，予め設定しておいてもよい。
【００３７】
幾何学情報が時間と共に変化する場合には，幾何学情報も符号化して符号化データに含めておき，復号側でその情報を使用することも可能である。幾何学情報を符号化する場合には，
・カメラの位置情報，
・絶対座標系における映像の位置情報，
・映像の相対的な位置情報，
のいずれかを符号化対象としてよい。
【００３８】
特に，カメラが移動する場合には，相対的な位置情報が好適である。映像の相対的な位置情報としては，画面間の移動量を利用する方法も好適である。
【００３９】
図３は，２画面間の位置関係の表現方法の例を示す図である。例えば，図３に示すように，画面Ａと画面Ｂがあるとすると，これらの相対的な位置情報は，画面Ｂの四隅の画素の位置を基準とする画面Ａの四隅の画素の位置情報，すなわち（ｘ１，ｙ１），（ｘ２，ｙ２），（ｘ３，ｙ３），（ｘ４，ｙ４）という位置情報で表現してもよい。
【００４０】
また，現フレームの符号化効率が最も高くなるように，画像情報から幾何学情報を推定してもよい。幾何学情報を符号化データに含めてもよく，この場合には，符号化データ中の幾何学情報を使用して，参照フレームから使用する画像情報を選択する。
【発明の効果】
【００４１】
本発明によれば，広角カメラの映像や複数のカメラからの映像，または移動しているカメラからの映像を符号化する場合に，参照フレームと現フレームとの間の幾何学情報を用いて，別のカメラからの画像または過去の画像の復号画像と，現フレームの復号画像とから予測画像を作成することにより，符号化効率を向上することができる。
【発明を実施するための最良の形態】
【００４２】
以下，本発明の実施の形態について，図を用いて説明する。まず，本発明の実施の形態における予測画像の作成ついて説明する。
【００４３】
図４は，本実施の形態の予測画像の作成に使用する画素の位置の例を示す図である。本実施の形態における予測画像の作成では，縦横１６画素のマクロブロックについて，図４（Ａ）〜（Ｏ）に示す配置の画像情報を用いて予測画像を作成する。図４（Ａ）〜（Ｄ）は，上下左右のいずれか１方向の画像情報を用いて予測画像を作成する場合の例を示し，図４（Ｅ）〜（Ｊ）は，上下左右のいずれか２方向の画像情報を用いて予測画像を作成する場合の例を示し，図４（Ｋ）〜（Ｎ）は，上下左右のいずれか３方向の画像情報を用いて予測画像を作成する場合の例を示し，図４（Ｏ）は，上下左右のすべての方向の画像情報を用いて予測画像を作成する場合の例を示している。
【００４４】
図５は，現マクロブロックの周囲画素の位置関係を示す図である。図５に示すように，現マクロブロック（このときに予測画像の作成対象となっているマクロブロック）の上に配置されている画素を p1[i]（ｉ＝１，…，１６），左に配置されている画素を p2[j]（ｊ＝１，…，１６），右に配置されている画素を p3[j]（ｊ＝１，…，１６），下に配置されている画素を p4[i]（ｉ＝１，…，１６）とする。
【００４５】
本実施の形態では，これらの画素を使い，次に示すパターンの予測モードのいずれかを適用して，マクロブロック内画素 q[j][i]（ｉ，ｊ＝１，…，１６）を求める。ただし，ｉは横方向の位置を示し，ｊは縦方向の位置を示す。また，Σk は，Σk 以下に続く式のｋが１から１６までの総和を示す。
【００４６】
○パターン１
使用する画素：図４（Ａ）
予測画像の作成式：
q[j][i] ＝p2[j]                                                 （１）．
○パターン２
使用する画素：図４（Ｂ）
予測画像の作成式：
q[j][i] ＝p1[i]                                                 （２）．
○パターン３
使用する画素：図４（Ｃ）
予測画像の作成式：
q[j][i] ＝p3[j]                                                 （３）．
○パターン４
使用する画素：図４（Ｄ）
予測画像の作成式：
q[j][i] ＝p4[i]                                                 （４）．
○パターン５
使用する画素：図４（Ｅ）
予測画像の作成式：
q[j][i] ＝（Σk （p1[k] ＋p2[k] ））／３２                      （５）．
○パターン６
使用する画素：図４（Ｆ）
予測画像の作成式：
q[j][i] ＝（Σk （p1[k] ＋p3[k] ））／３２                      （６）．
○パターン７
使用する画素：図４（Ｇ）
予測画像の作成式：
q[j][i] ＝（Σk （p4[k] ＋p3[k] ））／３２                      （７）．
○パターン８
使用する画素：図４（Ｈ）
予測画像の作成式：
q[j][i] ＝（Σk （p4[k] ＋p2[k] ））／３２                      （８）．
○パターン９
使用する画素：図４（Ｉ）
予測画像の作成式：
q[j][i] ＝（p1[i] ＋p4[i] ）／２                                （９）．
○パターン１０
使用する画素：図４（Ｊ）
予測画像の作成式：
q[j][i] ＝（p2[j] ＋p3[j] ）／２                              （１０）．
○パターン１１
使用する画素：図４（Ｋ）
予測画像の作成式：
q[j][i] ＝（Σk （p1[k] ＋p2[k] ＋p4[k] ））／４８            （１１）．
○パターン１２
使用する画素：図４（Ｌ）
予測画像の作成式：
q[j][i] ＝（Σk （p1[k] ＋p2[k] ＋p3[k] ））／４８            （１２）．
○パターン１３
使用する画素：図４（Ｍ）
予測画像の作成式：
q[j][i] ＝（Σk （p1[k] ＋p3[k] ＋p4[k] ））／４８            （１３）．
○パターン１４
使用する画素：図４（Ｎ）
予測画像の作成式：
q[j][i] ＝（Σk （p2[k] ＋p3[k] ＋p4[k] ））／４８            （１４）．
○パターン１５
使用する画素：図４（Ｏ）
予測画像の作成式：
q[j][i] ＝（Σk （p1[k] ＋p2[k] ＋p3[k] ＋p4[k] ））／６４    （１５）．
ここで，各パターンにおいて，予測画像を作成する際の計算式は，上記のものと異なるものを設定してもよい。例えば，パターン５において，上記の式（５）の代わりに次のような計算式を用いてもよい。
【００４７】
○パターン５−２
使用する画素：図４（Ｅ）
予測画像の作成式：
q[j][i] ＝（p1[i] ＋p2[j] ）／２                                （１６）．
また，このようにマクロブロック内で同じ計算式で予測画像を作成するのではなく，非特許文献５のように，既に作成した予測画像を再帰的に利用して予測画像を作成してもよい。また，マクロブロックを小領域に分割して領域ごとに予測画像を作成してもよい。また，非特許文献６のように，ブロック内での予測画像の変化を示すパラメータを符号化するようにしてもよい。
【００４８】
〔第１の実施の形態〕
次に，本発明の実施の形態における画像符号化，画像復号について説明する。まず，本発明の第１の実施の形態として，図２２に示したような全方位映像を符号化する際の手順を示す。
【００４９】
図６は，複数カメラからの映像の符号化順序の例を説明する図である。図２２に示すように，全方位映像は立方体に投影され，図６に示すように，同一ＴＲごとに，映像Ｓ１から映像Ｓ６までを交互に符号化するものとする。
【００５０】
ここでは，映像Ｓ１から映像Ｓ６までの間に図２２に示す幾何学情報の関係があることを前提にして，参照フレームから予測符号化に利用する画素位置を決定する。このとき，画像Ｓ６のフレームを縦横１６画素マクロブロックに分割し，マクロブロックごとに差分符号化データの符号量が最小となるように予測画像の作成方法を選択して符号化する例を示す。参照画像メモリには，画像Ｓ１から画像Ｓ５までの現時刻の画像が既に蓄積されているものとする。
【００５１】
図７に，本実施の形態における画像符号化装置の構成例を示す。画像符号化装置は，画像情報を取り込む画像入力部１１と，複数フレームの参照画像を蓄積することが可能な参照画像メモリ１２と，予測モードの探索を行う予測モード探索部１３と，予測モードを符号化する予測モード符号化部１４と，予測画像を作成する予測画像作成部１５と，入力画像情報と予測画像との差分を符号化する差分符号化部１６と，差分符号化部１６で作成された差分符号化データを復号して復号画像を作成する復号部１７と，予測画像作成部１５で使用する参照画像を切り替える参照画像切替部１８とを備える。
【００５２】
参照画像メモリ１２には，画像Ｓ１から画像Ｓ６までの６フレーム分の画像を蓄積できるメモリが備えてあり，各対応した画像の直前のフレームの画像情報を蓄積する。画像入力部１１は，入力画像をマクロブロックに分割するものとする。
【００５３】
図８は，本実施の形態における予測画像作成時の使用画素決定処理フローチャートである。予測モード探索部１３および予測画像作成部１５は，符号化を行う画像Ｓ６のマクロブロック（以下，ＭＢともいう）について，図８に示すフローチャートに従って，予測画像を作成する際に使用することができる画素を決定する。なお，ここでは左上ＭＢから順に符号化を行うものとする。
【００５４】
図９は，本実施の形態における立方体の参照フレームの画素位置の例を示す図である。画像Ｓ６を中心に立方体を展開したときの画像Ｓ６の周囲の位置を，Ｂ１〜Ｂ８と表すものとする。このとき，Ｂ１〜Ｂ４の位置には，それぞれ画像Ｓ２〜画像Ｓ５が存在する。参照画像メモリ１２には画像Ｓ１から画像Ｓ５までの現時刻の画像が既に蓄積されているので，画像Ｓ６と隣接する画像Ｓ２から画像Ｓ５までの端の画像情報を，画像Ｓ６予測画像を作成する際に使用する。
【００５５】
符号化対象のＭＢが画像Ｓ６の左上ＭＢである場合には（ステップ１００），Ｂ１，Ｂ２の位置にある画像Ｓ２，画像Ｓ３の画素を，予測画像の作成に使用可能な画素と決定する（ステップ１０１）。符号化対象のＭＢが画像Ｓ６の右上ＭＢである場合には（ステップ１０２），Ｂ１，Ｂ３の位置にある画像Ｓ２，画像Ｓ４の画素と，現フレーム（画像Ｓ６）の画素とを，予測画像の作成に使用可能な画素と決定する（ステップ１０３）。符号化対象のＭＢが画像Ｓ６の上ＭＢである場合には（ステップ１０４），Ｂ１の位置にある画像Ｓ２の画素と，現フレーム（画像Ｓ６）の画素とを，予測画像の作成に使用可能な画素と決定する（ステップ１０５）。
【００５６】
符号化対象のＭＢが画像Ｓ６の左下ＭＢである場合には（ステップ１０６），Ｂ２，Ｂ４の位置にある画像Ｓ３，画像Ｓ５の画素と，現フレーム（画像Ｓ６）の画素とを，予測画像の作成に使用可能な画素と決定する（ステップ１０７）。符号化対象のＭＢが画像Ｓ６の右下ＭＢである場合には（ステップ１０８），Ｂ３，Ｂ４の位置にある画像Ｓ４，画像Ｓ５の画素と，現フレーム（画像Ｓ６）の画素とを，予測画像の作成に使用可能な画素と決定する（ステップ１０９）。符号化対象のＭＢが画像Ｓ６の下ＭＢである場合には（ステップ１１０），Ｂ４の位置にある画像Ｓ５の画素と，現フレーム（画像Ｓ６）の画素とを，予測画像の作成に使用可能な画素と決定する（ステップ１１１）。
【００５７】
符号化対象のＭＢが画像Ｓ６の左ＭＢである場合には（ステップ１１２），Ｂ２の位置にある画像Ｓ３の画素と，現フレーム（画像Ｓ６）の画素とを，予測画像の作成に使用可能な画素と決定する（ステップ１１３）。符号化対象のＭＢが画像Ｓ６の右ＭＢである場合には（ステップ１１４），Ｂ３の位置にある画像Ｓ４の画素と，現フレーム（画像Ｓ６）の画素とを，予測画像の作成に使用可能な画素と決定する（ステップ１１５）。
【００５８】
符号化対象のＭＢが以上のいずれにも該当しない場合（符号化対象のＭＢが画像Ｓ６の端のＭＢでない場合）には，現フレーム（画像Ｓ６）の画素を，予測画像の作成に使用可能な画素と決定する（ステップ１１６）。
【００５９】
予測モード探索部１３は，各種予測モードによって定義される予測画像を，参照フレームまたは現フレームの画像情報から作成して，入力画像と予測画像との間の差分絶対値和が最も小さい予測モードを，そのマクロブロックの予測モードに決定する。
【００６０】
予測モード探索部１３と予測画像作成部１５では，図４に示す配置の画像情報を使って予測画像を作成する。ただし，図８のフローチャートで決定された画素位置の画像情報だけを使用する。
【００６１】
図１０は，本実施の形態における画像符号化処理フローチャートである。まず，画像入力部１１は，入力画像（例えば図２２の画像Ｓ６）を取り込み，マクロブロックに分割する（ステップ２００）。分割したマクロブロックごとに次のようにして符号化する。
【００６２】
予測モード探索部１３は，符号化対象のマクロブロックについて，図８に示すフローチャートに従って予測画像に使用可能な画素位置を決定する（ステップ２０１）。次に，上記のパターン１からパターン１５までの予測モードのうち，決定された画素位置を使用するパターンだけを順次適用して予測画像を作成し，原画像と予測画像との絶対値差分和を求め，この値が最も小さいパターンの予測モードを求める（ステップ２０２）。このとき，参照画像切替部１８は，図９に示す展開図で対応する画素を参照画像メモリ１２から読み込めるように，参照画像を切り替える。
【００６３】
このようにして予測モードを決定した後に，予測画像作成部１５は，予測画像を作成する（ステップ２０３）。このとき，決定された予測モードで予測画像を作成するように，参照画像切替部１８は，再度参照画像を切り替える。
【００６４】
差分符号化部１６は，原画像と予測画像との差分を符号化し（ステップ２０４），復号部１７は，符号化データを復号して復号画像を作成し（ステップ２０５），その復号画像を画像Ｓ６用の参照画像メモリ１２に蓄積する（ステップ２０６）。また，予測モード符号化部１４は，予測モード探索部１３で決定された予測モードを符号化する（ステップ２０７）。
【００６５】
以上の処理（ステップ２０１〜２０７）を現在の入力画像の全マクロブロックについて実行する（ステップ２０８）。次のマクロブロックからは，参照画像メモリ１２に蓄積した現在の画像の復号画像も利用しながら予測画像を作成して符号化する。このようにして現在の入力画像をすべて符号化する。
【００６６】
図１１は，本実施の形態における画像復号装置の構成例を示す図である。画像復号装置は，差分符号化データを復号する差分復号部２１と，複数フレームの参照画像を蓄積することが可能な参照画像メモリ２２と，予測モードを復号する予測モード復号部２３と，予測画像を作成する予測画像作成部２４と，差分画像と予測画像とから復号画像を作成する復号画像作成部２５と，予測画像作成部２４で使用する参照画像を切り替える参照画像切替部２６とを備える。
【００６７】
参照画像メモリ２２には，画像Ｓ１から画像Ｓ６までの６フレーム分の画像を蓄積できるメモリが備えてあり，各対応した画像の直前のフレームの画像情報を蓄積する。
【００６８】
前述の画像符号化装置の場合と同様に，予測画像作成部２４では，次に復号を行う画像（例えば図２２の画像Ｓ６）のマクロブロックについて，図８に示すフローに従って，予測画像を作成する際に使用することができる画素を決定し，予測モード復号部２３で復号したパターン１からパターン１５までのいずれかの予測モードを適用して予測画像を作成する。
【００６９】
図１２は，本実施の形態における画像復号処理フローチャートである。画像復号装置は，前述した画像符号化装置で符号化された画像（例えば画像Ｓ６）の符号化データを，マクロブロックごとに次のように復号する。
【００７０】
予測モード復号部２３は，予測モードを復号し（ステップ３００），予測画像作成部２４は，予測画像を作成する（ステップ３０１）。このとき，復号された予測モードに従って予測画像を作成するように，参照画像切替部２６が参照画像を切り替える。
【００７１】
差分復号部２１は，差分符号化データを復号して差分画像情報を求め（ステップ３０２），復号画像作成部２５は，差分画像情報と予測画像とを使用して復号画像を作成する（ステップ３０３）。その復号画像を出力するとともに，画像Ｓ６用の参照画像メモリ２２に蓄積する（ステップ３０４）。
【００７２】
以上の処理（ステップ３００〜３０４）を，現在復号する画像の全マクロブロックについて実行する（ステップ３０５）。ここで，次のマクロブロックからは，参照画像メモリ２２に蓄積した現在の画像の復号画像も利用しながら予測画像を作成して復号する。このようにして現在の入力画像をすべて復号する。
【００７３】
〔第２の実施の形態〕
次に，本発明の第２の実施の形態として，カメラが移動する際の画像符号化の手順を示す。図１３は，本実施の形態におけるカメラが移動した場合の予測画像作成の例を示す図である。図１３（ａ）に示すように，カメラは，位置Ａ→位置Ｂ→位置Ｃの順に移動して撮像を行うものとする。図１３（ｂ）において，位置Ａの画像の位置Ａ−１，位置Ｂの画像の位置Ｂ−１は，位置Ｃの画像の左端に相当する。
【００７４】
以下，カメラが位置Ｃのときの画像を符号化する際に，カメラが位置Ａまたは位置Ｂにあるときの画像を使用して予測画像を作成する例を示す。参照画像メモリには，位置Ａと位置Ｂにおける復号画像が既に蓄積されているものとする。
【００７５】
本実施の形態では，位置Ａと位置Ｃ，位置Ｂと位置Ｃの間に図１３に示す幾何学情報の関係があることを前提にして，参照フレームから予測符号化に利用する画素位置を決定する。このとき，位置Ｃの画像を縦横１６画素マクロブロックに分割し，マクロブロックごとに差分符号化データの符号量が最小となるように，参照画像と予測画像の作成方法とを選択して符号化する。
【００７６】
図１４は，本実施の形態における画像符号化装置の構成例を示す図である。画像符号化装置は，符号化する画像情報を取り込む画像入力部３１と，複数フレームの参照画像を蓄積することが可能な参照画像メモリ３２と，予測モードの探索を行う予測モード探索部３３と，予測モードを符号化する予測モード符号化部３４と，予測画像を作成する予測画像作成部３５と，入力画像情報と予測画像との差分を符号化する差分符号化部３６と，差分符号化部３６で作成された差分符号化データを復号して復号画像を作成する復号部３７と，予測画像作成部３５で使用する参照画像を切り替える参照画像切替部３８と，参照画像を指定する参照画像指定情報を符号化する参照画像指定情報符号化部３９とを備える。
【００７７】
参照画像メモリ３２には，位置Ａと位置Ｂの復号画像が既に蓄積されているものとする。さらに，位置Ｃの復号画像を蓄積できるメモリが備えてあるものとする。画像入力部３１は，入力画像をマクロブロックに分割するものとする。
【００７８】
予測画像作成部３５は，位置Ｃの画像の左端のマクロブロックについて，参照画像メモリ３２の位置Ａまたは位置Ｂの画像と，位置Ｃの復号画像とから予測画像を作成する。それ以外の位置のマクロブロックについては，参照画像メモリ３２の位置Ｃの復号画像から予測画像を作成する。
【００７９】
予測モード探索部３３は，各種予測モードによって定義される予測画像を，参照フレームまたは現フレームの画像情報から作成し，入力画像と予測画像との間の差分絶対値和が最も小さい参照画像と予測モードを，そのマクロブロックの参照画像と予測モードに決定する。
【００８０】
図１５は，本実施の形態における画像符号化処理フローチャートである。まず，画像入力部３１は，位置Ｃの入力画像を取り込み，マクロブロックに分割する（ステップ４００）。分割したマクロブロックごとに次のように符号化する。
【００８１】
予測モード探索部３３は，参照画像を位置Ａの画像に設定し，パターン１からパターン１５までの予測モードを順次適用して予測画像を作成し，現在の画像と予測画像との絶対値差分和を求め，この値が最も小さいパターンの予測モードを求める（ステップ４０１）。次に，参照画像を位置Ｂの画像に設定し，パターン１からパターン１５までの予測モードを順次適用して予測画像を作成し，現在の画像と予測画像との絶対値差分和を求め，この値が最も小さいパターンを求める（ステップ４０２）。
【００８２】
ステップ４０１で求められた位置Ａの画像を参照画像としたときの最小の絶対値差分和と，ステップ４０２で求められた位置Ｂの画像を参照画像としたときの最小の絶対値差分和を比較する（ステップ４０３）。位置Ａの画像を参照画像としたときの最小の絶対値差分和の方が小さければ，位置Ａの画像をそのマクロブロックの参照画像に決定し（ステップ４０４），ステップ４０１で求められた予測モードをそのマクロブロックの予測モードに決定する（ステップ４０５）。位置Ｂの画像を参照画像としたときの最小の絶対値差分和の方が小さければ，位置Ｂの画像をそのマクロブロックの参照画像に決定し（ステップ４０６），ステップ４０２で求められた予測モードをそのマクロブロックの予測モードに決定する（ステップ４０７）。
【００８３】
ここで，予測画像を作成する際には，パターン１からパターン１５までの予測モードのうち，位置Ａの画像または位置Ｂの画像と，符号化および復号済みの現在の画像の画素位置を使用するパターンのみを適用する。
【００８４】
このようにして参照画像と予測モードを決定した後に，予測画像作成部３５は，決定された予測モードで予測画像を作成する（ステップ４０８）。このとき，決定された参照画像で予測画像を作成するように，参照画像切替部３８が参照画像を切り替える。
【００８５】
差分符号化部３６は，現在の画像と予測画像との差分を符号化し（ステップ４０９），復号部３７は，符号化データを復号して復号画像を作成し（ステップ４１０），その復号画像を位置Ｃ用の参照画像メモリ３２に蓄積する（ステップ４１１）。また，予測モード符号化部３４は，予測モードを符号化し（ステップ４１２），参照画像指定情報符号化部３９は，参照画像指定情報を符号化する（ステップ４１３）。
【００８６】
以上の処理（ステップ４０１〜４１３）を現画像の全マクロブロックについて実行する（ステップ４１４）。ここで，次のマクロブロックからは，参照画像メモリ３２に蓄積した位置Ｃの復号画像も利用しながら予測画像を作成し符号化する。このようにして，入力した位置Ｃの画像をすべて符号化する。
【００８７】
図１６は，本実施の形態における画像復号装置の構成例を示す図である。画像復号装置は，差分符号化データを復号する差分復号部４１と，複数フレームの参照画像を蓄積することが可能な参照画像メモリ４２と，予測モードを復号する予測モード復号部４３と，予測画像を作成する予測画像作成部４４と，差分画像と予測画像とから復号画像を作成する復号画像作成部４５と，予測画像作成部４４で使用する参照画像を切り替える参照画像切替部４６と，参照画像を指定する参照画像指定情報を復号する参照画像指定情報復号部４７とを備える。
【００８８】
参照画像メモリ４２には，位置Ａと位置Ｂの復号画像が既に蓄積されており，これから位置Ｃの画像の符号化データを復号する場合について説明する。前述の画像符号化装置の場合と同様に，予測画像作成部４４は，位置Ｃの画像の左端のマクロブロックについて，参照画像メモリ４２の位置Ａまたは位置Ｂの画像と，位置Ｃの復号画像とから予測画像を作成する。それ以外の位置のマクロブロックについては，参照画像メモリ４２の位置Ｃの復号画像から予測画像を作成する。このような前提で，図１４の画像符号化装置で符号化された符号化データを，マクロブロックごとに次のように復号する。
【００８９】
図１７は，本実施の形態における画像復号処理フローチャートである。まず，予測モード復号部４３は，予測モードを復号し（ステップ５００），参照画像指定情報復号部４７は，参照画像指定情報を復号する（ステップ５０１）。
【００９０】
予測画像作成部４４は，復号された予測モードに従って予測画像を作成する（ステップ５０２）。このとき，復号された参照画像指定情報で指定された参照画像で予測画像を作成するように，参照画像切替部４６が参照画像を切り替える。
【００９１】
差分復号部４１は，差分符号化データを復号して差分画像情報を求め（ステップ５０３），復号画像作成部４５は，差分画像情報と予測画像とを使用して復号画像を作成する（ステップ５０４）。作成した復号画像を出力するとともに，その復号画像を位置Ｃ用の参照画像メモリ４２に蓄積する（ステップ５０５）。
【００９２】
以上の処理（ステップ５００〜５０５）を，現在の画像の全マクロブロックについて実行する（ステップ５０６）。次のマクロブロックからは，参照画像メモリ４２に蓄積した位置Ｃの復号画像も利用しながら予測画像を作成して復号する。
【００９３】
以上の第１および第２の実施の形態における画像符号化装置および画像復号装置が行う処理は，ハードウェアやファームウェアを用いて実現することができるだけでなく，コンピュータとソフトウェアプログラムとによっても実現することができ，そのプログラムをコンピュータ読み取り可能な記録媒体に記録して提供することも，ネットワークを通して提供することも可能である。
【００９４】
以上説明した第１および第２の実施の形態では，参照フレームと現フレームとの間の幾何学情報は予め設定されており，符号化データには含めなかったが，符号化データに含めるようにしてもよい。
【００９５】
また，本実施の形態では，画像符号化装置における予測モード探索の際に，絶対値差分和が最も小さい位置に設定したが，例えば実際に符号化した符号化データの符号量が最小となる位置に設定してもよい。
【００９６】
また，本実施の形態では，画像符号化装置における復号部１７，３７は，差分画像情報と予測画像とから復号画像を作成し，それを参照画像メモリ１２，３２に蓄積しているが，原画像を参照画像メモリ１２，３２に蓄積するようにしてもよい。
【図面の簡単な説明】
【００９７】
【図１】複数カメラからの映像の例を示す図である。
【図２】カメラが移動した場合の予測画像作成の例を示す図である。
【図３】２画面間の位置関係の表現方法の例を示す図である。
【図４】予測画像の作成に使用する画素の位置の例を示す図である。
【図５】現マクロブロックの周囲画素の位置関係を示す図である。
【図６】複数カメラからの映像の符号化順序の例を説明する図である。
【図７】本実施の形態における画像符号化装置の構成例を示す図である。
【図８】本実施の形態における予測画像作成時の使用画素決定処理フローチャートである。
【図９】本実施の形態における立方体の参照フレームの画素位置の例を示す図である。
【図１０】本実施の形態における画像符号化処理フローチャートである。
【図１１】本実施の形態における画像復号装置の構成例を示す図である。
【図１２】本実施の形態における画像復号処理フローチャートである。
【図１３】本実施の形態におけるカメラが移動した場合の予測画像作成の例を示す図である。
【図１４】本実施の形態における画像符号化装置の構成例を示す図である。
【図１５】本実施の形態における画像符号化処理フローチャートである。
【図１６】本実施の形態における画像復号装置の構成例を示す図である。
【図１７】本実施の形態における画像復号処理フローチャートである。
【図１８】ＪＰＥＧ−ＬＳにおける予測に使用する画素位置の例を示す図である。
【図１９】Ｈ．２６４におけるイントラ予測の例を示す図である。
【図２０】内挿補間の例を示す図である。
【図２１】全方位映像の８面体への投影の例を示す図である。
【図２２】全方位映像の立方体への投影の例を示す図である。
【図２３】高解像度画像の画面分割の例を示す図である。
【符号の説明】
【００９８】
１１，３１  画像入力部
１２，３２  参照画像メモリ
１３，３３  予測モード探索部
１４，３４  予測モード符号化部
１５，３５  予測画像作成部
１６，３６  差分符号化部
１７，３７  復号部
１８，３８  参照画像切替部
３９        参照画像指定情報符号化部
２１，４１  差分復号部
２２，４２  参照画像メモリ
２３，４３  予測モード復号部
２４，４４  予測画像作成部
２５，４５  復号画像作成部
２６，４６  参照画像切替部
４７        参照画像指定情報復号部
【図１】
2005260464.tif 000003
【図２】
2005260464.tif 000004
【図３】
2005260464.tif 000005
【図４】
2005260464.tif 000006
【図５】
2005260464.tif 000007
【図６】
2005260464.tif 000008
【図７】
2005260464.tif 000009
【図８】
2005260464.tif 000010
【図９】
2005260464.tif 000011
【図１０】
2005260464.tif 000012
【図１１】
2005260464.tif 000013
【図１２】
2005260464.tif 000014
【図１３】
2005260464.tif 000015
【図１４】
2005260464.tif 000016
【図１５】
2005260464.tif 000017
【図１６】
2005260464.tif 000018
【図１７】
2005260464.tif 000019
【図１８】
2005260464.tif 000020
【図１９】
2005260464.tif 000021
【図２０】
2005260464.tif 000022
【図２１】
2005260464.tif 000023
【図２２】
2005260464.tif 000024
【図２３】
2005260464.tif 000025