"第1のレイヤ及び前記第1のレイヤよりも上位の第2のレイヤを含むスケーラブル復号される画像の前記第1のレイヤ内の第1の予測単位についてのイントラ予測モードの候補の数が前記第2のレイヤ内の前記第1の予測単位に対応する第2の予測単位についてのイントラ予測モードの候補の数と異なる場合に、前記第1の予測単位に設定された予測モードに基づいて選択される予測モードを、前記第2の予測単位に設定するモード設定部と、前記モード設定部により設定される予測モードに従って、前記第2の予測単位の予測画像を生成する予測部と、を備える画像処理装置。前記第1の予測単位についてのイントラ予測モードの候補の数が前記第2の予測単位についてのイントラ予測モードの候補の数よりも少ない場合に、前記第1の予測単位と前記第2の予測単位との間の予測方向の差に応じて符号化される第1のパラメータを取得するパラメータ取得部、をさらに備え、前記モード設定部は、前記パラメータ取得部により取得される前記第1のパラメータに応じて、前記第2の予測単位に設定される予測モードを選択する、請求項1に記載の画像処理装置。前記第1のパラメータは、前記予測方向の差の絶対値が小さいほどより小さい符号番号で符号化される、請求項2に記載の画像処理装置。正負のみが異なる前記予測方向の差のうち、予測方向を特定の回転方向に回転させる方に、より小さい符号番号が割り当てられる、請求項3に記載の画像処理装置。正負のみが異なる前記予測方向の差のうち、前記第2の予測単位の予測方向が特定の方向により近づく方に、より小さい符号番号が割り当てられる、請求項3に記載の画像処理装置。前記特定の方向は、垂直方向又は水平方向であって、前記画像のアスペクト比に応じて決定される、請求項5に記載の画像処理装置。前記モード設定部は、前記第1の予測単位についてのイントラ予測モードの候補の数が前記第2の予測単位についてのイントラ予測モードの候補の数よりも多い場合には、前記第1の予測単位の予測方向に最も近い予測方向を表す予測モードを前記第2の予測単位に設定する、請求項1に記載の画像処理装置。前記モード設定部は、前記第1の予測単位の予測方向に最も近い予測方向を表す予測モードが前記第2の予測単位についての予測モードの候補内に複数存在する場合には、平均値予測を表す予測モードを前記第2の予測単位に設定する、請求項7に記載の画像処理装置。前記モード設定部は、前記第1の予測単位の予測方向に最も近い予測方向を表す予測モードが前記第2の予測単位についての予測モードの候補内に複数存在する場合には、予め定義される条件に従って、前記最も近い予測方向を表す複数の予測モードのいずれかを選択する、請求項7に記載の画像処理装置。前記予め定義される条件は、所定の回転方向に予測方向を回転させる、という条件である、請求項9に記載の画像処理装置。前記予め定義される条件は、符号番号のより小さい方を選択する、という条件である、請求項9に記載の画像処理装置。前記第1の予測単位の予測方向に最も近い予測方向を表す予測モードが前記第2の予測単位についての予測モードの候補内に複数存在する場合に、予測モードの選択のための第2のパラメータを取得するパラメータ取得部、をさらに備え、前記モード設定部は、前記パラメータ取得部により取得される前記第2のパラメータに応じて、前記最も近い予測方向を表す複数の予測モードのいずれかを選択する、請求項7に記載の画像処理装置。前記モード設定部は、前記第2の予測単位に設定すべき予測モードを、前記第1の予測単位に設定された予測モードと、前記第2のレイヤ内の前記第2の予測単位に隣接する少なくとも第3の予測単位に設定された予測モードとに基づくMostProbableModeによって推定する、請求項1に記載の画像処理装置。前記モード設定部は、前記第1の予測単位に設定された予測モードを前記第2の予測単位についての予測モードの候補内の予測モードに変換した上で、MostProbableModeを決定する、請求項13に記載の画像処理装置。前記第1の予測単位は、前記第2の予測単位内の所定の位置の画素に対応する画素を有する、前記第1のレイヤ内の予測単位である、請求項1に記載の画像処理装置。第1のレイヤ及び前記第1のレイヤよりも上位の第2のレイヤを含むスケーラブル復号される画像の前記第1のレイヤ内の第1の予測単位についてのイントラ予測モードの候補の数が前記第2のレイヤ内の前記第1の予測単位に対応する第2の予測単位についてのイントラ予測モードの候補の数と異なる場合に、前記第1の予測単位に設定された予測モードに基づいて選択される予測モードを、前記第2の予測単位に設定することと、設定された予測モードに従って、前記第2の予測単位の予測画像を生成することと、を含む画像処理方法。第1のレイヤ及び前記第1のレイヤよりも上位の第2のレイヤを含むスケーラブル符号化される画像の前記第1のレイヤ内の第1の予測単位についてのイントラ予測モードの候補の数が前記第2のレイヤ内の前記第1の予測単位に対応する第2の予測単位についてのイントラ予測モードの候補の数と異なる場合に、前記第1の予測単位に設定された予測モードに基づいて選択される予測モードを、前記第2の予測単位に設定するモード設定部と、前記モード設定部により設定される予測モードに従って、前記第2の予測単位の予測画像を生成する予測部と、を備える画像処理装置。第1のレイヤ及び前記第1のレイヤよりも上位の第2のレイヤを含むスケーラブル符号化される画像の前記第1のレイヤ内の第1の予測単位についてのイントラ予測モードの候補の数が前記第2のレイヤ内の前記第1の予測単位に対応する第2の予測単位についてのイントラ予測モードの候補の数と異なる場合に、前記第1の予測単位に設定された予測モードに基づいて選択される予測モードを、前記第2の予測単位に設定することと、設定された予測モードに従って、前記第2の予測単位の予測画像を生成することと、を含む画像処理方法。しかしながら、スケーラブル符号化においてレイヤごとに別々に予測モードを符号化することは、符号化効率の観点で最適ではない。下位レイヤの予測単位と上位レイヤの対応する予測単位との間で予測モードの候補のセットが等しければ、下位レイヤに設定された予測モードを上位レイヤで再利用することができる。しかし、レイヤ間でブロックサイズが異なるいくつかのケースでは、予測モードの候補のセットが異なるため、予測モードを単純に再利用することはできない。このような状況は、ブロックサイズの範囲が拡張され予測モードの候補のセットも多様化するHEVCでは、一層顕著となる。従って、スケーラブル符号化においてイントラ予測の予測モードをより効率的に符号化できる仕組みが提供されることが望ましい。本開示によれば、第1のレイヤ及び前記第1のレイヤよりも上位の第2のレイヤを含むスケーラブル復号される画像の前記第1のレイヤ内の第1の予測単位についてのイントラ予測モードの候補の数が前記第2のレイヤ内の前記第1の予測単位に対応する第2の予測単位についてのイントラ予測モードの候補の数と異なる場合に、前記第1の予測単位に設定された予測モードに基づいて選択される予測モードを、前記第2の予測単位に設定するモード設定部と、前記モード設定部により設定される予測モードに従って、前記第2の予測単位の予測画像を生成する予測部と、を備える画像処理装置が提供される。上記画像処理装置は、典型的には、スケーラブル符号化された画像を復号する画像復号装置として実現され得る。また、本開示によれば、第1のレイヤ及び前記第1のレイヤよりも上位の第2のレイヤを含むスケーラブル復号される画像の前記第1のレイヤ内の第1の予測単位についてのイントラ予測モードの候補の数が前記第2のレイヤ内の前記第1の予測単位に対応する第2の予測単位についてのイントラ予測モードの候補の数と異なる場合に、前記第1の予測単位に設定された予測モードに基づいて選択される予測モードを、前記第2の予測単位に設定することと、設定された予測モードに従って、前記第2の予測単位の予測画像を生成することと、を含む画像処理方法が提供される。また、本開示によれば、第1のレイヤ及び前記第1のレイヤよりも上位の第2のレイヤを含むスケーラブル符号化される画像の前記第1のレイヤ内の第1の予測単位についてのイントラ予測モードの候補の数が前記第2のレイヤ内の前記第1の予測単位に対応する第2の予測単位についてのイントラ予測モードの候補の数と異なる場合に、前記第1の予測単位に設定された予測モードに基づいて選択される予測モードを、前記第2の予測単位に設定するモード設定部と、前記モード設定部により設定される予測モードに従って、前記第2の予測単位の予測画像を生成する予測部と、を備える画像処理装置が提供される。上記画像処理装置は、典型的には、画像をスケーラブル符号化する画像符号化装置として実現され得る。また、本開示によれば、第1のレイヤ及び前記第1のレイヤよりも上位の第2のレイヤを含むスケーラブル符号化される画像の前記第1のレイヤ内の第1の予測単位についてのイントラ予測モードの候補の数が前記第2のレイヤ内の前記第1の予測単位に対応する第2の予測単位についてのイントラ予測モードの候補の数と異なる場合に、前記第1の予測単位に設定された予測モードに基づいて選択される予測モードを、前記第2の予測単位に設定することと、設定された予測モードに従って、前記第2の予測単位の予測画像を生成することと、を含む画像処理方法が提供される。本開示によれば、スケーラブル符号化においてイントラ予測の予測モードをより効率的に符号化できる仕組みが提供される。以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。また、以下の順序で説明を行う。1.一実施形態に係る画像符号化装置の構成例2.一実施形態に係る符号化時の処理の流れ3.一実施形態に係る画像復号装置の構成例4.一実施形態に係る復号時の処理の流れ5.応用例6.まとめ<1.一実施形態に係る画像符号化装置の構成例>[1-1.全体的な構成例]図1は、一実施形態に係る画像符号化装置10の構成の一例を示すブロック図である。図1を参照すると、画像符号化装置10は、A/DAnaloguetoDigital変換部11、並び替えバッファ12、減算部13、直交変換部14、量子化部15、可逆符号化部16、蓄積バッファ17、レート制御部18、逆量子化部21、逆直交変換部22、加算部23、デブロックフィルタ24、フレームメモリ25、セレクタ26及び27、動き探索部30、並びにイントラ予測部40を備える。A/D変換部11は、アナログ形式で入力される画像信号をデジタル形式の画像データに変換し、一連のデジタル画像データを並び替えバッファ12へ出力する。並び替えバッファ12は、A/D変換部11から入力される一連の画像データに含まれる画像を並び替える。並び替えバッファ12は、符号化処理に係るGOPGroupofPictures構造に応じて画像を並び替えた後、並び替え後の画像データを減算部13、動き探索部30及びイントラ予測部40へ出力する。減算部13には、並び替えバッファ12から入力される画像データ、及び後に説明する動き探索部30又はイントラ予測部40から入力される予測画像データが供給される。減算部13は、並び替えバッファ12から入力される画像データと予測画像データとの差分である予測誤差データを算出し、算出した予測誤差データを直交変換部14へ出力する。直交変換部14は、減算部13から入力される予測誤差データについて直交変換を行う。直交変換部14により実行される直交変換は、例えば、離散コサイン変換DiscreteCosineTransform:DCT又はカルーネンレーベ変換などであってよい。直交変換部14は、直交変換処理により取得される変換係数データを量子化部15へ出力する。量子化部15には、直交変換部14から入力される変換係数データ、及び後に説明するレート制御部18からのレート制御信号が供給される。量子化部15は、変換係数データを量子化し、量子化後の変換係数データ以下、量子化データというを可逆符号化部16及び逆量子化部21へ出力する。また、量子化部15は、レート制御部18からのレート制御信号に基づいて量子化パラメータ量子化スケールを切り替えることにより、可逆符号化部16に入力される量子化データのビットレートを変化させる。可逆符号化部16は、量子化部15から入力される量子化データについて可逆符号化処理を行うことにより、符号化ストリームを生成する。可逆符号化部16による可逆符号化は、例えば、可変長符号化、又は算術符号化などであってよい。また、可逆符号化部16は、セレクタ27から入力されるイントラ予測に関する情報又はインター予測に関する情報を、符号化ストリームのヘッダ領域内に多重化する。そして、可逆符号化部16は、生成した符号化ストリームを蓄積バッファ17へ出力する。蓄積バッファ17は、可逆符号化部16から入力される符号化ストリームを半導体メモリなどの記憶媒体を用いて一時的に蓄積する。そして、蓄積バッファ17は、蓄積した符号化ストリームを、伝送路の帯域に応じたレートで、図示しない伝送部例えば、通信インタフェース又は周辺機器との接続インタフェースなどへ出力する。レート制御部18は、蓄積バッファ17の空き容量を監視する。そして、レート制御部18は、蓄積バッファ17の空き容量に応じてレート制御信号を生成し、生成したレート制御信号を量子化部15へ出力する。例えば、レート制御部18は、蓄積バッファ17の空き容量が少ない時には、量子化データのビットレートを低下させるためのレート制御信号を生成する。また、例えば、レート制御部18は、蓄積バッファ17の空き容量が十分大きい時には、量子化データのビットレートを高めるためのレート制御信号を生成する。逆量子化部21は、量子化部15から入力される量子化データについて逆量子化処理を行う。そして、逆量子化部21は、逆量子化処理により取得される変換係数データを、逆直交変換部22へ出力する。逆直交変換部22は、逆量子化部21から入力される変換係数データについて逆直交変換処理を行うことにより、予測誤差データを復元する。そして、逆直交変換部22は、復元した予測誤差データを加算部23へ出力する。加算部23は、逆直交変換部22から入力される復元された予測誤差データと動き探索部30又はイントラ予測部40から入力される予測画像データとを加算することにより、復号画像データを生成する。そして、加算部23は、生成した復号画像データをデブロックフィルタ24及びフレームメモリ25へ出力する。デブロックフィルタ24は、画像の符号化時に生じるブロック歪みを減少させるためのフィルタリング処理を行う。デブロックフィルタ24は、加算部23から入力される復号画像データをフィルタリングすることによりブロック歪みを除去し、フィルタリング後の復号画像データをフレームメモリ25へ出力する。フレームメモリ25は、加算部23から入力される復号画像データ、及びデブロックフィルタ24から入力されるフィルタリング後の復号画像データを記憶媒体を用いて記憶する。セレクタ26は、インター予測のために使用されるフィルタリング後の復号画像データをフレームメモリ25から読み出し、読み出した復号画像データを参照画像データとして動き探索部30に供給する。また、セレクタ26は、イントラ予測のために使用されるフィルタリング前の復号画像データをフレームメモリ25から読み出し、読み出した復号画像データを参照画像データとしてイントラ予測部40に供給する。セレクタ27は、インター予測モードにおいて、動き探索部30から出力されるインター予測の結果としての予測画像データを減算部13へ出力すると共に、インター予測に関する情報を可逆符号化部16へ出力する。また、セレクタ27は、イントラ予測モードにおいて、イントラ予測部40から出力されるイントラ予測の結果としての予測画像データを減算部13へ出力すると共に、イントラ予測に関する情報を可逆符号化部16へ出力する。セレクタ27は、インター予測モードとイントラ予測モードとを、動き探索部30及びイントラ予測部40から出力されるコスト関数値の大きさに応じて切り替える。動き探索部30は、並び替えバッファ12から入力される符号化対象の画像データ原画像データ、及びセレクタ26を介して供給される復号画像データに基づいて、インター予測処理フレーム間予測処理を行う。例えば、動き探索部30は、各予測モードによる予測結果を所定のコスト関数を用いて評価する。次に、動き探索部30は、コスト関数値が最小となる予測モード、即ち圧縮率が最も高くなる予測モードを、最適な予測モードとして選択する。また、動き探索部30は、当該最適な予測モードに従って予測画像データを生成する。そして、動き探索部30は、選択した最適な予測モードを表す予測モード情報、動きベクトル情報及び参照画像情報を含むインター予測に関する情報、コスト関数値、並びに予測画像データを、セレクタ27へ出力する。イントラ予測部40は、並び替えバッファ12から入力される原画像データ、及びフレームメモリ25から供給される参照画像データとしての復号画像データに基づいて、画像内に設定されるブロックごとにイントラ予測処理を行う。そして、イントラ予測部40は、最適な予測モードを表す予測モード情報を含むイントラ予測に関する情報、コスト関数値、並びに予測画像データを、セレクタ27へ出力する。本実施形態においてイントラ予測部40により選択可能な予測モードの候補の数は、予測単位のブロックサイズに応じて異なる。例えば、上述した角度イントラ予測法が採用される場合には、ブロックサイズ別の予測モードの候補の数は、次の表1の通りとなる。即ち、ブロックサイズが4×4画素の場合、予測モードの候補PossibleIntraPredictionModesの数は17個である。このうち、DC予測に対応する予測モードを除く16個の予測モードは、参照画素から予測対象画素への16種類の予測方向の候補PossiblePredictionDirectionsにそれぞれ対応する。ブロックサイズが8×8画素の場合、予測モードの候補の数は34個である。このうち、DC予測に対応する予測モードを除く33個の予測モードは、参照画素から予測対象画素への33種類の予測方向の候補にそれぞれ対応する。ブロックサイズが16×16画素又は32×32画素の場合も、同様に、予測モードの候補は34個、予測方向の候補は33種類存在する。ブロックサイズが64×64画素の場合、予測モードの候補の数は3個である。このうち、DC予測に対応する予測モードを除く2つの予測モードは、参照画素から予測対象画素への2種類の予測方向の候補垂直方向及び水平方向にそれぞれ対応する画像符号化装置10は、ここで説明した一連の符号化処理を、スケーラブル符号化される画像の複数のレイヤの各々について繰り返す。最初に符号化されるレイヤは、ベースレイヤbaselayerと呼ばれる、最も粗い画像を表現するレイヤである。ベースレイヤの符号化ストリームは、他のレイヤの符号化ストリームを復号することなく、独立して復号され得る。ベースレイヤ以外のレイヤは、エンハンスメントレイヤenhancementlayerと呼ばれる、より精細な画像を表現するレイヤである。エンハンスメントレイヤの符号化ストリームは、符号化効率を高めるためにベースレイヤの符号化ストリームに含まれる情報を用いて符号化される。従って、エンハンスメントレイヤの画像を再現するためには、ベースレイヤ及びエンハンスメントレイヤの双方の符号化ストリームが復号されることになる。スケーラブル符号化において扱われるレイヤは、3つ以上であってもよい。その場合には、最下位のレイヤがベースレイヤ、残りの複数のレイヤがエンハンスメントレイヤである。より上位のエンハンスメントレイヤの符号化ストリームは、より下位のエンハンスメントレイヤ又はベースレイヤの符号化ストリームに含まれる情報を用いて符号化され及び復号され得る。本明細書では、依存関係を有する少なくとも2つのレイヤのうち、依存される側のレイヤを下位レイヤlowerlayer、依存する側のレイヤを上位レイヤupperlayerという。画像符号化装置10によるスケーラブル符号化に際しては、イントラ予測の予測モードを効率的に符号化するために、イントラ予測ブロックにおいて、下位レイヤの予測モードに基づく上位レイヤの予測モードの予測が行われる。図1に示したイントラ予測部40のモードバッファ44は、下位レイヤの予測モード情報を一時的に記憶するために設けられる。レイヤ間でイントラ予測モードの候補の数が等しい場合には、下位レイヤの予測単位に設定された予測モードと同じ予測モードが、上位レイヤの対応する予測単位にそのまま設定されてよい。しかし、例えば空間スケーラビリティ又はクロマフォーマットスケーラビリティが採用される場合には、互いに対応する2つの予測単位のブロックサイズが異なるケースが存在することから、レイヤ間でイントラ予測モードの候補の数が異なる状況が発生し得る。図2は、空間スケーラビリティの一例として、スケーラブル符号化される3つのレイヤL1、L2及びL3を示している。レイヤL1はベースレイヤであり、レイヤL2及びL3はエンハンスメントレイヤである。レイヤL2のレイヤL1に対する空間解像度の比は、2:1である。レイヤL3のレイヤL1に対する空間解像度の比は、4:1である。この場合、レイヤL2の予測単位B2のブロックサイズは、レイヤL1の対応する予測単位B1のブロックサイズの一辺において2倍である。レイヤL3の予測単位B3のブロックサイズは、レイヤL2の対応する予測単位B2のブロックサイズの2倍であり、レイヤL1の対応する予測単位B1のブロックサイズの4倍である。例えば、表1の例において、下位レイヤのブロックサイズが4×4画素であって、上位レイヤのブロックサイズが8×8画素、16×16画素又は32×32画素である場合には、下位レイヤの予測モードの候補の数は、上位レイヤの予測モードの候補の数よりも少ない。一方で、下位レイヤのブロックサイズが32×32画素であって、上位レイヤのブロックサイズが64×64画素である場合には、下位レイヤの予測モードの候補の数は、上位レイヤの予測モードの候補の数よりも多い。本実施形態に係る画像符号化装置10のイントラ予測部40は、そのような状況において、次項で詳しく説明するように、予測モードを拡張し又は集約することにより、下位レイヤの予測モードに基づいて上位レイヤの予測モードを予測する。なお、上位レイヤの予測単位に対応する下位レイヤの予測単位とは、例えば、上位レイヤの予測単位の所定の位置例えば、左上の画素に対応する画素を有する、下位レイヤの予測単位であってよい。このような定義により、下位レイヤの複数の予測単位を統合するような上位レイヤの予測単位が存在したとしても、上位レイヤの予測単位に対応する下位レイヤの予測単位を一意に決定することができる。また、本明細書では、イントラ予測部40において上述した角度イントラ予測法が用いられる例について主に説明する。しかしながら、本開示に係る技術は、かかる例に限定されず、スケーラブル符号化の際にレイヤ間でイントラ予測モードの候補の数が異なる状況において一般に適用可能である。[1-2.イントラ予測部の構成例]図3は、図1に示した画像符号化装置10のイントラ予測部40の詳細な構成の一例を示すブロック図である。図3を参照すると、イントラ予測部40は、モード設定部41、予測部42、モード判定部43、モードバッファ44及びパラメータ生成部45を有する。ベースレイヤのイントラ予測処理において、モード設定部41は、複数の予測モードの候補の各々を符号化単位内の1つ以上の予測単位に順次設定する。予測部42は、モード設定部41により設定される予測モードの候補に従い、フレームメモリ25から入力される参照画像データを用いて、各予測単位の予測画像を生成する。モード判定部43は、並び替えバッファ12から入力される原画像データと予測部42から入力される予測画像データとに基づいて、予測モードの各候補についてコスト関数値を算出する。そして、モード判定部43は、算出したコスト関数値に基づき、最適な符号化単位内の予測単位の配置と最適な予測モードとを判定する。モードバッファ44は、決定された最適な予測モードを表す予測モード情報を、上位レイヤでの処理のために記憶媒体を用いて一時的に記憶する。パラメータ生成部45は、モード判定部43により最適であると判定された予測単位の配置及び予測モードを表すパラメータを生成する。そして、モード判定部43は、パラメータ生成部45により生成されたパラメータを含むイントラ予測に関する情報、コスト関数値及び予測画像データをセレクタ27へ出力する。図4は、このようなイントラ予測において、角度イントラ予測法が用いられる場合に選択可能な予測方向の候補について説明するための説明図である。図4に示した画素P1は、予測対象画素である。画素P1が属するブロックの周囲の網掛けされた画素は、参照画素である。ブロックサイズが4×4画素である場合には、図中で実線太線及び細線の双方で示された、参照画素と予測対象画素とを結ぶ17種類の予測方向に対応する予測モードが、DC予測に加えて選択可能である。ブロックサイズが8×8画素、16×16画素又は32×32画素である場合には、図中で点線並びに実線太線及び細線の双方で示された33種類の予測方向に対応する予測モードが、DC予測及び平面予測に加えて選択可能である。ブロックサイズが64×64画素である場合には、図中で太線で示された2種類の予測方向に対応する予測モードが、DC予測に加えて選択可能である。図3に示したモード設定部41は、各予測単位のサイズに応じてこれら複数の予測モードの候補を各予測単位に設定する。なお、上述した角度イントラ予測法では、予測方向の角度の分解能が高く、例えば8×8画素の場合の隣り合う予測方向の間の角度の差は、180度/32=5.625度である。従って、予測部42は、図5に示すような1/8画素精度の参照画素値をまず計算し、計算した参照画素値を用いて、予測モードの各候補に従って予測画素値を計算する。エンハンスメントレイヤのイントラ予測処理は、主に予測方向の再利用、予測方向の拡張及び予測方向の集約の3種類に分類される。本実施形態において、予測方向の再利用は、下位レイヤの予測モードの候補の数が上位レイヤの予測モードの候補の数と等しい場合に行われ得る。予測方向の拡張は、下位レイヤの予測モードの候補の数が上位レイヤの予測モードの候補の数よりも少ない場合に行われ得る。予測方向の集約は、下位レイヤの予測モードの候補の数が上位レイヤの予測モードの候補の数よりも多い場合に行われ得る。なお、かかる例に限定されず、例えば、下位レイヤの予測モードの候補の数が上位レイヤの予測モードの候補の数よりも少ない場合に、予測方向の拡張ではなく予測方向の再利用が行われてもよい。1予測方向の再利用エンハンスメントレイヤのイントラ予測処理において、下位レイヤ及び上位レイヤの予測モードの候補の数が等しい場合には、モード設定部41は、モードバッファ44に記憶されている予測モード情報が示す予測モードを再利用する。即ち、この場合、モード設定部41は、上位レイヤの各予測単位に、下位レイヤの対応する予測単位に設定された予測モードと同じ予測モードを設定する。予測部42は、モード設定部41により設定された当該1つの予測モードに従って、各予測単位の予測画像を生成する。予測方向の再利用が行われる場合には、モード判定部43におけるコスト関数値に基づく最適な予測モードの判定は省略されるコスト関数値は算出され得る。モードバッファ44は、さらなる上位レイヤが存在する場合には、モード設定部41により設定された予測モードを表す予測モード情報を記憶する。2予測方向の拡張下位レイヤの予測モードの候補の数が上位レイヤの予測モードの候補の数よりも少ない場合には、モード設定部41は、上位レイヤの各予測単位に、下位レイヤの対応する予測単位に設定された予測モードに基づいて選択される予測モードの各候補を順次設定する。通常、空間解像度のみが異なる2つのレイヤの対応するブロックの間では、同じ位置の部分画像は互いに相関を有する。従って、下位レイヤのあるブロックにおいて最適な予測モードは、上位レイヤの対応するブロックにおいても最適である可能性が高い。しかし、上位レイヤの方が予測方向の角度の分解能が高い場合には、分解能の差に起因して、最適な予測モードに違いが生じる可能性がある。従って、この場合、予測モードを単純に再利用するのではなく、上位レイヤにおいて最適な予測モードをあらためて探索することにより、予測精度を向上させて符号化効率を高めることができる。予測モードの探索の範囲は、処理コストを削減するために、下位レイヤにおいて設定された予測方向の近傍のいくつかの予測方向に制限されてもよい。予測部42は、モード設定部41により設定される予測モードの各候補に従い、フレームメモリ25から入力される参照画像データを用いて、各予測単位の予測画像を生成する。モード判定部43は、原画像データと予測部42から入力される予測画像データとに基づいて、予測モードの各候補についてコスト関数値を算出する。そして、モード判定部43は、算出したコスト関数値に基づき、最適な予測モードを判定する。モードバッファ44は、さらなる上位レイヤが存在する場合には、モード判定部43により決定された最適な予測モードを表す予測モード情報を記憶する。パラメータ生成部45は、下位レイヤにおいて設定された予測モードとモード判定部43により決定された最適な予測モードとの間の予測方向の差に応じて符号化される、図6に例示されるようなパラメータP1を生成する。図6を参照すると、互いに対応する下位レイヤの予測単位B1及び上位レイヤの予測単位B2が示されている。一例として、予測単位B1のサイズは4×4画素、予測単位B2のサイズは8×8画素である。予測方向DLは、予測単位B1に設定された予測モードの予測方向である。予測単位B2に設定され得る予測モードの予測方向の候補は、予測方向DU0、DU1、DU2、DU3、DU4...を含む。隣り合う2つの予測方向の候補の間の角度の差は、θである。図6の右のテーブルに示したように、パラメータP1は、上記予測方向の差の絶対値が小さいほどより小さい符号番号で符号化される。例えば、予測単位B2に設定される最適な予測モードが予測方向DU0を表す予測モードであれば、角度の差はゼロであり、パラメータP1は符号番号0で符号化される。予測単位B2に設定される最適な予測モードが予測方向DU1又はDU2を表す予測モードであれば、角度の差はθ又は-θであり、パラメータP1は符号番号1又は2で符号化される。予測単位B2に設定される最適な予測モードが予測方向DU3又はDU4を表す予測モードであれば、角度の差は2θ又は-2θであり、パラメータP1は符号番号3又は4で符号化される。より小さい符号番号は、可逆符号化部16においてより短い符号語にマッピングされる。従って、パラメータP1に関し、このように予測方向の角度における差が小さいほどより小さい符号番号を用いることで、上位レイヤにおいてより発生頻度の高い予測モードをより短い符号語にマッピングさせ、符号化効率を高めることができる。図6の例では、正負のみが異なる予測方向の差のうち、下位レイヤから上位レイヤにかけて予測方向を時計回りに回転させる方に、より小さい符号番号が割り当てられている。このように、予測方向の差の絶対値が等しい2つの予測モードについては、予め定義されるいずれかの予測モードに、より小さい符号番号が割り当てられてよい。その代わりに、図7A及び図7Bに例示されるように、いずれの予測モードを選択した場合に上位レイヤの予測方向が特定の方向例えば、垂直方向又は水平方向などにより近づくかが動的に判定され、当該特定の方向により近づく方の予測方向に、より小さい符号番号が割り当てられてもよい。図7Aを参照すると、画像Im1の上位レイヤの予測単位に設定され得る予測モードの予測方向の候補DU0、DU1、DU2...が示されている。下位レイヤに設定された予測モードの予測方向は予測方向DLである。ここで、画像Im1のアスペクト比垂直/水平V/Hは1よりも小さい即ち、水平方向のサイズが垂直方向のサイズよりも大きい。このような横長の画像では、より水平方向に近い予測方向でイントラ予測を行う方が予測精度が高くなる傾向がある。そこで、この場合、予測方向の差の絶対値が等しい2つの予測モードについて、上位レイヤの予測方向が水平方向により近づく方に、より小さい符号番号が割り当てられることが望ましい。図7Aの例では、予測方向DU1の方が予測方向DU2よりも水平方向に近い。従って、図7Aの右のテーブルにおいて、予測方向DU1を表す予測モードについてパラメータP1は符号番号1で符号化され、予測方向DU2を表す予測モードについてパラメータP1は符号番号2で符号化される。一方、図7Bの例では、画像Im2のアスペクト比V/Hは1よりも大きい即ち、水平方向のサイズが垂直方向のサイズよりも小さい。そこで、この場合、予測方向の差の絶対値が等しい2つの予測モードについて、上位レイヤの予測方向が垂直方向により近づく方に、より小さい符号番号が割り当てられることが望ましい。従って、図7Bの右のテーブルにおいて、予測方向DU2を表す予測モードについてパラメータP1は符号番号1で符号化され、予測方向DU1を表す予測モードについてパラメータP1は符号番号2で符号化される。このようなパラメータP1についての角度差と符号番号とのマッピングは、符号化される画像のアスペクト比に応じて適応的に決定されてもよい。3予測方向の集約下位レイヤの予測モードの候補の数が上位レイヤの予測モードの候補の数よりも多い場合には、モード設定部41は、上位レイヤの各予測単位に、下位レイヤの対応する予測単位に設定された予測モードに基づいて選択される予測モードを設定する。上述したように、通常、空間解像度のみが異なる2つのレイヤのうち下位レイヤのある予測単位において最適な予測モードは、上位レイヤの対応する予測単位においても最適である可能性が高い。しかし、下位レイヤの予測モードの候補の数の方が多い場合には、下位レイヤと同じ予測方向を表す予測モードが上位レイヤにおいて選択可能でない可能性がある。従って、この場合、モード設定部41は、予測モードを単純に再利用するのではなく、上位レイヤにおいて最適な予測モードを下位レイヤにおいて設定された予測モードから予測する。本実施形態において、この場合に最適であると予測される予測モードは、下位レイヤにおいて設定された予測モードの予測方向に最も近い予測方向を表す、上位レイヤの予測モードである。下位レイヤの予測方向に最も近い予測方向を表す予測モードが上位レイヤについての予測モードの候補内に複数存在する場合には、最適な予測モードを一意に選択するためのいくつかの手法が考えられる。図8及び図9を参照すると、互いに対応する下位レイヤの予測単位B1及び上位レイヤの予測単位B2が示されている。一例として、予測単位B1のサイズは32×32画素、予測単位B2のサイズは64×64画素である。予測方向DLは、予測単位B1に設定された予測モードの予測方向である。予測単位B2に設定され得る予測モードの予測方向の候補は、予測方向DU1及びDU2を含む。図8の例では、予測方向DU1の方が、予測方向DU2よりも下位レイヤの予測方向DLにより近い。従って、モード設定部41は、予測方向DU1を表す予測モードを予測単位B2に設定し得る。一方、図9の例では、予測方向DU1及びDU2は、下位レイヤの予測方向DLから等距離にある。この場合、モード設定部41は、1つの手法として、平均値DC予測を表す予測モードを予測単位B2に設定し得る。モード設定部41は、最適な予測モードを一意に選択できない場合に、図9の例のように平均値予測を選択する代わりに、予め定義される条件に従って、上位レイヤの予測単位に設定すべき予測モードを選択してもよい。予め定義される条件とは、例えば、所定の回転方向時計回り又は反時計回りに予測方向を回転させる、という条件であってもよい。例えば、図9の例において、予測方向DLを時計回りに回転させて導かれる予測方向DU1が、予測単位B2に設定されてもよい。また、予め定義される条件とは、例えば、符号番号のより小さい予測方向を選択する、という条件であってもよい。これらのように、上位レイヤに設定すべき予測モードを選択するための条件を符号化側と復号側との間で合意しておくことにより、スケーラブル符号化される上位レイヤの画像データを、特別なパラメータを要することなく正しく復号することができる。予測部42は、モード設定部41により設定される予測モードに従い、フレームメモリ25から入力される参照画像データを用いて、各予測単位の予測画像を生成する。この場合、モード判定部43におけるコスト関数値に基づく最適な予測モードの判定は省略されるコスト関数値は算出され得る。モードバッファ44は、さらなる上位レイヤが存在する場合には、モード設定部41により設定された予測モードを表す予測モード情報を記憶する。なお、最適な予測モードを一意に選択するための他の手法として、予測モードの集約の際にも最適な予測モードの探索が行われてよい。かかる変形例において、モード設定部41は、下位レイヤの予測方向に最も近い予測方向を表す予測モードが上位レイヤについての予測モードの候補内に複数存在する場合に、上位レイヤの各予測単位に当該複数の通常は2つの予測モードの候補の各々を順次設定する。予測部42は、モード設定部41により設定される予測モードの各候補に従い、フレームメモリ25から入力される参照画像データを用いて、各予測単位の予測画像を生成する。モード判定部43は、原画像データと予測部42から入力される予測画像データとに基づいて、予測モードの各候補についてコスト関数値を算出する。そして、モード判定部43は、算出したコスト関数値に基づき、最適な予測モードを判定する。モードバッファ44は、さらなる上位レイヤが存在する場合には、モード判定部43により決定された最適な予測モードを表す予測モード情報を記憶する。パラメータ生成部45は、モード判定部43により決定された最適な予測モードを特定する、図10に例示されるようなパラメータP2を生成し得る。図10の例において、予測方向DLは、下位レイヤの予測単位B1に設定された予測モードの予測方向である。予測単位B2に設定され得る予測モードの予測方向の候補は、予測方向DUa及びDUbを含み、予測方向DLを含まない。予測方向DUa及びDUbは、下位レイヤの予測方向DLから等距離にある。この場合、パラメータ生成部45は、モード判定部43により決定された最適な予測モードを表す符号番号0又は1で符号化される1ビットのパラメータP2を生成し得る。予測方向の拡張及び集約の双方において、パラメータ生成部45により生成されるパラメータは、それぞれイントラ予測に関する情報の1つとして可逆符号化部16により符号化され、符号化ストリームのヘッダ領域内で復号側へ伝送され得る。4MostProbableModeモード設定部41は、予測モード情報を符号化することによる符号量の増加を抑制するために、参照ブロックに設定された予測モード予測方向から、予測対象ブロックにとって最適な予測モード予測方向を推定してもよい。この場合、推定される予測モード以下、推定予測モードというとコスト関数値を用いて選択される最適な予測モードとが等しいときは、予測モードを推定可能であることを示す情報のみが予測モード情報として符号化され得る。予測モードを推定可能であることを示す情報とは、例えば、H.264/AVCにおけるMostProbableModeに相当する。H.264/AVCでは、MostProbableModeの決定において、予測対象ブロックである予測単位の上の予測単位及び左の予測単位が参照ブロックとして使用される。MostProbableModeによって推定される推定予測モードのモード番号をMc、左の参照ブロック及び上の参照ブロックの予測モードのモード番号をそれぞれMa及びMbとすると、H.264/AVCにおける推定予測モードのモード番号Mcは次のように決定される:Mc=minMa,Mbこれに対し、本実施形態では、モード設定部41は、例えば、上位レイヤの予測単位に対応する下位レイヤの予測単位をもMostProbableModeの決定において参照することができる。但し、上位レイヤの予測単位と下位レイヤの参照ブロックである予測単位との間でブロックサイズが異なる場合には、下位レイヤの予測単位の予測モードのモード番号をそのまま利用することは適切でない。そこで、モード設定部41は、上述した予測モードの拡張及び集約の考え方に従って下位レイヤの予測単位の予測モードを上位レイヤの予測モードの候補内の予測モードに変換した上で、MostProbableModeを決定する。例えば、図11に示したように、下位レイヤの予測単位の予測モードのモード番号Mlが上位レイヤの予測モードのモード番号Muに変換されたものとする。モード設定部41は、上位レイヤの予測単位の推定予測モードのモード番号Mcを、左及び上の参照ブロックの予測モードのモード番号Ma及びMb並びに下位レイヤの予測単位の変換後の予測モードのモード番号Muを用いて、次のように決定し得る:Mc=minMa,Mb,Muなお、この式の代わりに他の式が用いられてもよい。MostProbableModeによって推定される推定予測モードが最適な予測モードである場合には、パラメータ生成部45により予測モードを推定可能であることを示すパラメータが生成され、生成されたパラメータが可逆符号化部16により符号化され得る。このように、上述した予測モードの拡張及び集約の考え方を応用して下位レイヤの予測モードをもMostProbableModeの決定に際して参照することで、レイヤ間の画像の相関を利用した高い精度での予測モードの推定が可能となる。<2.一実施形態に係る符号化時の処理の流れ>次に、図12~図14Bを用いて、符号化時の処理の流れを説明する。図12は、図3に例示した構成を有するイントラ予測部40によるイントラ予測処理の流れの一例を示すフローチャートである。図13は、予測モード拡張処理の詳細な流れの一例を示すフローチャートである。図14A及び図14Bは、予測モード集約処理の詳細な流れの第1の例及び第2の例をそれぞれ示すフローチャートである。図12を参照すると、まず、イントラ予測部40は、ベースレイヤのイントラ予測処理を行うステップS100。その結果、各符号化単位内の予測単位の配置が決定され、各予測単位に下位レイヤにおいて最適な予測モードが設定される。モードバッファ44は、各予測単位の最適な予測モードを表す予測モード情報をバッファリングする。ステップS110~S160の処理は、エンハンスメントレイヤのイントラ予測処理である。これら処理のうちステップS110~S150の処理は、各エンハンスメントレイヤの各ブロック各予測単位について繰り返される。なお、以下の説明において、上位レイヤは予測対象のレイヤであり、下位レイヤは予測対象のレイヤの下位のレイヤである。まず、モード設定部41は、上位レイヤの注目PUの候補予測モード数NU及び下位レイヤの対応するPUの候補予測モード数NLを各PUのブロックサイズから識別し、これら候補予測モード数NU及びNLを比較するステップS110。例えば、NL=NUである場合には、処理はステップS120へ進むステップS112。NL<NUである場合には、処理はステップS130へ進むステップS114。NL>NUである場合には、処理はステップS140へ進む。ステップS120において、モード設定部41は、下位レイヤの対応するPUに設定された予測モードと同じ予測モードを注目PUに設定する即ち、予測モードが再利用される。そして、予測部42は、設定された予測モードに従って、注目PUの予測画像を生成するステップS120。一方、ステップS130では、図13に例示する予測モード拡張処理が行われる。ステップS140では、図14A及び図14Bに例示する予測モード集約処理が行われる。図13の予測モード拡張処理において、ステップS132及びS133の処理は、上位レイヤの予測モードの各候補について繰り返されるステップS131。まず、モード設定部41により注目PUに設定される予測モードの候補に従って、予測部42により注目PUの予測画像が生成されるステップS132。そして、モード判定部43により、予測画像データ及び原画像データを用いて、コスト関数値が計算されるステップS133。ループが終了すると、モード判定部43は、複数の予測モードの候補について算出されたコスト関数値を比較することにより、最適な予測モードを選択するステップS134。そして、パラメータ生成部45は、選択された最適な予測モードを特定するための、レイヤ間の予測方向の差に応じたパラメータP1を生成するステップS135。図14Aの予測モード集約処理の第1の例において、まず、モード設定部41は、下位レイヤの対応するPUの予測方向に最も近い予測方向が上位レイヤの予測方向の候補内に複数存在するかを判定するステップS141。ここで、最も近い予測方向が複数存在する場合には、モード設定部41は、平均値DC予測モード、又は予め定義される条件に従って選択される予測モードを、注目PUに設定するステップS142。一方、最も近い予測方向が1つのみ存在する場合には、モード設定部41は、当該1つの予測方向を表す予測モードを注目PUに設定するステップS143。そして、予測部42は、設定された予測モードに従って、注目PUの予測画像を生成するステップS144。図14Bの予測モード集約処理の第2の例において、まず、モード設定部41は、下位レイヤの対応するPUの予測方向に最も近い予測方向が上位レイヤの予測方向の候補内に複数存在するかを判定するステップS141。最も近い予測方向が1つのみ存在する場合に行われる処理は、図14Aの第1の例と同様であるステップS143、S144。一方、最も近い予測方向が複数存在する場合には、それら複数の予測方向の各々について、ステップS146及びS147の処理が繰り返されるステップS145。まず、各予測方向を表す予測モードの候補に従って、予測部42により注目PUの予測画像が生成されるステップS146。そして、モード判定部43により、予測画像データ及び原画像データを用いて、コスト関数値が計算されるステップS147。ループが終了すると、モード判定部43は、複数の予測モードの候補について算出されたコスト関数値を比較することにより、最適な予測モードを選択するステップS148。そして、パラメータ生成部45は、選択された最適な予測モードを特定するためのパラメータP2を生成するステップS149。図12に戻り、イントラ予測部40によるエンハンスメントレイヤのイントラ予測処理の流れの説明を継続する。ステップS120、S130又はS140において注目PUに予測モードが設定され、予測画像が生成された後、予測対象のレイヤ内に未処理のPUが残っている場合には、処理はステップS110に戻るステップS150。一方、未処理のPUが残っていない場合には、さらに残りのレイヤより上位のレイヤが存在するかが判定されるステップS160、ここで、残りのレイヤが存在する場合には、それまでの予測対象のレイヤを下位レイヤ、次のレイヤを上位レイヤとして、ステップS110以降の処理が繰り返される。予測モード情報は、モードバッファ44によりバッファリングされる。残りのレイヤが存在しない場合には、図12のイントラ予測処理は終了する。なお、ここで生成された予測画像データ及びパラメータP1、P2を含み得るインター予測に関する情報は、スイッチ27を介して、モード判定部43から減算部13及び可逆符号化部16へそれぞれ出力され得る。<3.一実施形態に係る画像復号装置の構成例>本節では、図15及び図16を用いて、本発明の一実施形態に係る画像復号装置の構成例について説明する。[3-1.全体的な構成例]図15は、一実施形態に係る画像復号装置60の構成の一例を示すブロック図である。図15を参照すると、画像復号装置60は、蓄積バッファ61、可逆復号部62、逆量子化部63、逆直交変換部64、加算部65、デブロックフィルタ66、並び替えバッファ67、D/ADigitaltoAnalogue変換部68、フレームメモリ69、セレクタ70及び71、動き補償部80、並びにイントラ予測部90を備える。蓄積バッファ61は、伝送路を介して入力される符号化ストリームを記憶媒体を用いて一時的に蓄積する。可逆復号部62は、蓄積バッファ61から入力される符号化ストリームを、符号化の際に使用された符号化方式に従って復号する。また、可逆復号部62は、符号化ストリームのヘッダ領域に多重化されている情報を復号する。符号化ストリームのヘッダ領域に多重化されている情報とは、例えば、上述したインター予測に関する情報及びイントラ予測に関する情報を含み得る。可逆復号部62は、インター予測に関する情報を動き補償部80へ出力する。また、可逆復号部62は、イントラ予測に関する情報をイントラ予測部90へ出力する。逆量子化部63は、可逆復号部62による復号後の量子化データを逆量子化する。逆直交変換部64は、符号化の際に使用された直交変換方式に従い、逆量子化部63から入力される変換係数データについて逆直交変換を行うことにより、予測誤差データを生成する。そして、逆直交変換部64は、生成した予測誤差データを加算部65へ出力する。加算部65は、逆直交変換部64から入力される予測誤差データと、セレクタ71から入力される予測画像データとを加算することにより、復号画像データを生成する。そして、加算部65は、生成した復号画像データをデブロックフィルタ66及びフレームメモリ69へ出力する。デブロックフィルタ66は、加算部65から入力される復号画像データをフィルタリングすることによりブロック歪みを除去し、フィルタリング後の復号画像データを並び替えバッファ67及びフレームメモリ69へ出力する。並び替えバッファ67は、デブロックフィルタ66から入力される画像を並び替えることにより、時系列の一連の画像データを生成する。そして、並び替えバッファ67は、生成した画像データをD/A変換部68へ出力する。D/A変換部68は、並び替えバッファ67から入力されるデジタル形式の画像データをアナログ形式の画像信号に変換する。そして、D/A変換部68は、例えば、画像復号装置60と接続されるディスプレイ図示せずにアナログ画像信号を出力することにより、画像を表示させる。フレームメモリ69は、加算部65から入力されるフィルタリング前の復号画像データ、及びデブロックフィルタ66から入力されるフィルタリング後の復号画像データを記憶媒体を用いて記憶する。セレクタ70は、可逆復号部62により取得されるモード情報に応じて、画像内のブロックごとに、フレームメモリ69からの画像データの出力先を動き補償部80とイントラ予測部90との間で切り替える。例えば、セレクタ70は、インター予測モードが指定された場合には、フレームメモリ69から供給されるフィルタリング後の復号画像データを参照画像データとして動き補償部80へ出力する。また、セレクタ70は、イントラ予測モードが指定された場合には、フレームメモリ69から供給されるフィルタリング前の復号画像データを参照画像データとしてイントラ予測部90へ出力する。セレクタ71は、可逆復号部62により取得されるモード情報に応じて、加算部65へ供給すべき予測画像データの出力元を動き補償部80とイントラ予測部90との間で切り替える。例えば、セレクタ71は、インター予測モードが指定された場合には、動き補償部80から出力される予測画像データを加算部65へ供給する。また、セレクタ71は、イントラ予測モードが指定された場合には、イントラ予測部90から出力される予測画像データを加算部65へ供給する。動き補償部80は、可逆復号部62から入力されるインター予測に関する情報とフレームメモリ69からの参照画像データとに基づいて動き補償処理を行い、予測画像データを生成する。そして、動き補償部80は、生成した予測画像データをセレクタ71へ出力する。イントラ予測部90は、可逆復号部62から入力されるイントラ予測に関する情報とフレームメモリ69からの参照画像データとに基づいてイントラ予測処理を行い、予測画像データを生成する。イントラ予測部90により選択可能な予測モードの候補の数は、予測単位のブロックサイズに応じて異なる。例えば、上述した角度イントラ予測法が採用される場合には、ブロックサイズ別の予測モードの候補の数は、上述した表1の通りとなる。そして、イントラ予測部90は、生成した予測画像データをセレクタ71へ出力する。このようなイントラ予測部90によるイントラ予測処理について、後により詳細に説明する。画像復号装置60は、ここで説明した一連の復号処理を、スケーラブル符号化された画像の複数のレイヤの各々について繰り返す。最初に復号されるレイヤは、ベースレイヤである。ベースレイヤが復号された後、1つ以上のエンハンスメントレイヤが復号される。エンハンスメントレイヤの復号に際しては、ベースレイヤ又は他のエンハンスメントレイヤである下位レイヤを復号することにより得られた情報が用いられる。画像復号装置60によるスケーラブル復号に際しては、予測単位において、下位レイヤの予測モードに基づく上位レイヤの予測モードの予測が行われる。ここでの予測モードの予測とは、上で詳しく説明した予測モードの再利用、予測モードの拡張及び予測モードの集約を含み得る。図15に示したイントラ予測部90のモードバッファ93は、予測モードの予測の際の下位レイヤの予測モード情報を一時的に記憶するために設けられる。[3-2.イントラ予測部の構成例]図16は、図15に示した画像復号装置60のイントラ予測部90の詳細な構成の一例を示すブロック図である。図16を参照すると、イントラ予測部90は、パラメータ取得部91、モード設定部92、モードバッファ93及び予測部94を有する。ベースレイヤのイントラ予測処理において、パラメータ取得部91は、可逆復号部62により復号されるイントラ予測に関する情報を取得する。ベースレイヤについてのイントラ予測に関する情報は、例えば、各符号化単位内の予測単位の配置を特定する情報と各予測単位の予測モード情報とを含み得る。モード設定部92は、パラメータ取得部91により取得される情報に基づいて、各符号化単位内に予測単位を配置し、さらに各予測単位に予測モードを設定する。モードバッファ93は、各予測単位に設定された予測モードを示す予測モード情報を一時的に記憶する。予測部94は、モード設定部92により設定される予測モードに従い、フレームメモリ69から入力される参照画像データを用いて、各予測単位の予測画像を生成する。そして、予測部94は、予測画像データを加算部65へ出力する。エンハンスメントレイヤのイントラ予測処理は、主に予測方向の再利用、予測方向の拡張及び予測方向の集約の3種類に分類される。1予測方向の再利用エンハンスメントレイヤのイントラ予測処理において、下位レイヤ及び上位レイヤの予測モードの候補の数が等しい場合には、追加的なパラメータは取得されない。モード設定部92は、モードバッファ93に記憶されている予測モード情報が示す予測モードを再利用する。即ち、この場合、モード設定部92は、上位レイヤの各予測単位に、下位レイヤの対応する予測単位に設定された予測モードと同じ予測モードを設定する。予測部94は、モード設定部92により設定された予測モードに従って、各予測単位の予測画像を生成する。モードバッファ93は、さらなる上位レイヤが存在する場合には、モード設定部92により設定された予測モードを表す予測モード情報を記憶する。2予測方向の拡張下位レイヤの予測モードの候補の数が上位レイヤの予測モードの候補の数よりも少ない場合には、パラメータ取得部91は、上位レイヤの予測単位と対応する下位レイヤの予測単位との間の予測方向の差に応じて符号化される上述したパラメータP1を取得する。パラメータP1は、予測方向の差の絶対値が小さいほどより小さい符号番号で符号化されたパラメータである。例えば、パラメータP1に相当する符号語が最も短い符号語である場合には、図15に示した可逆復号部62により、当該符号語が符号番号0ゼロにマッピングされる。そして、図6、図7A又は図7Bに例示した符号番号テーブルに従って、符号番号0は予測方向の差がゼロであることを示すと解釈される。この場合、モード設定部92は、下位レイヤの対応する予測単位に設定された予測モードと同じ予測方向を表す予測モードを、上位レイヤの予測単位に設定し得る。一方、パラメータP1の符号番号が1以上である場合には、モード設定部92は、当該符号番号に対応する予測方向の差に従って選択される予測方向を表す予測モードを、上位レイヤの予測単位に設定し得る。その際、予測方向の差の正負は、図7A及び図7Bを用いて説明したように、復号される画像のアスペクト比に応じて解釈されてもよい。予測部94は、モード設定部92により設定された予測モードに従って、各予測単位の予測画像を生成する。モードバッファ93は、さらなる上位レイヤが存在する場合には、モード設定部92により設定された予測モードを表す予測モード情報を記憶する。3予測方向の集約下位レイヤの予測モードの候補の数が上位レイヤの予測モードの候補の数よりも多い場合には、パラメータ取得部91は、追加的なパラメータP2を取得してもよく、又は追加的なパラメータを取得しなくてもよい。追加的なパラメータが取得されない場合には、モード設定部92は、上位レイヤの予測単位に、下位レイヤの対応する予測単位に設定された予測モードのみに基づいて選択される予測モードを設定する。典型的には、上位レイヤの予測単位に設定される予測モードは、下位レイヤの対応する予測単位の予測方向に最も近い予測方向を表す予測モードである。下位レイヤの予測方向に最も近い予測方向を表す予測モードが複数存在する場合には、モード設定部92は、平均値予測を表す予測モードを上位レイヤの予測単位に設定してもよい。このような手法は、例えば、上位レイヤのブロックサイズが64×64画素である場合に採用され得る。その代わりに、モード設定部92は、予め定義される条件に従って、上位レイヤの予測単位に設定される予測モードを選択してもよい。予め定義される条件とは、例えば、所定の回転方向に予測方向を回転させるという条件、又は符号番号のより小さい方を選択するという条件であってよい。一方、予測モードの選択のための上述したパラメータP2が符号化されている場合には、パラメータ取得部91は、当該パラメータP2を取得する。この場合、モード設定部92は、下位レイヤの対応する予測単位に設定された予測モードの予測方向に最も近い予測方向を表す2つの予測モードのうち、パラメータP2により指定される予測モードを、予測単位に設定する。いずれの場合にも、予測方向拡張処理と同様、予測部94は、モード設定部92により設定された予測モードに従って、各予測単位の予測画像を生成する。モードバッファ93は、さらなる上位レイヤが存在する場合には、モード設定部92により設定された予測モードを表す予測モード情報を記憶する。4MostProbableModeある予測単位について、予測モードを推定可能であることを示す情報がイントラ予測に関する情報に含まれる場合には、モード設定部92は、上述したMostProbableModeによって推定される予測モードを、当該予測単位に設定してもよい。本実施形態における予測モードの推定に際しては、左及び上の参照ブロックのみならず、下位レイヤの対応する予測単位に設定された予測モードに基づいて、MostProbableModeが決定され得る。但し、モード設定部92は、上述した予測モードの拡張及び集約の考え方に従って下位レイヤの予測単位の予測モードを上位レイヤの予測モードの候補内の予測モードに変換した上で、MostProbableModeを決定する。例えば、ある予測単位の推定予測モードのモード番号Mcは、左及び上の参照ブロックの予測モードのモード番号Ma及びMb並びに下位レイヤの予測単位の変換後の予測モードのモード番号Muを用いて、次のように決定され得る:Mc=minMa,Mb,Muなお、この式の代わりに他の式が用いられてもよい。<4.一実施形態に係る復号時の処理の流れ>次に、図17を用いて、復号時の処理の流れを説明する。図17は、図16に例示した構成を有するイントラ予測部90によるイントラ予測処理の流れの一例を示すフローチャートである。図17を参照すると、まず、イントラ予測部90は、ベースレイヤのイントラ予測処理を行うステップS200。その結果、ベースレイヤの予測画像が生成されると共に、各予測単位に設定された予測モードを表す予測モード情報がモードバッファ93によりバッファリングされる。ステップS210~S270の処理は、エンハンスメントレイヤのイントラ予測処理である。これら処理のうちステップS210~S260の処理は、各エンハンスメントレイヤの各ブロック各予測単位について繰り返される。なお、以下の説明において、上位レイヤは予測対象のレイヤであり、下位レイヤは予測対象のレイヤの下位のレイヤである。まず、モード設定部92は、上位レイヤの注目PUの候補予測モード数NU及び下位レイヤの対応するPUの候補予測モード数NLを各PUのブロックサイズから識別し、これら候補予測モード数NU及びNLを比較するステップS210。例えば、NL=NUである場合には、処理はステップS220へ進むステップS212。NL<NUである場合には、処理はステップS230へ進むステップS214。NL>NUである場合には、処理はステップS240へ進む。ステップS220では、モード設定部92は、下位レイヤの対応するPUに設定された予測モードと同じ予測モードを注目PUに設定する即ち、予測モードが再利用されるステップS220。ステップS230では、モード設定部92は、下位レイヤの対応するPUに設定された予測モード及びパラメータ取得部91により取得されるパラメータP1に基づいて選択される予測モードを、注目PUに設定するステップS230。ステップS240では、モード設定部92は、下位レイヤの対応するPUに設定された予測モード、及び、パラメータP2が符号化されている場合には当該パラメータP2、に基づいて選択される予測モードを、注目PUに設定するステップS240。そして、予測部94は、モード設定部92により設定された予測モードに従い、フレームメモリ69から入力される参照画像データを用いて、注目PUの予測画像を生成するステップS250。注目PUの予測画像が生成された後、予測対象のレイヤ内に未処理のPU残っている場合には、処理はステップS210に戻るステップS260。一方、未処理のPUが残っていない場合には、さらに残りのレイヤより上位のレイヤが存在するかが判定されるステップS270、ここで、残りのレイヤが存在する場合には、それまでの予測対象のレイヤを下位レイヤ、次のレイヤを上位レイヤとして、ステップS210以降の処理が繰り返される。予測モード情報は、モードバッファ93によりバッファリングされる。残りのレイヤが存在しない場合には、図17のイントラ予測処理は終了する。なお、ここで生成された予測画像データは、スイッチ71を介して加算部65へ出力される。<5.応用例>上述した実施形態に係る画像符号化装置10及び画像復号装置60は、衛星放送、ケーブルTVなどの有線放送、インターネット上での配信、及びセルラー通信による端末への配信などにおける送信機若しくは受信機、光ディスク、磁気ディスク及びフラッシュメモリなどの媒体に画像を記録する記録装置、又は、これら記憶媒体から画像を再生する再生装置などの様々な電子機器に応用され得る。以下、4つの応用例について説明する。[5-1.第1の応用例]図18は、上述した実施形態を適用したテレビジョン装置の概略的な構成の一例を示している。テレビジョン装置900は、アンテナ901、チューナ902、デマルチプレクサ903、デコーダ904、映像信号処理部905、表示部906、音声信号処理部907、スピーカ908、外部インタフェース909、制御部910、ユーザインタフェース911、及びバス912を備える。チューナ902は、アンテナ901を介して受信される放送信号から所望のチャンネルの信号を抽出し、抽出した信号を復調する。そして、チューナ902は、復調により得られた符号化ビットストリームをデマルチプレクサ903へ出力する。即ち、チューナ902は、画像が符号化されている符号化ストリームを受信する、テレビジョン装置900における伝送手段としての役割を有する。デマルチプレクサ903は、符号化ビットストリームから視聴対象の番組の映像ストリーム及び音声ストリームを分離し、分離した各ストリームをデコーダ904へ出力する。また、デマルチプレクサ903は、符号化ビットストリームからEPGElectronicProgramGuideなどの補助的なデータを抽出し、抽出したデータを制御部910に供給する。なお、デマルチプレクサ903は、符号化ビットストリームがスクランブルされている場合には、デスクランブルを行ってもよい。デコーダ904は、デマルチプレクサ903から入力される映像ストリーム及び音声ストリームを復号する。そして、デコーダ904は、復号処理により生成される映像データを映像信号処理部905へ出力する。また、デコーダ904は、復号処理により生成される音声データを音声信号処理部907へ出力する。映像信号処理部905は、デコーダ904から入力される映像データを再生し、表示部906に映像を表示させる。また、映像信号処理部905は、ネットワークを介して供給されるアプリケーション画面を表示部906に表示させてもよい。また、映像信号処理部905は、映像データについて、設定に応じて、例えばノイズ除去などの追加的な処理を行ってもよい。さらに、映像信号処理部905は、例えばメニュー、ボタン又はカーソルなどのGUIGraphicalUserInterfaceの画像を生成し、生成した画像を出力画像に重畳してもよい。表示部906は、映像信号処理部905から供給される駆動信号により駆動され、表示デバイス例えば、液晶ディスプレイ、プラズマディスプレイ又はOLEDなどの映像面上に映像又は画像を表示する。音声信号処理部907は、デコーダ904から入力される音声データについてD/A変換及び増幅などの再生処理を行い、スピーカ908から音声を出力させる。また、音声信号処理部907は、音声データについてノイズ除去などの追加的な処理を行ってもよい。外部インタフェース909は、テレビジョン装置900と外部機器又はネットワークとを接続するためのインタフェースである。例えば、外部インタフェース909を介して受信される映像ストリーム又は音声ストリームが、デコーダ904により復号されてもよい。即ち、外部インタフェース909もまた、画像が符号化されている符号化ストリームを受信する、テレビジョン装置900における伝送手段としての役割を有する。制御部910は、CPUCentralProcessingUnitなどのプロセッサ、並びにRAMRandomAccessMemory及びROMReadOnlyMemoryなどのメモリを有する。メモリは、CPUにより実行されるプログラム、プログラムデータ、EPGデータ、及びネットワークを介して取得されるデータなどを記憶する。メモリにより記憶されるプログラムは、例えば、テレビジョン装置900の起動時にCPUにより読み込まれ、実行される。CPUは、プログラムを実行することにより、例えばユーザインタフェース911から入力される操作信号に応じて、テレビジョン装置900の動作を制御する。ユーザインタフェース911は、制御部910と接続される。ユーザインタフェース911は、例えば、ユーザがテレビジョン装置900を操作するためのボタン及びスイッチ、並びに遠隔制御信号の受信部などを有する。ユーザインタフェース911は、これら構成要素を介してユーザによる操作を検出して操作信号を生成し、生成した操作信号を制御部910へ出力する。バス912は、チューナ902、デマルチプレクサ903、デコーダ904、映像信号処理部905、音声信号処理部907、外部インタフェース909及び制御部910を相互に接続する。このように構成されたテレビジョン装置900において、デコーダ904は、上述した実施形態に係る画像復号装置60の機能を有する。それにより、テレビジョン装置900での画像のスケーラブル復号に際して、より効率的に符号化されたエンハンスメントレイヤの画像データを復号することができる。[5-2.第2の応用例]図19は、上述した実施形態を適用した携帯電話機の概略的な構成の一例を示している。携帯電話機920は、アンテナ921、通信部922、音声コーデック923、スピーカ924、マイクロホン925、カメラ部926、画像処理部927、多重分離部928、記録再生部929、表示部930、制御部931、操作部932、及びバス933を備える。アンテナ921は、通信部922に接続される。スピーカ924及びマイクロホン925は、音声コーデック923に接続される。操作部932は、制御部931に接続される。バス933は、通信部922、音声コーデック923、カメラ部926、画像処理部927、多重分離部928、記録再生部929、表示部930、及び制御部931を相互に接続する。携帯電話機920は、音声通話モード、データ通信モード、撮影モード及びテレビ電話モードを含む様々な動作モードで、音声信号の送受信、電子メール又は画像データの送受信、画像の撮像、及びデータの記録などの動作を行う。音声通話モードにおいて、マイクロホン925により生成されるアナログ音声信号は、音声コーデック923に供給される。音声コーデック923は、アナログ音声信号を音声データへ変換し、変換された音声データをA/D変換し圧縮する。そして、音声コーデック923は、圧縮後の音声データを通信部922へ出力する。通信部922は、音声データを符号化及び変調し、送信信号を生成する。そして、通信部922は、生成した送信信号をアンテナ921を介して基地局図示せずへ送信する。また、通信部922は、アンテナ921を介して受信される無線信号を増幅し及び周波数変換し、受信信号を取得する。そして、通信部922は、受信信号を復調及び復号して音声データを生成し、生成した音声データを音声コーデック923へ出力する。音声コーデック923は、音声データを伸張し及びD/A変換し、アナログ音声信号を生成する。そして、音声コーデック923は、生成した音声信号をスピーカ924に供給して音声を出力させる。また、データ通信モードにおいて、例えば、制御部931は、操作部932を介するユーザによる操作に応じて、電子メールを構成する文字データを生成する。また、制御部931は、文字を表示部930に表示させる。また、制御部931は、操作部932を介するユーザからの送信指示に応じて電子メールデータを生成し、生成した電子メールデータを通信部922へ出力する。通信部922は、電子メールデータを符号化及び変調し、送信信号を生成する。そして、通信部922は、生成した送信信号をアンテナ921を介して基地局図示せずへ送信する。また、通信部922は、アンテナ921を介して受信される無線信号を増幅し及び周波数変換し、受信信号を取得する。そして、通信部922は、受信信号を復調及び復号して電子メールデータを復元し、復元した電子メールデータを制御部931へ出力する。制御部931は、表示部930に電子メールの内容を表示させると共に、電子メールデータを記録再生部929の記憶媒体に記憶させる。記録再生部929は、読み書き可能な任意の記憶媒体を有する。例えば、記憶媒体は、RAM又はフラッシュメモリなどの内蔵型の記憶媒体であってもよく、ハードディスク、磁気ディスク、光磁気ディスク、光ディスク、USBメモリ、又はメモリカードなどの外部装着型の記憶媒体であってもよい。また、撮影モードにおいて、例えば、カメラ部926は、被写体を撮像して画像データを生成し、生成した画像データを画像処理部927へ出力する。画像処理部927は、カメラ部926から入力される画像データを符号化し、符号化ストリームを記録再生部929の記憶媒体に記憶させる。また、テレビ電話モードにおいて、例えば、多重分離部928は、画像処理部927により符号化された映像ストリームと、音声コーデック923から入力される音声ストリームとを多重化し、多重化したストリームを通信部922へ出力する。通信部922は、ストリームを符号化及び変調し、送信信号を生成する。そして、通信部922は、生成した送信信号をアンテナ921を介して基地局図示せずへ送信する。また、通信部922は、アンテナ921を介して受信される無線信号を増幅し及び周波数変換し、受信信号を取得する。これら送信信号及び受信信号には、符号化ビットストリームが含まれ得る。そして、通信部922は、受信信号を復調及び復号してストリームを復元し、復元したストリームを多重分離部928へ出力する。多重分離部928は、入力されるストリームから映像ストリーム及び音声ストリームを分離し、映像ストリームを画像処理部927、音声ストリームを音声コーデック923へ出力する。画像処理部927は、映像ストリームを復号し、映像データを生成する。映像データは、表示部930に供給され、表示部930により一連の画像が表示される。音声コーデック923は、音声ストリームを伸張し及びD/A変換し、アナログ音声信号を生成する。そして、音声コーデック923は、生成した音声信号をスピーカ924に供給して音声を出力させる。このように構成された携帯電話機920において、画像処理部927は、上述した実施形態に係る画像符号化装置10及び画像復号装置60の機能を有する。それにより、携帯電話機920での画像のスケーラブル符号化及び復号に際して、より効率的にエンハンスメントレイヤの画像データを符号化し及びそうした画像データを復号することができる。[5-3.第3の応用例]図20は、上述した実施形態を適用した記録再生装置の概略的な構成の一例を示している。記録再生装置940は、例えば、受信した放送番組の音声データ及び映像データを符号化して記録媒体に記録する。また、記録再生装置940は、例えば、他の装置から取得される音声データ及び映像データを符号化して記録媒体に記録してもよい。また、記録再生装置940は、例えば、ユーザの指示に応じて、記録媒体に記録されているデータをモニタ及びスピーカ上で再生する。このとき、記録再生装置940は、音声データ及び映像データを復号する。記録再生装置940は、チューナ941、外部インタフェース942、エンコーダ943、HDDHardDiskDrive944、ディスクドライブ945、セレクタ946、デコーダ947、OSDOnScreenDisplay948、制御部949、及びユーザインタフェース950を備える。チューナ941は、アンテナ図示せずを介して受信される放送信号から所望のチャンネルの信号を抽出し、抽出した信号を復調する。そして、チューナ941は、復調により得られた符号化ビットストリームをセレクタ946へ出力する。即ち、チューナ941は、記録再生装置940における伝送手段としての役割を有する。外部インタフェース942は、記録再生装置940と外部機器又はネットワークとを接続するためのインタフェースである。外部インタフェース942は、例えば、IEEE1394インタフェース、ネットワークインタフェース、USBインタフェース、又はフラッシュメモリインタフェースなどであってよい。例えば、外部インタフェース942を介して受信される映像データ及び音声データは、エンコーダ943へ入力される。即ち、外部インタフェース942は、記録再生装置940における伝送手段としての役割を有する。エンコーダ943は、外部インタフェース942から入力される映像データ及び音声データが符号化されていない場合に、映像データ及び音声データを符号化する。そして、エンコーダ943は、符号化ビットストリームをセレクタ946へ出力する。HDD944は、映像及び音声などのコンテンツデータが圧縮された符号化ビットストリーム、各種プログラム及びその他のデータを内部のハードディスクに記録する。また、HDD944は、映像及び音声の再生時に、これらデータをハードディスクから読み出す。ディスクドライブ945は、装着されている記録媒体へのデータの記録及び読み出しを行う。ディスクドライブ945に装着される記録媒体は、例えばDVDディスクDVD-Video、DVD-RAM、DVD-R、DVD-RW、DVDR、DVDRW等又はBlu-ray登録商標ディスクなどであってよい。セレクタ946は、映像及び音声の記録時には、チューナ941又はエンコーダ943から入力される符号化ビットストリームを選択し、選択した符号化ビットストリームをHDD944又はディスクドライブ945へ出力する。また、セレクタ946は、映像及び音声の再生時には、HDD944又はディスクドライブ945から入力される符号化ビットストリームをデコーダ947へ出力する。デコーダ947は、符号化ビットストリームを復号し、映像データ及び音声データを生成する。そして、デコーダ947は、生成した映像データをOSD948へ出力する。また、デコーダ904は、生成した音声データを外部のスピーカへ出力する。OSD948は、デコーダ947から入力される映像データを再生し、映像を表示する。また、OSD948は、表示する映像に、例えばメニュー、ボタン又はカーソルなどのGUIの画像を重畳してもよい。制御部949は、CPUなどのプロセッサ、並びにRAM及びROMなどのメモリを有する。メモリは、CPUにより実行されるプログラム、及びプログラムデータなどを記憶する。メモリにより記憶されるプログラムは、例えば、記録再生装置940の起動時にCPUにより読み込まれ、実行される。CPUは、プログラムを実行することにより、例えばユーザインタフェース950から入力される操作信号に応じて、記録再生装置940の動作を制御する。ユーザインタフェース950は、制御部949と接続される。ユーザインタフェース950は、例えば、ユーザが記録再生装置940を操作するためのボタン及びスイッチ、並びに遠隔制御信号の受信部などを有する。ユーザインタフェース950は、これら構成要素を介してユーザによる操作を検出して操作信号を生成し、生成した操作信号を制御部949へ出力する。このように構成された記録再生装置940において、エンコーダ943は、上述した実施形態に係る画像符号化装置10の機能を有する。また、デコーダ947は、上述した実施形態に係る画像復号装置60の機能を有する。それにより、記録再生装置940での画像のスケーラブル符号化及び復号に際して、より効率的にエンハンスメントレイヤの画像データを符号化し及びそうした画像データを復号することができる。[5-4.第4の応用例]図21は、上述した実施形態を適用した撮像装置の概略的な構成の一例を示している。撮像装置960は、被写体を撮像して画像を生成し、画像データを符号化して記録媒体に記録する。撮像装置960は、光学ブロック961、撮像部962、信号処理部963、画像処理部964、表示部965、外部インタフェース966、メモリ967、メディアドライブ968、OSD969、制御部970、ユーザインタフェース971、及びバス972を備える。光学ブロック961は、撮像部962に接続される。撮像部962は、信号処理部963に接続される。表示部965は、画像処理部964に接続される。ユーザインタフェース971は、制御部970に接続される。バス972は、画像処理部964、外部インタフェース966、メモリ967、メディアドライブ968、OSD969、及び制御部970を相互に接続する。光学ブロック961は、フォーカスレンズ及び絞り機構などを有する。光学ブロック961は、被写体の光学像を撮像部962の撮像面に結像させる。撮像部962は、CCD又はCMOSなどのイメージセンサを有し、撮像面に結像した光学像を光電変換によって電気信号としての画像信号に変換する。そして、撮像部962は、画像信号を信号処理部963へ出力する。信号処理部963は、撮像部962から入力される画像信号に対してニー補正、ガンマ補正、色補正などの種々のカメラ信号処理を行う。信号処理部963は、カメラ信号処理後の画像データを画像処理部964へ出力する。画像処理部964は、信号処理部963から入力される画像データを符号化し、符号化データを生成する。そして、画像処理部964は、生成した符号化データを外部インタフェース966又はメディアドライブ968へ出力する。また、画像処理部964は、外部インタフェース966又はメディアドライブ968から入力される符号化データを復号し、画像データを生成する。そして、画像処理部964は、生成した画像データを表示部965へ出力する。また、画像処理部964は、信号処理部963から入力される画像データを表示部965へ出力して画像を表示させてもよい。また、画像処理部964は、OSD969から取得される表示用データを、表示部965へ出力する画像に重畳してもよい。OSD969は、例えばメニュー、ボタン又はカーソルなどのGUIの画像を生成して、生成した画像を画像処理部964へ出力する。外部インタフェース966は、例えばUSB入出力端子として構成される。外部インタフェース966は、例えば、画像の印刷時に、撮像装置960とプリンタとを接続する。また、外部インタフェース966には、必要に応じてドライブが接続される。ドライブには、例えば、磁気ディスク又は光ディスクなどのリムーバブルメディアが装着され、リムーバブルメディアから読み出されるプログラムが、撮像装置960にインストールされ得る。さらに、外部インタフェース966は、LAN又はインターネットなどのネットワークに接続されるネットワークインタフェースとして構成されてもよい。即ち、外部インタフェース966は、撮像装置960における伝送手段としての役割を有する。メディアドライブ968に装着される記録媒体は、例えば、磁気ディスク、光磁気ディスク、光ディスク、又は半導体メモリなどの、読み書き可能な任意のリムーバブルメディアであってよい。また、メディアドライブ968に記録媒体が固定的に装着され、例えば、内蔵型ハードディスクドライブ又はSSDSolidStateDriveのような非可搬性の記憶部が構成されてもよい。制御部970は、CPUなどのプロセッサ、並びにRAM及びROMなどのメモリを有する。メモリは、CPUにより実行されるプログラム、及びプログラムデータなどを記憶する。メモリにより記憶されるプログラムは、例えば、撮像装置960の起動時にCPUにより読み込まれ、実行される。CPUは、プログラムを実行することにより、例えばユーザインタフェース971から入力される操作信号に応じて、撮像装置960の動作を制御する。ユーザインタフェース971は、制御部970と接続される。ユーザインタフェース971は、例えば、ユーザが撮像装置960を操作するためのボタン及びスイッチなどを有する。ユーザインタフェース971は、これら構成要素を介してユーザによる操作を検出して操作信号を生成し、生成した操作信号を制御部970へ出力する。このように構成された撮像装置960において、画像処理部964は、上述した実施形態に係る画像符号化装置10及び画像復号装置60の機能を有する。それにより、撮像装置960での画像のスケーラブル符号化及び復号に際して、より効率的にエンハンスメントレイヤの画像データを符号化し及びそうした画像データを復号することができる。<6.まとめ>ここまで、図1~図21を用いて、一実施形態に係る画像符号化装置10及び画像復号装置60について説明した。本実施形態によれば、画像のスケーラブル符号化及び復号に際して、上位レイヤの予測単位についてのイントラ予測モードの候補の数が下位レイヤの対応する予測単位についての予測モードの候補の数と異なる場合にも、下位レイヤの予測単位に設定された予測モードに基づいて選択される予測モードが、上位レイヤの予測単位に設定される。従って、上位レイヤの予測モード情報の符号化に伴う符号量を削減することができる。特に、ブロックサイズの範囲が拡張され予測モードの候補のセットも多様化するHEVCでは、予測モード情報をそのまま符号化した場合に発生する符号量は少なくないため、上位レイヤについて予測モード情報の符号量の大部分を省略できる上述した仕組みは有益である。また、本実施形態によれば、下位レイヤに対して上位レイヤの予測モードの候補の数が多い場合には、予測方向の差に応じて符号化されるパラメータを用いて、上位レイヤに設定される予測モードが選択される。上位レイヤの予測モード情報の符号化を回避しながらも、このようなビット数の少ない追加的なパラメータを導入することで、上位レイヤのイントラ予測の予測精度を向上させ、結果的に符号化効率を高めることができる。当該パラメータは、レイヤ間の予測方向の差の絶対値が小さいほど、より小さい符号番号で符号化される。通常、空間解像度のみが異なる2つのレイヤの対応する予測単位の間では、同じ位置の部分画像は互いに相関を有する。従って、予測方向の差が小さいほどより小さい符号番号で上記パラメータを符号化することで、可変長符号化の短い符号語をより多く使用することができる。その結果、符号化効率は一層高められる。また、本実施形態によれば、下位レイヤに対して上位レイヤの予測モードの候補の数が少ない場合には、下位レイヤの予測方向に最も近い予測方向を表す予測モードが、上位レイヤの予測単位に設定される。従って、この場合には、追加的なパラメータを要することなく、上位レイヤの予測モードを適切に選択することができる。また、本実施形態によれば、下位レイヤの対応する予測単位に設定された予測モードと同じレイヤ内の参照ブロックの予測モードとに基づくMostProbableModeを実現することも可能である。それにより、予測モード情報の符号量を削減しながら、イントラ予測の精度をさらに向上させることができる。なお、本明細書では、イントラ予測に関する情報及びインター予測に関する情報が、符号化ストリームのヘッダに多重化されて、符号化側から復号側へ伝送される例について主に説明した。しかしながら、これら情報を伝送する手法はかかる例に限定されない。例えば、これら情報は、符号化ビットストリームに多重化されることなく、符号化ビットストリームと関連付けられた別個のデータとして伝送され又は記録されてもよい。ここで、関連付けるという用語は、ビットストリームに含まれる画像スライス若しくはブロックなど、画像の一部であってもよいと当該画像に対応する情報とを復号時にリンクさせ得るようにすることを意味する。即ち、情報は、画像又はビットストリームとは別の伝送路上で伝送されてもよい。また、情報は、画像又はビットストリームとは別の記録媒体又は同一の記録媒体の別の記録エリアに記録されてもよい。さらに、情報と画像又はビットストリームとは、例えば、複数フレーム、1フレーム、又はフレーム内の一部分などの任意の単位で互いに関連付けられてよい。以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。1第1のレイヤ及び前記第1のレイヤよりも上位の第2のレイヤを含むスケーラブル復号される画像の前記第1のレイヤ内の第1の予測単位についてのイントラ予測モードの候補の数が前記第2のレイヤ内の前記第1の予測単位に対応する第2の予測単位についてのイントラ予測モードの候補の数と異なる場合に、前記第1の予測単位に設定された予測モードに基づいて選択される予測モードを、前記第2の予測単位に設定するモード設定部と、前記モード設定部により設定される予測モードに従って、前記第2の予測単位の予測画像を生成する予測部と、を備える画像処理装置。2前記第1の予測単位についてのイントラ予測モードの候補の数が前記第2の予測単位についてのイントラ予測モードの候補の数よりも少ない場合に、前記第1の予測単位と前記第2の予測単位との間の予測方向の差に応じて符号化される第1のパラメータを取得するパラメータ取得部、をさらに備え、前記モード設定部は、前記パラメータ取得部により取得される前記第1のパラメータに応じて、前記第2の予測単位に設定される予測モードを選択する、前記1に記載の画像処理装置。3前記第1のパラメータは、前記予測方向の差の絶対値が小さいほどより小さい符号番号で符号化される、前記2に記載の画像処理装置。4正負のみが異なる前記予測方向の差のうち、予測方向を特定の回転方向に回転させる方に、より小さい符号番号が割り当てられる、前記3に記載の画像処理装置。5正負のみが異なる前記予測方向の差のうち、前記第2の予測単位の予測方向が特定の方向により近づく方に、より小さい符号番号が割り当てられる、前記3に記載の画像処理装置。6前記特定の方向は、垂直方向又は水平方向であって、前記画像のアスペクト比に応じて決定される、前記5に記載の画像処理装置。7前記モード設定部は、前記第1の予測単位についてのイントラ予測モードの候補の数が前記第2の予測単位についてのイントラ予測モードの候補の数よりも多い場合には、前記第1の予測単位の予測方向に最も近い予測方向を表す予測モードを前記第2の予測単位に設定する、前記1~6のいずれか1項に記載の画像処理装置。8前記モード設定部は、前記第1の予測単位の予測方向に最も近い予測方向を表す予測モードが前記第2の予測単位についての予測モードの候補内に複数存在する場合には、平均値予測を表す予測モードを前記第2の予測単位に設定する、前記7に記載の画像処理装置。9前記モード設定部は、前記第1の予測単位の予測方向に最も近い予測方向を表す予測モードが前記第2の予測単位についての予測モードの候補内に複数存在する場合には、予め定義される条件に従って、前記最も近い予測方向を表す複数の予測モードのいずれかを選択する、前記7に記載の画像処理装置。10前記予め定義される条件は、所定の回転方向に予測方向を回転させる、という条件である、前記9に記載の画像処理装置。11前記予め定義される条件は、符号番号のより小さい方を選択する、という条件である、前記9に記載の画像処理装置。12前記第1の予測単位の予測方向に最も近い予測方向を表す予測モードが前記第2の予測単位についての予測モードの候補内に複数存在する場合に、予測モードの選択のための第2のパラメータを取得するパラメータ取得部、をさらに備え、前記モード設定部は、前記パラメータ取得部により取得される前記第2のパラメータに応じて、前記最も近い予測方向を表す複数の予測モードのいずれかを選択する、前記7に記載の画像処理装置。13前記モード設定部は、前記第2の予測単位に設定すべき予測モードを、前記第1の予測単位に設定された予測モードと、前記第2のレイヤ内の前記第2の予測単位に隣接する少なくとも第3の予測単位に設定された予測モードとに基づくMostProbableModeによって推定する、前記1に記載の画像処理装置。14前記モード設定部は、前記第1の予測単位に設定された予測モードを前記第2の予測単位についての予測モードの候補内の予測モードに変換した上で、MostProbableModeを決定する、前記13に記載の画像処理装置。15前記第1の予測単位は、前記第2の予測単位内の所定の位置の画素に対応する画素を有する、前記第1のレイヤ内の予測単位である、前記1~14のいずれか1項に記載の画像処理装置。16第1のレイヤ及び前記第1のレイヤよりも上位の第2のレイヤを含むスケーラブル復号される画像の前記第1のレイヤ内の第1の予測単位についてのイントラ予測モードの候補の数が前記第2のレイヤ内の前記第1の予測単位に対応する第2の予測単位についてのイントラ予測モードの候補の数と異なる場合に、前記第1の予測単位に設定された予測モードに基づいて選択される予測モードを、前記第2の予測単位に設定することと、設定された予測モードに従って、前記第2の予測単位の予測画像を生成することと、を含む画像処理方法。17第1のレイヤ及び前記第1のレイヤよりも上位の第2のレイヤを含むスケーラブル符号化される画像の前記第1のレイヤ内の第1の予測単位についてのイントラ予測モードの候補の数が前記第2のレイヤ内の前記第1の予測単位に対応する第2の予測単位についてのイントラ予測モードの候補の数と異なる場合に、前記第1の予測単位に設定された予測モードに基づいて選択される予測モードを、前記第2の予測単位に設定するモード設定部と、前記モード設定部により設定される予測モードに従って、前記第2の予測単位の予測画像を生成する予測部と、を備える画像処理装置。18第1のレイヤ及び前記第1のレイヤよりも上位の第2のレイヤを含むスケーラブル符号化される画像の前記第1のレイヤ内の第1の予測単位についてのイントラ予測モードの候補の数が前記第2のレイヤ内の前記第1の予測単位に対応する第2の予測単位についてのイントラ予測モードの候補の数と異なる場合に、前記第1の予測単位に設定された予測モードに基づいて選択される予測モードを、前記第2の予測単位に設定することと、設定された予測モードに従って、前記第2の予測単位の予測画像を生成することと、を含む画像処理方法。"