"制約付きイントラ予測において、前記制約付きイントラ予測の処理対象である当該領域に隣接し、予測に利用される周辺画素であって、利用可能な2つの周辺画素に挟まれる1つ若しくは連続する複数の利用不可能な周辺画素に対して、その位置に応じた値の補間画素値を生成する補間画素生成部と、前記補間画素生成部により生成された補間画素値を利用して、イントラ予測を行い、予測画像を生成する予測画像生成部とを備える画像処理装置。前記補間画素生成部は、利用可能な前記周辺画素との距離に応じた値の補間画素値を生成する請求項1に記載の画像処理装置。前記補間画素生成部は、利用可能な2つの前記周辺画素を用いた線形内挿により前記補間画素値を生成する請求項2に記載の画像処理装置。前記補間画素生成部は、前記線形内挿において、2のべき乗の近似値を用いて割り算を行う請求項3に記載の画像処理装置。前記補間画素生成部は、当該領域の左上の、利用不可能な周辺画素に対して、前記周辺画素の右隣の画素が利用可能な場合、前記右隣の画素の画素値を前記周辺画素の補間画素値とし、前記周辺画素の右隣の画素が利用不可能であり、かつ、前記周辺画素の下の画素が利用可能である場合、前記下の画素の画素値を前記周辺画素の補間画素値とする請求項1に記載の画像処理装置。イントラ予測に関するフラグ情報の値を判定するフラグ判定部をさらに備え、前記補間画素生成部は、前記フラグ判定部により、前記フラグ情報により前記制約付きイントラ予測が指定されていると判定された場合、前記補間画素値を生成する請求項1に記載の画像処理装置。当該領域の大きさを判定するサイズ判定部をさらに備え、前記補間画素生成部は、前記サイズ判定部により当該領域が小さいと判定された場合、前記補間画素値を生成する請求項1に記載の画像処理装置。前記サイズ判定部は、閾値を用いて、当該領域の大きさを判定し、前記補間画素生成部は、前記サイズ判定部により当該領域が閾値以下であると判定された場合、前記補間画素値を生成する請求項7に記載の画像処理装置。前記閾値を伝送する伝送部をさらに備える請求項8に記載の画像処理装置。伝送される前記閾値を受け取る受け取り部をさらに備え、前記サイズ判定部は、前記受け取り部により受け取られた前記閾値を用いて当該領域の大きさを判定する請求項8に記載の画像処理装置。前記閾値はプロファイルレベルに応じて設定される請求項8に記載の画像処理装置。画像処理装置の画像処理方法であって、補間画素生成部が、制約付きイントラ予測において、前記制約付きイントラ予測の処理対象である当該領域に隣接し、予測に利用される周辺画素であって、利用可能な2つの周辺画素に挟まれる1つ若しくは連続する複数の利用不可能な周辺画素に対して、その位置に応じた値の補間画素値を生成し、予測画像生成部が、生成された補間画素値を利用して、イントラ予測を行い、予測画像を生成する画像処理方法。しかしながら、非特許文献2に記載の方法の場合、利用不可能なnotavailableな周辺画素値を、利用可能なavailableな周辺画素を用いて補間する際、画素の位置に寄らず、同一の値を用いるため、十分な符号化効率を実現できない恐れがあった。本開示は、このような状況に鑑みてなされたものであり、利用不可能なインター予測のブロックの画素を、より精度の高い画素を用いて置き換えることができるようにし、符号化効率を向上させることができるようにすることを目的とする。本開示の一側面は、制約付きイントラ予測において、前記制約付きイントラ予測の処理対象である当該領域に隣接し、予測に利用される周辺画素であって、利用可能な2つの周辺画素に挟まれる1つ若しくは連続する複数の利用不可能な周辺画素に対して、その位置に応じた値の補間画素値を生成する補間画素生成部と、前記補間画素生成部により生成された補間画素値を利用して、イントラ予測を行い、予測画像を生成する予測画像生成部とを備える画像処理装置である。前記補間画素生成部は、利用可能な前記周辺画素との距離に応じた値の補間画素値を生成することができる。前記補間画素生成部は、利用可能な2つの前記周辺画素を用いた線形内挿により前記補間画素値を生成することができる。前記補間画素生成部は、前記線形内挿において、2のべき乗の近似値を用いて割り算を行うことができる。前記補間画素生成部は、当該領域の左上の、利用不可能な周辺画素に対して、前記周辺画素の右隣の画素が利用可能な場合、前記右隣の画素の画素値を前記周辺画素の補間画素値とし、前記周辺画素の右隣の画素が利用不可能であり、かつ、前記周辺画素の下の画素が利用可能である場合、前記下の画素の画素値を前記周辺画素の補間画素値とすることができる。イントラ予測に関するフラグ情報の値を判定するフラグ判定部をさらに備え、前記補間画素生成部は、前記フラグ判定部により、前記フラグ情報により前記制約付きイントラ予測が指定されていると判定された場合、前記補間画素値を生成することができる。当該領域の大きさを判定するサイズ判定部をさらに備え、前記補間画素生成部は、前記サイズ判定部により当該領域が小さいと判定された場合、前記補間画素値を生成することができる。前記サイズ判定部は、閾値を用いて、当該領域の大きさを判定し、前記補間画素生成部は、前記サイズ判定部により当該領域が閾値以下であると判定された場合、前記補間画素値を生成することができる。前記閾値を伝送する伝送部をさらに備えることができる。伝送される前記閾値を受け取る受け取り部をさらに備え、前記サイズ判定部は、前記受け取り部により受け取られた前記閾値を用いて当該領域の大きさを判定することができる。前記閾値はプロファイルレベルに応じて設定されるようにすることができる。本開示の一側面は、また、画像処理装置の画像処理方法であって、補間画素生成部が、制約付きイントラ予測において、前記制約付きイントラ予測の処理対象である当該領域に隣接し、予測に利用される周辺画素であって、利用可能な2つの周辺画素に挟まれる1つ若しくは連続する複数の利用不可能な周辺画素に対して、その位置に応じた値の補間画素値を生成し、予測画像生成部が、生成された補間画素値を利用して、イントラ予測を行い、予測画像を生成する画像処理方法である。本開示の一側面においては、制約付きイントラ予測において、制約付きイントラ予測の処理対象である当該領域に隣接し、予測に利用される周辺画素であって、利用可能な2つの周辺画素に挟まれる1つ若しくは連続する複数の利用不可能な周辺画素に対して、その位置に応じた値の補間画素値が生成され、その生成された補間画素値を利用して、イントラ予測が行われ、予測画像が生成される。本開示によれば、画像を処理することができる。特に、符号化効率を向上させることができる。以下、本開示を実施するための形態以下実施の形態とするについて説明する。なお、説明は以下の順序で行う。1.第1の実施の形態画像符号化装置2.第2の実施の形態画像復号装置3.第3の実施の形態制約付きイントラ予測部の他の例4.第4の実施の形態コンピュータ5.第5の実施の形態テレビジョン受像機6.第6の実施の形態携帯電話機7.第7の実施の形態記録再生装置8.第8の実施の形態撮像装置<1.第1の実施の形態>[画像符号化装置]図1は、画像処理装置である画像符号化装置の主な構成例を示すブロック図である。図1に示される画像符号化装置100は、例えばH.264及びMPEGMovingPictureExpertsGroup4Part10AVCAdvancedVideoCoding符号化方式のように、予測処理を用いて画像データを符号化する。図1に示されるように画像符号化装置100は、AD変換部101、画面並べ替えバッファ102、演算部103、直交変換部104、量子化部105、可逆符号化部106、および蓄積バッファ107を有する。また、画像符号化装置100は、逆量子化部108、逆直交変換部109、演算部110、ループフィルタ111、フレームメモリ112、選択部113、イントラ予測部114、動き予測補償部115、予測画像選択部116、およびレート制御部117を有する。画像符号化装置100は、さらに、制約付きイントラ予測部121を有する。AD変換部101は、入力された画像データをAD変換し、変換後の画像データデジタルデータを、画面並べ替えバッファ102に供給し、記憶させる。画面並べ替えバッファ102は、記憶した表示の順番のフレームの画像を、GOPGroupOfPictureに応じて、符号化のためのフレームの順番に並べ替え、フレームの順番を並び替えた画像を、演算部103に供給する。また、画面並べ替えバッファ102は、フレームの順番を並び替えた画像を、イントラ予測部114および動き予測補償部115にも供給する。演算部103は、画面並べ替えバッファ102から読み出された画像から、予測画像選択部116を介してイントラ予測部114若しくは動き予測補償部115から供給される予測画像を減算し、その差分情報を直交変換部104に出力する。例えば、イントラ符号化が行われる画像の場合、演算部103は、画面並べ替えバッファ102から読み出された画像から、イントラ予測部114から供給される予測画像を減算する。また、例えば、インター符号化が行われる画像の場合、演算部103は、画面並べ替えバッファ102から読み出された画像から、動き予測補償部115から供給される予測画像を減算する。直交変換部104は、演算部103から供給される差分情報に対して、離散コサイン変換やカルーネンレーベ変換等の直交変換を施す。なお、この直交変換の方法は任意である。直交変換部104は、その変換係数を量子化部105に供給する。量子化部105は、直交変換部104から供給される変換係数を量子化する。量子化部105は、レート制御部117から供給される符号量の目標値に関する情報に基づいて量子化パラメータを設定し、その量子化を行う。なお、この量子化の方法は任意である。量子化部105は、量子化された変換係数を可逆符号化部106に供給する。可逆符号化部106は、量子化部105において量子化された変換係数を、任意の符号化方式で符号化する。係数データは、レート制御部117の制御の下で量子化されているので、この符号量は、レート制御部117が設定した目標値となる若しくは目標値に近似する。また、可逆符号化部106は、イントラ予測のモードを示す情報等を含むイントラ予測情報をイントラ予測部114から取得し、インター予測のモードを示す情報や動きベクトル情報などを含むインター予測情報を動き予測補償部115から取得する。さらに、可逆符号化部106は、ループフィルタ111において使用されたフィルタ係数等を取得する。可逆符号化部106は、これらの各種情報を任意の符号化方式で符号化し、符号化データのヘッダ情報の一部とする多重化する。可逆符号化部106は、符号化して得られた符号化データを蓄積バッファ107に供給して蓄積させる。可逆符号化部106の符号化方式としては、例えば、可変長符号化または算術符号化等が挙げられる。可変長符号化としては、例えば、H.264AVC方式で定められているCAVLCContextAdaptiveVariableLengthCodingなどが挙げられる。算術符号化としては、例えば、CABACContextAdaptiveBinaryArithmeticCodingなどが挙げられる。蓄積バッファ107は、可逆符号化部106から供給された符号化データを、一時的に保持する。蓄積バッファ107は、所定のタイミングにおいて、保持している符号化データを、ビットストリームとして、例えば、後段の図示せぬ記録装置記録媒体や伝送路などに出力する。つまり、符号化された各種情報が復号側に供給される。また、量子化部105において量子化された変換係数は、逆量子化部108にも供給される。逆量子化部108は、その量子化された変換係数を、量子化部105による量子化に対応する方法で逆量子化する。この逆量子化の方法は、量子化部105による量子化処理に対応する方法であればどのような方法であってもよい。逆量子化部108は、得られた変換係数を、逆直交変換部109に供給する。逆直交変換部109は、逆量子化部108から供給された変換係数を、直交変換部104による直交変換処理に対応する方法で逆直交変換する。この逆直交変換の方法は、直交変換部104による直交変換処理に対応する方法であればどのようなものであってもよい。逆直交変換された出力局所的に復元された差分情報は、演算部110に供給される。演算部110は、逆直交変換部109から供給された逆直交変換結果、すなわち、局所的に復元された差分情報に、予測画像選択部116を介してイントラ予測部114若しくは動き予測補償部115から供給される予測画像を加算し、局所的に再構成された画像以下、再構成画像と称するを得る。その再構成画像は、ループフィルタ111またはフレームメモリ112に供給される。ループフィルタ111は、デブロックフィルタや適応ループフィルタ等を含み、演算部110から供給される復号画像に対して適宜フィルタ処理を行う。例えば、ループフィルタ111は、復号画像に対してデブロックフィルタ処理を行うことにより復号画像のブロック歪を除去する。また、例えば、ループフィルタ111は、そのデブロックフィルタ処理結果ブロック歪みの除去が行われた復号画像に対して、ウィナーフィルタWienerFilterを用いてループフィルタ処理を行うことにより画質改善を行う。なお、ループフィルタ111が、復号画像に対して任意のフィルタ処理を行うようにしてもよい。また、ループフィルタ111は、必要に応じて、フィルタ処理に用いたフィルタ係数等の情報を可逆符号化部106に供給し、それを符号化させるようにすることもできる。ループフィルタ111は、フィルタ処理結果以下、復号画像と称するをフレームメモリ112に供給する。フレームメモリ112は、演算部110から供給される再構成画像と、ループフィルタ111から供給される復号画像とをそれぞれ記憶する。フレームメモリ112は、所定のタイミングにおいて、若しくは、イントラ予測部114等の外部からの要求に基づいて、記憶している再構成画像を、選択部113を介して、イントラ予測部114に供給する。また、フレームメモリ112は、所定のタイミングにおいて、若しくは、動き予測補償部115等の外部からの要求に基づいて、記憶している復号画像を、選択部113を介して、動き予測補償部115に供給する。選択部113は、フレームメモリ112から出力される画像の供給先を示す。例えば、イントラ予測の場合、選択部113は、フレームメモリ112からフィルタ処理されていない画像再構成画像を読み出し、周辺画素として、イントラ予測部114に供給する。また、例えば、インター予測の場合、選択部113は、フレームメモリ112からフィルタ処理された画像復号画像を読み出し、参照画像として、それを動き予測補償部115に供給する。イントラ予測部114は、フレームメモリ112から、処理対象領域の周辺に位置する周辺領域の画像周辺画像を取得すると、その周辺画像の画素値を用いて、基本的にプレディクションユニットPUを処理単位として予測画像を生成するイントラ予測画面内予測を行う。イントラ予測部114は、予め用意された複数のモードイントラ予測モードでこのイントラ予測を行う。イントラ予測部114は、候補となる全てのイントラ予測モードで予測画像を生成し、画面並べ替えバッファ102から供給される入力画像を用いて各予測画像のコスト関数値を評価し、最適なモードを選択する。イントラ予測部114は、最適なイントラ予測モードを選択すると、その最適なモードで生成された予測画像を、予測画像選択部116に供給する。また、イントラ予測部114は、最適なイントラ予測モード等、イントラ予測に関する情報を含むイントラ予測情報を、適宜可逆符号化部106に供給し、符号化させる。動き予測補償部115は、画面並べ替えバッファ102から供給される入力画像と、フレームメモリ112から供給される参照画像とを用いて、基本的にPUを処理単位として、動き予測インター予測を行い、検出された動きベクトルに応じて動き補償処理を行い、予測画像インター予測画像情報を生成する。動き予測補償部115は、予め用意された複数のモードインター予測モードでこのようなインター予測を行う。動き予測補償部115は、候補となる全てのインター予測モードで予測画像を生成し、各予測画像のコスト関数値を評価し、最適なモードを選択する。動き予測補償部115は、最適なインター予測モードを選択すると、その最適なモードで生成された予測画像を、予測画像選択部116に供給する。また、動き予測補償部115は、最適なインター予測モード等、インター予測に関する情報を含むインター予測情報を可逆符号化部106に供給し、符号化させる。また、動き予測補償部115は、最適な予測モードとしてインター予測が選択されると、その最適なインター予測モードの情報をイントラ予測部114に通知する。予測画像選択部116は、演算部103や演算部110に供給する予測画像の供給元を選択する。例えば、イントラ符号化の場合、予測画像選択部116は、予測画像の供給元としてイントラ予測部114を選択し、そのイントラ予測部114から供給される予測画像を演算部103や演算部110に供給する。また、例えば、インター符号化の場合、予測画像選択部116は、予測画像の供給元として動き予測補償部115を選択し、その動き予測補償部115から供給される予測画像を演算部103や演算部110に供給する。レート制御部117は、蓄積バッファ107に蓄積された符号化データの符号量に基づいて、オーバーフローあるいはアンダーフローが発生しないように、量子化部105の量子化動作のレートを制御する。制約付きイントラ予測部121は、constrainedintrapredflag=1の場合のイントラ予測制約付きイントラ予測のための周辺画素の補間に関する処理を行う。[コーディングユニット]ここで、HEVC符号化方式について説明する。まず、HEVC符号化方式において定められている、コーディングユニットCodingUnitについて説明する。CodingUnitCUは、CodingTreeBlockCTBとも呼ばれ、AVCにおけるマクロブロックと同様の役割を果たす、ピクチャ単位の画像の部分領域である。後者は、16×16画素の大きさに固定されているのに対し、前者の大きさは固定されておらず、それぞれのシーケンスにおいて、画像圧縮情報中において指定されることになる。特に、最大の大きさを持つCUを、LCULargestCodingUnitと呼び、また、最小の大きさを持つCUをSCUSmallestCodingUnitと称する。例えば画像圧縮情報に含まれるシーケンスパラメータセットにおいて、これらの領域のサイズが指定されることになるが、それぞれ、正方形で、2の冪乗で表される大きさに限定される。図2に、HEVCで定義されているコーディングユニットCodingUnitの例を示す。図2の例では、LCUの大きさが128であり、最大階層深度が5となる。2N×2Nの大きさのCUは、splitflagの値が1である時、1つ下の階層となる、N×Nの大きさのCUに分割される。更に、CUは、イントラ若しくはインター予測の処理単位となる領域ピクチャ単位の画像の部分領域であるプレディクションユニットPredictionUnitPUに分割され、また、直交変換の処理単位となる領域ピクチャ単位の画像の部分領域である、トランスフォームユニットTransformUnitTUに分割される。なお、以下において、領域には、各種領域例えば、AVCのマクロブロックやサブマクロブロック、LCU、CU、SCU、PU、およびTU等を全て含むそれらのいずれであってもよい。もちろん、上述した以外の単位が含まれてもよいし、説明の内容に応じて不可能な単位は、適宜、除外するものとする。[HEVCイントラ予測方式]次に、HEVCにおいて定められているイントラ予測方式について説明する。HEVCにおいては、イントラ予測のためのPUの単位は、4×4、8×8、16×16、32×32若しくは64×64である。4×4の大きさに関しては、AVCと同様のイントラ予測処理が行われる。8×8の大きさに関しては、後述する、AngularPredictionと呼ばれる方式に基づいてイントラ予測処理が行われる。16×16及び32×32及び64×64の大きさに関しては、後述するArbitraryDirectionalIntraADIと呼ばれる方式に基づいて、イントラ予測処理が行われる。更に、イントラ予測を行うに先立ち、符号化効率を向上させる場合には、係数121によるローパスフィルタ処理が、周辺画素値に施される。施す施さないに関する情報が、それぞれのPU毎に、画像圧縮情報中に伝送されることになる。以下では、HEVC符号化方式において規定されている、AngularPredictionイントラ予測方式について述べる。[AngularPredictionイントラ予測方式]図3に、AngularPredictionイントラ予測方式を説明するための図を示す。すなわち、AngularPredictionにおいては、図3Aに示されるような角度のイントラ予測処理を行うことが可能である。また、図3Aのような角度のイントラ予測を行うためには、図3Bに示されるように、周辺画素の間の画素値を用いる必要が生じるが、このため、AngularPredictionにおいては、1/8画素精度の線形内挿処理を行うことが可能となっている。[ArbitraryDirectionalIntraADIイントラ予測方式]次に、HEVC符号化方式において規定されている、ArbitraryDirectionalIntraADIイントラ予測方式について述べる。図4に、ArbitraryDirectionalIntraADIイントラ予測方式を説明するための図を示す。ArbitraryDirectionalIntraADIイントラ予測方式においては、図4Aに示されるように、左下に位置する隣接画素値も用いられる。AVC符号化方式の場合と同様に、Vertical,Horizontal,DC,DiagonalDownLeft,DiagonalDownRight,VerticalRight,HorizontalDown,VerticalLeft、およびHorizontalUpの各予測モードが定義されているが、その他のモードに関しては、図4Bに示されるように、dxdyを符号化情報として画像圧縮情報中に伝送される。[制約付きイントラ予測]ところで、例えばAVCやHEVCにおいては、インターピクチャにおいて、インター予測により再構成された画素からのイントラ予測を禁止するモード制約付きイントラ予測が用意されている。このモードは、インター予測の画像、若しくは、インター予測で参照する画像にエラー混入していた場合においても、そのエラーのイントラ予測への影響を抑制するためのモードである。例えば、シンタックスのピクチャパラメータ中にconstrainedintrapredflagが設けられ、その値が、1の場合、上述したような制約付きイントラ予測が採用される。ところが、HEVCの場合、1つのLCU内に、インター予測を行うCUとイントラ予測を行うCUを混在させることが可能である。このような場合、constrainedintrapredflag=1である制約付きイントラ予測とすると、予測において多くの周辺画素が参照できなくなる可能性が高い。その結果、利用できる予測モードの数が大幅に抑制され、符号化効率が低減する可能性がある。図5を参照して、具体的に説明する。図5に示されるように、イントラ予測の処理対象の当該領域CUCUnが16×16画素であるとする。図5には、この当該領域CUnについて、イントラ予測するために必要な周辺の隣接画素と、その隣接画素が含まれる周辺CUでのインター予測イントラ予測の状態の例が図示してある。周辺CUの内、A、B、D、E、F、H、およびIがインター予測されたCUであり、C、G、J、およびKがイントラ予測されたCUである。図5に示されるように、処理対象の当該領域CUnの周辺隣接画素はインター予測された画素とイントラ予測された画素が混在している。このため、制約付きイントラ予測constrainedintrapredflag=1の場合、利用可能なイントラ予測モードがDC平均値予測モードのみになってしまう。しかも既存の規格では周辺画素が利用できないために画素値を固定の128で予測することになる。このようにHEVCのインターピクチャにおけるイントラ予測において、インター予測によって再構成された画素をイントラ予測で利用しないモードconstrainedintrapredflag=1の場合、周辺のすべての画素が利用可能でないために、利用できるイントラ予測モードが大幅に制限されてしまう可能性があった。特にHEVCのIntraAngularPredictionではイントラ予測の予測方向が33方向とAVC等における従来のイントラ予測に比べて細かく設定することにより符号化効率の向上を目指しているため、上述の制限は符号化効率の大幅な低下を招くことになる可能性があった。これに対して、インターピクチャでの制約付きイントラ予測において、図5のような周辺画素の構成になっていた場合に、以下の式でインター予測から構成される周辺画素値を計算する方法が、非特許文献2に開示されている。例えば、PT:インター予測から構成される周辺画素領域PRA:PTの右もしくは上に隣接するイントラ予測から構成される画素PLD:PTの左もしくは下に隣接するイントラ予測から構成される画素とする。領域PTの左右もしくは上下両方に隣接するイントラ予測から構成される画素が存在する場合、以下の式1のように、インター予測画素から構成される周辺画素をイントラ予測から構成される画素から計算し、周辺画素をすべて利用可能な状態にしてイントラ予測を行う。PT=PRAPLD111また、左右もしくは上下のうち一方に隣接するイントラ予測から構成される画素しか存在しない場合、以下の式2のように、インター予測画素から構成される周辺画素をイントラ予測から構成される画素から計算し、周辺画素をすべて利用可能な状態にしてイントラ予測を行う。PT=PRA若しくはPT=PLD2しかしながら、この方法の場合、画素の位置に寄らず、同一の値を用いるため、置き換えられる値が置き換える前の値と大きく異なってしまう可能性がある。特に、PTの領域が大きい場合、その誤差はより顕著になる可能性が高くなる。このため、効率の良いイントラ予測処理が行えず、特に、グラデーションのようにブロック内において画素値の変化がある入力信号に対して、十分な符号化効率を達成できない恐れがあった。そこで、画像符号化装置100は、画素の位置に応じた補間処理を行う。なお、このconstrainedintrapredflagは、シーケンスパラメータセットやピクチャパラメータセットに含められて、ビットストリームとして復号側に伝送される。[制約付きイントラ予測部等]図6は、制約付きイントラ予測部等の主な構成例を示すブロック図である。図6に示されるように、イントラ予測部114は、候補予測画像生成部131、コスト関数値算出部132、予測モード判定部133、予測画像生成部134、およびモードバッファ135を有する。また、制約付きイントラ予測部121は、フラグ判定部141、利用可否判定部142、および補間画素生成部143を有する。フラグ判定部141は、constrainedintrapredflagの値を判定し、処理対象である当該領域に対して、制約付きイントラ予測を行うか、通常のイントラ予測インター予測により再構成された画素からのイントラ予測も許可するモードを行うかを決定し、どちらのイントラ予測を行うかを指示する制御指示を、候補予測画像生成部131、利用可否判定部142、および補間画素生成部143に供給する。候補予測画像生成部131は、当該領域の周辺に位置する周辺領域の画素値である周辺画素値をフレームメモリ112から取得する。候補予測画像生成部131は、フラグ判定部141から供給された制御指示により通常のイントラ予測が指定される場合、そのフレームメモリ112から取得した周辺画素値を用いて、各イントラ予測モードで、予測画像候補予測画像を生成し、その画素値候補予測画像画素値をコスト関数値算出部132に供給する。これに対して、フラグ判定部141から供給された制御指示により制約付きイントラ予測が指定される場合、候補予測画像生成部131は、フレームメモリ112から取得した周辺画素値の内、補間画素生成部143により画素の補間に使用される周辺画素値を、補間画素生成部143に供給する。そして、候補予測画像生成部131は、その補間された画素の画素値補間画素値を補間画素生成部143から取得する。候補予測画像生成部131は、フレームメモリ112から取得した周辺画素値と、その補間画素値とを用いて、各イントラ予測モードで、予測画像候補予測画像を生成し、その画素値候補予測画像画素値をコスト関数値算出部132に供給する。コスト関数値算出部132は、画面並べ替えバッファ102から入力画像の画素値入力画像画素値を取得し、その入力画像画素値と候補予測画像画素値とを用いて、AVCやHEVC等の場合と同様の方法で各モードのコスト関数値を算出する。コスト関数値算出部132は、算出したコスト関数値を予測モード判定部133に供給する。予測モード判定部133は、供給されたコスト関数値の大きさに基づいて、最適なイントラ予測モードを判定し、その判定結果最適イントラモードを予測画像生成部134に通知する。予測画像生成部134は、予測モード判定部133から通知された最適なイントラ予測モード最適イントラモードで予測画像を生成する。例えば、通常のイントラ予測の場合、予測画像生成部134は、フレームメモリ112から当該領域の周辺画素値を取得し、その周辺画素値を用いて予測画像を生成する。また、例えば、制約付きイントラ予測の場合、予測画像生成部134は、フレームメモリ112から当該領域の周辺画素値を取得するとともに、補間画素生成部143から補間画素値を取得し、それらを用いて予測画像を生成する。また、予測画像生成部134は、生成した予測画像の画素値予測画像画素値を予測画像選択部116に供給する。予測画像選択部116において最適な予測モードとしてイントラ予測が選択された場合、その予測画像が演算部103や演算部110に供給され、差分画像や再構築画像の生成に用いられる。また、その場合、予測画像生成部134は、最適イントラモードとした予測モード予測画像の予測モードを示す情報であるイントラモード情報を可逆符号化部106に供給し、符号化側に伝送させる。さらに、その場合、予測画像生成部134は、最適イントラモードとした予測モード予測画像の予測モードをモードバッファ135に供給する。モードバッファ135は、予測画像選択部116において選択された最適な予測モードの情報を記憶する。つまり、モードバッファ135は、予測画像生成部134から供給される最適なイントラ予測モードに関する情報、若しくは、動き予測補償部115から供給される最適なインター予測モードに関する情報を取得し、記憶する。モードバッファ135は、所定のタイミングにおいて、若しくは、外部からの要求に基づいて、記憶している予測モードを周辺領域予測モードとして利用可否判定部142に供給する。つまり、当該領域の予測モードが、その当該領域の予測モードより後に処理される領域に対する制約付きイントラ予測において、周辺領域予測モードとして利用される。フラグ判定部141により制約付きイントラ予測を行うと判定された場合、利用可否判定部142は、モードバッファ135から周辺領域予測モードを取得し、周辺画素が利用可能か否かを判定する。すなわち、利用可否判定部142は、当該領域の各周辺画素について、インター予測により生成された周辺画素を利用不可と判定し、イントラ予測により生成された周辺画素を利用可と判定する。利用可否判定部142は、その判定結果を補間画素生成部143に通知する。フラグ判定部141により制約付きイントラ予測を行うと判定された場合、補間画素生成部143は、利用可否判定部142から供給される判定結果を取得する。そして、補間画素生成部143は、利用不可の画素すなわち、インター予測された画素について、補間処理を行う。つまり、補間画素生成部143は、利用不可の画素の補間に必要な周辺画素値を、候補予測画像生成部131から取得し、その周辺画素値を用いて補間処理を行う。その際、補間画素生成部143は、補間する画素の位置に応じた補間画素値を生成する。補間画素生成部143は、補間により生成した画素値補間画素値を候補予測画像生成部131および予測画像生成部134に供給する。[補間処理]次に、補間画素生成部143による補間処理の詳細について説明する。上述したように、従来の方法の場合、垂直方向若しくは水平方向に連続する利用不可の周辺画素群の各画素に対して同一の値による画素の補間が行われていた。このため、効率の良いイントラ予測処理が行えず、特に、グラデーションのようにブロック内において画素値の変化がある入力信号に対して、十分な符号化効率を達成することが困難であった。これに対して補間画素生成部143は、図7に示されるように、画素の位置に応じた補間処理を行う。図7において、画素qおよび画素rを、イントラ予測により生成された利用可能availableな領域に属する周辺画素とする。また、画素pを補間対象の画素とする。つまり、画素pは、補間により生成されるべき画素すなわち、インター予測により生成された利用不可能notavailableな領域に属する周辺画素である。なお、以下において、画素qの画素値を画素値qと称する。また、画素rの画素値を画素値rと称する。さらに、画素pの補間画素値を補間画素値pと称する。図7に示されるように、画素pを含む利用不可能な画素が連続する部分画素列は、画素qと画素rに挟まれている。すなわち、画素qおよび画素rは、利用不可能notavailableな領域に隣接する利用可能availableな領域の、当該領域と、その利用不可能notavailableな領域との両方に隣接する画素である。また、図7に示されるように、距離t1は、画素qと画素pとの間の距離である。距離t2は、画素rと画素pとの間の距離である。つまり、距離t1および距離t2は、補間対象の画素と、その補間対象の画素の両側の、その補間対象の画素に最も近い、利用可能availableな領域に属する画素との間の距離である。補間画素生成部143は、以下の式3を用いて、画素pの位置に応じた値の補間画素値pを算出する。p3なお、図7においては、水平方向について示されているが、補間画素生成部143は、垂直方向の場合も同様に補間する。例えば、図5の、インター予測されたHやI等の領域の周辺画素についても、式3を用いて補間画素値を算出する。つまり、補間画素生成部143は、制約付きイントラ予測において、予測に利用される周辺画素であって、水平方向若しくは垂直方向に、利用可能な周辺画素に挟まれる1つ若しくは連続する複数の利用不可能な周辺画素に対して、その位置に応じた値の補間画素値を生成する。より具体的には、補間画素生成部143は、式3に示されるように、利用可能な周辺画素との距離に応じた値の補間画素値を生成する。以上のように、補間画素生成部143は、補間する画素の位置に応じた補間画素値を生成する。このようにすることにより、補間画素生成部143は、例えばグラデーション等のような画素値が変化する部分の画素を補間する場合も、その変化を、上述した従来の補間方法の場合よりも正しく再現することができる。なお、式3の演算を除算ではなくシフト演算で実現することができるように、式3の分母の代わりに、2のべき乗2nの近似値を用いるようにしてもよい。水平方向若しくは垂直方向に連続するインター予測された周辺領域の合計サイズは、2のべき乗にならない場合があり、その場合、式3の演算において除算が必要になり、負荷が増大する可能性がある。そこで、式3の分母に2のべき乗の近似値、すなわち、t1t2の値に最も近い2のべき乗の値を、t1t2の代わりに用いるようにする。このようにすることにより、式3の割り算をシフト演算により実現することができるので、負荷の増大を抑制することができる。さらに、以上においては、補間対象の画素をその両側の利用可能な1画素合計2画素を用いて補間するように説明したが、これに限らず、例えば、両側の2画素以上合計4画素以上を用いて補間するようにしてもよい。また、その際、図7に示されるような補間対象の画素群の画素値補間画素値を、上述した式3を用いた場合のように、その画素の位置に応じて直線的に変化させるようにしてもよいし、上述した式3とは異なるn次関数を用いてn次曲線的に変化させるようにしてもよい。また、補間に用いる画素は、イントラ予測された領域の、当該領域とインター予測された領域に隣接する画素であるように説明したが、これに限らない。しかしながら、できるだけ補間対象の画素に近い位置の画素を用いる方が望ましい。また、従来の方法の場合、片側のみの画素値が利用可availableであるときは、式2を用いて補間されていた。しかしながら、当該領域の左上の画素について、このような補間処理を行うと、符号化効率を低減させる恐れがあった。そこで、補間画素生成部143は、当該領域の左上の画素について、以下のように補間処理を行う。図8において、例えば、画素pが、当該領域CUnの左上の周辺画素であり、インター予測により生成された利用不可能notavailableな領域に属する周辺画素である場合、その画素pの左に隣接する画素qの画素値画素値q、若しくは、画素pの下に隣接する画素rの画素値画素値rを補間画素値pとする。画素qがイントラ予測により生成された利用可能availableな領域に属する周辺画素である場合、補間画素生成部143は、画素qの画素値画素値qを補間画素値pとする。また、画素qがインター予測により生成された利用不可能notavailableな領域に属する周辺画素であり、画素rがイントラ予測により生成された利用可能availableな領域に属する周辺画素である場合、補間画素生成部143は、画素qの画素値画素値qを補間画素値pとする。さらに、画素qおよび画素rがともにインター予測により生成された利用不可能notavailableな領域に属する周辺画素である場合、補間画素生成部143は、補間画素値pの生成当該領域の左上の周辺画素pの補間処理を省略する。このように、補間画素生成部143は、当該領域の左上の周辺画素については、水平方向だけでなく、垂直方向の隣接画素も用いて補間処理を行う。つまり、補間画素生成部143は、当該領域の左上の周辺画素の補間処理を、上述した他の周辺画素とは異なる方法で行い、補間する画素の位置に応じた補間画素値を生成する。このようにすることにより、補間画素生成部143は、当該領域左上の周辺画素を、その周辺画素により近い画素によって補間することができる。したがって、補間画素生成部143は、上述した従来の補間方法の場合よりも正しい補間結果を得ることができる。なお、画素qおよび画素rがともにインター予測により生成された利用不可能notavailableな領域に属する周辺画素である場合、補間画素生成部143は、補間画素値pを、その2画素以外の任意の画素を用いて生成するようにしてもよい。つまり、補間画素値の正しさに拘らず、当該領域の左上の周辺画素に、利用可能な画素値を用意することを優先させるようにしてもよい。このように、当該領域の左上の周辺画素を利用可能とすることにより、その他の画素の画素値を補間する際に、必ず、その両側の画素値を用いて補間を行うことができるようになる。したがって、例えばグラデーションのような画素値が変化する部分の画素を補間する場合、片側の画素を用いて補間を行う場合よりも正しい補間結果を得ることができる。なお、その場合も、できるだけ補間対象の画素に近い位置の画素を用いるようにするのが望ましい。以上のように、制約付きイントラ予測を行うことにより、イントラ予測部114は、より正しい補間結果を用いて制約付きイントラ予測を行うことができるので、イントラ予測の予測精度を向上させることができる。したがって、画像符号化装置100は、符号化効率を向上させることができる。[符号化処理の流れ]次に、以上のような画像符号化装置100により実行される各処理の流れについて説明する。最初に、図9のフローチャートを参照して、符号化処理の流れの例を説明する。ステップS101において、AD変換部101は入力された画像をAD変換する。ステップS102において、画面並べ替えバッファ102は、AD変換された画像を記憶し、各ピクチャの表示する順番から符号化する順番への並べ替えを行う。ステップS103において、イントラ予測部114は、イントラ予測処理を行う。ステップS104において、動き予測補償部115は、インター動き予測処理を行う。ステップS105において、予測画像選択部116は、イントラ予測により生成された予測画像、および、インター予測により生成された予測画像の内、いずれか一方を選択する。なお、この選択結果最適予測モードを示す情報は、モードバッファ135に記憶される。ステップS106において、演算部103は、ステップS103の処理により並び替えられた画像と、ステップS105の処理により選択された予測画像との差分を演算する差分画像を生成する。生成された差分画像は元の画像に較べてデータ量が低減される。したがって、画像をそのまま符号化する場合に比べて、データ量を圧縮することができる。ステップS107において、直交変換部104は、ステップS106の処理により生成された差分画像を直交変換する。具体的には、離散コサイン変換、カルーネンレーベ変換等の直交変換が行われ、直交変換係数が出力される。ステップS108において、量子化部105は、ステップS107の処理により得られた直交変換係数を量子化する。ステップS108の処理により量子化された差分画像は、次のようにして局部的に復号される。すなわち、ステップS109において、逆量子化部108は、ステップS108の量子化処理により生成された量子化された直交変換係数量子化係数とも称するを逆量子化する。ステップS110において、逆直交変換部109は、ステップS109の逆量子化処理により得られた直交変換係数を、直交変換部104の特性に対応する特性で逆直交変換する。これにより差分画像が復元される。ステップS111において、演算部110は、ステップS105において選択された予測画像を、ステップS110において生成された差分画像に加算し、局部的に復号された復号画像再構成画像を生成する。ステップS112において、ループフィルタ111は、ステップS111の処理により得られた再構成画像に対して、デブロックフィルタ処理や適応ループフィルタ処理等を含むループフィルタ処理を適宜行い、復号画像を生成する。ステップS113において、フレームメモリ112は、ステップS112の処理により生成された復号画像、若しくは、ステップS111の処理により生成された再構成画像を記憶する。ステップS114において、可逆符号化部106は、ステップS107の処理により量子化された直交変換係数を符号化する。すなわち、差分画像に対して、可変長符号化や算術符号化等の可逆符号化が行われる。なお、可逆符号化部106は、予測に関する情報や、量子化に関する情報や、フィルタ処理に関する情報等を符号化し、ビットストリームに付加する。ステップS115において、蓄積バッファ107は、ステップS114の処理により得られたビットストリームを蓄積する。蓄積バッファ107に蓄積された符号化データは、適宜読み出され、伝送路や記録媒体を介して復号側に伝送される。ステップS116においてレート制御部117は、ステップS115の処理により蓄積バッファ107に蓄積された符号化データの符号量発生符号量に基づいて、オーバーフローあるいはアンダーフローが発生しないように、量子化部105の量子化動作のレートを制御する。ステップS116の処理が終了すると、符号化処理が終了される。[イントラ予測処理の流れ]次に、図10のフローチャートを参照して、イントラ予測処理の流れの例を説明する。イントラ予測処理が開始されると、ステップS131において、フラグ判定部141は、制約付きイントラ予測を行うか否かを判定する。constrainedintrapredflag=1であり、制約付きイントラ予測を行うと判定された場合、フラグ判定部141は、処理をステップS132に進める。ステップS132において、利用可否判定部142は、周辺領域予測モードをモードバッファ135から取得し、その情報に基づいて、当該領域の左上の周辺画素の画素値は、利用可能であるか否かを判定する。利用可能でないと判定した場合、利用可否判定部142は、処理をステップS133に進める。ステップS133において、利用可否判定部142は、モードバッファ135から取得した周辺領域予測モードに基づいて、当該領域の左上の周辺画素の代替えとなる画素例えば、当該領域の左上の周辺画素の右若しくは下の画素の画素値は利用可能であるか否かを判定する。代替えとなる画素が利用可能であると判定された場合、利用可否判定部142は、処理をステップS134に進める。ステップS134において、補間画素生成部143は、左上の画素の画素値を、図8を参照して説明したように、水平方向の周辺画素だけでなく垂直方向の周辺画素も候補として補間する。補間が終了すると、補間画素生成部143は、処理をステップS135に進める。また、ステップS133において、代替えとなる画素が利用不可能であると判定された場合、利用可否判定部142は、ステップS134の処理を省略し、ステップS135に処理を進める。また、ステップS132において、当該領域の左上の周辺画素の画素値が利用可能であると判定された場合、利用可否判定部142は、ステップS133およびステップS134の処理を省略し、ステップS135に処理を進める。ステップS135において、利用可否判定部142は、周辺領域予測モードに基づいて、当該領域の左上以外の周辺画素について、画素値を利用不可能な画素が存在するか否かを判定する。画素値を利用不可能な画素が存在すると判定された場合、利用可否判定部142は、処理をステップS136に進める。ステップS136において、補間画素生成部143は、利用不可能な画素の、その位置に応じた補間画素値を、図7を参照して上述したように生成する。補間が終了すると、補間画素生成部143は、処理をステップS137に進める。また、ステップS135において、画素値を利用不可能な画素が存在しないと判定された場合、利用可否判定部142は、ステップS136の処理を省略し、ステップS137に処理を進める。さらに、ステップS131において、制約付きイントラ予測を行わない通常のイントラ予測を行うと判定された場合、フラグ判定部141は、ステップS132乃至ステップS136の処理を省略し、ステップS137に処理を進める。ステップS137において、候補予測画像生成部131は、各モードで当該領域のイントラ予測を行う。ステップS138において、コスト関数値算出部132は、各モードのコスト関数値を算出する。ステップS139において、予測モード判定部133は、最適イントラ予測モードを決定する。ステップS140において、予測画像生成部134は、最適イントラ予測モードで予測画像を生成する。ステップS140の処理が終了すると、予測画像生成部134は、イントラ予測処理を終了し、処理を図9に戻す。以上のように各処理を行うことにより、画像符号化装置100は、符号化効率を向上させることができる。<2.第2の実施の形態>[画像復号装置]次に、以上のように符号化された符号化データの復号について説明する。図11は、図1の画像符号化装置100に対応する画像処理装置である画像復号装置の主な構成例を示すブロック図である。図11に示される画像復号装置200は、画像符号化装置100が生成した符号化データを、その符号化方法に対応する復号方法で復号する。図11に示されるように画像復号装置200は、蓄積バッファ201、可逆復号部202、逆量子化部203、逆直交変換部204、演算部205、ループフィルタ206、画面並べ替えバッファ207、およびDA変換部208を有する。また、画像復号装置200は、フレームメモリ209、選択部210、イントラ予測部211、動き予測補償部212、および選択部213を有する。さらに、画像復号装置200は、制約付きイントラ予測部221を有する。蓄積バッファ201は、伝送されてきた符号化データを蓄積し、所定のタイミングにおいてその符号化データを可逆復号部202に供給する。可逆復号部202は、蓄積バッファ201より供給された、図1の可逆符号化部106により符号化された情報を、可逆符号化部106の符号化方式に対応する方式で復号する。可逆復号部202は、復号して得られた差分画像の量子化された係数データを、逆量子化部203に供給する。また、可逆復号部202は、符号化データを復号して得られた最適な予測モードに関する情報を参照し、最適な予測モードにイントラ予測モードが選択されたかインター予測モードが選択されたかを判定する。つまり、可逆復号部202は、伝送されてきた符号化データにおいて採用された予測モードが、イントラ予測であるか、インター予測であるかを判定する。可逆復号部202は、その判定結果に基づいて、その予測モードに関する情報を、イントラ予測部211若しくは動き予測補償部212に供給する。例えば、画像符号化装置100において最適な予測モードとしてイントラ予測モードが選択された場合、可逆復号部202は、符号化側から供給された、その選択されたイントラ予測モードに関する情報であるイントラ予測情報をイントラ予測部211に供給する。また、例えば、画像符号化装置100において最適な予測モードとしてインター予測モードが選択された場合、可逆復号部202は、符号化側から供給された、その選択されたインター予測モードに関する情報であるインター予測情報を動き予測補償部212に供給する。逆量子化部203は、可逆復号部202により復号されて得られた量子化された係数データを逆量子化する。つまり、逆量子化部203は、図1の量子化部105の量子化方式に対応する方式で逆量子化を行う。逆量子化部203は、その逆量子化により得られた係数データを逆直交変換部204に供給する。逆直交変換部204は、図1の直交変換部104の直交変換方式に対応する方式で逆量子化部203から供給される係数データを逆直交変換する。逆直交変換部204は、この逆直交変換処理により、画像符号化装置100において直交変換される前の差分画像に対応する差分画像を得る。逆直交変換されて得られた差分画像は、演算部205に供給される。また、演算部205には、選択部213を介して、イントラ予測部211若しくは動き予測補償部212から予測画像が供給される。演算部205は、差分画像と予測画像とを加算し、画像符号化装置100の演算部103により予測画像が減算される前の画像に対応する再構成画像を得る。演算部205は、その再構成画像をループフィルタ206に供給する。ループフィルタ206は、供給された再構成画像に対して、デブロックフィルタ処理や適応ループフィルタ処理等を含むループフィルタ処理を適宜施して復号画像を生成する。例えば、ループフィルタ206は、再構成画像に対してデブロックフィルタ処理を行うことにより、ブロック歪を除去する。また、例えば、ループフィルタ206は、そのデブロックフィルタ処理結果ブロック歪みの除去が行われた再構成画像に対して、ウィナーフィルタWienerFilterを用いてループフィルタ処理を行うことにより画質改善を行う。なお、ループフィルタ206が行うフィルタ処理の種類は任意であり、上述した以外のフィルタ処理を行ってもよい。また、ループフィルタ206が、図1の画像符号化装置100から供給されたフィルタ係数を用いてフィルタ処理を行うようにしてもよい。ループフィルタ206は、フィルタ処理結果である復号画像を画面並べ替えバッファ207およびフレームメモリ209に供給する。なお、このループフィルタ206によるフィルタ処理は省略することもできる。つまり、演算部205の出力が、フィルタ処理されずに、フレームメモリ209に格納されるようにすることもできる。例えば、イントラ予測部211は、この画像に含まれる画素の画素値を周辺画素の画素値として利用する。画面並べ替えバッファ207は、供給された復号画像の並べ替えを行う。すなわち、図1の画面並べ替えバッファ102により符号化の順番のために並べ替えられたフレームの順番が、元の表示の順番に並べ替えられる。DA変換部208は、画面並べ替えバッファ207から供給された復号画像をDA変換し、図示せぬディスプレイに出力し、表示させる。フレームメモリ209は、供給される再構成画像や復号画像を記憶する。また、フレームメモリ209は、所定のタイミングにおいて、若しくは、イントラ予測部211や動き予測補償部212等の外部の要求に基づいて、記憶している再構成画像や復号画像を、選択部210を介してイントラ予測部211や動き予測補償部212に供給する。イントラ予測部211は、図1のイントラ予測部114と基本的に同様の処理を行う。ただし、イントラ予測部211は、符号化の際にイントラ予測により予測画像が生成された領域に対してのみ、イントラ予測を行う。動き予測補償部212は、可逆復号部202から供給されるインター予測情報に基づいてインター動き予測処理を行い、予測画像を生成する。なお、動き予測補償部212は、可逆復号部202から供給されるインター予測情報に基づいて、符号化の際にインター予測が行われた領域に対してのみ、インター動き予測処理を行う。イントラ予測部211若しくは動き予測補償部212は、予測処理単位の領域毎に、生成した予測画像を、選択部213を介して演算部205に供給する。選択部213は、イントラ予測部211から供給される予測画像、若しくは、動き予測補償部212から供給される予測画像を演算部205に供給する。制約付きイントラ予測部221は、制約付きイントラ予測部121と同様に、constrainedintrapredflag=1の場合のイントラ予測制約付きイントラ予測のための周辺画素の補間に関する処理を行う。[制約付きイントラ予測部221等]図12は、制約付きイントラ予測等の主な構成例を示すブロック図である。図12に示されるように、イントラ予測部211は、予測モード情報バッファ231、予測画像生成部232、および周辺モードバッファ233を有する。また、制約付きイントラ予測部221は、フラグ判定部241、利用可否判定部242、および補間画素生成部243を有する。予測モード情報バッファ231は、可逆復号部202においてビットストリームが復号されて得られたイントラモード情報を取得し、記憶する。予測モード情報バッファ231は、当該領域がイントラ予測モードの場合、所定のタイミングにおいて、若しくは、外部からの要求に従って、記憶している当該領域の予測モードイントラ予測モードを予測画像生成部232に供給する。フラグ判定部241は、フラグ判定部141と同様の処理を行う。すなわち、フラグ判定部241は、符号化側から伝送されたconstrainedintrapredflagの値を判定し、処理対象である当該領域に対して、制約付きイントラ予測を行うか、通常のイントラ予測インター予測により再構成された画素からのイントラ予測も許可するモードを行うかを決定する。なお、このconstrainedintrapredflagは、例えば、シーケンスパラメータセットやピクチャパラメータセット等に含められて符号化側画像符号化装置100から伝送される。そして、そのconstrainedintrapredflagは、例えば、可逆復号部202において抽出され、フラグ判定部241に供給される。フラグ判定部241は、どちらのイントラ予測を行うかを指示する制御指示を、予測画像生成部232、利用可否判定部242、および補間画素生成部243に供給する。予測画像生成部232は、フラグ判定部141から供給された制御指示により通常のイントラ予測が指定される場合、予測モード情報バッファ231から供給されるイントラ予測モードにおける周辺画素値を、フレームメモリ209から取得する。予測画像生成部232は、その周辺画素値を用いて、予測モード情報バッファ231から供給されるイントラ予測モードで予測画像を生成し、その画素値予測画像画素値を演算部205に供給する。これに対して、フラグ判定部241から供給された制御指示により制約付きイントラ予測が指定される場合、予測画像生成部232は、予測モード情報バッファ231から供給されるイントラ予測モードにおける周辺画素値を、フレームメモリ209から取得する。フラグ判定部241は、さらに、そのフレームメモリ209から取得した周辺画素値の内、補間画素生成部243により画素の補間に使用される周辺画素値を、補間画素生成部243に供給する。そして、予測画像生成部232は、その補間された画素の画素値補間画素値を補間画素生成部243から取得する。予測画像生成部232は、フレームメモリ209から取得した周辺画素値と、その補間画素値とを用いて、予測モード情報バッファ231から供給されるイントラ予測モードで、予測画像候補予測画像を生成し、その画素値予測画像画素値を演算部205に供給する。周辺モードバッファ233は、当該領域の予測モードの情報を記憶する。つまり、周辺モードバッファ233は、予測モード情報バッファ231から供給されるイントラ予測モードに関する情報、若しくは、動き予測補償部212から供給される最適なインター予測モードに関する情報を取得し、記憶する。周辺モードバッファ233は、所定のタイミングにおいて、若しくは、外部からの要求に基づいて、記憶している予測モードを周辺領域予測モードとして利用可否判定部242に供給する。つまり、当該領域の予測モードが、その当該領域の予測モードより後に処理される領域に対する制約付きイントラ予測において、周辺領域予測モードとして利用される。フラグ判定部141により制約付きイントラ予測を行うと判定された場合、利用可否判定部242は、利用可否判定部142の場合と同様に、周辺モードバッファ233から周辺領域予測モードを取得し、周辺画素が利用可能か否かを判定する。利用可否判定部242は、その判定結果を補間画素生成部243に通知する。フラグ判定部141により制約付きイントラ予測を行うと判定された場合、補間画素生成部243は、補間画素生成部143の場合と同様に、利用可否判定部242から供給される判定結果に基づいて、利用不可の画素すなわち、インター予測された画素について、補間処理を行う。つまり、補間画素生成部243は、利用不可の画素の補間に必要な周辺画素値を、予測画像生成部232から取得し、その周辺画素値を用いて補間処理を行う。その際、補間画素生成部243は、補間画素生成部143の場合と同様に図7および図8を参照して説明したように、補間する画素の位置に応じた補間画素値を生成する。したがって、補間画素生成部243は、補間画素生成部143と同様の補間結果を得ることができ、イントラ予測部211は、イントラ予測部114と同様の予測を行うことができ、同様の予測画像を得ることができる。したがって、画像復号装置200は、画像符号化装置100において生成された符号化データを正しく復号することができ、符号化効率の向上を実現させることができる。[復号処理の流れ]次に、以上のような画像復号装置200により実行される各処理の流れについて説明する。最初に、図13のフローチャートを参照して、復号処理の流れの例を説明する。復号処理が開始されると、ステップS201において、蓄積バッファ201は、伝送されてきたビットストリームを蓄積する。ステップS202において、可逆復号部202は、蓄積バッファ201から供給されるビットストリーム符号化された差分画像情報を復号する。このとき、予測モード情報に関する情報等、ビットストリームに含められた差分画像情報以外の各種情報も復号される。ステップS203において、逆量子化部203は、ステップS202の処理により得られた、量子化された直交変換係数を逆量子化する。ステップS204において逆直交変換部204は、ステップS203において逆量子化された直交変換係数を逆直交変換する。ステップS205において、イントラ予測部211若しくは動き予測補償部212は、供給された情報を用いて予測処理を行う。ステップS206において、演算部205は、ステップS204において逆直交変換されて得られた差分画像情報に、ステップS205において生成された予測画像を加算する。これにより再構成画像が生成される。ステップS207において、ループフィルタ206は、ステップS206において得られた再構成画像に対して、デブロックフィルタ処理や適応ループフィルタ処理等を含むループフィルタ処理を適宜行う。ステップS208において、画面並べ替えバッファ207は、ステップS207においてフィルタ処理されて生成された復号画像の並べ替えを行う。すなわち画像符号化装置100の画面並べ替えバッファ102により符号化のために並べ替えられたフレームの順序が、元の表示の順序に並べ替えられる。ステップS209において、DA変換部208は、フレームの順序が並べ替えられた復号画像をDA変換する。この復号画像が図示せぬディスプレイに出力され、表示される。ステップS210において、フレームメモリ209は、ステップS207においてフィルタ処理されて得られた復号画像を記憶する。この復号画像は、インター予測処理において参照画像として利用される。ステップS210の処理が終了すると、復号処理が終了される。[予測処理の流れ]次に、図14のフローチャートを参照して、図13のステップS205において実行される予測処理の流れの例を説明する。予測処理が開始されると、可逆復号部202は、ステップS221において、当該領域がイントラ予測イントラ符号化が行われた領域であるか否かを判定する。当該領域が、イントラ予測が行われた領域であると判定された場合、可逆復号部202は、処理をステップS232に進める。この場合、イントラ予測部211および制約付きイントラ予測部221は、ステップS222において、イントラ予測処理を行う。予測画像が生成されると、イントラ予測部211は、予測処理を終了し、処理を図13に戻す。また、ステップS221において、当該領域が、インター予測が行われた領域であると判定した場合、可逆復号部202は、処理をステップS223に進める。ステップS223において、動き予測補償部212は、インター動き予測処理を行う。インター動き予測処理が終了すると、動き予測補償部212は、予測処理を終了し、処理を図13に戻す。[イントラ予測処理の流れ]図15のフローチャートを参照して、図14のステップS222において実行されるイントラ予測処理の流れの例を説明する。イントラ予測処理が開始されると、ステップS241乃至ステップS246の各処理が、図10のステップS131乃至ステップS136の各処理と同様に実行される。つまり、制約付きイントラ予測の画素補間に関する処理は、符号化の際と基本的に同様に行われる。ステップS247において、予測モード情報バッファ231は、ビットストリームより抽出されたイントラモード情報を取得する。ステップS248において、予測画像生成部232は、ステップS247において取得されたイントラモード情報において指定される予測モードで、フレームメモリ209から取得した周辺画素値や補間画素生成部243により生成された補間画素値を適宜用いて、予測画像を生成する。予測画像が生成されると、予測画像生成部232は、イントラ予測処理を終了する。以上のように各処理を行うことにより、画像復号装置200は、画像符号化装置100において生成された符号化データを正しく復号することができ、符号化効率の向上を実現させることができる。<3.第1の実施の形態>[制約付きイントラ予測部の他の例]上述した非特許文献2に記載の従来の補間方法と、上述した本技術の補間方法とを、当該領域の大きさに応じて切り替えるようにしも良い。例えば、当該領域が所定の閾値より小さい場合、本技術の補間方法を適用し、当該領域が所定の閾値より大きい場合、非特許文献2に記載の従来の補間方法を適用するようにする。テクスチャを含む画像は、より小さな領域が選択されやすい。換言するに、小さな領域の画像は、高周波成分を多く含む細かな画像である可能性が高い。そのため、小さな領域に対して、非特許文献2に記載の従来の方法を適用すると、画像の劣化が大きい。これに対して、テクスチャを含まない画像は、より大きな領域が選択されやすい。換言するに、大きな領域の画像は、高周波成分を多く含まない画像である可能性が高い。したがって、非特許文献2に記載の従来の方法を適用することでの劣化は小さい。したがって、小さな領域に対してのみ、本技術の補間方法を適用するようにしても符号化効率の向上を実現することができる。[制約付きイントラ予測部等]図16は、この場合の制約付きイントラ予測部等の主な構成例を示すブロック図である。図16に示されるように、イントラ予測部114は、図6を参照して説明した場合と同様の構成を有する。また、制約付きイントラ予測部121は、図6を参照して説明した場合と基本的に同様の構成を有するが、フラグ判定部141の代わりに、フラグサイズ閾値判定部341を有する。フラグサイズ閾値判定部341は、constrainedintrapredflagの値を判定するだけでなく、所定の閾値を用いた当該領域のサイズ判定を行う。つまり、フラグサイズ閾値判定部341は、当該領域のサイズに応じて本技術を適用するか否かを制御する所定の閾値を予め記憶している。フラグサイズ閾値判定部341は、当該領域の大きさが、その閾値以下であるか否かを判定する。そして、フラグサイズ閾値判定部341は、それらの判定結果に基づいて、制約付きイントラ予測を行うか否か、行う場合、本技術の補間方法を適用するか否か等を指定する制御指示を、候補予測画像生成部131、利用可否判定部142、および補間画素生成部143に供給する。候補予測画像生成部131、利用可否判定部142、および補間画素生成部143は、その制御指示に基づいて、通常のイントラ予測を行うか、従来の補間方法を用いた制約付きイントラ予測を行うか、若しくは、本技術の補間方法を用いた制約付きイントラ予測を行うかを決定し、それぞれの処理を行う。このようにすることにより、大きな領域に対してのみ本技術の補間方法を適用し、その演算量を増大させ、補間処理の負荷を増大させることを抑制しながら、符号化効率を向上させることができる。なお、上述した閾値は、ビットストリームのシーケンスパラメータセット等任意の位置に含めて復号側に伝送されるようにしても良い。また、上述した閾値は、例えば画枠サイズ等、プロファイルレベルに応じて規定されるようにしても良い。[符号化側のイントラ予測処理の流れ]図17のフローチャートを参照して、この場合のイントラ予測部114および制約付きイントラ予測部121によるイントラ予測処理の流れの例を説明する。この場合も、基本的に図10のフローチャートを参照して説明した第1の実施の形態の場合と同様に各処理が行われる。すなわち、ステップS301、ステップS303乃至ステップS307、並びに、ステップS309乃至ステップS312の各処理は、図10のステップS131乃至ステップS140の各処理と同様に行われる。ただし、図17の場合、フラグサイズ閾値判定部341は、ステップS301において制約付きイントラ予測が行われるか否かを判定し、行われると判定された場合、処理をステップS302に進め、さらに、当該領域のサイズが閾値以下であるか否かを判定する。当該領域のサイズが所定の閾値以下である場合、フラグサイズ閾値判定部341は、処理をステップS303に進める。すなわち、この場合、図10の場合と同様に、本技術の補間方法を適用した制約付きイントラ予測が行われる。これに対して、ステップS302において、当該領域のサイズが閾値より大きいと判定された場合、フラグサイズ閾値判定部341は、処理をステップS308に進める。ステップS308において、利用可否判定部142および補間画素生成部143は、非特許文献2に記載の従来の補間方法を適用した制約付きイントラ予測を行う。ステップS308の処理が終了すると、補間画素生成部143は、処理をステップS309に進める。なお、ステップS301において、制約付きイントラ予測を行わないと判定された場合、フラグサイズ閾値判定部341は、処理をステップS309に進める。このようにすることにより、大きな領域に対してのみ本技術の補間方法を適用することができ、画像符号化装置100は、補間処理の負荷の増大を抑制しながら、符号化効率を向上させることができる。[制約付きイントラ予測部等]図18は、この場合の制約付きイントラ予測部等の主な構成例を示すブロック図である。図18に示されるように、イントラ予測部211は、図12を参照して説明した場合と同様の構成を有する。また、制約付きイントラ予測部221は、図12を参照して説明した場合と基本的に同様の構成を有するが、フラグ判定部241の代わりに、フラグサイズ閾値判定部441を有する。フラグサイズ閾値判定部441は、フラグサイズ閾値判定部341と同様の処理部であり、constrainedintrapredflagの値を判定するだけでなく、所定の閾値を用いた当該領域のサイズ判定を行う。フラグサイズ閾値判定部441は、それらの判定結果に基づいて、制御指示を、予測画像生成部232、利用可否判定部242、および補間画素生成部243に供給する。予測画像生成部232、利用可否判定部242、および補間画素生成部243は、その制御指示に基づいて、通常のイントラ予測を行うか、従来の補間方法を用いた制約付きイントラ予測を行うか、若しくは、本技術の補間方法を用いた制約付きイントラ予測を行うかを決定し、それぞれの処理を行う。このようにすることにより、符号化側と同様に、大きな領域に対してのみ本技術の補間方法を適用することができるので、画像復号装置200は、補間処理の負荷の増大を抑制しながら、符号化効率を向上させることができる。[復号側のイントラ予測処理の流れ]図19のフローチャートを参照して、この場合のイントラ予測部211および制約付きイントラ予測部221によるイントラ予測処理の流れの例を説明する。この場合も、第2の実施の形態の場合と同様に、符号化側と同様に各処理を行うことができる。すなわち、図19のステップS401乃至ステップS408の各処理は、図17のステップS301乃至ステップS308の各処理と同様に行われる。また、ステップS409およびステップS410の各処理は、図15のステップS247およびステップS248の各処理と同様にすなわち、第2の実施の形態の場合と同様に行われる。このようにすることにより、符号化側と同様に、大きな領域に対してのみ本技術の補間方法を適用することができ、画像復号装置200は、補間処理の負荷の増大を抑制しながら、符号化効率を向上させることができる。なお、本技術を適用する符号化復号方式は任意であり、制約付きイントラ予測処理を用いる方式であればどのような符号化復号方式に適用することもできる。なお、本技術は、例えば、MPEG、H.26x等の様に、離散コサイン変換等の直交変換と動き補償によって圧縮された画像情報ビットストリームを、衛星放送、ケーブルテレビジョン、インターネット、または携帯電話機などのネットワークメディアを介して受信する際に用いられる画像符号化装置および画像復号装置に適用することができる。また、本技術は、光、磁気ディスク、およびフラッシュメモリのような記憶メディア上で処理する際に用いられる画像符号化装置および画像復号装置に適用することができる。さらに、本技術は、それらの画像符号化装置および画像復号装置などに含まれる動き予測補償装置にも適用することができる。<4.第4の実施の形態>[コンピュータ]上述した一連の処理は、ハードウエアにより実行することもできるし、ソフトウエアにより実行することもできる。一連の処理をソフトウエアにより実行する場合には、そのソフトウエアを構成するプログラムが、コンピュータにインストールされる。ここで、コンピュータには、専用のハードウエアに組み込まれているコンピュータや、各種のプログラムをインストールすることで、各種の機能を実行することが可能な汎用のパーソナルコンピュータなどが含まれる。図20において、パーソナルコンピュータ500のCPUCentralProcessingUnit501は、ROMReadOnlyMemory502に記憶されているプログラム、または記憶部513からRAMRandomAccessMemory503にロードされたプログラムに従って各種の処理を実行する。RAM503にはまた、CPU501が各種の処理を実行する上において必要なデータなども適宜記憶される。CPU501、ROM502、およびRAM503は、バス504を介して相互に接続されている。このバス504にはまた、入出力インタフェース510も接続されている。入出力インタフェース510には、キーボード、マウスなどよりなる入力部511、CRTCathodeRayTubeやLCDLiquidCrystalDisplayなどよりなるディスプレイ、並びにスピーカなどよりなる出力部512、ハードディスクなどより構成される記憶部513、モデムなどより構成される通信部514が接続されている。通信部514は、インターネットを含むネットワークを介しての通信処理を行う。入出力インタフェース510にはまた、必要に応じてドライブ515が接続され、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどのリムーバブルメディア521が適宜装着され、それらから読み出されたコンピュータプログラムが、必要に応じて記憶部513にインストールされる。上述した一連の処理をソフトウエアにより実行させる場合には、そのソフトウエアを構成するプログラムが、ネットワークや記録媒体からインストールされる。この記録媒体は、例えば、図20に示されるように、装置本体とは別に、ユーザにプログラムを配信するために配布される、プログラムが記録されている磁気ディスクフレキシブルディスクを含む、光ディスクCDROMCompactDiscReadOnlyMemoryDVDDigitalVersatileDiscを含む、光磁気ディスクMDMiniDiscを含む、若しくは半導体メモリなどよりなるリムーバブルメディア521により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに配信される、プログラムが記録されているROM502や、記憶部513に含まれるハードディスクなどで構成される。なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。また、本明細書において、記録媒体に記録されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。また、本明細書において、システムとは、複数のデバイス装置により構成される装置全体を表すものである。また、以上において、1つの装置または処理部として説明した構成を分割し、複数の装置または処理部として構成するようにしてもよい。逆に、以上において複数の装置または処理部として説明した構成をまとめて1つの装置または処理部として構成されるようにしてもよい。また、各装置または各処理部の構成に上述した以外の構成を付加するようにしてももちろんよい。さらに、システム全体としての構成や動作が実質的に同じであれば、ある装置または処理部の構成の一部を他の装置または他の処理部の構成に含めるようにしてもよい。つまり、本技術は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。上述した実施形態に係る画像符号化装置及び画像復号装置は、衛星放送、ケーブルTVなどの有線放送、インターネット上での配信、及びセルラー通信による端末への配信などにおける送信機若しくは受信機、光ディスク、磁気ディスク及びフラッシュメモリなどの媒体に画像を記録する記録装置、又は、これら記憶媒体から画像を再生する再生装置などの様々な電子機器に応用され得る。以下、4つの応用例について説明する。<5.第5の実施の形態>[第1の応用例:テレビジョン受像機]図21は、上述した実施形態を適用したテレビジョン装置の概略的な構成の一例を示している。テレビジョン装置900は、アンテナ901、チューナ902、デマルチプレクサ903、デコーダ904、映像信号処理部905、表示部906、音声信号処理部907、スピーカ908、外部インタフェース909、制御部910、ユーザインタフェース911、及びバス912を備える。チューナ902は、アンテナ901を介して受信される放送信号から所望のチャンネルの信号を抽出し、抽出した信号を復調する。そして、チューナ902は、復調により得られた符号化ビットストリームをデマルチプレクサ903へ出力する。即ち、チューナ902は、画像が符号化されている符号化ストリームを受信する、テレビジョン装置900における伝送部としての役割を有する。デマルチプレクサ903は、符号化ビットストリームから視聴対象の番組の映像ストリーム及び音声ストリームを分離し、分離した各ストリームをデコーダ904へ出力する。また、デマルチプレクサ903は、符号化ビットストリームからEPGElectronicProgramGuideなどの補助的なデータを抽出し、抽出したデータを制御部910に供給する。なお、デマルチプレクサ903は、符号化ビットストリームがスクランブルされている場合には、デスクランブルを行ってもよい。デコーダ904は、デマルチプレクサ903から入力される映像ストリーム及び音声ストリームを復号する。そして、デコーダ904は、復号処理により生成される映像データを映像信号処理部905へ出力する。また、デコーダ904は、復号処理により生成される音声データを音声信号処理部907へ出力する。映像信号処理部905は、デコーダ904から入力される映像データを再生し、表示部906に映像を表示させる。また、映像信号処理部905は、ネットワークを介して供給されるアプリケーション画面を表示部906に表示させてもよい。また、映像信号処理部905は、映像データについて、設定に応じて、例えばノイズ除去などの追加的な処理を行ってもよい。さらに、映像信号処理部905は、例えばメニュー、ボタン又はカーソルなどのGUIGraphicalUserInterfaceの画像を生成し、生成した画像を出力画像に重畳してもよい。表示部906は、映像信号処理部905から供給される駆動信号により駆動され、表示デバイス例えば、液晶ディスプレイ、プラズマディスプレイ又はOELDOrganicElectroLuminescenceDisplay有機ELディスプレイなどの映像面上に映像又は画像を表示する。音声信号処理部907は、デコーダ904から入力される音声データについてDA変換及び増幅などの再生処理を行い、スピーカ908から音声を出力させる。また、音声信号処理部907は、音声データについてノイズ除去などの追加的な処理を行ってもよい。外部インタフェース909は、テレビジョン装置900と外部機器又はネットワークとを接続するためのインタフェースである。例えば、外部インタフェース909を介して受信される映像ストリーム又は音声ストリームが、デコーダ904により復号されてもよい。即ち、外部インタフェース909もまた、画像が符号化されている符号化ストリームを受信する、テレビジョン装置900における伝送部としての役割を有する。制御部910は、CPUなどのプロセッサ、並びにRAM及びROMなどのメモリを有する。メモリは、CPUにより実行されるプログラム、プログラムデータ、EPGデータ、及びネットワークを介して取得されるデータなどを記憶する。メモリにより記憶されるプログラムは、例えば、テレビジョン装置900の起動時にCPUにより読み込まれ、実行される。CPUは、プログラムを実行することにより、例えばユーザインタフェース911から入力される操作信号に応じて、テレビジョン装置900の動作を制御する。ユーザインタフェース911は、制御部910と接続される。ユーザインタフェース911は、例えば、ユーザがテレビジョン装置900を操作するためのボタン及びスイッチ、並びに遠隔制御信号の受信部などを有する。ユーザインタフェース911は、これら構成要素を介してユーザによる操作を検出して操作信号を生成し、生成した操作信号を制御部910へ出力する。バス912は、チューナ902、デマルチプレクサ903、デコーダ904、映像信号処理部905、音声信号処理部907、外部インタフェース909及び制御部910を相互に接続する。このように構成されたテレビジョン装置900において、デコーダ904は、上述した実施形態に係る画像復号装置の機能を有する。それにより、テレビジョン装置900での画像の復号に際して、符号化効率の向上を実現することができる。<6.第6の実施の形態>[第2の応用例:携帯電話機]図22は、上述した実施形態を適用した携帯電話機の概略的な構成の一例を示している。携帯電話機920は、アンテナ921、通信部922、音声コーデック923、スピーカ924、マイクロホン925、カメラ部926、画像処理部927、多重分離部928、記録再生部929、表示部930、制御部931、操作部932、及びバス933を備える。アンテナ921は、通信部922に接続される。スピーカ924及びマイクロホン925は、音声コーデック923に接続される。操作部932は、制御部931に接続される。バス933は、通信部922、音声コーデック923、カメラ部926、画像処理部927、多重分離部928、記録再生部929、表示部930、及び制御部931を相互に接続する。携帯電話機920は、音声通話モード、データ通信モード、撮影モード及びテレビ電話モードを含む様々な動作モードで、音声信号の送受信、電子メール又は画像データの送受信、画像の撮像、及びデータの記録などの動作を行う。音声通話モードにおいて、マイクロホン925により生成されるアナログ音声信号は、音声コーデック923に供給される。音声コーデック923は、アナログ音声信号を音声データへ変換し、変換された音声データをAD変換し圧縮する。そして、音声コーデック923は、圧縮後の音声データを通信部922へ出力する。通信部922は、音声データを符号化及び変調し、送信信号を生成する。そして、通信部922は、生成した送信信号を、アンテナ921を介して基地局図示せずへ送信する。また、通信部922は、アンテナ921を介して受信される無線信号を増幅し及び周波数変換し、受信信号を取得する。そして、通信部922は、受信信号を復調及び復号して音声データを生成し、生成した音声データを音声コーデック923へ出力する。音声コーデック923は、音声データを伸張し及びDA変換し、アナログ音声信号を生成する。そして、音声コーデック923は、生成した音声信号をスピーカ924に供給して音声を出力させる。また、データ通信モードにおいて、例えば、制御部931は、操作部932を介するユーザによる操作に応じて、電子メールを構成する文字データを生成する。また、制御部931は、文字を表示部930に表示させる。また、制御部931は、操作部932を介するユーザからの送信指示に応じて電子メールデータを生成し、生成した電子メールデータを通信部922へ出力する。通信部922は、電子メールデータを符号化及び変調し、送信信号を生成する。そして、通信部922は、生成した送信信号を、アンテナ921を介して基地局図示せずへ送信する。また、通信部922は、アンテナ921を介して受信される無線信号を増幅し及び周波数変換し、受信信号を取得する。そして、通信部922は、受信信号を復調及び復号して電子メールデータを復元し、復元した電子メールデータを制御部931へ出力する。制御部931は、表示部930に電子メールの内容を表示させると共に、電子メールデータを記録再生部929の記憶媒体に記憶させる。記録再生部929は、読み書き可能な任意の記憶媒体を有する。例えば、記憶媒体は、RAM又はフラッシュメモリなどの内蔵型の記憶媒体であってもよく、ハードディスク、磁気ディスク、光磁気ディスク、光ディスク、USBUnallocatedSpaceBitmapメモリ、又はメモリカードなどの外部装着型の記憶媒体であってもよい。また、撮影モードにおいて、例えば、カメラ部926は、被写体を撮像して画像データを生成し、生成した画像データを画像処理部927へ出力する。画像処理部927は、カメラ部926から入力される画像データを符号化し、符号化ストリームを記憶再生部929の記憶媒体に記憶させる。また、テレビ電話モードにおいて、例えば、多重分離部928は、画像処理部927により符号化された映像ストリームと、音声コーデック923から入力される音声ストリームとを多重化し、多重化したストリームを通信部922へ出力する。通信部922は、ストリームを符号化及び変調し、送信信号を生成する。そして、通信部922は、生成した送信信号を、アンテナ921を介して基地局図示せずへ送信する。また、通信部922は、アンテナ921を介して受信される無線信号を増幅し及び周波数変換し、受信信号を取得する。これら送信信号及び受信信号には、符号化ビットストリームが含まれ得る。そして、通信部922は、受信信号を復調及び復号してストリームを復元し、復元したストリームを多重分離部928へ出力する。多重分離部928は、入力されるストリームから映像ストリーム及び音声ストリームを分離し、映像ストリームを画像処理部927、音声ストリームを音声コーデック923へ出力する。画像処理部927は、映像ストリームを復号し、映像データを生成する。映像データは、表示部930に供給され、表示部930により一連の画像が表示される。音声コーデック923は、音声ストリームを伸張し及びDA変換し、アナログ音声信号を生成する。そして、音声コーデック923は、生成した音声信号をスピーカ924に供給して音声を出力させる。このように構成された携帯電話機920において、画像処理部927は、上述した実施形態に係る画像符号化装置及び画像復号装置の機能を有する。それにより、携帯電話機920での画像の符号化及び復号に際して、符号化効率を向上させることができる。<7.第7の実施の形態>[第3の応用例:記録再生装置]図23は、上述した実施形態を適用した記録再生装置の概略的な構成の一例を示している。記録再生装置940は、例えば、受信した放送番組の音声データ及び映像データを符号化して記録媒体に記録する。また、記録再生装置940は、例えば、他の装置から取得される音声データ及び映像データを符号化して記録媒体に記録してもよい。また、記録再生装置940は、例えば、ユーザの指示に応じて、記録媒体に記録されているデータをモニタ及びスピーカ上で再生する。このとき、記録再生装置940は、音声データ及び映像データを復号する。記録再生装置940は、チューナ941、外部インタフェース942、エンコーダ943、HDDHardDiskDrive944、ディスクドライブ945、セレクタ946、デコーダ947、OSDOnScreenDisplay948、制御部949、及びユーザインタフェース950を備える。チューナ941は、アンテナ図示せずを介して受信される放送信号から所望のチャンネルの信号を抽出し、抽出した信号を復調する。そして、チューナ941は、復調により得られた符号化ビットストリームをセレクタ946へ出力する。即ち、チューナ941は、記録再生装置940における伝送部としての役割を有する。外部インタフェース942は、記録再生装置940と外部機器又はネットワークとを接続するためのインタフェースである。外部インタフェース942は、例えば、IEEE1394インタフェース、ネットワークインタフェース、USBインタフェース、又はフラッシュメモリインタフェースなどであってよい。例えば、外部インタフェース942を介して受信される映像データ及び音声データは、エンコーダ943へ入力される。即ち、外部インタフェース942は、記録再生装置940における伝送部としての役割を有する。エンコーダ943は、外部インタフェース942から入力される映像データ及び音声データが符号化されていない場合に、映像データ及び音声データを符号化する。そして、エンコーダ943は、符号化ビットストリームをセレクタ946へ出力する。HDD944は、映像及び音声などのコンテンツデータが圧縮された符号化ビットストリーム、各種プログラム及びその他のデータを内部のハードディスクに記録する。また、HDD944は、映像及び音声の再生時に、これらデータをハードディスクから読み出す。ディスクドライブ945は、装着されている記録媒体へのデータの記録及び読み出しを行う。ディスクドライブ945に装着される記録媒体は、例えばDVDディスクDVDVideo、DVDRAM、DVDR、DVDRW、DVDR、DVDRW等又はBluray登録商標ディスクなどであってよい。セレクタ946は、映像及び音声の記録時には、チューナ941又はエンコーダ943から入力される符号化ビットストリームを選択し、選択した符号化ビットストリームをHDD944又はディスクドライブ945へ出力する。また、セレクタ946は、映像及び音声の再生時には、HDD944又はディスクドライブ945から入力される符号化ビットストリームをデコーダ947へ出力する。デコーダ947は、符号化ビットストリームを復号し、映像データ及び音声データを生成する。そして、デコーダ947は、生成した映像データをOSD948へ出力する。また、デコーダ904は、生成した音声データを外部のスピーカへ出力する。OSD948は、デコーダ947から入力される映像データを再生し、映像を表示する。また、OSD948は、表示する映像に、例えばメニュー、ボタン又はカーソルなどのGUIの画像を重畳してもよい。制御部949は、CPUなどのプロセッサ、並びにRAM及びROMなどのメモリを有する。メモリは、CPUにより実行されるプログラム、及びプログラムデータなどを記憶する。メモリにより記憶されるプログラムは、例えば、記録再生装置940の起動時にCPUにより読み込まれ、実行される。CPUは、プログラムを実行することにより、例えばユーザインタフェース950から入力される操作信号に応じて、記録再生装置940の動作を制御する。ユーザインタフェース950は、制御部949と接続される。ユーザインタフェース950は、例えば、ユーザが記録再生装置940を操作するためのボタン及びスイッチ、並びに遠隔制御信号の受信部などを有する。ユーザインタフェース950は、これら構成要素を介してユーザによる操作を検出して操作信号を生成し、生成した操作信号を制御部949へ出力する。このように構成された記録再生装置940において、エンコーダ943は、上述した実施形態に係る画像符号化装置の機能を有する。また、デコーダ947は、上述した実施形態に係る画像復号装置の機能を有する。それにより、記録再生装置940での画像の符号化及び復号に際して、符号化効率を向上させることができる。<8.第8の実施の形態>[第4の応用例:撮像装置]図24は、上述した実施形態を適用した撮像装置の概略的な構成の一例を示している。撮像装置960は、被写体を撮像して画像を生成し、画像データを符号化して記録媒体に記録する。撮像装置960は、光学ブロック961、撮像部962、信号処理部963、画像処理部964、表示部965、外部インタフェース966、メモリ967、メディアドライブ968、OSD969、制御部970、ユーザインタフェース971、及びバス972を備える。光学ブロック961は、撮像部962に接続される。撮像部962は、信号処理部963に接続される。表示部965は、画像処理部964に接続される。ユーザインタフェース971は、制御部970に接続される。バス972は、画像処理部964、外部インタフェース966、メモリ967、メディアドライブ968、OSD969、及び制御部970を相互に接続する。光学ブロック961は、フォーカスレンズ及び絞り機構などを有する。光学ブロック961は、被写体の光学像を撮像部962の撮像面に結像させる。撮像部962は、CCDChargeCoupledDevice又はCMOSComplementaryMetalOxideSemiconductorなどのイメージセンサを有し、撮像面に結像した光学像を光電変換によって電気信号としての画像信号に変換する。そして、撮像部962は、画像信号を信号処理部963へ出力する。信号処理部963は、撮像部962から入力される画像信号に対してニー補正、ガンマ補正、色補正などの種々のカメラ信号処理を行う。信号処理部963は、カメラ信号処理後の画像データを画像処理部964へ出力する。画像処理部964は、信号処理部963から入力される画像データを符号化し、符号化データを生成する。そして、画像処理部964は、生成した符号化データを外部インタフェース966又はメディアドライブ968へ出力する。また、画像処理部964は、外部インタフェース966又はメディアドライブ968から入力される符号化データを復号し、画像データを生成する。そして、画像処理部964は、生成した画像データを表示部965へ出力する。また、画像処理部964は、信号処理部963から入力される画像データを表示部965へ出力して画像を表示させてもよい。また、画像処理部964は、OSD969から取得される表示用データを、表示部965へ出力する画像に重畳してもよい。OSD969は、例えばメニュー、ボタン又はカーソルなどのGUIの画像を生成して、生成した画像を画像処理部964へ出力する。外部インタフェース966は、例えばUSB入出力端子として構成される。外部インタフェース966は、例えば、画像の印刷時に、撮像装置960とプリンタとを接続する。また、外部インタフェース966には、必要に応じてドライブが接続される。ドライブには、例えば、磁気ディスク又は光ディスクなどのリムーバブルメディアが装着され、リムーバブルメディアから読み出されるプログラムが、撮像装置960にインストールされ得る。さらに、外部インタフェース966は、LAN又はインターネットなどのネットワークに接続されるネットワークインタフェースとして構成されてもよい。即ち、外部インタフェース966は、撮像装置960における伝送部としての役割を有する。メディアドライブ968に装着される記録媒体は、例えば、磁気ディスク、光磁気ディスク、光ディスク、又は半導体メモリなどの、読み書き可能な任意のリムーバブルメディアであってよい。また、メディアドライブ968に記録媒体が固定的に装着され、例えば、内蔵型ハードディスクドライブ又はSSDSolidStateDriveのような非可搬性の記憶部が構成されてもよい。制御部970は、CPUなどのプロセッサ、並びにRAM及びROMなどのメモリを有する。メモリは、CPUにより実行されるプログラム、及びプログラムデータなどを記憶する。メモリにより記憶されるプログラムは、例えば、撮像装置960の起動時にCPUにより読み込まれ、実行される。CPUは、プログラムを実行することにより、例えばユーザインタフェース971から入力される操作信号に応じて、撮像装置960の動作を制御する。ユーザインタフェース971は、制御部970と接続される。ユーザインタフェース971は、例えば、ユーザが撮像装置960を操作するためのボタン及びスイッチなどを有する。ユーザインタフェース971は、これら構成要素を介してユーザによる操作を検出して操作信号を生成し、生成した操作信号を制御部970へ出力する。このように構成された撮像装置960において、画像処理部964は、上述した実施形態に係る画像符号化装置及び画像復号装置の機能を有する。それにより、撮像装置960での画像の符号化及び復号に際して、符号化効率を向上させることができる。なお、本明細書では、閾値などの様々な情報が、符号化ストリームのヘッダに多重化されて、符号化側から復号側へ伝送される例について説明した。しかしながら、これら情報を伝送する手法はかかる例に限定されない。例えば、これら情報は、符号化ビットストリームに多重化されることなく、符号化ビットストリームと関連付けられた別個のデータとして伝送され又は記録されてもよい。ここで、関連付けるという用語は、ビットストリームに含まれる画像スライス若しくはブロックなど、画像の一部であってもよいと当該画像に対応する情報とを復号時にリンクさせ得るようにすることを意味する。即ち、情報は、画像又はビットストリームとは別の伝送路上で伝送されてもよい。また、情報は、画像又はビットストリームとは別の記録媒体又は同一の記録媒体の別の記録エリアに記録されてもよい。さらに、情報と画像又はビットストリームとは、例えば、複数フレーム、1フレーム、又はフレーム内の一部分などの任意の単位で互いに関連付けられてよい。以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示はかかる例に限定されない。本開示の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。なお、本技術は以下のような構成も取ることができる。1制約付きイントラ予測において、前記制約付きイントラ予測の処理対象である当該領域に隣接し、予測に利用される周辺画素であって、利用可能な2つの周辺画素に挟まれる1つ若しくは連続する複数の利用不可能な周辺画素に対して、その位置に応じた値の補間画素値を生成する補間画素生成部と、前記補間画素生成部により生成された補間画素値を利用して、イントラ予測を行い、予測画像を生成する予測画像生成部とを備える画像処理装置。2前記補間画素生成部は、利用可能な前記周辺画素との距離に応じた値の補間画素値を生成する前記1に記載の画像処理装置。3前記補間画素生成部は、利用可能な2つの前記周辺画素を用いた線形内挿により前記補間画素値を生成する前記2に記載の画像処理装置。4前記補間画素生成部は、前記線形内挿において、2のべき乗の近似値を用いて割り算を行う前記3に記載の画像処理装置。5前記補間画素生成部は、当該領域の左上の、利用不可能な周辺画素に対して、前記周辺画素の右隣の画素が利用可能な場合、前記右隣の画素の画素値を前記周辺画素の補間画素値とし、前記周辺画素の右隣の画素が利用不可能であり、かつ、前記周辺画素の下の画素が利用可能である場合、前記下の画素の画素値を前記周辺画素の補間画素値とする前記1乃至4のいずれかに記載の画像処理装置。6イントラ予測に関するフラグ情報の値を判定するフラグ判定部をさらに備え、前記補間画素生成部は、前記フラグ判定部により、前記フラグ情報により前記制約付きイントラ予測が指定されていると判定された場合、前記補間画素値を生成する前記1乃至5のいずれかに記載の画像処理装置。7当該領域の大きさを判定するサイズ判定部をさらに備え、前記補間画素生成部は、前記サイズ判定部により当該領域が小さいと判定された場合、前記補間画素値を生成する前記1乃至6のいずれかに記載の画像処理装置。8前記サイズ判定部は、閾値を用いて、当該領域の大きさを判定し、前記補間画素生成部は、前記サイズ判定部により当該領域が閾値以下であると判定された場合、前記補間画素値を生成する前記7に記載の画像処理装置。9前記閾値を伝送する伝送部をさらに備える前記8に記載の画像処理装置。10伝送される前記閾値を受け取る受け取り部をさらに備え、前記サイズ判定部は、前記受け取り部により受け取られた前記閾値を用いて当該領域の大きさを判定する前記8に記載の画像処理装置。11前記閾値はプロファイルレベルに応じて設定される前記8に記載の画像処理装置。12画像処理装置の画像処理方法であって、補間画素生成部が、制約付きイントラ予測において、前記制約付きイントラ予測の処理対象である当該領域に隣接し、予測に利用される周辺画素であって、利用可能な2つの周辺画素に挟まれる1つ若しくは連続する複数の利用不可能な周辺画素に対して、その位置に応じた値の補間画素値を生成し、予測画像生成部が、生成された補間画素値を利用して、イントラ予測を行い、予測画像を生成する画像処理方法。"