入力されたデータを符号化する符号化装置であって、入力された画像を処理対象のブロックに分割する分割手段と、前記分割手段によって分割された処理対象のブロックを単位として、該処理対象のブロックの画面内予測のモードを決定する予測モード決定手段と、前記処理対象のブロックの周辺のブロックが参照可能か否かを判定する判定手段と、前記判定手段の結果に基づいて、前記予測モード決定手段によって決定された予測モードを符号化する予測モード符号化手段とを有することを特徴とする画像符号化装置。前記判定手段は、前記処理対象のブロックから空間的に上方または左方のブロックが参照可能か否かを判定することを特徴とする請求項1に記載の画像符号化装置。前記判定手段によって空間的に上方または左方のブロックがどちらも存在しかつ参照可能であった場合、前記予測モード符号化手段は前記予測モードを所定の方法で符号化し、前記判定手段によって空間的に上方または左方のブロックのうちいずれか一方が参照可能であった場合、予測モード符号化手段は、前記参照可能なブロックを用いる予測モードに対して符号量を割り当て、参照不可能なブロックを用いる予測モードに対しては符号量を割り当てないことを特徴とする請求項2に記載の画像処理装置。前記判定手段によって参照可能であると判定された場合、前記予測モード符号化手段は前記予測モードを所定の方法で符号化し、前記判定手段によって参照不可能であると判定された場合には、前記予測モード符号化手段は前記予測モードを符号化しないことを特徴とする請求項1に記載の画像符号化装置。入力された符号化データを復号する復号装置であって、入力された符号化データをエントロピー復号することによって処理対象のブロックの符号化された予測モードを抽出するエントロピー復号化手段と、前記処理対象のブロックの周辺のブロックが参照可能か否かを判定する判定手段と、前記判定手段の結果に基づいて、前記予測モードを復号化する予測モード復号化手段とを有することを特徴とする画像復号装置。入力されたデータを符号化する符号化装置における符号化方法であって、入力された画像を処理対象のブロックに分割する分割工程と、前記分割工程によって分割された処理対象のブロックを単位として、該処理対象のブロックの画面内予測のモードを決定する予測モード決定工程と、前記処理対象のブロックの周辺のブロックが参照可能か否かを判定する判定工程と、前記判定工程の結果に基づいて、前記予測モード決定工程によって決定された予測モードを符号化する予測モード符号化工程とを有することを特徴とする画像符号化方法。入力された符号化データを復号する復号装置における復号方法であって、入力された符号化データをエントロピー復号することによって処理対象のブロックの符号化された予測モードを抽出するエントロピー復号化工程と、前記処理対象のブロックの周辺のブロックが参照可能か否かを判定する判定工程と、前記判定工程の結果に基づいて、前記予測モードを復号化する予測モード復号化工程とを有することを特徴とする画像復号方法。コンピュータが読み出して実行することにより、前記コンピュータを、請求項1に記載の符号化装置として機能させることを特徴とするプログラム。コンピュータが読み出して実行することにより、前記コンピュータを、請求項5に記載の復号装置として機能させることを特徴とするプログラム。図15は従来のH.264のブロック図である。ブロック分割部1501は画像データをマクロブロックに分割し、処理ユニット分割部1502はブロック内を処理ユニットである4画素×4画素等のブロックに分割する。イントラ予測モード決定部1503は周辺の画素から処理対象のユニットのイントラ予測のモードを決定する。周辺処理ユニット判定部1507はイントラ予測モード決定部1503において、処理対象であるブロックが、画像の端部等で参照画素がない場合、予め決められた値例えば128を参照画素として設定する。イントラ予測モード符号化部1504はイントラ予測モード決定部1503で決定されたモードを符号化する。H.264の場合、周辺の画素の有無にかかわらず、9つのモードの符号が割り当てられる。H.264のように複数のモードを持つイントラ予測を行う符号化方式においては、選ばれたモードの識別のためイントラ予測モード情報をサイド情報として符号化しなければならず、そのためのビットが必要であった。したがって、本発明は上述した課題を解決するためになされたものであり、モード識別のための符号量を削減し、高効率のイントラ予測モード情報符号化復号化を実現することを目的としている。上述の問題点を解決するため、本発明の画像符号化装置は以下の構成を有する。すなわち、入力された画像を処理対象のブロックに分割する分割手段と、前記分割手段によって分割された処理対象のブロックを単位として、該処理対象のブロックの画面内予測のモードを決定する予測モード決定手段と、前記処理対象のブロックの周辺のブロックが参照可能か否かを判定する判定手段と、前記判定手段の結果に基づいて、前記予測モード決定手段によって決定された予測モードを符号化する予測モード符号化手段とを有する。さらに、本発明の画像復号装置は以下の構成を有する。すなわち、入力された符号化データをエントロピー復号することによって処理対象ブロックの符号化された予測モードを抽出するエントロピー復号化手段と、前記処理対象のブロックの周辺のブロックが参照可能か否かを判定する判定手段と、前記判定手段の結果に基づいて、前記予測モードを復号化する予測モード復号化手段とを有する。本発明により、モード識別のための符号量を削減し、高効率のイントラ予測モード情報符号化復号化が可能になる。以下、添付の図面を参照して、本願発明をその好適な実施形態に基づいて詳細に説明する。なお、以下の実施形態において示す構成は一例に過ぎず、本発明は図示された構成に限定されるものではない。<実施形態1>以下、本発明の実施形態を、図面を用いて説明する。図1は本実施形態の画像符号化装置を示すブロック図である。図1において、101は入力画像を複数のブロックに分割するブロック分割部である。202はブロック分割部101で分割された各ブロックを、該ブロックと同一サイズもしくはブロックよりも小さいサイズの処理ユニットに分割する処理ユニット分割部である。103は各処理ユニットにおいてイントラ予測モード画面内予測モードを決定するイントラ予測モード決定部である。104はイントラ予測モード決定部103で決定したイントラ予測モードを符号化するイントラ予測モード符号化部である。105はイントラ予測の残差を変換量子化する予測変換量子化部であり、106は予測変換量子化部105の結果を符号化するエントロピー符号化部である。107は符号化対象の処理ユニットの周辺の処理ユニットが参照可能かを判定する周辺処理ユニット判定部である。上記画像符号化装置における画像の符号化動作を以下に説明する。本実施形態では動画像データをフレーム単位に入力する構成となっているが、1フレーム分の静止画像データを入力する構成としても構わない。また、本願発明は、説明を容易にするため、イントラ予測符号化の処理のみを説明するが、これに限定されずインター予測符号化の処理においても適用可能である。本実施形態では説明のため、ブロック分割部101においては8画素×8画素のブロックに分割するものとして説明するがこれに限定されない。またブロックの分割に関しては縦横1/2のサイズに4分割する方法を例にとって説明するが、これにブロックの形状、サイズは限定されない。入力された1フレーム分の画像データはブロック分割部101に入力され、8画素×8画素のブロック単位に分割される。ブロック単位に分割された画像データはさらに処理ユニット分割部102に入力され、ブロック分割部101で分割されたブロックと同一もしくは小さい大きさの処理ユニット4画素×4画素に分割される。また、処理ユニット分割部102は、符号化対象の処理ユニットの位置を周辺処理ユニット判定部107に入力する。具体的には、符号化対象の処理ユニットの左上画素のフレーム内での垂直位置および水平位置を入力する方法などが考えられるがこれに限定されない。フレーム内での符号化対象ブロックのブロック番号およびブロック内での符号化対象処理ユニットの処理ユニット番号を入力する方法を用いてもよい。周辺処理ユニット判定部107では、符号化対象の処理ユニットの位置とこれまでに符号化済みの処理ユニットの状況から、符号化対象の処理ユニットの周辺の処理ユニットが参照可能か否かを判定する。周辺処理ユニット判定部107は、判定した参照可能情報をイントラ予測モード決定部103およびイントラ予測モード符号化部104に出力する。処理ユニット分割部102の結果である処理ユニット単位に分割された画像データおよび周辺処理ユニット判定部107の出力である参照可能情報はイントラ予測モード決定部103に入力される。説明を簡単にするために、図2にイントラ予測方法の例を示す。図2aにおいて、201はイントラ予測を行う処理ユニット4画素×4画素を表す。処理ユニット201内には4画素×4画素のaからpまでの画素が含まれる。図2bは垂直方向の予測の様子を表す図であり、処理ユニット201に隣接する空間的に上方の画素群202V1からV4から垂直方向の予測を行う。本予測を垂直予測モードと呼ぶ。図2cは垂直方向の予測の様子を表す図であり、処理ユニット201に隣接する左方の画素群203H1からH4から水平方向の予測を行う。本予測を水平予測モードと呼ぶ。図2dは垂直方向の予測の様子を表す図であり、処理ユニット201に隣接する上方と左方の画素群の平均値に基づいて予測を行う。すなわち、平均値をaveとすると以下式1で表される。本予測を平均値予測モードと呼ぶ。ave=V1V2V3V4H1H2H3H4/8...1イントラ予測モード決定部103では以上の3つのイントラ予測モードから最適なイントラ予測モードが決定され、イントラ予測モード符号化部104と周辺処理ユニット判定部107に出力される。周辺処理ユニット判定部107は、イントラ予測モード決定部103から出力された予測モードを、符号化済みの処理ユニットのイントラ予測のモードとして保持し、次以降の判定の際に参照される。一方、イントラ予測モード符号化部104では、周辺処理ユニット判定部107の出力である参照可能情報を入力としてイントラ予測モード決定部103の出力であるイントラ予測モードを所定の方法で符号化し、イントラ予測モード符号化データを得る。予測変換量子化部105ではイントラ予測モード決定部103で決定したイントラ予測モードに基づいて処理ユニット単位の予測が行われ、その残差成分が変換量子化される。量子化された係数データはエントロピー符号化部106に出力され、エントロピー符号化部106にてエントロピー符号化された後、イントラ予測モード符号化部104で符号化されたイントラ予測モード符号化データとともにビットストリームとして出力される。図3は、実施形態1に係る画像符号化装置における画像符号化処理を示すフローチャートである。まず、ステップS301にて、ブロック分割部101は、フレーム単位の入力画像をブロック単位8画素×8画素に分割する。ステップS302にて、処理ユニット分割部102はブロック分割部101にて分割されたそれぞれのブロックに対して、該ブロックと同一もしくは小さい大きさの処理ユニット4画素×4画素に分割する。ステップS303にて、イントラ予測モード決定部103は、符号化対象の処理ユニットのイントラ予測モードの決定を行う。また、イントラ予測モード符号化部104はイントラ予測モード決定部103で決定された予測モードの符号化を行う。本処理に関しての詳細は後述する。ステップS304にて、予測変換量子化部105は、符号化対象の処理ユニットの予測値を計算し、入力画像との残差成分の変換量子化を行う。次にステップS305においてエントロピー符号化部106にて、画像符号化装置は、量子化された係数をエントロピー符号化する。ステップS306において、画像符号化装置は、ブロック内の全ての処理ユニットの符号化が終了したか否かの判定を行い、終了していればステップS307に進み、終了していなければ次の処理ユニットを対象としてステップS302に戻る。ステップS307にて、画像符号化装置は、フレーム内の全てのブロックの符号化が終了したか否かの判定を行い、終了していれば全ての動作を停止して処理を終了し、そうでなければ次のブロックを対象としてステップS301に戻る。図4はステップS303の詳細な処理を示すフローチャートである。まず、ステップS401、S402、S403では符号化対象の処理ユニットの周辺の所定の処理ユニットが参照可能か否かの判定を行う。具体的にはステップS401において、周辺処理ユニット判定部107は、符号化対象の処理ユニットの上方に存在する所定の処理ユニットが参照可能か否かを判定し、参照可能な場合にはステップS402に進み、参照不可能の場合にはステップS403に進む。ステップS402において、周辺処理ユニット判定部107は、符号化対象の処理ユニットの左方に存在する所定の処理ユニットが参照可能か否かを判定し、参照可能な場合にはステップS404に進み、参照不可能な場合にはステップS406に進む。ステップS403においても、周辺処理ユニット判定部107は、符号化する処理ユニットの左方に存在する処理ユニットが参照可能か否かを判定し、参照可能な場合にはステップS408に進み、参照不可能の場合にはステップS410に進む。ステップS404において、上方処理ユニットと左方処理ユニットのいずれも参照可能なため、全てのイントラ予測モード垂直予測モード、水平予測モード、平均値予測モードの中から当該処理ユニットの最適なイントラ予測モードを決定する。最適なイントラ予測モードの決定方法に関しては、それぞれのイントラ予測モードについて予測値を計算し、最も入力画素に近い予測値を生成したモードに決定することが一般的であるが、これに限定されない。ステップS405において、イントラ予測モード符号化部104は決定されたイントラ予測モード情報を符号化する。ここでは平均値予測モードを1ビットの符号0で表し、垂直予測モードを2ビットの符号10で表し、水平予測モードを2ビットの符号11で表す。これらに該当する符号を出力後、処理を終了する。ステップS406において、イントラ予測モード決定部103は、左方処理ユニットが参照不可能な場合でも選択することができるイントラ予測モードの中から当該処理ユニットの最適なイントラ予測モードを決定する。すなわち、左方画素群203が参照されないため、垂直予測モードと下記2式で表されるV1からV4の画素値の平均値aveによる平均値予測モードから最適なイントラ予測モードを選択する。ave=V1V2V3V4/4...2ステップS407において、イントラ予測モード符号化部104は、使用不可能なモード情報を選択不可能にし、その識別分のこれにより符号量が削減される。を省いた方法でそのモード情報を符号化する。すなわち、ここでは取りうるモード情報である平均値予測モードを1ビットの符号0で表し、垂直予測モードを1ビットの符号1で表す。これらに該当する符号を出力後、処理を終了する。ステップS408において、イントラ予測モード決定部103は、上方処理ユニットが参照不可能な場合でも選択することができるイントラ予測モードの中から当該処理ユニットの最適なイントラ予測モードを決定する。すなわち、上方画素群202が参照されないため、水平予測モードと下記3式で表されるH1からH4の画素値の平均値aveによる平均値予測モードから最適なイントラ予測モードを選択する。ave=H1H2H3H4/4...3ステップS409において、イントラ予測モード決定部103は、使用不可能なモード情報を選択不可能にし、その識別分のビットを省いた方法でそのモード情報を符号化する。すなわち、ここでは取りうるモード情報である平均値予測モードを1ビットの符号0で表し、水平予測モードを1ビットの符号1で表す。これらに該当する符号を出力後、処理を終了する。ステップS410において、上方処理ユニットと左方処理ユニットが参照不可能であるため、参照できない単位ユニットの平均値をあらかじめ決められた値H.264では128があるものとしてその平均値でイントラ予測を行うのみである。したがって、一意にモードが決定されるため、モードの符号化は行われない。以上の構成と動作により、特にステップS407およびステップS409の処理により、より少ないビットでイントラ予測モードの情報を符号化できる。また、ステップS410にてイントラ予測モードの情報を符号化しないので、より少ないビットでイントラ予測モードの情報を符号化できる。なお、本実施形態においては、イントラ予測のみを用いるフレームを例にとって説明したが、インター予測を使用できるフレームにおいても対応できることは明らかである。さらに、本実施形態では説明のために分割ブロックを8画素×8画素、処理ユニットを4画素×4画素としたが、これに限定されない。例えば16画素×16画素等のブロックサイズへの変更が可能であり、また、ブロックの形状も正方形に限定されず、8画素×4画素などの長方形で発明の本質は変わらない。また、予測を4画素×4画素の場合のみ説明したが、ブロックを分割しない場合、8画素×8画素で予測を行っても、周囲のブロックの状態から同様に符号を削減できることは明らかである。また、本実施形態では上方処理ユニット画素の内、処理ユニット201に隣接する上方画素群202のみを参照したがこれに限定されず、左上の画素や上方処理ユニットの他の画素を参照してももちろん構わない。同様に左方処理ユニット画素の内、処理ユニット201に隣接する左方画素群203のみを参照したがこれに限定されず、左方処理ユニットの他の画素を参照してももちろん構わない。また、本実施形態では上方画素群202と左方画素群203を参照してイントラモード予測を行ったが、これに限定されない。また、予測モードもこれに限定されない。例えば、H.264符号化方式において、9つのイントラ予測があるが、上方処理ユニット、左方処理ユニットがともに参照不可能な場合、ステップS410において、周囲の画素値が128として、予測モードはIntra_4x4_DCのみが選択される。よって符号化データは発生しない。同様に、左方処理ユニットが参照不可能で、上方処理ユニットが参照可能な場合、図4のステップS406において、予測モードは上方からの予測であるIntra_4x4_Vertival、Intra_4x4_Diagonal_Down_Left、Intra_4x4_Vertical_Leftと前記Intra_4x4_DCのみが選択される。よって、S407では2ビットの情報でこれらを表すことが可能である。左方処理ユニットが参照可能で、上方処理ユニットが参照不可能な場合、図4のステップS408において、左方からの予測であるIntra_4x4_Horizontal、Intra_4x4_Horizontal_Upと前記Intra_4x4_DCのみが選択される。よって、S409でも2ビットの情報でこれらを表すことが可能である。ただし、ステップS405では全て9つのモードを符号化する必要があり、4ビットの情報が必要である。また、本実施形態では符号についてビットの割り当てを行ったが、これに限定されず、前に処理した処理ユニットの予測モード等を参照して符号化したり、算術符号を用いて符号化しても構わない。また、参照の可否の判定の順はこれに限定されず、左方処理ユニットの参照の可否から判定しても構わない。<実施形態2>実施形態1のステップS410においては、一意にモードが決定されるためモードの符号化は行われない例を示したが、本実施形態では、平均値でイントラ予測を行うモードとイントラ予測を行わないモードを選択できる例を説明する。図5は、図3のステップS303の実施形態2における詳細な処理を示すフローチャートある。図5において実施形態1の図4と同様の機能を果たす部分に関しては同じ番号を付与し、説明を省略する。ステップS501において、イントラ予測モード決定部103は、上方処理ユニットと左方処理ユニットが参照不可能であるため、参照できない単位ユニットの平均値をあらかじめ決められた値があるものとする。つまりその平均値でイントラ予測を行うモードとイントラ予測を行わないモードを選択できる。ステップS502において、イントラ予測モード符号化部104は、使用不可能なモード情報を選択不可能にし、その識別分のビットを省いた方法でそのモード情報を符号化する。すなわち、ここではイントラ予測を平均値予測モードで行う場合は1ビットの符号1で表し、そうでない場合を符号0で表した後に処理を終了する。以上の構成と動作により、より少ないビットでイントラ予測モードの情報を符号化した分ビット量を削減できる。なお、ステップS501にて、上方処理ユニットも左方処理ユニットも参照不可能な場合でも選択することができるイントラ予測モードが複数設定でき、それを識別する情報が必要な場合でも適用できる。<実施形態3>実施形態1においては、上方または左方のうち一方だけの処理ユニットが参照可能な場合を示した。しかし、本実施形態では、上方または左方のうち一方だけの処理ユニットが参照可能な場合であっても通常のイントラ予測モード符号化処理を行う例を説明する。図6は、図3のステップS303の実施形態3における詳細な処理を示すフローチャートある。図6において実施形態1の図4と同様の機能を果たす部分に関しては同じ番号を付与し、説明を省略する。ステップS601において、周辺処理ユニット判定部107は、符号化対象の処理ユニットの上方に存在する所定の処理ユニットが参照可能か否かを判定し、参照可能な場合にはステップS404に進み、参照不可能の場合にはステップS602に進む。ステップS602において、周辺処理ユニット判定部107は、符号化対象の処理ユニットの左方に存在する処理ユニットが参照可能か否かを判定し、参照可能な場合にはステップS404に進み、参照不可能の場合にはステップS603に進む。ステップS404においては、全てのイントラ予測モードの中から当該処理ユニットの最適なイントラ予測モードを決定し、ステップS405でそのイントラ予測モード情報を符号化した後処理を終了する。ステップS603においては、イントラ予測モード符号化部104は、上方処理ユニットも左方処理ユニットも参照不可能な場合でも選択することができる所定のイントラ予測モードを設定し、モードを識別するための情報は符号化せずに処理を終了する。以上の構成と動作により、ステップS603にてイントラ予測モードの情報を符号化しなかった分のビット量を削減できる。ビット量の削減量は実施形態1および実施形態2よりも少ない。しかし上方または左方のうち一方だけの処理ユニットが参照可能な場合でも通常のイントラ予測モード符号化処理を行うため、ステップS407およびS408における処理に使われる新たなテーブルなどを必要としない。よって、ハードウェアやメモリを削減することができ、低コスト化を図ることができる。<実施形態4>実施形態3のステップS603においては、一意にモードが決定されるためモードの符号化は行われない例を示したが、本実施形態では、平均値でイントラ予測を行うモードとイントラ予測を行わないモードを選択できる例を説明する。図7は、図3のステップS303の実施形態4における詳細な処理を示すフローチャートある。図7において実施形態2の図5、及び実施形態3の図6と同様の機能を果たす部分に関しては同じ番号を付与し、説明を省略する。ステップS701において、イントラ予測モード決定部103は、実施形態2と同様に、上方処理ユニットも左方処理ユニットも参照不可能な場合でも選択することができるイントラ予測モードの中から当該処理ユニットの最適なイントラ予測モードを決定する。ステップS702において、イントラ予測モード符号化部104は実施形態2と同様に、使用不可能なモード情報水平予測、垂直予測を選択不可能にし、その識別分のビットを省いた方法でそのモード情報を符号化した後に処理を終了する。以上の構成と動作により、より少ないビットでイントラ予測モードの情報を符号化した分ビット量を削減できる。実施形態3で得られた効果であるテーブルなどの省略による低コスト化を図りつつ上方処理ユニットも左方処理ユニットも参照不可能な場合でも選択することができるイントラ予測モードが複数あり、それを識別する情報が必要な場合でも適用できる。<実施形態5>図8は、本発明の実施形態5に係る画像復号装置の構成を示すブロック図である。本実施形態では、実施形態1で生成された符号化データの復号を例にとって説明する。図8において、801は入力ストリームからブロック単位の情報を復号するブロック復号部である。ブロック復号部801はその復号処理において、各処理ブロック位置の把握を容易に行える。また、前記処理ブロック位置情報の出力も行う。802は、ブロック復号部801でブロック復号された各ブロック内に存在する処理ユニット単位の情報や係数を復号するエントロピー復号部である。803は復号によって得られた量子化された係数値を逆量子化し、逆変換する逆量子化逆変換部である。804は各処理ユニットにおいてイントラ予測モードを復号するイントラ予測モード復号部である。805は逆量子化逆変換部803の結果とイントラ予測モード復号部804の結果から復号画素データを再構成する画素データ再構成部である。807は復号対象の処理ユニットの周辺の所定の処理ユニットが参照可能か否かを判定する周辺処理ユニット判定部である。上記画像復号装置における画像の復号動作を以下に説明する。本実施形態では動画像ビットストリームをフレーム単位に入力する構成となっているが、1フレーム分の静止画像ビットストリームを入力する構成としても構わない。また、本発明は、説明を用意にするため、イントラ予測復号化の処理のみを説明するが、これに限定されずインター予測復号化処理においても適用可能である。入力された1フレーム分のストリームデータはブロック単位でブロック復号部801に入力され、ブロック単位の情報が復号される。上記のブロック単位の情報によって定まった処理ユニットの構造によって、処理ユニットごとに符号データが出力される。この際、処理ユニットの係数や、位置情報の復号によって処理ユニットの位置に関する情報も抽出され、周辺処理ユニット判定部807にも出力される。処理ユニットごとの符号データはエントロピー復号部802に入力され、イントラ予測モード符号を含む処理ユニット単位の情報や係数値が復号される。係数値は逆量子化逆変換部803に入力され、逆量子化、逆変換の過程を経て予測誤差を表す画素データが出力される。処理ユニット単位の情報はイントラ予測モード復号部804に入力され、イントラ予測モードの情報から周辺の処理ユニットの画素値から予測値を算出し、それを予測誤差を表す画素データと足し合わせることで復号画素データが再構成され、出力される。図9は、実施形態5に係る画像復号装置における画像復号処理を示すフローチャートである。まず、ステップS901において、ブロック復号部801は、入力ストリームからブロック単位の情報を復号する。ステップS902において、エントロピー復号部802は、各ブロック内に存在する処理ユニット単位の復号を行う。また、イントラ予測モードの符号を抽出し、他の情報や係数をエントロピー復号化する。ステップS903において逆量子化逆変換部803は、復号した係数データの逆量子化逆変換を行い、予測誤差データを生成する。ステップS904において、イントラ予測モード復号部804は、各処理ユニットのイントラ予測モードを後述する復号方法で復号し、イントラ予測モードを生成する。ステップS905において画素データ再構成部805は、ステップS903の結果である予測誤差データとステップS904の結果であるイントラ予測モードから周辺処理ユニットの画素を参照して再構成画素を算出する。ステップS906において、画像復号装置は、ブロック内の全ての処理ユニットの符号化が復号したか否かの判定を行い、終了していればステップA907に進み、終了していなければ次の処理ユニットを処理の対象としてステップS902に戻る。ステップS907において画像復号装置は、フレーム内の全てのブロックの復号が終了したか否かの判定を行い、終了していれば全ての動作を停止して処理を終了し、そうでなければ次のブロックを処理の対象としてステップS901に戻る。図10はステップS904の詳細な処理を示すフローチャートである。まず、ステップS1001、S1002、S1003では復号対象の処理ユニットの周辺の所定の処理ユニットが参照可能か否かの判定を行う。具体的にはステップS1001において周辺処理ユニット判定部807は、復号対象の処理ユニットの上方に存在する所定の処理ユニットが参照可能か否かを判定し、参照可能な場合にはステップS1002に進み、参照不可能の場合にはステップS1003に進む。ステップS1002において周辺処理ユニット判定部807は、復号する処理ユニットの左方に存在する所定の処理ユニットが参照可能か否かを判定し、参照可能な場合にはステップS1004に進み、参照不可能な場合にはステップS1005に進む。ステップS1003においても、周辺処理ユニット判定部807は、復号する処理ユニットの左方に存在する処理ユニットが参照可能か否かを判定し、参照可能な場合にはステップS1006に進み、参照不可能の場合にはステップS1007に進む。ステップS1004においてイントラ予測モード復号部804は、復号する処理ユニットのイントラ予測モードを復号する。ステップS1004の場合、垂直予測、水平予測、平均値予測のいずれも可能なため、符号が0であれば、平均値予測モードを、10であれば垂直予測を、11であれば水平予測モードが選択されたものと判断可能である。ステップS1005においてイントラ予測モード復号部804は上方処理ユニットは参照可能で左方処理ユニットが参照不可能な場合であり、使用できないイントラ予測モードの識別分のビットを省いた方法で復号する処理ユニットのイントラ予測モードを復号する。すなわち、1ビットの符号が0であれば、上方画素群の平均値から予測する平均値予測モードが選択されたものとし、符号が1であれば、垂直予測モードが選択されたものと判断可能である。ステップS1006において、イントラ予測モード復号部804は、左方処理ユニットは参照可能で上方処理ユニットが参照不可能な場合には使用できないイントラ予測モードの識別分のビットを省いた方法で復号する処理ユニットのイントラ予測モードを復号する。すなわち、1ビットの符号が0であれば、左方画素群の平均値から予測する平均値予測モードが選択されたものとし、符号が1であれば、水平予測モードが選択されたものと判断可能である。ステップS1007において、イントラ予測モード復号部804は、上方処理ユニットも左方処理ユニットも参照不可能な場合でも選択することができる所定のイントラ予測モードを設定する。すなわち、参照できない単位ユニットの平均値をあらかじめ決められた値があるものとしてその平均値でのイントラ予測モードを設定する。以上の構成と動作により、実施形態1で生成された、各処理ユニットの参照の可否によって、必要なイントラ予測モードをより少ないビット量で表した符号化データを復号することができる。なお、本実施形態においては、イントラ予測のみを用いるフレームを例にとって説明したが、インター予測も使用できるフレームにおいても対応できることは明らかである。また、実施形態1と同様にブロックのサイズ、処理ユニットのサイズ、参照する処理ユニットとその画素の配置、符号についてはこれに限定されない。H.264符号化方式と同じ参照方法をとっても構わないし、それ以外の参照の方式を行ってももちろん構わない。<実施形態6>本実施形態では、実施形態2で生成された符号化データの復号処理について説明する。図11は、図9のステップS904の実施形態6における詳細な処理を示すフローチャートある。図11において実施形態5の図10と同様の機能を果たす部分に関しては同じ番号を付与し、説明を省略する。ステップS1101において、イントラ予測モード復号部804は、上方処理ユニットも左方処理ユニットも参照不可能な場合には使用できないイントラ予測モードの識別分のビットを省いた方法で復号する処理ユニットのイントラ予測モードを復号する。すなわち、上方処理ユニットと左方処理ユニットが参照不可能であるため、参照できない単位ユニットの平均値をあらかじめ決められた値があるものとしてその平均値でイントラ予測を行うモードとイントラ予測を行わないモードが選択されている。1ビットの符号が1であれば、予め決められた値の平均値から予測する平均値予測モードが選択されたものとし、符号が0であれば、イントラ予測を行わないモードが選択されたものとする。以上の構成と動作により、実施形態2で生成された、各処理ユニットの参照の可否によって、必要なイントラ予測モードをより少ないビット量で表した符号化データを復号することができる。<実施形態7>本実施形態では、実施形態3で生成された符号化データの復号処理について説明する。図12は、図9のステップS904の実施形態7における詳細な処理を示すフローチャートある。図12において実施形態5の図10と同様の機能を果たす部分に関しては同じ番号を付与し、説明を省略する。ステップS1201において周辺処理ユニット判定部807は、復号対象の処理ユニットの上方に存在する所定の処理ユニットが参照可能か否かを判定し、参照可能な場合にはステップS1004に進み、参照不可能の場合にはステップS1203に進む。ステップS1203においてイントラ予測モード復号部804は、符号化対象の処理ユニットの左方に存在する処理ユニットが参照可能か否かを判定し、参照可能な場合にはステップS1004に進み、参照不可能の場合にはステップS1203に進む。ステップS1004では復号対象の処理ユニットのイントラ予測モードを復号する。すなわち、符号が0であれば、平均値予測モードを、10であれば垂直予測を、11であれば水平予測モードが選択されたものとし、そのモードをステップ1105の画素データ再構成のステップに渡した後、処理を終了する。ステップS1203においてイントラ予測モード復号部804は、上方処理ユニットも左方処理ユニットも参照不可能な場合でも選択することができる所定のイントラ予測モードを設定する。本実施形態では、参照できない単位ユニットの平均値をあらかじめ決められた値があるものとしてその平均値でイントラ予測を行うモードが設定される。以上の構成と動作により、ハードウェアやメモリを追加することなく復号することができる。<実施形態8>本実施形態では、実施形態4で生成された符号化データの復号を例にとって説明する。図13は、図9のステップS904の実施形態8における詳細な処理を示すフローチャートある。図13において実施形態7の図12と同様の機能を果たす部分に関しては同じ番号を付与し、説明を省略する。ステップS1301においてイントラ予測モード復号部804は、上方処理ユニットも左方処理ユニットも参照不可能な場合には使用できないイントラ予測モードの識別分のビットを省いた方法で復号する処理ユニットのイントラ予測モードを復号する。すなわち、1ビットの符号が1であれば、予め決められた値の平均値から予測する平均値予測モードが選択されたものとし、符号が0であれば、イントラ予測を行わないモードが選択されたものとする。以上の構成と動作により、ハードウェアやメモリを追加することなく復号することができる。<実施形態9>図1、図8に示した各処理部はハードウェアでもって構成しているものとして上記実施形態では説明した。しかし、図1、図8に示した各処理部で行なう処理をコンピュータプログラムでもって構成しても良い。図14は、上記各実施形態に係る画像表示装置に適用可能なコンピュータのハードウェアの構成例を示すブロック図である。CPU1401は、RAM1402やROM1403に格納されているコンピュータプログラムやデータを用いてコンピュータ全体の制御を行うと共に、上記各実施形態に係る画像処理装置が行うものとして上述した各処理を実行する。即ち、CPU1401は、図1、図8に示した各処理部として機能することになる。RAM1402は、外部記憶装置1406からロードされたコンピュータプログラムやデータ、I/Fインターフェース1409を介して外部から取得したデータなどを一時的に記憶するためのエリアを有する。更に、RAM1402は、CPU1401が各種の処理を実行する際に用いるワークエリアを有する。即ち、RAM1402は、例えば、フレームメモリとして割当てたり、その他の各種のエリアを適宜提供することができる。ROM1403には、本コンピュータの設定データや、ブートプログラムなどが格納されている。操作部1404は、キーボードやマウスなどにより構成されており、本コンピュータのユーザが操作することで、各種の指示をCPU1401に対して入力することができる。表示部1405は、CPU1401による処理結果を表示する。また表示部1405は例えば液晶ディスプレイのようなホールド型の表示装置や、フィールドエミッションタイプの表示装置のようなインパルス型の表示装置で構成される。外部記憶装置1406は、ハードディスクドライブ装置に代表される、大容量情報記憶装置である。外部記憶装置1406には、OSオペレーティングシステムや、図1、図8に示した各部の機能をCPU1401に実現させるためのコンピュータプログラムが保存されている。更には、外部記憶装置1406には、処理対象としての各画像データが保存されていても良い。外部記憶装置1406に保存されているコンピュータプログラムやデータは、CPU1401による制御に従って適宜RAM1402にロードされ、CPU1401による処理対象となる。I/F1407には、LANやインターネット等のネットワーク、投影装置や表示装置などの他の機器を接続することができ、本コンピュータはこのI/F1407を介して様々な情報を取得したり、送出したりすることができる。1408は上述の各部を繋ぐバスである。上述の構成からなる作動は前述のフローチャートで説明した作動をCPU1401が中心となってその制御を行う。<その他の実施形態>本発明の目的は、前述した機能を実現するコンピュータプログラムのコードを記録した記憶媒体を、システムに供給し、そのシステムがコンピュータプログラムのコードを読み出し実行することによっても達成される。この場合、記憶媒体から読み出されたコンピュータプログラムのコード自体が前述した実施形態の機能を実現し、そのコンピュータプログラムのコードを記憶した記憶媒体は本発明を構成する。また、そのプログラムのコードの指示に基づき、コンピュータ上で稼働しているオペレーティングシステムOSなどが実際の処理の一部または全部を行い、その処理によって前述した機能が実現される場合も含まれる。さらに、以下の形態で実現しても構わない。すなわち、記憶媒体から読み出されたコンピュータプログラムコードを、コンピュータに挿入された機能拡張カードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込む。そして、そのコンピュータプログラムのコードの指示に基づき、その機能拡張カードや機能拡張ユニットに備わるCPUなどが実際の処理の一部または全部を行って、前述した機能が実現される場合も含まれる。本発明を上記記憶媒体に適用する場合、その記憶媒体には、先に説明したフローチャートに対応するコンピュータプログラムのコードが格納されることになる。