(57)【要約】【課題】画像復号装置における復号処理の計算量を低減させることができるとともに、入力画像と同じ解像度の画像を表示させることができるようにする。【解決手段】入力画像を所定サイズのブロックに分割し、各々のブロックから所定位置の画素を抽出して、複数の縮小画像を生成するとともに、その入力画像の分割状況を示す縮小画像付加情報を出力する画像分割縮小部１と、画像分割縮小部１により生成された複数の縮小画像を合成して合成画像を生成するとともに、その合成画像における複数の縮小画像の配置を示す合成画像付加情報を出力する縮小画像合成部２とを設ける。【選択図】図１
2013126098.tif 000002
【特許請求の範囲】
【請求項１】
複数の画素から構成されている入力画像を所定サイズのブロックに分割し、各々のブロックから所定位置の画素を抽出して、複数の縮小画像を生成するとともに、上記入力画像の分割状況を示す縮小画像付加情報を出力する縮小画像生成手段と、上記縮小画像生成手段により生成された複数の縮小画像を合成して合成画像を生成するとともに、上記合成画像における上記複数の縮小画像の配置を示す合成画像付加情報を出力する合成画像生成手段と、上記合成画像生成手段により生成された合成画像を符号化し、上記合成画像の符号化データと上記縮小画像付加情報及び上記合成画像付加情報からなる符号化画像信号を出力する画像符号化手段とを備えた画像符号化装置。
【請求項２】
画像符号化手段は、合成画像生成手段により生成された合成画像を符号化する際の予測処理において、
上記合成画像生成手段から出力された合成画像付加情報が示す複数の縮小画像の配置から、上記合成画像内の複数の縮小画像が属するスライスの番号を特定し、各縮小画像の予測処理を実施する際、当該縮小画像よりスライスの番号が大きい縮小画像の予測参照を禁止することを特徴とする請求項１記載の画像符号化装置。
【請求項３】
縮小画像生成手段は、入力画像をＭ×Ｎのブロックに分割し、各々のブロックにおける同一位置の画素を集めて、（１／Ｍ）×（１／Ｎ）サイズの複数の縮小画像を生成することを特徴とする請求項１または請求項２記載の画像符号化装置。
【請求項４】
縮小画像生成手段は、（１／Ｍ）×（１／Ｎ）サイズの縮小画像をｍ×ｎのブロックに分割し、各々のブロックにおける同一位置の画素を集めて、（１／ｍ）×（１／ｎ）サイズの複数の縮小画像を生成することを特徴とする請求項３記載の画像符号化装置。
【請求項５】
合成画像生成手段は、縮小画像生成手段により生成された複数の縮小画像を縦に並べることで合成画像を生成することを特徴とする請求項１から請求項３のうちのいずれか１項記載の画像符号化装置。
【請求項６】
合成画像生成手段は、縮小画像生成手段により生成された複数の縮小画像を入力画像の解像度と同一になるように並べることで合成画像を生成することを特徴とする請求項１から請求項３のうちのいずれか１項記載の画像符号化装置。
【請求項７】
合成画像生成手段は、縮小画像生成手段により（１／ｍ）×（１／ｎ）サイズの複数の縮小画像が生成されている場合、（１／ｍ）×（１／ｎ）サイズの複数の縮小画像を（１／Ｍ）×（１／Ｎ）サイズの縮小画像の解像度と同一になるように並べてから、（１／Ｍ）×（１／Ｎ）サイズの複数の縮小画像を入力画像の解像度と同一になるように並べることで合成画像を生成することを特徴とする請求項４記載の画像符号化装置。
【請求項８】
符号化画像信号に含まれている縮小画像付加情報及び合成画像付加情報を抽出する付加情報抽出手段と、上記付加情報抽出手段により抽出された縮小画像付加情報及び合成画像付加情報と復号画像の出力サイズにしたがって符号化画像の復号範囲を決定する画像復号範囲決定手段と、上記符号化画像信号に含まれている合成画像の符号化データのうち、上記画像復号範囲決定手段により決定された復号範囲に対応する符号化データから復号画像を生成する復号画像生成手段と、上記付加情報抽出手段により抽出された縮小画像付加情報及び合成画像付加情報に基づいて、上記復号画像生成手段により生成された復号画像の並び替えを行う復号画像再構築手段とを備えた画像復号装置。
【請求項９】
復号画像再構築手段は、復号画像生成手段により生成された復号画像を構成している画素の補間処理を実施することを特徴とする請求項８記載の画像復号装置。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、画像データを符号化して符号化ストリームを送出する画像符号化装置と、画像データが符号化されている符号化ストリームを復号する画像復号装置とに関するものである。
【背景技術】
【０００２】
近年、動画像を圧縮して符号化する技術が広く用いられている。
動画像を圧縮して符号化する方式としては、例えば、ＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｋ）−ＶＩＤＥＯに採用されているＭＰＥＧ−２（Ｍｏｖｉｎｇ  Ｐｉｃｔｕｒｅ  Ｅｘｐｅｒｔ  Ｇｒｏｕｐ）と呼ばれる方式や、携帯端末向けの地上デジタル放送（ワンセグ放送）やＢｌｕ−ｒａｙ  Ｄｉｓｋに採用されている方式であるＨ．２６４／ＭＰＥＧ−４ＡＶＣ方式などがある。
しかし、上記の動画像符号化方式で圧縮された符号化信号を復号するには、多くの計算量が必要となり、高速なＣＰＵを用いても、複数の符号化信号を短時間で復号するのは困難である。
以下の特許文献１には、入力画像から水平方向又は垂直方向に画素を間引いて、縮小画像を生成し、その縮小画像を符号化することにより、画像の符号化や復号に必要とする部品点数を削減している画像符号化装置が開示されている。
これにより、画像復号装置では、画像符号化信号を復号する際の計算量が半分になっている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１０−２４６０２１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
従来の画像符号化装置は以上のように構成されているので、入力画像から画素を間引くことで縮小画像を生成し、その縮小画像を符号化している。しかし、間引きで失われた情報は捨てられてしまうため、画像復号装置が入力画像と同じ解像度で画像を表示しようとすると、表示画像に歪みが生じてしまう課題があった。
【０００５】
この発明は上記のような課題を解決するためになされたもので、画像復号装置における復号処理の計算量を低減させることができるとともに、入力画像と同じ解像度の画像を表示させることができる画像符号化装置を得ることを目的とする。
また、この発明は、復号処理の計算量を低減することができるとともに、入力画像と同じ解像度の画像を表示することができる画像復号装置を得ることを目的とする。
【課題を解決するための手段】
【０００６】
この発明に係る画像符号化装置は、複数の画素から構成されている入力画像を所定サイズのブロックに分割し、各々のブロックから所定位置の画素を抽出して、複数の縮小画像を生成するとともに、その入力画像の分割状況を示す縮小画像付加情報を出力する縮小画像生成手段と、縮小画像生成手段により生成された複数の縮小画像を合成して合成画像を生成するとともに、その合成画像における複数の縮小画像の配置を示す合成画像付加情報を出力する合成画像生成手段とを設け、画像符号化手段が、合成画像生成手段により生成された合成画像を符号化し、その合成画像の符号化データと縮小画像付加情報及び合成画像付加情報からなる符号化画像信号を出力するようにしたものである。
【発明の効果】
【０００７】
この発明によれば、複数の画素から構成されている入力画像を所定サイズのブロックに分割し、各々のブロックから所定位置の画素を抽出して、複数の縮小画像を生成するとともに、その入力画像の分割状況を示す縮小画像付加情報を出力する縮小画像生成手段と、縮小画像生成手段により生成された複数の縮小画像を合成して合成画像を生成するとともに、その合成画像における複数の縮小画像の配置を示す合成画像付加情報を出力する合成画像生成手段とを設け、画像符号化手段が、合成画像生成手段により生成された合成画像を符号化し、その合成画像の符号化データと縮小画像付加情報及び合成画像付加情報からなる符号化画像信号を出力するように構成したので、画像復号装置における復号処理の計算量を低減させることができるとともに、入力画像と同じ解像度の画像を表示させることができる効果がある。
【図面の簡単な説明】
【０００８】
【図１】この発明の実施の形態１による画像符号化装置を示す構成図である。
【図２】この発明の実施の形態１による画像復号装置を示す構成図である。
【図３】入力画像を２×２ブロックに分割し、各々のブロックにおける同一位置の画素を集めて、（１／２）×（１／２）サイズの縮小画像を４個生成している例を示す説明図である。
【図４】（１／２）×（１／２）サイズの４個の縮小画像を合成して合成画像を生成している例を示す説明図である。
【図５】画像符号化部４がＰピクチャを符号化する際の一例を示す説明図である。
【図６】画像符号化部４によりＨ．２６４符号化方式で符号化された場合の符号化画像信号のデータ構成を示す説明図である。
【図７】復号画像再構築部１４による復号画像の並び替えを示す説明図である。
【図８】入力画像を１×４ブロックに分割して、縮小画像を４個生成している例を示す説明図である。
【図９】縮小画像内の画素を入れ替えて縦に並べることにより、入力画像の解像度と同じ解像度の合成画像を生成する例を示す説明図である。
【図１０】（１／２）×（１／２）サイズの縮小画像を２×２ブロックに分割し、各々のブロックにおける同一位置の画素を集めて、（１／４）×（１／４）サイズの縮小画像を４個生成している例を示す説明図である。
【図１１】（１／２）×（１／２）サイズの４個の縮小画像を合成して合成画像を生成している例を示す説明図である。
【発明を実施するための形態】
【０００９】
実施の形態１．
図１はこの発明の実施の形態１による画像符号化装置を示す構成図である。
図１において、画像分割縮小部１は複数の画素から構成されている入力画像を示す入力画像信号を入力すると、その入力画像を所定サイズのブロックに分割し、各々のブロックから所定位置の画素を抽出することで複数の縮小画像を生成し、それらの縮小画像を示す縮小画像信号を縮小画像合成部２に出力する処理を実施する。
即ち、画像分割縮小部１は入力画像をＭ×Ｎ（Ｍ，Ｎは１以上の整数）のブロックに分割し、各々のブロックにおける同一位置の画素を集めて、（１／Ｍ）×（１／Ｎ）サイズの縮小画像を生成するものであり、各々のブロックから集める画素の位置を替えることで、複数の縮小画像を生成する。
また、画像分割縮小部１は入力画像の分割状況を示す縮小画像付加情報（どのように入力画像を分割して縮小画像を生成しているかを示す情報）を縮小画像合成部２及び符号化付加情報生成部３に出力する処理を実施する。
なお、画像分割縮小部１は縮小画像生成手段を構成している。
【００１０】
縮小画像合成部２は画像分割縮小部１から出力された縮小画像付加情報に基づいて、縮小画像合成部２から出力された複数の縮小画像信号が示す縮小画像を合成して合成画像を生成し、その合成画像を示す合成画像信号を画像符号化部４に出力する処理を実施する。
また、縮小画像合成部２は合成画像における複数の縮小画像の配置を示す合成画像付加情報（どのように縮小画像を合成しているかを示す情報であり、例えば、縮小画像の解像度、縮小画像の並べ方、縮小画像の並べ替えフラグ、縮小画像の並べ替え配置情報など）を画像符号化部４及び符号化付加情報生成部３に出力する処理を実施する。
なお、縮小画像合成部２は合成画像生成手段を構成している。
【００１１】
符号化付加情報生成部３は画像分割縮小部１から出力された縮小画像信号と縮小画像合成部２から出力された合成画像付加情報からなる符号化付加情報を生成し、その符号化付加情報を画像符号化部４に出力する処理を実施する。
画像符号化部４は縮小画像合成部２から出力された合成画像付加情報に基づいて、縮小画像合成部２から出力された合成画像を符号化するとともに、符号化付加情報生成部３から出力された符号化付加情報を符号化し、その合成画像の符号化データと符号化付加情報の符号化データが多重化されている符号化画像信号を出力する処理を実施する。
この実施の形態１では、符号化付加情報生成部３から出力された符号化付加情報を符号化している例を説明するが、その符号化付加情報については符号化せずに、その合成画像の符号化データと当該符号化付加情報が多重化されている符号化画像信号を出力するようにしてもよい。
なお、符号化付加情報生成部３及び画像符号化部４から画像符号化手段が構成されている。
【００１２】
図１の例では、画像符号化装置の構成要素である画像分割縮小部１、縮小画像合成部２、符号化付加情報生成部３及び画像符号化部４のそれぞれが専用のハードウェア（例えば、ＣＰＵを実装している半導体集積回路、あるいは、ワンチップマイコン）で構成されているものを想定しているが、画像符号化装置がコンピュータで構成されていてもよい。
画像符号化装置がコンピュータで構成されている場合、画像分割縮小部１、縮小画像合成部２、符号化付加情報生成部３及び画像符号化部４の処理内容を記述しているプログラムをコンピュータのメモリに格納し、当該コンピュータのＣＰＵが当該メモリに格納されているプログラムを実行するようにすればよい。
【００１３】
図２はこの発明の実施の形態１による画像復号装置を示す構成図である。
図２において、符号化付加情報解析部１１は符号化画像信号に含まれている符号化付加情報の符号化データを復号して、その符号化付加情報から縮小画像付加情報及び合成画像付加情報を抽出し、その縮小画像付加情報及び合成画像付加情報を画像復号範囲決定部１２及び復号画像再構築部１４に出力する処理を実施する。なお、符号化付加情報解析部１１は付加情報抽出手段を構成している。
画像復号範囲決定部１２は符号化付加情報解析部１１から出力された縮小画像付加情報及び合成画像付加情報と、外部から入力された出力サイズ指定信号（復号画像の出力サイズを示す信号）とにしたがって符号化画像の復号範囲を決定する処理を実施する。なお、画像復号範囲決定部１２は画像復号範囲決定手段を構成している。
【００１４】
画像復号部１３は符号化画像信号に含まれている合成画像の符号化データのうち、画像復号範囲決定部１２により決定された復号範囲に対応する符号化データを復号することで、復号画像を生成する処理を実施する。なお、画像復号部１３は復号画像生成手段を構成している。
復号画像再構築部１４は符号化付加情報解析部１１から出力された縮小画像付加情報及び合成画像付加情報に基づいて、画像復号部１３により生成された復号画像の並び替えを行う。なお、復号画像再構築部１４は復号画像再構築手段を構成している。
【００１５】
図２の例では、画像復号装置の構成要素である符号化付加情報解析部１１、画像復号範囲決定部１２、画像復号部１３及び復号画像再構築部１４のそれぞれが専用のハードウェア（例えば、ＣＰＵを実装している半導体集積回路、あるいは、ワンチップマイコン）で構成されているものを想定しているが、画像復号装置がコンピュータで構成されていてもよい。
画像復号装置がコンピュータで構成されている場合、符号化付加情報解析部１１、画像復号範囲決定部１２、画像復号部１３及び復号画像再構築部１４の処理内容を記述しているプログラムをコンピュータのメモリに格納し、当該コンピュータのＣＰＵが当該メモリに格納されているプログラムを実行するようにすればよい。
【００１６】
次に動作について説明する。
最初に、画像符号化装置の処理内容を説明する。
画像分割縮小部１は、複数の画素から構成されている入力画像を示す入力画像信号を入力すると、その入力画像をＭ×Ｎ（Ｍ，Ｎは１以上の整数）のブロックに分割する。
ここで、図３は入力画像を２×２ブロックに分割し、各々のブロックにおける同一位置の画素を集めて、（１／２）×（１／２）サイズの縮小画像を４（＝２×２）個生成している例を示す説明図である。
図３では、ブロック内の左上の画素をａｎ、右上の画素をｂｎ、左下の画素をｃｎ、右下の画素をｄｎと表記している。ただし、ｎ＝０，１，２，…である。
以下、この実施の形態１では、４（＝２×２）個の縮小画像を生成する例を説明する。
【００１７】
画像分割縮小部１は、図３に示すように、入力画像を２×２ブロックに分割すると、各々のブロックにおける同一位置の画素を集めて、（１／２）×（１／２）サイズの縮小画像を生成する。
即ち、画像分割縮小部１は、分割後の各々のブロックからａｎ（ｎ＝０，１，２，…）の画素を集めて縮小画像Ａを生成し、各々のブロックからｂｎ（ｎ＝０，１，２，…）の画素を集めて縮小画像Ｂを生成する。
また、画像分割縮小部１は、各々のブロックからｃｎ（ｎ＝０，１，２，…）の画素を集めて縮小画像Ｃを生成し、各々のブロックからｄｎ（ｎ＝０，１，２，…）の画素を集めて縮小画像Ｄを生成する。
【００１８】
画像分割縮小部１は、４個の縮小画像Ａ，Ｂ，Ｃ，Ｄを生成すると、縮小画像Ａ，Ｂ，Ｃ，Ｄを示す縮小画像信号を縮小画像合成部２に出力するとともに、入力画像の分割状況を示す縮小画像付加情報（どのように入力画像を分割して縮小画像Ａ，Ｂ，Ｃ，Ｄを生成しているかを示す情報）を縮小画像合成部２及び符号化付加情報生成部３に出力する。
なお、入力画像の分割状況を示す縮小画像付加情報としては、例えば、分割後の各々のブロックのサイズ（縮小画像の解像度）を示す情報などが考えられる。
【００１９】
縮小画像合成部２は、画像分割縮小部１から複数の縮小画像信号と縮小画像付加情報を受けると、その縮小画像付加情報に基づいて、複数の縮小画像信号が示す縮小画像Ａ，Ｂ，Ｃ，Ｄを合成して合成画像を生成する。
ここで、図４は（１／２）×（１／２）サイズの縮小画像Ａ，Ｂ，Ｃ，Ｄを合成して合成画像を生成している例を示す説明図である。
図４の例では、４個の縮小画像Ａ，Ｂ，Ｃ，Ｄを縦一列に並べることで合成画像を生成している。
縮小画像合成部２は、４個の縮小画像Ａ，Ｂ，Ｃ，Ｄを合成する際、縮小画像付加情報が示す縮小画像の解像度などを参照して、４個の縮小画像Ａ，Ｂ，Ｃ，Ｄを並べるが、縮小画像Ａ，Ｂ，Ｃ，Ｄの並べ方が、縦一列だけであるように、並び方が固定されているような場合には、縮小画像付加情報を参照することなく並べることができる。
【００２０】
縮小画像合成部２は、縮小画像Ａ，Ｂ，Ｃ，Ｄを合成して合成画像を生成すると、その合成画像における縮小画像Ａ，Ｂ，Ｃ，Ｄの配置を示す合成画像付加情報（どのように縮小画像を合成しているかを示す情報であり、例えば、縮小画像の解像度、縮小画像の並べ方、縮小画像の並べ替えフラグ、縮小画像の並べ替え配置情報など）を画像符号化部４及び符号化付加情報生成部３に出力する。
縮小画像の解像度は、個々の縮小画像のサイズを示すものである。
縮小画像の並べ方は、縦一列のほか、例えば、横一列、田の字の配置などがあり、これらの配置のパターン情報を示すものである。
縮小画像の並べ替えフラグは、縮小画像を合成する際に、縮小画像を並べ替えた場合に立つフラグであり、縮小画像の並べ替えフラグが立っている場合には、縮小画像の並べ替え配置情報も合わせて出力する。
縮小画像の並び替えを行うことで、例えば、（１／２）×（１／２）サイズの縮小画像Ａ，Ｂ，Ｃ，Ｄを、例えば、１×（１／４）サイズのように横長に並び替えて縮小画像を縦一列に並べても、入力画像と同一の解像度で符号化することができるようになる。
【００２１】
符号化付加情報生成部３は、画像分割縮小部１から縮小画像信号を受け、縮小画像合成部２から合成画像付加情報を受けると、その縮小画像信号と合成画像付加情報からなる符号化付加情報を生成して、その符号化付加情報を画像符号化部４に出力する。
画像符号化部４は、縮小画像合成部２から合成画像を示す合成画像信号を受けると、縮小画像合成部２から出力された合成画像付加情報に基づいて、その合成画像を符号化するとともに、符号化付加情報生成部３から出力された符号化付加情報を符号化し、その合成画像の符号化データと符号化付加情報の符号化データが多重化されている符号化画像信号を出力する。
【００２２】
即ち、画像符号化部４は、合成画像を符号化する際、その合成画像内の縮小画像Ａ，Ｂ，Ｃ，Ｄをそれぞれ１つのスライスとみなして、スライス単位に符号化を行う。なお、画像符号化はマクロブロックと呼ばれる１６×１６のブロックを符号化単位としており、マクロブロックを集めてグループ化したものがスライスである。
したがって、画像符号化部４は、縮小画像ＡをＳｌｉｃｅ０、縮小画像ＢをＳｌｉｃｅ１、縮小画像ＣをＳｌｉｃｅ２、縮小画像ＤをＳｌｉｃｅ３として符号化を行うが、その符号化における予測処理（例えば、縮小画像の予測画像を生成するインター予測処理）において、スライス番号の小さいスライスからスライス番号の大きいスライスへの予測参照を禁止するようにしている。
【００２３】
ここで、図５は画像符号化部４がＰピクチャを符号化する際の一例を示す説明図である。
図５の例では、縮小画像合成部２により生成されたｎ番目の合成画像を符号化する際、例えば、Ｓｌｉｃｅ０の符号化における予測処理では、スライス番号が同じであるｎ−１番目の合成画像内のＳｌｉｃｅ０の予測参照は許可しているが、スライス番号が大きいＳｌｉｃｅ１の予測参照を禁止している。
スライス番号の小さいスライスからスライス番号の大きいスライスへの予測参照を許可すると、縮小画像の境界を越えた符号化を行うことになって歪みが発生してしまうため、そのような予測参照を禁止している。
【００２４】
画像符号化部４は、合成画像の符号化と、符号化付加情報生成部３から出力された符号化付加情報の符号化を行うと、その合成画像の符号化データと符号化付加情報の符号化データが多重化されている符号化画像信号を出力する。
ここで、図６は画像符号化部４によりＨ．２６４符号化方式で符号化された場合の符号化画像信号のデータ構成を示す説明図である。
Ｈ．２６４符号化方式では、ヘッダ情報としてＳＰＳ（Ｓｅｑｕｅｎｃｅ  Ｐａｒａｍｅｔｅｒ  Ｓｅｔ：解像度等の符号化シーケンス全体に係る情報を含む）、ＰＰＳ（Ｐｉｃｔｕｒｅ  Ｐａｒａｍｅｔｅｒ  Ｓｅｔ：ピクチャ全体の符号化に係る情報を含む）、ＳＥＩ（Ｓｕｐｐｌｅｍｅｎｔａｌ  Ｅｎｈａｎｃｅｍｅｎｔ  Ｉｎｆｏｒｍａｔｉｏｎ：補足的な付加情報を含むヘッダであり、必須ではないが、ユーザデータを定義することが可能なヘッダ）が付加される。
縮小画像付加情報及び合成画像付加情報からなる符号化付加情報は、ＳＥＩ内にユーザデータとして格納される。
【００２５】
次に、画像復号装置の処理内容を説明する。
符号化付加情報解析部１１は、画像符号化装置から出力された符号化画像信号を入力すると、その符号化画像信号内のＳＥＩのユーザデータを解析して、符号化付加情報の符号化データを取得する。
符号化付加情報解析部１１は、符号化付加情報の符号化データを取得すると、その符号化データを復号して、その符号化付加情報から縮小画像付加情報及び合成画像付加情報を抽出し、その縮小画像付加情報及び合成画像付加情報を画像復号範囲決定部１２及び復号画像再構築部１４に出力する。
【００２６】
画像復号範囲決定部１２は、符号化付加情報解析部１１から縮小画像付加情報及び合成画像付加情報を受けると、その縮小画像付加情報及び合成画像付加情報と、外部から入力された出力サイズ指定信号（復号画像の出力サイズを示す信号であり、例えば、ユーザの操作の下で指定された復号画像の出力サイズ）とにしたがって符号化画像の復号範囲を決定する。
例えば、外部から入力された出力サイズ指定信号が、解像度が（１／２）×（１／２）のサイズを指定している場合において、縮小画像付加情報が示す縮小画像の解像度が２×２のサイズであれば、合成画像内の１個の縮小画像を復号すれば、出力サイズ指定信号が示すサイズの復号画像が得られることになる。
したがって、この例では、合成画像内の１個の縮小画像を復号すればよいため、例えば、Ｓｌｉｃｅ０の縮小画像Ａが、符号化画像の復号範囲に決定される。ここでは、Ｓｌｉｃｅ０の縮小画像Ａを符号化画像の復号範囲に決定しているが、これは一例に過ぎず、例えば、Ｓｌｉｃｅ１の縮小画像Ｂ、Ｓｌｉｃｅ２の縮小画像Ｃ又はＳｌｉｃｅ３の縮小画像Ｄを符号化画像の復号範囲に決定してもよい。
【００２７】
また、例えば、外部から入力された出力サイズ指定信号が、解像度が（１／２）×（１／２）のサイズを指定している場合において、縮小画像付加情報が示す縮小画像の解像度が２×１のサイズであれば、合成画像内の２個の縮小画像を復号すれば、出力サイズ指定信号が示すサイズの復号画像が得られることになる。
したがって、この例では、合成画像内の２個の縮小画像を復号すればよいため、例えば、Ｓｌｉｃｅ０の縮小画像ＡとＳｌｉｃｅ１の縮小画像Ｂが、符号化画像の復号範囲に決定される。ここでは、Ｓｌｉｃｅ０の縮小画像ＡとＳｌｉｃｅ１の縮小画像Ｂを符号化画像の復号範囲に決定しているが、これは一例に過ぎず、例えば、Ｓｌｉｃｅ２の縮小画像ＣとＳｌｉｃｅ３の縮小画像Ｄを符号化画像の復号範囲に決定してもよい。
【００２８】
画像復号部１３は、画像復号範囲決定部１２が符号化画像の復号範囲を決定すると、符号化画像信号に含まれている合成画像の符号化データのうち、その復号範囲に対応する符号化データを復号することで、復号画像を生成する。
即ち、画像復号部１３は、ＳＰＳ内の解像度領域を画像復号範囲決定部１２により決定された復号範囲に置き換えて、その復号範囲に対応する符号化データを復号することで、復号画像を生成する。
上述したように、スライス番号の小さいスライスからスライス番号の大きいスライスへの予測参照を禁止しているので、例えば、符号化画像の復号範囲がＳｌｉｃｅ０の縮小画像Ａである場合、予測参照がＳｌｉｃｅ０に限定されるため、復号範囲の限定以外は通常の復号処理が行われる。
【００２９】
復号画像再構築部１４は、画像復号部１３が復号画像を生成すると、符号化付加情報解析部１１から出力された縮小画像付加情報及び合成画像付加情報に基づいて、その復号画像の並び替えを行う。
ここで、図７は復号画像再構築部１４による復号画像の並び替えを示す説明図である。
図７の例では、合成画像が、４個の縮小画像が縦一列に並べられた画像であり、その縮小画像のブロックサイズが２×２であるため、画像復号部１３により生成された復号画像を４個のブロックに分割し、各々のブロックにおける同一位置の画素を集めて２×２のブロックを構成する。即ち、ａ０，ｂ０，ｃ０，ｄ０の画素を集めて２×２のブロックを構成し、ａ１，ｂ１，ｃ１，ｄ１の画素を集めて２×２のブロックを構成し、ａｎ，ｂｎ，ｃｎ，ｄｎの画素を集めて２×２のブロックを構成する。
そして、２×２のブロックを図７の右側のように並べ替えることで、画像符号化装置における入力画像の解像度と同じ解像度の画像を取得する。
【００３０】
以上で明らかなように、この実施の形態１によれば、複数の画素から構成されている入力画像を所定サイズのブロックに分割し、各々のブロックから所定位置の画素を抽出して、複数の縮小画像を生成するとともに、その入力画像の分割状況を示す縮小画像付加情報を出力する画像分割縮小部１と、画像分割縮小部１により生成された複数の縮小画像を合成して合成画像を生成するとともに、その合成画像における複数の縮小画像の配置を示す合成画像付加情報を出力する縮小画像合成部２とを設け、画像符号化部４が、縮小画像合成部２により生成された合成画像を符号化するとともに、その縮小画像付加情報及び合成画像付加情報からなる符号化画像信号を符号化し、その合成画像の符号化データと符号化画像信号の符号化データからなる符号化画像信号を出力するように構成したので、画像復号装置における復号処理の計算量を低減させることができるとともに、入力画像と同じ解像度の画像を表示させることができる効果を奏する。
【００３１】
即ち、この実施の形態１によれば、画像復号装置で合成画像の符号化データのすべてを復号すれば、入力画像と同じ解像度の画像を表示することができる一方、縮小画像を表示する場合には、合成画像内の縮小画像の符号化データだけを復号すればよいため、縮小画像を表示する際の復号処理に必要な計算量を低減することができる。
【００３２】
実施の形態２．
上記実施の形態１では、画像分割縮小部１が、入力画像を２×２のブロックに分割して、４個の縮小画像を生成するものを示したが、画像分割縮小部１が、入力画像を１×４のブロックに分割して、４個の縮小画像を生成することで、縮小画像合成部２において、縮小画像の並び替えを行うことなく、入力画像の解像度と同じ解像度の合成画像を得るように構成してもよい。
図８は入力画像を１×４ブロックに分割して、縮小画像を４個生成している例を示す説明図である。
【００３３】
また、上記実施の形態１では、縮小画像合成部２が、４個の縮小画像を縦一列に並べるものを示したが、図９に示すように、縮小画像内の画素を入れ替えて縦に並べることにより、入力画像の解像度と同じ解像度の合成画像を生成するように構成してもよい。また、画像符号化部４で解像度の変更を行わないように構成してもよい。
【００３４】
実施の形態３．
上記実施の形態１では、画像分割縮小部１が、入力画像をＭ×Ｎのブロックに分割し、各々のブロックにおける同一位置の画素を集めて、（１／Ｍ）×（１／Ｎ）サイズの縮小画像を生成するものを示したが、さらに、（１／Ｍ）×（１／Ｎ）サイズの縮小画像をｍ×ｎ（ｍ，ｎは１以上の整数）のブロックに分割し、各々のブロックにおける同一位置の画素を集めて、（１／ｍ）×（１／ｎ）サイズの縮小画像を生成するようにしてもよい。この場合も、各々のブロックから集める画素の位置を替えることで、複数の縮小画像を生成する。
【００３５】
図１０は（１／２）×（１／２）サイズの縮小画像を２×２ブロックに分割し、各々のブロックにおける同一位置の画素を集めて、（１／４）×（１／４）サイズの縮小画像を４個生成している例を示す説明図である。
図１０の例では、画像分割縮小部１が、（１／２）×（１／２）サイズの縮小画像を更に２×２のブロックに分割し、各々のブロックにおける同一位置の画素を集めて、（１／４）×（１／４）サイズの縮小画像Ａ０，Ａ１，Ａ２，Ａ３を生成している。
この場合、縮小画像合成部２は、（１／４）×（１／４）サイズの縮小画像Ａ０，Ａ１，Ａ２，Ａ３を（１／２）×（１／２）サイズの縮小画像Ａの解像度と同一になるように並べてから、（１／２）×（１／２）サイズの縮小画像Ａ，Ｂ，Ｃ，Ｄを入力画像の解像度と同一になるように並べることで合成画像を生成する。
【００３６】
実施の形態４．
上記実施の形態１では、縮小画像合成部２が、縮小画像Ａ，Ｂ，Ｃ，Ｄを並べる際、ブロックの位置において、左上、右上、左下、右下の順番（縮小画像Ａ→縮小画像Ｂ→縮小画像Ｃ→縮小画像Ｄ）で縦に並べる例を示したが、図１１に示すように、左上、右下、左下、右上の順番（縮小画像Ａ→縮小画像Ｄ→縮小画像Ｃ→縮小画像Ｂ）で縦に並べるようにしてもよい。
この場合、画像復号部１３が、Ｓｌｉｃｅ０の縮小画像Ａ（左上）と、Ｓｌｉｃｅ１の縮小画像Ｄ（右下）とを復号し、復号画像再構築部１４が、縮小画像Ａ（左上）内の画素と縮小画像Ｄ（右下）内の画素との間で補間処理を実施することで、縮小画像Ｂ（右上）内の画素と縮小画像Ｃ（左下）内の画素を得るようにしてもよい。
【００３７】
なお、本願発明はその発明の範囲内において、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略が可能である。
【符号の説明】
【００３８】
１  画像分割縮小部（縮小画像生成手段）、２  縮小画像合成部（合成画像生成手段）、３  符号化付加情報生成部（画像符号化手段）、４  画像符号化部（画像符号化手段）、１１  符号化付加情報解析部（付加情報抽出手段）、１２  画像復号範囲決定部（画像復号範囲決定手段）、１３  画像復号部（復号画像生成手段）、１４  復号画像再構築部（復号画像再構築手段）。
【図１】
2013126098.tif 000003
【図２】
2013126098.tif 000004
【図３】
2013126098.tif 000005
【図４】
2013126098.tif 000006
【図５】
2013126098.tif 000007
【図６】
2013126098.tif 000008
【図７】
2013126098.tif 000009
【図８】
2013126098.tif 000010
【図９】
2013126098.tif 000011
【図１０】
2013126098.tif 000012
【図１１】
2013126098.tif 000013