(57)【要約】【課題】パラメータに係る伝送量をより低減させることが可能な画像処理装置、画像処理方法、及びプログラムを提供する。【解決手段】予測ブロック情報、または量子化係数に基づいて、逆量子化を制御する逆量子化制御部、を備える、画像処理装置。【選択図】図９
2018047480.tif 000002
【特許請求の範囲】
【請求項１】
予測ブロック情報、または量子化係数に基づいて、逆量子化を制御する逆量子化制御部、を備える、画像処理装置。
【請求項２】
前記画像処理装置は、予測ブロック情報、または量子化係数に基づいて特徴量を取得する特徴量検出部をさらに備え、
前記逆量子化制御部は、前記特徴量に基づいて前記逆量子化を制御する、請求項１に記載の画像処理装置。
【請求項３】
前記特徴量検出部は、前記予測ブロック情報に基づいて生成される予測画像に基づいて、前記特徴量を取得する、請求項２に記載の画像処理装置。
【請求項４】
前記特徴量検出部は、前記予測画像におけるダイナミックレンジを示す特徴量を取得する、請求項３に記載の画像処理装置。
【請求項５】
前記特徴量検出部は、前記予測画像における分散を示す特徴量を取得する、請求項３に記載の画像処理装置。
【請求項６】
前記特徴量検出部は、前記量子化係数における最高次係数の位置を示す特徴量を取得する、請求項２に記載の画像処理装置。
【請求項７】
前記特徴量検出部は、前記量子化係数における係数分布密度を示す特徴量を取得する、請求項２に記載の画像処理装置。
【請求項８】
前記特徴量検出部は、前記予測ブロック情報に含まれる予測モードを示す特徴量を取得する、請求項２に記載の画像処理装置。
【請求項９】
前記逆量子化制御部は、前記特徴量に基づいて、符号化ブロックの逆量子化に用いられる量子化パラメータを特定することで、前記逆量子化を制御する、請求項２に記載の画像処理装置。
【請求項１０】
前記逆量子化制御部は、前記特徴量に基づいて、符号化ブロックにおける直流成分の逆量子化に用いられる量子化パラメータを特定することで、前記逆量子化を制御する、請求項４に記載の画像処理装置。
【請求項１１】
前記逆量子化制御部は、前記特徴量に基づいて、符号化ブロックにおける所定の周波数成分の逆量子化に用いられる量子化パラメータを特定することで、前記逆量子化を制御する、請求項６に記載の画像処理装置。
【請求項１２】
プロセッサが、予測ブロック情報、または量子化係数に基づいて、逆量子化を制御すること、を含む、画像処理方法。
【請求項１３】
コンピュータに、
予測ブロック情報、または量子化係数に基づいて、逆量子化を制御する機能を実現させるための、プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、画像処理装置、画像処理方法、及びプログラムに関する。
【背景技術】
【０００２】
画像符号化に係る技術において、エンコーダ（画像符号化装置）から、デコーダ（画像復号装置）へ、様々な符号化パラメータが伝送されている。例えば、非特許文献１に記載されるように、伝送される符号化パラメータには、量子化に係るパラメータとして、量子化パラメータＱＰや、ブロックごとに量子化パラメータＱＰを調整するための差分量子化パラメータｄＱＰが含まれ得る。
【先行技術文献】
【非特許文献】
【０００３】
【非特許文献１】K.  Sato，  M.  Budagavi，  M.  Coban，  H.  Aoki，  X.  Li，“CE4:Summary  report  of  Core  Experiment  on  quantization”，  JCTVC-F024，  J oint  Collaborative  Team  on  Video  Coding  (JCT-VC)  of  ITU-T  SG16  WP3  and  ISO/IEC  JTC1/SC29/WG11，  6th  Meeting:  Torino,  IT，  14-22  July,  2011
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、全てのブロックについて差分量子化パラメータｄＱＰを伝送すると、エンコーダからデコーダへの伝送量が増大し得る。【０００５】
そこで、パラメータに係る伝送量をより低減させることが可能な仕組みが望まれている。
【課題を解決するための手段】
【０００６】
本開示によれば、予測ブロック情報、または量子化係数に基づいて、逆量子化を制御する逆量子化制御部、を備える、画像処理装置が提供される。【０００７】
また、本開示によれば、プロセッサが、予測ブロック情報、または量子化係数に基づいて、逆量子化を制御すること、を含む、画像処理方法が提供される。【０００８】
また、本開示によれば、コンピュータに、予測ブロック情報、または量子化係数に基づいて、逆量子化を制御する機能を実現させるための、プログラムが提供される。
【発明の効果】
【０００９】
以上説明したように本開示によれば、パラメータに係る伝送量をより低減させることが可能である。【００１０】
なお、上記の効果は必ずしも限定的なものではなく、上記の効果とともに、または上記の効果に代えて、本明細書に示されたいずれかの効果、または本明細書から把握され得る他の効果が奏されてもよい。
【図面の簡単な説明】
【００１１】
【図１】符号化ブロックの特性に応じた量子化制御の例を示す説明図である。
【図２】符号化ブロックの特性に応じた量子化制御の例を示す説明図である。
【図３】本開示の一実施形態に係る画像処理装置の一態様である画像符号化装置１０の構成の一例を示すブロック図である。
【図４】同実施形態に係る量子化部１５の詳細な構成の一例を示すブロック図である。
【図５】同実施形態に係る符号化時の処理の流れの一例を示すフローチャートである。
【図６】図５に示したステップＳ１３０の詳細な流れを示すフローチャート図である。
【図７】図５に示したステップＳ１４０の詳細な流れを示すフローチャート図である。
【図８】同実施形態に係る画像処理装置の一態様である画像復号装置６０の構成の一例を示すブロック図である。
【図９】同実施形態に係る逆量子化部６３の詳細な構成の一例を示すブロック図である。
【図１０】同実施形態に係る復号時の処理の流れの一例を示すフローチャートである。
【図１１】図１０に示したステップＳ２４０の詳細な流れを示すフローチャート図である。
【図１２】コンピュータの主な構成例を示すブロック図である。
【図１３】テレビジョン装置の概略的な構成の一例を示すブロック図である。
【図１４】携帯電話機の概略的な構成の一例を示すブロック図である。
【図１５】記録再生装置の概略的な構成の一例を示すブロック図である。
【図１６】撮像装置の概略的な構成の一例を示すブロック図である。
【図１７】ビデオセットの概略的な構成の一例を示すブロック図である。
【図１８】ビデオプロセッサの概略的な構成の一例を示すブロック図である。
【図１９】ビデオプロセッサの概略的な構成の他の例を示すブロック図である。
【図２０】ネットワークシステムの概略的な構成の一例を示すブロック図である。
【発明を実施するための形態】
【００１２】
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００１３】
なお、説明は以下の順序で行うものとする。
１．概要
２．画像符号化装置の構成
３．符号化時の処理の流れ
４．画像復号装置の構成
５．復号時の処理の流れ
６．ハードウエア構成例
７．応用例
８．まとめ
【００１４】
＜１．概要＞
［１−１．背景］
本開示の一実施形態についての説明にあたり、まず図面を参照しながら本開示の一実施形態の創作に至った背景を説明する。
【００１５】
画像符号化において、符号化ブロック（例えばＨＥＶＣにおけるＣＵ：Coding  Unit）の特性に応じて、量子化の制御を行うことが考えられる。図１、図２は、符号化ブロックの特性に応じた量子化制御の例を示す説明図である。
【００１６】
図１、図２のグラフＧ１２、Ｇ２２は、符号化ブロックにおける差分値の例を示している。また、図１、図２のグラフＧ１４、Ｇ２４は、それぞれグラフＧ１２、Ｇ２２に係る残差画像を周波数領域に変換する直交変換（例えばＤＣＴ等）を施して得られた変換係数値の例を示している。
【００１７】
例えば、図１のグラフＧ１２に示すように、差分値のダイナミックレンジが狭く（最小値と最大値の差分が小さく）、平坦な場合、例えばグラフＧ１４に示すように、変換係数の低域の量子化幅Ｒ１を小さくすることで、効率的な符号化が可能となる。
【００１８】
一方、図２のグラフＧ２２に示すように、差分値のダイナミックレンジが広く（最小値と最大値の差分が大きく）、分散値も高い場合、例えばグラフＧ１４に示すように、変換係数の低域の量子化幅Ｒ２を大きくすることで、ビット量の発生を抑制し得る。
【００１９】
上記のように、符号化ブロックの特性に応じて、量子化に係るパラメータを制御することが望ましい。上述した量子化幅の特定は一例であって、多様な符号化ブロックの特性に応じて、量子化のパラメータが制御され得る。
【００２０】
上記のようにして符号化時に特定された量子化に係るパラメータは、エンコーダ（画像符号化装置）から、デコーダ（画像復号装置）へ伝送され得る。例えば、量子化幅に対応する量子化パラメータＱＰや、ブロックごとに量子化パラメータＱＰを調整するための差分量子化パラメータｄＱＰがエンコーダから、デコーダへ伝送され得る。しかし、全てのブロックについて差分量子化パラメータｄＱＰを伝送すると、エンコーダからデコーダへの伝送量が増大し得る。
【００２１】
そこで、上記事情を一着眼点にして本実施形態を創作するに至った。本実施形態によれば、符号化ブロックの特性に応じて、デコーダ側で逆量子化を制御することで、エンコーダからデコーダへの伝送量を低減させることが可能である。本実施形態による画像符号化装置、及び画像復号装置は、符号化ブロックから特徴量を検出し、特徴量に応じた量子化制御、及び逆量子化制御を行う。以下、本実施形態に係る特徴量抽出処理、及び（逆）量子化制御処理（量子化制御処理、及び逆量子化制御処理）について順次説明を行う。
【００２２】
［１−２．特徴量検出処理］
以下では、本実施形態に係る特徴量検出処理について、５つの例を説明する。なお、以下で説明する第１の特徴量検出処理〜第５の特徴量検出処理により得られる特徴量を、それぞれ特徴量Ａ１〜Ａ５と呼ぶ。
【００２３】
（１）第１の特徴量検出処理
第１の特徴量検出処理は、予測画像におけるダイナミックレンジを示す特徴量Ａ１を取得する処理である。例えば、以下に説明する第１の特徴量検出処理により、特徴量Ａ１が取得されてもよい。
【００２４】
まずＣＵ内の各ＰＵ（Prediction  Unit）に対し、以下の式（１）のように、当該ＰＵに係る特徴量Ａ１’が取得される。
【００２５】
Ａ１’＝Max{P(x,y)}-Min{P(x,y)}  …（１）
【００２６】
なお、式（１）において、P(x,y)は、位置(x,y)における予測画素値である。また、Max{P(x,y)}、及びMin{P(x,y)}は、それぞれ当該ＰＵ内の予測画素値の最大値、及び最小値を表している。
【００２７】
ＣＵに含まれるＰＵごとに、式（１）のように予測画像におけるダイナミックレンジを示す特徴量Ａ１’が取得され、当該ＣＵにおいて最も大きな特徴量Ａ１’が、当該ＣＵの特徴量Ａ１として取得される。
【００２８】
（２）第２の特徴量検出処理
第２の特徴量検出処理は、予測画像における分散を示す特徴量Ａ２を取得する処理である。例えば、以下に説明する第２の特徴量検出処理により、特徴量Ａ２が取得されてもよい。
【００２９】
まずＣＵ内の各ＰＵに対し、以下の式（２）のように、当該ＰＵに係る特徴量Ａ２’が取得される。
【００３０】
Ａ２’＝Σ{(P(x,y)-Average{P(x,y)})^2}  …（２）
【００３１】
なお、式（２）において、Average{P(x,y)}は、当該ＰＵ内の予測画素値の平均を表している。また、Σ{}は、当該ＰＵ内の位置(x,y)について、{}内の値を合計する処理を表している。
【００３２】
ＣＵに含まれるＰＵごとに、式（２）のように予測画像における分散を示す特徴量Ａ２’が取得され、当該ＣＵにおいて最も大きな特徴量Ａ２’が、当該ＣＵの特徴量Ａ２として取得される。
【００３３】
（３）第３の特徴量検出処理
第３の特徴量検出処理は、量子化係数（変換係数を量子化して得られる係数）における最高次係数の位置を示す特徴量Ａ３を取得する処理である。例えば、以下に説明する第３の特徴量検出処理により、特徴量Ａ３が取得されてもよい。
【００３４】
まずＣＵ内の各ＴＵ（Transform  Unit）に対し、以下の表１に示す疑似コードのように、当該ＴＵに係る特徴量Ａ３’が取得される。
【００３５】
【表１】
2018047480.tif 000003
【００３６】
なお、表１において、TU_width、TU_heightは、それぞれ当該ＴＵの幅と高さを示している。また、表１において、TU[i][j]は、位置(i,j)における量子化係数値を示している。
【００３７】
ＣＵに含まれるＴＵごとに、表１に示した処理により最高次係数の位置を示す特徴量Ａ３’が取得され、当該ＣＵにおいて最も大きな特徴量Ａ３’が、当該ＣＵの特徴量Ａ３として取得される。
【００３８】
（４）第４の特徴量検出処理
第４の特徴量検出処理は、量子化係数における係数分布密度を示す特徴量Ａ４を取得する処理である。例えば、以下に説明する第４の特徴量検出処理により、特徴量Ａ４が取得されてもよい。
【００３９】
まずＣＵ内の各ＴＵ（Transform  Unit）に対し、以下の表２に示す疑似コードのように、当該ＴＵに係る特徴量Ａ４’が取得される。
【００４０】
【表２】
2018047480.tif 000004
【００４１】
ＣＵに含まれるＴＵごとに、表２に示した処理により係数分布密度を示す特徴量Ａ４’が取得され、当該ＣＵにおいて最も大きな特徴量Ａ４’が、当該ＣＵの特徴量Ａ４として取得される。
【００４２】
（５）第５の特徴量検出処理
第５の特徴量検出処理は、後述するＰＵ情報（予測ブロック情報）に含まれる予測モードを示す特徴量Ａ５を取得する処理である。例えば、以下に説明する第５の特徴量検出処理により、特徴量Ａ５が取得されてもよい。
【００４３】
まずＣＵ内の各ＰＵに対し、当該ＰＵに係る予測モードがイントラ予測モードであるか否かを示す特徴量Ａ５’が取得される。例えば、当該ＰＵに係る予測モードがイントラ予測モードである場合、Ａ５’は１であり、当該ＰＵに係る予測モードがイントラ予測モードではない場合、Ａ５’は２であってもよい。
【００４４】
ＣＵに含まれるＴＵごとに、当該ＰＵに係る予測モードがイントラ予測モードであるか否かを示す特徴量Ａ５’が取得された後、当該ＣＵにおける特徴量Ａ５’の平均値が、当該ＣＵの予測モードを示す特徴量Ａ５として取得される。
【００４５】
以上、本実施形態に係る特徴量検出処理の例について説明した。なお、本実施形態に係る特徴量検出処理は上記に限定されず、上記以外の方法で特徴量が取得されてもよい。続いて、上記のようにして取得された特徴量に基づく（逆）量子化制御処理について説明する。
【００４６】
［１−３．（逆）量子化制御処理］
以下では、本実施形態に係る（逆）量子化制御処理について、３つの例を説明する。
【００４７】
（１）第１の（逆）量子化制御処理
第１の（逆）量子化制御処理では、ＣＵに係る特徴量に基づき、当該ＣＵ（符号化ブロック）の（逆）量子化に用いられる量子化パラメータを特定することで、（逆）量子化の制御を行う。なお、以下では、基準となる基準量子化パラメータをＱＰ、当該ＣＵの（逆）量子化に用いられる当該ＣＵの量子化パラメータをＱＰ’とする。なお、基準量子化パラメータＱＰは、ピクチャ単位の量子化パラメータであってもよいし、スライス単位の量子化パラメータであってもよい。例えばスライス単位の量子化パラメータが基準量子化パラメータＱＰとして用いられる場合、ピクチャ単位の量子化パラメータと、スライス単位の量子化パラメータ調整値から、スライス単位の量子化パラメータが決定される。係る場合、エンコーダ（画像符号化装置）から、デコーダ（画像復号装置）へ、ピクチャ単位の量子化パラメータと、スライス単位の量子化パラメータ調整値が伝送される。
【００４８】
また、第１の（逆）量子化制御処理は、上述した特徴量Ａ１〜Ａ５を単独で、または組み合わせて特徴量として用いることが可能である。以下では、第１の（逆）量子化制御処理において用いられる特徴量を特徴量Ａｘとするが、特徴量Ａｘは、上述した特徴量Ａ１〜Ａ５のいずれかであってもよいし、上述した特徴量Ａ１〜Ａ５を複数組み合わせて特定される特徴量であってもよい。
【００４９】
【表３】
2018047480.tif 000005
【００５０】
なお、表３において、TH_Axは、特徴量Ａｘに対する閾値である。また、Signは正または負の値である。また、Dは量子化パラメータの制御幅であり、制御幅Dが小さい程（負の値で絶対値が大きい程）、画質改善効果が大きく、Dが大きい場合はビット削減効果が高い。
【００５１】
また、表３において、Clip3(min,max,X)は、３番目の引数Xを１番目の引数min以上、２番目の引数max以下に丸めた値を意味する。また、f(a,b,c)は、以下の式（３）のように３番目の引数（表３の例ではSign）の符号によって大小判定の結果を判定させるための関数である。
【００５２】
f(a,  b,  c)＝c＞0  ？  a＜b  ：  a＞b  …（３）
【００５３】
上述したTH_Ax,  Sign,  Dは、例えば予め定義される値であってもよいし、エンコーダ（画像符号化装置）によりピクチャ単位で動的に制御されてビットストリーム中で伝送される値でもよい。以下、特徴量Ａ１〜Ａ５が第１の（逆）量子化制御処理に用いられる場合の閾値の例について説明する。
【００５４】
例えば、特徴量Ａ１に対する閾値TH_A1は、以下の式（４）を満たす閾値である。
【００５５】
0＜TH_A1＜((1＜＜BitDepth)-1)  …（４）
【００５６】
なお、式（４）において、BitDepthは符号化画像のBit深度を表し、例えば8bit画像の場合、式（４）は以下の式（５）のようになる。
【００５７】
0＜TH_A1＜255  …（５）
【００５８】
例えば、平坦部やグラデーション領域の検出を行う場合、TH_A1を小さい値（Bit深度に比べ1/20〜1/10程度の値）とし、Sign＞0とすることが望ましい。例えば、平坦部に対する画質向上の効果を期待する場合、各パラメータは、TH_A1＝16かつSign＞0かつD＝-6等と設定されてもよい。
【００５９】
また、特徴量Ａ２に対する閾値TH_A2が小さい場合（例えば、Bit深度の1/20〜1/10を2乗した程度の値より小さい場合）で、かつSign＞0の場合は、平坦部やグラデーション領域の検出が可能になる。例えば、平坦部に対する画質向上の効果を期待する場合、各パラメータは、TH_A2＝64かつSign＞0かつD＝-6等と設定されてもよい。
【００６０】
一方で、特徴量Ａ２に対する閾値TH_A2が大きい場合（例えば、Bit深度の1/4〜1/2を２乗した程度の値より大きい場合）で、かつSign＜0の場合は、テクスチャ部の検出が可能になる。例えば、テクスチャ部におけるビット量の抑制の効果を期待する場合、各パラメータは、TH_A2＝4096かつSign＜0かつD＝+6等と設定されてもよい。
【００６１】
また、特徴量Ａ３に対する閾値TH_A3が小さい場合（例えば0.25程度以下）、かつ、Sign＞0の場合は、平坦部やグラデーション領域の検出が可能になる。一方で、特徴量Ａ３に対する閾値TH_A3が大きい場合（例えば0.75程度以上）、かつ、Sign＜0の場合は、テクスチャ部の検出が可能になる。
【００６２】
また、特徴量Ａ４に対する閾値TH_A4が小さい場合（例えば0.25程度以下）、かつ、Sign＞0の場合は、平坦部やグラデーション領域の検出が可能になる。一方で、特徴量Ａ４に対する閾値TH_A4が大きい場合（例えば0.75程度以上）、かつ、Sign＜0の場合は、テクスチャ部の検出が可能になる。
【００６３】
また、例えば、特徴量Ａ５に対する閾値TH_A5をイントラ予測モードであるか否かを示す値（１または２）の中間値とし、Sign＞0とすることで、オクルージョン領域の検出が可能となる。例えば、オクルージョン領域に対する画質向上の効果を期待する場合、各パラメータは、TH_A2＝1.5かつSign＞0かつD＝-6等と設定されてもよい。一方、オクルージョン領域に対するビット量の抑制の効果を期待する場合、各パラメータは、TH_A2＝1.5かつSign＞0かつD＝+6等と設定されてもよい。
【００６４】
（２）第２の（逆）量子化制御処理
第２の（逆）量子化制御処理では、ＣＵに係る特徴量に基づき、当該ＣＵ（符号化ブロック）における直流成分（ＤＣ成分）の（逆）量子化に用いられる量子化パラメータを特定することで、（逆）量子化の制御を行う。
【００６５】
また、第２の（逆）量子化制御処理は、例えば上述した特徴量Ａ１、Ａ２を単独で、または組み合わせて特徴量として用いることが可能である。なお、以下では、基準量子化パラメータをＱＰ、当該ＣＵにおけるＤＣ成分（直流成分）の（逆）量子化に用いられる量子化パラメータをＱＰ’とする。
【００６６】
例えば、当該ＣＵにおけるＤＣ成分の（逆）量子化に用いられる量子化パラメータＱＰ’は、表３を参照して説明した第１の（逆）量子化制御処理と同様にして取得されてもよい。そして、第２の（逆）量子化制御処理では、当該ＣＵのＤＣ成分のみ量子化パラメータＱＰ’を用いて量子化が行われ、当該ＣＵのＤＣ成分以外の量子化は、例えば、基準量子化パラメータＱＰを用いて行われてもよい。
【００６７】
また、第２の（逆）量子化制御処理において、各特徴量Ａ１、Ａ２に対する閾値TH_A1,TH_A2、Sign、制御幅Dは、第１の（逆）量子化制御処理と同様に設定され、第１の（逆）量子化制御処理と同様の効果が得られ得る。
【００６８】
（３）第３の（逆）量子化制御処理
第３の（逆）量子化制御処理では、ＣＵに係る特徴量に基づき、当該ＣＵ（符号化ブロック）における所定の周波数成分の（逆）量子化に用いられる量子化パラメータを特定することで、（逆）量子化の制御を行う。
【００６９】
また、第３の（逆）量子化制御処理は、例えば上述した特徴量Ａ３、Ａ４を単独で、または組み合わせて特徴量として用いることが可能である。なお、以下では、基準量子化パラメータをＱＰ、当該ＣＵにおける所定の周波数成分の（逆）量子化に用いられる量子化パラメータをＱＰ’とする。
【００７０】
例えば、当該ＣＵにおける所定の周波数成分の（逆）量子化に用いられる量子化パラメータＱＰ’は、表３を参照して説明した第１の（逆）量子化制御処理と同様にして取得されてもよい。そして、第３の（逆）量子化制御処理では、当該ＣＵの当該所定の周波数成分のみ量子化パラメータＱＰ’を用いて量子化が行われ、当該ＣＵの当該所定の周波数成分以外の量子化は、例えば、基準量子化パラメータＱＰを用いて行われてもよい。
【００７１】
所定の周波数成分としては、例えば水平方向の信号、または垂直方向の信号等であってよい。例えば、水平方向または垂直方向の信号に係る量子化パラメータのみ小さく設定することで、水平方向または垂直方向の周期的パターンを保護することが可能である。係る場合、例えば、係る場合、特徴量Ａ３に対する閾値TH_A3、または特徴量Ａ４に対する閾値TH_A4は大きい値（例えば0.75程度以上）に設定され、かつ、Sign＜0、D＝-6等と設定されてもよい。
【００７２】
以上、本実施形態に係る（逆）量子化制御処理について説明した。なお、上記では、各特徴量からＣＵの量子化パラメータＱＰ’を求める処理について、量子化制御と逆量子化制御の区別をせず説明したが、特徴量Ａ３、及び特徴量Ａ４から量子化パラメータＱＰを求める処理は、符号化処理における量子化制御と復号処理における逆量子化制御で異なり得る。これは、特徴量Ａ３、及び特徴量Ａ４が、上述したように量子化係数に基づいて特定される値であるが、符号化処理における量子化係数は、量子化パラメータＱＰ’を用いた量子化後に得られる係数であるためである。
【００７３】
そのため、特徴量Ａ３、及び特徴量Ａ４に基づいて量子化パラメータを求める場合、復号処理における逆量子化制御処理は上述した通りであるが、符号化処理における量子化制御では上述した処理と一部異なる処理を行う。量子化制御において、特徴量Ａ３、及び特徴量Ａ４に基づいて量子化パラメータを特定する処理については後述する。
【００７４】
以上、本実施形態の概要を説明した。続いて、本実施形態に係る構成、及び処理の流れについて説明する。
【００７５】
＜２．画像符号化装置の構成＞
［２−１．全体的な構成］
図３は、本実施形態に係る画像処理装置の一態様である画像符号化装置１０の構成の一例を示すブロック図である。図３を参照すると、画像符号化装置１０は、並び替えバッファ１１、制御部１２、減算部１３、直交変換部１４、量子化部１５、可逆符号化部１６、蓄積バッファ１７、逆量子化部２１、逆直交変換部２２、加算部２３、デブロックフィルタ２４、ＳＡＯフィルタ２５、フレームメモリ２６、スイッチ２７、モード設定部２８、イントラ予測部３０及びインター予測部４０を備える。
【００７６】
並び替えバッファ１１は、符号化すべき映像を構成する一連の画像の画像データを、符号化処理に係るＧＯＰ（Group  of  Pictures）構造に応じて並び替える。並び替えバッファ１１は、並び替え後の画像データを制御部１２、減算部１３、イントラ予測部３０、及びインター予測部４０へ出力する。
【００７７】
制御部１２は、各部へ供給される制御パラメータを、例えば、RDO（Rate-Distortion Optimization）に基づいて決定する。決定された制御パラメータは、各ブロックへ供給される。
【００７８】
例えば、制御部１２により決定される制御パラメータは、画像にＨＥＶＣのＣＴＵ（Coding  Tree  Unit）、ＣＵ（Coding  Unit）、ＴＵ（Transform  Unit）及びＰＵ（Prediction  Unit）をどのように設定すべきかを示すブロック情報を含み得る。
【００７９】
また、制御部１２により決定される制御パラメータは、ピクチャ単位の量子化パラメータ、及び、スライス単位の量子化パラメータ調整値を含んでもよい。さらに、制御部１２により決定される制御パラメータは、上述した特徴量Ａ１〜Ａ５のうち、いずれの特徴量を用いるかを示す情報、及び上述した３つの（逆）量子化制御処理のうちいずれの制御処理を行うかを示す情報、を含んでもよい。制御部１２は、例えば上述した特徴量と制御処理の組み合わせによる効果のうち、いずれの効果を期待するかに応じて、特徴量と制御処理の組み合わせを決定してもよい。
【００８０】
なお、制御部１２が決定する制御パラメータは任意であり、上述した情報に限定されず多様な情報を含みうる。
【００８１】
減算部１３は、並び替えバッファ１１から入力される画像データと予測画像データとの差分である予測誤差データを算出し、算出した予測誤差データ（残差信号）を直交変換部１４へ出力する。
【００８２】
直交変換部１４は、各領域内に設定される１つ以上の変換ブロック（ＴＵ）の各々について直交変換処理を実行する。ここでの直交変換は例えば、離散コサイン変換又は離散サイン変換などであってよい。より具体的には、直交変換部１４は、減算部１３から入力される予測誤差データを、変換ブロックごとに、空間領域の画像信号から周波数領域の変換係数に変換する。そして、直交変換部１４は、変換係数を量子化部１５へ出力する。
【００８３】
量子化部１５には、直交変換部１４から入力される変換係数、及び後に説明するモード設定部２８からの予測画像データ、及びＰＵ情報が供給される。量子化部１５は、上述した量子化制御により特定される量子化パラメータを用いて、変換係数を量子化する。量子化部１５は、変換係数を量子化して得られる量子化係数、及び量子化の制御に係る量子化制御情報を可逆符号化部１６及び逆量子化部２１へ出力する。なお、量子化部１５のより詳細な構成について、後にさらに説明する。
【００８４】
可逆符号化部１６は、量子化部１５から入力される量子化係数を符号化することにより、符号化ストリームを生成する。また、可逆符号化部１６は、デコーダにより参照される様々な符号化パラメータを符号化して、符号化された符号化パラメータを符号化ストリームへ挿入する。可逆符号化部１６により符号化される符号化パラメータは、上述した制御部１２により決定された制御パラメータ、モード設定部２８から入力されるＰＵ情報、イントラ予測に関する情報、及びインター予測に関する情報を含み得る。可逆符号化部１６は、生成した符号化ストリームを蓄積バッファ１７へ出力する。
【００８５】
蓄積バッファ１７は、可逆符号化部１６から入力される符号化ストリームを半導体メモリなどの記憶媒体を用いて一時的に蓄積する。そして、蓄積バッファ１７は、蓄積した符号化ストリームを、伝送路の帯域に応じたレートで、図示しない伝送部（例えば、通信インタフェース又は周辺機器との接続インタフェースなど）へ出力する。
【００８６】
逆量子化部２１、逆直交変換部２２及び加算部２３は、ローカルデコーダを構成する。ローカルデコーダは、符号化されたデータから原画像を再構築（リコンストラクト）する役割を有する。
【００８７】
逆量子化部２１は、量子化部１５により使用されたものと同じ量子化パラメータで量子化係数を逆量子化し、変換係数データを復元する。そして、逆量子化部２１は、復元した変換係数データを逆直交変換部２２へ出力する。
【００８８】
加算部２３は、逆直交変換部２２から入力される復元された予測誤差データとイントラ予測部３０又はインター予測部４０から入力される予測画像データとを加算することにより、復号画像データ（リコンストラクト画像）を生成する。そして、加算部２３は、生成した復号画像データをデブロックフィルタ２４及びフレームメモリ２６へ出力する。
【００８９】
デブロックフィルタ２４及びＳＡＯフィルタ２５は、それぞれ、リコンストラクト画像の画質の向上を目的とするインループフィルタである。デブロックフィルタ２４は、加算部２３から入力される復号画像データをフィルタリングすることによりブロック歪みを除去し、フィルタリング後の復号画像データをＳＡＯフィルタ２５へ出力する。ＳＡＯフィルタ２５は、デブロックフィルタ２４から入力される復号画像データにエッジオフセット処理又はバンドオフセット処理を適用することによりノイズを除去し、処理後の復号画像データをフレームメモリ２６へ出力する。
【００９０】
フレームメモリ２６は、加算部２３から入力されるフィルタリング前の復号画像データ、及びＳＡＯフィルタ２５から入力されるインループフィルタの適用後の復号画像データを記憶媒体を用いて記憶する。
【００９１】
スイッチ２７は、イントラ予測のために使用されるフィルタリング前の復号画像データをフレームメモリ２６から読み出し、読み出した復号画像データを参照画像データとしてイントラ予測部３０に供給する。また、スイッチ２７は、インター予測のために使用されるフィルタリング後の復号画像データをフレームメモリ２６から読み出し、読み出した復号画像データを参照画像データとしてインター予測部４０に供給する。
【００９２】
モード設定部２８は、イントラ予測部３０及びインター予測部４０から入力されるコストの比較に基づいて、ブロックごとに予測モード（予測符号化モード）を設定する。モード設定部２８は、イントラ予測モードを設定したブロックについては、イントラ予測部３０により生成される予測画像データを減算部１３へ出力する。また、モード設定部２８は、インター予測モードを設定したブロックについては、インター予測部４０により生成される予測画像データを減算部１３へ出力する。
【００９３】
また、モード設定部２８は、予測画像データ、及び予測画像の生成に係るＰＵ情報（予測ブロック情報）を量子化部１５、及び可逆符号化部１６へ出力する。ＰＵ情報は、例えばＰＵ（予測ブロック）の設定に関する情報、予測モードを示す情報、及び、イントラ予測／インター予測に関する情報を含む。
【００９４】
イントラ予測部３０は、原画像データ及び復号画像データに基づいて、ＨＥＶＣのＰＵ（Prediction  Unit）の各々についてイントラ予測処理を実行する。例えば、イントラ予測部３０は、探索範囲に含まれる予測モード候補の各々について、予測誤差及び発生する符号量に基づくコストを評価する。次に、イントラ予測部３０は、コストが最小となる予測モードを最適な予測モードとして選択する。また、イントラ予測部３０は、選択した最適な予測モードに従って予測画像データを生成する。そして、イントラ予測部３０は、最適な予測モードを示す予測モード情報を含むイントラ予測に関する情報、対応するコスト、及び予測画像データを、モード設定部２８へ出力する。
【００９５】
インター予測部４０は、原画像データ及び復号画像データに基づいて、ＨＥＶＣのＰＵの各々についてインター予測処理（動き補償）を実行する。例えば、インター予測部４０は、ＨＥＶＣにより仕様化されている探索範囲に含まれる予測モード候補の各々について、予測誤差及び発生する符号量に基づくコストを評価する。次に、インター予測部４０は、コストが最小となる予測モード、即ち圧縮率が最も高くなる予測モードを、最適な予測モードとして選択する。また、インター予測部４０は、選択した最適な予測モードに従って予測画像データを生成する。そして、インター予測部４０は、インター予測に関する情報、対応するコスト、及び予測画像データを、モード設定部２８へ出力する。
【００９６】
［２−２．量子化部］
図４は、図３に示した量子化部１５の詳細な構成の一例を示すブロック図である。図４を参照すると、量子化部１５は、特徴量検出部１５１、量子化制御部１５２、及び量子化演算部１５３を有する。
【００９７】
特徴量検出部１５１は、モード設定部２８から提供される予測画像データに含まれる予測画像、及びＰＵ情報に基づいて、第１の特徴量検出処理〜第５の特徴量検出処理を行い、上述した特徴量Ａ１〜Ａ５を取得する。特徴量検出部１５１は、例えば制御部１２により決定される制御パラメータに基づいて、いずれの特徴量を取得するか判定して、特徴量を取得してもよい。
【００９８】
量子化制御部１５２は、特徴量検出部１５１により取得された特徴量に基づいて、量子化の制御を行う。量子化制御部１５２は、上述した第１の量子化制御処理、第２の量子化制御処理、第３の量子化制御処理のうち、いずれかの量子化制御処理を行うことで、量子化パラメータを特定して、量子化演算部１５３による量子化の制御を行ってもよい。また、量子化制御部１５２は、特定した量子化パラメータを含む量子化制御情報を量子化演算部１５３、可逆符号化部１６及び逆量子化部２１へ出力する。
【００９９】
なお、上述したように、特徴量Ａ３、及び特徴量Ａ４に基づいて量子化パラメータを求める場合、量子化制御部１５２は、上述した処理と一部異なる処理を行う。以下、量子化制御部１５２が、特徴量Ａ３、及び特徴量Ａ４に基づいて量子化パラメータを特定する場合の処理について説明する。なお、以下では例として、特徴量Ａ３に基づいて、第１の量子化処理により、各ＣＵの量子化に用いられる量子化パラメータを特定する例を説明する。
【０１００】
係る例では、量子化制御部１５２は、画像復号処理において、基準量子化パラメータＱＰと量子化係数から当該ＣＵの量子化に用いられる量子化パラメータＱＰ’を復元可能な量子化パラメータを探索する。
【０１０１】
まず、量子化制御部１５２は、基準量子化パラメータＱＰに基づいて、仮量子化パラメータｑを所定の探索範囲で動かし、仮量子化パラメータｑを量子化演算部１５３へ出力する。ここで、所定の探索範囲は、例えばＱＰ−α＜ｑ＜ＱＰ＋α（αは予め与えられる０より大きい値）であってもよい。
【０１０２】
量子化演算部１５３が仮量子化パラメータｑを用いて変換係数を量子化して得られる量子化係数は、特徴量検出部１５１へ入力され、特徴量検出部１５１による第３の特徴量検出処理により、仮量子化パラメータｑに対応する特徴量Ａ３が得られる。
【０１０３】
量子化制御部１５２は、仮量子化パラメータｑに対応する特徴量Ａ３を用いて、表３を参照して説明した方法で、仮量子化パラメータｑに対応する量子化パラメータＱＰ’を求める。仮量子化パラメータｑに対応する量子化パラメータＱＰ’と当該仮量子化パラメータｑの値が一致する場合、量子化パラメータの探索を打ち切る。また、量子化制御部１５２は、量子化演算部１５３に、当該仮量子化パラメータｑ（＝仮量子化パラメータｑに対応する量子化パラメータＱＰ’）を用いて量子化された量子化係数を可逆符号化部１６及び逆量子化部２１へ出力させる。
【０１０４】
係る量子化制御処理により、後述する画像復号装置において、基準量子化パラメータＱＰと量子化係数から、量子化に用いられた量子化パラメータＱＰ’を特定することが可能である。
【０１０５】
なお、上記では、特徴量Ａ３に基づいて、量子化パラメータを特定する例を説明したが、特徴量Ａ４が用いられる場合でも同様である。
【０１０６】
また、上記では、第１の量子化処理により、各ＣＵの量子化に用いられる量子化パラメータを特定する例を説明したが、第３の量子化制御処理により所定の周波数成分の量子化に用いられる量子化パラメータを特定する場合でも同様である。ただし、第３の量子化制御処理が行われる場合、仮量子化パラメータｑは、所定の周波数成分の量子化にのみ用いられ、他の成分の量子化には基準量子化パラメータＱＰが用いられる。
【０１０７】
量子化演算部１５３は、量子化制御部１５２により特定される量子化パラメータを用いて、直交変換部１４から入力される変換係数を量子化し、量子化係数を得る。そして、量子化演算部１５３は量子化係数を可逆符号化部１６及び逆量子化部２１へ出力する。なお、量子化制御部１５２により設定される量子化パラメータは、逆量子化部２１における逆量子化の際にも使用され得る。
【０１０８】
＜３．符号化時の処理の流れ＞
［３−１．全体的な処理の流れ］
図５は、本実施形態に係る符号化時の処理の流れの一例を示すフローチャートである。
【０１０９】
図５を参照すると、まず制御部１２が制御パラメータを決定する（Ｓ１１０）。続いて、減算部１３から入力される予測誤差データに対して、直交変換部１４による直交変換が行われ、その一方でイントラ予測部３０、インター予測部４０による予測処理が行われる（Ｓ１２０）。ステップＳ１２０における直交変換、及び予測処理は、並列的に処理されてもよい。
【０１１０】
続いて、量子化部１５の特徴量検出部１５１が、ステップＳ１２０で得られた予測画像とＰＵ情報に基づいて、特徴量を検出(取得)する（Ｓ１３０）。なお、ステップＳ１３０の処理の詳細については後述する。続いて、量子化部１５の量子化制御部１５２が、特徴量に基づいて、量子化に用いる量子化パラメータを特定し、量子化パラメータを含む量子化制御情報を生成する（Ｓ１４０）。なお、ステップＳ１４０の処理の詳細については後述する。
【０１１１】
続いて、量子化部１５の量子化演算部１５３が、量子化制御部１５２により特定された量子化パラメータを用いて、ステップＳ１２０で得られた変換係数を量子化して量子化係数を取得する（Ｓ１５０）。
【０１１２】
続いて、可逆符号化部１６がステップＳ１５０の処理により得られた量子化係数を符号化する（Ｓ１６０）。また、この時、可逆符号化部１６は、制御パラメータ、ＰＵ情報等を含む符号化パラメータを符号化する。
【０１１３】
［３−２．特徴量検出処理の流れ］
図６は、図５に示したステップＳ１３０の詳細な流れを示すフローチャート図である。
【０１１４】
図６を参照すると、整数である変数ｎがｎ＝１と設定される（Ｓ１３１）。続いて、変数ｎと特徴量の数Ｎの大きさが比較される（Ｓ１３２）。
【０１１５】
変数ｎが特徴量の数Ｎ以下であり（Ｓ１３２においてＹＥＳ）、特徴量Ａｎを後述する量子化制御情報の生成に利用する場合（Ｓ１３３においてＹＥＳ）、特徴量検出部１５１は、特徴量Ａｎを検出（取得）する（Ｓ１３４）。続いて、ｎがインクリメントされる（Ｓ１３５）。
【０１１６】
一方、特徴量Ａｎを量子化制御情報の生成に利用しない場合（Ｓ１３３においてＮＯ）は、特徴量Ａｎが検出されず、ｎがインクリメントされる（Ｓ１３５）。
【０１１７】
上述したステップＳ１３２〜Ｓ１３５の処理は、変数ｎが特徴量の数Ｎより大きくなるまで繰り返され、変数ｎが特徴量の数Ｎより大きくなった場合（Ｓ１３２においてＮＯ）、特徴量検出部１５１は、検出された特徴量を含む特徴量Ａｘを量子化制御部１５２へ出力する（Ｓ１３６）。
【０１１８】
［３−３．量子化制御情報生成処理の流れ］
図７は、図５に示したステップＳ１４０の詳細な流れを示すフローチャート図である。
【０１１９】
図７を参照すると、まず基準量子化パラメータＱＰが決定される（Ｓ１４１）。例えば、基準量子化パラメータは、スライス単位の量子化パラメータとして、制御部１２により決定されたピクチャ単位の量子化パラメータと、スライス単位の量子化パラメータ調整値を用いて決定されてもよい。
【０１２０】
続いて、量子化制御部１５２は、ステップＳ１３０で検出された特徴量に基づき、量子化パラメータを決定（特定）する（Ｓ１４２）。ここで、量子化パラメータは、上述した第１の量子化制御処理〜第３の量子化制御処理のうち、制御部１２により決定された量子化制御処理により、特定されてもよい。
【０１２１】
続いて、量子化制御部１５２は、ステップＳ１４２で特定した量子化パラメータを含む量子化制御情報を量子化演算部１５３、可逆符号化部１６及び逆量子化部２１へ出力する（Ｓ１４３）。
【０１２２】
以上のように各処理を実行することにより、画像符号化装置１０は、ブロックごとに量子化パラメータを調整するための差分量子化パラメータを送信しなくてもよく、パラメータに係る伝送量をより低減させることが可能である。
【０１２３】
なお、上述した各処理の処理単位は任意であり、互いに同一でなくてもよい。したがって、各ステップの処理は、適宜、他のステップの処理等と並行して、または、処理順を入れ替えて実行することもできる。
【０１２４】
＜４．画像復号装置の構成＞
［４−１．全体的な構成］
続いて、以上のように符号化された符号化データの復号について説明する。図８は、本実施形態に係る画像処理装置の一態様である画像復号装置６０の構成の一例を示すブロック図である。図８を参照すると、蓄積バッファ６１、可逆復号部６２、逆量子化部６３、逆直交変換部６４、加算部６５、デブロックフィルタ６６、ＳＡＯフィルタ６７、並び替えバッファ６８、Ｄ／Ａ（Digital  to  Analogue）変換部６９、フレームメモリ７０、セレクタ７１ａ及び７１ｂ、イントラ予測部８０並びにインター予測部９０を備える。
【０１２５】
蓄積バッファ６１は、図示しない伝送部（例えば、通信インタフェース又は周辺機器との接続インタフェースなど）を介して画像符号化装置１０から受信される符号化ストリームを記憶媒体を用いて一時的に蓄積する。
【０１２６】
可逆復号部６２は、蓄積バッファ６１から入力される符号化ストリームから、符号化の際に使用された符号化方式に従って量子化係数を復号する。また、可逆復号部６２は、符号化ストリームのヘッダ領域に挿入されている各種の符号化パラメータを復号する。可逆復号部６２により復号されるパラメータは、例えば、上述した制御部１２により決定された符号化パラメータ、ＰＵ情報等を含み得る。
【０１２７】
可逆復号部６２は、量子化係数、ＰＵ情報を逆量子化部６３へ出力する。また、可逆復号部６２は、ＰＵ情報に含まれるイントラ予測に関する情報をイントラ予測部８０へ出力する。また、可逆復号部６２は、ＰＵ情報に含まれるインター予測に関する情報をインター予測部９０へ出力する。
【０１２８】
逆量子化部６３には、可逆復号部６２から入力される量子化係数、ＰＵ情報、及びセレクタ７１ｂから入力される予測画像データが供給される。逆量子化部６３は、ＰＵ情報、または予測画像データに含まれる予測画像に基づいて量子化係数を逆量子化し、変換係数データを復元する。逆量子化部６３は、復元した変換係数データを逆直交変換部６４へ出力する。なお、逆量子化部６３のより詳細な構成について、後にさらに説明する。
【０１２９】
逆直交変換部６４は、符号化の際に使用された直交変換方式に従い、逆量子化部６３から入力される変換係数データについて逆直交変換を行うことにより、予測誤差データを生成する。逆直交変換部６４は、生成した予測誤差データを加算部６５へ出力する。
【０１３０】
加算部６５は、逆直交変換部６４から入力される予測誤差データと、セレクタ７１ｂから入力される予測画像データとを加算することにより、復号画像データを生成する。そして、加算部６５は、生成した復号画像データをデブロックフィルタ６６及びフレームメモリ７０へ出力する。
【０１３１】
デブロックフィルタ６６は、加算部６５から入力される復号画像データをフィルタリングすることによりブロック歪みを除去し、フィルタリング後の復号画像データをＳＡＯフィルタ６７へ出力する。
【０１３２】
ＳＡＯフィルタ６７は、デブロックフィルタ６６から入力される復号画像データにエッジオフセット処理又はバンドオフセット処理を適用することによりノイズを除去し、処理後の復号画像データを並び替えバッファ６８及びフレームメモリ７０へ出力する。
【０１３３】
並び替えバッファ６８は、ＳＡＯフィルタ６７から入力される画像を並び替えることにより、時系列の一連の画像データを生成する。そして、並び替えバッファ６８は、生成した画像データをＤ／Ａ変換部６９へ出力する。
【０１３４】
Ｄ／Ａ変換部６９は、並び替えバッファ６８から入力されるデジタル形式の画像データをアナログ形式の画像信号に変換する。そして、Ｄ／Ａ変換部６９は、例えば、画像復号装置６０と接続されるディスプレイ（図示せず）にアナログ画像信号を出力することにより、復号された映像を表示させる。
【０１３５】
フレームメモリ７０は、加算部６５から入力されるフィルタリング前の復号画像データ、及びＳＡＯフィルタ６７から入力されるフィルタリング後の復号画像データを記憶媒体を用いて記憶する。
【０１３６】
セレクタ７１ａは、可逆復号部６２により取得されるＰＵ情報に含まれる予測モード情報に応じて、画像内のブロックごとに、フレームメモリ７０からの画像データの出力先をイントラ予測部８０とインター予測部９０との間で切り替える。例えば、セレクタ７１ａは、イントラ予測モードが指定された場合には、フレームメモリ７０から供給されるフィルタリング前の復号画像データを参照画像データとしてイントラ予測部８０へ出力する。また、セレクタ７１ａは、インター予測モードが指定された場合には、フィルタリング後の復号画像データを参照画像データとしてインター予測部９０へ出力する。
【０１３７】
セレクタ７１ｂは、可逆復号部６２により取得されるＰＵ情報に含まれる予測モード情報に応じて、加算部６５へ供給すべき予測画像データの出力元をイントラ予測部８０とインター予測部９０との間で切り替える。例えば、セレクタ７１ｂは、イントラ予測モードが指定された場合には、イントラ予測部８０から出力される予測画像データを逆量子化部６３、及び加算部６５へ供給する。また、セレクタ７１ｂは、インター予測モードが指定された場合には、インター予測部９０から出力される予測画像データを逆量子化部６３、及び加算部６５へ供給する。
【０１３８】
イントラ予測部８０は、可逆復号部６２から入力されるＰＵ情報に含まれるイントラ予測に関する情報とフレームメモリ７０からの参照画像データとに基づいてイントラ予測処理を行い、予測画像データを生成する。そして、イントラ予測部８０は、生成した予測画像データをセレクタ７１ｂへ出力する。
【０１３９】
インター予測部９０は、可逆復号部６２から入力されるＰＵ情報に含まれるインター予測に関する情報とフレームメモリ７０からの参照画像データとに基づいてインター予測処理を行い、予測画像データを生成する。そして、インター予測部９０は、生成した予測画像データをセレクタ７１ｂへ出力する。
【０１４０】
［４−２．逆量子化部］
図９は、図８に示した逆量子化部６３の詳細な構成の一例を示すブロック図である。図９を参照すると、逆量子化部６３は、特徴量検出部６３１、逆量子化制御部６３２、及び逆量子化演算部６３３を有する。
【０１４１】
特徴量検出部６３１は、ＰＵ情報に基づいてイントラ予測部８０またはインター予測部９０により生成され、セレクタ７１ｂから提供される予測画像データに含まれる予測画像、及び可逆復号部６２から提供されるＰＵ情報に基づいて、第１の特徴量検出処理〜第５の特徴量検出処理を行い、上述した特徴量Ａ１〜Ａ５を取得する。特徴量検出部６３１は、例えば可逆復号部６２により取得される符号化パラメータに基づいて、いずれの特徴量を取得するか判定して、特徴量を取得してもよい。
【０１４２】
逆量子化制御部６３２は、特徴量検出部６３１により取得された特徴量に基づいて、逆量子化の制御を行う。逆量子化制御部６３２は、上述した第１の逆量子化制御処理、第２の逆量子化制御処理、第３の逆量子化制御処理のうち、いずれかの逆量子化制御処理を行うことで、量子化パラメータを特定して、逆量子化演算部６３３による逆量子化の制御を行ってもよい。また、逆量子化制御部６３２は、特定した量子化パラメータを含む逆量子化制御情報を逆量子化演算部６３３へ出力する。
【０１４３】
逆量子化演算部６３３は、逆量子化制御部６３２により特定される量子化パラメータを用いて、可逆復号部６２から入力される量子化係数を逆量子化し、変換係数を得る。そして、逆量子化演算部６３３は変換係数を逆直交変換部６４へ出力する。
【０１４４】
＜５．復号時の処理の流れ＞
［５−１．全体的な処理の流れ］
図１０は、本実施形態に係る復号時の処理の流れの一例を示すフローチャートである。
【０１４５】
図１０を参照すると、まず可逆復号部６２が復号処理を行い、量子化係数と符号化パラメータが取得（復号）される（Ｓ２１０）。ステップＳ２１０で取得される符号化パラメータには、ブロック情報、ピクチャ単位の量子化パラメータ、スライス単位の量子化パラメータ調整値、ＰＵ情報、等が含まれ得る。また、ステップＳ２１０で取得される符号化パラメータには、いずれの特徴量、及び量子化制御処理が符号化時に用いられたか、を示す情報が含まれてもよい。
【０１４６】
続いて、ＰＵ情報に含まれる予測モード情報に応じて、イントラ予測部８０、またはインター予測部９０により、予測画像が生成される（Ｓ２２０）。
【０１４７】
続いて、逆量子化部６３の特徴量検出部６３１が、ステップＳ２１０で得られたＰＵ情報と、ステップＳ２２０で得られた予測画像に基づいて、特徴量を検出(取得)する（Ｓ２３０）。なお、ステップＳ２３０の処理は、図６を参照して説明した符号化時のステップＳ１３０の処理と同様である。
【０１４８】
続いて、逆量子化部６３の逆量子化制御部６３２が、ステップＳ２３０で検出された特徴量に基づいて、逆量子化に用いる量子化パラメータを特定し、量子化パラメータを含む逆量子化制御情報を生成する（Ｓ２４０）。なお、ステップＳ２４０の処理の詳細については後述する。
【０１４９】
続いて、逆量子化部６３の逆量子化演算部６３３が、逆量子化制御部６３２により特定された量子化パラメータを用いて、ステップＳ２１０で得られた量子化係数を逆量子化して変換係数を取得する（Ｓ２５０）。
【０１５０】
続いて、逆直交変換部６４が、ステップＳ２５０で得られた変換係数に対して、逆直交変換を行い、予測誤差データを得る（Ｓ２６０）。
【０１５１】
続いて、加算部６５が予測誤差データと予測画像データとを加算することにより、復号画像データを生成する（Ｓ２７０）。
【０１５２】
［５−２．逆量子化制御情報生成処理の流れ］
図１１は、図１０に示したステップＳ２４０の詳細な流れを示すフローチャート図である。
【０１５３】
図１１を参照すると、まず基準量子化パラメータＱＰが決定される（Ｓ２４１）。例えば、基準量子化パラメータは、スライス単位の量子化パラメータとして、可逆復号部６２により取得されたパラメータに含まれるピクチャ単位の量子化パラメータと、スライス単位の量子化パラメータ調整値を用いて決定されてもよい。
【０１５４】
続いて、逆量子化制御部６３２は、ステップＳ２３０で検出された特徴量に基づき、量子化パラメータを決定（特定）する（Ｓ２４３）。ここで、量子化パラメータは、上述した第１の逆量子化制御処理〜第３の逆量子化制御処理のうち、符号化時に行われた量子化制御処理に対応する逆量子化制御処理により、特定されてもよい。
【０１５５】
続いて、逆量子化制御部６３２は、ステップＳ２４２で特定した量子化パラメータを含む逆量子化制御情報を逆量子化演算部６３３へ出力する（Ｓ２４６）。
【０１５６】
以上のように各処理を実行することにより、画像復号装置６０は、ブロックごとに量子化パラメータを調整するための差分量子化パラメータを受信しなくても、量子化パラメータを特定可能であり、パラメータに係る伝送量をより低減させることが可能である。
【０１５７】
なお、上述した各処理の処理単位は任意であり、互いに同一でなくてもよい。したがって、各ステップの処理は、適宜、他のステップの処理等と並行して、または、処理順を入れ替えて実行することもできる。
【０１５８】
＜６．ハードウエア構成例＞
上述した一連の処理は、ハードウエアにより実行させることもできるし、ソフトウエアにより実行させることもできる。一連の処理をソフトウエアにより実行する場合には、そのソフトウエアを構成するプログラムが、コンピュータにインストールされる。ここでコンピュータには、専用のハードウエアに組み込まれているコンピュータや、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータ等が含まれる。
【０１５９】
図１２は、上述した一連の処理をプログラムにより実行するコンピュータのハードウエアの構成例を示すブロック図である。
【０１６０】
図１２に示されるコンピュータ８００において、CPU（Central Processing Unit）８０１、ROM（Read Only Memory）８０２、RAM（Random Access Memory）８０３は、バス８０４を介して相互に接続されている。
【０１６１】
バス８０４にはまた、入出力インタフェース８１０も接続されている。入出力インタフェース８１０には、入力部８１１、出力部８１２、記憶部８１３、通信部８１４、およびドライブ８１５が接続されている。
【０１６２】
入力部８１１は、例えば、キーボード、マウス、マイクロホン、タッチパネル、入力端子などよりなる。出力部８１２は、例えば、ディスプレイ、スピーカ、出力端子などよりなる。記憶部８１３は、例えば、ハードディスク、RAMディスク、不揮発性のメモリなどよりなる。通信部８１４は、例えば、ネットワークインタフェースよりなる。ドライブ８１５は、磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリなどのリムーバブルメディア８２１を駆動する。
【０１６３】
以上のように構成されるコンピュータでは、CPU８０１が、例えば、記憶部８１３に記憶されているプログラムを、入出力インタフェース８１０およびバス８０４を介して、RAM８０３にロードして実行することにより、上述した一連の処理が行われる。RAM８０３にはまた、CPU８０１が各種の処理を実行する上において必要なデータなども適宜記憶される。
【０１６４】
コンピュータ（CPU８０１）が実行するプログラムは、例えば、パッケージメディア等としてのリムーバブルメディア８２１に記録して適用することができる。その場合、プログラムは、リムーバブルメディア８２１をドライブ８１５に装着することにより、入出力インタフェース８１０を介して、記憶部８１３にインストールすることができる。
【０１６５】
また、このプログラムは、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の伝送媒体を介して提供することもできる。その場合、プログラムは、通信部８１４で受信し、記憶部８１３にインストールすることができる。
【０１６６】
その他、このプログラムは、ROM８０２や記憶部８１３に、あらかじめインストールしておくこともできる。
【０１６７】
＜７．応用例＞
上述した実施形態に係る画像符号化装置１０及び画像復号装置６０は、衛星放送、ケーブルＴＶなどの有線放送、インターネット上での配信、及びセルラー通信による端末への配信などにおける送信機若しくは受信機、光ディスク、磁気ディスク及びフラッシュメモリなどの媒体に画像を記録する記録装置、又は、これら記憶媒体から画像を再生する再生装置などの様々な電子機器に応用され得る。
【０１６８】
（１）第１の応用例：テレビジョン受像機
図１３は、上述した実施形態を適用したテレビジョン装置の概略的な構成の一例を示している。テレビジョン装置９００は、アンテナ９０１、チューナ９０２、デマルチプレクサ９０３、デコーダ９０４、映像信号処理部９０５、表示部９０６、音声信号処理部９０７、スピーカ９０８、外部インタフェース（I/F）９０９、制御部９１０、ユーザインタフェース（I/F）９１１、及びバス９１２を備える。
【０１６９】
チューナ９０２は、アンテナ９０１を介して受信される放送信号から所望のチャンネルの信号を抽出し、抽出した信号を復調する。そして、チューナ９０２は、復調により得られた符号化ビットストリームをデマルチプレクサ９０３へ出力する。即ち、チューナ９０２は、画像が符号化されている符号化ストリームを受信する、テレビジョン装置９００における伝送部としての役割を有する。
【０１７０】
デマルチプレクサ９０３は、符号化ビットストリームから視聴対象の番組の映像ストリーム及び音声ストリームを分離し、分離した各ストリームをデコーダ９０４へ出力する。また、デマルチプレクサ９０３は、符号化ビットストリームからEPG（Electronic Program Guide）などの補助的なデータを抽出し、抽出したデータを制御部９１０に供給する。なお、デマルチプレクサ９０３は、符号化ビットストリームがスクランブルされている場合には、デスクランブルを行ってもよい。
【０１７１】
デコーダ９０４は、デマルチプレクサ９０３から入力される映像ストリーム及び音声ストリームを復号する。そして、デコーダ９０４は、復号処理により生成される映像データを映像信号処理部９０５へ出力する。また、デコーダ９０４は、復号処理により生成される音声データを音声信号処理部９０７へ出力する。
【０１７２】
映像信号処理部９０５は、デコーダ９０４から入力される映像データを再生し、表示部９０６に映像を表示させる。また、映像信号処理部９０５は、ネットワークを介して供給されるアプリケーション画面を表示部９０６に表示させてもよい。また、映像信号処理部９０５は、映像データについて、設定に応じて、例えばノイズ除去などの追加的な処理を行ってもよい。さらに、映像信号処理部９０５は、例えばメニュー、ボタン又はカーソルなどのGUI（Graphical User Interface）の画像を生成し、生成した画像を出力画像に重畳してもよい。
【０１７３】
表示部９０６は、映像信号処理部９０５から供給される駆動信号により駆動され、表示デバイス（例えば、液晶ディスプレイ、プラズマディスプレイ又はOELD（Organic ElectroLuminescence Display）（有機ELディスプレイ）など）の映像面上に映像又は画像を表示する。
【０１７４】
音声信号処理部９０７は、デコーダ９０４から入力される音声データについてD/A変換及び増幅などの再生処理を行い、スピーカ９０８から音声を出力させる。また、音声信号処理部９０７は、音声データについてノイズ除去などの追加的な処理を行ってもよい。
【０１７５】
外部インタフェース９０９は、テレビジョン装置９００と外部機器又はネットワークとを接続するためのインタフェースである。例えば、外部インタフェース９０９を介して受信される映像ストリーム又は音声ストリームが、デコーダ９０４により復号されてもよい。即ち、外部インタフェース９０９もまた、画像が符号化されている符号化ストリームを受信する、テレビジョン装置９００における伝送部としての役割を有する。
【０１７６】
制御部９１０は、CPUなどのプロセッサ、並びにRAM及びROMなどのメモリを有する。メモリは、CPUにより実行されるプログラム、プログラムデータ、EPGデータ、及びネットワークを介して取得されるデータなどを記憶する。メモリにより記憶されるプログラムは、例えば、テレビジョン装置９００の起動時にCPUにより読み込まれ、実行される。CPUは、プログラムを実行することにより、例えばユーザインタフェース部９１１から入力される操作信号に応じて、テレビジョン装置９００の動作を制御する。
【０１７７】
ユーザインタフェース部９１１は、制御部９１０と接続される。ユーザインタフェース部９１１は、例えば、ユーザがテレビジョン装置９００を操作するためのボタン及びスイッチ、並びに遠隔制御信号の受信部などを有する。ユーザインタフェース部９１１は、これら構成要素を介してユーザによる操作を検出して操作信号を生成し、生成した操作信号を制御部９１０へ出力する。
【０１７８】
バス９１２は、チューナ９０２、デマルチプレクサ９０３、デコーダ９０４、映像信号処理部９０５、音声信号処理部９０７、外部インタフェース９０９及び制御部９１０を相互に接続する。
【０１７９】
このように構成されたテレビジョン装置９００において、デコーダ９０４が、上述した画像復号装置６０の機能を有するようにしてもよい。つまり、デコーダ９０４が、符号化データを、以上の各実施の形態において説明した方法で復号するようにしてもよい。このようにすることにより、テレビジョン装置９００は、パラメータの伝送（受信）に係る伝送量をより低減させることが可能となる。
【０１８０】
また、このように構成されたテレビジョン装置９００において、映像信号処理部９０５が、例えば、デコーダ９０４から供給される画像データを符号化し、得られた符号化データを、外部インタフェース９０９を介してテレビジョン装置９００の外部に出力させることができるようにしてもよい。そして、その映像信号処理部９０５が、上述した画像符号化装置１０の機能を有するようにしてもよい。つまり、映像信号処理部９０５が、デコーダ９０４から供給される画像データを、以上の各実施の形態において説明した方法で符号化するようにしてもよい。このようにすることにより、テレビジョン装置９００は、パラメータの伝送（送信）に係る伝送量をより低減させることが可能となる。
【０１８１】
（２）第２の応用例：携帯電話機
図１４は、上述した実施形態を適用した携帯電話機の概略的な構成の一例を示している。携帯電話機９２０は、アンテナ９２１、通信部９２２、音声コーデック９２３、スピーカ９２４、マイクロホン９２５、カメラ部９２６、画像処理部９２７、多重分離部９２８、記録再生部９２９、表示部９３０、制御部９３１、操作部９３２、及びバス９３３を備える。
【０１８２】
アンテナ９２１は、通信部９２２に接続される。スピーカ９２４及びマイクロホン９２５は、音声コーデック９２３に接続される。操作部９３２は、制御部９３１に接続される。バス９３３は、通信部９２２、音声コーデック９２３、カメラ部９２６、画像処理部９２７、多重分離部９２８、記録再生部９２９、表示部９３０、及び制御部９３１を相互に接続する。
【０１８３】
携帯電話機９２０は、音声通話モード、データ通信モード、撮影モード及びテレビ電話モードを含む様々な動作モードで、音声信号の送受信、電子メール又は画像データの送受信、画像の撮像、及びデータの記録などの動作を行う。
【０１８４】
音声通話モードにおいて、マイクロホン９２５により生成されるアナログ音声信号は、音声コーデック９２３に供給される。音声コーデック９２３は、アナログ音声信号を音声データへ変換し、変換された音声データをA/D変換し圧縮する。そして、音声コーデック９２３は、圧縮後の音声データを通信部９２２へ出力する。通信部９２２は、音声データを符号化及び変調し、送信信号を生成する。そして、通信部９２２は、生成した送信信号を、アンテナ９２１を介して基地局（図示せず）へ送信する。また、通信部９２２は、アンテナ９２１を介して受信される無線信号を増幅し及び周波数変換し、受信信号を取得する。そして、通信部９２２は、受信信号を復調及び復号して音声データを生成し、生成した音声データを音声コーデック９２３へ出力する。音声コーデック９２３は、音声データを伸張し及びD/A変換し、アナログ音声信号を生成する。そして、音声コーデック９２３は、生成した音声信号をスピーカ９２４に供給して音声を出力させる。
【０１８５】
また、データ通信モードにおいて、例えば、制御部９３１は、操作部９３２を介するユーザによる操作に応じて、電子メールを構成する文字データを生成する。また、制御部９３１は、文字を表示部９３０に表示させる。また、制御部９３１は、操作部９３２を介するユーザからの送信指示に応じて電子メールデータを生成し、生成した電子メールデータを通信部９２２へ出力する。通信部９２２は、電子メールデータを符号化及び変調し、送信信号を生成する。そして、通信部９２２は、生成した送信信号を、アンテナ９２１を介して基地局（図示せず）へ送信する。また、通信部９２２は、アンテナ９２１を介して受信される無線信号を増幅し及び周波数変換し、受信信号を取得する。そして、通信部９２２は、受信信号を復調及び復号して電子メールデータを復元し、復元した電子メールデータを制御部９３１へ出力する。制御部９３１は、表示部９３０に電子メールの内容を表示させると共に、電子メールデータを記録再生部９２９に供給し、その記憶媒体に書き込ませる。
【０１８６】
記録再生部９２９は、読み書き可能な任意の記憶媒体を有する。例えば、記憶媒体は、RAM又はフラッシュメモリなどの内蔵型の記憶媒体であってもよく、ハードディスク、磁気ディスク、光磁気ディスク、光ディスク、USB（Universal Serial Bus）メモリ、又はメモリカードなどの外部装着型の記憶媒体であってもよい。
【０１８７】
また、撮影モードにおいて、例えば、カメラ部９２６は、被写体を撮像して画像データを生成し、生成した画像データを画像処理部９２７へ出力する。画像処理部９２７は、カメラ部９２６から入力される画像データを符号化し、符号化ストリームを記録再生部９２９に供給し、その記憶媒体に書き込ませる。
【０１８８】
さらに、画像表示モードにおいて、記録再生部９２９は、記憶媒体に記録されている符号化ストリームを読み出して画像処理部９２７へ出力する。画像処理部９２７は、記録再生部９２９から入力される符号化ストリームを復号し、画像データを表示部９３０に供給し、その画像を表示させる。
【０１８９】
また、テレビ電話モードにおいて、例えば、多重分離部９２８は、画像処理部９２７により符号化された映像ストリームと、音声コーデック９２３から入力される音声ストリームとを多重化し、多重化したストリームを通信部９２２へ出力する。通信部９２２は、ストリームを符号化及び変調し、送信信号を生成する。そして、通信部９２２は、生成した送信信号を、アンテナ９２１を介して基地局（図示せず）へ送信する。また、通信部９２２は、アンテナ９２１を介して受信される無線信号を増幅し及び周波数変換し、受信信号を取得する。これら送信信号及び受信信号には、符号化ビットストリームが含まれ得る。そして、通信部９２２は、受信信号を復調及び復号してストリームを復元し、復元したストリームを多重分離部９２８へ出力する。多重分離部９２８は、入力されるストリームから映像ストリーム及び音声ストリームを分離し、映像ストリームを画像処理部９２７、音声ストリームを音声コーデック９２３へ出力する。画像処理部９２７は、映像ストリームを復号し、映像データを生成する。映像データは、表示部９３０に供給され、表示部９３０により一連の画像が表示される。音声コーデック９２３は、音声ストリームを伸張し及びD/A変換し、アナログ音声信号を生成する。そして、音声コーデック９２３は、生成した音声信号をスピーカ９２４に供給して音声を出力させる。
【０１９０】
このように構成された携帯電話機９２０において、例えば画像処理部９２７が、上述した画像符号化装置１０の機能を有するようにしてもよい。つまり、画像処理部９２７が、画像データを、以上の各実施の形態において説明した方法で符号化するようにしてもよい。このようにすることにより、携帯電話機９２０は、パラメータの伝送（送信）に係る伝送量をより低減させることが可能となる。
【０１９１】
また、このように構成された携帯電話機９２０において、例えば画像処理部９２７が、上述した画像復号装置６０の機能を有するようにしてもよい。つまり、画像処理部９２７が、符号化データを、以上の各実施の形態において説明した方法で復号するようにしてもよい。このようにすることにより、携帯電話機９２０は、パラメータの伝送（受信）に係る伝送量をより低減させることが可能となる。
【０１９２】
（３）第３の応用例：記録再生装置
図１５は、上述した実施形態を適用した記録再生装置の概略的な構成の一例を示している。記録再生装置９４０は、例えば、受信した放送番組の音声データ及び映像データを符号化して記録媒体に記録する。また、記録再生装置９４０は、例えば、他の装置から取得される音声データ及び映像データを符号化して記録媒体に記録してもよい。また、記録再生装置９４０は、例えば、ユーザの指示に応じて、記録媒体に記録されているデータをモニタ及びスピーカ上で再生する。このとき、記録再生装置９４０は、音声データ及び映像データを復号する。
【０１９３】
記録再生装置９４０は、チューナ９４１、外部インタフェース９４２、エンコーダ９４３、ＨＤＤ（Hard  Disk  Drive）９４４、ディスクドライブ９４５、セレクタ９４６、デコーダ９４７、ＯＳＤ（On-Screen  Display）９４８、制御部９４９、及びユーザインタフェース９５０を備える。
【０１９４】
チューナ９４１は、アンテナ（図示せず）を介して受信される放送信号から所望のチャンネルの信号を抽出し、抽出した信号を復調する。そして、チューナ９４１は、復調により得られた符号化ビットストリームをセレクタ９４６へ出力する。即ち、チューナ９４１は、記録再生装置９４０における伝送手段としての役割を有する。
【０１９５】
外部インタフェース９４２は、記録再生装置９４０と外部機器又はネットワークとを接続するためのインタフェースである。外部インタフェース９４２は、例えば、ＩＥＥＥ１３９４インタフェース、ネットワークインタフェース、ＵＳＢインタフェース、又はフラッシュメモリインタフェースなどであってよい。例えば、外部インタフェース９４２を介して受信される映像データ及び音声データは、エンコーダ９４３へ入力される。即ち、外部インタフェース９４２は、記録再生装置９４０における伝送手段としての役割を有する。
【０１９６】
エンコーダ９４３は、外部インタフェース９４２から入力される映像データ及び音声データが符号化されていない場合に、映像データ及び音声データを符号化する。そして、エンコーダ９４３は、符号化ビットストリームをセレクタ９４６へ出力する。
【０１９７】
ＨＤＤ９４４は、映像及び音声などのコンテンツデータが圧縮された符号化ビットストリーム、各種プログラム及びその他のデータを内部のハードディスクに記録する。また、ＨＤＤ９４４は、映像及び音声の再生時に、これらデータをハードディスクから読み出す。
【０１９８】
ディスクドライブ９４５は、装着されている記録媒体へのデータの記録及び読み出しを行う。ディスクドライブ９４５に装着される記録媒体は、例えばＤＶＤディスク（ＤＶＤ−Ｖｉｄｅｏ、ＤＶＤ−ＲＡＭ、ＤＶＤ−Ｒ、ＤＶＤ−ＲＷ、ＤＶＤ＋Ｒ、ＤＶＤ＋ＲＷ等）又はＢｌｕ−ｒａｙ（登録商標）ディスクなどであってよい。
【０１９９】
セレクタ９４６は、映像及び音声の記録時には、チューナ９４１又はエンコーダ９４３から入力される符号化ビットストリームを選択し、選択した符号化ビットストリームをＨＤＤ９４４又はディスクドライブ９４５へ出力する。また、セレクタ９４６は、映像及び音声の再生時には、ＨＤＤ９４４又はディスクドライブ９４５から入力される符号化ビットストリームをデコーダ９４７へ出力する。
【０２００】
デコーダ９４７は、符号化ビットストリームを復号し、映像データ及び音声データを生成する。そして、デコーダ９４７は、生成した映像データをＯＳＤ９４８へ出力する。また、デコーダ９０４は、生成した音声データを外部のスピーカへ出力する。
【０２０１】
ＯＳＤ９４８は、デコーダ９４７から入力される映像データを再生し、映像を表示する。また、ＯＳＤ９４８は、表示する映像に、例えばメニュー、ボタン又はカーソルなどのＧＵＩの画像を重畳してもよい。
【０２０２】
制御部９４９は、ＣＰＵなどのプロセッサ、並びにＲＡＭ及びＲＯＭなどのメモリを有する。メモリは、ＣＰＵにより実行されるプログラム、及びプログラムデータなどを記憶する。メモリにより記憶されるプログラムは、例えば、記録再生装置９４０の起動時にＣＰＵにより読み込まれ、実行される。ＣＰＵは、プログラムを実行することにより、例えばユーザインタフェース９５０から入力される操作信号に応じて、記録再生装置９４０の動作を制御する。
【０２０３】
ユーザインタフェース９５０は、制御部９４９と接続される。ユーザインタフェース９５０は、例えば、ユーザが記録再生装置９４０を操作するためのボタン及びスイッチ、並びに遠隔制御信号の受信部などを有する。ユーザインタフェース９５０は、これら構成要素を介してユーザによる操作を検出して操作信号を生成し、生成した操作信号を制御部９４９へ出力する。
【０２０４】
このように構成された記録再生装置９４０において、エンコーダ９４３は、上述した実施形態に係る画像符号化装置１０の機能を有する。また、デコーダ９４７は、上述した実施形態に係る画像復号装置６０の機能を有する。それにより、記録再生装置９４０がパラメータに係る伝送量をより低減させることが可能となる。
【０２０５】
（４）第４の応用例：撮像装置
図１６は、上述した実施形態を適用した撮像装置の概略的な構成の一例を示している。撮像装置９６０は、被写体を撮像して画像を生成し、画像データを符号化して記録媒体に記録する。
【０２０６】
撮像装置９６０は、光学ブロック９６１、撮像部９６２、信号処理部９６３、画像処理部９６４、表示部９６５、外部インタフェース９６６、メモリ９６７、メディアドライブ９６８、ＯＳＤ９６９、制御部９７０、ユーザインタフェース９７１、及びバス９７２を備える。
【０２０７】
光学ブロック９６１は、撮像部９６２に接続される。撮像部９６２は、信号処理部９６３に接続される。表示部９６５は、画像処理部９６４に接続される。ユーザインタフェース９７１は、制御部９７０に接続される。バス９７２は、画像処理部９６４、外部インタフェース９６６、メモリ９６７、メディアドライブ９６８、ＯＳＤ９６９、及び制御部９７０を相互に接続する。
【０２０８】
光学ブロック９６１は、フォーカスレンズ及び絞り機構などを有する。光学ブロック９６１は、被写体の光学像を撮像部９６２の撮像面に結像させる。撮像部９６２は、ＣＣＤ又はＣＭＯＳなどのイメージセンサを有し、撮像面に結像した光学像を光電変換によって電気信号としての画像信号に変換する。そして、撮像部９６２は、画像信号を信号処理部９６３へ出力する。
【０２０９】
信号処理部９６３は、撮像部９６２から入力される画像信号に対してニー補正、ガンマ補正、色補正などの種々のカメラ信号処理を行う。信号処理部９６３は、カメラ信号処理後の画像データを画像処理部９６４へ出力する。
【０２１０】
画像処理部９６４は、信号処理部９６３から入力される画像データを符号化し、符号化データを生成する。そして、画像処理部９６４は、生成した符号化データを外部インタフェース９６６又はメディアドライブ９６８へ出力する。また、画像処理部９６４は、外部インタフェース９６６又はメディアドライブ９６８から入力される符号化データを復号し、画像データを生成する。そして、画像処理部９６４は、生成した画像データを表示部９６５へ出力する。また、画像処理部９６４は、信号処理部９６３から入力される画像データを表示部９６５へ出力して画像を表示させてもよい。また、画像処理部９６４は、ＯＳＤ９６９から取得される表示用データを、表示部９６５へ出力する画像に重畳してもよい。
【０２１１】
ＯＳＤ９６９は、例えばメニュー、ボタン又はカーソルなどのＧＵＩの画像を生成して、生成した画像を画像処理部９６４へ出力する。
【０２１２】
外部インタフェース９６６は、例えばＵＳＢ入出力端子として構成される。外部インタフェース９６６は、例えば、画像の印刷時に、撮像装置９６０とプリンタとを接続する。また、外部インタフェース９６６には、必要に応じてドライブが接続される。ドライブには、例えば、磁気ディスク又は光ディスクなどのリムーバブルメディアが装着され、リムーバブルメディアから読み出されるプログラムが、撮像装置９６０にインストールされ得る。さらに、外部インタフェース９６６は、ＬＡＮ又はインターネットなどのネットワークに接続されるネットワークインタフェースとして構成されてもよい。即ち、外部インタフェース９６６は、撮像装置９６０における伝送手段としての役割を有する。
【０２１３】
メディアドライブ９６８に装着される記録媒体は、例えば、磁気ディスク、光磁気ディスク、光ディスク、又は半導体メモリなどの、読み書き可能な任意のリムーバブルメディアであってよい。また、メディアドライブ９６８に記録媒体が固定的に装着され、例えば、内蔵型ハードディスクドライブ又はＳＳＤ（Solid  State  Drive）のような非可搬性の記憶部が構成されてもよい。
【０２１４】
制御部９７０は、ＣＰＵなどのプロセッサ、並びにＲＡＭ及びＲＯＭなどのメモリを有する。メモリは、ＣＰＵにより実行されるプログラム、及びプログラムデータなどを記憶する。メモリにより記憶されるプログラムは、例えば、撮像装置９６０の起動時にＣＰＵにより読み込まれ、実行される。ＣＰＵは、プログラムを実行することにより、例えばユーザインタフェース９７１から入力される操作信号に応じて、撮像装置９６０の動作を制御する。
【０２１５】
ユーザインタフェース９７１は、制御部９７０と接続される。ユーザインタフェース９７１は、例えば、ユーザが撮像装置９６０を操作するためのボタン及びスイッチなどを有する。ユーザインタフェース９７１は、これら構成要素を介してユーザによる操作を検出して操作信号を生成し、生成した操作信号を制御部９７０へ出力する。
【０２１６】
このように構成された撮像装置９６０において、画像処理部９６４は、上述した実施形態に係る画像符号化装置１０及び画像復号装置６０の機能を有する。それにより、撮像装置９６０はパラメータに係る伝送量をより低減させることが可能となる。
【０２１７】
（５）第５の応用例：ビデオセット
また、本技術は、任意の装置またはシステムを構成する装置に搭載するあらゆる構成、例えば、システムLSI（Large Scale Integration）等としてのプロセッサ、複数のプロセッサ等を用いるモジュール、複数のモジュール等を用いるユニット、ユニットにさらにその他の機能を付加したセット等（すなわち、装置の一部の構成）として実施することもできる。図１７は、本技術を適用したビデオセットの概略的な構成の一例を示している。
【０２１８】
近年、電子機器の多機能化が進んでおり、その開発や製造において、その一部の構成を販売や提供等として実施する場合、１機能を有する構成として実施を行う場合だけでなく、関連する機能を有する複数の構成を組み合わせ、複数の機能を有する１セットとして実施を行う場合も多く見られるようになってきた。
【０２１９】
図１７に示されるビデオセット１３００は、このような多機能化された構成であり、画像の符号化や復号（いずれか一方でもよいし、両方でも良い）に関する機能を有するデバイスに、その機能に関連するその他の機能を有するデバイスを組み合わせたものである。
【０２２０】
図１７に示されるように、ビデオセット１３００は、ビデオモジュール１３１１、外部メモリ１３１２、パワーマネージメントモジュール１３１３、およびフロントエンドモジュール１３１４等のモジュール群と、コネクティビティ１３２１、カメラ１３２２、およびセンサ１３２３等の関連する機能を有するデバイスとを有する。
【０２２１】
モジュールは、互いに関連するいくつかの部品的機能をまとめ、まとまりのある機能を持った部品としたものである。具体的な物理的構成は任意であるが、例えば、それぞれ機能を有する複数のプロセッサ、抵抗やコンデンサ等の電子回路素子、その他のデバイス等を配線基板等に配置して一体化したものが考えられる。また、モジュールに他のモジュールやプロセッサ等を組み合わせて新たなモジュールとすることも考えられる。
【０２２２】
図１７の例の場合、ビデオモジュール１３１１は、画像処理に関する機能を有する構成を組み合わせたものであり、アプリケーションプロセッサ、ビデオプロセッサ、ブロードバンドモデム１３３３、およびRFモジュール１３３４を有する。
【０２２３】
プロセッサは、所定の機能を有する構成をSoC（System On a Chip）により半導体チップに集積したものであり、例えばシステムLSI（Large Scale Integration）等と称されるものもある。この所定の機能を有する構成は、論理回路（ハードウエア構成）であってもよいし、CPU、ROM、RAM等と、それらを用いて実行されるプログラム（ソフトウエア構成）であってもよいし、その両方を組み合わせたものであってもよい。例えば、プロセッサが、論理回路とCPU、ROM、RAM等とを有し、機能の一部を論理回路（ハードウエア構成）により実現し、その他の機能をCPUにおいて実行されるプログラム（ソフトウエア構成）により実現するようにしてもよい。
【０２２４】
図１７のアプリケーションプロセッサ１３３１は、画像処理に関するアプリケーションを実行するプロセッサである。このアプリケーションプロセッサ１３３１において実行されるアプリケーションは、所定の機能を実現するために、演算処理を行うだけでなく、例えばビデオプロセッサ１３３２等、ビデオモジュール１３１１内外の構成を必要に応じて制御することもできる。
【０２２５】
ビデオプロセッサ１３３２は、画像の符号化・復号（その一方または両方）に関する機能を有するプロセッサである。
【０２２６】
ブロードバンドモデム１３３３は、インターネットや公衆電話回線網等の広帯域の回線を介して行われる有線若しくは無線（またはその両方）の広帯域通信により送信するデータ（デジタル信号）をデジタル変調する等してアナログ信号に変換したり、その広帯域通信により受信したアナログ信号を復調してデータ（デジタル信号）に変換したりする。ブロードバンドモデム１３３３は、例えば、ビデオプロセッサ１３３２が処理する画像データ、画像データが符号化されたストリーム、アプリケーションプログラム、設定データ等、任意の情報を処理する。
【０２２７】
RFモジュール１３３４は、アンテナを介して送受信されるRF（Radio Frequency）信号に対して、周波数変換、変復調、増幅、フィルタ処理等を行うモジュールである。例えば、RFモジュール１３３４は、ブロードバンドモデム１３３３により生成されたベースバンド信号に対して周波数変換等を行ってRF信号を生成する。また、例えば、RFモジュール１３３４は、フロントエンドモジュール１３１４を介して受信されたRF信号に対して周波数変換等を行ってベースバンド信号を生成する。
【０２２８】
なお、図１７において点線１３４１に示されるように、アプリケーションプロセッサ１３３１とビデオプロセッサ１３３２を、一体化し、１つのプロセッサとして構成されるようにしてもよい。
【０２２９】
外部メモリ１３１２は、ビデオモジュール１３１１の外部に設けられた、ビデオモジュール１３１１により利用される記憶デバイスを有するモジュールである。この外部メモリ１３１２の記憶デバイスは、どのような物理構成により実現するようにしてもよいが、一般的にフレーム単位の画像データのような大容量のデータの格納に利用されることが多いので、例えばDRAM（Dynamic Random Access Memory）のような比較的安価で大容量の半導体メモリにより実現するのが望ましい。
【０２３０】
パワーマネージメントモジュール１３１３は、ビデオモジュール１３１１（ビデオモジュール１３１１内の各構成）への電力供給を管理し、制御する。
【０２３１】
フロントエンドモジュール１３１４は、RFモジュール１３３４に対してフロントエンド機能（アンテナ側の送受信端の回路）を提供するモジュールである。図１７に示されるように、フロントエンドモジュール１３１４は、例えば、アンテナ部１３５１、フィルタ１３５２、および増幅部１３５３を有する。
【０２３２】
アンテナ部１３５１は、無線信号を送受信するアンテナおよびその周辺の構成を有する。アンテナ部１３５１は、増幅部１３５３から供給される信号を無線信号として送信し、受信した無線信号を電気信号（RF信号）としてフィルタ１３５２に供給する。フィルタ１３５２は、アンテナ部１３５１を介して受信されたRF信号に対してフィルタ処理等を行い、処理後のRF信号をRFモジュール１３３４に供給する。増幅部１３５３は、RFモジュール１３３４から供給されるRF信号を増幅し、アンテナ部１３５１に供給する。
【０２３３】
コネクティビティ１３２１は、外部との接続に関する機能を有するモジュールである。コネクティビティ１３２１の物理構成は、任意である。例えば、コネクティビティ１３２１は、ブロードバンドモデム１３３３が対応する通信規格以外の通信機能を有する構成や、外部入出力端子等を有する。
【０２３４】
例えば、コネクティビティ１３２１が、Bluetooth（登録商標）、IEEE 802.11（例えばWi-Fi（Wireless Fidelity、登録商標））、NFC（Near Field Communication）、IrDA（InfraRed Data Association）等の無線通信規格に準拠する通信機能を有するモジュールや、その規格に準拠した信号を送受信するアンテナ等を有するようにしてもよい。また、例えば、コネクティビティ１３２１が、USB（Universal Serial Bus）、HDMI（登録商標）（High-Definition Multimedia
Interface）等の有線通信規格に準拠する通信機能を有するモジュールや、その規格に準拠した端子を有するようにしてもよい。さらに、例えば、コネクティビティ１３２１が、アナログ入出力端子等のその他のデータ（信号）伝送機能等を有するようにしてもよい。
【０２３５】
なお、コネクティビティ１３２１が、データ（信号）の伝送先のデバイスを含むようにしてもよい。例えば、コネクティビティ１３２１が、磁気ディスク、光ディスク、光磁気ディスク、または半導体メモリ等の記録媒体に対してデータの読み出しや書き込みを行うドライブ（リムーバブルメディアのドライブだけでなく、ハードディスク、SSD（Solid State Drive）、NAS（Network Attached Storage）等も含む）を有するようにしてもよい。また、コネクティビティ１３２１が、画像や音声の出力デバイス（モニタやスピーカ等）を有するようにしてもよい。
【０２３６】
カメラ１３２２は、被写体を撮像し、被写体の画像データを得る機能を有するモジュールである。カメラ１３２２の撮像により得られた画像データは、例えば、ビデオプロセッサ１３３２に供給されて符号化される。
【０２３７】
センサ１３２３は、例えば、音声センサ、超音波センサ、光センサ、照度センサ、赤外線センサ、イメージセンサ、回転センサ、角度センサ、角速度センサ、速度センサ、加速度センサ、傾斜センサ、磁気識別センサ、衝撃センサ、温度センサ等、任意のセンサ機能を有するモジュールである。センサ１３２３により検出されたデータは、例えば、アプリケーションプロセッサ１３３１に供給されてアプリケーション等により利用される。
【０２３８】
以上においてモジュールとして説明した構成をプロセッサとして実現するようにしてもよいし、逆にプロセッサとして説明した構成をモジュールとして実現するようにしてもよい。
【０２３９】
以上のような構成のビデオセット１３００において、後述するようにビデオプロセッサ１３３２に本技術を適用することができる。したがって、ビデオセット１３００は、本技術を適用したセットとして実施することができる。
【０２４０】
（ビデオプロセッサの構成例）
図１８は、本技術を適用したビデオプロセッサ１３３２（図１７）の概略的な構成の一例を示している。
【０２４１】
図１８の例の場合、ビデオプロセッサ１３３２は、ビデオ信号およびオーディオ信号の入力を受けてこれらを所定の方式で符号化する機能と、符号化されたビデオデータおよびオーディオデータを復号し、ビデオ信号およびオーディオ信号を再生出力する機能とを有する。
【０２４２】
図１８に示されるように、ビデオプロセッサ１３３２は、ビデオ入力処理部１４０１、第１画像拡大縮小部１４０２、第２画像拡大縮小部１４０３、ビデオ出力処理部１４０４、フレームメモリ１４０５、およびメモリ制御部１４０６を有する。また、ビデオプロセッサ１３３２は、エンコード・デコードエンジン１４０７、ビデオES（Elementary Stream）バッファ１４０８Ａおよび１４０８Ｂ、並びに、オーディオESバッファ１４０９Ａおよび１４０９Ｂを有する。さらに、ビデオプロセッサ１３３２は、オーディオエンコーダ１４１０、オーディオデコーダ１４１１、多重化部（MUX（Multiplexer））１４１２、逆多重化部（DMUX（Demultiplexer））１４１３、およびストリームバッファ１４１４を有する。
【０２４３】
ビデオ入力処理部１４０１は、例えばコネクティビティ１３２１（図１７）等から入力されたビデオ信号を取得し、デジタル画像データに変換する。第１画像拡大縮小部１４０２は、画像データに対してフォーマット変換や画像の拡大縮小処理等を行う。第２画像拡大縮小部１４０３は、画像データに対して、ビデオ出力処理部１４０４を介して出力する先でのフォーマットに応じて画像の拡大縮小処理を行ったり、第１画像拡大縮小部１４０２と同様のフォーマット変換や画像の拡大縮小処理等を行ったりする。ビデオ出力処理部１４０４は、画像データに対して、フォーマット変換やアナログ信号への変換等を行って、再生されたビデオ信号として例えばコネクティビティ１３２１等に出力する。
【０２４４】
フレームメモリ１４０５は、ビデオ入力処理部１４０１、第１画像拡大縮小部１４０２、第２画像拡大縮小部１４０３、ビデオ出力処理部１４０４、およびエンコード・デコードエンジン１４０７によって共用される画像データ用のメモリである。フレームメモリ１４０５は、例えばDRAM等の半導体メモリとして実現される。
【０２４５】
メモリ制御部１４０６は、エンコード・デコードエンジン１４０７からの同期信号を受けて、アクセス管理テーブル１４０６Ａに書き込まれたフレームメモリ１４０５へのアクセススケジュールに従ってフレームメモリ１４０５に対する書き込み・読み出しのアクセスを制御する。アクセス管理テーブル１４０６Ａは、エンコード・デコードエンジン１４０７、第１画像拡大縮小部１４０２、第２画像拡大縮小部１４０３等で実行される処理に応じて、メモリ制御部１４０６により更新される。
【０２４６】
エンコード・デコードエンジン１４０７は、画像データのエンコード処理、並びに、画像データが符号化されたデータであるビデオストリームのデコード処理を行う。例えば、エンコード・デコードエンジン１４０７は、フレームメモリ１４０５から読み出した画像データを符号化し、ビデオストリームとしてビデオESバッファ１４０８Ａに順次書き込む。また、例えば、ビデオESバッファ１４０８Ｂからビデオストリームを順次読み出して復号し、画像データとしてフレームメモリ１４０５に順次書き込む。エンコード・デコードエンジン１４０７は、これらの符号化や復号において、フレームメモリ１４０５を作業領域として使用する。また、エンコード・デコードエンジン１４０７は、例えばマクロブロック毎の処理を開始するタイミングで、メモリ制御部１４０６に対して同期信号を出力する。
【０２４７】
ビデオESバッファ１４０８Ａは、エンコード・デコードエンジン１４０７によって生成されたビデオストリームをバッファリングして、多重化部（MUX）１４１２に供給する。ビデオESバッファ１４０８Ｂは、逆多重化部（DMUX）１４１３から供給されたビデオストリームをバッファリングして、エンコード・デコードエンジン１４０７に供給する。
【０２４８】
オーディオESバッファ１４０９Ａは、オーディオエンコーダ１４１０によって生成されたオーディオストリームをバッファリングして、多重化部（MUX）１４１２に供給する。オーディオESバッファ１４０９Ｂは、逆多重化部（DMUX）１４１３から供給されたオーディオストリームをバッファリングして、オーディオデコーダ１４１１に供給する。
【０２４９】
オーディオエンコーダ１４１０は、例えばコネクティビティ１３２１等から入力されたオーディオ信号を例えばデジタル変換し、例えばMPEGオーディオ方式やAC3（AudioCode
number 3）方式等の所定の方式で符号化する。オーディオエンコーダ１４１０は、オーディオ信号が符号化されたデータであるオーディオストリームをオーディオESバッファ１４０９Ａに順次書き込む。オーディオデコーダ１４１１は、オーディオESバッファ１４０９Ｂから供給されたオーディオストリームを復号し、例えばアナログ信号への変換等を行って、再生されたオーディオ信号として例えばコネクティビティ１３２１等に供給する。
【０２５０】
多重化部（MUX）１４１２は、ビデオストリームとオーディオストリームとを多重化する。この多重化の方法（すなわち、多重化により生成されるビットストリームのフォーマット）は任意である。また、この多重化の際に、多重化部（MUX）１４１２は、所定のヘッダ情報等をビットストリームに付加することもできる。つまり、多重化部（MUX）１４１２は、多重化によりストリームのフォーマットを変換することができる。例えば、多重化部（MUX）１４１２は、ビデオストリームとオーディオストリームとを多重化することにより、転送用のフォーマットのビットストリームであるトランスポートストリームに変換する。また、例えば、多重化部（MUX）１４１２は、ビデオストリームとオーディオストリームとを多重化することにより、記録用のファイルフォーマットのデータ（ファイルデータ）に変換する。
【０２５１】
逆多重化部（DMUX）１４１３は、多重化部（MUX）１４１２による多重化に対応する方法で、ビデオストリームとオーディオストリームとが多重化されたビットストリームを逆多重化する。つまり、逆多重化部（DMUX）１４１３は、ストリームバッファ１４１４から読み出されたビットストリームからビデオストリームとオーディオストリームとを抽出する（ビデオストリームとオーディオストリームとを分離する）。つまり、逆多重化部（DMUX）１４１３は、逆多重化によりストリームのフォーマットを変換（多重化部（MUX）１４１２による変換の逆変換）することができる。例えば、逆多重化部（DMUX）１４１３は、例えばコネクティビティ１３２１やブロードバンドモデム１３３３等から供給されたトランスポートストリームを、ストリームバッファ１４１４を介して取得し、逆多重化することにより、ビデオストリームとオーディオストリームとに変換することができる。また、例えば、逆多重化部（DMUX）１４１３は、例えばコネクティビティ１３２１により各種記録媒体から読み出されたファイルデータを、ストリームバッファ１４１４を介して取得し、逆多重化することにより、ビデオストリームとオーディオストリームとに変換することができる。
【０２５２】
ストリームバッファ１４１４は、ビットストリームをバッファリングする。例えば、ストリームバッファ１４１４は、多重化部（MUX）１４１２から供給されたトランスポートストリームをバッファリングし、所定のタイミングにおいて、または外部からの要求等に基づいて、例えばコネクティビティ１３２１やブロードバンドモデム１３３３等に供給する。
【０２５３】
また、例えば、ストリームバッファ１４１４は、多重化部（MUX）１４１２から供給されたファイルデータをバッファリングし、所定のタイミングにおいて、または外部からの要求等に基づいて、例えばコネクティビティ１３２１等に供給し、各種記録媒体に記録させる。
【０２５４】
さらに、ストリームバッファ１４１４は、例えばコネクティビティ１３２１やブロードバンドモデム１３３３等を介して取得したトランスポートストリームをバッファリングし、所定のタイミングにおいて、または外部からの要求等に基づいて、逆多重化部（DMUX）１４１３に供給する。
【０２５５】
また、ストリームバッファ１４１４は、例えばコネクティビティ１３２１等において各種記録媒体から読み出されたファイルデータをバッファリングし、所定のタイミングにおいて、または外部からの要求等に基づいて、逆多重化部（DMUX）１４１３に供給する。
【０２５６】
次に、このような構成のビデオプロセッサ１３３２の動作の例について説明する。例えば、コネクティビティ１３２１等からビデオプロセッサ１３３２に入力されたビデオ信号は、ビデオ入力処理部１４０１において４：２：２Ｙ／Ｃｂ／Ｃｒ方式等の所定の方式のデジタル画像データに変換され、フレームメモリ１４０５に順次書き込まれる。このデジタル画像データは、第１画像拡大縮小部１４０２または第２画像拡大縮小部１４０３に読み出されて、４：２：０Ｙ／Ｃｂ／Ｃｒ方式等の所定の方式へのフォーマット変換および拡大縮小処理が行われ、再びフレームメモリ１４０５に書き込まれる。この画像データは、エンコード・デコードエンジン１４０７によって符号化され、ビデオストリームとしてビデオESバッファ１４０８Ａに書き込まれる。
【０２５７】
また、コネクティビティ１３２１等からビデオプロセッサ１３３２に入力されたオーディオ信号は、オーディオエンコーダ１４１０によって符号化され、オーディオストリームとして、オーディオESバッファ１４０９Ａに書き込まれる。
【０２５８】
ビデオESバッファ１４０８Ａのビデオストリームと、オーディオESバッファ１４０９Ａのオーディオストリームは、多重化部（MUX）１４１２に読み出されて多重化され、トランスポートストリームまたはファイルデータ等に変換される。多重化部（MUX）１４１２により生成されたトランスポートストリームは、ストリームバッファ１４１４にバッファされた後、例えばコネクティビティ１３２１やブロードバンドモデム１３３３等を介して外部ネットワークに出力される。また、多重化部（MUX）１４１２により生成されたファイルデータは、ストリームバッファ１４１４にバッファされた後、例えばコネクティビティ１３２１等に出力され、各種記録媒体に記録される。
【０２５９】
また、例えばコネクティビティ１３２１やブロードバンドモデム１３３３等を介して外部ネットワークからビデオプロセッサ１３３２に入力されたトランスポートストリームは、ストリームバッファ１４１４にバッファされた後、逆多重化部（DMUX）１４１３により逆多重化される。また、例えばコネクティビティ１３２１等において各種記録媒体から読み出され、ビデオプロセッサ１３３２に入力されたファイルデータは、ストリームバッファ１４１４にバッファされた後、逆多重化部（DMUX）１４１３により逆多重化される。つまり、ビデオプロセッサ１３３２に入力されたトランスポートストリームまたはファイルデータは、逆多重化部（DMUX）１４１３によりビデオストリームとオーディオストリームとに分離される。
【０２６０】
オーディオストリームは、オーディオESバッファ１４０９Ｂを介してオーディオデコーダ１４１１に供給され、復号されてオーディオ信号が再生される。また、ビデオストリームは、ビデオESバッファ１４０８Ｂに書き込まれた後、エンコード・デコードエンジン１４０７により順次読み出されて復号されてフレームメモリ１４０５に書き込まれる。復号された画像データは、第２画像拡大縮小部１４０３によって拡大縮小処理されて、フレームメモリ１４０５に書き込まれる。そして、復号された画像データは、ビデオ出力処理部１４０４に読み出されて、４：２：２Ｙ／Ｃｂ／Ｃｒ方式等の所定の方式にフォーマット変換され、さらにアナログ信号に変換されて、ビデオ信号が再生出力される。
【０２６１】
このように構成されるビデオプロセッサ１３３２に本技術を適用する場合、エンコード・デコードエンジン１４０７に、上述した実施形態に係る本技術を適用すればよい。つまり、例えば、エンコード・デコードエンジン１４０７が、上述した画像符号化装置１０の機能若しくは画像復号装置６０の機能またはその両方を有するようにしてもよい。このようにすることにより、ビデオプロセッサ１３３２は、図１〜図１１を参照して上述した各実施の形態と同様の効果を得ることができる。
【０２６２】
なお、エンコード・デコードエンジン１４０７において、本技術（すなわち、画像符号化装置１０の機能若しくは画像復号装置６０の機能またはその両方）は、論理回路等のハードウエアにより実現するようにしてもよいし、組み込みプログラム等のソフトウエアにより実現するようにしてもよいし、それらの両方により実現するようにしてもよい。
【０２６３】
（ビデオプロセッサの他の構成例）
図１９は、本技術を適用したビデオプロセッサ１３３２の概略的な構成の他の例を示している。図１９の例の場合、ビデオプロセッサ１３３２は、ビデオデータを所定の方式で符号化・復号する機能を有する。
【０２６４】
より具体的には、図１９に示されるように、ビデオプロセッサ１３３２は、制御部１５１１、ディスプレイインタフェース１５１２、ディスプレイエンジン１５１３、画像処理エンジン１５１４、および内部メモリ１５１５を有する。また、ビデオプロセッサ１３３２は、コーデックエンジン１５１６、メモリインタフェース１５１７、多重化・逆多重化部（MUX DMUX）１５１８、ネットワークインタフェース１５１９、およびビデオインタフェース１５２０を有する。
【０２６５】
制御部１５１１は、ディスプレイインタフェース１５１２、ディスプレイエンジン１５１３、画像処理エンジン１５１４、およびコーデックエンジン１５１６等、ビデオプロセッサ１３３２内の各処理部の動作を制御する。
【０２６６】
図１９に示されるように、制御部１５１１は、例えば、メインCPU１５３１、サブCPU１５３２、およびシステムコントローラ１５３３を有する。メインCPU１５３１は、ビデオプロセッサ１３３２内の各処理部の動作を制御するためのプログラム等を実行する。メインCPU１５３１は、そのプログラム等に従って制御信号を生成し、各処理部に供給する（つまり、各処理部の動作を制御する）。サブCPU１５３２は、メインCPU１５３１の補助的な役割を果たす。例えば、サブCPU１５３２は、メインCPU１５３１が実行するプログラム等の子プロセスやサブルーチン等を実行する。システムコントローラ１５３３は、メインCPU１５３１およびサブCPU１５３２が実行するプログラムを指定する等、メインCPU１５３１およびサブCPU１５３２の動作を制御する。
【０２６７】
ディスプレイインタフェース１５１２は、制御部１５１１の制御の下、画像データを例えばコネクティビティ１３２１等に出力する。例えば、ディスプレイインタフェース１５１２は、デジタルデータの画像データをアナログ信号に変換し、再生されたビデオ信号として、またはデジタルデータの画像データのまま、コネクティビティ１３２１のモニタ装置等に出力する。
【０２６８】
ディスプレイエンジン１５１３は、制御部１５１１の制御の下、画像データに対して、その画像を表示させるモニタ装置等のハードウエアスペックに合わせるように、フォーマット変換、サイズ変換、色域変換等の各種変換処理を行う。
【０２６９】
画像処理エンジン１５１４は、制御部１５１１の制御の下、画像データに対して、例えば画質改善のためのフィルタ処理等、所定の画像処理を施す。
【０２７０】
内部メモリ１５１５は、ディスプレイエンジン１５１３、画像処理エンジン１５１４、およびコーデックエンジン１５１６により共用される、ビデオプロセッサ１３３２の内部に設けられたメモリである。内部メモリ１５１５は、例えば、ディスプレイエンジン１５１３、画像処理エンジン１５１４、およびコーデックエンジン１５１６の間で行われるデータの授受に利用される。例えば、内部メモリ１５１５は、ディスプレイエンジン１５１３、画像処理エンジン１５１４、またはコーデックエンジン１５１６から供給されるデータを格納し、必要に応じて（例えば、要求に応じて）、そのデータを、ディスプレイエンジン１５１３、画像処理エンジン１５１４、またはコーデックエンジン１５１６に供給する。この内部メモリ１５１５は、どのような記憶デバイスにより実現するようにしてもよいが、一般的にブロック単位の画像データやパラメータ等といった小容量のデータの格納に利用することが多いので、例えばSRAM（Static Random Access Memory）のような比較的（例えば外部メモリ１３１２と比較して）小容量だが応答速度が高速な半導体メモリにより実現するのが望ましい。
【０２７１】
コーデックエンジン１５１６は、画像データの符号化や復号に関する処理を行う。このコーデックエンジン１５１６が対応する符号化・復号の方式は任意であり、その数は１つであってもよいし、複数であってもよい。例えば、コーデックエンジン１５１６は、複数の符号化・復号方式のコーデック機能を備え、その中から選択されたもので画像データの符号化または符号化データの復号を行うようにしてもよい。
【０２７２】
図１９に示される例において、コーデックエンジン１５１６は、コーデックに関する処理の機能ブロックとして、例えば、MPEG-2 Video１５４１、AVC/H.264１５４２、HEVC/H.265１５４３、HEVC/H.265(Scalable)１５４４、HEVC/H.265(Multi-view)１５４５、およびMPEG-DASH１５５１を有する。
【０２７３】
MPEG-2
Video１５４１は、画像データをMPEG-2方式で符号化したり復号したりする機能ブロックである。AVC/H.264１５４２は、画像データをAVC方式で符号化したり復号したりする機能ブロックである。HEVC/H.265１５４３は、画像データをHEVC方式で符号化したり復号したりする機能ブロックである。HEVC/H.265(Scalable)１５４４は、画像データをHEVC方式でスケーラブル符号化したりスケーラブル復号したりする機能ブロックである。HEVC/H.265(Multi-view)１５４５は、画像データをHEVC方式で多視点符号化したり多視点復号したりする機能ブロックである。
【０２７４】
MPEG-DASH１５５１は、画像データをMPEG-DASH（MPEG-Dynamic Adaptive Streaming
over HTTP）方式で送受信する機能ブロックである。MPEG-DASHは、HTTP（HyperText Transfer Protocol）を使ってビデオのストリーミングを行う技術であり、予め用意された解像度等が互いに異なる複数の符号化データの中から適切なものをセグメント単位で選択し伝送することを特徴の１つとする。MPEG-DASH１５５１は、規格に準拠するストリームの生成やそのストリームの伝送制御等を行い、画像データの符号化・復号については、上述したMPEG-2 Video１５４１乃至HEVC/H.265(Multi-view)１５４５を利用する。
【０２７５】
メモリインタフェース１５１７は、外部メモリ１３１２用のインタフェースである。画像処理エンジン１５１４やコーデックエンジン１５１６から供給されるデータは、メモリインタフェース１５１７を介して外部メモリ１３１２に供給される。また、外部メモリ１３１２から読み出されたデータは、メモリインタフェース１５１７を介してビデオプロセッサ１３３２（画像処理エンジン１５１４またはコーデックエンジン１５１６）に供給される。
【０２７６】
多重化・逆多重化部（MUX DMUX）１５１８は、符号化データのビットストリーム、画像データ、ビデオ信号等、画像に関する各種データの多重化や逆多重化を行う。この多重化・逆多重化の方法は任意である。例えば、多重化の際に、多重化・逆多重化部（MUX DMUX）１５１８は、複数のデータを１つにまとめるだけでなく、所定のヘッダ情報等をそのデータに付加することもできる。また、逆多重化の際に、多重化・逆多重化部（MUX DMUX）１５１８は、１つのデータを複数に分割するだけでなく、分割した各データに所定のヘッダ情報等を付加することもできる。つまり、多重化・逆多重化部（MUX DMUX）１５１８は、多重化・逆多重化によりデータのフォーマットを変換することができる。例えば、多重化・逆多重化部（MUX DMUX）１５１８は、ビットストリームを多重化することにより、転送用のフォーマットのビットストリームであるトランスポートストリームや、記録用のファイルフォーマットのデータ（ファイルデータ）に変換することができる。もちろん、逆多重化によりその逆変換も可能である。
【０２７７】
ネットワークインタフェース１５１９は、例えばブロードバンドモデム１３３３やコネクティビティ１３２１等向けのインタフェースである。ビデオインタフェース１５２０は、例えばコネクティビティ１３２１やカメラ１３２２等向けのインタフェースである。
【０２７８】
次に、このようなビデオプロセッサ１３３２の動作の例について説明する。例えば、コネクティビティ１３２１やブロードバンドモデム１３３３等を介して外部ネットワークからトランスポートストリームを受信すると、そのトランスポートストリームは、ネットワークインタフェース１５１９を介して多重化・逆多重化部（MUX DMUX）１５１８に供給されて逆多重化され、コーデックエンジン１５１６により復号される。コーデックエンジン１５１６の復号により得られた画像データは、例えば、画像処理エンジン１５１４により所定の画像処理が施され、ディスプレイエンジン１５１３により所定の変換が行われ、ディスプレイインタフェース１５１２を介して例えばコネクティビティ１３２１等に供給され、その画像がモニタに表示される。また、例えば、コーデックエンジン１５１６の復号により得られた画像データは、コーデックエンジン１５１６により再符号化され、多重化・逆多重化部（MUX DMUX）１５１８により多重化されてファイルデータに変換され、ビデオインタフェース１５２０を介して例えばコネクティビティ１３２１等に出力され、各種記録媒体に記録される。
【０２７９】
さらに、例えば、コネクティビティ１３２１等により図示せぬ記録媒体から読み出された、画像データが符号化された符号化データのファイルデータは、ビデオインタフェース１５２０を介して多重化・逆多重化部（MUX DMUX）１５１８に供給されて逆多重化され、コーデックエンジン１５１６により復号される。コーデックエンジン１５１６の復号により得られた画像データは、画像処理エンジン１５１４により所定の画像処理が施され、ディスプレイエンジン１５１３により所定の変換が行われ、ディスプレイインタフェース１５１２を介して例えばコネクティビティ１３２１等に供給され、その画像がモニタに表示される。また、例えば、コーデックエンジン１５１６の復号により得られた画像データは、コーデックエンジン１５１６により再符号化され、多重化・逆多重化部（MUX DMUX）１５１８により多重化されてトランスポートストリームに変換され、ネットワークインタフェース１５１９を介して例えばコネクティビティ１３２１やブロードバンドモデム１３３３等に供給され図示せぬ他の装置に伝送される。
【０２８０】
なお、ビデオプロセッサ１３３２内の各処理部の間での画像データやその他のデータの授受は、例えば、内部メモリ１５１５や外部メモリ１３１２を利用して行われる。また、パワーマネージメントモジュール１３１３は、例えば制御部１５１１への電力供給を制御する。
【０２８１】
このように構成されるビデオプロセッサ１３３２に本技術を適用する場合、コーデックエンジン１５１６に、上述した実施形態に係る本技術を適用すればよい。つまり、例えば、コーデックエンジン１５１６が、上述した画像符号化装置１０の機能若しくは画像復号装置６０の機能またはその両方を有するようにすればよい。このようにすることにより、ビデオプロセッサ１３３２は、図１〜図１１を参照して上述した各実施の形態と同様の効果を得ることができる。
【０２８２】
なお、コーデックエンジン１５１６において、本技術（すなわち、画像符号化装置１０の機能）は、論理回路等のハードウエアにより実現するようにしてもよいし、組み込みプログラム等のソフトウエアにより実現するようにしてもよいし、それらの両方により実現するようにしてもよい。
【０２８３】
以上にビデオプロセッサ１３３２の構成を２例示したが、ビデオプロセッサ１３３２の構成は任意であり、上述した２例以外のものであってもよい。また、このビデオプロセッサ１３３２は、１つの半導体チップとして構成されるようにしてもよいが、複数の半導体チップとして構成されるようにしてもよい。例えば、複数の半導体を積層する３次元積層LSIとしてもよい。また、複数のLSIにより実現されるようにしてもよい。
【０２８４】
（装置への適用例）
ビデオセット１３００は、画像データを処理する各種装置に組み込むことができる。例えば、ビデオセット１３００は、テレビジョン装置９００（図１３）、携帯電話機９２０（図１４）、記録再生装置９４０（図１５）、撮像装置９６０（図１６）等に組み込むことができる。ビデオセット１３００を組み込むことにより、その装置は、図１〜図１１を参照して上述した各実施の形態と同様の効果を得ることができる。
【０２８５】
なお、上述したビデオセット１３００の各構成の一部であっても、ビデオプロセッサ１３３２を含むものであれば、本技術を適用した構成として実施することができる。例えば、ビデオプロセッサ１３３２のみを本技術を適用したビデオプロセッサとして実施することができる。また、例えば、上述したように点線１３４１により示されるプロセッサやビデオモジュール１３１１等を、本技術を適用したプロセッサやモジュール等として実施することができる。さらに、例えば、ビデオモジュール１３１１、外部メモリ１３１２、パワーマネージメントモジュール１３１３、およびフロントエンドモジュール１３１４を組み合わせ、本技術を適用したビデオユニット１３６１として実施することもできる。いずれの構成の場合であっても、図１〜図１１を参照して上述した各実施の形態と同様の効果を得ることができる。
【０２８６】
つまり、ビデオプロセッサ１３３２を含むものであればどのような構成であっても、ビデオセット１３００の場合と同様に、画像データを処理する各種装置に組み込むことができる。例えば、ビデオプロセッサ１３３２、点線１３４１により示されるプロセッサ、ビデオモジュール１３１１、または、ビデオユニット１３６１を、テレビジョン装置９００（図１３）、携帯電話機９２０（図１４）、記録再生装置９４０（図１５）、撮像装置９６０（図１６）等に組み込むことができる。そして、本技術を適用したいずれかの構成を組み込むことにより、その装置は、ビデオセット１３００の場合と同様に、図１〜図１１を参照して上述した各実施の形態と同様の効果を得ることができる。
【０２８７】
（６）第６の応用例：ネットワークシステム
また、本技術は、複数の装置により構成されるネットワークシステムにも適用することもできる。図２０は、本技術を適用したネットワークシステムの概略的な構成の一例を示している。
【０２８８】
図２０に示されるネットワークシステム１６００は、機器同士が、ネットワークを介して画像（動画像）に関する情報を授受するシステムである。このネットワークシステム１６００のクラウドサービス１６０１は、自身に通信可能に接続されるコンピュータ１６１１、AV（Audio Visual）機器１６１２、携帯型情報処理端末１６１３、IoT（Internet of Things）デバイス１６１４等の端末に対して、画像（動画像）に関するサービスを提供するシステムである。例えば、クラウドサービス１６０１は、所謂動画配信（オンデマンドやライブ配信）のような、画像（動画像）のコンテンツの供給サービスを端末に提供する。また、例えば、クラウドサービス１６０１は、端末から画像（動画像）のコンテンツを受け取って保管するバックアップサービスを提供する。また、例えば、クラウドサービス１６０１は、端末同士の画像（動画像）のコンテンツの授受を仲介するサービスを提供する。
【０２８９】
クラウドサービス１６０１の物理構成は任意である。例えば、クラウドサービス１６０１は、動画像を保存し、管理するサーバ、動画像を端末に配信するサーバ、動画像を端末から取得するサーバ、ユーザ（端末）や課金を管理するサーバ等の各種サーバや、インターネットやLAN等の任意のネットワークを有するようにしてもよい。
【０２９０】
コンピュータ１６１１は、例えば、パーソナルコンピュータ、サーバ、ワークステーション等のような情報処理装置により構成される。AV機器１６１２は、例えば、テレビジョン受像機、ハードディスクレコーダ、ゲーム機器、カメラ等のような画像処理装置により構成される。携帯型情報処理端末１６１３は、例えば、ノート型パーソナルコンピュータ、タブレット端末、携帯電話機、スマートフォン等のような携帯型の情報処理装置により構成される。IoTデバイス１６１４は、例えば、機械、家電、家具、その他の物、ICタグ、カード型デバイス等、画像に関する処理を行う任意の物体により構成される。これらの端末は、いずれも通信機能を有し、クラウドサービス１６０１に接続し（セッションを確立し）、クラウドサービス１６０１と情報の授受を行う（すなわち通信を行う）ことができる。また、各端末は、他の端末と通信を行うこともできる。端末間の通信は、クラウドサービス１６０１を介して行うようにしてもよいし、クラウドサービス１６０１を介さずに行うようにしてもよい。
【０２９１】
以上のようなネットワークシステム１６００に本技術を適用し、端末間や、端末とクラウドサービス１６０１との間で画像（動画像）のデータが授受される際に、その画像データを各実施の形態において上述したように符号化・復号するようにしてもよい。つまり、端末（コンピュータ１６１１乃至IoTデバイス１６１４）やクラウドサービス１６０１が、それぞれ、上述した画像符号化装置１０や画像復号装置６０の機能を有するようにしてもよい。このようにすることにより、パラメータに係る伝送量をより低減させることが可能となる。
【０２９２】
＜８．まとめ＞
以上、説明したように本開示の実施形態によれば、パラメータに係る伝送量をより低減させることが可能である。
【０２９３】
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
【０２９４】
以上の各実施の形態において説明した本技術に関する制御情報を符号化側から復号側に伝送するようにしてもよい。例えば、上述した本技術を適用することを許可（または禁止）するか否かを制御する制御情報を伝送するようにしてもよい。また、例えば、上述した本技術を適用することを許可（または禁止）するブロックサイズの上限若しくは下限、またはその両方を指定する制御情報を伝送するようにしてもよい。
【０２９５】
なお、本明細書に記述したＣＵ、ＰＵ及びＴＵとの用語は、ＨＥＶＣにおいて、個々のブロックに関連付られるシンタックスをも含む論理的な単位を意味する。画像の一部分としての個々のブロックのみに着目する場合、これらは、ＣＢ（Coding  Block）、ＰＢ（Prediction  Block）及びＴＢ（Transform  Block）との用語にそれぞれ置き換えられてもよい。ＣＢは、ＣＴＢ（Coding  Tree  Block）を四分木（Quad-Tree）状に階層的に分割することにより形成される。１つの四分木の全体がＣＴＢに相当し、ＣＴＢに対応する論理的な単位はＣＴＵ（Coding  Tree  Unit）と呼ばれる。ＨＥＶＣにおけるＣＴＢ及びＣＢは、符号化処理の処理単位である点でＨ．２６４／ＡＶＣにおけるマクロブロックに類似する役割を有する。但し、ＣＴＢ及びＣＢは、そのサイズが固定的でない点でマクロブロックと異なる（マクロブロックのサイズは常に１６×１６画素である）。ＣＴＢのサイズは１６×１６画素、３２×３２画素及び６４×６４画素から選択され、符号化ストリーム内でパラメータにより指定される。ＣＢのサイズは、ＣＴＢの分割の深さによって変化し得る。
【０２９６】
また、上記では、量子化制御処理において、特徴量に基づいて特定された量子化パラメータを用いた（逆）量子化が行われる例を説明したが、本技術は係る例に限定されない。例えば、画像符号化装置は、特徴量に基づいて特定された量子化パラメータをさらに調整するための差分量子化パラメータｄＱＰを特定し、画像復号装置へ伝送してもよい。なお、係る場合、差分量子化パラメータｄＱＰは、すべてのＣＵごとに伝送されなくてもよく、一部のＣＵについてのみ伝送されてもよい。
【０２９７】
また、上記の符号化処理において、特徴量Ａ３、または特徴量Ａ４に基づいて量子化パラメータを探索する際、仮量子化パラメータｑに対応する量子化パラメータＱＰ’と値が一致するような仮量子化パラメータｑが存在しない場合がある。
【０２９８】
係る場合、画像符号化装置１０は、条件を変更して再度量子化パラメータを探索してもよい。例えば、画像符号化装置１０は、変換係数の値を操作（例えば最高次係数や、非ゼロの係数の数が異なるように係数カットを行う）して再度量子化パラメータを探索してもよい。また、画像符号化装置１０は、予測モードを変更し、異なる予測モードに基づく予測誤差データの変換係数を用いて、再度量子化パラメータを探索してもよい。また、画像符号化装置１０は、特徴量Ａ３、または特徴量Ａ４に係る閾値TH_A3、TH_A4を変更して、再度量子化パラメータを探索してもよい。
【０２９９】
また、特徴量Ａ３、または特徴量Ａ４に基づく（逆）量子化制御機能をオフにするための制御パラメータが、画像符号化装置から画像復号装置へ伝送されてもよい。係る場合、当該制御パラメータはシーケンス単位、ピクチャ単位、またはブロック単位で伝送されてもよい。
【０３００】
また、本明細書に記載された効果は、あくまで説明的または例示的なものであって限定的ではない。つまり、本開示に係る技術は、上記の効果とともに、または上記の効果に代えて、本明細書の記載から当業者には明らかな他の効果を奏しうる。
【０３０１】
なお、以下のような構成も本開示の技術的範囲に属する。
（１）
予測ブロック情報、または量子化係数に基づいて、逆量子化を制御する逆量子化制御部、を備える、画像処理装置。
（２）
前記画像処理装置は、予測ブロック情報、または量子化係数に基づいて特徴量を取得する特徴量検出部をさらに備え、
前記逆量子化制御部は、前記特徴量に基づいて前記逆量子化を制御する、前記（１）に記載の画像処理装置。
（３）
前記特徴量検出部は、前記予測ブロック情報に基づいて生成される予測画像に基づいて、前記特徴量を取得する、前記（２）に記載の画像処理装置。
（４）
前記特徴量検出部は、前記予測画像におけるダイナミックレンジを示す特徴量を取得する、前記（３）に記載の画像処理装置。
（５）
前記特徴量検出部は、前記予測画像における分散を示す特徴量を取得する、前記（３）または（４）に記載の画像処理装置。
（６）
前記特徴量検出部は、前記量子化係数における最高次係数の位置を示す特徴量を取得する、前記（２）〜（５）のいずれか一項に記載の画像処理装置。
（７）
前記特徴量検出部は、前記量子化係数における係数分布密度を示す特徴量を取得する、前記（２）〜（６）のいずれか一項に記載の画像処理装置。
（８）
前記特徴量検出部は、前記予測ブロック情報に含まれる予測モードを示す特徴量を取得する、前記（２）〜（７）のいずれか一項に記載の画像処理装置。
（９）
前記逆量子化制御部は、前記特徴量に基づいて、符号化ブロックの逆量子化に用いられる量子化パラメータを特定することで、前記逆量子化を制御する、前記（２）〜（８）のいずれか一項に記載の画像処理装置。
（１０）
前記逆量子化制御部は、前記特徴量に基づいて、符号化ブロックにおける直流成分の逆量子化に用いられる量子化パラメータを特定することで、前記逆量子化を制御する、前記（４）または（５）に記載の画像処理装置。
（１１）
前記逆量子化制御部は、前記特徴量に基づいて、符号化ブロックにおける所定の周波数成分の逆量子化に用いられる量子化パラメータを特定することで、前記逆量子化を制御する、前記（６）または（７）に記載の画像処理装置。
（１２）
プロセッサが、予測ブロック情報、または量子化係数に基づいて、逆量子化を制御すること、を含む、画像処理方法。
（１３）
コンピュータに、
予測ブロック情報、または量子化係数に基づいて、逆量子化を制御する機能を実現させるための、プログラム。
【符号の説明】
【０３０２】
１０  画像符号化装置
１１  バッファ
１２  制御部
１３  減算部
１４  直交変換部
１５  量子化部
１６  可逆符号化部
１７  蓄積バッファ
２１  逆量子化部
２２  逆直交変換部
２３  加算部
２４  デブロックフィルタ
２５  フィルタ
２６  フレームメモリ
２７  スイッチ
２８  モード設定部
３０  イントラ予測部
４０  インター予測部
６０  画像復号装置
６１  蓄積バッファ
６２  可逆復号部
６３  逆量子化部
６４  逆直交変換部
６５  加算部
６６  デブロックフィルタ
６７  フィルタ
６８  バッファ
６９  Ｄ／Ａ変換部
７０  フレームメモリ
８０  イントラ予測部
９０  インター予測部
１５１  特徴量検出部
１５２  量子化制御部
１５３  量子化演算部
６３１  特徴量検出部
６３２  逆量子化制御部
６３３  逆量子化演算部
【図１】
2018047480.tif 000006
【図２】
2018047480.tif 000007
【図３】
2018047480.tif 000008
【図４】
2018047480.tif 000009
【図５】
2018047480.tif 000010
【図６】
2018047480.tif 000011
【図７】
2018047480.tif 000012
【図８】
2018047480.tif 000013
【図９】
2018047480.tif 000014
【図１０】
2018047480.tif 000015
【図１１】
2018047480.tif 000016
【図１２】
2018047480.tif 000017
【図１３】
2018047480.tif 000018
【図１４】
2018047480.tif 000019
【図１５】
2018047480.tif 000020
【図１６】
2018047480.tif 000021
【図１７】
2018047480.tif 000022
【図１８】
2018047480.tif 000023
【図１９】
2018047480.tif 000024
【図２０】
2018047480.tif 000025
【国際調査報告】
2018047480.tif 000026
2018047480.tif 000027
2018047480.tif 000028
2018047480.tif 000029