(57)【特許請求の範囲】
【請求項１】
複数の輝度成分と複数の色差成分とがそれぞれ二次元状に配列されるＹＵＶ４：４：４形式のフレーム画像から、前記色差成分を市松間引きして、ＹＵＶ４：２：２形式のフレーム画像を生成する間引き手段と、
前記間引き手段により生成された前記ＹＵＶ４：２：２形式のフレーム画像を変換して、前記ＹＵＶ４：４：４形式のフレーム画像の輝度成分と、前記ＹＵＶ４：２：２形式のフレーム画像の前記色差成分の市松配列中の奇数ラインまたは偶数ラインのうちの一方のライン上の前記色差成分とからなる第１のＹＵＶ４：２：０形式のフレーム画像を生成する第１生成手段と、
前記間引き手段により生成された前記ＹＵＶ４：２：２形式のフレーム画像を変換して、擬似輝度成分と、前記ＹＵＶ４：２：２形式のフレーム画像の前記色差成分の市松配列中の前記奇数ラインまたは前記偶数ラインのうちの他方のライン上の前記色差成分とからなる第２のＹＵＶ４：２：０形式のフレーム画像を生成する第２生成手段と、
前記第１生成手段により生成された前記第１のＹＵＶ４：２：０形式のフレーム画像と、前記第２生成手段により生成された前記第２のＹＵＶ４：２：０形式のフレーム画像とを符号化する符号化手段とを備えることを特徴とする符号化装置。
【請求項２】
請求項１に記載の符号化装置において、
前記第２生成手段は、全ての前記擬似輝度成分を同一の値に設定することを特徴とする符号化装置。
【請求項３】
請求項１または２に記載の符号化装置において、
前記符号化手段は、前記第１生成手段により生成された複数の前記第１のＹＵＶ４：２：０形式のフレーム画像のうち、一の前記第１のＹＵＶ４：２：０形式のフレーム画像に対しては、直前に前記第１生成手段により生成された他の第１のＹＵＶ４：２：０形式のフレーム画像との間でフレーム間符号化を行うことを特徴とする符号化装置。
【請求項４】
請求項３に記載の符号化装置において、
前記符号化手段は、前記第２生成手段により生成された複数の前記第２のＹＵＶ４：２：０形式のフレーム画像のうち、一の前記第２のＹＵＶ４：２：０形式のフレーム画像に対しては、直前に前記第２生成手段により生成された他の第２のＹＵＶ４：２：０形式のフレーム画像との間でフレーム間符号化を行うことを特徴とする符号化装置。
【請求項５】
請求項３に記載の符号化装置において、
前記符号化手段は、前記第２生成手段により生成された前記第２のＹＵＶ４：２：０形式のフレーム画像に対して、前記第１生成手段により生成された前記第１のＹＵＶ４：２：０形式のフレーム画像との間でフレーム間符号化を行うことを特徴とする符号化装置。
【請求項６】
請求項１または２に記載の符号化装置において、
前記符号化手段は、前記第１生成手段により生成された複数の前記第１のＹＵＶ４：２：０形式のフレーム画像に対してはフレーム画像内符号化を行い、前記第２生成手段により生成された複数の前記第２のＹＵＶ４：２：０形式のフレーム画像に対しては、前記第１のＹＵＶ４：２：０形式のフレーム画像との間でフレーム間符号化を行うことを特徴とする符号化装置。
【請求項７】
第１のＹＵＶ４：２：０形式のフレーム画像の符号化データおよび第２のＹＵＶ４：２：０形式のフレーム画像の符号化データをそれぞれ復号する復号手段と、
前記第１のＹＵＶ４：２：０形式のフレーム画像の輝度成分と、前記第１のＹＵＶ４：２：０形式のフレーム画像の色差成分が市松配列の奇数ラインまたは偶数ラインのうちの一方に配列され、前記第２のＹＵＶ４：２：０形式のフレーム画像の色差成分が市松配列の前記奇数ラインまたは前記偶数ラインのうちの他方に配列された色差成分とからなる、ＹＵＶ４：２：２形式のフレーム画像を生成する生成手段と、
前記生成手段により生成された前記ＹＵＶ４：２：２形式のフレーム画像の色差成分を市松補間して、ＹＵＶ４：４：４形式のフレーム画像を生成する補間手段とを備えることを特徴とする復号装置。
【請求項８】
複数の輝度成分と複数の色差成分とがそれぞれ二次元状に配列されるＹＵＶ４：４：４形式のフレーム画像から、前記色差成分を市松間引きして、ＹＵＶ４：２：２形式のフレーム画像を生成し、
前記生成された前記ＹＵＶ４：２：２形式のフレーム画像を変換して、前記ＹＵＶ４：４：４形式のフレーム画像の輝度成分と、前記ＹＵＶ４：２：２形式のフレーム画像の前記色差成分の市松配列中の奇数ラインまたは偶数ラインのうちの一方のライン上の前記色差成分とからなる第１のＹＵＶ４：２：０形式のフレーム画像を生成し、
前記生成された前記ＹＵＶ４：２：２形式のフレーム画像を変換して、擬似輝度成分と、前記ＹＵＶ４：２：２形式のフレーム画像の前記色差成分の市松配列中の前記奇数ラインまたは前記偶数ラインのうちの他方のライン上の前記色差成分とからなる第２のＹＵＶ４：２：０形式のフレーム画像を生成し、
前記第１のＹＵＶ４：２：０形式のフレーム画像と、前記第２のＹＵＶ４：２：０形式のフレーム画像とを符号化することを特徴とする符号化方法。
【請求項９】
請求項８に記載の符号化方法において、
全ての前記擬似輝度成分を同一の値に設定することを特徴とする符号化方法。
【請求項１０】
第１のＹＵＶ４：２：０形式のフレーム画像の符号化データおよび第２のＹＵＶ４：２：０形式のフレーム画像の符号化データをそれぞれ復号し、
前記第１のＹＵＶ４：２：０形式のフレーム画像の輝度成分と、前記第１のＹＵＶ４：２：０形式のフレーム画像の色差成分が市松配列の奇数ラインまたは偶数ラインのうちの一方に配列され、前記第２のＹＵＶ４：２：０形式のフレーム画像の色差成分が市松配列の前記奇数ラインまたは前記偶数ラインのうちの他方に配列された色差成分とからなる、ＹＵＶ４：２：２形式のフレーム画像を生成し、
前記ＹＵＶ４：２：２形式のフレーム画像の色差成分を市松補間して、ＹＵＶ４：４：４形式のフレーム画像を生成することを特徴とする復号方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、符号化装置、復号装置、符号化方法および復号方法に関する。
【背景技術】
【０００２】
従来から、映像制作における編集加工等に際して、ＹＵＶ４：２：０形式の映像を圧縮符号化および復号化により生じるエッジ部分の色にじみ等の問題を避けるために、ＹＵＶ４：４：４形式の映像を圧縮符号化および復号化する技術が知られている（たとえば特許文献１）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平６−２７６５１１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、ＹＵＶ４：４：４形式の映像では色差を間引きしないため、データ量が増加して、演算量やメモリ量が増加するという問題がある。
【課題を解決するための手段】
【０００５】
請求項１に記載の符号化装置は、複数の輝度成分と複数の色差成分とがそれぞれ二次元状に配列されるＹＵＶ４：４：４形式のフレーム画像から、色差成分を市松間引きして、ＹＵＶ４：２：２形式のフレーム画像を生成する間引き手段と、間引き手段により生成されたＹＵＶ４：２：２形式のフレーム画像を変換して、ＹＵＶ４：４：４形式のフレーム画像の輝度成分と、ＹＵＶ４：２：２形式のフレーム画像の色差成分の市松配列中の奇数ラインまたは偶数ラインのうちの一方のライン上の色差成分とからなる第１のＹＵＶ４：２：０形式のフレーム画像を生成する第１生成手段と、間引き手段により生成されたＹＵＶ４：２：２形式のフレーム画像を変換して、擬似輝度成分と、ＹＵＶ４：２：２形式のフレーム画像の色差成分の市松配列中の奇数ラインまたは偶数ラインのうちの他方のライン上の色差成分とからなる第２のＹＵＶ４：２：０形式のフレーム画像を生成する第２生成手段と、第１生成手段により生成された第１のＹＵＶ４：２：０形式のフレーム画像と、第２生成手段により生成された第２のＹＵＶ４：２：０形式のフレーム画像とを符号化する符号化手段とを備えることを特徴とする。
請求項７に記載の復号装置は、第１のＹＵＶ４：２：０形式のフレーム画像の符号化データおよび第２のＹＵＶ４：２：０形式のフレーム画像の符号化データをそれぞれ復号する復号手段と、第１のＹＵＶ４：２：０形式のフレーム画像の輝度成分と、第１のＹＵＶ４：２：０形式のフレーム画像の色差成分が市松配列の奇数ラインまたは偶数ラインのうちの一方に配列され、第２のＹＵＶ４：２：０形式のフレーム画像の色差成分が市松配列の奇数ラインまたは偶数ラインのうちの他方に配列された色差成分とからなる、ＹＵＶ４：２：２形式のフレーム画像を生成する生成手段と、生成手段により生成されたＹＵＶ４：２：２形式のフレーム画像の色差成分を市松補間して、ＹＵＶ４：４：４形式のフレーム画像を生成する補間手段とを備えることを特徴とする。
請求項８に記載の符号化方法は、複数の輝度成分と複数の色差成分とがそれぞれ二次元状に配列されるＹＵＶ４：４：４形式のフレーム画像から、色差成分を市松間引きして、ＹＵＶ４：２：２形式のフレーム画像を生成し、生成されたＹＵＶ４：２：２形式のフレーム画像を変換して、ＹＵＶ４：４：４形式のフレーム画像の輝度成分と、ＹＵＶ４：２：２形式のフレーム画像の色差成分の市松配列中の奇数ラインまたは偶数ラインのうちの一方のライン上の色差成分とからなる第１のＹＵＶ４：２：０形式のフレーム画像を生成し、生成されたＹＵＶ４：２：２形式のフレーム画像を変換して、擬似輝度成分と、ＹＵＶ４：２：２形式のフレーム画像の色差成分の市松配列中の奇数ラインまたは偶数ラインのうちの他方のライン上の色差成分とからなる第２のＹＵＶ４：２：０形式のフレーム画像を生成し、第１のＹＵＶ４：２：０形式のフレーム画像と、第２のＹＵＶ４：２：０形式のフレーム画像とを符号化することを特徴とする。
請求項１０に記載の復号方法は、第１のＹＵＶ４：２：０形式のフレーム画像の符号化データおよび第２のＹＵＶ４：２：０形式のフレーム画像の符号化データをそれぞれ復号し、第１のＹＵＶ４：２：０形式のフレーム画像の輝度成分と、第１のＹＵＶ４：２：０形式のフレーム画像の色差成分が市松配列の奇数ラインまたは偶数ラインのうちの一方に配列され、第２のＹＵＶ４：２：０形式のフレーム画像の色差成分が市松配列の奇数ラインまたは偶数ラインのうちの他方に配列された色差成分とからなる、ＹＵＶ４：２：２形式のフレーム画像を生成し、ＹＵＶ４：２：２形式のフレーム画像の色差成分を市松補間して、ＹＵＶ４：４：４形式のフレーム画像を生成することを特徴とする。
【発明の効果】
【０００６】
本発明によれば、ＹＵＶ４：４：４形式のフレーム画像に対してデータ量の増加を抑制して符号化を行うことができる。さらに、ＹＵＶ４：２：０形式の符号化データから色差の劣化を抑制した復号を行うことができる。
【図面の簡単な説明】
【０００７】
【図１】本発明の実施の形態による符号化装置の要部構成を示すブロック図
【図２】フレーム画像における輝度成分および色差成分のサンプル配置を例示する図
【図３】第１の実施の形態による符号化装置に入力されたフレーム画像と、生成される各種の画像とを模式的に示す図
【図４】実施の形態による符号化装置の処理を説明するフローチャート
【図５】実施の形態による復号装置の要部構成を示すブロック図
【図６】復号画像における輝度成分および色差成分のサンプル配置を例示する図
【図７】色差成分の補間処理を説明する図
【図８】実施の形態による復号装置の処理を説明するフローチャート
【図９】第２の実施の形態による符号化装置に入力されたフレーム画像と、生成される各種の画像とを模式的に示す図
【図１０】第３の実施の形態による符号化装置に入力されたフレーム画像と、生成される各種の画像とを模式的に示す図
【図１１】第４の実施の形態による符号化装置に入力されたフレーム画像と、生成される各種の画像とを模式的に示す図
【図１２】第５の実施の形態による符号化装置に入力されたフレーム画像と、生成される各種の画像とを模式的に示す図
【図１３】変形例におけるＹＵＶ０：２：０形式の画像の色差成分のサンプル配置を説明する図
【発明を実施するための形態】
【０００８】
−第１の実施の形態−
図面を参照しながら、本発明の実施の形態による符号化装置および復号化装置について説明する。なお、以下の説明においては、輝度（Ｙ）成分と、２つの色差（Ｕ、Ｖ）成分とからなるＹＵＶ４：４：４形式の画像やＹＵＶ４：２：０形式の画像について、色差処理はＵ成分とＶ成分との２つの色差に対して個々に行われるものとする。
【０００９】
−−符号化装置−−
図１は本実施の形態による符号化装置１の構成を示すブロック図である。符号化装置１は、ＹＵＶ４：４：４形式の映像（すなわち、連続的に撮影された複数の画像）を入力して符号化を行う。なお、ＲＧＢ４：４：４形式等の画像を符号化する場合には、ＹＵＶ４：４：４形式の画像に変換してから入力すればよい。
【００１０】
符号化装置１は、制御部１０と、間引き処理部１１と、第１生成部１２と、第２生成部１３と、スイッチ１４と、符号化部１５とを備える。制御部１０はＣＰＵやその周辺回路等から構成されており、不図示の記憶媒体（たとえばフラッシュメモリ等）に予め記憶されている制御プログラムを読み込んで実行することにより、符号化装置１の各部を制御する。
【００１１】
図２に示すフレーム画像の輝度成分と色差成分のサンプル配置例を参照しながら、制御部１０と、間引き処理部１１と、第１生成部１２と、第２生成部１３と、スイッチ１４と、符号化部１５とが実行する処理について説明する。なお、図２においては、図示の都合上、輝度成分を「○」、色差成分を「×」として示す。図２（ａ）は、符号化装置１に入力されるフレーム画像Ｆ４４４のサンプル配置例、図２（ｂ）は間引き処理部１１により生成される間引きフレーム画像Ｆｃｃｂのサンプル配置例、図２（ｃ）は第１生成部１２により生成される第１形式フレーム画像Ｆ４２０１のサンプル配置例、図２（ｄ）は第２生成部１２により生成される第２形式フレーム画像Ｆ４２０２のサンプル配置例を示す。なお、図２においては、図示の都合上、フレーム画像を構成する輝度成分および色差成分のうち、一部の輝度成分および色差成分を表す。
【００１２】
間引き処理部１１は、制御部１０からの指示に応じて、入力したＹＵＶ４：４：４形式のフレーム画像Ｆ４４４（図２（ａ））の色差成分に対して２次元ローパスフィルタを施した後、たとえば市松間引き処理を施してＹＵＶ４：２：２形式の間引きフレーム画像Ｆｃｃｂ（図２（ｂ））を生成する。なお、間引き処理部１１は、折り返し歪みを抑制するための市松間引きに応じた特性を有する、たとえば斜め方向に対して高い周波数で減衰させる、いわゆるダイアモンドフィルタを２次元ローパスフィルタとして用いる。
【００１３】
図２（ｂ）に示すように、間引きフレーム画像Ｆｃｃｂにおいては、２次元ローパスフィルタと市松間引きとにより、色差成分の水平および垂直方向の高い周波数成分の減衰は抑制された状態で、色差成分のサンプル数が図２（ａ）に示すフレーム画像Ｆ４４４の色差成分のサンプル数と比較して半分となっている。水平および垂直方向に対して色差成分のサンプル数を半分に間引くＹＵＶ４：２：０形式の画像と比較して、色にじみを抑制することが可能となる。さらに、水平方向に対して色差成分のサンプル数を半分に間引くＹＵＶ４：２：２形式の画像と比較して、色差成分の水平方向における高い周波数成分の減衰が抑制されるので、色にじみを抑制することができる。
【００１４】
第１生成部１２は、制御部１０からの指示に従って、間引き処理部１１により生成された間引きフレーム画像Ｆｃｃｂから、ＹＵＶ４：２：０形式の第１形式フレーム画像Ｆ４２０１を生成する。図２（ｃ）に示すように、第１形式フレーム画像Ｆ４２０１では、間引きフレーム画像Ｆｃｃｂの輝度成分と、間引きフレーム画像Ｆｃｃｂの色差成分のうちの奇数行の色差成分とが配置される。
【００１５】
第２生成部１３は、制御部１０からの指示に従って、間引き処理部１１により生成された間引きフレーム画像Ｆｃｃｂから、ＹＵＶ４：２：０形式の第２形式フレーム画像Ｆ４２０２を生成する。図２（ｄ）に示すように、第２形式フレーム画像Ｆ４２０２では、ダミー輝度と、間引きフレーム画像Ｆｃｃｂの色差成分のうちの偶数行の色差成分とが配置される。第２生成部１３は、ダミー輝度として、全て同一の値、たとえば８ビット映像において「黒」を示す１６進数の値「０ｘ１０」を設定することができる。これにより、たとえば第２形式フレーム画像Ｆ４２０２をフレーム内符号化する際に、輝度成分の符号量を極めて僅かとすることができる。なお、図２（ｄ）においては、図示の都合上、輝度成分を破線で示すことによりダミー輝度であることを表す。
【００１６】
スイッチ１４は、制御部１０からの指示に従って、１つのフレーム画像Ｆ４４４について、第１生成部１２により生成された第１形式フレーム画像Ｆ４２０１と、第２生成部１３により生成された第２形式フレーム画像Ｆ４２０２とを交互に出力する。符号化部１５は、スイッチ１４によって出力された第１形式フレーム画像Ｆ４２０１と第２形式フレーム画像Ｆ４２０２とを交互に入力するごとに圧縮符号化を行い、符号化データを出力する。本実施の形態においては、符号化部１５は、たとえばＭＰＥＧ−４ＡＶＣのハイプロファイルに基づく方式で圧縮符号化を行う。本実施の形態においては、符号化部１５は、入力した第１形式フレーム画像Ｆ４２０１に対してフレーム内符号化による圧縮符号化を行って、符号化データである第１圧縮フレームＩ４２０１を生成する。符号化部１５は、入力した第２形式フレーム画像Ｆ４２０２に対してフレーム内符号化による圧縮符号化を行って、符号化データである第２圧縮フレームＩ４２０２を生成する。
【００１７】
図３に入力されたフレーム画像Ｆ４４４から生成される間引きフレーム画像Ｆｃｃｂと、第１形式フレーム画像Ｆ４２０１と、第２形式フレーム画像Ｆ４２０２と、第１圧縮フレームＩ４２０１と、第２圧縮フレームＩ４２０２とを模式的に示す。なお、図３においては、第ｋ番目（１≦ｋ≦ｎ、ｋおよびｎは自然数）のフレームについて、フレーム画像Ｆ４４４（ｋ）、間引きフレーム画像Ｆｃｃｂ（ｋ）、第１形式フレーム画像Ｆ４２０１（ｋ）、第２形式フレーム画像Ｆ４２０２（ｋ）、第１圧縮フレームＩ４２０１（ｋ）、第２圧縮フレームＩ４２０２（ｋ）のように表す。
【００１８】
図３（ａ）は複数のフレーム画像Ｆ４４４（１）、フレーム画像Ｆ４４４（２）、フレーム画像Ｆ４４４（３）、・・・、フレーム画像Ｆ４４４（ｎ）が順次入力されたことを示す。間引き処理部１１が上述した市松間引き処理を施すことにより、フレーム画像Ｆ４４４（１）、フレーム画像Ｆ４４４（２）、フレーム画像Ｆ４４４（３）、・・・、フレーム画像Ｆ４４４（ｎ）から、図３（ｂ）に示す間引きフレーム画像Ｆｃｃｂ（１）、間引きフレーム画像Ｆｃｃｂ（２）、間引きフレーム画像Ｆｃｃｂ（３）、・・・、間引きフレーム画像Ｆｃｃｂ（ｎ）をそれぞれ生成する。
【００１９】
第１生成部１２は、間引き処理部１１により順次生成された間引きフレーム画像Ｆｃｃｂ（１）、間引きフレーム画像Ｆｃｃｂ（２）、間引きフレーム画像Ｆｃｃｂ（３）、・・・、間引きフレーム画像Ｆｃｃｂ（ｎ）のそれぞれに対して、図３（ｃ）に示す第１形式フレーム画像Ｆ４２０１（１）、第１形式フレーム画像Ｆ４２０１（２）、第１形式フレーム画像Ｆ４２０１（３）、・・・、第１形式フレーム画像Ｆ４２０１（ｎ）をそれぞれ生成する。第２生成部１３は、間引き処理部１１により順次生成された間引きフレーム画像Ｆｃｃｂ（１）、間引きフレーム画像Ｆｃｃｂ（２）、間引きフレーム画像Ｆｃｃｂ（３）、・・・、間引きフレーム画像Ｆｃｃｂ（ｎ）のそれぞれに対して、図３（ｄ）に示す第２形式フレーム画像Ｆ４２０２（１）、第２形式フレーム画像Ｆ４２０２（２）、第２形式フレーム画像Ｆ４２０２（３）、・・・、第２形式フレーム画像Ｆ４２０２（ｎ）をそれぞれ生成する。
【００２０】
第１生成部１２により生成された第１形式フレーム画像Ｆ４２０１（１）はスイッチ１４を介して符号化部１５に入力され、フレーム内符号化により図３（ｅ）に示す第１圧縮フレームＩ４２０１（１）が生成される。制御部１０はスイッチ１４を切り替えて、第２生成部１３により生成された第２形式フレーム画像Ｆ４２０２（１）を符号化部１５に入力させ、フレーム内符号化により図３（ｆ）に示す第２圧縮フレームＩ４２０２（１）を生成させる。すなわち、１つの入力されたフレーム画像Ｆ４４４（１）に対して、フレーム内符号化により２つの符号化データである、第１圧縮フレームＩ４２０１（１）と第２圧縮フレームＩ４２０２（１）とが生成される。以後、同様の処理を繰り返すことにより、フレーム画像Ｆ４４４（２）、フレーム画像Ｆ４４４（３）、・・・、フレーム画像Ｆ４４４（ｎ）が入力されるごとに、それぞれから２つの符号化データである、第１圧縮フレームＩ４２０１（２）および第２圧縮フレームＩ４２０２（２）、第１圧縮フレームＩ４２０１（３）および第２圧縮フレームＩ４２０２（３）、・・・、第１圧縮フレームＩ４２０１（ｎ）および第２圧縮フレームＩ４２０２（ｎ）が生成される。
上記のようにして生成された第１圧縮フレームＩ４２０１（ｋ）（１≦ｋ≦ｎ）と第２圧縮フレームＩ４２０２（ｋ）とは、後述する復号化装置により復号することができる。
【００２１】
符号化部１５は、各第１圧縮フレームＩ４２０１（ｋ）および各第２圧縮フレームＩ４２０２（ｋ）に、たとえばＭＰＥＧ−４ＡＶＣにＰＰＳ（picture parameter set）処理の後、user data unregistered SEI message を用いて識別情報を付加して符号化する。この場合、符号化部１５は、識別情報として、符号化データが各第１圧縮フレームＩ４２０１（ｋ）および各第２圧縮フレームＩ４２０２（ｋ）の何れかであるかを識別する情報を付加する。この識別情報により、後述する復号装置にて各第１圧縮フレームＩ４２０１（ｋ）および各第２圧縮フレームＩ４２０２（ｋ）を適切に復号することが可能となる。
【００２２】
図４に示すフローチャートを参照しながら、符号化装置１の処理について説明する。図４に示す処理は制御部１０でプログラムを実行して行われる。このプログラムは、メモリ（不図示）に格納されており、制御部１０により起動され、実行される。
ステップＳ１１では、間引き処理部１１に指令して、入力したフレーム画像Ｆ４４４（ｋ）の色差成分に対して市松間引き処理を行わせ、間引きフレーム画像Ｆｃｃｂ（ｋ）を生成させてステップＳ１２へ進む。ステップＳ１２においては、第１生成部１２に指令して、間引きフレーム画像Ｆｃｃｂ（ｋ）から第１形式フレーム画像Ｆ４２０１（ｋ）を生成させる。さらに、第２生成部１３に指令して、間引きフレーム画像Ｆｃｃｂ（ｋ）から第２形式フレーム画像Ｆ４２０２（ｋ）を生成させてステップＳ１３へ進む。
【００２３】
ステップＳ１３では、スイッチ１４を切り替えて第１生成部１２と符号化部１５とを接続させて、符号化部１５に、ステップＳ１２で生成された第１形式フレーム画像Ｆ４２０１（ｋ）に対してフレーム内符号化処理を施させ、第１圧縮フレームＩ４２０１（ｋ）を生成させてステップＳ１４へ進む。ステップＳ１４では、スイッチ１４を切り替えて第２生成部１３と符号化部１５と接続させて、符号化部１５に、ステップＳ２で生成された第２形式フレーム画像Ｆ４２０２（ｋ）に対してフレーム内符号化処理を施させ、第２圧縮フレームＩ４２０２（ｋ）を生成させてステップＳ１５へ進む。
【００２４】
ステップＳ１５では、入力された全てのフレーム画像Ｆ４４４（ｎ）に対して処理が行われたか否かを判定する。全てのフレーム画像Ｆ４４４（ｎ）に対して処理が行われた場合、すなわち全フレーム画像Ｆ４４４（ｎ）のそれぞれから第１圧縮フレームＩ４２０１（ｎ）と第２圧縮フレームＩ４２０２（ｎ）とが生成された場合には、ステップＳ１５が肯定判定されて処理を終了する。全てのフレーム画像Ｆ４４４（ｎ）に対する処理が終了していない場合には、ステップＳ１５が否定判定されてステップＳ１１へ戻る。
【００２５】
−−復号装置−−
次に、上述した符号化装置１により生成された第１圧縮フレームＩ４２０１および第２圧縮フレームＩ４２０２を復号して、フレーム画像Ｆ４４４を生成する復号装置２について説明する。
図５は、本実施の形態による復号装置２の構成を示すブロック図である。復号装置２は、制御部２０と、復号部２１と、スイッチ２２と、第１蓄積部２３と、第２蓄積部２４と、合成部２５と、色差補間部２６とを備える。制御部２０はＣＰＵやその周辺回路等から構成されており、不図示の記憶媒体（たとえばフラッシュメモリ等）に予め記憶されている制御プログラムを読み込んで実行することにより、復号装置２の各部を制御する。
【００２６】
図６に示す各種の復号画像の輝度成分と色差成分のサンプル配置例を参照しながら、制御部２０と、復号部２１と、スイッチ２２と、第１蓄積部２３と、第２蓄積部２４と、合成部２５と、色差補間部２６とが実行する処理について説明する。なお、図６においては、図示の都合上、輝度成分を「○」、色差成分を「×」として示す。また、図６においては、図示の都合上、復号画像を構成する輝度成分および色差成分のうち、一部の輝度成分および色差成分を表す。
【００２７】
復号部２１は、制御部２０により制御され、入力した符号化データをフレーム単位で復号して復号データを生成する。この場合、入力した符号化データに付加された識別情報を参照して、入力された符号化データが第１圧縮フレームＩ４２０１の場合には、復号部２１は復号処理によりＹＵＶ４：２：０形式の第１形式復号画像ＦＤ４２０１を生成する。入力した符号化データに付加された識別情報を参照して、入力された符号化データが第２圧縮フレームＩ４２０２の場合には、復号部２１は復号処理によりＹＵＶ４：２：０形式の第２形式復号画像ＦＤ４２０２を生成する。復号部２１は、各符号化データに付加された識別情報を復号して、制御部２０へ出力する。
【００２８】
図６（ａ）に第１形式復号画像ＦＤ４２０１のサンプル配置例を示す。第１形式復号画像ＦＤ４２０１はＹＵＶ４：２：０形式の第１形式フレーム画像Ｆ４２０１を符号化した第１圧縮フレームＩ４２０１を復号したものである。したがって、第１形式復号画像ＦＤ４２０１の輝度成分と色差成分とのサンプル配置は、図２（ｃ）に示すＹＵＶ４：２：０形式の第１形式フレーム画像Ｆ４２０１のサンプル配置と同一となる。すなわち、第１形式復号画像ＦＤ４２０１では、全ての輝度成分と、間引きフレーム画像Ｆｃｃｂの色差成分のうちの奇数行の色差成分とが配置される。
【００２９】
図６（ｂ）に第２形式復号画像ＦＤ４２０２のサンプル配置例を示す。第２形式復号画像ＦＤ４２０２はＹＵＶ４：２：０形式の第２形式フレーム画像Ｆ４２０２を符号化した第２圧縮フレームＩ４２０２を復号したものである。したがって、第２形式復号画像ＦＤ４２０２の輝度成分と色差成分とのサンプル配置は、図２（ｄ）に示すＹＵＶ４：２：０形式の第２形式フレーム画像Ｆ４２０２のサンプル配置と同一となる。すなわち、第２形式復号画像ＦＤ４２０２では、ダミー輝度と、間引きフレーム画像Ｆｃｃｂの色差成分のうちの偶数行の色差成分とが配置される。なお、図６（ｂ）においても、図示の都合上、輝度成分を破線で示すことにより、ダミー輝度であることを表す。
【００３０】
図５のスイッチ２２は制御部２０により制御され、復号部２１により第１形式復号画像ＦＤ４２０１が生成された場合には、復号部２１と第１蓄積部２３とを接続する。この場合、制御部２０は、復号部２１から出力された識別情報を用いて、スイッチ２２の切り替えを制御する。復号部２１で第１形式復号画像ＦＤ４２０１が生成された場合には、制御部２０はスイッチ２２を介して復号部２１と第１蓄積部２３とを接続させて、第１形式復号画像ＦＤ４２０１を第１蓄積部２３に格納する。復号部２１により第２形式復号画像ＦＤ４２０２が生成された場合には、制御部２０はスイッチ２２を介して復号部２１と第２蓄積部２４とを接続させて、第２形式復号画像Ｆ４２０２を第２蓄積部２４に格納する。
【００３１】
合成部２５は制御部２０により制御され、第１蓄積部２３に格納された第１形式復号画像ＦＤ４２０１と第２蓄積部２４に格納された第２形式復号画像ＦＤ４２０２とを合成する。すなわち、合成部２５は、第１形式復号画像ＦＤ４２０１の輝度成分および色差成分と、第２形式復号画像ＦＤ４２０２の色差成分とを合成して間引き復号画像ＦＤｃｃｂを生成する。
【００３２】
図６（ｃ）に間引き復号画像ＦＤｃｃｂのサンプル配置例を示す。間引き復号画像ＦＤｃｃｂは、第１形式復号画像ＦＤ４２０１と第２形式復号画像ＦＤ４２０２とを合成したものなので、全ての輝度成分と、間引きフレーム画像Ｆｃｃｂの色差成分とがサンプル配置される。すなわち、間引き復号画像ＦＤｃｃｂのサンプル配置は、図２（ｂ）に示すフレーム画像Ｆ４４４の色差成分に市松間引き処理を施して生成されたＹＵＶ４：２：２形式の間引きフレーム画像Ｆｃｃｂと同一となる。
【００３３】
図５の色差補間部２６は、合成部２５により生成された間引き復号画像ＦＤｃｃｂの色差成分を公知の補間処理を用いて補間して、図６（ｄ）に示すＹＵＶ４：４：４形式の復号画像ＦＤ４４４を生成する。すなわち、色差補間部２６は、図２（ａ）に示すフレーム画像Ｆ４４４のサンプル配置と同一の輝度成分と色差成分のサンプル配置を有する復号画像ＦＤ４４４を生成する。
【００３４】
図７に色差補間部２６による色差成分の補間処理の例を示す。図７においては、サンプル配置された色差成分を実線で示し、補間対象の色差成分を破線で示す。色差補間部２６は、たとえば、補正対象の色差成分Ｃｐｑ（ｐ、ｑは自然数）を補間処理により生成する場合には、以下の式（１）を用いる。すなわち、色差補間部２６は、補正対象の色差成分Ｃｐｑを中心として行方向と列方向に隣接する４つの色差成分の適応方向重み付け平均等に基づいて補間処理を行う。
Ｃｐｑｈ＝（Ｃｐ（ｑ−１）＋Ｃｐ（ｑ＋１））／２
Ｃｐｑｖ＝（Ｃ（ｐ−１）ｑ＋Ｃ（ｐ＋１）ｑ）／２
Ｓｐｑｈ＝｜Ｃｐ（ｑ−１）−Ｃｐ（ｑ＋１）｜
Ｓｐｑｖ＝｜Ｃ（ｐ−１）ｑ−Ｃ（ｐ＋１）ｑ｜
Ｋｐｑｈ＝Ｓｐｑｖ／（Ｓｐｑｈ＋Ｓｐｑｖ）
Ｋｐｑｖ＝Ｓｐｑｈ／（Ｓｐｑｈ＋Ｓｐｑｖ）
Ｃｐｑ＝Ｃｐｑｈ×Ｋｐｑｈ＋Ｃｐｑｖ×Ｋｐｑｖ    …（１）
【００３５】
図８に示すフローチャートを参照しながら、復号装置２の処理について説明する。図８に示す処理は制御部２０でプログラムを実行して行われる。このプログラムは、メモリ（不図示）に格納されており、制御部２０により起動され、実行される。
ステップＳ２１においては、復号部２１を制御して、入力した符号化データを復号させステップＳ２２へ進む。この場合、符号化データが第１圧縮データＩ４２０１のときには第１形式復号画像ＦＤ４２０１を生成し、符号化データが第２圧縮データＩ４２０２のときには第２形式復号画像ＦＤ４２０２を生成する。また、符号化データに付加された識別情報を入力する。
【００３６】
ステップＳ２２では、入力した識別情報を用いて復号部２１によって第１形式復号画像ＦＤ４２０１が生成されたか否かを判定する。第１形式復号画像ＦＤ４２０１が生成された場合には、ステップＳ２２が肯定判定されてステップＳ２３へ進む。第１形式復号画像ＦＤ４２０１が生成されていない場合、すなわち第２形式復号画像ＦＤ４２０２が生成された場合には、ステップＳ２２が否定判定されてステップＳ２４へ進む。
【００３７】
ステップＳ２３では、スイッチ２２を切り替えて復号部２１と第１蓄積部２３とを接続し、第１形式復号画像ＦＤ４２０１を第１蓄積部２３に格納させてステップＳ２５へ進む。ステップＳ２４では、スイッチ２２を切り替えて復号部２１と第２蓄積部２４とを接続し、第２形式復号画像ＦＤ４２０２を第２蓄積部２４に格納させてステップＳ２５へ進む。ステップＳ２５では、合成部２５を制御して、第１蓄積部２３に格納された第１形式復号画像ＦＤ４２０１と、第２蓄積部２４に格納された第２形式復号画像ＦＤ４２０２とを合成して、間引き復号画像ＦＤｃｃｂを生成してステップＳ２６へ進む。
【００３８】
ステップＳ２６では、色差補間部２６を制御して、間引き復号画像ＦＤｃｃｂに色差成分に補間処理を施して復号画像ＦＤｃｃｂを生成してステップＳ２７へ進む。ステップＳ２７においては、入力された全ての符号化データに対して処理が行われたか否かを判定する。全ての符号化データのそれぞれに対して処理が行われた場合には、ステップＳ２７が肯定判定されて処理を終了する。全ての符号化データに対する処理が終了していない場合には、ステップＳ２７が否定判定されてステップＳ２１へ戻る。
【００３９】
上述した第１の実施の形態によれば、次の作用効果が得られる。
（１）符号化装置１では、第１生成部１２は、間引き処理部１１により生成されたＹＵＶ４：２：２形式の間引きフレーム画像Ｆｃｃｂを変換して、ＹＵＶ４：４：４形式のフレーム画像Ｆ４４４の輝度成分と、ＹＵＶ４：２：２形式の間引きフレーム画像Ｆｃｃｂの色差成分の市松配列中の奇数ライン上の色差成分とからなるＹＵＶ４：２：０形式の第１形式フレーム画像Ｆ４２０１を生成する。第２生成部１３は、間引き処理部１１により生成されたＹＵＶ４：２：２形式の間引きフレーム画像Ｆｃｃｂを変換して、擬似輝度成分と、ＹＵＶ４：２：２形式の間引きフレーム画像Ｆｃｃｂの色差成分の市松配列中の偶数ライン上の色差成分とからなるＹＵＶ４：２：０形式の第２形式フレーム画像Ｆ４２０２を生成する。そして、符号化部１５は、第１生成部１２により生成された第１形式フレーム画像Ｆ４２０１と、第２生成部１３により生成された第２形式フレーム画像Ｆ４２０２とを符号化する。したがって、ＹＵＶ４：４：４形式にて映像を符号化する符号化装置と比較して、符号化量を抑制することができる。
【００４０】
また、ＤＶＤやデジタル放送などでは、ＭＰＥＧ−２ビデオのメインプロファイルやＭＰＥＧ−４ＡＶＣのハイプロファイル等のＹＵＶ４：２：０形式に対応した符号化装置や復号装置が広く普及している。本実施の形態による符号化装置１では、ＹＵＶ４：２：０形式の第１形式フレーム画像Ｆ４２０１および第２形式フレーム画像Ｆ４２０２が生成されるので、広く普及しているＹＵＶ４：２：０形式に対応した復号装置を用いて復号を行うことができる。
【００４１】
（２）第２生成部１３は、全てのダミー輝度の値を同一の値に設定して第２形式フレーム画像Ｆ４２０２を生成する。したがって、第２形式フレーム画像Ｆ４２０２を符号化部１５がフレーム内符号化する場合、輝度成分の符号量を小さい抑え、演算量を減少させることが可能となる。
【００４２】
（３）復号装置２では、復号部２１は、ＹＵＶ４：２：０形式の第１形式フレーム画像Ｆ４２０１の符号化データおよびＹＵＶ４：２：０形式の第２形式フレーム画像Ｆ４２０２の符号化データをそれぞれ復号して第１形式復号画像ＦＤ４２０１および第２形式復号画像ＦＤ４２０２をそれぞれ生成する。合成部２５は、第１形式復号画像ＦＤ４２０１および第２形式復号画像ＦＤ４２０２を合成して、間引き復号画像ＦＤｃｃｂを生成する。間引き復号画像ＦＤｃｃｂは、第１形式のフレーム画像Ｆ４２０１の輝度成分と、第１形式フレーム画像Ｆ４２０１の色差成分が市松配列の奇数ラインに配列され、第２形式フレーム画像ＦＤ４２０２の色差成分が市松配列の偶数ラインに配列された色差成分とからなる、ＹＵＶ４：２：２形式の画像に相当する。色差補間部２６は、間引き復号画像ＦＤｃｃｂの色差成分を市松補間して、ＹＵＶ４：４：４形式の復号画像ＦＤ４４４を生成する。したがって、ＹＵＶ４：２：０形式にて符号化された画像に基づいて、ＹＵＶ４：４：４形式の画像を復号することが可能となる。すなわち、ＹＵＶ４：４：４形式からＹＵＶ４：２：０形式に間引きすることによる色差の劣化に起因して、映像上のエッジ部分に色にじみ等の発生を抑制し、復号画像の画質を向上させることができる。
【００４３】
−第２の実施の形態−
本発明の第２の実施の形態による符号化装置について説明する。以下の説明では、第１の実施の形態と同じ構成要素には同じ符号を付して相違点を主に説明する。特に説明しない点については、第１の実施の形態と同じである。本実施の形態では、第１形式フレーム画像Ｆ４２０１の符号化の方法が第１の実施の形態とは異なる。
【００４４】
図９に入力されたフレーム画像Ｆ４４４から生成される間引きフレーム画像Ｆｃｃｂと、第１形式フレーム画像Ｆ４２０１と、第２形式フレーム画像Ｆ４２０２と、第１圧縮フレームＩ４２０１またはＰ４２０１と、第２圧縮フレームＩ４２０２とを模式的に示す。なお、図９（ａ）〜（ｄ）、（ｆ）に示す間引きフレーム画像Ｆｃｃｂと、第１形式フレーム画像Ｆ４２０１と、第２形式フレーム画像Ｆ４２０２と、第２圧縮フレームＩ４２０２とは、第１の実施の形態の図２（ａ）〜（ｄ）、（ｆ）に示す間引きフレーム画像Ｆｃｃｂと、第１形式フレーム画像Ｆ４２０１と、第２形式フレーム画像Ｆ４２０２と、第２圧縮フレームＩ４２０２と同様である。
【００４５】
符号化部１５は、第１生成部１２により生成された第１形式フレーム画像Ｆ４２０１（１）を、第１の実施の形態と同様にしてフレーム内符号化処理により図９（ｅ）に示す第１圧縮フレームＩ４２０１（１）を生成する。２番目に入力されたフレーム画像Ｆ４４４（２）から生成された第１形式フレーム画像Ｆ４２０１（２）に対しては、符号化部１５は第１形式フレーム画像Ｆ４２０１（１）の局部復号信号を用いてフレーム間符号化を行い、第１圧縮フレームＰ４２０１（２）を生成する。フレーム間符号化処理により、第１形式フレーム画像Ｆ４２０１（２）のうち第１形式フレーム画像Ｆ４２０１（１）の局部復号信号に基づく動き補償予測信号に対する差異に対応するデータが符号化される。なお、図９（ｅ）においては、第１形式フレーム画像Ｆ４２０１（１）の局部復号信号を用いたフレーム間符号化により第１圧縮フレームＰ４２０１（２）が生成されたことを「→」を用いて模式的に示す。
【００４６】
３番目に入力されたフレーム画像Ｆ４４４（３）から生成された第１形式フレーム画像Ｆ４２０１（３）に対しては、符号化部１５は第１形式フレーム画像Ｆ４２０１（２）の局部復号信号を用いてフレーム間符号化を行い、第１圧縮フレームＰ４２０１（３）を生成する。フレーム間符号化処理により、第１形式フレーム画像Ｆ４２０１（３）のうち第１形式フレーム画像Ｆ４２０１（２）の局部復号信号に基づく動き補償予測信号に対する差異に対応するデータが符号化される。すなわち、符号化を行う第１形式フレーム画像Ｆ４２０１（ｋ）は直前のフレームの第１形式フレーム画像Ｆ４２０１（ｋ−１）との間でフレーム間符号化が行われる。以後、同様の処理が繰り返されて、図９（ｅ）に示す第１形式圧縮フレームＰ４２０１（３）〜Ｐ４２０１（ｎ）が生成される。なお、図９（ｆ）に示すように、第２形式圧縮フレームＩ４２０２（ｋ）は、第１の実施の形態の場合と同様に、フレーム内符号化により生成される。
【００４７】
上述した第２の実施の形態によれば、第１の実施の形態により得られる作用効果に加えて、次の作用効果が得られる。すなわち、第１圧縮フレームＰ４２０１（２）〜Ｐ４２０１（ｎ）がフレーム間符号化により生成されるので、第１の実施の形態のように、全ての第１圧縮フレームＩ４２０１（１）〜Ｉ４２０１（ｎ）がフレーム内符号化により生成される場合と比べて、符号発生量を抑制することができる。
【００４８】
−第３の実施の形態−
本発明の第３の実施の形態による符号化装置について説明する。以下の説明では、第３の実施の形態と同じ構成要素には同じ符号を付して相違点を主に説明する。特に説明しない点については、第１の実施の形態と同じである。本実施の形態では、第１形式フレーム画像Ｆ４２０１の符号化および第２形式フレーム画像Ｆ４２０２の符号化の方法が第１の実施の形態とは異なる。
【００４９】
図１０に入力されたフレーム画像Ｆ４４４から生成される間引きフレーム画像Ｆｃｃｂと、第１形式フレーム画像Ｆ４２０１と、第２形式フレーム画像Ｆ４２０２と、第１圧縮フレームＩ４２０１またはＰ４２０１と、第２圧縮フレームＩ４２０２またはＰ４２０２とを模式的に示す。なお、図１０（ａ）〜（ｄ）に示す間引きフレーム画像Ｆｃｃｂと、第１形式フレーム画像Ｆ４２０１と、第２形式フレーム画像Ｆ４２０２とは、第１の実施の形態の図２（ａ）〜（ｄ）に示す間引きフレーム画像Ｆｃｃｂと、第１形式フレーム画像Ｆ４２０１と、第２形式フレーム画像Ｆ４２０２と同様である。なお、図１０においても、フレーム間符号化により生成されることを「→」を用いて模式的に示す。
【００５０】
符号化部１５は、入力した第１形式フレーム画像Ｆ４２０１を用いて、第２の実施の形態の場合と同様にして、図１０（ｅ）に示すように、フレーム内符号化により第１圧縮フレームＩ４２０１（１）と、フレーム間符号化により第１圧縮フレームＰ４２０１（２）〜Ｐ４２０１（ｎ）を生成する。符号化部１５は、第２生成部１３により生成された第２形式フレーム画像Ｆ４２０２（１）を、第１の実施の形態と同様にしてフレーム内符号化処理により図１０（ｆ）に示す第２圧縮フレームＩ４２０２（１）を生成する。２番目に入力されたフレーム画像Ｆ４４４（２）から生成された第２形式フレーム画像Ｆ４２０２（２）に対しては、符号化部１５は第２形式フレーム画像Ｆ４２０２（１）の局部復号信号を用いてフレーム間符号化を行い、第２圧縮フレームＰ４２０２（２）を生成する。フレーム間符号化処理により、第２形式フレーム画像Ｆ４２０２（２）のうち第２形式フレーム画像Ｆ４２０２（１）の局部復号信号に基づく動き補償予測信号に対する差異に対応するデータが符号化される。
【００５１】
３番目に入力されたフレーム画像Ｆ４４４（３）から生成された第２形式フレーム画像Ｆ４２０２（３）に対しては、符号化部１５は第２形式フレーム画像Ｆ４２０２（２）の局部復号信号を用いてフレーム間符号化を行い、第２圧縮フレームＰ４２０２（３）を生成する。すなわち、符号化を行う第２形式フレーム画像Ｆ４２０２（ｋ）は直前のフレームの第２形式フレーム画像Ｆ４２０２（ｋ−１）との間でフレーム間符号化が行われる。以後、同様の処理が繰り返されて、図１０（ｅ）に示す第２形式圧縮フレームＰ４２０２（３）〜Ｐ４２０２（ｎ）が生成される。
【００５２】
上述した第３の実施の形態によれば、第１の実施の形態により得られる作用効果に加えて、次の作用効果が得られる。すなわち、第２の実施の形態と同様に、第１圧縮フレームＰ４２０１（２）〜Ｐ４２０１（ｎ）がフレーム間符号化により生成されることにより符号発生量を抑制することができる。さらに、第２圧縮フレームＰ４２０２（２）〜Ｐ４２０２（ｎ）がフレーム間符号化により生成されるので、第１または第２の実施の形態のように、全ての第２圧縮フレームＩ４２０２（１）〜Ｉ４２０２（ｎ）がフレーム内符号化により生成される場合と比べて、符号発生量を抑制することができる。
【００５３】
−第４の実施の形態−
本発明の第４の実施の形態による符号化装置について説明する。以下の説明では、第４の実施の形態と同じ構成要素には同じ符号を付して相違点を主に説明する。特に説明しない点については、第１の実施の形態と同じである。本実施の形態では、第２形式フレーム画像Ｆ４２０２の符号化の方法が第１の実施の形態とは異なる。
【００５４】
図１１に入力されたフレーム画像Ｆ４４４から生成される間引きフレーム画像Ｆｃｃｂと、第１形式フレーム画像Ｆ４２０１と、第２形式フレーム画像Ｆ４２０２と、第１圧縮フレームＩ４２０１と、第２圧縮フレームＩ４２０２またはＰ４２０２とを模式的に示す。なお、図１１（ａ）〜（ｅ）に示す間引きフレーム画像Ｆｃｃｂと、第１形式フレーム画像Ｆ４２０１と、第２形式フレーム画像Ｆ４２０２と、第１圧縮フレームＩ４２０１は、第１の実施の形態の図２（ａ）〜（ｅ）に示す間引きフレーム画像Ｆｃｃｂと、第１形式フレーム画像Ｆ４２０１と、第２形式フレーム画像Ｆ４２０２と、第１圧縮フレームＩ４２０１と同様である。なお、図１１においても、フレーム間符号化により生成されることを「→」を用いて模式的に示す。
【００５５】
符号化部１５は、入力した第１形式フレーム画像Ｆ４２０１を用いて、第１の実施の形態の場合と同様にして、図１１（ｅ）に示すように、フレーム内符号化により第１圧縮フレームＩ４２０１を生成する。符号化部１５は、第２生成部１３により生成された第２形式フレーム画像Ｆ４２０２（１）を、第１形式フレーム画像Ｆ４２０１（１）の局部復号信号を用いてフレーム間符号化を行い、図１１（ｆ）に示す第２圧縮フレームＰ４２０２（１）を生成する。フレーム間符号化処理により、第２形式フレーム画像Ｆ４２０２（１）のうち第１形式フレーム画像Ｆ４２０１（１）の局部復号信号に基づく動き補償予測信号に対する差異に対応するデータが符号化される。すなわち、符号化部１５は、同一のフレーム番号の第１形式フレーム画像４２０１と第２形式フレーム画像４２０２との間でフレーム間符号化を行う。以後、同様の処理が繰り返されて、図１１（ｆ）に示す第２形式圧縮フレームＰ４２０２（２）〜Ｐ４２０２（ｎ）が生成される。
【００５６】
符号化部１５は、第２形式フレーム画像Ｆ４２０２に対してフレーム間符号化を行う際に、第２形式フレーム画像Ｆ４２０２の輝度成分、すなわちダミー輝度の値を、第１形式フレーム画像Ｆ４２０１の輝度成分との間で誤差が「０」となるように設定する。すなわち、符号化部１５は、第２形式フレーム画像Ｆ４２０２の輝度成分を、第１形式フレーム画像Ｆ４２０１の輝度成分と同一の値となるように設定する。さらに、符号化部１５は、第２形式フレーム画像Ｆ４２０２の符号化の対象となる色差成分（対象色差成分）を、たとえば第１形式フレーム画像Ｆ４２０１の局部復号における対象色差成分の周辺色差成分の平均値を予測値とする平均予測誤差にて算出した値に設定して符号化する。したがって、符号化部１５が上記の処理を行うことにより、第１の実施の形態により得られる作用効果に加え、さらに、演算量を削減して、第２圧縮データＰ４２０２に生じる符号量を抑制することができる。
【００５７】
−第５の実施の形態−
本発明の第５の実施の形態による符号化装置について説明する。以下の説明では、第５の実施の形態と同じ構成要素には同じ符号を付して相違点を主に説明する。特に説明しない点については、第１の実施の形態と同じである。本実施の形態では、第１形式フレーム画像Ｆ４２０１の符号化および第２形式フレーム画像Ｆ４２０２の符号化の方法が第１の実施の形態とは異なる。
【００５８】
図１２に入力されたフレーム画像Ｆ４４４から生成される間引きフレーム画像Ｆｃｃｂと、第１形式フレーム画像Ｆ４２０１と、第２形式フレーム画像Ｆ４２０２と、第１圧縮フレームＩ４２０１またはＰ４２０１と、第２圧縮フレームＰ４２０２とを模式的に示す。なお、図１２（ａ）〜（ｄ）に示す間引きフレーム画像Ｆｃｃｂと、第１形式フレーム画像Ｆ４２０１と、第２形式フレーム画像Ｆ４２０２とは、第１の実施の形態の図２（ａ）〜（ｄ）に示す間引きフレーム画像Ｆｃｃｂと、第１形式フレーム画像Ｆ４２０１と、第２形式フレーム画像Ｆ４２０２と同様である。なお、図１２においても、フレーム間符号化により生成されることを「→」を用いて模式的に示す。
【００５９】
符号化部１５は、図１２（ｅ）に示すように、第１形式フレーム画像Ｆ４２０１（１）に対してはフレーム内符号化により第１圧縮データＩ４２０１（１）を生成する。符号化部１５は、図１２（ｅ）に示すように、第１形式フレーム画像Ｆ４２０１（２）〜Ｆ４２０１（ｎ）に対しては、第２の実施の形態と同様にしてフレーム間符号化により第１圧縮データＰ４２０１（２）〜Ｐ４２０１（ｎ）を生成する。符号化部１５は、第４の実施の形態と同様にして、第２形式フレーム画像Ｆ４２０２（ｋ）に対して、第１形式フレーム画像Ｆ４２０１（ｋ）の局部復号を用いてフレーム間符号化により、図１２（ｆ）に示すように第２圧縮フレームＰ４２０２（ｋ）を生成する。
【００６０】
上述した第５の実施の形態によれば、第１の実施の形態により得られる作用効果に加えて、次の作用効果が得られる。すなわち、第２の実施の形態と同様に、第１圧縮フレームＰ４２０１（２）〜Ｐ４２０１（ｎ）がフレーム間符号化により生成されることにより符号発生量を抑制することができる。さらに、第４の実施の形態と同様に、演算量を削減して、第２圧縮データＰ４２０２を生成する際の演算量を削減し、生じる符号量を抑制することができる。この結果、第１圧縮フレームＩ４２０１をフレーム内符号化により生成する第４の実施の形態と比較して、符号化により発生する符号量をさらに抑制することができる。
【００６１】
次のような変形も本発明の範囲内であり、変形例の一つ、もしくは複数を上述の実施形態と組み合わせることも可能である。
（１）符号化装置１の第２生成部１３がＹＵＶ４：２：０形式の第２形式フレーム画像Ｆ４２０２を生成するものに代えて、ＹＵＶ０：２：０形式の第３形式フレーム画像を生成するものについても本発明の一態様に含まれる。この場合、第２生成部１３は、間引きフレーム画像Ｆｃｃｂから、図１３（ａ）に示すように、輝度成分を配置せず、間引きフレーム画像Ｆｃｃｂの色差成分のうちの偶数行の色差成分のみを配置することにより、ＹＵＶ０：２：０形式の第３形式フレーム画像Ｆ０２０３を生成する。そして、符号化部１５は、図２（ｃ）に示すＹＵＶ４：２：０形式の第１形式フレーム画像Ｆ４２０１と、図１３（ａ）に示すＹＵＶ０：２：０形式の第３形式フレーム画像Ｆ０２０３とに対して符号化を行う。符号化部１５は、ＹＵＶ０：２：０形式の第３形式フレーム画像Ｆ０２０３を符号化する際には、ダミー輝度が存在するものとして演算を行っても良いし、輝度成分が存在しないものとして演算を行っても良い。ＹＵＶ０：２：０形式の第３フレーム画像Ｆ０２０３が符号化されている場合には、復号装置２の復号部２１は、ダミー輝度または輝度が存在しないものとして復号し、図１３（ｂ）に示す第３形式復号画像ＦＤ０２０３を生成すればよい。そして、復号装置２は、第１形式復号画像ＦＤ４２０１と第３形式復号画像ＦＤ０２０３とを用いて、間引き復号画像ＦＤｃｃｂを生成し、色補間処理を行ってＹＵＶ４：４：４形式の復号画像ＦＤ４４４を生成すればよい。
【００６２】
（２）ＹＵＶ４：２：０形式の第１形式フレーム画像Ｆ４２０１および第２形式フレーム画像Ｆ４２０２における輝度成分と色差成分とを以下のように配置するものについても本発明の一態様に含まれる。すなわち、ＹＵＶ４：２：０形式の第１形式フレーム画像Ｆ４２０１には、間引きフレーム画像Ｆｃｃｂの輝度成分と、間引きフレーム画像Ｆｃｃｂの色差成分のうちの偶数行の色差成分とが配置され、ＹＵＶ４：２：０形式の第２形式フレーム画像Ｆ４２０２には、ダミー輝度と間引きフレーム画像Ｆｃｃｂの色差成分のうちの奇数行の色差成分とが配置されても良い。
【００６３】
（３）符号化装置１は、１つの符号化部１０５を備えるものに代えて複数の符号化部を備え、第１生成部１２と第２生成部１３とはそれぞれ異なる符号化部と接続されるものについても本発明の一態様に含まれる。この場合、第１生成部１２により生成されたＹＵＶ４：２：０形式の第１形式フレーム画像Ｆ４２０１の符号化と、第２生成部１３により生成されたＹＵＶ４：２：０形式の第２形式フレーム画像Ｆ４２０２の符号化とを並列処理することができる。
【００６４】
本発明の特徴を損なわない限り、本発明は上記実施の形態に限定されるものではなく、本発明の技術的思想の範囲内で考えられるその他の形態についても、本発明の範囲内に含まれる。
【符号の説明】
【００６５】
１…符号化装置、２…復号装置、１０…制御部、
１１…間引き処理部、１２…第１生成部、１３…第２生成部、
１４…スイッチ、１５…符号化部、２０…制御部、
２１…復号部、２２…スイッチ、２３…第１蓄積部、
２４…第２蓄積部、２５…合成部、２６…色差補間部
【図１】
0006344082.tif 000002
【図２】
0006344082.tif 000003
【図３】
0006344082.tif 000004
【図４】
0006344082.tif 000005
【図５】
0006344082.tif 000006
【図６】
0006344082.tif 000007
【図７】
0006344082.tif 000008
【図８】
0006344082.tif 000009
【図９】
0006344082.tif 000010
【図１０】
0006344082.tif 000011
【図１１】
0006344082.tif 000012
【図１２】
0006344082.tif 000013
【図１３】
0006344082.tif 000014