(57)【要約】      （修正有）【課題】伝送する情報量を増大させることなく、また、符号化装置側の計算時間を増大させることなく、予測精度や符号化効率を向上させる符号化装置、復号装置及びプログラムを提供する。【解決手段】符号化装置１は、イントラ予測モードに基づいて、符号化対象ブロックＣＵ／ＴＵ内において復号済みでない隣接画素から予測画像が生成される合成領域Ｘを決定する合成領域決定部１２と、合成領域Ｘに含まれるか否かに基づいて各領域の予測画像の生成方法を変更するイントラ予測部１３と、を具備する。合成領域に含まれる領域と合成領域に含まれない領域との間の境界領域において、所定条件が満たされる場合に、境界領域の予測画像に対して平滑フィルタを適用する。また、合成領域において、コピーで埋められた未復号参照画素に基づいて生成された予測画像及び合成領域において生成された予測画像の加重平均によって予測画像を生成する。【選択図】図１
2020167729.tif 000002
【特許請求の範囲】
【請求項１】
動画像を構成するフレーム単位の原画像を符号化対象ブロックに分割して符号化するように構成されている符号化装置であって、
イントラ予測モードに基づいて、前記符号化対象ブロック内において復号済みでない隣接画素から予測画像が生成される合成領域を決定するように構成されている合成領域決定部と、
前記合成領域に含まれるか否かに基づいて、各領域の予測画像の生成方法を変更するように構成されているイントラ予測部とを具備することを特徴とする符号化装置。
【請求項２】
前記イントラ予測部は、前記合成領域に含まれる領域と前記合成領域に含まれない領域との間の境界領域において、所定条件が満たされる場合に、前記境界領域の予測画像に対して平滑フィルタを適用するように構成されていることを特徴とする請求項１に記載の符号化装置。
【請求項３】
前記イントラ予測部は、前記合成領域に含まれる領域において、コピーによって埋められた未復号参照画素に基づいて生成された予測画像及び前記合成領域において生成された予測画像の加重平均によって前記予測画像を生成するように構成されていることを特徴とする請求項１に記載の符号化装置。
【請求項４】
動画像を構成するフレーム単位の原画像を符号化対象ブロックに分割して復号するように構成されている復号装置であって、
イントラ予測モードに基づいて、前記符号化対象ブロック内において復号済みでない隣接画素から予測画像が生成される合成領域を決定するように構成されている合成領域決定部と、
前記合成領域に含まれるか否かに基づいて、各領域の予測画像の生成方法を変更するように構成されているイントラ予測部とを具備することを特徴とする復号装置。
【請求項５】
前記イントラ予測部は、前記合成領域に含まれる領域と前記合成領域に含まれない領域との間の境界領域において、所定条件が満たされる場合に、前記境界領域の予測画像に対して平滑フィルタを適用するように構成されていることを特徴とする請求項４に記載の復号装置。
【請求項６】
前記イントラ予測部は、前記合成領域に含まれる領域において、コピーによって埋められた未復号参照画素に基づいて生成された予測画像及び前記合成領域において生成された予測画像の加重平均によって前記予測画像を生成するように構成されていることを特徴とする請求項４に記載の復号装置。
【請求項７】
コンピュータを、請求項１乃至３のいずれか一項に記載の符号化装置として機能させるためのプログラム。
【請求項８】
コンピュータを、請求項４乃至６のいずれか一項に記載の復号装置として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、符号化装置、復号装置及びプログラムに関する。
【背景技術】
【０００２】
Ｈ．２６５／ＨＥＶＣ（Ｈｉｇｈ  Ｅｆｆｉｃｉｅｎｃｙ  Ｖｉｄｅｏ  Ｃｏｄｉｎｇ）に代表される動画像の符号化方式では、フレーム間の時間的相関を利用したインター予測及びフレーム内の空間的相関を利用したイントラ予測の２種類の予測を切り替えながら予測を行って残差信号を生成した後、直交変換処理やループフィルタ処理やエントロピー符号化処理を行い得られたストリームを出力するように構成されている。
【０００３】
ＨＥＶＣにおけるイントラ予測では、Ｐｌａｎａｒ予測やＤＣ予測や方向予測の計３５種類のモードが用意されており、エンコーダで決定されたモードに従って、隣接する復号済み参照画素を用いてイントラ予測を行うように構成されている。
【０００４】
ここで、イントラ予測では、フレーム内で最も左上に位置するＣＵ（Ｃｏｄｉｎｇ  Ｕｎｉｔ）等、隣接する復号済み参照画素が存在しないＣＵでは、規定した値（１０ビットの動画像であれば「５１２」）を埋める処理により、予測画像を生成する際に用いる参照画素を作り出すように構成されている。
【０００５】
また、従来のＨＥＶＣでは、符号化処理が、左上からラスタースキャン順に行われるために、参照画素が復号済みでない場合がある。このような場合には、最も近い復号済み参照画素を０次外挿した値を用いて予測画像を生成するように構成されている。
【０００６】
ＣＵは、複数のブロック（ＴＵ：Ｔｒａｎｓｆｏｒｍ  Ｕｎｉｔ）に分割され直交変換処理が施される。ＨＥＶＣにおいて、適用するイントラ予測の種類を示すイントラ予測モードは、ＣＵ内で共通であり、複数のＴＵに対して共通したイントラ予測モードを用いて予測が行われる。
【０００７】
イントラ予測では、図７に示すように、ラスタースキャン順による符号化処理により、ＣＵ＃Ｘの左下や右上に位置する参照画素Ｎが復号済みでない場合が多く、このような場合に、復号済みでない参照画素が存在する方向からの方向予測を行うと予測精度が低下し、符号化効率が低減してしまうという問題点があった。
【０００８】
以下、図８（ａ）〜図８（ｄ）を用いて、かかる問題点について具体的に説明する。図８は、従来のＨＥＶＣにおけるイントラ予測の一例について示す。
【０００９】
かかる例では、図８（ａ）に示すように、図７の例の場合と同様に、ＣＵ＃Ａ１（フレーム内の左上のＣＵ）の参照画素については、全てが復号済みである。同様に、図８（ｃ）に示すように、ＣＵ＃Ａ３（フレーム内の左下のＣＵ）の参照画素については、全てが復号済みである。
【００１０】
これに対して、図８（ｂ）に示すように、ＣＵ＃Ａ１内に位置する参照画素Ｗ１〜Ｗ３は復号済みであるが、ＣＵ＃Ａ３内に位置する参照画素Ｂ１〜Ｂ４は復号されていないので、そのままＣＵ＃Ａ２（フレーム内の右上のＣＵ）の予測画像を生成する際の参照画素とすることはできない。
【００１１】
このため、従来のＨＥＶＣでは、図８（ｂ）に示すように、ＣＵ＃Ａ１内に位置する復号済み参照画素Ｗ１〜Ｗ３の一番下に位置する参照画素Ｗ１の値を、ＣＵ＃Ａ３内の同じ列に位置する未復号参照画素Ｂ１〜Ｂ４にコピーするように規定されている。
【００１２】
同様に、従来のＨＥＶＣでは、図８（ｄ）に示すように、ＣＵ＃Ａ３内に位置する復号済み参照画素Ｂ１〜Ｂ３の一番下に位置する参照画素Ｂ１の値を、ＣＵ＃Ａ３の下側に存在するＣＵ内の同じ列に位置する未復号参照画素Ｐ３にコピーするように規定されている。
【００１３】
したがって、図８の例のように、左下から右上に向かって方向予測が行われる場合、生成された予測画像の多くはコピーで埋められた未復号参照画素により構成されているため、予測精度が低下し、符号化効率が低減してしまうという問題点があった。
【００１４】
かかる問題点を解決するために、ＴＵ分割が行われるイントラ予測において、ＣＵ内に存在する複数のＴＵに対する符号化処理順として、ラスタースキャン順（例えば、Ｚ型）の他、Ｕ型やＸ型等の符号化順に自由度を持たせることによって予測精度の向上を図る技術が知られている（非特許文献１参照）。
【先行技術文献】
【非特許文献】
【００１５】
【非特許文献１】望月等、「平均値座標に基づいた適用イントラ予測方式」、情報処理学会研究報告、ｖｏｌ、２０１２−ＡＶＭ−７７、Ｎｏ．１２
【発明の概要】
【発明が解決しようとする課題】
【００１６】
しかしながら、上述の非特許文献１に規定されている技術では、ＣＵ単位でどのような符号化処理順を用いるのかについてのフラグを伝送する必要があるため、伝送する情報量が増大してしまう他、全ての符号化処理順の中からどの符号化処理順が良いかを選択するために、符号化装置側では全ての組み合わせを試す必要があり、符号化装置側の計算時間が増大してしまうという問題点があった。
【００１７】
そこで、本発明は、上述した課題を解決するためになされたものであり、符号化装置によって伝送する情報量を増大させることなく、また、符号化装置側の計算時間を増大させることなく、予測精度や符号化効率を向上させることができる符号化装置、復号装置及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【００１８】
本発明の第１の特徴は、動画像を構成するフレーム単位の原画像を符号化対象ブロックに分割して符号化するように構成されている符号化装置であって、イントラ予測モードに基づいて、前記符号化対象ブロック内において復号済みでない隣接画素から予測画像が生成される合成領域を決定するように構成されている合成領域決定部と、前記合成領域に含まれるか否かに基づいて、各領域の予測画像の生成方法を変更するように構成されているイントラ予測部とを具備することを要旨とする。
【００１９】
本発明の第２の特徴は、動画像を構成するフレーム単位の原画像を符号化対象ブロックに分割して復号するように構成されている復号装置であって、イントラ予測モードに基づいて、前記符号化対象ブロック内において復号済みでない隣接画素から予測画像が生成される合成領域を決定するように構成されている合成領域決定部と、前記合成領域に含まれるか否かに基づいて、各領域の予測画像の生成方法を変更するように構成されているイントラ予測部とを具備することを要旨とする。
【００２０】
本発明の第３の特徴は、コンピュータを、上述の第１又は第２の特徴に記載の符号化装置として機能させるためのプログラムであることを要旨とする。
【００２１】
本発明の第４の特徴は、コンピュータを、上述の第１又は第２の特徴に記載の復号装置として機能させるためのプログラムであることを要旨とする。
【発明の効果】
【００２２】
本発明によれば、符号化装置によって伝送する情報量を増大させることなく、また、符号化装置側の計算時間を増大させることなく、予測精度や符号化効率を向上させることができる符号化装置、復号装置及びプログラムを提供することができる。
【図面の簡単な説明】
【００２３】
【図１】図１は、第１の実施形態に係る符号化装置１の機能ブロック図である。
【図２】図２は、第１の実施形態において予測画像が生成される様子の一例を示す図である。
【図３】図３は、第１の実施形態において予測画像が生成される様子の一例を示す図である。
【図４】図４は、第１の実施形態に係る復号装置３の機能ブロック図である。
【図５】図５は、第１の実施形態に係る符号化装置１及び復号装置３の動作を示すフローチャートである。
【図６】図６は、第２の実施形態において予測画像が生成される様子の一例を示す図である。
【図７】図７は、従来のＨＥＶＣにおいて予測画像が生成される様子の一例を示す図である。
【図８】図８は、従来のＨＥＶＣにおいて予測画像が生成される様子の一例を示す図である。
【発明を実施するための形態】
【００２４】
（第１の実施形態）
以下、図１〜図５を参照して、本発明の第１の実施形態に係る符号化装置１及び復号装置３について説明する。ここで、本実施形態に係る符号化装置１及び復号装置３は、ＨＥＶＣにおけるイントラ予測に対応するように構成されている。
【００２５】
本実施形態に係る符号化装置１は、動画像を構成するフレーム単位の原画像を符号化対象ブロックに分割して符号化するように構成されている。なお、本実施形態では、符号化対象のＣＵの左側及び上側に隣接する画素は全て復号済みであるものとする。
【００２６】
また、本実施形態に係る符号化装置１は、ＣＵを複数のＴＵに分割することができるように構成されていてもよい。したがって、本実施形態では、符号化対象ブロックは、ＣＵであってもよいし、ＴＵであってもよい。以下、本実施形態では、符号化対象ブロックとしてＣＵが用いられるケースを例にして説明する。
【００２７】
また、本実施形態では、ＣＵの符号化順及び復号順として、従来のＨＥＶＣで用いられているラスタースキャン順（図７や図８に示すようなＺ型）が用いられているケースを例にして説明しているが、かかる符号化順及び復号順として、Ｕ型やＸ型等の他の符号化順及び復号順が用いられていてもよい。
【００２８】
図１に示すように、本実施形態に係る符号化装置１は、イントラ予測モード決定部１１と、合成領域決定部１２と、イントラ予測部１３と、残差信号生成部１４と、直交変換・量子化部１５と、逆直交変換・逆量子化部１６と、局部復号画像生成部１７と、メモリ部１８と、エントロピー符号化部１９とを具備している。
【００２９】
イントラ予測モード決定部１１は、ＣＵに適用する最適なイントラ予測モードを決定するように構成されている。
【００３０】
合成領域決定部１２は、イントラ予測モード決定部１１によって決定されたイントラ予測モードに基づいて、ＣＵ内において復号済みでない隣接画素から予測画像が生成される合成領域Ｘを決定するように構成されている。
【００３１】
具体的には、図２に示すように、合成領域決定部１２は、イントラ予測モード決定部１１によって決定されたイントラ予測モードの方向が左下から右上に向かう方向である場合（すなわち、左下から右上に向かって方向予測が行われる場合）に、ＣＵ＃Ａ２内において復号済みでない隣接画素Ｂ１〜Ｂ４から予測画像が生成される合成領域Ｘを決定するように構成されていてもよい。
【００３２】
また、本発明は、イントラ予測モード決定部１１によって決定されたイントラ予測モードの方向が右上から左下に向かう方向である場合（すなわち、右上から左下に向かって方向予測が行われる場合）にも適用可能であるが、以下、イントラ予測モード決定部１１によって決定されたイントラ予測モードの方向が左下から右上に向かう方向である場合（すなわち、左下から右上に向かって方向予測が行われる場合）を例に挙げて説明する。
【００３３】
なお、本明細書の図において、イントラ予測モードの方向（予測方向）を示す矢印は、ＨＥＶＣ規格書における記載と同様に、イントラ予測の対象の画素から参照画素に向かうものとする（以下同様）。
【００３４】
イントラ予測部１３は、合成領域決定部１２によって決定された合成領域Ｘに含まれるか否かに基づいて、各領域の予測画像の生成方法を変更するように構成されている。
【００３５】
具体的には、イントラ予測部１３は、図３（ａ）に示すように、ＣＵ＃Ａ２において、合成領域Ｘに含まれていない領域（すなわち、参照画素Ｗ１〜Ｗ３が復号済みである領域）Ｙでは、イントラ予測モード決定部１１によって決定されたイントラ予測モードを用いて、復号済み参照画素Ｗ１〜Ｗ３に基づいて予測画像を生成するように構成されている。
【００３６】
一方、イントラ予測部１３は、図３（ｂ）に示すように、ＣＵ＃Ａ２において、合成領域Ｘに含まれている領域（すなわち、参照画素Ｂ２〜Ｂ４が復号済みでない領域）では、予め規定した予測方法を用いて予測画像を生成するように構成されている。
【００３７】
ここで、予め規定した予測方法とは、例えば、ＤＣ予測やＰｌａｎａｒ予測等のイントラ予測の他、隣接する復号済み参照画素の値の平均等で予測画像を生成する予測方法等が挙げられる。
【００３８】
なお、符号化装置１及び復号装置３において、かかる予測方法について予め決定していれば、如何なる予測方法を使う場合であっても、符号化装置１から復号装置３に対して、かかる予測方法を示す新たなフラグを伝送する必要はない。
【００３９】
また、合成領域決定部１２によって決定された合成領域は、イントラ予測モードの方向及び隣接する画素が復号済みであるか否かによって一意に決定することができるため、符号化装置１から復号装置３に対して、新たに合成領域がどの領域であるかを示すフラグを伝送する必要はない。
【００４０】
例えば、図３（ｂ）に示すように、イントラ予測部１３は、ＣＵ＃Ａ２における合成領域Ｘに含まれている領域内の画素Ｘ１の位置では、Ｐｌａｎａｒ予測を用いて、画素Ｗ３、画素Ｄ１、画素Ｄ２及び画素Ｄ４を合成することによって予測画像を生成するように構成されていてもよい。ここで、画素Ｄ４には、画素Ｂ４の値がコピーされており、画素Ｂ４には、画素Ｗ１の値がコピーされている。
【００４１】
残差信号生成部１４は、イントラ予測部１３によって生成された予測画像と原画像との差分により残差信号を生成するように構成されている。
【００４２】
直交変換・量子化部１５は、残差信号生成部１４によって生成された残差信号に対して直交変換処理及び量子化処理を施し、量子化された変換係数を生成するように構成されている。
【００４３】
逆直交変換・逆量子化部１６は、直交変換・量子化部１５によって生成された量子化された変換係数に対して、再び逆量子化処理及び逆直交変換処理を施し、量子化された残差信号を生成するように構成されている。
【００４４】
局部復号画像生成部１７は、逆直交変換・逆量子化部１６によって生成された量子化された残差信号に対してイントラ予測部１３によって生成された予測画像を加えることで局部復号画像を生成するように構成されている。
【００４５】
メモリ部１８は、局部復号画像生成部１７によって生成された局部復号画像を参照画像として利用可能に保持するように構成されている。
【００４６】
エントロピー符号化部１９は、イントラ予測モード決定部１１によって決定されたイントラ予測モード等を含むフラグ情報や量子化された変換係数に対してエントロピー符号化処理を施してストリーム出力するように構成されている。
【００４７】
また、本実施形態に係る復号装置３は、動画像を構成するフレーム単位の原画像をＣＵに分割して復号するように構成されている。また、本実施形態に係る復号装置３は、本実施形態に係る符号化装置１と同様に、ＣＵを複数のＴＵに分割することができるように構成されている。
【００４８】
図４に示すように、本実施形態に係る復号装置３は、エントロピー復号部３１と、合成領域決定部３２と、イントラ予測部３３と、逆量子化・逆変換部３４と、局部復号画像生成部３５と、メモリ部３６とを具備している。
【００４９】
エントロピー復号部３１は、符号化装置１から出力されたストリームから、変換係数やフラグ情報等を復号するように構成されている。ここで、変換係数は、符号化装置１によって、フレーム単位の原画像をＣＵに分割して符号化された信号として得られた量子化された変換係数である。また、フラグ情報は、予測モード等の付随する情報を含む。
【００５０】
合成領域決定部３２は、エントロピー復号部３１によって出力されたイントラ予測モードに基づいて、ＣＵ内において復号済みでない隣接画素から予測画像が生成される合成領域Ｘを決定するように構成されている。
【００５１】
具体的には、図２に示すように、合成領域決定部３２は、エントロピー復号部３１によって出力されたイントラ予測モードの方向が左下から右上に向かう方向である場合（すなわち、左下から右上に向かって方向予測が行われる場合）に、ＣＵ＃Ａ２内において復号済みでない隣接画素Ｂ１〜Ｂ４から予測画像が生成される合成領域Ｘを決定するように構成されていてもよい。
【００５２】
イントラ予測部３３は、合成領域決定部３２によって決定された合成領域Ｘ及びエントロピー復号部３１によって出力されたイントラ予測モードを用いて、予測画像を生成するように構成されていてもよい。
【００５３】
具体的には、イントラ予測部３３は、イントラ予測部１３と同様に、合成領域決定部１２によって決定された合成領域Ｘに含まれるか否かに基づいて、各領域の予測画像の生成方法を変更するように構成されている。
【００５４】
例えば、イントラ予測部３３は、図３（ａ）に示すように、ＣＵ＃Ａ２において、合成領域Ｘに含まれていない領域（すなわち、参照画素Ｗ１〜Ｗ３が復号済みである領域）Ｙでは、エントロピー復号部３１によって出力されたイントラ予測モードを用いて、復号済み参照画素Ｗ１〜Ｗ３に基づいて予測画像を生成するように構成されている。
【００５５】
一方、イントラ予測部３３は、図３（ｂ）に示すように、ＣＵ＃Ａ２において、合成領域Ｘに含まれている領域（すなわち、参照画素Ｂ２〜Ｂ４が復号済みでない領域）では、上述の予め規定した予測方法を用いて予測画像を生成するように構成されている。
【００５６】
逆量子化・逆変換部３４は、エントロピー復号部３１によって出力された量子化された変換係数に対して逆量子化処理及び逆変換処理（例えば、逆直交変換処理）を施すことによって、残差信号を生成するように構成されている。
【００５７】
局部復号画像生成部３５は、イントラ予測部３３によって生成された予測画像と逆量子化・逆変換部３４によって生成された残差信号とを加えることで局部復号画像を生成するように構成されている。
【００５８】
メモリ部３６は、局部復号画像生成部３５によって生成された局部復号画像を、イントラ予測及びインター予測のための参照画像として利用可能に保持するように構成されている。
【００５９】
図５に、本実施形態に係る符号化装置１及び復号装置３によって予測画像を生成する動作の一例について説明するためのフローチャートについて示す。
【００６０】
第１に、図５を参照して、本実施形態に係る符号化装置１によって予測画像を生成する動作の一例について説明する。
【００６１】
図５に示すように、ステップＳ１０１において、符号化装置１は、ＣＵに適用する最適なイントラ予測モードを決定する。
【００６２】
ステップＳ１０２において、符号化装置１は、ステップＳ１０１において決定されたイントラ予測モードに基づいて、ＣＵ内において復号済みでない隣接画素から予測画像が生成される合成領域Ｘを決定する。
【００６３】
ステップＳ１０３において、符号化装置１は、ＣＵ内において、予測画像を生成する領域が合成領域に含まれているか否かについて判定する。「Ｎｏ」の場合、本動作は、ステップＳ１０４に進み、「Ｙｅｓ」の場合、本動作は、ステップＳ１０５に進む。
【００６４】
ステップＳ１０４において、符号化装置１は、ステップＳ１０１において決定されたイントラ予測モードを用いて、復号済み参照画素に基づいて予測画像を生成する。
【００６５】
ステップＳ１０５において、符号化装置１は、上述の予め規定した予測方法を用いて予測画像を生成する。
【００６６】
第２に、図５を参照して、本実施形態に係る復号装置３によって予測画像を生成する動作の一例について説明する。
【００６７】
図５に示すように、ステップＳ１０１において、復号装置３は、エントロピー復号処理によって得られた情報に基づいてイントラ予測モードを決定する。
【００６８】
ステップＳ１０２において、復号装置３は、ステップＳ１０１において決定されたイントラ予測モードに基づいて、ＣＵ内において復号済みでない隣接画素から予測画像が生成される合成領域Ｘを決定する。
【００６９】
ステップＳ１０３において、復号装置３は、ＣＵ内において、予測画像を生成する領域が合成領域に含まれているか否かについて判定する。「Ｎｏ」の場合、本動作は、ステップＳ１０４に進み、「Ｙｅｓ」の場合、本動作は、ステップＳ１０５に進む。
【００７０】
ステップＳ１０４において、復号装置３は、ステップＳ１０１において決定されたイントラ予測モードを用いて、復号済み参照画素に基づいて予測画像を生成する。
【００７１】
ステップＳ１０５において、復号装置３は、上述の予め規定した予測方法を用いて予測画像を生成する。
【００７２】
本実施形態に係る符号化装置１及び復号装置３によれば、イントラ予測モードの方向（予測方向）の参照先に未復号画素が含まれている場合、隣接する復号済み参照画素をコピーすることで補間した参照画素を用いて生成した予測画像と予め規定した予測方法を用いて生成した予測画像とを合成することにより新たな予測画像を生成することで、予測精度低下を抑制することができる。
【００７３】
（第２の実施形態）
以下、図６を参照して、本発明の第２の実施形態に係る符号化装置１及び復号装置３について、上述の第１の実施形態に係る符号化装置１及び復号装置３との相違点に着目して説明する。
【００７４】
本実施形態に係る符号化装置１では、イントラ予測部１３は、合成領域Ｘに含まれる領域と合成領域Ｘに含まれない領域Ｙとの間の境界領域において、所定条件が満たされる場合に、かかる境界領域の予測画像に対して平滑フィルタを適用するように構成されている。
【００７５】
同様に、本実施形態に係る復号装置３では、イントラ予測部３３は、合成領域Ｘに含まれる領域と合成領域Ｘに含まれない領域Ｙとの間の境界領域において、所定条件が満たされる場合に、かかる境界領域の予測画像に対して平滑フィルタを適用するように構成されている。
【００７６】
例えば、図６の例では、かかる境界領域には、合成領域Ｘに含まれる領域内の画素Ｘ１、Ｘ２、Ｘ３、Ｘ４及び合成領域Ｘに含まれない領域Ｙ内の画素Ｙ１、Ｙ２、Ｙ３が位置する領域が該当する。
【００７７】
また、所定条件としては、かかる境界領域における不連続性が所定閾値よりも高いことが挙げられる。ここで、不連続性の評価としては、例えば、水平方向の差分や垂直方向の差分や斜め方向の差分等の線形結合で表わす方法が挙げられる。
【００７８】
すなわち、イントラ予測部１３及びイントラ予測部３３は、かかる境界領域における不連続性の評価の値が所定閾値よりも高い場合には、かかる境界領域の予測画像に対して平滑フィルタを適用するように構成されている。
【００７９】
例えば、図６の例では、イントラ予測部１３及びイントラ予測部３３は、かかる境界領域における不連続性の評価の値が所定閾値よりも高い場合には、合成領域Ｘに含まれる領域内の画素Ｘ１、Ｘ２、Ｘ３、Ｘ４及び合成領域Ｘに含まれない領域Ｙ内の画素Ｙ１、Ｙ２、Ｙ３が位置する領域の予測画像に対して平滑フィルタを適用するように構成されている。
【００８０】
なお、図６の例では、イントラ予測部１３及びイントラ予測部３３は、合成領域Ｘに含まれる領域内の画素Ｘ５、Ｘ６、Ｘ７が位置する領域の予測画像に対しても平滑フィルタを適用するように構成されている。
【００８１】
ここで、符号化装置１と復号装置３との間で、上述の所定閾値を共有することで、符号化装置１から復号装置３に対して新たなフラグを伝送する必要がなくなる。
【００８２】
本実施形態に係る符号化装置１及び復号装置３によれば、合成領域Ｘに含まれるか否かに基づいて各領域の予測画像の生成方法を変更することに起因する境界領域の不連続性を低減することができ、符号化性能を向上させることができる。
【００８３】
（第３の実施形態）
以下、図６を参照して、本発明の第３の実施形態に係る符号化装置１及び復号装置３について、上述の第１及び第２の実施形態に係る符号化装置１及び復号装置３との相違点に着目して説明する。
【００８４】
本実施形態に係る符号化装置１及び復号装置３において、イントラ予測部１３及びイントラ予測部３３は、合成領域Ｘに含まれる領域において、従来のＨＥＶＣにおける予測方法を用いて生成された予測画像（コピーによって埋められた未復号参照画素に基づいて生成された予測画像）及び合成領域Ｘにおいて生成された予測画像（上述の予め規定した予測方法を用いて生成された予測画像）の加重平均によって予測画像を生成するように構成されている。
【００８５】
なお、本実施形態に係る符号化装置１及び復号装置３において、イントラ予測部１３及びイントラ予測部３３は、上述の所定条件が満たされる場合にのみ、合成領域Ｘに含まれる領域において、従来のＨＥＶＣにおける予測方法を用いて生成された予測画像（コピーによって埋められた未復号参照画素に基づいて生成された予測画像）及び合成領域Ｘにおいて生成された予測画像（上述の予め規定した予測方法を用いて生成された予測画像）の加重平均によって予測画像を生成するように構成されていてもよい。
【００８６】
本実施形態に係る符号化装置１及び復号装置３では、イントラ予測部１３及びイントラ予測部３３は、かかる加重平均を算出する際に用いる重み係数を算出するように構成されていてもよい。
【００８７】
イントラ予測部１３及びイントラ予測部３３は、重み係数として予め定めた規定の値を用いるように構成されていてもよいし、予測画像を生成する際の復号済み参照画素の信用度を用いて重み係数を算出するように構成されていてもよい。
【００８８】
なお、図３（ｂ）の例では、復号済み参照画素Ｗ１〜Ｗ４の信用度は高く、コピーによって生成された参照画素Ｂ１〜Ｂ４の信用度は低い。また、参照画素Ｂ１の信用度と参照画素Ｂ４の信用度を比べると、コピー元に近い参照画素Ｂ４の信用度の方が高い。
【００８９】
また、イントラ予測部１３及びイントラ予測部３３は、合成領域Ｘに含まれる領域と合成領域Ｘに含まれない領域Ｙとの間の境界領域からの距離に応じて、かかる重み係数を算出するように構成されていてもよい。
【００９０】
例えば、イントラ予測部１３及びイントラ予測部３３は、かかる境界領域付近では、従来のＨＥＶＣにおける予測方法を用いて生成された予測画像（コピーによって埋められた未復号参照画素に基づいて生成された予測画像）の重み係数が強くなるように算出し、かかる境界領域から離れた領域では、合成領域Ｘにおいて生成された予測画像（上述の予め規定した予測方法を用いて生成された予測画像）の重み係数が強くなるように算出してもよい。
【００９１】
（その他の実施形態）
上述のように、本発明について、上述した実施形態によって説明したが、かかる実施形態における開示の一部をなす論述及び図面は、本発明を限定するものであると理解すべきではない。かかる開示から当業者には様々な代替実施形態、実施例及び運用技術が明らかとなろう。
【００９２】
また、上述の実施形態では特に触れていないが、上述の符号化装置１及び復号装置３によって行われる各処理をコンピュータに実行させるプログラムが提供されてもよい。また、かかるプログラムは、コンピュータ読取り可能媒体に記録されていてもよい。コンピュータ読取り可能媒体を用いれば、かかるプログラムをコンピュータにインストールすることが可能である。ここで、かかるプログラムが記録されたコンピュータ読取り可能媒体は、非一過性の記録媒体であってもよい。非一過性の記録媒体は、特に限定されるものではないが、例えば、ＣＤ−ＲＯＭやＤＶＤ−ＲＯＭ等の記録媒体であってもよい。
【００９３】
或いは、上述の符号化装置１及び復号装置３内の少なくとも一部の機能を実現するためのプログラムを記憶するメモリ及びメモリに記憶されたプログラムを実行するプロセッサによって構成されるチップが提供されてもよい。
【符号の説明】
【００９４】
１…符号化装置
１１…イントラ予測モード決定部
１２…合成領域決定部
１３…イントラ予測部
１４…残差信号生成部
１５…直交変換・量子化部
１６…逆量子化部・逆直交変換部
１７…局部復号画像生成部
１８…メモリ部
１９…エントロピー符号化部
３…復号装置
３１…エントロピー復号部
３２…合成領域決定部
３３…イントラ予測部
３４…逆量子化・逆変換部
３５…局部復号画像生成部
３６…メモリ部
【図１】
2020167729.tif 000003
【図２】
2020167729.tif 000004
【図３】
2020167729.tif 000005
【図４】
2020167729.tif 000006
【図５】
2020167729.tif 000007
【図６】
2020167729.tif 000008
【図７】
2020167729.tif 000009
【図８】
2020167729.tif 000010
【手続補正書】
【提出日】令和2年7月20日(2020.7.20)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
動画像を構成するフレーム単位の原画像を分割した符号化対象ブロックを復号するように構成されている復号装置であって、
予測モードに基づいて決定する第１予測処理により第１予測画像を生成する第１予測部と、
前記予測モードに基づいて合成領域を決定するように構成されている合成領域決定部と、
前記第１予測処理と異なる第２予測処理により第２予測画像を生成する第２予測部と、
前記合成領域に含まれる予測画像を、前記第１予測画像と前記第２予測画像との加重平均により生成する予測画像合成部とを具備しており、
前記予測画像合成部は、前記加重平均に用いる重みを前記合成領域に含まれる画素の位置に応じて画素ごとに決定することを特徴とする復号装置。
【請求項２】
コンピュータを請求項１に記載の復号装置として機能させるためのプログラム。