(57)【要約】【課題】  符号化画像信号の解析を主な用途として、復号画像上で視覚的に符号化情報を認識させることを可能とする画像信号復号装置を提供する。【解決手段】  符号化情報変換部８は可変長復号部３で可変長復号された情報からマクロブロック毎の符号化情報を選択し、その情報に基づいて色差信号を生成する。色差信号選択部９は、外部より入力される選択信号１０により復号画像出力が指示された場合、フレームメモリ６に蓄積されている復号画像の色差信号を選択して出力する。また、色差信号選択部９は、外部より入力される選択信号１０により符号化情報出力が指示された場合は、符号化情報変換部８で生成された色差信号を選択して出力する。画像信号出力部１１は、フレームメモリ６に蓄積されている復号画像の輝度信号と、色差信号選択部９で選択された色差信号とによりなる画像信号１２を出力する。【選択図】      図１
2007312067.tif 000002
【特許請求の範囲】
【請求項１】
符号化画像信号を復号して、復号画像信号と前記符号化画像信号に関する所定単位毎の符号化情報とを得る復号手段と、
前記符号化情報に基づく色差信号を生成する符号化情報変換手段と、
前記復号画像信号と、前記符号化情報変換手段により生成された色差信号とが供給され、外部から供給される選択信号に基づいて、前記復号画像信号内の色差信号と前記符号化情報変換手段が生成した色差信号とのどちらか一方を選択出力する選択手段と、
前記復号画像信号内の輝度信号と前記選択手段によって選択出力された色差信号とから画像信号を生成して出力する画像信号出力手段と、
を備えたことを特徴とする画像信号復号装置。
【請求項２】
符号化時の符号化情報が重畳されている符号化画像信号が復号された復号画像信号から前記符号化情報を分離する分離手段と、
前記分離手段によって分離された前記符号化情報に基づく色差信号を生成する符号化情報変換手段と、
前記復号画像信号と、前記符号化情報変換手段により生成された色差信号とが供給され、外部から供給される選択信号に基づいて、前記復号画像信号内の色差信号と前記符号化情報変換手段が生成した色差信号とのどちらか一方を選択出力する選択手段と、
前記復号画像信号内の輝度信号と前記選択手段によって選択出力された色差信号とから画像信号を生成して出力する画像信号出力手段と、
を備えたことを特徴とする画像信号復号装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、復号画像上で視覚的に符号化情報を認識可能とする画像信号復号装置に関するものである。
【背景技術】
【０００２】
近年、画像情報のデジタル化に伴い、ＭＰＥＧ−２（ＩＳＯ／ＩＥＣ  １３８１８−２）に代表される画像符号化方式が標準化され普及している。ＭＰＥＧ２では直交変換と動き補償を行った後エントロピー符号化を行うことにより画像の冗長性を取り除き画像を圧縮符号化している。
【０００３】
さらに高圧縮率の要求から、Ｈ．２６４（ＩＴＵ−Ｔ  Ｒｅｃ．Ｈ．２６４  ｜  ＩＳＯ／ＩＥＣ  １４４９６−１０  ＡＶＣ）が標準化された。ＭＰＥＧ−２直交変換のモードや動き補償のモードが多彩になり、イントラでも予測を用いること等により高い符号化効率が実現されている。
【０００４】
符号化されている符号化画像信号を一度復号して復号画像信号とした場合、復号画像信号を見ただけでは、復号前にどのように符号化されていたかを知ることができない。
【特許文献１】特開２００２−１６５２１９
【非特許文献１】Ｄｒａｆｔ  ＩＴＵ−Ｔ  Ｒｅｃｏｍｍｅｎｄａｔｉｏｎ  ａｎｄ  Ｆｉｎａｌ  Ｄｒａｆｔ  Ｉｎｔｅｒｎａｔｉｏｎａｌ  Ｓｔａｎｄａｒｄ  ｏｆ  Ｊｏｉｎｔ  Ｖｉｄｅｏ  Ｓｐｅｃｉｆｉｃａｔｉｏｎ  （ＩＴＵ−Ｔ  Ｒｅｃ．Ｈ．２６４  ｜  ＩＳＯ／ＩＥＣ  １４４９６−１０  ＡＶＣ）：２００３
【発明の開示】
【発明が解決しようとする課題】
【０００５】
符号化されている符号化画像信号を復号して得られた復号画像がどのように符号化されていたかを知るためには、復号画像の他に符号化情報を保存しておく必要がある。復号画像とは別に保存しておいた符号化情報を参照することによって符号化情報を取得することができる。
【０００６】
特開２００２−１６５２１９では、復号画像信号の所定の領域にマクロブロック単位で符号化情報を重畳する方法が提案されている。これは主に再符号化の際に符号化情報を利用して良好な再符号化を行うことを目的としており、復号画像上で視覚的に符号化情報を認識させることはできない。
【０００７】
本発明は符号化画像信号の解析を主な用途として、復号画像上で視覚的に符号化情報を認識させることができるようにすることを目的とする。
【課題を解決するための手段】
【０００８】
そこで、上記課題を解決するために本発明は、下記の画像信号復号装置を提供するものである。
（１）  符号化画像信号を復号して、復号画像信号と前記符号化画像信号に関する所定単位毎の符号化情報とを得る復号手段と、
前記符号化情報に基づく色差信号を生成する符号化情報変換手段と、
前記復号画像信号と、前記符号化情報変換手段により生成された色差信号とが供給され、外部から供給される選択信号に基づいて、前記復号画像信号内の色差信号と前記符号化情報変換手段が生成した色差信号とのどちらか一方を選択出力する選択手段と、
前記復号画像信号内の輝度信号と前記選択手段によって選択出力された色差信号とから画像信号を生成して出力する画像信号出力手段と、
を備えたことを特徴とする画像信号復号装置。
（２）  符号化時の符号化情報が重畳されている符号化画像信号が復号された復号画像信号から前記符号化情報を分離する分離手段と、
前記分離手段によって分離された前記符号化情報に基づく色差信号を生成する符号化情報変換手段と、
前記復号画像信号と、前記符号化情報変換手段により生成された色差信号とが供給され、外部から供給される選択信号に基づいて、前記復号画像信号内の色差信号と前記符号化情報変換手段が生成した色差信号とのどちらか一方を選択出力する選択手段と、
前記復号画像信号内の輝度信号と前記選択手段によって選択出力された色差信号とから画像信号を生成して出力する画像信号出力手段と、
を備えたことを特徴とする画像信号復号装置。
【発明の効果】
【０００９】
本発明の画像信号復号装置によれば、符号化されている画像信号を復号して得られた復号画像信号がどのように符号化されていたかを、復号画像上で使用者に視覚的に認識させることができ、符号化画像信号を解析するのに良好な解析装置を提供することができる。
【発明を実施するための最良の形態】
【００１０】
以下、図面を参照しながら本発明の実施の形態について実施例に基づき説明する。
［第１実施例］
図１は、本発明における第１実施例である画像信号復号装置の構成を示すブロック図である。
【００１１】
符号化画像信号１が入力されバッファ２に蓄積される。可変長復号部３はバッファ２に蓄積されている符号化画像信号を可変長復号する。逆量子化部４は可変長復号されたデータを逆量子化し、逆変換部５は逆量子化されたデータを符号化時とは逆変換する。
【００１２】
動き補償部７は可変長復号部３で復号された予測情報に基づきフレームメモリ６に蓄積されている参照画像を読み出し、動き補償により予測画像を生成する。逆変換部５で逆変換されたデータと動き補償部７で生成された予測画像を加算し復号画像としてフレームメモリ６に蓄積する。
【００１３】
符号化情報変換部８は可変長復号部３で可変長復号された情報からマクロブロック毎の符号化情報を選択し、その情報に基づいて色差信号を生成する。色差信号選択部９は、外部より入力される選択信号１０により復号画像出力が指示された場合、フレームメモリ６に蓄積されている復号画像の色差信号を選択して出力する。また、色差信号選択部９は、外部より入力される選択信号１０により符号化情報出力が指示された場合は、符号化情報変換部８で生成された色差信号を選択して出力する。
【００１４】
画像信号出力部１１は、フレームメモリ６に蓄積されている復号画像の輝度信号と、色差信号選択部９で選択された色差信号とによりなる画像信号１２を出力する。
次に、符号化情報変換部８の処理について説明する。マクロブロック毎の符号化情報としてＨ．２６４符号化方式を用いて１画素８ビットの精度の４：２：０信号の画像を符号化した符号化画像信号のイントラマクロブロックの各符号化モードを例に説明する。Ｈ．２６４符号化方式のイントラマクロブロックの符号化モードは以下の４種類存在する。
（１）１６ｘ１６予測モード
マクロブロックを分割せずに１つのブロックとして予測符号化を行う。
（２）８ｘ８予測モード
マクロブロックを８ｘ８の４ブロックに分割して予測符号化を行う。
（３）４ｘ４予測モード
マクロブロックを４ｘ４の１６ブロックに分割して予測符号化を行う。
（４）ＩＰＣＭモード
マクロブロックを非圧縮データとして符号化を行う。
【００１５】
マクロブロックは輝度信号が１６ｘ１６画素、色差信号が８ｘ８画素で構成されている。上記の各モードの分割の様子を視覚的に識別するため、１６ｘ１６予測モードでは図２に示す画素値、８ｘ８予測モードでは図３に示す画素値、４ｘ４予測モードでは図４に示す画素値、ＩＰＣＭモードでは図５に示す画素値、の色差信号をそれぞれマクロブロック内の８ｘ８画素のＣｒ信号として生成する。Ｃｂ信号としてはいずれも図６に示す画素値の色差信号を生成する。
【００１６】
以上のようにして生成した色差信号と輝度信号とによる画像信号を画面上で見ると、マクロブロック境界はグレーで表示され、マクロブロックの境界がひと目で識別できる。イントラマクロブロックは赤色で表示され、イントラマクロブロック内のブロック分割が濃い赤線で表示され分割の様子がひと目で確認できる。またＩＰＣＭモードは１６ｘ１６予測モードに比べ濃い赤色で表示されるため区別することが可能である。
【００１７】
このように、マクロブロックの符号化情報を色差信号に変換して表示することにより、本実施例は、復号画像の輝度とマクロブロックの符号化情報を視覚的に表現した画像とを同時に表示することができ、画像符号化信号の解析を容易に行うことを可能とする。また、外部より入力される選択信号により、復号された色差信号と符号化情報を変換した色差信号とを任意に切り替えて表示することも可能である。
【００１８】
なお、上記の説明ではイントラマクロブロックのモードについて説明したが、インターマクロブロックについても同様な方法で適用可能である。また、マクロブロック単位の処理だけでなく、ピクチャ単位やその他の符号化単位で色差信号を切り替えてもよい。モードの区別の例としてＣｒ信号のみで区別したが、Ｃｂ信号だけでも良いし、Ｃｒ信号とＣｂ信号の組み合わせとしてもよい。画素値は視覚的に区別が可能な範囲で任意の値を用いてよい。
【００１９】
［第２実施例］
図７は、本発明における第２実施例である画像信号復号装置の構成を示すブロック図である。
【００２０】
復号前の符号化時の符号化情報が重畳されている復号画像信号２１が符号化情報分離部２２に入力される。符号化情報分離部２２は復号画像信号に重畳されている符号化情報と復号画像とを分離し、復号画像をフレームメモリ２３に蓄積するとともに、符号化情報を符号化情報変換部２４に送る。
【００２１】
符号化情報変換部２４は符号化情報分離部２２で分離された符号化情報に基づいて色差信号を生成する。色差信号選択部２５は、外部より入力される選択信号２６により復号画像出力が指示された場合、フレームメモリ２３に蓄積されている復号画像の色差信号を選択して出力する。また、色差信号選択部２５は、外部より入力される選択信号２６により符号化情報出力が指示された場合は、符号化情報変換部２４で生成された色差信号を選択して出力する。
【００２２】
画像信号出力部２７はフレームメモリ２３に蓄積されている復号画像の輝度信号と、色差信号選択部２５で選択された色差信号とによる画像信号２８を出力する。
なお、符号化情報変換部２４は第１実施例と同様の処理を行って符号化情報に応じた色差信号を生成する。
【００２３】
以上のようにして、第２実施例は、復号前の符号化時の符号化情報が重畳されている復号画像信号の復号前の符号化情報を視覚的に表示させることができ、復号画像の復号前の符号化画像信号を解析することを可能とする。
【図面の簡単な説明】
【００２４】
【図１】本発明の第1実施例による画像信号復号装置の構成を示す図である。
【図２】１６ｘ１６予測モードを表すＣｒ信号の画素値を示す図である。
【図３】８ｘ８予測モードを表すＣｒ信号の画素値を示す図である。
【図４】４ｘ４予測モードを表すＣｒ信号の画素値を示す図である。
【図５】ＩＰＣＭモードを表すＣｒ信号の画素値を示す図である。
【図６】Ｃｂ信号の画素値を示す図である。
【図７】本発明の第２実施例による画像信号復号装置の構成を示す図である。
【符号の説明】
【００２５】
１  符号化画像信号入力
２  バッファ
３  可変長復号部
４  逆量子化部
５  逆変換部
６  フレームメモリ
７  動き補償部
８  符号化情報変換部
９  色差信号選択部
１０  選択信号
１１  画像信号出力部
１２  画像信号出力
２１  復号画像信号入力
２２  符号化情報分離部
２３  フレームメモリ
２４  符号化情報変換部
２５  色差信号選択部
２６  選択信号
２７  画像信号出力部
２８  画像信号出力
【図１】
2007312067.tif 000003
【図２】
2007312067.tif 000004
【図３】
2007312067.tif 000005
【図４】
2007312067.tif 000006
【図５】
2007312067.tif 000007
【図６】
2007312067.tif 000008
【図７】
2007312067.tif 000009