(57)【要約】【課題】逆離散コサイン変換回路の回路規模を増加させることなく、平易な処理で拡大・縮小を実現できるとともに、処理速度向上、メモリ容量削減を図ることができる画像復号化装置を提供する。【解決手段】解像度変換処理を画像復号化処理の後で行い、且つ解像度変換処理においては、画像復号化処理と同様のマクロブロック単位で解像度変換処理を行う。これにより、逆離散コサイン変換の回路規模を増加させることなく、平易な処理で拡大縮小を実現でき、かつ解像度変換のためのメモリ容量や処理遅延の発生を少なくすることが可能な画像復号化装置を実現できる。【選択図】      図１
2004336667.tif 000002
【特許請求の範囲】
【請求項１】
ハフマン符号化されたディジタル画像データをマクロブロック単位に逆ハフマン復号化し、動きベクトル、量子化テーブル及び量子化された離散コサイン変換係数を出力する逆ハフマン復号手段と、前記逆ハフマン復号手段にて量子化された離散コサイン変換係数をブロック単位に逆量子化し、離散コサイン変換係数を出力する逆量子化手段と、前記逆量子化手段からの離散コサイン変換係数をブロック単位に画像データに変換する逆離散コサイン変換手段と、前記逆離散コサイン変換手段にて生成された画像データをブロック単位に水平方向並びに垂直方向に拡大又は縮小する解像度変換手段と、を具備することを特徴とする画像復号化装置。
【請求項２】
請求項１に記載の画像復号化装置と、前記画像復号化装置にて復号された画像データを画像表示手段で表示可能な信号にフォーマット変換するフォーマット変換手段と、前記フォーマット変換手段にてフォーマット変換された前記画像データを表示する画像表示手段と、を具備することを特徴とする画像処理装置。
【請求項３】
符号化された画像データを復号し表示する電子機器であって、請求項２に記載の画像処理装置を具備することを特徴とする電子機器。
【請求項４】
請求項２に記載の画像処理装置と、音声を入力する音声入力手段と、前記音声入力手段にて入力された音声データを符号化する音声符号化手段と、画像を入力する画像入力手段と、前記画像入力手段にて入力された画像データを符号化する画像符号化手段と、音声及び画像をパケット化し多重化する音声／画像多重化手段と、前記音声／画像多重化手段からの多重化データに対して伝送路符号化を行う伝送路符号化手段と、前記伝送路符号化手段で伝送路符号化された多重化データをディジタル変調し送信するディジタル変調／送信手段と、ディジタル変調信号を受信し、伝送路符号化データを復調するディジタル受信／復調手段と、前記ディジタル受信／復調手段にて復調された伝送路符号化データを復号する伝送路符号復号化手段と、前記伝送路符号復号化手段で復号された伝送路符号化データを音声データと画像データに分離する音声／画像分離手段と、前記音声／画像分離手段で分離された音声データを復号化する音声データ復号化手段と、前記音声データ復号化手段で復号化された音声データを出力する音声データ出力手段とを具備し、前記画像処理装置は、前記音声／画像分離手段で分離された画像データを復号化した後、表示用の信号にフォーマット変換することを特徴とする画像通信端末。
【請求項５】
ハフマン符号化されたディジタル画像データをブロック単位に逆ハフマン復号化し、復号化したデータをブロック単位に逆量子化して離散コサイン変換係数を生成し、生成した離散コサイン変換係数に対してブロック単位に逆離散コサイン変換を行ってブロック単位の画像データを生成し、逆離散コサイン変換を行って生成された画像データをブロック単位に水平方向並びに垂直方向に拡大又は縮小することを特徴とする画像処理方法。
【請求項６】
請求項５に記載の画像処理方法を用いて、入力される画像符号化データを復号化及び解像度変換処理を行い、更に復号した画像データを画像表示装置で表示するために画像フォーマットの変換を行い、画像表示装置に適したサイズで画像表示することを特徴とする画像処理方法。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、携帯テレビ電話やディジタル・ビデオ・ディスク・プレーヤ（以下ＤＶＤプレーヤ）などの符号化された画像データを復号し表示する電子機器に用いて好適な画像復号化装置及び画像処理方法に関する。
【０００２】
【従来の技術】
従来、符号化された画像データを復号しながら拡大、縮小を行う方法が案出されている（例えば特許文献１参照）。
【０００３】
図６は、従来の画像復号化装置の構成を示すブロック図である。
図６において、入力端子６０１に入力された受信画像データがバッファ６０２に一時的に蓄積される。バッファ６０２に蓄積された受信画像データは一定量ずつ取り出されて逆ハフマン復号器６０３に入力され、そこで復号されて離散コサイン変換（以下ＤＣＴ）係数と逆量子化テーブルと動きベクトルとが得られる。そして、得られたＤＣＴ係数と量子化テーブルは逆量子化器６０４に入力され、動ベクトルは動きベクトル変換器６０５に入力される。
【０００４】
逆量子化器６０４では、入力された量子化テーブルを用いてＤＣＴ係数が定数倍される。逆量子化器６０４にて逆量子化されたＤＣＴ係数は切替スイッチ６０６の端子ａ、ｂ、ｃのいずれかを介してブロック生成器群６０７に含まれた縮小ブロック生成器６０７１、８×８ブロック生成器６０７２、拡大ブロック生成器６０７３のいずれかに処理目的に応じて入力される。この場合、ブロックサイズ（画像）の拡大又は縮小を行わない場合は、逆量子化器６０４の出力である逆量子化されたＤＣＴ係数が切替スイッチ６０６の端子ｂを介して、８×８ブロック生成器６０７２に入力され、そのまま出力される。このときのブロックサイズは８×８画素である。
【０００５】
ブロックサイズの縮小変換を行う場合は、逆量子化器６０４の出力であるＤＣＴ係数が切替スイッチ６０６の端子ａを介して縮小ブロック生成器６０７１に入力される。縮小ブロック生成器６０７１の出力信号はＮ１とＮ２を８より小さい正の整数として、１ブロックあたり８Ｘ８個のＤＣＴ係数のうち、低周波数側のＮ１×Ｎ２個の係数である。このときの縮小率は縦Ｎ１／８倍、横Ｎ２／８倍になる。
【０００６】
ブロックサイズの拡大変換を行う場合は、ＤＣＴ係数が切替スイッチ６０６の端子ｃを介して、拡大ブロック生成器６０７３に入力される。拡大ブロック生成器６０７３では逆量子化器６０４において逆量子化された１ブロックあたり８×８個のＤＣＴ係数の、より高周波数側にゼロを付加して、サイズＮ１×Ｎ２個のブロックを生成する。
【０００７】
ただし、Ｎ１とＮ２を８より大きい正の整数とする。また、このときの拡大率は縦Ｎ１／８倍、横Ｎ２／８倍である。拡大ブロック生成器６０７３の出力から横一列の数列を取り出す。このサイズはＮ２でありＮ１種類ある。個々の数列は８個のＤＣＴ係数値と、Ｎ２−８個のゼロ値から構成されており、ＤＣＴ係数とゼロ値の境界に不連続点が存在する。その不連続性を是正するために窓関数乗算器６０７４にて窓関数を乗算する。縦方向に対しても同様に窓関数を乗算する。
【０００８】
ブロック生成器群６０７における処理で生成されたブロックは逆離散コサイン変換器６０８においてブロック毎に逆離散コサイン変換（ＩＤＣＴ）される。このときのブロックサイズはＮ１×Ｎ２である。逆離散コサイン変換の結果得られた逆離散コサイン変換器６０８からの出力信号は切替スイッチ６０９からの動き補償された信号と加算器６１０にて加算されて、再生画像として出力端子６１１より出力される。
【０００９】
加算器６１０からの出力画像がＩピクチャ（ピクチャ内符号化が行われている画像）の場合は、切替スイッチ６０９は端子ｄに接続され、加算器６１０では何も加算されない。加算器６１０からの出力画像がＰピクチャ（過去のピクチャを予測画像としたピクチャ間予測符号化が行われている画像）の場合は、逆離散コサイン変換器６０８の出力信号は加算器６１０により、切替スイッチ６０９の出力である予測に使われた過去の画像と加算されて、出力端子６１１より出力される。
【００１０】
過去の画像を切替スイッチ６１２の端子ａを介してフレームメモリ６１３に蓄積した場合は、この蓄積した画像信号が動き補償器６１４により動き補償されて、切替スイッチ６０９の端子ａを介して加算器６１０に入力される。このときの動き補償には、動きベクトル変換器６０５の出力である動きベクトルが使われる。これは切替スイッチ６１５の端子ａを介して動き補償器６１４に入力される。
【００１１】
一方、過去の画像を切替スイッチ６１２の端子ｃを介してフレームメモリ６１６に蓄積した場合は、蓄積した画像信号が動き補償器６１７により動き補償されて、切替スイッチ６０９の端子ｃを介して加算器６１０に入力される。このときの動き補償には、動きベクトル変換器６０５の出力が使われる。これは切替スイッチ６１５の端子ｂを介して動き補償器６１７に入力される。
【００１２】
加算器６１０からの出力画像がＢピクチャ（過去または未来のピクチャを予測画像としたピクチャ間予測符号化が行われている画像）の場合、過去と未来の画像がそれぞれフレームメモリ６１３、６１６に蓄積され、それぞれ動き補償器６１４、６１７により動き補償される。その後、両者は補間器６１８に入力され、両者の相加平均又はいずれか一方が切替スイッチ６０９の端子ｂに出力される。スイッチ６０９の出力信号は加算器６１０により、逆離散コサイン変換器６０８の出力あるいは切替スイッチ６１９の端子ｂを介してフィールド合成器６２０を経由した出力と加算されて出力端子６１１から再生画像が出力される。
【００１３】
また、動きベクトル変換器６０５では動き補償に使われる動きベクトルの値を、縦方向はＮ１／８倍、横方向はＮ２／８倍して再生画像に必要な変換比（画像の拡大又は縮小比）に応じて適切な値が生成されている。
【００１４】
このように、従来の画像復号化装置では画像を拡大する場合はＤＣＴ係数の高周波数側にゼロを付加し、画像を縮小する場合はＤＣＴ係数の高周波数側のデータを削除することで実現していた。
【００１５】
【特許文献１】
特開平６−２２２９１号公報（第６頁、第７頁、図１）
【００１６】
【発明が解決しようとする課題】
しかしながら、従来の画像復号化装置においては、逆離散コサイン変換器６０８への入力データの構成が画像の拡大、縮小の倍率によって変化するため、逆離散コサイン変換をハードウェアで構成する場合、実現が困難であるという問題がある。
【００１７】
すなわち、携帯テレビ電話やＤＶＤプレーヤなどのコンシューマエレクトロニクス製品では、ＭＰＥＧ（Ｍｏｖｉｎｇ  Ｐｉｃｔｕｒｅ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）２やＭＥＰＧ４などの画像符号化データの復号処理はシステムＬＳＩ（Ｌａｒｇｅ  Ｓｃａｌｅ  ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ）で行っている。その処理において逆離散コサイン変換は他の復号化の処理に比べて処理負荷が重いため、殆どの場合ソフトウェア処理ではなく、ハードウェア専用回路で処理を行っている。８×８ブロックの逆離散コサイン変換回路を構成するためには、２つの行列演算回路とそれらの出力を累算する累算器回路が必要となる。従来の画像復号化装置では、拡大、縮小の倍率によって逆離散コサイン変換のデータ構成（Ｎ１／８）×（Ｎ２／８）が変化するため、行列演算に用いる係数データや演算器の構成が大きく変化し、ハードウェア専用回路の回路規模が増加し易い。
【００１８】
また、画像復号化処理を行った後に解像度変換処理を追加すると、フレームメモリが必要となり、処理遅延が発生するという問題もある。
【００１９】
本発明は係る点に鑑みてなされたものであり、逆離散コサイン変換回路の回路規模を増加させることなく、平易な処理で拡大・縮小を実現できるとともに、処理速度の向上が図れ、さらにメモリ容量の削減を図ることができる画像復号化装置及び画像処理方法を提供することを目的とする。
【００２０】
【課題を解決するための手段】
請求項１に係る発明の画像復号化装置は、ハフマン符号化されたディジタル画像データをマクロブロック単位に逆ハフマン復号化し、動きベクトル、量子化テーブル及び量子化された離散コサイン変換係数を出力する逆ハフマン復号手段と、前記逆ハフマン復号手段にて量子化された離散コサイン変換係数をブロック単位に逆量子化し、離散コサイン変換係数を出力する逆量子化手段と、前記逆量子化手段からの離散コサイン変換係数をブロック単位に画像データに変換する逆離散コサイン変換手段と、前記逆離散コサイン変換手段にて生成された画像データをブロック単位に水平方向並びに垂直方向に拡大又は縮小する解像度変換手段と、を具備する構成を採る。
【００２１】
この構成によれば、画像復号化処理の後段で解像度変換処理を行うとともに、その解像度変換処理においては画像復号化処理と同様のブロック単位で行うので、逆離散コサイン変換回路の回路規模を増加させることなく、平易な処理で拡大及び縮小を実現でき、かつ解像度変換のためのメモリ容量や処理遅延の発生を少なく抑えることが可能となる。
【００２２】
請求項２に係る発明の画像処理装置は、請求項１に記載の画像復号化装置と、前記画像復号化装置にて復号された画像データを画像表示手段で表示可能な信号にフォーマット変換するフォーマット変換手段と、前記フォーマット変換手段にてフォーマット変換された前記画像データを表示する画像表示手段と、を具備する構成を採る。
【００２３】
この構成によれば、画像復号化装置からは画像データとして出力される信号（例えば色差信号）が液晶モニタやＣＲＴモニタ等の画像表示手段で表示可能な信号（例えばＲＧＢ信号）に変換するので、入力されたディジタル画像データを視覚的に表示することが可能となる。
【００２４】
請求項３に係る発明の電子機器は、符号化された画像データを復号し表示する電子機器であって、請求項２に係る発明の画像処理装置を具備する構成を採る。
【００２５】
この構成によれば、逆離散コサイン変換回路の回路規模を増加させることなく、平易な処理で拡大及び縮小を実現でき、かつ解像度変換のためのメモリ容量や処理遅延の発生を少なくすることが可能な電子機器を提供することができる。なお、この電子機器としては、携帯テレビ電話やＤＶＤプレーヤなどの符号化された画像データを復号し表示する機能を持つものである。
【００２６】
請求項４に係る発明の画像通信端末は、請求項２に記載の画像処理装置と、音声を入力する音声入力手段と、前記音声入力手段にて入力された音声データを符号化する音声符号化手段と、画像を入力する画像入力手段と、前記画像入力手段にて入力された画像データを符号化する画像符号化手段と、音声及び画像をパケット化し多重化する音声／画像多重化手段と、前記音声／画像多重化手段からの多重化データに対して伝送路符号化を行う伝送路符号化手段と、前記伝送路符号化手段で伝送路符号化された多重化データをディジタル変調し送信するディジタル変調／送信手段と、ディジタル変調信号を受信し、伝送路符号化データを復調するディジタル受信／復調手段と、前記ディジタル受信／復調手段にて復調された伝送路符号化データを復号する伝送路符号復号化手段と、前記伝送路符号復号化手段で復号された伝送路符号化データを音声データと画像データに分離する音声／画像分離手段と、前記音声／画像分離手段で分離された音声データを復号化する音声データ復号化手段と、前記音声データ復号化手段で復号化された音声データを出力する音声データ出力手段とを具備し、前記画像処理装置は、前記音声／画像分離手段で分離された画像データを復号化した後、表示用の信号にフォーマット変換する構成を採る。
【００２７】
この構成によれば、受信した画像データを復号して表示させる際、離散コサイン変換係数データの構成変化に対応するための逆離散コサイン変換手段の回路規模増加を回避し、また拡大、縮小処理を行うためのメモリや処理遅延の発生を小さくして画像の解像度変換を行い、液晶モニタ等の画像表示装置に表示することが可能な画像通信端末を提供できる。
【００２８】
請求項５に係る発明の画像処理方法は、ハフマン符号化されたディジタル画像データをブロック単位に逆ハフマン復号化し、復号化したデータをブロック単位に逆量子化して離散コサイン変換係数を生成し、生成した離散コサイン変換係数に対してブロック単位に逆離散コサイン変換を行ってブロック単位の画像データを生成し、逆離散コサイン変換を行って生成された画像データをブロック単位に水平方向並びに垂直方向に拡大又は縮小する。
【００２９】
この方法によれば、画像復号化処理の後段で解像度変換処理を行うとともに、その解像度変換処理においては、画像復号化処理と同様のブロック単位で行うので、逆離散コサイン変換回路の回路規模を増加させることなく、平易な処理で拡大及び縮小を実現でき、かつ解像度変換のためのメモリ容量や処理遅延の発生を少なくすることが可能な画像復号化装置を実現できる。
【００３０】
請求項６に係る発明の画像処理方法は、請求項５に記載の画像処理方法を用いて、入力される画像符号化データを復号化及び解像度変換処理を行い、更に復号した画像データを画像表示装置で表示するために画像フォーマットの変換を行い、画像表示装置に適したサイズで画像表示する。
【００３１】
この方法によれば、逆離散コサイン変換回路の回路規模を増加させることなく、平易な処理で拡大及び縮小を実現でき、かつ解像度変換のためのメモリ容量や処理遅延の発生を少なくすることができ、さらに液晶モニタ等の画像表示装置に画像を表示させることができる画像処理装置を提供することができる。
【００３２】
【発明の実施の形態】
本発明の骨子は、画像復号化処理の後段で解像度変換処理を行い且つその解像度変換処理において、画像復号化処理と同様のブロック単位で行うようにすることである。このようにすることで逆離散コサイン変換回路の回路規模を増加させることなく、平易な処理で拡大及び縮小を実現でき且つ解像度変換のためのメモリ容量や処理遅延の発生を少なくすることが可能となる。
【００３３】
以下、本発明の実施の形態について、図面を参照しながら詳細に説明する。
【００３４】
（実施の形態１）
図１は、本発明の実施の形態１に係る画像復号化装置の構成を示すブロック図である。
図１において、本実施の形態に係る画像復号化装置１００は、画符号化データを一時格納するバッファ１０１と、ハフマン符号化された画像データを復号する逆ハフマン復号部１０２と、量子化されたＤＣＴ（離散コサイン変換）係数データを逆量子化する逆量子化部１０３と、ＤＣＴ係数を画像データに変換する逆離散コサイン変換部１０４と、画像データが予測画像に対する差分データであった場合に予測画像との加算を行うための加算部１０５と、復号化した画像データを格納するためのフレームメモリ１０６と、逆ハフマン復号部１０２で復号された動きベクトルとフレームメモリ１０６に格納されている再生画像データから予測画像を生成する動き補償部１０７と、再生画像データをブロック単位に拡大、縮小する解像度変換部１０８と、画像復号化のための各処理をマクロブロック単位に同期をとりながらパイプライン処理を行うための制御信号を生成するタイミング制御部１０９とを備えている。
【００３５】
ここで、図２にマクロブロックの構成を示す。
ＩＳＯ（Ｉｎｔｅｒｎａｔｉｏｎａｌ  Ｏｒｇａｎｉｚａｔｉｏｎ  ｆｏｒ  Ｓｔａｎｄａｒｄｉｚａｔｉｏｎ）で標準化されている動画像符号化方式であるＭＰＥＧでは、８画素×８画素を１つのブロックとして４つのブロックで構成するマクロブロックを符号化並びに復号化の処理単位としている。マクロブロックは、４つのブロックの輝度データと輝度データの半分のデータ量である色差データとから構成されている。本実施の形態の画像復号化装置１００は、復号化、解像度変換の処理をマクロブロック単位に行う。
【００３６】
図３は、解像度変換部１０８の構成を示すブロック図である。
解像度変換部１０８は、縮小回路３０１と、拡大回路３０２と、中間バッファ３０３とを備えている。縮小回路３０１は、解像度を下げるために高周波成分を取り除く帯域制限フィルタ３０４と、帯域制限した画像に対してデータを間引くダウンサンプラ３０５とを備えている。拡大回路３０２は、解像度を上げるために不足する画像データを挿入するアップサンプラ３０６と、挿入した画像データを線形補間するための線形補間フィルタ３０７とを備えている。
【００３７】
次に、本実施の形態に係る画像復号化装置１００の動作について説明する。
入力された画符号化データはバッファ１０１に一時格納されて、逆ハフマン復号部１０２に一定量ずつ入力される。逆ハフマン復号部１０２ではハフマン符号化されている画像データをマクロブロック毎に復号し、動きベクトル、量子化テーブル、量子化されたＤＣＴ係数を出力する。逆量子化部１０３は、逆ハフマン復号部１０２の出力である量子化テーブルを用いて量子化されたＤＣＴ係数を逆量子化し、ＤＣＴ係数を出力する。逆量子化部１０３から出力されたＤＣＴ係数は逆離散コサイン変換部１０４で画像データに変換される。これら逆量子化、逆離散コサイン変換はマクロブロック単位の処理の中で連続して行われる。
【００３８】
逆離散コサイン変換部１０４で生成された画像データが予測画像との差分データでない場合は、加算部１０５では何も加算されずに解像度変換部１０８に入力される。これに対して、逆離散コサイン変換部１０４で生成された画像データが予測画像との差分データである場合は加算部１０５で動き補償部１０７の出力である予測画像と加算されてから解像度変換部１０８に入力される。予測画像は過去に生成された画像データから以下のように生成される。加算部１０５の出力はフレームメモリ１０６に格納される。
【００３９】
動き補償部１０７では、逆ハフマン復号部１０２の出力である動きベクトルを用いて過去に生成した画像の該当個所をフレームメモリ１０６より読み出して予測画像として出力する。予測画像を生成する動き補償処理と差分データに予測画像を加算する処理はマクロブロック単位の処理の中で連続して行われる。
【００４０】
次に、解像度変換部１０８の動作について説明する。
加算部１０５から出力される再生画像のマクロブロックデータを水平方向に入力し、縮小回路３０１又は拡大回路３０２にて画素間引き、画素補間の処理を行う。例えば水平方向に１／２に縮小する場合は帯域制限フィルタ３０４にて解像度を半分に下げてから１画素おきに画素データを間引く。
【００４１】
また、水平方向に２倍に拡大する場合は画素データの数が２倍となるよう、画素データの間にゼロを挿入し、線形補間フィルタ３０７により隣接する画素データの変化が線形となるよう値を補正する。これらの縮小並びに拡大の処理を水平方向に行ったマクロブロックのデータをいったん中間バッファ３０３に格納し、次に垂直方向に同様の処理を行い、画像復号処理の出力を得る。
【００４２】
次に、図４にマクロブロックパイプライン処理の流れを示す。
本実施の形態の画像復号化装置１００では、逆ハフマン復号処理、逆量子化処理／逆離散コサイン変換処理、動き補償処理、解像度変換処理をマクロブロック単位に行う。各処理の出力段にマクロブロックデータを格納する中間バッファ３０３を設け、マクロブロック単位の処理がパイプライン処理されるようにタイミング制御部１０９で各処理の起動タイミングを制御する。解像度変換処理をマクロブロック単位のパイプライン処理に組み込むことで、解像度変換まで含めた画像復号化処理のスループットを向上させることができる。
【００４３】
このように、本実施の形態に係る画像復号化装置１００によれば、符号化された画像を復号化する際の解像度変換を復号化処理後のマクロブロックに対して行うことで、従来技術に記されているような様々なブロックサイズの変換に対応した複雑な離散コサイン変換回路を構成することなく、アップサンプラ、ダウンサンプラ及びディジタルフィルタを用いて解像度変換を実現することができる。また、解像度変換の単位をマクロブロックとすることでマクロブロック単位のパイプライン処理に組み込むことができ、処理を高速化し、メモリ容量を削減することが可能となる。
【００４４】
（実施の形態２）
図５は、本発明の実施の形態２に係る画像通信端末の構成を示すブロック図である。
図５において、本実施の形態に係る画像通信端末５００は、音声を入力するためのマイク５０１と、音声データ符号化部５０２と、画像を入力するためのカメラ５０３と、画像データ符号化部５０４と、音声／画像多重化部５０５と、伝送路符号化部５０６と、変調／送信部５０７と、受信／復調部５０８と、伝送路復号化部５０９と、音声／画像分離部５１０と、音声データ復号化部５１１と、音声データを出力するレシーバ／スピーカ５１２と、実施の形態１に係る画像復号化装置１００と同一機能を持つ画像データ復号化部５１３と、フォーマット変換部５１４と、画像を表示する液晶モニタ５１５とを備えている。
【００４５】
音声データ符号化部５０２は、マイク５０１より入力された音声データを符号化する。画像データ符号化部５０４は、カメラ５０３より入力された画像データを符号化する。音声／画像多重化部５０５は、音声データ符号化部５０２からの音声符号化データと画像データ符号化部５０４からの画像符号化データをパケット化して多重化する。伝送路符号化部５０６は、音声／画像多重化部５０５で多重化された音声／画像データに対して誤り訂正などの伝送路符号化を行う。
【００４６】
変調／送信部５０７は、伝送路符号化部５０６からの伝送路符号化データをディジタル変調し高周波無線信号として送信する。受信／復調部５０８は、高周波無線信号を受信し、ディジタル復調する。伝送路復号化部５０９は、伝送路符号化されたデータを復号する。音声／画像分離部５１０は、伝送路符号化データから音声符号化データと画像符号化データを分離する。音声データ復号化部５１１は、音声／画像分離部５１０で分離された音声データを復号化する。フォーマット変換部５１４は、画像データ復号化部５１３からの色差信号をＲＧＢ信号に変換する。
【００４７】
次に、本実施の形態に係る画像通信端末５００の動作について説明する。
マイク５０１より入力された音声信号は音声データ符号化部５０２で符号化される。また、カメラ５０３より入力される画像信号は画像データ符号化部５０４で符号化される。音声符号化データ及び画像符号化データはそれぞれ音声／画像多重化部５０５でパケット化され多重化される。そして、伝送路符号化部５０６で誤り訂正符号化などの伝送路符号化処理が行われた後、変調／送信部５０７でディジタル変調が行われて高周波無線信号として通信路に送出される。
【００４８】
一方、受信／復調部５０８で高周波無線信号が受信されて復調される。そして、伝送路復号化部５０９で誤り訂正復号化などの伝送路復号化が行われた後、音声／画像分離部５１０で音声符号化データと画像符号化データに分離される。そして、音声データ復号化部５１１で音声符号化データの復号化処理が行われ、レシーバ／スピーカ５１２から音声が出力される。画像データ復号化部５１３では、実施の形態１で詳述したように画像符号化データの復号化処理、解像度変換処理が行われる。画像符号化時の画像サイズと液晶モニタの画像サイズが異なる場合でも画像データ復号化部５１３に所望の画像サイズに変換されて出力される。フォーマット変換部５１４では、画像データ復号化部５１３の出力である色差信号がＲＧＢ信号に変換されて液晶モニタ５１５に出力される。
【００４９】
このように、本実施の形態に係る画像通信端末５００によれば、画像データ復号化部５１３に実施の形態１に係る画像復号化装置１００と同一の機能を持つので、逆離散コサイン変換器１０４（図１参照）の回路規模増加を回避でき、平易な処理で画像の解像度変換処理を実現する画像通信端末を実現できる。また、画像データ復号化部５１３に画像復号化装置１００と同一の機能を持たせることで、メモリ容量、処理遅延を小さくした解像度変換機能をもつ画像通信端末を実現することができる。
【００５０】
【発明の効果】
以上説明したように、本発明によれば、画像復号化処理の後段にマクロブロック単位に拡大、縮小といった解像度変換処理を行う解像度変換手段を設けたので、逆離散コサイン変換の回路規模を増加させることなく、平易な処理で拡大縮小を実現でき、かつ解像度変換のためのメモリ容量や処理遅延の発生を少なくすることが可能な画像復号化装置を提供することができる。
【図面の簡単な説明】
【図１】本発明の実施の形態１に係る画像復号化装置の構成を示すブロック図
【図２】マクロブロックの構成を示す図
【図３】本発明の実施の形態１に係る画像復号化装置の解像度変換部の構成を示すブロック図
【図４】マクロブロック単位のパイプライン処理のイメージを示す図
【図５】本発明の実施の形態２に係る画像通信端末の構成を示すブロック図
【図６】従来の画像復号化装置の構成を示すブロック図
【符号の説明】
１０１  バッファ
１０２  逆ハフマン復号部
１０３  逆量子化部
１０４  逆離散コサイン変換部
１０５  加算部
１０６  フレームメモリ
１０７  動き補償部
１０８  解像度変換部
１０９  タイミング制御部
３０１  縮小回路
３０２  拡大回路
３０３  中間バッファ
３０４  帯域制限フィルタ
３０５  ダウンサンプラ
３０６  アップサンプラ
３０７  線形補間フィルタ
５０１  マイク
５０２  音声データ符号化部
５０３  カメラ
５０４  画像データ符号化部
５０５  音声／画像多重化部
５０６  伝送路符号化部
５０７  変調／送信部
５０８  受信／復調部
５０９  伝送路復号化部
５１０  音声／画像分離部
５１１  音声データ復号化部
５１２  レシーバ／スピーカ
５１３  画像データ復号化部
５１４  フォーマット変換部
５１５  液晶モニタ
【図１】
2004336667.tif 000003
【図２】
2004336667.tif 000004
【図３】
2004336667.tif 000005
【図４】
2004336667.tif 000006
【図５】
2004336667.tif 000007
【図６】
2004336667.tif 000008