(57)【要約】【課題】方向や領域によって変倍率が異なる広画角画像を圧縮符号化し、全体的に解像度のバランスの良い画像を再生可能な圧縮データを生成するための装置及び方法を提供する。【解決手段】横又は縦方向の変倍率が大きな広画角画像データに対しては、圧縮符号化処理装置１０１は、変倍率の大きな方向の高周波成分に優先的に符号を割り当てるような圧縮符号化処理を行う。領域によって変倍率が異なる３６０゜パノラマ画像データなどに対しては、圧縮符号化処理装置１０１は、変倍率が大きな領域に優先的に符号を割り当てるような圧縮符号化処理を行う。このような圧縮符号化処理により生成される圧縮データは、変倍により失われがちな特定の方向の高周波成分や特定領域の情報が優先的に保存されているため、それを伸長することにより解像度（画質）のバランスの良い画像を再生できる。【選択図】　　　　図１
2004080185.tif 000002
【特許請求の範囲】
【請求項１】
方向によって変倍率の異なる画像データを入力する入力手段と、この入力手段による入力画像データの圧縮符号化処理を行う圧縮符号化手段とを有し、圧縮符号化手段は入力画像データの圧縮符号化処理において、入力画像データの変倍率の大きい方向の高周波成分に優先的に符号を割り当てることを特徴とする画像処理装置。
【請求項２】
請求項１記載の画像処理装置において、圧縮符号化手段はＪＰＥＧ２０００準拠のアルゴリズムに従って圧縮符号化処理を行うものであって、変倍率の大きい方向に応じて選択したサブバンドのウェーブレット係数に優先的に符号を割り当てることを特徴とする画像処理装置。
【請求項３】
領域によって変倍率の異なる画像データを入力する入力手段と、この入力手段による入力画像データの圧縮符号化処理を行う圧縮符号化手段とを有し、圧縮符号化手段は入力画像データの圧縮符号化処理において、入力画像データの変倍率の大きい領域に優先的に符号を割り当てることを特徴とする画像処理装置。
【請求項４】
請求項３記載の画像処理装置において、圧縮符号化手段はＪＰＥＧ２０００準拠のアルゴリズムに従って圧縮符号化処理を行うものであって、変倍率の大きい領域に対し選択的領域画質向上処理を施すことを特徴とする画像処理装置。
【請求項５】
請求項１乃至４のいずれか１項記載の画像処理装置と、この画像処理装置の入力手段としての撮像手段とを有することを特徴とする電子カメラ装置。
【請求項６】
方向によって変倍率の異なる画像データを入力するステップと、このステップによる入力画像データの圧縮符号化処理を行う圧縮符号化ステップとを有し、圧縮符号化ステップにおいて入力画像データの変倍率の大きい方向の高周波成分に優先的に符号を割り当てることを特徴とする画像処理方法。
【請求項７】
領域によって変倍率の異なる画像データを入力するステップと、このステップによる入力画像データの圧縮符号化処理を行う圧縮符号化ステップとを有し、圧縮符号化ステップにおいて入力画像データの変倍率の大きい領域に優先的に符号を割り当てることを特徴とする画像処理方法。
【請求項８】
請求項６又は７記載の画像処理方法の各ステップをコンピュータに実行させるためのプログラム。
【請求項９】
請求項９記載のプログラムが記録されたことを特徴とするコンピュータが読み取り可能な記録媒体。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、一般的には画像処理の分野に係り、より詳しくは、方向又は領域により変倍率が異なる広画角画像の圧縮符号化技術に関する。
【０００２】
【従来の技術】
広画角の画像を記録又は伝送する方法として、画角の限られたデジタルカメラ等の電子カメラ装置と曲面鏡や魚眼レンズを用いて、広画角であるが方向又は領域によって変倍率の異なる（歪みのある）画像を撮影し、それを記録又は伝送し、画像再生時に画像処理によって画像の歪みを除去する方法がある。その具体例は、縦方向（横方向）については曲率がゼロで、横方向（縦方向）の曲率が大きい曲面鏡を用いて、横方向（縦方向）の画角を広げた画像を撮影する場合や、特許第２９３９０８７号公報に述べられているような双曲線凸面鏡や魚眼レンズを用いて３６０゜パノラマ画像を撮影する場合等である。
【０００３】
もう１つの方法は、デジタルスチルカメラ等の電子カメラ装置を用いてシーンを複数の画像に分割して撮影し、それら複数の画像から、画像処理（平面投影など）により、横方向又は縦方向の画角を広げた広画角画像や３６０゜パノラマ画像を合成する方法である。この方法においても、画像再生時に画像処理によって画像の歪みを除去する必要がある。
【０００４】
なお、このような広画角画像のデータは予め圧縮符号化されてから記録又は伝送されるのが一般的である。
【０００５】
【発明が解決しようとする課題】
前記のような方向や領域によって変倍率が異なる広画角画像は、再生した場合に解像度（画質）のバランスの悪い画像となってしまうという問題がある。
【０００６】
例えば、本出願人は、特願２００１−１３８０２号において、水平方向又は垂直方向に圧縮（縮小）された広角画像を撮影する撮像装置に提案している。その原理を図９により説明する。図中、Ｍはミラー、Ｉは撮像面、Ｏは光学系中心である。ミラーＭは、ｙ軸（紙面に対し垂直）方向の断面が直線状で、ｘｚ方向にのみ曲がっているミラーである。撮像面Ｉは、光学中心Ｏから距離ｆでｚ軸に直交する。このような撮像系によれば、ｘ方向（水平方向又は垂直方向）に縮小（圧縮）された広角画像を撮影することができる。
【０００７】
ここで、撮像面Ｉ上で、ｚ軸から距離ｕにある点ｐに到達する光線を逆に辿る。すなわち、点ｐと光学中心Ｏを結ぶ直線を延長しミラーＭと交わる点をｑとすると、光線は点ｑにおけるミラーＭの法線ｑｑ’に関して対象に反射され、点ｒに至る。光線ｑｒとｚ軸とのなす角をθとする。そして、
θ＝αｕ
の関係を持たせるならば、撮像画像を縮小方向つまりｘ方向について一様に拡大する処理をだけで自然な広角画像を再生することができる。
【０００８】
しかしながら、撮像画像を単純に圧縮符号化して伝送又は記憶し、それを復号化してから前記拡大処理を行って再生した画像は、撮像時に縮小された方向の解像度が縮小されなかった方向に比べて低く、全体的に解像度のバランスが悪いという問題があった。
【０００９】
また、例えば、特許第３０５４１６号公報に記載されているように双曲線凸面鏡を用いて撮影される３６０゜パノラマ画像は、図１０の（ａ）に示すように、中心の領域Ａにカメラ自体の像が写り込み、その周囲の円環状領域Ｂに有用な被写体が写った画像となる。この円環状領域Ｂの画像から、画像処理によって、図１０（ｂ）に示すような平面的な３６０゜パノラマ画像Ｃを再生する得ることができる。しかしながら、図１０（ａ）の円環状領域Ｂにおいて、内周側は外周側に比べて、円周方向に大きく縮小（圧縮）されているため、図１０（ａ）のような３６０゜パノラマ画像を単純に圧縮符号化して伝送又は記憶し、それを復号化して図１０（ｂ）に示すような３６０゜パノラマ画像Ｃを再生すると、その上側（内周側）の解像度が下側（外周側）の解像度に比べて低く、全体的の解像度のバランスが悪い画像となるという問題があった。
【００１０】
よって、本発明の目的は、全体的に解像度のバランスが良好な広画角画像の再生を可能にするための手段を提供することにある。
【００１１】
【課題を解決するための手段】
前記目的を達成するための請求項１に記載の画像処理装置は、方向によって変倍率の異なる画像データを入力する入力手段と、この入力手段による入力画像データの圧縮符号化処理を行う圧縮符号化手段とを有し、圧縮符号化手段は入力画像データの圧縮符号化処理において、入力画像データの変倍率の大きい方向の高周波成分に優先的に符号を割り当てることを特徴とするものである。
【００１２】
請求項２に記載の画像処理装置は、請求項１記載の構成において、圧縮符号化手段はＪＰＥＧ２０００準拠のアルゴリズムに従って圧縮符号化処理を行うものであって、変倍率の大きい方向に応じて選択したサブバンドのウェーブレット係数に優先的に符号を割り当てることを特徴とするものである。
【００１３】
請求項３に記載の画像処理装置は、領域によって変倍率の異なる画像データを入力する入力手段と、この入力手段による入力画像データの圧縮符号化処理を行う圧縮符号化手段とを有し、圧縮符号化手段は入力画像データの圧縮符号化処理において、入力画像データの変倍率の大きい領域に優先的に符号を割り当てることを特徴とするものである。
【００１４】
請求項４に記載の画像処理装置は、請求項３記載の構成において、圧縮符号化手段はＪＰＥＧ２０００準拠のアルゴリズムに従って圧縮符号化処理を行うものであって、変倍率の大きい領域に対し選択的領域画質向上処理を施すことを特徴とする。
【００１５】
請求項５に記載の電子カメラ装置は、請求項１乃至４のいずれか１項記載の画像処理装置と、この画像処理装置の入力手段としての撮像手段とを有することを特徴とするものである。
【００１６】
請求項６に記載の画像処理方法は、方向によって変倍率の異なる画像データを入力するステップと、このステップによる入力画像データの圧縮符号化処理を行う圧縮符号化ステップとを有し、圧縮符号化ステップにおいて入力画像データの変倍率の大きい方向の高周波成分に優先的に符号を割り当てることを特徴とするものである。
【００１７】
請求項７に記載の画像処理方法は、領域によって変倍率の異なる画像データを入力するステップと、このステップによる入力画像データの圧縮符号化処理を行う圧縮符号化ステップとを有し、圧縮符号化ステップにおいて入力画像データの変倍率の大きい領域に優先的に符号を割り当てることを特徴とするものである。
【００１８】
以上に述べたような本発明の画像処理装置又は方法によれば、変倍により失われがちな特定の方向の高周波成分や特定領域の情報を優先的に保存した圧縮符号データを得られるため、それを伸長することにより全体的に解像度（画質）のバランスの良い画像の再生が可能である。
【００１９】
請求項８に記載のプログラムは、請求項６又は７記載の画像処理方法の各ステップをコンピュータに実行させるためのプログラムであることを特徴とする。
【００２０】
請求項１０に記載のコンピュータが読み取り可能な記録媒体は、請求項９に記載のプログラムが記録されていることを特徴とする。
【００２１】
【発明の実施の形態】
以下、本発明の実施の形態について添付図面を参照し説明する。
【００２２】
図１は本発明の第１の実施の形態を説明するためのブロック図である。また、この実施の形態における処理フローを図２に示す。
【００２３】
図１に示す画像処理装置は、方向又は領域によって変倍率の異なる広画角画像データを、それが記録された記録媒体から、あるいは、外部装置から入力するための入力装置１００（図２のステップＳ１０１に対応）と、その入力画像データの符号化圧縮処理を行う圧縮符号化処理装置１０１（図２のステップＳ１０２に対応）と、これによる圧縮符号化データを通信回線を介して外部の装置に伝送する伝送装置１０２（図２のステップＳ１０３に対応）と、その圧縮符号化データを記録媒体に記録する記録装置１０３（図２のステップＳ１０３に対応）とから構成される。
【００２４】
この実施の形態においては、圧縮符号化処理装置１０１はＪＰＥＧ２０００（ＩＳＯ／ＩＥＣ　ＦＣＤ　１５４４４−１）準拠のアルゴリズムによって画像データの圧縮符号化処理を行うように構成される。ＪＰＥＧ２０００の圧縮符号化アルゴリズムについては、例えば、書籍「次世代画像符号化方式　ＪＰＥＧ２０００」（野水泰之著、株式会社トリケップス）などに詳しいが、その概略を以下に説明する。
【００２５】
図３はＪＰＥＧ２０００の基本的なアルゴリズムを説明するための簡略化された処理フローである。処理の対象となる画像データは、タイルと呼ばれる重複しない矩形領域毎に処理される。まず、各タイルの画像データは、ＤＣレベル・色空間変換処理２００を施される。このＤＣレベル・色空間変換処理２００は、圧縮率の向上を目的とするもので、入力画像データのレベルシフト操作と色空間変換処理からなる。レベルシフトは、ＲＧＢ値のような符号無し整数値からダイナミックレンジの半分を減算する操作である。入力画像データが例えばＹＣｒＣｂデータの場合、Ｃｒ，Ｃｂコンポーネントのような符号付き整数値に対してレベルシフトは行われない。色空間変換処理は、入力画像データがＲＧＢデータやＣＭＹデータの場合に、ＹＣｒＣｂデータに変換する処理である。
【００２６】
ＤＣレベル・色空間変換処理２００の後に各コンポーネントの各タイルの画像データは、２次元ウェーブレット変換処理（離散ウェーブレット変換：ＤＷＴ）２０２を施される。
【００２７】
図４はデコンポジション・レベル数が３の場合のウェーブレット変換の説明図である。図４（ａ）に示すタイル画像に対する２次元ウェーブレット変換により、図４（ｂ）に示すような１ＬＬ，１ＨＬ，１ＬＨ，１ＨＨの各サブバンドのウェーブレット係数が得られる。１ＬＬサブバンド係数に対し２次元ウェーブレット変換が適用されることにより、図４（ｃ）に示すように２ＬＬ，２ＨＬ，２ＬＨ，２ＨＨのサブバンドのウェーブレット係数が得られる。２ＬＬサブバンドの係数に対し２次元ウェーブレット変換が適用されることにより、図４（ｄ）に示すように３ＬＬ，３ＨＬ，３ＬＨ，３ＨＨのサブバンドのウェーブレット係数が得られる。
【００２８】
このような低周波成分（ＬＬサブバンド係数）の再帰的分割（オクターブ分割）により得られた各サブバンドの係数は、量子化処理２０４を施されたのちにエントロピー符号化処理２０６を施される。最も階層の深いＬＬサブバンド係数（図４の例では３ＬＬサブバンド係数）は符号化されない。ＪＰＥＧ２０００では可逆圧縮（ロスレス圧縮）と非可逆圧縮（ロッシー圧縮）のいずれも可能であり、可逆圧縮の場合には量子化ステップ幅は常に１であり、この段階では実質的に量子化されない。
【００２９】
エントロピー符号化処理２０６は、ウェーブレット係数のエントロピー符号化を行う。このエントロピー符号化には、ブロック分割、係数モデリング及び２値算術符号化からなるＥＢＣＯＴ（Ｅｍｂｅｄｄｅｄ　Ｂｌｏｃｋ　Ｃｏｄｉｎｇ　ｗｉｔｈ　ＯｐｔｉｍｉｚｅｄＴｒｕｎｃａｔｉｏｎ）と呼ばれるブロックベースのビットプレーン符号化方式が用いられる。符号化対象となるウェーブレット係数は正負の符号を持つ整数（あるいは実数表現された整数）であり、それらを決められた順序で走査しながら、係数を絶対値表現したものに対し上位ビットから下位ビットへとビットプレーン単位で符号化処理が実行される。
【００３０】
エントロピー符号化部２０６で生成された符号はタグ処理２０８により、１本のコードストリームにまとめられるとともにタグ情報を付加される。図５に、そのコードストリームの概略構造を示す。図５に見られるように、符号データの始まりを示すＳＯＣマーカの後に符号化のパラメータや量子化のパラメータ等を記述したメインヘッダが続き、その後に各タイル毎のコードが続く。各タイル毎のコードは、ＳＯＴマーカで始まり、タイルヘッダ、ＳＯＤマーカ、タイルデータ（タイル画像の符号列）で構成される。最後のタイルデータの後に、終了を示すＥＯＣマーカが置かれる。
【００３１】
このＪＰＥＧ２０００のアルゴリズムは高圧縮率（低ビットレート）での画質が良好であるほか、多くの長所を有する。
【００３２】
その１つは、符号化後に、下位ビットプレーンの符号の廃棄（切り捨て：トランケーション）による量子化（ポスト量子化）によって、再圧縮を行うことなく全体の符号量（圧縮率）を調整できることであり、また、水平方向と垂直方向の圧縮率を個別に調整することもできる。ＪＰＥＧ２０００では、プレシンクトと呼ばれる領域毎に係数のビットプレーンに順序付けを行い、１つ又は２つのビットプレーンからなるレイヤを構成することができる。複数レイヤ構成をとる場合には下位のレイヤからレイヤ単位で符号のトランケーションを行うことにより、よりきめ細かな符号量調整が可能である。
【００３３】
もう１つは、画像の選択した領域の画質をそれ以外の領域より上げる選択的領域画質向上（ＲＯＩ：Ｒｅｇｉｏｎ　ｏｆ　Ｉｎｔｅｒｅｓｔ）と呼ばれる処理機能である。ＪＰＥＧ２０００の基本方式（ＪＰＥＧ２０００　Ｐａｒｔ１）では、ウェーブレット係数の符号化前に、選択した領域のウェーブレット係数値を上位ビット側へシフトし、その領域外のウェーブレット係数値を下位ビット側へシフトするＲＯＩ方式が採用されているが、選択した領域を他の部分より細かい量子化ステップで量子化することによるＲＯＩも可能である。このＲＯＩ機能により、画像の注目したい部分の画質を落とさずに全体の符号量を減らすことが可能となる。
【００３４】
さて、図１及び図２を再び参照し、圧縮符号化処理装置１０１又はステップＳ１０１による処理内容について説明する。
【００３５】
入力装置１００（ステップＳ１０１）によって入力された広画角画像データが、画像の縦方向（又は横方向）については等倍もしくは略等倍で、横方向（又は縦方向）が大きな割合で縮小変倍された画像データであるとする。この場合、圧縮符号化処理装置１０１（ステップＳ１０２）においては、変倍率の大きな方向の高周波成分に優先的に符号が割り当てられたコードストリームを生成する。このコードストリームは、変倍率の大きな方向の高周波成分が優先的に保存されたものであるため、それを伸長することにより全体的に解像度（画質）のバランスが良好な広画角画像を再生することができる。
【００３６】
圧縮符号化処理装置１０１（ステップＳ１０２）の具体的な処理の例を次に説明する。
【００３７】
例えば、ロスレス圧縮符号化又は低圧縮率の圧縮符号化を行い、変倍率な大きな方向の高周波成分の符号量が大きくなるようにポスト量子化を行う。すなわち、横方向の変倍率が大きい場合には、垂直方向の高周波成分を含むＬＨサブバンド係数とＨＨサブバンド係数の符号について、目標の圧縮率となるまで、低いデコンポジション・レベルのものからポスト量子化を行う。例えば、図４に示した例のようにデコンポジション・レベル数が３のウェーブレット変換が行われる場合には、１ＬＨサブバンド係数と１ＨＨサブバンド係数の符号、２ＬＨサブバンド係数と２ＨＨサブバンド係数の符号、３ＬＨサブバンド係数と３ＨＨサブバンド係数の符号の順でポスト量子化を行う。このようなポスト量子化によって、横方向の高周波成分であるＨＬサブバンド係数に優先的に符号が割り当てられたコードストリームを生成することができる。縦方向の変倍率が大きい場合には、水平方向の高周波成分を含むＨＬサブバンド係数とＨＨサブバンド係数の符号について、目標の圧縮率となるまで、低いデコンポジション・レベルのものからポスト量子化を行う。例えば、図４に示した例のようにデコンポジション・レベル数が３のウェーブレット変換が行われる場合には、１ＨＬサブバンド係数と１ＨＨサブバンド係数の符号、２ＨＬサブバンド係数と２ＨＨサブバンド係数の符号、３ＨＬサブバンド係数と３ＨＨサブバンド係数の符号の順でポスト量子化を行う。このようなポスト量子化によって、縦方向の高周波成分であるＬＨサブバンド係数に優先的に符号が割り当てられたコードストリームを生成することができる。
【００３８】
別の方法として、量子化処理の段階において、横方向の変倍率が大きい場合にはＨＬサブバンド係数に対する量子化ステップを小さくし、縦方向の変倍率が大きい場合にはＬＨサブバンド係数に対する量子化ステップを小さくする方法によっても、同様のコードストリームを生成することができる。あるいは、エントロピー符号化の段階において、横方向の変倍率が大きい場合にはＨＬサブバンド係数を上位ビットプレーン側へシフトし、縦方向の変倍率が大きい場合にはＬＨサブバンド係数を上位ビットプレーン側へシフトする方法も可能である。このような方法と上に述べたポスト量子化とを組み合わせることも可能である。
【００３９】
他方、入力された広画角画像データが、図１０（ａ）に示したような画像中心領域の変倍率（円周方向の縮小率）がその外側領域に比べ大きな３６０゜パノラマ画像の場合、圧縮符号化処理装置１０１（ステップＳ１０２）においては、図６に略示するように、画像３０１の中心領域３０２を注目領域（ＲＯＩ）として指定して選択的領域画質向上処理を行い、画像の中心領域に優先的に符号が割り当てられたコードストリームを生成する。このコードストリームは、変倍率の大きな領域の情報が優先的に保存されたものであるため、それを伸長し、画像処理によって図１０（ｂ）に示したような平面的な３６０゜パノラマ画像を再生した場合、全体的に解像度（画質）のバランスが良好な画像を得られる。
【００４０】
図７は、本発明の第２の実施の形態を説明するためのブロック図である。この実施の形態は、前記第１の実施の形態と同様な処理又は機能をコンピュータシステム上で実現するものである。したがって、処理フローは図２と同様であるので、以下の説明において図２を援用する。
【００４１】
図７において、４０１はＣＰＵ、４０２はＣＰＵ４０１で実行されるプログラム等の記憶域や処理のための作業記憶域として利用されるメインメモリである。本発明の画像処理方法の各ステップを実現するための画像処理プログラム４０３も実行時にメインプログラム４０２上にロードされる。また、このコンピュータシステム上で動作する画像加工用アプリケーションプログラム４０４により生成された広画角画像データを処理する場合には、そのアプリケーションプログラム４０４もメインメモリ４０２にロードされて実行されることになる。４０５はプログラムやデータなどを保存するためのハードディスク装置等の補助記憶装置である。４０６は各種メモリカード等の記録媒体４０７や電子カメラ装置等の外部装置４０８より処理対象の広画角画像データを入力し、また圧縮符号化されたコードデータを記録媒体４０７に出力するための外部インターフェース部である。４０９は広画角画像データの圧縮符号化データを伝送するための通信制御部である。なお、画像処理プログラム４０３と、このコンピュータシステムで読み取りが可能な、画像処理プログラム４０３を記録した各種の記録媒体も本発明に包含される。
【００４２】
この実施の形態においては、コンピュータシステム上で画像処理プログラム４０３に従って図２に示した各ステップが順に実行される。
【００４３】
まず、ステップＳ１０１では、処理対象の広画角画像データが入力されてメインメモリ４０２のある記憶域に書き込まれる。より具体的には、外部インターフェース部４０６を介して、記録媒体４０７や外部装置４０８より広画角画像データが入力される。あるいは、アプリケーションプログラム４０４により生成されて補助記憶装置４０５に保存された広画角画像データが読み出され、メインメモリ４０２のある記憶域に書き込まれる。
【００４４】
ステップＳ１０２においては、前記第１の実施の形態と同様にＪＰＥＧ２０００準拠のアルゴリズムにより広画角画像データの圧縮符号化処理が実行され、解像度のバランスの良い画像再生が可能なコードストリームがメインメモリ４０２の特定の記憶域に生成される。
【００４５】
ステップＳ１０３においては、そのコードストリームが補助記憶装置４０５に書き出され、又は、通信制御部４０９を介してネットワーク上の装置に伝送され、あるいは、外部インターフェース部４０６を介して記録媒体４０７に記録される。
【００４６】
図８は、本発明の第３の実施の形態を説明するためのブロック図である。この実施の形態はデジタルスチルカメラのような電子カメラ装置に関するものであり、図１の入力装置１００を撮像装置５０１に置き換えた構成である。圧縮符号化処理装置５０１は図１の圧縮符号化装置１０１と同様の構成であり、記録装置５０３は各種メモリカード等の記録媒体に圧縮符号化処理装置５０２により生成されたコードストリームをファイルとして記録する手段である。撮像装置５０１は、一般的なデジタルスチルカメラの撮像部と同様な構成のものでよい。この電子カメラ装置における処理フローは図２と同様であるので、以下の説明において図２を援用する。ただし、ステップＳ１０１は撮像処理のステップとなる。
【００４７】
ステップＳ１０１においては、撮像装置５０１により曲面鏡や魚眼レンズを介して方向又は領域により変倍率の異なる広画角画像を撮像する。撮像された画像のデータは圧縮符号化処理装置５０２に入力される。
【００４８】
ステップＳ１０２においては、圧縮符号化処理装置５０２により広画角画像データに対し第１の実施の形態と同様な圧縮符号化処理が行われる。
【００４９】
ステップＳ１０３においては、圧縮符号化処理装置５０２によって生成されたコードストリームが、記録装置５０３によりファイルとして記録媒体に記録される。このコードストリームを伸長すれば、解像度のバランスが良好な広画角画像を再生可能である。
【００５０】
【発明の効果】
以上の説明から明らかなように、方向や領域によって変倍率の異なる広画角画像データを本発明の装置又は方法により処理することにより、全体的に解像度のバランスが良好な広画角画像の再生が可能となる。
【図面の簡単な説明】
【図１】本発明の第１の実施の形態を説明するためのブロック図である。
【図２】本発明による画像処理装置又は方法における処理フローを示すフローチャートである。
【図３】ＪＰＥＧ２０００の基本的なアルゴリズムを説明するための図である。
【図４】２次元ウェーブレット変換の説明のための図である。
【図５】ＪＰＥＧ２０００のアルゴリズムで生成されるコードストリームの構造を説明するための図である。
【図６】３６０゜パノラマ画像データにおける選択的領域画質向上処理の説明のための図である。
【図７】本発明の第２の実施の形態を説明するためのブロック図である。
【図８】本発明の第３の実施の形態を説明するためのブロック図である。
【図９】曲面鏡を用いて水平又は垂直方向の画角の広い画像を撮影するための撮像系の例を説明するための図である。
【図１０】双曲線凸面鏡を用いて撮影された３６０゜パノラマ画像に関する問題点を説明するための図である。
【符号の説明】
１００　入力装置
１０１　圧縮符号化処理装置
１０２　伝送装置
１０３　記録装置
４０３　画像処理プログラム
５０１　撮像装置
５０２　圧縮符号化処理装置
５０３　記録装置
【図１】
2004080185.tif 000003
【図２】
2004080185.tif 000004
【図３】
2004080185.tif 000005
【図４】
2004080185.tif 000006
【図５】
2004080185.tif 000007
【図６】
2004080185.tif 000008
【図７】
2004080185.tif 000009
【図８】
2004080185.tif 000010
【図９】
2004080185.tif 000011
【図１０】
2004080185.tif 000012