(57)【特許請求の範囲】
【請求項１】
デジタルデータの静止画像および動画像を画像処理装置により同一のフォーマットにする静止画の画像圧縮方法において、
前記画像処理装置は、画像解析部と、制御部と、動画像エンコード部と、記録媒体とを有し、
前記画像解析部は、前記静止画像を分割して、各々の分割画像を解析して画像情報を演算し、前記各々の分割画像に対して重要度と、各々の分割画像に対して他の分割画像との相関性とを決定し、
前記制御部は、前記重要度に基いて各々の分割画像の符号化順序を決定し、前記相関性に従って他の画像と相関性が低い画像に、動画像のエンコードの仕様において参照関係のないピクチャタイプを割り当てるようにピクチャタイプを決定し、
前記動画像エンコード部は、各々の分割画像に対して、前記制御部により決定された符号化順序とピクチャタイプとに基づいて、動画像のエンコードをおこなって前記動画像と同一のフォーマットにし、前記記録媒体に記録することを特徴とする画像圧縮方法。
【請求項２】
前記重要度に基づいて、前記動画像エンコード部が、各々の分割画像に対して動画像のエンコードをおこなう際のレートコントロールにおけるビットの割り当てを変化させることを特徴とする請求項１記載の画像圧縮方法。
【請求項３】
前記ピクチャタイプは、ＭＰＥＧ規格におけるＩピクチャ、Ｐピクチャ、Ｂピクチャのいずれかであることを特徴とする請求項１記載の画像圧縮方法。
【請求項４】
前記重要度は、分割画像の位置、分割画像の人物が表示される領域の位置、ユーザ指定、複数の静止画像間での動き解析の結果のいずれかにより決定されることを特徴とする請求項１記載の画像圧縮方法。
【請求項５】
前記相関性は、分割画像毎の分散値、分割画像毎の差分値、分割画像毎の周波数変換係数の比較結果のいずれかにより決定されることを特徴とする請求項１記載の画像圧縮方法。
【請求項６】
前記動画像エンコード部が、各々の分割画像に対して動画像のエンコードをおこなうときに、
符号化ブロックにおいてエンコードに用いる量子化の値を、その符号化ブロックに隣接する符号化ブロックの値と同じか近い値を用いることを特徴とする請求項１記載の画像圧縮方法。
【請求項７】
前記制御部は、前記相関性が高い分割画像を、同じグループに属するものとして分類し、
前記グループの各々に属する分割画像に基づいて、グループの重要度を決定し、
前記グループに属する各々の分割画像ごとに、前記制御部は、前記符号化順序と前記ピクチャタイプとを決定することを特徴とする請求項１記載の画像圧縮方法。
【請求項８】
デジタルデータの静止画像および動画像を同一のフォーマットに圧縮する画像処理装置において、
前記静止画像を分割して、各々の分割画像を解析して画像情報を演算し、前記各々の分割画像に対して重要度と、各々の分割画像に対して他の分割画像との相関性とを決定する前記画像解析部と、
前記重要度に基いて各々の分割画像の符号化順序を決定し、前記相関性に従って他の画像と相関性が低い画像に、動画像のエンコードの仕様において参照関係のないピクチャタイプを割り当てるようにピクチャタイプを決定する制御部と、
記録媒体と、
各々の分割画像に対して、前記制御部により決定された符号化順序とピクチャタイプとに基づいて、動画像のエンコードをおこなって前記動画像と同一のフォーマットにし、前記記録媒体に記録する動画像エンコード部とを有することを特徴とする画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像圧縮方法、および、画像処理装置に係り、特に、静止画像と動画像の両方を記録・再生できるカメラやレコーダ等のデジタル機器の静止画のデータの圧縮に用いて好適な画像圧縮方法、および、画像処理装置に関する。
【背景技術】
【０００２】
特許文献１には、動画記録中に静止画をキャプチャする場合に、動画像のフレームレートを落とすことなく、動画像と静止画を並行処理できる撮像処理装置が開示されている。
【０００３】
特許文献２には、動画／静止画両対応カメラにおいて、動画と静止画を符号化する際に、動画と静止画の別に応じて、分割タイル数を変えて符号化する技術が開示されている。
【０００４】
【特許文献１】特開２００６−３１１３４７号公報
【特許文献２】特開２００３−２６４８３４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
近年、動画像と静止画像の両方を記録できるビデオカメラ等が普及している。静止画像は、より高精細化され動画像で圧縮する画像サイズよりも大きな画像サイズとなっている。このようなビデオカメラにおいては、動画像エンコーダと静止画像エンコーダを搭載する必要があるが、動画像のエンコーダは、高精細静止画像の画像サイズには対応していないのが一般的である。
【０００６】
一方、動画像符号化の圧縮技術としてＨ．２６４符号化が注目されている。これは、従来の動画像符号化と比較しても約３倍の圧縮を実現でき、今後のビデオカメラの標準となる。しかし、静止画に関しては依然としてＪＰＥＧが一般的に普及しており、動画像圧縮に比べて画像圧縮能力は低い。
【０００７】
そこで、画像圧縮能力の低いエンコーダで符号化する場合に、静止画を分割して、圧縮する方法が発表されている。例えば、特許文献１には、動画像は、ＶＧＡサイズを基準にしてモーションＪＰＥＧとして符号化され、静止画像は、適宜分割されて、ＪＰＥＧ画像として圧縮することが述べられている（段落番号０１２３〜０１２５）。
【０００８】
また、特許文献２では、図１２に示されるように、動画の場合には、分割タイル数を少なくし、静止画の場合には、分割タイル数を少なくする。これにより、静止画の場合には、画像の劣化なく画像処理し（段落番号００５７）、動画の場合には、高速で画像を伝送でき、なめらかな動画が実現できるものとしている（段落番号００５８）。
【０００９】
静止画と動画を共に扱うことのできるビデオカメラ装置で、符号化のためのエンコーダを動画と静止画の両方を持つのは、装置の構成が複雑になり、高価になるために避けたいという要請がある。また、動画と静止画の圧縮した際の画像フォーマットが違う場合には、装置でのファイル管理が複雑になるという問題点がある。
【００１０】
そのために、符号化のためのエンコーダは、一種類にしたいが、例えば、Ｈ．２６４符号化やＭＰＥＧなどの動画圧縮を採用する場合には、上記特許文献１および特許文献２のように、静止画を分割して、動画圧縮する技術が考えられる。
【００１１】
しかしながら、これらの動画圧縮の符号化技術では、静止画を符号化して、能率の高い圧縮をすることについては、対応していないという問題点がある。これらの動画圧縮の符号化技術では、フレーム間の時間予測の観点があり、フレーム毎に異なったピクチャタイプ（Ｉピクチャ、Ｐピクチャ、Ｂピクチャ）を持つことにより圧縮率を高めているが、静止画圧縮の場合には、時間という観点はなく、上記従来技術では、静止画内の重要な部分の画質の劣化を防ぎつつ、画像全体としては、圧縮率を高めることについては、考慮されてこなかったからである。
【００１２】
本発明は、上記問題点を解決するためになされたもので、動画像と静止画の双方を扱える装置において、静止画像圧縮をする場合に動画像圧縮の技術を用いて、静止画内の重要な部分の画質の劣化を防ぎつつ、画像全体としては、圧縮効率が高い画像圧縮方法を提供することにある。
【課題を解決するための手段】
【００１３】
本発明の画像圧縮方法では、高精細の静止画を、分割して分割画像を作成する。そして、各々の分割画像に対して動画像エンコードにより圧縮する手法を用いる。
【００１４】
その際に、各々の画像の重要度を演算する。例えば、画面の中央部に位置する分割画像は、重要度が高いものとする。
【００１５】
また、各々の分割画像に対して他の分割画像との相関性を求める。例えば、分割画像毎の分散値や差分を比較することにより、相関性が求められる。
【００１６】
そして、重要度順に分割画像を整列させて、相関性に基づいて、動画像エンコードをおこなう際のピクチャタイプ（Ｉピクチャ、Ｐピクチャ、Ｂピクチャ）の別を決定する。また、重要度の高い分割画像に対して、動画像エンコードのレートコントロールのビット割当てを大きくする。
【００１７】
また、相関性の高いもの同士をグループ分けして、そのグループの中で参照関係を定義し、ピクチャタイプを決定してもよい。
【発明の効果】
【００１８】
本発明によれば、動画像と静止画の双方を扱える画像処理装置において、静止画像圧縮をする場合に動画像圧縮の技術を用いて、静止画内の重要な部分の画質の劣化を防ぎつつ、画像全体としては、圧縮効率が高い画像圧縮方法を提供することができる。
【発明を実施するための最良の形態】
【００１９】
以下、本発明に係る各実施形態を、図１ないし図１２を用いて説明する。
【００２０】
〔実施形態１〕
以下、本発明に係る第一の実施形態を、図１ないし図７を用いて説明する。
先ず、図１を用いて本発明の第一の実施形態に係る画像圧縮をおこなう画像処理装置の一例の構成について説明する。
図１は、本発明の第一の実施形態に係る画像圧縮をおこなうビデオカメラ装置の構成図である。
【００２１】
本発明の第一の実施形態に係る画像圧縮をおこなうビデオカメラ装置は、図１に示されるように、撮像部４０１と、画像解析部４０２と、静止画像バッファ部４０３と、動画像エンコード部４０４と、記録媒体部４０５と、記録媒体制御部４０６と、制御部４０７とからなる。
【００２２】
撮像部４０１は、静止画と動画の両方を撮影する機能を有する。特に、この撮像部４０１は、高精細静止画像を取り込むことができるものとする。
【００２３】
画像解析部４０２は、撮像部の取り込んだ高精細静止画像の画像解析をおこなう。
【００２４】
静止画像バッファ部４０３は、高精細静止画像を一時的にバッファする記憶領域である。
【００２５】
動画像エンコード部４０４は、後の処理で説明するように、静止画像が分割された各々の分割画像に対して動画像エンコードをおこなう。
【００２６】
記録媒体部４０５は、動画像ストリームを記録する記憶領域である。これらは、メモリカード、ハードディスクドライブ（ＨＤＤ）、ＤＶＤなどの光ディスクで実現される。
【００２７】
記録媒体制御４０６は、記録媒体部４０５の制御をおこなう。、
制御部４０７は、画像解析部４０２からの解析結果に基づき、動画像エンコーダ部の制御と記録媒体制御部４０５の制御をおこなう。
【００２８】
本実施形態の画像圧縮処理の詳細は、後に詳説するが、このビデオカメラの処理の流れは、以下のようになる。
【００２９】
画像解析部４０２は、撮像部４０１により取り込んだ高精細静止画を分割して、各々の分割画像の重要度、相関性の解析をおこなう。
【００３０】
制御部４０７は、解析結果を画像解析部４０２より読み出し、分割画像のエンコーダ順番の並び替えとピクチャタイプの決定、レートコントロールのビット割り当てを決定する。
【００３１】
そして、制御部４０７は、その情報を動画像エンコード部４０４に設定し、動画像エンコード部４０４は、その情報に基づいてエンコードをおこなう。そしてその記録ストリームを記録媒体部４０５に保存する。
【００３２】
なお、以上の説明は、画像処理装置の例として、ビデオカメラ装置を採り上げたが、本実施形態の画像圧縮方法は、静止画と動画の双方を扱える他の装置、例えば、デジタルテレビジョン受信機、動画のエンコーダを備えたデジタルスチルカメラなどの機器にも適用することができる。
【００３３】
また、パーソナルコンピュータなどにより、専用のハードウェアを持たなくても、ＣＰＵが画像圧縮プログラムを実行することにより、画像圧縮をおこなうようにしてもよい。
【００３４】
次に、図２ないし図８を用いて本発明に係る第一の実施形態の画像圧縮方法の処理を説明する。
図２は、本発明の第一の実施形態の画像圧縮方法の概念を説明する図である。
図３は、本発明の第一の実施形態の画像圧縮方法の処理を示すフローチャートである。
図４は、画像を９分割した場合の分割画像を表した図である。
図５は、本発明の第一の実施形態の各分割画像の重要度の一例を表す図である。
図６は、本発明の第一の実施形態の分割画像毎の相関性の一例を表す図である。
図７は、本発明の第一の実施形態の並び順とピクチャタイプの決定を説明する図である。
図８は、量子化値の決定を説明する図である。
【００３５】
この例では、図１に示されるように１枚の高精細静止画を９分割し、それらを動画像エンコーダでエンコードするものとする。また、この例では、動画像エンコーダとして、Ｈ．２６４エンコーダを用い、分割は、静止画像内を全て同サイズで矩形の領域に分割することとする。
【００３６】
以下、図２のフローチャートに従って、画像圧縮方法の処理手順を説明する。
【００３７】
本実施形態では、静止画像を９分割するが、それらに図４に示されるように名称をつけて、具体例をあげながら説明する。
【００３８】
先ず、圧縮の対象となる静止画像を分割し（Ｓ０１）、各分割画像の重要度を決定する（Ｓ０２）。
【００３９】
重要度は、より高画質に圧縮するための指標であり、重要度の高いところはピクチャタイプをＩピクチャにしたり、レートコントロールの際に多くのビットを割り振るようにする。
【００４０】
この重要度の決定に関しては、下記のいずれか、または、それらを併用して用いることができる。
【００４１】
（Ｉ１）画面中央の分割画像の重要度を上げる。
【００４２】
（Ｉ２）静止画像の画像認識をおこなって人物の特定をして、その部分の重要度を上げる。
【００４３】
（Ｉ３）ユーザに重要度を指定するためのツールを提供し、ユーザが指定した領域の重要度を上げる。
【００４４】
（Ｉ４）連続的に静止画画像の動き解析をおこない、動きのあった分割画像の重要度を上げる。
【００４５】
（Ｉ１）については、画面中央がユーザの注目している領域であるということを仮定したものである。（Ｉ４）については、例えば、監視カメラなどで人物の監視をおこなう場合に、動いている人物の写っている部分の重要度をあげるものである。また、デジタルスチルカメラであっても、ユーザに動いているものを撮像するモードを指定させて、動きのある被写体の重要度を上げる例が考えられる。
【００４６】
例えば、図４の分割画像で、重要度が図５に示されるものになったとする。この図５の重要度の例は、数値の小さいものが重要度が高いものとする。
【００４７】
そして、重要度を決定した後は、その重要度の高い順に画像の並び替えをおこなう（Ｓ０２）。
【００４８】
図４の分割画像では、図７に示されるように、Ｓ５、Ｓ４、Ｓ６、Ｓ１、Ｓ３、Ｓ２、Ｓ７、Ｓ８、Ｓ９の順に並べられる。
【００４９】
次に、ピクチャタイプの決定をおこなうために、各分割画像に対して、他の分割画像との相関性を決定する（Ｓ０４）。
【００５０】
相関性を決定するためには、下記のいずれか、または、それらを併用して用いる。
【００５１】
（Ｒ１）分割画像毎のデータ（輝度値、色差値）の分散値を算出して、値の似ているものを相関性が高いとする。
【００５２】
（Ｒ２）分割画像毎のデータ同士の差分を算出して、差分値が小さい画像同士を相関性が高いとする。
【００５３】
（Ｒ３）分割画像内の符号化対象ブロック毎にＤＣＴ（Discrete Cosine Transformation：離散コサイン変換）の値をマップ化して、そのマップ同士の周波数変換係数が似ている分割画像同士を相関性が高いとする。
【００５４】
上記の（Ｒ１）〜（Ｒ３）の評価をおこなって、図４に示されるような分割画像同士の相関性が得られたとする。
【００５５】
この図６に示されている相関性は、数値が小さいほど相関性が低いものとする。他の分割画像の相関性の和を取って、低くなるのは、Ｓ５の２３、Ｓ９の４８、Ｓ３の５７である。
【００５６】
次に、Ｓ０３で重要度順に並べられた各分割画像に対して、上記の相関性に基づき、エンコードする際のピクチャタイプの決定をおこなう（Ｓ０５）。
【００５７】
エンコードする際のピクチャタイプの決定には、例えば、以下のようにおこなう。
【００５８】
（Ｐ１）他のどの分割画像とも相関性が低い場合には、その分割画像をＩピクチャとする。
【００５９】
（Ｐ２）他の分割画像と相関性が高かった場合には、（Ｐ１）のＩピクチャから数えて、２枚目はＰピクチャとし、３枚目以降はＢピクチャとする。その際に、Ｐ、Ｂピクチャの動き補償の参照ピクチャは、Ｐであれば始めのＩピクチャ、Ｂであれば始めのＩピクチャと、直前のＰピクチャとする。
【００６０】
この例では、図６に示されるように、Ｓ５、Ｓ９、Ｓ３の相関性が他の画像と低いために、（Ｐ１）のルールにより、これらをＩピクチャとし、それ以降に並ぶ分割画像を、（Ｐ２）のルールにより、ＰピクチャとＢピクチャとする。Ｓ４の動き補償の参照ピクチャは、Ｓ５であり、Ｓ６とＳ１の動き補償の参照ピクチャは、Ｓ５とＳ４になる。
【００６１】
次のＳ３〜Ｓ８の参照関係も同様に定義される。
【００６２】
なお、ピクチャタイプは、ＭＰＥＧやＨ．２６４の動画像のフレーム間予測に用いられている技術である。Ｉピクチャ（Intra-Picture）は、フレーム間予測をおこなわず画像の全てが符号化されるフレームであり、Ｐピクチャ（Predictive-Picture）は、フレーム間の順方向の予測をおこなって差分が符号化されるフレームであり、Ｂピクチャ（Bidirectionally-Picture）は、時間的に過去と未来の双方向の予測の差分が符号化されるフレームである。
【００６３】
ただし、本実施形態では、静止画を分割画像しているために、各々のピクチャ間は、時間的な関係はないことに注意する。
【００６４】
また、Ｈ．２６４は、参照フレーム関係を自由に定義できるので、上記で定めたルールによらず、ピクチャタイプの決定後に、ＰピクチャとＢピクチャのフレーム参照を決定する際に、その画像と相関性の高くなるような分割画像のピクチャ探して、参照するようにしてもよい。すなわち、ＰピクチャとＢピクチャが、分割画像のＩピクチャで相関性が高いものがあるときには、重要度順の並びで二つ前や三つ前にある場合でも、それを参照するような参照関係の定義も可能である。
【００６５】
次に、各分割画像をエンコードする際のレートコントロールのビット割当てを決定する（Ｓ０６）。
【００６６】
エンコードのする際には、静止画像の全体の圧縮データ量が、所望のデータ量になる様に各ピクチャのビット割り当てをおこなう。この際には、Ｓ０３で重要度に基づき並べられた分割画像の上位の分割画像ほど、圧縮した際のビットの割り当てが多くなる様にする。すなわち、重要度の高い分割画像ほど、圧縮した際のビットの割り当てが多いため画像の劣化は少なくなる。
【００６７】
そして、このように決定された圧縮した際のビット量とピクチャタイプに基づき、各分割画像のエンコードをおこなう（Ｓ０７）。
【００６８】
分割画像毎にエンコードをおこなう際には、以下のように、量子化値の調整をおこなう。すなわち、分割画像のエンコードをおこなう際に、その分割画像に隣する上下左右の符号化単位ブロック（ＭＢ：マクロブロック）において、量子化をおこなう量子化値を周辺分割画像の上下左右で隣接するＭＢがすでに符号化済みであればその値と同じ値かそれに近い値とする。これは、分割画像で量子化値が違いが大きいと、ある分割画像と比較して、隣の画像での、画質の劣化が目立ち、特に、その境界にあたる部分でブロック歪が発生することを考慮したものである。
【００６９】
上記のように、量子化値を同じ値かそれに近い値にすると、圧縮後の静止画像情報を伸張して、それを表示する際の分割境界での歪を低減させることができる。また、隣接していないＭＢについては、上記の周辺の分割画像と隣接するブロックの量子化値と大幅に値が変わらないようにＭＢごとの量子化値を制御する。ＭＢごとの量子化値は、全体のエンコードの目標量とも合わせて決定する必要がある。
【００７０】
例えば、図８に示されるように、分割画像のエンコードについて中央の分割画像Ａが既にエンコード済みであるとする。そして、分割画像Ｂのエンコードをおこなうときには、他の分割画像については、まだエンコードはおこなわれていないものとする（未エンコード分割画像領域）。
【００７１】
分割画像Ｂのエンコードをおこなう際には、右の分割画像値が既にエンコードが終わっているので、分割画像内の右端のＭＢについて量子化値を既にエンコード済み分割画像ＡのＭＢの量子化値と同じ値かそれに近い値とする。
【００７２】
〔実施形態２〕
以下、本発明に係る第二の実施形態を、図９ないし図１２を用いて説明する。
図９は、本発明の第二の実施形態の分割画像毎の相関性の一例を表す図である。
図１０は、本発明の第二の実施形態の重要度と相関性の例を示す図である。
図１１は、グループ毎の分割画像の重要度による並び順とピクチャタイプの決定の例を示す図である。
図１２は、本発明の第二の実施形態の画像圧縮方法の処理を示すフローチャートである。
【００７３】
第一の実施形態では、重要度に従って分割した画像を並べて、相関性の低いものをＩピクチャとして、他の分割画像は、Ｐピクチャ、Ｂピクチャとして定義し、その順番でフレームの参照関係を定義した。また、Ｈ．２６４では、Ｐピクチャ、Ｂピクチャの参照関係は、自由に調整できるので、場合によっては、相関性の高いものに対して、重要度順に並べられたピクチャを飛び越えて、フレームの参照関係を定義してもよいことを説明した。
【００７４】
一方、ＭＰＥＧ２などの圧縮規格では、Ｐピクチャ、Ｂピクチャの参照関係は、規格により決まっており、Ｐピクチャは、直前のＩピクチャであり、Ｂピクチャは、直前および直後のＩピクチャ、Ｐピクチャである。
【００７５】
したがって、ＭＰＥＧ２でエンコードする場合には、重要度の順による並び方によっては、相関関係が比較的低いフレームに対しても、Ｐピクチャ、Ｂピクチャが参照しなければならないような場合もあり得る。
【００７６】
本実施形態では、分割画像ごとの相関性に基づく、「グループ」という概念を導入して、グループ内で、ピクチャタイプを決定することにより、この問題を解決することができる。したがって、この実施形態は、ＭＰＥＧ２などの動画圧縮規格でエンコードする場合に有効な方法である。ただし、本実施形態の圧縮方法は、Ｈ．２６４でエンコードする場合にも同様に用いることができる。
【００７７】
本実施形態での分割画像の例も、第一の実施形態の図３で示したものと同様のものを用いるものとする。また、各々の分割画像の重要度も第一の実施形態の図４で示したものと同様であるとする。
【００７８】
先ず、圧縮の対象となる静止画像を分割する（Ｓ１１）。
【００７９】
次に、各分割画像の相関性を決定する（Ｓ１２）。相関性の決定の仕方は、第一の実施形態と同様である。
【００８０】
本実施形態の各分割画像の相関性は、図９に示されるようになるとする。
【００８１】
次に、各分割画像を相関性の高いもの同士でグループ分けをおこなう（Ｓ１３）。
【００８２】
本実施形態の分割画像の相関性で、特に高に相関性を示すものは、図１０（ｂ）に示されるようになる。これは、Ｓ１、Ｓ２、Ｓ３、Ｓ５が、第１のグループを成し、Ｓ４、Ｓ６、Ｓ７が、第２のグループを成し、Ｓ８、Ｓ９が、第３のグループを成していることを示している。そして、他のグループの分割画像との相関性は、全て１０以下になっていて小さくなっている。
【００８３】
このような分析に基づき、Ｓ１、Ｓ２、Ｓ３、Ｓ５を、第１のグループＧ１とし、 Ｓ４、Ｓ６、Ｓ７を、第２のグループＧ２とし、Ｓ８、Ｓ９を、第３のグループＧ３としてグループ分けする。
【００８４】
次に、分割画像毎の重要度の決定をおこない（Ｓ１４）、グループの重要度に従って、グループの並び替えと、グループの内部でその重要度に従って、分割画像の並び替えをおこなう（Ｓ１５）。
【００８５】
グループとしての重要度は、そのグループに含まれる分割画像の中の一番高い重要度を、そのグループの重要度とする。この例では、グループＧ１では、Ｓ５の重要度、グループＧ２では、Ｓ４の重要度、グループＧ３では、Ｓ８の重要度が、それぞれのグループの重要度となる。したがって、グループとしての重要度に従い、図１１に示されように、Ｇ１、Ｇ２、Ｇ３の順に並び替える。
【００８６】
グループ内での分割画像毎の重要度は、図１１に示されるように、グループＧ１での順番は、Ｓ５、Ｓ１、Ｓ３、Ｓ２に示される順になり、グループＧ２での順番は、Ｓ４、Ｓ６、Ｓ７に示される順になり、グループＧ３での順番は、Ｓ８、Ｓ９に示される順になる。
【００８７】
そして、グループの内部で並び替えた分割画像のエンコードする際のピクチャタイプの決定をおこなう（Ｓ１６）。
【００８８】
本実施形態では、エンコードする際のピクチャタイプの割当てに関して、グループ内部で重要度の高い順の始めの１枚目の分割画像をＩピクチャとし、２枚目はＰピクチャとし、３枚目以降はＢピクチャとする。
【００８９】
この際に、フレーム間予測は、ＭＰＥＧ２の規格に適合するように、Ｐピクチャは、始めのＩピクチャとし、Ｂピクチャは、始めのＩピクチャと、直前のＰピクチャとする。この様にすることで、グループ内部でＭＰＥＧ２での参照関係を保ったフレームの参照が可能であり、各々相関性の高いものをグループとしてまとめて、その中で参照関係を定義するので、圧縮効率を高く保つことができる。
【００９０】
次に、各分割画像をエンコードする際のレートコントロールのビット割当てを決定する（Ｓ１７）。
【００９１】
レートコントロールのビット割当ては、第一の実施形態と同じように、各々の分割画像毎の重要度に従って割り当てる方法でもよいし、グループの重要度と、そのグループに含まれる分割画像の枚数に応じて、そのグループに含まれる分割画像に対してレートコントロールのビット割当てをおこなうようにしてもよい。
【００９２】
最後に、このように決定された圧縮した際のビット量とピクチャタイプに基づき、各分割画像のエンコードをおこなう（Ｓ１８）。符号化の順は、グループの重要度の高いグループから、グループ内では、各々の分割画像の重要度の高いものからおこなう。
【図面の簡単な説明】
【００９３】
【図１】本発明の第一の実施形態に係る画像圧縮をおこなうビデオカメラ装置の構成図である。
【図２】本発明の第一の実施形態の画像圧縮方法の概念を説明する図である。
【図３】本発明の第一の実施形態の画像圧縮方法の処理を示すフローチャートである。
【図４】画像を９分割した場合の分割画像を表した図である。
【図５】本発明の第一の実施形態の各分割画像の重要度の一例を表す図である。
【図６】本発明の第一の実施形態の分割画像毎の相関性の一例を表す図である。
【図７】本発明の第一の実施形態の並び順とピクチャタイプの決定を説明する図である。
【図８】量子化値の決定を説明する図である。
【図９】本発明の第一の実施形態の分割画像毎の相関性の一例を表す図である。
【図１０】本発明の第二の実施形態の重要度と相関性の例を示す図である。
【図１１】グループ毎の分割画像の重要度による並び順とピクチャタイプの決定の例を示す図である。
【図１２】本発明の第二の実施形態の画像圧縮方法の処理を示すフローチャートである。
【符号の説明】
【００９４】
４０１…撮像部、４０２…画像解析部、４０３…静止画像バッファ部、４０４…動画像エンコード部、４０５…記録媒体部、４０６…記録媒体制御部、４０７…制御部。
【図１】
0004898589.tif 000002
【図２】
0004898589.tif 000003
【図３】
0004898589.tif 000004
【図４】
0004898589.tif 000005
【図５】
0004898589.tif 000006
【図６】
0004898589.tif 000007
【図７】
0004898589.tif 000008
【図８】
0004898589.tif 000009
【図９】
0004898589.tif 000010
【図１０】
0004898589.tif 000011
【図１１】
0004898589.tif 000012
【図１２】
0004898589.tif 000013