(57)【要約】【課題】動画像符号化と静止画像符号化を並行して行う場合でも、効率的に動画像符号化処理を行うことができる画像符号化装置及び画像符号化方法を提供する。【解決手段】動画像符号化部１０３は、入力された画像に対して動画像符号化を行って符号化データを生成する。静止画像符号化部１０４は、入力された画像に対してＤＣＴ演算処理を使用する静止画像符号化を行って符号化データと符号化情報を生成する。符号化制御部１０６は、静止画像符号化部１０４で生成されるＤＣＴ演算結果から動画像符号化部１０３における動画像符号化処理の符号化対象画像の変化を推定し、動画像符号化処理の符号化パラメータを制御する。これにより、動画像符号化時の発生符号量増加による駒落ちや画質劣化を抑制することができる。【選択図】図１
2006303987.tif 000002
【特許請求の範囲】
【請求項１】
画像を符号化して符号化データと符号化情報を生成する複数の画像符号化手段と、
複数の前記画像符号化手段のうち少なくとも１つの画像符号化手段が行った画像符号化結果を前記符号化情報として、前記符号化情報により他の前記画像符号化手段が行う符号化処理の符号化パラメータを制御する符号化制御手段と、
を備える画像符号化装置。
【請求項２】
画像を符号化して符号化データと符号化情報を生成する複数の画像符号化手段と、
複数の前記画像符号化手段のうち少なくとも１つは符号化処理の一部として離散コサイン変換演算処理を行い、この離散コサイン変換演算処理による結果を前記符号化情報として、この符号化情報により他の前記画像符号化手段が行う符号化処理の符号化パラメータを制御する符号化制御手段と、
を備える画像符号化装置。
【請求項３】
画像の一部又は全てを切り出す切出手段を備え、
前記符号化制御手段は、前記画像の切出位置に応じて前記画像符号化手段が行う符号化処理の符号化パラメータを制御する請求項１又は請求項２に記載の画像符号化装置。
【請求項４】
画像中の注目領域を設定する注目領域設定手段を備え、
前記符号化制御手段は、前記画像中の注目領域に応じて前記画像符号化手段が行う符号化処理の符号化パラメータを制御する請求項１又は請求項２に記載の画像符号化装置。
【請求項５】
前記符号化情報には、画像符号化処理時に生成された発生符号量情報と画像符号化処理時に使用された量子化パラメータ情報とが含まれ、
前記符号化制御手段は、前記発生符号量情報と前記量子化パラメータに応じて前記画像符号化手段が行う符号化処理の符号化パラメータを制御する請求項１乃至請求項４のいずれかに記載の画像符号化装置。
【請求項６】
それぞれ画像処理を行う複数の画像符号化処理のうち少なくとも１つは画像符号化処理の一部として離散コサイン変換演算処理を行い、この離散コサイン変換演算処理による結果を符号化情報として、この符号化情報により他の前記画像符号化処理の符号化パラメータを制御する画像符号化方法。
【請求項７】
画像の一部又は全てを切り出し、切出位置に応じて前記他の画像符号化処理の符号化パラメータを制御する請求項６に記載の画像符号化方法。
【請求項８】
画像中の注目領域を設定し、設定した注目領域に応じて前記他の画像符号化処理の符号化パラメータを制御する請求項６に記載の画像符号化方法。
【請求項９】
前記符号化情報には、画像符号化処理時に生成した発生符号量情報と画像符号化処理時に使用した量子化パラメータ情報とが含まれ、その発生符号量情報と量子化パラメータに応じて前記他の画像符号化処理の符号化パラメータを制御する請求項６乃至請求項８のいずれかに記載の画像符号化方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、監視カメラに用いて好適な画像符号化装置及び画像符号化方法に関する。
【背景技術】
【０００２】
従来、監視カメラにおいて、監視領域を撮像し、得られた撮像データを動画像又は静止画像として符号化して通信回線を介してモニタや画像蓄積装置に送信する技術が知られている（例えば、特許文献１参照）。
【０００３】
特許文献１で開示された技術は、通常は動画像によるモニタリングを行い、画像中に何らかの変化が生じたときには動画像に合わせて静止画像を送信することにより、高画質な画像を得るものである。
【０００４】
【特許文献１】特開２０００−１８４３６７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかしながら、従来の画像符号化装置においては、動画像符号化データに合わせて静止画像符号化データを送信又は蓄積する場合、動画像符号化処理と静止画像符号化処理をそれぞれ独立して行うため、効率的に動画像符号化処理が行えていないという問題がある。例えば、変化の大きい画像に対して符号化タイプをインター符号化として動画像符号化処理を行うと、イントラ符号化処理よりも発生符号量増加による駒落ちが多くなったり、発生符号量の増加を抑制するために圧縮率を上げて動画像符号化処理することにより画質の低下を招いたりする。
【０００６】
本発明は、係る事情に鑑みてなされたものであり、動画像符号化と静止画像符号化を並行して行う場合でも、効率的に動画像符号化処理を行うことができる画像符号化装置及び画像符号化方法を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記目的は下記構成及び方法により達成される。
（１）  画像符号化装置であって、画像を符号化して符号化データと符号化情報を生成する複数の画像符号化手段と、複数の前記画像符号化手段のうち少なくとも１つの画像符号化手段が行った画像符号化結果を前記符号化情報として、前記符号化情報により他の前記画像符号化手段が行う符号化処理の符号化パラメータを制御する符号化制御手段と、を備える。
【０００８】
（２）  画像符号化装置であって、画像を符号化して符号化データと符号化情報を生成する複数の画像符号化手段と、複数の前記画像符号化手段のうち少なくとも１つは符号化処理の一部として離散コサイン変換演算処理を行い、この離散コサイン変換演算処理による結果を前記符号化情報として、この符号化情報により他の前記画像符号化手段が行う符号化処理の符号化パラメータを制御する符号化制御手段と、を備える。
【０００９】
（３）  上記（１）又は（２）に記載の画像符号化装置において、画像の一部又は全てを切り出す切出手段を備え、前記符号化制御手段は、前記画像の切出位置に応じて前記画像符号化手段が行う符号化処理の符号化パラメータを制御する。
【００１０】
（４）  上記（１）又は（２）に記載の画像符号化装置において、画像中の注目領域を設定する注目領域設定手段を備え、前記符号化制御手段は、前記画像中の注目領域に応じて前記画像符号化手段が行う符号化処理の符号化パラメータを制御する。
【００１１】
（５）  上記（１）〜（４）のいずれかに記載の画像符号化装置において、前記符号化情報には、画像符号化処理時に生成された発生符号量情報と画像符号化処理時に使用された量子化パラメータ情報とが含まれ、前記符号化制御手段は、前記発生符号量情報と前記量子化パラメータに応じて前記画像符号化手段が行う符号化処理の符号化パラメータを制御する。
【００１２】
（６）  画像符号化方法であって、それぞれ画像処理を行う複数の画像符号化処理のうち少なくとも１つは画像符号化処理の一部として離散コサイン変換演算処理を行い、この離散コサイン変換演算処理による結果を符号化情報として、この符号化情報により他の前記画像符号化処理の符号化パラメータを制御する。
【００１３】
（７）  上記（６）に記載の画像符号化方法において、画像の一部又は全てを切り出し、切出位置に応じて前記他の画像符号化処理の符号化パラメータを制御する。
【００１４】
（８）  上記（６）に記載の画像符号化方法において、画像中の注目領域を設定し、設定した注目領域に応じて前記他の画像符号化処理の符号化パラメータを制御する。
【００１５】
（９）  上記（６）〜（８）のいずれかに記載の画像符号化方法において、前記符号化情報には、画像符号化処理時に生成した発生符号量情報と画像符号化処理時に使用した量子化パラメータ情報とが含まれ、その発生符号量情報と量子化パラメータに応じて前記他の画像符号化処理の符号化パラメータを制御する。
【発明の効果】
【００１６】
上記（１）に記載の画像符号化装置では、画像符号化結果から動画像符号化処理の符号化パラメータを制御することで、動画像を符号化する際の発生符号量増加による駒落ちや画質劣化を抑制することができる。
【００１７】
上記（２）に記載の画像符号化装置では、静止画像符号化処理で生成される離散コサイン変換演算結果から動画像符号化処理の符号化パラメータを制御することで、動画像を符号化する際の発生符号量増加による駒落ちや画質劣化を抑制することができる。
【００１８】
上記（３）に記載の画像符号化装置では、静止画像符号化処理する画像と動画像符号化処理する画像の領域が異なる場合にも、動画像符号化処理の符号化パラメータを制御することで、動画像符号化時の発生符号量増加による駒落ちや画質劣化を抑制することができる。
【００１９】
上記（４）に記載の画像符号化装置では、動画像符号化処理の符号化対象画像の注目領域における変化を推定して注目領域の動画像符号化処理の符号化パラメータを制御することで、動画像符号化時の発生符号量増加による駒落ちや画質劣化を抑制することができる。
【００２０】
上記（５）に記載の画像符号化装置では、画像の変化が大きく、動画像符号化対象画像をイントラ符号化すると判断した場合に、静止画像符号化処理で生成される符号量情報と量子化パラメータから動画像符号化処理で発生する符号量を予測し動画像符号化処理を制御することで、動画像符号化時の発生符号量増加による駒落ちや画質劣化を抑制することができる。
【００２１】
上記（６）に記載の画像符号化方法では、静止画像符号化処理で生成される離散コサイン変換演算結果から動画像符号化処理の符号化パラメータを制御することで、動画像を符号化する際の発生符号量増加による駒落ちや画質劣化を抑制することができる。
【００２２】
上記（７）に記載の画像符号化方法では、静止画像符号化処理する画像と動画像符号化処理する画像の領域が異なる場合にも、動画像符号化処理の符号化パラメータを制御することで、動画像符号化時の発生符号量増加による駒落ちや画質劣化を抑制することができる。
【００２３】
上記（８）に記載の画像符号化方法では、動画像符号化処理の符号化対象画像の注目領域における変化を推定して注目領域の動画像符号化処理の符号化パラメータを制御することで、動画像符号化時の発生符号量増加による駒落ちや画質劣化を抑制することができる。
【００２４】
上記（９）に記載の画像符号化方法では、画像の変化が大きく、動画像符号化対象画像をイントラ符号化すると判断した場合に、静止画像符号化処理で生成される符号量情報と量子化パラメータから動画像符号化処理で発生する符号量を予測し動画像符号化処理を制御することで、動画像符号化時の発生符号量増加による駒落ちや画質劣化を抑制することができる。
【発明を実施するための最良の形態】
【００２５】
以下、本発明を実施するための好適な実施の形態について、図面を参照して詳細に説明する。
【００２６】
（実施の形態１）
図１は、本発明の実施の形態１に係る画像符号化装置の概略構成を示すブロック図である。この図において、本実施の形態の画像符号化装置１００は、撮像部１０１と、画像入力部１０２と、動画像符号化部１０３と、静止画像符号化部１０４と、送信部１０５と、符号化制御部１０６と、通信回線１０７とを備えて構成される。
【００２７】
撮像部１０１は、被写体像を撮影するものであり、ＣＣＤ（Charge Coupled Device）又はＣＭＯＳ（Complementary Metal Oxide Semiconductor）センサ等からなる撮像素子と、該撮像素子に入力された信号をデジタル画像データに変換するＡ／Ｄ（Analog/Digital）変換器等を備えている。画像入力部１０２は、一時的に画像データを保存するＲＡＭ等のバッファを備えており、撮像部１０１からの画像データの取り込みと、後段への画像データ入力を並行して行う。
【００２８】
動画像符号化部１０３は、画像入力部１０１より入力された画像に動画像符号化を行い、符号化データを生成する。なお、動画像符号化の例としては、Ｈ．２６１、Ｈ．２６３、ＭＰＥＧ−１、ＭＰＥＧ−２、ＭＰＥＧ−４が挙げられる。なお、Ｈ．２６１及びＨ．２６３は、国際電気通信連合が勧告した、映像の圧縮符号化方式の標準の１つである。Ｈ．２６３はＨ．２６１を改良し発展させたものである。Ｈ．２６１とＨ．２６３は、ともに動き補償フレーム間符号化とＤＣＴ（Discrete Cosine Transform、離散コサイン変換）を組み合わせたアルゴリズムを利用するものであり、Ｈ．２６３では更に半画素精度の動き補償や可変長符号化の改善を行って圧縮効率を高めている。
【００２９】
静止画像符号化部１０４は、画像入力部１０１より入力された画像に、ＤＣＴ演算処理を使用して静止画像符号化を行い、符号化データと符号化情報を生成する。なお、ＤＣＴ演算処理を使用する静止画像符号化処理の例としては、ＪＰＥＧ符号化処理が挙げられる。また、符号化情報の例としては、ＤＣＴ演算結果の一部であるＤＣ（直流）成分が挙げられる。
【００３０】
送信部１０５は、動画像符号化部１０３又は静止画像符号化部１０４で生成された符号化データを無線又は有線の通信回線１０７に送信する。符号化制御部１０６は、ＣＰＵ、ＲＯＭ、ＲＡＭ、タイマ等を備えて構成され、静止画像符号化部１０４により生成される符号化情報を基に動画像符号化部１０３の動画像符号化処理の符号化タイプ及び符号化実行を制御すると共に、画像入力部１０２が後段に入力する画像データのフォーマットに関する情報を管理し、さらに送信部１０５の送信制御を行う。
【００３１】
なお、図１では、動画像符号化部１０３及び静止画像符号化部１０４をそれぞれ１つずつ示しているが、それぞれ複数あっても構わない。
【００３２】
以上のように構成された画像符号化装置１００の動作について説明する。撮像部１０１で被写体の撮影を行い、画像データに変換して画像入力部１０２に入力する。画像入力部１０２に入力された画像データは動画像符号化部１０３と静止画像符号化部１０４夫々に入力される。動画像符号化部１０３と静止画像符号化部１０４は符号化制御部１０６により制御され、動画像符号化部１０３では入力された画像を動画像符号化し、符号化データを生成する。静止画像符号化部１０４では入力された画像を静止画像符号化し、符号化データと符号化情報を生成する。送信部１０５は、動画像符号化部１０３で生成された符号化データ及び静止画像符号化部１０４で生成された符号化データを送信する。
【００３３】
続いて、図２のフローチャートを用いて、符号化制御部１０６が行う動画像符号化処理の制御について、既に複数の静止画像符号化処理が行われている場合を例に挙げて下記に説明する。
【００３４】
まず、動画像符号化処理の対象画像となる現画像の取得時刻に近い時刻の画像に対して行われた静止画像符号化処理で生成された符号化情報（即ちＤＣＴ演算結果）を取得すると共に、動画像符号化処理の対象画像となる予測参照画像の取得時刻に近い時刻の画像に対して行われた静止画像符号化処理で生成された符号化情報（即ちＤＣＴ演算結果）を取得する（ステップＳ１０１）。ここで、動画像符号化処理の対象画像となる現画像の取得時刻に近い時刻の画像における静止画像符号化処理を行った際のＤＣＴ演算結果を“Ａ”とし、動画像符号化処理の対象画像となる予測参照画像の近い時刻の画像における静止画像符号化処理を行った際のＤＣＴ演算結果を“Ｂ”とする。これら“Ａ”と“Ｂ”の差分を計算する（ステップＳ１０２）。なお、“Ａ”と“Ｂ”の差分の計算には、“Ａ”と“Ｂ”の同一ブロック位置のＤＣ係数の差分絶対値の総和をとる方法や、“Ａ”の中に含まれるＤＣ係数の総和と、“Ｂ”の中に含まれるＤＣ係数の総和との差分をとる方法等が考えられる。
【００３５】
続いて、ステップＳ１０２で計算された差分結果から、動画像符号化処理の符号化タイプを決定する（ステップＳ１０３）。なお、決定には差分が閾値よりも大きい場合には、動画像符号化処理の符号化タイプをイントラ符号化とし、閾値よりも小さい場合には、動画像符号化処理の符号化タイプをインター符号化とすることが考えられる。なお、閾値は符号化制御部１０６内で予め保持しているものであっても良いし、外部から設定されるものであっても良い。次に、ステップＳ１０３で決定した符号化タイプを動画像符号化処理の符号化タイプとして指定し、動画像符号化処理の実行を指示する（ステップＳ１０４）。
【００３６】
このように本実施の形態の画像符号化装置１００によれば、静止画像符号化処理で生成されるＤＣＴ演算結果から動画像符号化処理の符号化対象画像の変化を推定して動画像符号化処理の符号化パラメータを制御するので、動画像符号化時の発生符号量増加による駒落ちや画質劣化を抑制することが可能となる。
【００３７】
（実施の形態２）
図３は、本発明の実施の形態２に係る画像符号化装置の概略構成を示すブロック図である。なお、この図において上述した図１と共通する構成部分には同一符号を付してその説明を省略する。
【００３８】
図３において、本実施の形態の画像符号化装置２００は、上述した実施の形態１の画像符号化装置１００と同じ構成の他に、切出部２０１と、符号化制御部１０６と同様の機能を有する他に切出部２０１を制御して切出画像の情報を管理する機能を有する符号化制御部２０２とを備えている。切出部２０１は、入力された画像の一部又は全てを切り出して出力する。符号化制御部２０２は、切出部２０１を制御して切出画像の情報を管理する。管理する情報としては「切出位置」や「切出サイズ」などが考えられる。
【００３９】
なお、図３では、動画像符号化部１０３及び静止画像符号化部１０４をそれぞれ１つずつ示しているが、それぞれ複数あっても構わない。
【００４０】
以上のように構成された画像符号化装置２００の動作について説明する。なお、図１と共通する動作部分には、図１と同一符号を付して説明を省略する。
【００４１】
画像入力部１０２からの画像が切出部２０１によってその一部又は全てが切り出されて、動画像符号化部１０３と静止画像符号化部１０４夫々に入力される。動画像符号化部１０３と静止画像符号化部１０４は切出部２０１からの画像を夫々符号化する。なお、画像の切出位置や切出サイズについては切出部２０１内部で予め保持していても良いし、外部から指示されても良い。
【００４２】
続いて、図４のフローチャートを用いて、符号化制御部２０２が行う動画像符号化処理の制御について、既に複数の静止画像符号化処理が行われている場合を例に挙げ、下記に説明する。
【００４３】
まず、切出部２０１が切り出した画像の領域から、動画像符号化処理対象画像の切出画像と、静止画像符号化対象画像の切出画像の重複領域を確認し、重複領域がある場合にはステップＳ２０２からステップＳ２０４の処理を行う（ステップＳ２０１）。動画像符号化処理の対象画像となる現画像の取得時刻に近い時刻の画像に対して行われた静止画像符号化処理で生成された符号化情報（即ちＤＣＴ演算結果）を取得すると共に、動画像符号化処理の対象画像となる予測参照画像の取得時刻に近い時刻の画像に対して行われた静止画像符号化処理で生成された符号化情報（即ちＤＣＴ演算結果）を取得する（ステップＳ２０２）。
【００４４】
続いて、取得した２つのＤＣＴ演算結果の差分を計算する（ステップＳ２０３）。次いで、ステップＳ２０３で計算された差分結果から動画像符号化処理の符号化タイプを決定する（ステップＳ２０４）。上記ステップＳ２０１からステップＳ２０４の処理を符号化対象画像領域全体に実施する（ステップＳ２０５）。次いで、ステップＳ２０４で決定した符号化タイプを動画像符号化処理の符号化タイプとして指定し、動画像符号化処理の実行を指示する（ステップＳ２０６）。
【００４５】
なお、ステップＳ２０１で行われる重複領域の確認について、動画像符号化処理対象画像の切出画像サイズが静止画像符号化対象画像の切出画像サイズと比べて小さく、静止画像符号化対象画像の切出画像領域に含まれている場合には、動画像符号化処理対象画像の切出画像の領域を重複領域とすることが考えられる。また、動画像符号化処理対象画像の切出画像サイズが、静止画像符号化対象画像の切出画像サイズと比べて大きく、静止画像符号化対象画像の切出画像領域が動画像符号化処理対象画像の切出画像領域に含まれている場合には、重複領域で判定された符号化タイプを動画像符号化処理対象画像内の重複する領域にのみ適用するようにしても良いし、動画像符号化処理対象画像全体に適用しても良い。
【００４６】
また、動画像符号化処理対象画像の切出画像と静止画像符号化対象画像の切出画像とが重複しない場合には、重複領域が無いものとして以降のステップを行わなくても良いし、静止画像符号化対象画像の切出画像領域を重複領域として以降のステップを行っても良い。
【００４７】
なお、上記例では、ステップＳ２０４で決定した動画像符号化処理の符号化タイプを重複領域に適用することを前提に説明したが、ステップＳ２０４で決定した動画像符号化処理の符号化タイプを符号化対象画像全体に適用することにしても良い。
【００４８】
このように本実施の形態の画像符号化装置２００によれば、静止画像符号化処理する画像と動画像符号化処理する画像の領域が異なる場合にも、動画像符号化処理の符号化対象画像の変化を推定して動画像符号化処理の符号化パラメータを制御するので、動画像符号化時の発生符号量増加による駒落ちや画質劣化を抑制することが可能となる。
【００４９】
（実施の形態３）
図５は、本発明の実施の形態３に係る画像符号化装置の概略構成を示すブロック図である。なお、この図において上述した図１と共通する構成部分には同一符号を付してその説明を省略する。
【００５０】
図５において、本実施の形態の画像符号化装置３００は、上述した実施の形態１の画像符号化装置１００と同じ構成の他に、注目領域設定部３０１と、符号化制御部１０６と同様の機能を有する他に、注目領域に応じて静止画像符号化部１０４により生成される符号化情報を基に動画像符号化部１０３の動画像符号化処理の符号化タイプ及び符号化実行を制御する機能を有する符号化制御部３０２とを備えている。
【００５１】
注目領域設定部３０１は注目する領域を設定する。この場合、注目領域として設定される例としては、出入口等の監視対象として重要視される領域であったり、撮像画像内で動きの大きい領域が予め分かっていたりすること等が挙げられる。また、設定される内容としては、注目位置やサイズや形状などが考えられる。なお、設定される箇所は１箇所であっても良いし、複数箇所であっても良い。また、動画像符号化部１０３に設定する注目領域と静止画像符号化部１０４に設定する注目領域の一部又は全てが異なっていても良い。符号化制御部３０２は、注目領域設定部３０１で設定された注目領域に応じて静止画像符号化部１０４により生成される符号化情報を基に動画像符号化部１０３の動画像符号化処理の符号化タイプ及び符号化実行を制御する。
【００５２】
なお、図５では、動画像符号化部１０３及び静止画像符号化部１０４をそれぞれ１つずつ示しているが、それぞれ複数あっても構わない。
【００５３】
以上のように構成された画像符号化装置３００の動作について説明する。なお、図１と共通する動作部分には、図１と同一符号を付して説明を省略する。
【００５４】
注目領域設定部３０１で注目領域が設定されると、符号化制御部３０２が注目領域設定部３０１で設定された注目領域に応じて静止画像符号化部１０４により生成される符号化情報（即ちＤＣＴ演算結果）を基に動画像符号化部１０３の動画像符号化処理の符号化タイプ及び符号化実行を制御する。
【００５５】
続いて、図６のフローチャートを用いて、符号化制御部３０２が行う動画像符号化処理の制御について、既に複数の静止画像符号化処理が行われており、注目領域設定部３０１で注目領域が設定されている場合を例に挙げて下記に説明する。
【００５６】
まず、注目領域設定部３０１が設定した注目領域を確認し、該注目領域に対してステップＳ３０２からステップＳ３０４の処理を行う（ステップＳ３０１）。動画像符号化処理の対象画像となる現画像の取得時刻に近い時刻の画像に対して行われた静止画像符号化処理で生成された符号化情報（即ちＤＣＴ演算結果）を取得すると共に、動画像符号化処理の対象画像となる予測参照画像の取得時刻に近い時刻の画像に対して行われた静止画像符号化処理で生成された符号化情報（即ちＤＣＴ演算結果）を取得する（ステップＳ３０２）。続いて、２つのＤＣＴ演算結果の差分を計算する（ステップＳ３０３）。
【００５７】
次に、ステップＳ３０３で計算された差分結果から、動画像符号化処理の符号化タイプを決定する（ステップＳ３０４）。上記ステップＳ３０１からステップＳ３０４の処理を符号化対象画像領域全体に実施する（ステップＳ３０５）。次に、ステップＳ３０４で決定した符号化タイプを動画像符号化処理の符号化タイプとして指定し、動画像符号化処理の実行を指示する（ステップＳ３０６）。
【００５８】
なお、ステップＳ３０１で行われる重複領域の確認について、動画像符号化処理対象画像の注目領域のサイズが、静止画像符号化対象画像の注目領域サイズと比べて小さく、静止画像符号化対象画像の注目領域に含まれている場合には動画像符号化処理対象画像の注目領域を重複領域とすることが考えられる。
【００５９】
また、動画像符号化処理対象画像の注目領域サイズが静止画像符号化対象画像の注目領域サイズと比べて大きく、静止画像符号化対象画像の注目領域が動画像符号化処理対象画像の注目領域に含まれている場合には、重複領域で判定された符号化タイプを動画像符号化処理対象画像内の重複する領域にのみ適用するようにしても良いし、動画像符号化処理対象画像全体に適用しても良い。また、動画像符号化処理対象画像の注目領域と、静止画像符号化対象画像の注目領域とが重複しない場合には、重複領域が無いものとして以降のステップを行わなくても良いし、静止画像符号化対象画像の注目領域を重複領域として以降のステップを行っても良い。
【００６０】
なお、上記例では、ステップＳ３０４で決定した動画像符号化処理の符号化タイプを注目領域に適用することを前提に説明したが、ステップＳ３０４で決定した動画像符号化処理の符号化タイプを符号化対象画像全体に適用することにしても良い。
【００６１】
このように本実施の形態の画像符号化装置３００によれば、動画像符号化処理の符号化対象画像の注目領域における変化を推定して注目領域の動画像符号化処理の符号化パラメータを制御するので、動画像符号化時の発生符号量増加による駒落ちや画質劣化を抑制することが可能となる。
【００６２】
（実施の形態４）
図７は、本発明の実施の形態４に係る画像符号化装置の概略構成を示すブロック図である。なお、この図において上述した図１と共通する構成部分には同一符号を付してその説明を省略する。
【００６３】
図７において、本実施の形態の画像符号化装置４００は、上述した実施の形態１の画像符号化装置１００と同じ構成の他に、静止画像符号化部１０４の出力する符号化情報に加えて静止画像符号化処理時の発生符号量情報と静止画像符号化処理時に使用した量子化パラメータ情報とを追加する静止画像符号化部４０１と、静止画像符号化部４０１により生成される符号化情報を基に動画像符号化部１０３の動画像符号化処理の符号化タイプ及び符号化実行と量子化パラメータを制御する機能を追加する符号化制御部４０２とを備えている。
【００６４】
静止画像符号化部４０１は、画像を入力しＤＣＴ演算処理を使用する静止画像符号化を行って符号化データと符号化情報（ＤＣＴ演算結果、発生符号量情報、使用した量子化パラメータ情報）を生成する。符号化制御部４０２は、静止画像符号化部４０１により生成される符号化情報を基に動画像符号化部１０３の動画像符号化処理の符号化タイプ及び符号化実行と量子化パラメータを制御する。
【００６５】
なお、図７では、動画像符号化部１０３及び静止画像符号化部４０１をそれぞれ１つずつ示しているが、それぞれ複数あっても構わない。
【００６６】
以上のように構成された画像符号化装置４００の動作について説明する。なお図１と共通する動作部分には、図１と同一符号を付して説明を省略する。
【００６７】
静止画像符号化部４０１では、入力された画像を静止画像符号化し、符号化データと符号化情報としてＤＣＴ演算結果と発生符号量情報と使用した量子化パラメータ情報を生成する。符号化制御部４０２は静止画像符号化部４０１で生成されたＤＣＴ演算結果と発生符号量情報と使用した量子化パラメータ情報を基に動画像符号化部１０３の動画像符号化処理の符号化タイプ及び符号化実行と量子化パラメータを制御する。
【００６８】
続いて、図８のフローチャートを用いて、符号化制御部４０２が行う動画像符号化処理の制御について、下記に説明する。なお、図２のフローチャートと共通する動作部分には、図２と同一符号を付して説明を省略する。
【００６９】
前述したステップＳ１０１〜ステップＳ１０３の処理を行った後、ステップＳ１０３で決定した符号化タイプを確認する（ステップＳ４０１）。インター符号化と決定された場合には、ステップＳ１０４に示す動画像符号化処理の実行を指示し、イントラ符号化と決定された場合には符号化タイプ決定に使用されたＤＣＴ演算結果に対応する発生符号量情報と量子化パラメータ情報を取得する（ステップＳ４０２）。
【００７０】
次に、イントラ符号化として動画像符号化処理を行った場合の発生符号量を予測する（ステップＳ４０３）。予測符号量の算出には、静止画像符号化時の発生符号量を基準として、静止画像符号化処理と動画像符号化処理が同じ量子化パラメータを使用したと仮定し、更に圧縮効率を考慮することにより算出する方法が考えられる。
【００７１】
なお、圧縮効率は、静止画像符号化処理と動画像符号化処理のそれぞれで用いられるエントロピー符号化効率の比率によるものが考えられる。また、静止画像符号化処理対象画像の画像サイズと動画像符号化処理対象画像の画像サイズが異なる場合には画像サイズの比により予測符号量を調整する。
【００７２】
次に、ステップＳ４０３で算出された予測符号量と動画像符号化処理で発生可能な符号量の閾値とを比較する（ステップＳ４０４）。この場合、比較に用いる閾値は符号化制御部４０２内で予め保持しているものであっても良いし、外部から設定されるものであっても良い。閾値よりもよりも大きい場合には動画像符号化処理をスキップし、閾値よりも小さい場合には量子化パラメータを調整し（ステップＳ４０５）、ステップＳ１０４に示す動画像符号化処理の実行を指示する。なお、量子化パラメータの調整には、ステップＳ４０３で算出された予測符号量と静止画像符号化処理時に使用された量子化パラメータを基準に調整することが考えられる。
【００７３】
このように本実施の形態の画像符号化装置４００によれば、画像の変化が大きく、動画像符号化対象画像をイントラ符号化すると判断される場合、静止画像符号化部４０１で生成される符号量情報と量子化パラメータから動画像符号化処理で発生する符号量を予測して動画像符号化処理を制御するので、動画像符号化時の発生符号量増加による駒落ちや画質劣化を抑制することが可能となる。
【００７４】
なお、上記実施の形態１乃至実施の形態４の画像符号化装置は、動画像符号化処理及び静止画像符号化処理により生成される符号化データを通信回線経由で外部へ送信することを前提としていたが、符号化部の内部又は外部の記録媒体に蓄積するようにする構成であっても良い。
【００７５】
また、上記実施の形態１乃至実施の形態４の画像符号化装置は、複数の画像符号化手段が動画像符号化部１０３と静止画像符号化部１０４であることを前提に説明したが、いずれの画像符号化手段も共に動画像符号化部１０３のみであったとしても、符号化情報を生成し出力する動画像符号化部がイントラ符号化として動画像符号化されている場合には同様の効果が得られる。
【産業上の利用可能性】
【００７６】
本発明は、動画像符号化と静止画像符号化を並行して行う場合に、静止画像符号化処理で生成される符号化情報を用いて、動画像符号化処理の符号化パラメータを制御することができるという効果を有し、監視カメラ等に利用される画像符号化装置として有用である。
【図面の簡単な説明】
【００７７】
【図１】本発明の実施の形態１に係る画像符号化装置の概略構成を示すブロック図
【図２】本発明の実施の形態１に係る符号化制御部の動作説明のためのフローチャート
【図３】本発明の実施の形態２に係る画像符号化装置の概略構成を示すブロック図
【図４】本発明の実施の形態２に係る符号化制御部の動作説明のためのフローチャート
【図５】本発明の実施の形態３に係る画像符号化装置の概略構成を示すブロック図
【図６】本発明の実施の形態３に係る符号化制御部の動作説明のためのフローチャート
【図７】本発明の実施の形態４に係る画像符号化装置の概略構成を示すブロック図
【図８】本発明の実施の形態４に係る符号化制御部の動作説明のためのフローチャート
【符号の説明】
【００７８】
１００、２００、３００、４００  画像符号化装置
１０１  撮像部
１０２  画像入力部
１０３  動画像符号化部
１０４、４０１  静止画像符号化部
１０５  送信部
１０６、２０２、３０２、４０２  符号化制御部
１０７  通信回線
２０１  切出部
３０１  注目領域設定部
【図１】
2006303987.tif 000003
【図２】
2006303987.tif 000004
【図３】
2006303987.tif 000005
【図４】
2006303987.tif 000006
【図５】
2006303987.tif 000007
【図６】
2006303987.tif 000008
【図７】
2006303987.tif 000009
【図８】
2006303987.tif 000010