(57)【要約】【課題】様々な目的に応じて動画像信号を適切に処理させる。【解決手段】入力部１２から入力された動画像信号は、切換部１４に入力される。切換部１４にはパラメータ値設定部１６からパラメータ値及び閾値が入力される。パラメータ値設定部１６にはパラメータ種が入力され、このパラメータ種のパラメータ値を設定する。パラメータ値は、例えば装置のスペックによって予め定められた値に設定される。パラメータ値設定部１６は、入力されたパラメータ種に対応する閾値を記憶部１８に記憶されたパラメータ種と閾値との対応関係から求めて切換部１４へ出力する。切換部１４は、パラメータ値設定部１６から入力されたパラメータ値と閾値とに基づいて、静止画処理部２０及び動画処理部２２の何れで処理させるかを切換える。出力部２４は、静止画処理部２０又は動画処理部２２から入力された動画像信号を後段の回路へ出力する。【選択図】      図１
2004297652.tif 000002
【特許請求の範囲】
【請求項１】
動画像信号を入力する入力手段と、
静止画処理モードとして前記動画像信号を静止画処理する静止画処理手段と、
動画処理モードとして前記動画像信号を動画処理する動画処理手段と、
前記静止画処理モードと前記動画処理モードとを切り替えるための複数のパラメータ種を記憶する記憶手段と、
前記複数のパラメータ種のうち少なくとも１つのパラメータ種のパラメータ値を設定するパラメータ値設定手段と、
設定されたパラメータ値に基づいて前記静止画処理モードと前記動画処理モードとを切換える制御手段と、
を備えた画像処理装置。
【請求項２】
前記記憶手段は、パラメータ種と予め定めた閾値との対応関係を複数記憶し、前記制御手段は、設定されたパラメータ値と前記閾値とに基づいて前記静止画処理モードと前記動画処理モードとを切換えることを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記パラメータ種は、前記動画像信号の画素数、データ容量、フレームレート、色差、輝度、及び装置の電力能力の少なくとも２つを含むことを特徴とする請求項１又は請求項２記載の画像処理装置。
【請求項４】
前記パラメータ種は、前記動画像信号の輝度であり、前記制御手段は、前記動画像信号の撮影領域を所定数で分割したときの分割領域毎に前記輝度を演算し、前記分割領域毎に、前記パラメータ値と前記輝度とに基づいて前記静止画処理モードと前記動画処理モードとを切換え、処理後の分割領域の分割データを合成することを特徴とする請求項３記載の画像処理装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、画像処理装置に係り、より詳しくは、動画像信号を処理する画像処理装置に関する。
【０００２】
【従来の技術】
従来、動画像信号を処理する画像処理装置として、動画像信号のフレーム間のデータ変化等からフレーム画像が静止画像か動画像かを判別し、静止画像の場合には静止画に適した静止画処理を、動画像の場合には動画像に適した動画処理を行うことにより、画像内容に応じて適切な処理を行うものが知られている（例えば特許文献１〜３参照）。
【０００３】
ここで、静止画処理とは入力信号に対してノイズ除去処理等の各種フィルタ処理を施すものであり、高画質になるが、処理速度が遅い、消費電力が大きい等の特徴がある。一方、動画処理とは、画像データを間引いたりする等、静止画処理で行う各種フィルタ処理を省略した処理であり、高画質ではないが、処理速度が速い、消費電力が小さい等の特徴がある。
【０００４】
【特許文献１】
特公平７−４０７２２号公報
【特許文献２】
特許第３２８２６９１号公報
【特許文献３】
特許第２５５８７４２号公報
【０００５】
【発明が解決しようとする課題】
しかしながら、上記従来技術では、静止画像か動画像かに応じてそれぞれ適切な処理を行うことにより画質の劣化を防ぐことが目的であるため、例えば消費電力を抑制したり、処理効率を向上させる等の他の様々な目的に応じて適切に処理することができない、という問題があった。
【０００６】
本発明は、上記事実に鑑みて成されたものであり、様々な目的に応じて動画像信号を適切に処理することができる画像処理装置を提供することを目的とする。
【０００７】
【課題を解決するための手段】
上記目的を達成するために、請求項１記載の発明は、動画像信号を入力する入力手段と、静止画処理モードとして前記動画像信号を静止画処理する静止画処理手段と、動画処理モードとして前記動画像信号を動画処理する動画処理手段と、前記静止画処理モードと前記動画処理モードとを切り替えるための複数のパラメータ種を記憶する記憶手段と、前記複数のパラメータ種のうち少なくとも１つのパラメータ種のパラメータ値を設定するパラメータ値設定手段と、設定されたパラメータ値に基づいて前記静止画処理モードと前記動画処理モードとを切換える制御手段と、を備えたことを特徴とする。
【０００８】
この発明によれば、静止画処理手段は、静止画処理モードとして、入力手段により入力された動画像信号を静止画処理する。また、動画処理手段は、動画処理モードとして、入力手段により入力された動画像信号を動画処理する。
【０００９】
ここで、静止画処理とは、処理対象の画像信号に対して画質を向上させるための様々な処理をいい、例えば色補正処理、ガンマ補正処理、ホワイトバランス調整処理等を含む。従って、動画像信号に対して静止画処理を施すことにより画質は向上するが、処理速度が遅くなったり、消費電力が高くなったりする。
【００１０】
一方、動画処理とは、処理対象の画像信号に対して画質の向上を目的としたものではなく、処理速度の向上や消費電力の低減等、簡易かつ速やかに処理するための処理をいい、静止画処理で実行される各種処理の一部が実行される。すなわち、動画処理では、静止画処理のうちいくつかの処理を省略した処理が行われる。
【００１１】
従って、動画像信号に対して動画処理が施されることにより、画質を向上させることはできないが、処理速度を向上させたり、消費電力を抑えることができる。
【００１２】
すなわち、静止画処理モードは換言すれば高画質モードであり、動画処理モードは換言すれば簡易処理モードということができる。
【００１３】
記憶手段は、静止画処理モードと動画処理モードとを切り替えるための複数のパラメータ種を記憶する。すなわち、静止画処理モードと動画像処理モードとを切換えるための要素が複数存在することとなる。
【００１４】
パラメータ値設定手段は、記憶手段に記憶された複数のパラメータ種のうち少なくとも１つのパラメータ種のパラメータ値を設定する。すなわち、目的に応じて静止画処理モードと動画処理モードとを切り替えるためのパラメータ種を定め、このパラメータ種のパラメータ値を設定する。
【００１５】
そして、制御手段は、設定されたパラメータ値に基づいて静止画処理モードと動画処理モードとを切換える。
【００１６】
例えば、処理負荷を軽減させることを目的とするような場合には、パラメータ値設定手段は、例えばパラメータ種として画素数を設定し、パラメータ値として、その装置の撮影素子の画素数を設定する。
【００１７】
この場合、制御手段は、例えば設定されたパラメータ値が予め定めた閾値以上の場合には入力された動画像信号に動画処理が施されるように動画処理モードに切換え、設定されたパラメータ値が予め定めた閾値未満の場合には、入力された動画像信号に静止画処理が施されるように静止画処理モードに切換える。
【００１８】
これにより、画素数が大きいときは簡易処理が施され、画素数が小さいときには高画質処理が施されるので、処理負荷を軽減することができる。
【００１９】
また、パラメータ種を目的に応じて変更し、そのパラメータ種に応じたパラメータ値を設定することで、様々な目的に応じて動画像信号を適切に処理することができる。
【００２０】
請求項２記載の発明は、前記記憶手段は、パラメータ種と予め定めた閾値との対応関係を複数記憶し、前記制御手段は、設定されたパラメータ値と前記閾値とに基づいて前記静止画処理モードと前記動画処理モードとを切換えることを特徴とする。
【００２１】
この発明によれば、記憶手段には、パラメータ種と予め定めた閾値との対応関係が複数記憶されており、制御手段は、設定されたパラメータ値と閾値とに基づいて静止画処理モードと動画処理モードとを切換える。例えば設定されたパラメータ値が閾値以上の場合には静止画処理モードに切換え、閾値未満の場合には動画像処理モードに切換える。どのように切換えるかは、パラメータ種に応じて定められる。このように、パラメータ値と閾値とに基づいて処理モードを切換えることにより、簡単な処理で静止画処理モードと動画像処理モードとを切換えることができる。
【００２２】
なお、対応関係を設定するための設定手段をさらに設けてもよい。これにより、ユーザ側で自由に対応関係を設定することができ、所望の条件で静止画処理モードと動画像処理モードとを切換えることが可能となる。
【００２３】
請求項３記載の発明は、前記パラメータ種は、前記動画像信号の画素数、データ容量、フレームレート、色差、輝度、及び装置の電力能力の少なくとも２つを含むことを特徴とする。
【００２４】
この発明によれば、パラメータ種は、動画像信号の画素数、データ容量、フレームレート、色差、輝度、及び装置の電力能力の少なくとも２つを含んでおり、これらの中から少なくとも１つのパラメータ種が選択され、選択されたパラメータ種のパラメータ値が設定される。
【００２５】
ここで、画素数は、画像を撮影する撮影素子の画素数でもよいし、撮影モードで設定された画素数でもよい。データ容量は、画像信号を記憶するメモリのデータ容量でもよいし、入力手段に入力される動画像信号のデータ容量（データサイズ）でもよい。フレームレートは、動画像を構成するフレーム画像の表示間隔である。色差は、動画像信号に対して色差を求めるための所定の演算を行うことにより得ることができるパラメータである。輝度は、動画像信号に対して輝度を求めるための所定の演算を行うことにより得ることができるパラメータである。装置の電力能力は、装置に搭載されたバッテリー電源の容量でもよいし、バッテリー電源の残量でもよいし、消費電力でもよい。
【００２６】
このような様々なパラメータ種からパラメータ種を選択してパラメータ値を設定し、このパラメータ値に基づいて処理モードを切換えることができるので、目的に応じて動画像信号を適切に処理することができる。
【００２７】
請求項４記載の発明は、前記パラメータ種は、前記動画像信号の輝度であり、前記制御手段は、前記動画像信号の撮影領域を所定数で分割したときの分割領域毎に前記輝度を演算し、前記分割領域毎に、前記パラメータ値と前記輝度とに基づいて前記静止画処理モードと前記動画処理モードとを切換え、処理後の分割領域の分割データを合成することを特徴とする。
【００２８】
この発明によれば、パラメータ種が動画像信号の輝度の場合には、制御手段は、動画像信号の撮影領域を所定数で分割する。そして、分割領域毎に輝度を演算し、この輝度とパラメータ値とに基づいて静止画処理モードと動画処理モードとを分割領域毎に切換える。例えば、輝度が所定の閾値以上の分割領域に対しては、画像としての重要度が高いものとして静止画処理モードを施し、輝度が所定の閾値未満の分割領域に対しては画像としての重要度が低いものとして動画処理を施す。そして、処理後の分割領域の分割データを合成する。
【００２９】
このように、輝度を画像の重要度の判断材料として、重要度に応じて静止画処理モードと動画処理モードとを切換えることにより、画質を向上させつつ処理効率を向上させることができる。
【００３０】
【発明の実施の形態】
以下、図面を参照して本発明の実施の形態について詳細に説明する。なお、本実施の形態では、動画像信号を処理するデジタルカメラに本発明を適用した場合について説明する。
【００３１】
図１に示すように、画像処理装置１０は、入力部１２、切換部１４、パラメータ値設定部１６、記憶部１８、静止画処理部２０、動画処理部２２、出力部２４を含んで構成される。この画像処理装置１０は、図示しないデジタルカメラの画像処理部として機能する。
【００３２】
入力部１２は、動画像信号を入力する。この動画像信号は、例えば撮影レンズ及びＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）等の撮影素子を含む撮影手段で撮影された撮影画像の画像信号を入力する。
【００３３】
入力された動画像信号は、切換部１４に入力される。切換部１４には、パラメータ値設定部１６からパラメータ値及び閾値が入力される。
【００３４】
パラメータ値設定部１６は、予め定めた又はユーザにより設定されたパラメータ種が入力され、入力されたパラメータ種のパラメータ値を設定する。パラメータ値は、装置のスペックによって予め定められた値に設定されたり、パラメータを測定すること等によりその時の状態に応じた値に設定される。
【００３５】
また、パラメータ値設定部１６は、入力されたパラメータ種に対応する閾値を記憶部１８に記憶されたパラメータ種と閾値との対応関係から求めて切換部１４へ出力する。
【００３６】
記憶部１８には、図２に示すような、パラメータ種と閾値との対応関係を記憶している。本実施形態では、パラメータ種として、動画像信号の画素数、電力能力、データ容量、フレームレート、色差、輝度が含まれており、それぞれのパラメータ種に対して閾値ＳＨ１〜ＳＨ５が予め設定されている。また、記憶部１８には、デジタルカメラを構成する各部のスペックに関するスペック情報、例えばＣＣＤの画素数、搭載しているメモリの容量、搭載しているバッテリー電源の容量、フレームレート等の情報を記憶している。
【００３７】
ここで、画素数は、例えば被写体を撮影するＣＣＤ等の撮影素子の画素数が用いられる。この場合、パラメータ値はスペック情報に基づいて予め定められた値に設定される。また、撮影画像の記録媒体への記録時の画素数を設定するための記録モードで設定された画素数でもよい。この場合、パラメータ値設定部１６は記録モードを検出し、検出した記録モードに応じた画素数をパラメータ値として設定する。
【００３８】
装置の電力能力は、例えば画像処理装置１０の各部に電力を供給する図示しないバッテリー電源の容量が用いられる。この場合、パラメータ値は、スペック情報に基づいて予め定められた値に設定される。また、バッテリー電源の残量をパラメータ値としてもよい。この場合、パラメータ値設定部１６は、バッテリー電源の残量を検出し、この値をパラメータ値として設定する。また、消費電力をパラメータ値としてもよい。この場合、パラメータ値設定部１６は、消費電力を検出し、この値をパラメータ値として設定する。
【００３９】
データ容量は、例えば画像データを記憶する図示しないメモリのデータ容量が用いられる。この場合、パラメータ値はスペック情報に基づいて予め定められた値に設定される。また、入力部１２に入力される動画像信号のデータサイズを用いてもよい。この場合、パラメータ値設定部１６は動画像信号のデータサイズを測定し、この値をパラメータ値として設定する。
【００４０】
フレームレートは、フレーム画像の表示間隔である。この場合、パラメータ値は、通常はスペック情報に基づいて予め定められた値に設定されるが、ユーザの入力により設定された値に設定してもよい。
【００４１】
色差は、画像データに対して色差を求めるための所定の演算を施すことにより得られる。この場合、パラメータ値設定部１６は、色差を求めるための所定の演算を行い、演算結果をパラメータ値として設定する。
【００４２】
輝度は、画像データに対して輝度を求めるための所定の演算を施すことにより得られる。この場合、パラメータ値設定部１６は、輝度を求めるための所定の演算を行い、演算結果をパラメータ値として設定する。
【００４３】
切換部１４は、パラメータ値設定部１６から入力されたパラメータ値と閾値とに基づいて、入力された動画像信号を静止画処理モードとして静止画処理部２０で処理させるか動画処理モードとして動画処理部２２で処理させるかを切換える。すなわち、入力された動画像信号を静止画処理モードで処理させる場合には、動画像信号を静止画処理部２０へ出力し、動画処理モードで処理させる場合には、動画像信号を動画処理部２２へ出力する。なお、詳細は後述するが、パラメータ種が輝度の場合には、切換部１４は、画像の分割処理を行い、分割画像毎に静止画処理モードと動画処理モードとを切換える。
【００４４】
静止画処理部２０は、画質を向上させるための処理、例えば色補正処理、ガンマ補正処理、ホワイトバランス調整処理等を行う。これにより、画質は向上するが、処理速度が遅くなったり、消費電力が高くなったりする。
【００４５】
動画処理部２２は、静止画処理部２０で実行する各種処理の一部を実行する。これより、画質を向上させることはできないが、処理速度を向上させたり、消費電力を抑えることができる。
【００４６】
出力部２４は、静止画処理部２０又は動画処理部２２から入力された動画像信号を後段の回路へ出力する。出力部２４から出力された動画像信号は、例えば表示装置へ出力され表示される。なお、詳細は後述するが、パラメータ種が輝度の場合には、出力部２４は分割画像の合成処理も行う。
【００４７】
なお、入力部１２は本発明の入力手段に相当し、静止画処理部２０は本発明の静止画処理手段に相当し、動画処理部２２は本発明の動画処理手段に相当し、記憶部１８は本発明の記憶手段に相当し、パラメータ値設定部１６は本発明のパラメータ値設定手段に相当し、切換部１４は本発明の制御手段に相当する。
【００４８】
次に、本実施の形態の作用として、画像処理装置１０で実行される制御ルーチンについて、図３に示すフローチャートを参照して説明する。
【００４９】
まず、ステップ１００において、入力部１２に動画像信号が入力されると、次のステップ１０２において、切換部１４により、入力されたパラメータ種が輝度か否かが判断される。パラメータ種は、例えば予め定められており、デジタルカメラを統括制御する図示しないＣＰＵから入力される。
【００５０】
そして、パラメータ種が輝度の場合には、ステップ１０４に移行し、パラメータ種が輝度以外の場合にはステップ１０６へ移行する。
【００５１】
ステップ１０４では、切換部１４により、入力された動画像信号で表される画像２６が図４に示すように予め定めた数の分割画像２８に分割され、各々の分割画像２８の分割動画像信号が生成される。なお、図４では一例として４×４の合計１６個に分割しているが、分割数はこれに限られない。
【００５２】
ステップ１０６では、パラメータ値設定部１６によりパラメータ値が設定される。例えばパラメータ種として画素数が設定された場合には、記憶部１８に記憶されたスペック情報に基づいてＣＣＤの画素数がパラメータ値として設定される。なお、前述したように、記録モードを検出し、検出した記録モードで設定された画素数をパラメータ値として設定してよい。他のパラメータ種が入力された場合も同様に各々のパラメータ種に応じてパラメータ値を設定する。
【００５３】
ステップ１０８では、パラメータ値設定部１６が、入力されたパラメータ種に対応する閾値を記憶部１８に記憶されたパラメータ種と閾値との対応関係から求め、求めた閾値及びパラメータ値を切換部１４へ出力する。
【００５４】
ステップ１１０では、切換部１４において、入力されたパラメータ値と閾値とを比較し、比較結果に基づいて静止画処理モードとして処理すべきか動画処理モードとして処理すべきかを判断する。なお、パラメータ種が輝度の場合には、分割画像２８毎に判断する。
【００５５】
例えば、パラメータ種が画素数の場合、画素数が閾値以上の場合には動画処理モードとして処理すべきと判断し、閾値未満の場合には静止画処理モードとして処理すべきと判断する。このように画素数に応じて処理を切換えることにより、画素数に応じて適切に動画像信号を処理することができ、例えば処理負荷を低減することができる。
【００５６】
また、パラメータ種が電力能力としてのバッテリーの容量又は消費電力の場合、電力能力が閾値以上の場合には動画処理モードとして処理すべきと判断し、閾値未満の場合には静止画処理モードとして処理すべきと判断する。また、パラメータ種が電力能力としてのバッテリーの残量の場合、電力能力が閾値以上の場合には静止画処理モードとして処理すべきと判断し、閾値未満の場合には動画処理モードとして処理すべきと判断する。このように電力能力に応じて処理を切換えることにより、電力能力に応じて適切に動画像信号を処理することができ、例えば消費電力を抑制して長時間撮影することが可能となる。
【００５７】
また、パラメータ種がデータ容量としてのメモリの容量の場合、データ容量が閾値以上の場合には静止画処理モードとして処理すべきと判断し、閾値未満の場合には動画処理モードとして処理すべきと判断する。また、パラメータ種がデータ容量としての画像のデータサイズの場合、データ容量が閾値以上の場合には動画処理モードとして処理すべきと判断し、閾値未満の場合には静止画処理モードとして処理すべきと判断する。このようにデータ容量に応じて処理を切換えることにより、データ容量に応じて適切に動画像信号を処理することができる。
【００５８】
また、パラメータ種がフレームレートの場合、フレームレートが閾値以上の場合には動画処理モードとして処理すべきと判断し、閾値未満の場合には静止画処理モードとして処理すべきと判断する。このようにフレームレートに応じて処理を切換えることにより、フレームレートに応じて適切に動画像信号を処理することができ、例えば処理負荷を軽減することができる。
【００５９】
また、パラメータ種が色差の場合、色差が閾値以上の場合には動画処理モードとして処理すべきと判断し、閾値未満の場合には静止画処理モードとして処理すべきと判断する。このように色差に応じて処理を切換えることにより、色差に応じて適切に動画像信号を処理することができ。
【００６０】
また、パラメータ種が輝度の場合、輝度が閾値以上の場合には、その分割画像２８は比較的重要度が高い領域とし、静止画処理モードとして処理すべきと判断し、閾値未満の場合には、その分割画像２８は比較的重要度が低い領域とし、動画処理モードとして処理すべきと判断する。例えば図４に示すように、斜線で示された領域の画像を輝度が閾値以上の分割画像２８Ｈとし、白抜きで示された領域を輝度が閾値未満の分割画像２８Ｌとした場合、分割画像２８Ｈに対しては静止画処理モードで処理させ、分割画像２８Ｌに対しては動画処理モードで処理させる。このように輝度に応じて処理を切換えることにより、画像の重要度に応じて効率よく動画像信号を処理することができる。
【００６１】
そして、静止画処理モードで処理すべきと判断された場合にはステップ１１２へ移行し、動画像信号が静止画処理部２０へ出力され、静止画処理部２０により静止画処理が実行される。
【００６２】
一方、動画処理モードで処理すべきと判断された場合には、ステップ１１４へ移行し、動画像信号が動画処理部２２へ出力され、動画処理部２２により動画処理が実行される。
【００６３】
静止画処理又は動画処理された動画像信号は出力部２４に出力される。
【００６４】
ステップ１１６では、出力部２４において、パラメータ種として輝度が設定されているか否かを判断する。そして、パラメータ種として輝度が設定されている場合には、ステップ１１８へ移行し、パラメータ種として輝度以外が設定されている場合には、ステップ１２０へ移行する。
【００６５】
ステップ１１８では、分割領域２８毎に静止画処理又は動画処理が施された分割動画像信号を合成する。そして、次のステップ１２０では、動画像信号を後段の回路へ出力する。
【００６６】
このように、本実施形態では、複数のパラメータ種の中から設定されたパラメータ種のパラメータ値を設定し、このパラメータ値に基づいて動画処理モードと静止画処理モードとを切換えるので、目的に応じて適切に動画像信号を処理することができる。
【００６７】
なお、本実施形態では、１つのパラメータ値と閾値とに基づいて静止画処理モードと動画処理モードとを切換える場合について説明したが、これに限らず、２つ以上のパラメータ値と閾値とに基づいて静止画処理モードと動画処理モードとを切換えるようにしてもよい。
【００６８】
また、本実施形態では、パラメータ種は予め定められている場合について説明したが、これに限らず、ユーザの設定により定められるようにしてもよい。
【００６９】
また、本実施形態では、パラメータ種が輝度の場合には、分割画像毎に静止画処理モードと動画処理モードとを切換える場合について説明したが、これに限らず、輝度以外の他のパラメータ、例えば色差等の画像に関するパラメータがパラメータ種の場合に、分割画像毎に静止画処理モードと動画処理モードとを切換えるようにしてもよい。
【００７０】
【発明の効果】
以上説明したように、本発明によれば、様々な目的に応じて動画像信号を適切に処理することができる、という優れた効果を有する。
【図面の簡単な説明】
【図１】画像処理装置の概略ブロック図である。
【図２】パラメータ種と閾値との対応関係を表す図である。
【図３】画像処理装置で実行される制御ルーチンのフローチャートである。
【図４】画像分割について説明するための図である。
【符号の説明】
１０  画像処理装置
１２  入力部
１４  切換部
１６  パラメータ値設定部
１８  記憶部
２０  静止画処理部
２２  動画処理部
２４  出力部
【図１】
2004297652.tif 000003
【図２】
2004297652.tif 000004
【図３】
2004297652.tif 000005
【図４】
2004297652.tif 000006