(57)【要約】【課題】  人物の顔を含む画像データの良好な補正を行うことができ、画像データの補正の際に、複数のＣＰＵがなくとも短い処理時間で補正を行うことができる画像処理装置を提供すること。【解決手段】  特定の色を指定する特定色指定手段と、画像データ内の指定された特定色を検出する特定色検出手段と、種々の画像パターンを記憶する画像パターン記憶手段と、前記画像パターンを前記画像データにマッチングし、前記画像データ内の画像処理領域を設定する画像処理領域設定手段と、前記特定色検出手段及び前記画像処理領域設定手段により設定された画像処理領域内で、前記特定色検出手段により検出された特定色以外の色を検出する非特定色検出手段と、前記特定色以外の色領域に種々の補正を行う補正手段と、を有する画像処理装置１であって、前記補正手段は、前記特定色以外の色の領域をその近傍の特定色で置換することにより補正する。【選択図】      図２
2006065688.tif 000002
【特許請求の範囲】
【請求項１】
特定の画像を含む画像データに基づき、特定の色を指定する特定色指定手段と、
前記画像データ内の前記特定色指定手段により指定された特定色を検出する特定色検出手段と、
種々の画像パターンを記憶する画像パターン記憶手段と、
前記画像パターン記憶手段に記憶された画像パターンを前記画像データにマッチングし、前記画像データ内の画像処理領域を設定する画像処理領域設定手段と、
前記特定色検出手段及び前記画像処理領域設定手段により設定された画像処理領域内で、前記特定色検出手段により検出された特定色以外の色を検出する非特定色検出手段と、
前記非特定色検出手段により検出された特定色以外の色領域に種々の補正を行う補正手段と、を有する画像処理装置であって、
前記補正手段は、前記非特定色検出手段により検出された前記特定色以外の色の領域をその近傍の特定色で置換することにより補正することを特徴とする画像処理装置。
【請求項２】
前記特定の画像とは、人物の顔の画像であり、前記特定色はスキントーンであることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記画像パターン記憶手段には、人物の顔のパターンが記憶されていることを特徴とする請求項１に記載の画像処理装置。
【請求項４】
前記非特定色検出手段は、人物の顔を含む画像データから、前記特定色検出手段によりスキントーンの領域を検出し、更に前記画像処理領域設定手段により前記画像パターン記憶部内の人物の顔のパターンを前記画像データにマッチングすることにより特定色以外の色を検出することを特徴とする請求項１に記載の画像処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は受信した画像データを処理する画像処理装置に関し、特に人物の顔画像を含む画像データに対し、顔部分の補正を行う画像処理装置に関する。
【背景技術】
【０００２】
デジタルカメラ等により撮像された画像データをパソコン上に表示し、種々の補正を行うことが従来から行われている。特に人物の顔を含む画像データに関しては、例えばその画像データに化粧を施した状態のシミュレーション画像を実際に行う前に表示することで出来上がりを推測したり、シミやしわを取り除くことによって実物よりも美しい画像データを残したりすることができるため、その利用価値も高く、よってより高精度な画像補正方法の実現が望まれている。
【０００３】
ところで、ビデオカメラにおいては、ＣＣＤなどの撮像素子の特性劣化を補償したり、鮮鋭度を高めるために、撮像信号に対して輪郭強調処理が施されている。そのため、人の顔などを撮影する場合に肌の荒れやしわ、シミなどが強調されることがあり、肌色の領域を検出してその領域の輪郭強調量を減らしたり、周波数特性を落とすことが従来から知られている。
【０００４】
しかしながら、特定色検出領域で輪郭強調のためのディテール量を低減させると、例えば肌の荒れやしわ、シミなどが不必要に強調されないソフトな映像が得られるが、検出領域境界のディテール量も低減し、顔などの輪郭がぼやけるとともに、低減させるディテール量が必要以上に大きく設定されていると、本来画質を保つために低減すべきではない顔などの輪郭のディテールも低減し輪郭がぼやけてしまうという問題があり、さらに特定色検出領域の境界を挟んで急激にディテール量が変化するので、境界付近の画質の変化が急激で不自然な画像データになるという問題があった。
【０００５】
下記特許文献１（特開２０００−１５２２６８号公報）に記載の映像信号処理装置は、上述の問題点を解決するための映像信号処理装置であって、入力映像信号に対して特定の色を指定するための特定色指定手段と、前記入力映像信号に対して前記特定色指定手段により指定される特定色を検出する特定色検出手段と、前記入力映像信号より高周波成分を抽出する高周波成分抽出手段と、該抽出された高周波成分の映像信号に対して、ノイズスライスレベル以下の信号を除去するノイズ除去手段と、前記特定色検出手段の出力に基づいて特定色検出領域における前記ノイズスライスレベルを可変制御する制御手段と、前記特定色検出領域と前記検出された特定色以外の領域との境界部分で、前記ノイズスライスレベルがなだらかに変化するように処理する平滑化手段と、前記ノイズ除去手段の出力信号を入力映像信号に加算して出力する加算手段とを備えている。
【０００６】
上述の構成によれば、入力映像信号より高周波成分が抽出され、該抽出された高周波成分の映像信号に対して、ノイズスライスレベル以下の信号を除去する処理が施され、入力映像信号に加算される。これによりノイズ抑圧をしながら輪郭部が強調される。ここでノイズスライスレベルは、制御手段により特定色が検出された領域で可変制御可能であるので、特定色が検出された領域でノイズスライスレベルを特定色以外の領域より大きくすることにより、特定色検出領域のディテールを減少させ、滑らかな画像とすることができる。さらに、特定色検出領域と特定色以外の領域との境界部分で、ノイズスライスレベルがなだらかに変化するように処理されるので、特定色検出領域の輪郭部がぼけることが防止され、明瞭な輪郭部を維持することができ、かつ特定色領域の境界付近でのディテール量の変化をゆるやかにすることで不自然な画質の変化を防止できる。
【０００７】
【特許文献１】特開２０００−１５２２６８号公報（請求項２、段落［０００３］、［０００７］、［００２５］）
【発明の開示】
【発明が解決しようとする課題】
【０００８】
しかしながら、上記特許文献１に記載の映像信号処理装置は、特定色及びその領域全体を一括して画像処理を行うことから、処理時間が長時間となる。これは、その比較的広い処理領域を複数の比較的小さな領域に分割し、複数のＣＰＵを用いて並列処理を行えば前記処理時間を短縮することも可能であるが、それには高価なＣＰＵを複数準備しなければならない。
【０００９】
そこで、本発明者らは上記問題点に鑑み、画像の品質を落とすことなく、かつ処理時間を短縮できる画像処理装置を種々検討した結果、上述のようにその処理領域を顔全体とすることなく、スポット的にシミやしわを補正できれば、複数のＣＰＵを用いた並列処理を行うことなく良好な画像補正を行うことができることを見出し、本発明に至ったものである。
【００１０】
すなわち本発明の目的は、人物の顔を含む画像データの良好な補正を行うことができる画像処理装置を提供することである。
【００１１】
また、本発明の他の目的は、画像データの補正の際に、複数のＣＰＵがなくとも短い処理時間で補正を行うことができる画像処理装置を提供することにある。
【課題を解決するための手段】
【００１２】
上記目的を達成するために、請求項１に記載の画像処理装置は、特定の画像を含む画像データに基づき、特定の色を指定する特定色指定手段と、
前記画像データ内の前記特定色指定手段により指定された特定色を検出する特定色検出手段と、
種々の画像パターンを記憶する画像パターン記憶手段と、
前記画像パターン記憶手段に記憶された画像パターンを前記画像データにマッチングし、前記画像データ内の画像処理領域を設定する画像処理領域設定手段と、
前記特定色検出手段及び前記画像処理領域設定手段により設定された画像処理領域内で、前記特定色検出手段により検出された特定色以外の色を検出する非特定色検出手段と、
前記非特定色検出手段により検出された特定色以外の色領域に種々の補正を行う補正手段と、を有する画像処理装置であって、
前記補正手段は、前記非特定色検出手段により検出された前記特定色以外の色の領域をその近傍の特定色で置換することにより補正することを特徴とする。
【００１３】
また、請求項２に記載の発明は、請求項１に記載の画像処理装置に係り、前記特定の画像とは、人物の顔の画像であり、前記特定色はスキントーンであることを特徴とする。
【００１４】
また、請求項３に記載の発明は、請求項１に記載の画像処理装置に係り、前記画像パターン記憶手段には、人物の顔のパターンが記憶されていることを特徴とする。
【００１５】
また、請求項４に記載の発明は、請求項１に記載の画像処理装置に係り、前記非特定色検出手段は、人物の顔を含む画像データから、前記特定色検出手段によりスキントーンの領域を検出し、更に前記画像処理領域設定手段により前記画像パターン記憶部内の人物の顔のパターンを前記画像データにマッチングすることにより特定色以外の色を検出することを特徴とする。
【発明の効果】
【００１６】
請求項１の発明によれば、特定色検出手段及び画像処理領域設定手段により画像処理の対象となる処理領域を検出し、この検出した領域内に前記特定色指定手段により指定された特定色と異なる色の領域を前記非特定色検出手段で検出し、その異なる色の領域を補正することにより、処理領域と設定された領域内の特定色以外の色要素を削除する事ができるようになる。
【００１７】
請求項２、３の発明によれば、人物の顔を含む画像データを、画像パターン記憶部に記憶された人物の顔パターンをマッチングして処理領域を確定し、更に非特定色検出手段によりスキントーン以外の色を検出すれば、画像データ内の人物のシミやしわを検出することができ、これを補正することによりシミやしわを除去した人物の顔を含む画像データを得ることができるようになる。
【００１８】
請求項４の発明によれば、特定色検出手段でスキントーンの領域を検出したのち、画像処理領域設定手段により人物の顔のパターンをマッチングすることによって、画像パターン記憶手段に記憶されている顔のパターンのうちスキントーンであるべき部分と、前記特定色検出手段で検出されたスキントーンの領域とを比較することができ、よってスキントーンであるべき部分の中に、スキントーンではない部分があれば直ちにシミあるいはしわと判断することができるため、簡単な方法で高精度にシミ等の検出を行うことができるようになる。
また、前記画像処理領域設定手段で人物の顔のパターンを画像データにマッチングするため、補正を行ってはいけない部分（例えば眉、顔の輪郭等）が補正されることを防止することができるようになる。
【発明を実施するための最良の形態】
【００１９】
以下、図面を参照して本発明の最良の実施形態を説明する。ただし、以下に示す実施形態は、本発明の技術思想を具体化するための画像処理装置を例示するものであって、本発明をこれらに特定することを意図するものではなく、特許請求の範囲に含まれるその他の実施形態のものも等しく適応し得るものである。
【実施例】
【００２０】
図１は、本発明の画像処理装置の構成を示すブロック図、図２は、本発明の画像処理装置に供給される画像データの色補正処理の工程を示すフローチャート、図３は、不特定色の領域を拡大して示す図である。
【００２１】
本発明の画像処理装置１は、スキャナ部１０、ＦＡＸ部１５、エンジン部２０、ユーザー操作部２５、ＨＤＤ（ハードディスクドライブ）３０、プリンタコントローラ３５、及び制御部４０から構成されており、スキャナ部１０は画像をスキャニングするための画像読み取りＣＣＤ１１と、画像の読み取り方向を探知するＤＦ（Ｄｉｒｅｃｔｉｏｎ  Ｆｉｎｄｅｒ）１２とを有しており、ＦＡＸ部１５はその内部にモデム１６を有し、ＮＣＵ（Ｎｅｔｗｏｒｋ  Ｃｏｎｔｒｏｌ  Ｕｎｉｔ）１７を介して公衆回線５０に接続され、画像データの送受信を行う。
【００２２】
エンジン部２０は画像処理装置１に供給された画像の出力エンジンであり、レーザーにより画像を走査するレーザー走査部２１を有している。ユーザー操作部２５はキー入力部２６と、液晶表示部２７と、ＬＥＤ表示部２８とを有し、画像処理装置１の各種設定を変更可能な部分である。ＨＤＤ３０は画像処理装置１の設定等を記憶する不揮発性メモリであり、プリンタコントローラ３５はＬＡＮ（Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）等からなるネットワーク５１に接続され、ネットワーク５１内のＰＣから送信されるデータ等を受信し、前記各ＰＣ５２に種々のデータを送信するようになっており、また、必要に応じて画像処理装置１を管理するための管理ＰＣ３６等が接続される。
【００２３】
制御部４０は画像処理装置１に供給される各種データの制御を行う部分であり、供給された複数のジョブを管理するジョブ管理部４１と、供給された画像データに種々の画像処理を施す画像処理部４２とを有している。また、制御部４０は、スキャナ部１０、ＦＡＸ部１５、エンジン部２０、ユーザー操作部２５、ＨＤＤ３０、及びプリンタコントローラ３５にインターフェース（Ｉ／Ｆ）４３を介して接続されており、前記スキャナ部１０等の各部によって処理される画像データはすべて制御部４０によって種々の制御が行われている。
【００２４】
次に、本発明の画像処理装置による画像補正の工程を図２を参照して以下に説明する。ただし、ここで行う画像処理は人物の顔を含む画像データにおける人物のシミあるいはしわ等をなくするための補正について説明するが、本発明の人物のシミあるいはしわの補正に限定するものではなく、他の種々の補正に関しても適応可能であることは当業者にとり自明であろう。
【００２５】
先ず、図２に示すように、ステップＳ１で画像処理装置１が画像データを受信すると、ビットマップ展開を行う等所定の画像処理を行った後に、ステップＳ２において画像データの色補正を行うか否かを認識し、色補正を行わない場合は、通常の出力処理に移行し、色補正を行う場合はステップＳ３に移行する。このとき色補正を行うか否かの設定は、例えばユーザー操作部２５による操作によって設定される。
【００２６】
ステップＳ２において色補正を行うと判断されると、ステップＳ３においてユーザー操作部２５あるいはネットワーク５１を介して接続されているＰＣ５２等により、色補正の基準となる特定色（本実施例ではスキントーン）を設定する。ちなみに、スキントーンの設定は、その被写体ごとに基準とすべき色が異なるため、画像データから抽出したスキントーンを基準として以降の処理を行うことが好ましく、また、そのスキントーンに関しても所定の色の幅を有するため、その色の幅の設定も同様に行えばより良好な補正処理が行えるようになる。そして、ステップＳ４において画像データ内のスキントーンで描かれている部分を検出する。次にステップＳ５において、ＨＤＤ３０内に予め記憶されている画像データの画像パターン（本実施例では人物の顔のパターン）を呼び出し、画像データ内の顔の画像情報から最もふさわしい顔のパターンを選出し、画像データにマッチングする。
【００２７】
ステップＳ６は、前記ステップＳ４、Ｓ５において検出された画像データ内の特定色の領域及び顔のパターンのマッチング結果を用いて非特定色領域を検出するステップである。この検出方法は、顔のパターンをマッチングした結果、スキントーンであるべき領域と判断された領域内で、かつステップＳ４で検出された特定色領域に該当しない部分を非特定色領域として判断するものである。
【００２８】
前記ステップＳ６で非特定色領域が検出されると、ステップＳ７において前記非特定色部分の補正を行う。この補正方法は、図３に示すように非特定色領域と判断された画素Ｄ'をその周辺の画素Ｄ（図３では画素Ｄ'に近接する上下の画素）で置換するものであり、このように近傍の画素で置換すれば、極端にスキントーンが変化することなく、平滑な補正を行うことができる。
【００２９】
また、より滑らかな画像を得るために、前述の補正を行った後にローパスフィルタを用いた高周波成分の除去を行うようになしてもよい。このようにフィルタリングを行うことにより、周波数の変化を穏やかにすることができ、結果として滑らかで自然な補正を行うことができるようになる。
【００３０】
上述のように、本発明の画像処理装置は、供給された画像データに特定色の領域を検出し、更に画像パターンをマッチングさせることにより、補正対象となる非特定色領域を検出することができるため、従来のように画像データ全体を補正する必要がなく、スポット的な補正が可能となることから、複数のＣＰＵを用いなくとも短時間での画像の補正を行うことができる。
【図面の簡単な説明】
【００３１】
【図１】図１は、本発明の画像処理装置の構成を示すブロック図、
【図２】図２は、本発明の画像処理装置に供給される画像データの色補正処理の工程を示すフローチャート、
【図３】図３は、不特定色の領域を拡大して示す図。
【符号の説明】
【００３２】
１        画像処理装置
１０      スキャナ部
１５      ＦＡＸ部
２０      エンジン部
２５      ユーザー操作部
３０      ＨＤＤ
３５      プリンタコントローラ
４０      制御部
４２      画像処理部
【図１】
2006065688.tif 000003
【図２】
2006065688.tif 000004
【図３】
2006065688.tif 000005