(57)【要約】  【課題】撮影画像中の人物画像の表情内容に応じた絵画調画像を作成することを可能とする。  【解決手段】画像記憶部に記憶されている撮影画像の中に含まれている顔画像を検出し（Ｓ１０３）、さらに、この検出された顔画像の表情を判別する（Ｓ１０４）。その後、この顔画像の表情の判別結果に応じて、当該顔画像を撮影画像から除いた背景画像を、絵画調背景画像に変換し（Ｓ１０５）、この変換された絵画調背景画像と当該顔画像とを合成し、この合成された絵画調画像を表示部に表示する（Ｓ１０６）。【選択図】図７
2011197999.tif 000002
【特許請求の範囲】
【請求項１】
撮影画像を記憶している画像記憶部を備えている画像処理装置において、
この画像記憶部に記憶されている撮影画像の中に含まれている、表情を備えている被写体画像を検出する被写体画像検出手段と、
この被写体画像検出手段により検出された被写体画像の表情を判別する表情判別手段と、
この表情検出手段により検出された表情に対応して、前記撮影画像から前記被写体画像を除いた背景画像を絵画調背景画像に変換する画像変換手段と、
前記画像記憶部に記憶されている被写体画像と前記画像変換手段により変換された絵画調背景画像とを合成し、この合成された絵画調画像を作成する絵画調画像作成手段と、
を備えていることを特徴とする画像処理装置。
【請求項２】
前記表情検出手段は、前記被写体画像の中の口元画像に基づいて表情を判別することを特徴とする請求項１記載の画像処理装置。
【請求項３】
前記表情検出手段は、前記口元画像の形状に基づいて表情を判別することを特徴とする請求項２記載の画像処理装置。
【請求項４】
前記表情検出手段は、前記被写体画像の中の口元画像及び目元画像の形状の組合せに基づいて表情を判別することを特徴とする請求項１記載の画像処理装置。
【請求項５】
撮影画像を記憶している画像記憶部を備えている画像処理装置に用いられる画像処理方法において、
この画像記憶部に記憶されている撮影画像の中に含まれている、表情を備えている被写体画像を検出する被写体画像検出ステップと、
この被写体画像検出ステップにより検出された被写体画像の表情を判別する表情判別ステップと、
この表情検出ステップで検出された表情に対応して、前記撮影画像から前記被写体画像を除いた背景画像を絵画調背景画像に変換する絵画調画像変換ステップと、
前記画像記憶部に記憶されている被写体画像と前記画像変換ステップにより変換された絵画調背景画像とを合成する画像合成ステップと、
を備えていることを特徴とする画像処理方法。
【請求項６】
前記表情検出ステップは、前記被写体画像の中の口元画像に基づいて表情を判別することを特徴とする請求項５記載の画像処理方法。
【請求項７】
前記表情検出ステップは、前記口元画像の形状に基づいて表情の種類を判別することを特徴とする請求項６記載の画像処理方法。
【請求項８】
前記表情検出手段は、前記被写体画像の中の口元画像及び目元画像の形状の組合せに基づいて表情を判別することを特徴とする請求項５記載の画像処理方法。
【請求項９】
撮影画像を記憶している画像記憶部、この画像記憶部に記憶されている撮影画像の中に含まれている、表情を備えている被写体画像を検出する被写体画像検出部、および、画像を表示する表示部を備えている画像処理装置において、
前記被写体画像検出部により検出された被写体画像の表情を判別する表情判別手段と、
この表情検出手段により検出された表情内容に対応して、前記撮影画像から前記被写体画像を除いた背景画像と前記撮影画像とのいずれか一方の画像を絵画調画像に変換し、この変換された絵画調画像とを前記表示部に表示させる絵画調画像表示制御手段と、
を備えていることを特徴とする画像処理装置。
【請求項１０】
前記絵画調画像表示制御手段は、前記表情検出手段により検出された表情内容に対応して、前記撮影画像の中に、特殊の画像を付加し、この付加された特殊な画像をも絵画調画像に変換し、この変換された絵画調画像を前記表示部に表示させる特殊画像表示制御手段を備えていることを特徴とする請求項９記載の画像処理装置。
【請求項１１】
撮影画像を記憶している画像記憶部、この画像記憶部に記憶されている撮影画像の中に含まれている、表情を備えている被写体画像を検出する被写体画像検出部、および、画像を表示する表示部を備えている画像処理装置に用いられる画像処理方法において、
前記被写体画像検出部により検出された被写体画像の表情を判別する表情判別ステップと、
この表情検出ステップにより検出された表情内容に対応して、前記撮影画像から前記被写体画像を除いた背景画像と前記撮影画像とのいずれか一方の画像を絵画調画像に変換し、この変換された絵画調画像とを前記表示部に表示させる絵画調画像表示制御ステップと、
を備えていることを特徴とする画像処理方法。
【請求項１２】
前記絵画調画像表示制御ステップは、前記表情検出ステップにより検出された表情内容に対応して、前記撮影画像の中に、特殊の画像を付加し、この付加された特殊な画像をも絵画調画像に変換し、この変換された絵画調画像とを前記表示部に表示させる特殊画像表示制御ステップを備えていることを特徴とする請求項１１記載の画像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影画像に基づいて絵画調画像を作成する画像処理装置及び画像処理方法に関するものである。
【背景技術】
【０００２】
撮影画像から絵画調画像に変換してくれる装置が知られている（例えば下記特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−２１３５９８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来のこうした装置の場合、撮影画像を予め定められた画像処理により絵画調画像に変換するのみであり、面白みに欠けるという問題点があった。
【０００５】
この発明は、こうした従来の問題点に鑑みてなされたものであり、撮影された被写体の表情内容を背景画像などの画像に反映することが可能な画像処理装置及び画像処理方法を得ることを目的とする。
【課題を解決するための手段】
【０００６】
前記課題を解決するため、請求項１記載の発明に係る画像処理装置は、
撮影画像を記憶している画像記憶部を備えている画像処理装置において、
この画像記憶部に記憶されている撮影画像の中に含まれている、表情を備えている被写体画像を検出する被写体画像検出手段と、
この被写体画像検出手段により検出された被写体画像の表情を判別する表情判別手段と、
この表情検出手段により検出された表情に対応して、前記撮影画像から前記被写体画像を除いた背景画像を絵画調背景画像に変換する画像変換手段と、
前記画像記憶部に記憶されている被写体画像と前記画像変換手段により変換された絵画調背景画像とを合成し、この合成された絵画調画像を作成する絵画調画像作成手段と、
を備えていることを特徴とする。
【０００７】
請求項２記載の発明に係る画像処理装置は、請求項１記載の画像処理装置において、前記表情検出手段は、前記被写体画像の中の口元画像に基づいて表情を判別することを特徴とする。
【０００８】
請求項３記載の発明に係る画像処理装置は、請求項２記載の画像処理装置において、前記表情検出手段は、前記口元画像の形状に基づいて表情を判別することを特徴とする。
【０００９】
請求項４記載の発明に係る画像処理装置は、請求項１記載の画像処理装置において、前記表情検出手段は、前記被写体画像の中の口元画像及び目元画像の形状の組合せに基づいて表情を判別することを特徴とする。
【００１０】
請求項５記載の発明に係る画像処理方法は、
撮影画像を記憶している画像記憶部を備えている画像処理装置に用いられる画像処理方法において、
この画像記憶部に記憶されている撮影画像の中に含まれている、表情を備えている被写体画像を検出する被写体画像検出ステップと、
この被写体画像検出ステップにより検出された被写体画像の表情を判別する表情判別ステップと、
この表情検出ステップで検出された表情に対応して、前記撮影画像から前記被写体画像を除いた背景画像を絵画調背景画像に変換する絵画調画像変換ステップと、
前記画像記憶部に記憶されている被写体画像と前記画像変換ステップにより変換された絵画調背景画像とを合成する画像合成ステップと、
を備えていることを特徴とする。
【００１１】
請求項６記載の発明に係る画像処理方法は、請求項５記載の画像処理方法において、前記表情検出ステップは、前記被写体画像の中の口元画像に基づいて表情を判別することを特徴とする。
【００１２】
請求項７記載の発明に係る画像処理方法は、請求項６記載の画像処理方法において、前記表情検出ステップは、前記口元画像の形状に基づいて表情の種類を判別することを特徴とする。
【００１３】
請求項８記載の発明に係る画像処理方法は、請求項５記載の画像処理方法において、前記表情検出手段は、前記被写体画像の中の口元画像及び目元画像の形状の組合せに基づいて表情を判別することを特徴とする。
【００１４】
請求項９記載の発明に係る画像処理装置は、
撮影画像を記憶している画像記憶部、この画像記憶部に記憶されている撮影画像の中に含まれている、表情を備えている被写体画像を検出する被写体画像検出部、および、画像を表示する表示部を備えている画像処理装置において、
前記被写体画像検出部により検出された被写体画像の表情を判別する表情判別手段と、
この表情検出手段により検出された表情内容に対応して、前記撮影画像から前記被写体画像を除いた背景画像と前記撮影画像とのいずれか一方の画像を絵画調画像に変換し、この変換された絵画調画像とを前記表示部に表示させる絵画調画像表示制御手段と、
を備えていることを特徴とする。
【００１５】
請求項１０記載の発明に係る画像処理装置は、請求項９記載の画像処理装置において、前記絵画調画像表示制御手段は、前記表情検出手段により検出された表情内容に対応して、前記撮影画像の中に、特殊の画像を付加し、この付加された特殊な画像をも絵画調画像に変換し、この変換された絵画調画像を前記表示部に表示させる特殊画像表示制御手段を備えていることを特徴とする。
【００１６】
請求項１１記載の発明に係る画像処理方法は、
撮影画像を記憶している画像記憶部、この画像記憶部に記憶されている撮影画像の中に含まれている、表情を備えている被写体画像を検出する被写体画像検出部、および、画像を表示する表示部を備えている画像処理装置に用いられる画像処理方法において、
前記被写体画像検出部により検出された被写体画像の表情を判別する表情判別ステップと、
この表情検出ステップにより検出された表情内容に対応して、前記撮影画像から前記被写体画像を除いた背景画像と前記撮影画像とのいずれか一方の画像を絵画調画像に変換し、この変換された絵画調画像とを前記表示部に表示させる絵画調画像表示制御ステップと、
を備えていることを特徴とする。
【００１７】
請求項１２記載の発明に係る画像処理方法は、請求項１１記載の画像処理方法において、前記絵画調画像表示制御ステップは、前記表情検出ステップにより検出された表情内容に対応して、前記撮影画像の中に、特殊の画像を付加し、この付加された特殊な画像をも絵画調画像に変換し、この変換された絵画調画像とを前記表示部に表示させる特殊画像表示制御ステップを備えていることを特徴とする。
【発明の効果】
【００１８】
本発明によれば、撮影された被写体画像の表情内容を背景画像などの画像に反映した絵画調画像を確実かつ容易に作成することができる。
【００１９】
また、本発明によれば、画像記憶部に記憶されている撮影画像の中に含まれている、表情を備えている被写体画像（例えば、口元画像等）を検出し、この検出された被写体画像に対応する絵画調背景画像を作成した上で、この作成された絵画調背景画像と被写体画像とを合成するので、面白みのある画像を作成することができる。
【００２０】
さらに、本発明によれば、被写体画像と絵画調背景画像とが合成された合成画像を表示部に表示することができる。
【図面の簡単な説明】
【００２１】
【図１】本発明の一実施の形態に係るデジタルカメラと表示装置との外観を示す図である。
【図２】同デジタルカメラと表示装置との電気的構成の概略を示すブロック構成図である。
【図３】絵画調変換基準ＲＯＭのメモリ構成図である。
【図４】撮影画像中の口元画像の一例を示す図である。
【図５】ＲＡＭのメモリ構成図である。
【図６】判別結果ＲＡＭのメモリ構成図である。
【図７】本発明の一実施の形態における絵画調画像作成処理手順を示すフローチャートである。
【図８】図７の表情判別処理における具体的な手順を示すフローチャートである。
【図９】図７の絵画調変換処理における具体的な手順を示すフローチャートである。
【図１０】笑っている人物の撮影画像の一例を示す図である。
【図１１】図１０の撮影画像に応じた絵画調画像作成処理を施したあとの絵画調画像の一例を示す図である。
【図１２】怒っている人物の撮影画像の一例を示す図である。
【図１３】図１２の撮影画像に応じた絵画調画像作成処理を施したあとの絵画調画像の一例を示す図である。
【図１４】（ａ）は図１０の撮影画像と同様な笑っている人物の撮影画像を示す図であり、（ｂ）はこの笑っている人物の撮影画像に応じた絵画調画像作成処理を施したあとの別な絵画調画像の一例を示す図である。
【発明を実施するための形態】
【００２２】
以下、本発明の実施形態について説明する。
図１は、本発明の一実施の形態に係るデジタルカメラ１と表示装置１００との外観を示す背面図である。
このデジタルカメラ１の背面には、メニューキー２、モードダイアル３、表示部４、カーソルキー５、ＳＥＴキー６等が設けられている。また、上面にはシャッターキー８、電源ボタン９が設けられている。さらに、正面側には、後述の撮像レンズを備えた撮影部１０が設けられている。このデジタルカメラ１で撮影された撮影画像などは、内蔵された後述のＲＡＭ２２またはメモリカード２４に記憶されるようになっている。
一方、表示装置１００の表面には、装着されたメモリカード２４に記憶されている撮影画像などを表示するための表示部４が設けられている。表示装置１００は、リモコン装置１０１により制御される。
【００２３】
図２は、デジタルカメラ１と表示装置１００との電気的構成の概略を示すブロック構成図である。
デジタルカメラ１は、撮像部１０とＣＰＵ１１とを備えている。前者の撮像部１０は、ＣＣＤを備えている。後者のＣＰＵ１１は、このＣＣＤにより撮像した画像を圧縮・伸張し、所定フォーマット、例えば統一規格ＤＣＦ（Design rule for Camera File system）やＪＰＥＧ（Joint Photographic Expert Group）に合致するフォーマットの画像ファイルを生成・再生する画像処理機能を備えている。
【００２４】
撮像部１０を構成しているＣＣＤの受光面には、撮像レンズ、フォーカスレンズ、絞りを通過して被写体の光学像が結像される。フォーカスレンズはＡＦモータ等からなる駆動機構に保持されており、ＣＰＵ１１からの制御信号によりＡＦドライバーが出力する駆動信号が駆動機構に供給されることにより光軸上を前後に移動する合焦動作を行う。絞りは、ＣＰＵ１１からの制御信号に基づき絞り駆動部が発生する駆動信号により駆動しＣＣＤに入射する被写体像の光量を調整する。
【００２５】
また、ＣＰＵ１１には、タイミング信号を発生するＴＧ（Timing Generator）が接続されており、このＴＧが発生したタイミング信号に基づきＶドライバー（垂直方向ドライバー）がＣＣＤを駆動し、それに伴いＣＣＤにより被写体像の輝度に応じたアナログの撮像信号が出力されユニット回路へ送られる。
【００２６】
ユニット回路は、ＣＣＤから出力された撮像信号を保持するＣＤＳと、このＣＤＳから撮像信号を供給されるアナログアンプであるゲイン調整アンプ（ＡＧＣ）と、ゲイン調整アンプで増幅され調整されたアナログの撮像信号をデジタル信号に変換するＡ／Ｄ変換器（ＡＤ）とからなり、ＣＣＤの出力信号は、ここで黒レベルを合わせてサンプリングされデジタル信号としてＣＰＵ１１に送られる。ゲイン調整アンプ（ＡＧＣ）は、ＩＳＯ感度に応じた増幅率で、ＣＤＳから供給される撮像信号を増幅する。
【００２７】
ＣＰＵ１１には、シャッターキー８を含む前記キー群をからなる入力部２１のほかに、表示部４、ＲＡＭ２２、ＲＯＭ２３、メモリカード２４が接続されている。
【００２８】
ＲＡＭ２２は作業用のメモリであり、メモリカード２４は画像記録用のメモリである。ＣＣＤからＣＰＵ１１に送られたデジタル信号である撮像信号は、ＲＡＭ２２に一時保存されるとともに、ＣＰＵ１１によって各種の画像処理が施された後、最終的には圧縮された画像データとしてメモリカード２４に記録される。なお、このメモリカード２４はカメラ本体に着脱自在なカード型のものである。
【００２９】
メモリカード２４に記録された撮影画像等は、必要に応じてＣＰＵ１１に読み出され、伸長処理、輝度信号及び色信号の付加等の処理を経てデジタルビデオ信号やアナログビデオ信号に変換され、表示部４によって表示される。また表示部４には、記録モードにおいて周期的に撮像された画像がスルー画像として表示される。
【００３０】
ＲＯＭ２３は、ＣＰＵ１１における各部の制御及びデータ処理に必要な各種の動作プログラムが記録されたプログラムＲＯＭである。このＲＯＭ２３には、前記プログラムとともに、撮影時の適正な露出値に対応するＩＳＯ感度とシャッタースピードとの組み合わせを示すプログラム線図等の各種データが格納されている。
また、ＲＯＭ２３には、背景画像を表情に対応した絵画画像形式に変換するための絵画調変換基準データが格納されている。具体的には、表情、特に顔の表情は口元に現れるため、この絵画調変換基準データは、表情に関する表情データを記憶するための表情記憶部２３１と、変換先絵画画像変換形式に関する変換先絵画画像変換形式を記憶するための変換形式記憶部２３２とに記憶されている。前者の表情記憶部２３１には口元の形状の種類及び程度を記憶しており、後者の変換形式記憶部２３２には絵画画像形式の種類及び程度を記憶している。これら口元の形状の種類及び程度と絵画画像形式の種類及び程度とは互いに対応付けて「番号」の１〜１０別に複数組記憶されている。
【００３１】
ここで、本実施形態では、口元の形状の種類として、笑い口、怒り口、哀願口及び楽しい口が挙げられ、程度としては、例えば笑い口ならば、当該笑い口の範疇に属する大笑い口、中笑い口、小笑い口その他が挙げられる。怒り口、哀願口及び楽しい口の中にも、それぞれ、その範疇に属する程度の異なる口が含まれる。図３の中で口元の形状の欄の横の程度の欄に記載されているＡ〜Ｚの符号は程度の違いを表している。この口元の形の種類及び程度は、例えば、図４に示す口元の縦サイズαと横サイズβとの比、口元に対する歯の面積比、口角の上がり下がりなどのいずれか、又は、全体若しくはその一部の組合せ等を考慮して予め決定されている。勿論、それ以外の判断要素を設定してもよい。
また、本実施形態では、絵画画像形式の種類として、水彩画調画像、水墨調画像、油絵調画像、ゴシック調画像が挙げられ、程度の変更としては、明るさやアレンジ度の変更が挙げられる。なお、図３の中で形式の欄の横の程度の欄に記載されているＡ〜Ｚの符号は絵画画像形式の変更の程度を表している。
なお、口元の程度（Ａ〜Ｚ）と絵画画像形式の程度（Ａ〜Ｚ）は一対一で対応していることが好ましい。また、口元が笑い口や楽しい口の場合には、明るい絵画画像形式とし、怒り口や哀願口の場合には、暗い絵画画像形式とすることが好ましい。
【００３２】
ＣＰＵ１１は、シャッタースピードであるＣＣＤの電荷蓄積時間や、前記絞りの開放度、前記ユニット回路のゲイン調整アンプ（ＡＧＣ）のゲインの制御によるＡＥ制御を行うとともに、所定のプログラムに従い、フォーカスレンズを駆動するＡＦ（オートフォーカス）制御、ＡＷＢ（オートホワイトバランス）制御を行う。メモリカード２４は、撮影された撮影画像などを記憶する。
【００３３】
ＲＡＭ２２内には、図５に示す絵画調変換データエリア２２１が設けられている。この絵画調変換データエリア２２１には、第１記憶部２２２、第２記憶部２２３、第３記憶部２２４、第４記憶部２２７、及び第５記憶部２２９が設けられている。
このうち第１記憶部２２２には、撮影された撮影画像が記憶される。また、第２記憶部２２３には、撮影画像から輪郭抽出された、表情を備えている被写体画像である人物画像と、残りの背景画像とが区別して記憶される。また、第３記憶部２２４には、人物画像から輪郭抽出された口元画像が記憶される。また、第４記憶部２２７には、背景画像を所定の絵画画像形式で変換した後の絵画調背景画像と、当該絵画調背景画像の座標位置が記憶される。また、第５記憶部２２９には、人物画像と絵画調背景画像とを合成した後の合成画像が記憶される。
なお、第４記憶部２２４内の位置座標は、絵画調背景画像の全域内の全てのドットの座標、絵画調背景画像のみの座標、その他、複数点の座標等、当該絵画調背景画像中における位置を特定できる複数の座標であれば、どのような座標であってもよい。
【００３４】
また、ＲＡＭ２２内には、図６に示すように、表情の判別結果と変換先絵画画像形式の判別結果とを対応付けて記憶するデータエリア２２６が設けられている。このデータエリア２２６には、撮影番号、口元の形状の種類・程度、変換先絵画画像形式の種類・程度が記憶される。
【００３５】
一方、表示装置１００は、撮影部１０を除き、デジタルカメラ１の構成と同様な構成を備えている。したがって、表示装置１において撮影部１０と同様な構成部分については同一符号を付し、その説明は省略する。この表示装置１００は、リモコン装置１０１のリモコン操作により制御される。
【００３６】
以上の構成に係る本実施の形態において、デジタルカメラ１はＣＰＵ１１がＲＯＭ２３に格納されているプログラムに従って処理を実行することにより、図７のフローチャートに示す絵画調画像作成処理を実行する。
【００３７】
すなわち、使用者がこのデジタルカメラ１を携帯し、例えば、被写体として、背景を富士山とし、前面を人物とするシーンのもとでシャッターキー８を押下すると、ＣＰＵ１１は撮影処理を開始し、撮影部により、図１０に示したように富士山画像６aと人物画像６ｂとからなる撮影画像６を取得する（ステップＳ１０１）。
【００３８】
次に、ＣＰＵ１１は、この取得された撮影画像６をＲＡＭ２２における第１記憶部２２２に記憶させるとともに、撮影画像表示処理を実行して、表示部４に撮影した撮影画像６を表示させる（ステップＳ１０２）。これにより、表示部４には、図１０に示した撮影画像６が表示される。
【００３９】
引き続き、ＣＰＵ１１は、撮影画像６の中に存在する人物画像を検出する（ステップＳ１０３）。この人物画像検出は、公知の人物画像検出技術を用いて行う。人物画像検出が終了すると、ＣＰＵ１１は、その人物画像６ｂと、撮影画像から当該人物画像６ｂを取り除いた背景画像６ａをＲＡＭ２２内における第２記憶部２２３に記憶させる。
【００４０】
その後に、ＣＰＵ１１は、人物画像の表情判別処理を行う（ステップＳ１０４）。
この表情判別処理は、具体的には、図８に示す表情判別処理のフローチャートに従って行われる。
すなわち、ＣＰＵ１１は、人物画像の中から図４に示されるような口元画像を検出する（ステップＳ１０４１）。この口元画像検出は、公知の口元画像検出技術を用いて行う。  次に、ＣＰＵ１１は、この口元画像検出による口元画像をＲＡＭ２３の第３記憶部２２４に記憶させる（ステップＳ１０４２）とともに、図４に示す口元の縦サイズαと横サイズβとの比、口元に対する歯の面積比、口角の上がり下がりなどを考慮して口元の形状の種類及び程度を判別する（ステップＳ１０４３）。口元に対する歯の面積比は、たとえば、口元の全体画像の面積に対する歯の面積（斜線で示している面積）の比率である。
そして、ＣＰＵ１１は、この判別結果をＲＡＭ２３に記憶させ（ステップＳ１４０４）、表情判別処理を終了させる。
【００４１】
次に、図７のフローチャートに戻り、ＣＰＵ１１は、前述した表情判別処理による判別結果を示す口元の形状の種類及び程度に対応した変換先画像形式の種類及び程度に基づき絵画調変換処理を行う（ステップＳ１０５）。
この絵画調変換処理は、具体的には、図９に示す絵画調変換処理のフローチャートに従って行われる。
すなわち、ＣＰＵ１１は、前述した表情判別処理による判別結果に従って、ＲＯＭ２３の絵画調変換基準データを記憶している表情記憶部２３１を参照し、口元の形状の種類及び程度を検索し、次に、変換先絵画画像変換形式に関する変換先絵画画像変換形式を記憶するための変換形式記憶部２３２を参照し、口元の形状の種類及び程度の判別結果に対応する変換先絵画画像形式の種類及び程度を変換形式記憶部２３２から読み出す（ステップＳ１０５１）。
次に、ＣＰＵ１１は、その読み出した変換先絵画画像形式の種類及び程度を図６の判別結果ＲＡＭ２２に記憶させる（ステップＳ１０５２）。
次に、この変換先絵画画像形式の種類及び程度に従って、ＲＡＭ２２から読み出した背景画像を変換処理する（ステップＳ１０５３）。そして、ＣＰＵ１１は、この変換処理して得られた絵画調背景画像と、当該絵画調背景画像の座標位置を第４記憶部２２７に記憶させる（ステップＳ１０５４）。
続いて、ＣＰＵ１１は、この絵画調背景画像と、第２記憶部２２３から読み出した人物画像とを当該画像に対応して記憶されている各座標位置に従って合成する（ステップＳ１０５５）。そして、ＣＰＵ１１は、この合成した画像を絵画調画像としてＲＡＭ２２の第５記憶部２２９に記憶させ（ステップＳ１０５６）、絵画調変換処理を終了させる。
【００４２】
続いて、再び図７のフローチャートに戻り、ＣＰＵ１１は、合成された絵画調画像を表示部４に表示させ（ステップＳ１０６）、絵画調画像作成処理を終了させる。
【００４３】
図１０には笑い口をした人物画像６ｂを含む撮影画像６が示されている。この笑い口をした人物画像６ｂの表情内容に応じた明るい色彩、明るい筆タッチ等の絵画調画像作成処理を施したあとの絵画調背景画像６Ａが図１１に示されている。なお、この図１１に示す絵画調画像６Ａにあっては、撮影画像６には含まれていない太陽Ｔを含ませて、全体として明るい色彩の絵画調背景画像６Ａをさらに明るくした背景画像としてもよい。
一方、図１２には怒り口をした人物画像６ｂを含む撮影画像６が示されている。この怒り口をした人物画像６ｂの表情内容に応じた暗い色彩、暗い筆タッチ等の絵画調画像作成処理を施したあとの絵画調背景画像６Ｂが図１３に示されている。この図１３に示す絵画調画像６Ｂにあっては、撮影画像６に怪しい雲Ｋを含ませて、全体として暗い色彩の絵画調背景画像６Ｂをさらに暗くした背景画像としてもよい。
【００４４】
以上のような実施の形態によれば、記憶されている撮影画像の中に含まれている人物画像の顔の表情を検出し、この顔の表情内容に対応する絵画調背景画像を作成した上でこの作成された絵画調背景画像と人物画像とを合成することができるので、顔の表情内容に対応する絵画調背景画像を含む、面白みのある絵画調画像を迅速且つ確実に得ることができる。
【００４５】
また、この表示させた絵画調画像をメモリカード２４に記憶し、この記憶されたメモリカード２４を表示装置１００に装着すれば、大画面の表示部４により、合成画像を観賞することもできる。
【００４６】
以上、本発明の実施形態について説明したが、本発明は、かかる実施形態に限定されるものではないことは言うまでもない。
例えば、表示部４の画面上に、合成画像を表示させた後、或いはその前に、使用する変換先画像形式の種類及び程度を表示し、必要であれば、入力部２１からの入力によって、それらを変更できるようにしておき、ＣＰＵ１１が、その入力した変換先画像形式の種類及び程度に従って、ステップＳ１０５〜Ｓ１０９までの処理を実行するようにしておいてもよい。このようにすれば、使用者は所望の画像を得られることになる。
【００４７】
また、上記実施形態では、口元画像に基づいて表情を判別することとしたが、表情が比較的現れやすい目元の画像をも加味して表情を判別するようにしてもよい。この場合、目が吊り上がっているか、垂れ下がっているか等を考慮する。
【００４８】
さらには、上記実施形態では、撮影画像中の人物画像の表情内容に基づいて、撮影画像中の背景画像のみを絵画調に変換した絵画調背景画像と、絵画調に変換していない人物画像とを合成し、この合成された絵画調画像を表示させるようにしているが、図１４に示すように、撮影画像６の中の人物画像６ｂの表情内容に基づいて、当該人物画像６ｂと背景画像６aとを含む撮影画像６全体を絵画調画像に変換し、この変換された絵画調人物画像６Ｃと絵画調背景画像６Ａを含む絵画調画像を表示させる機能を併せ持つものとしてもよい。この場合には、絵画調人物画像６Ｃと絵画調背景画像６Ａを含む撮影画像６全体が絵画調に変換されるので、さらに、意外性に富んだ絵画調画像を得ることができる。
【００４９】
なお、本実施の形態においては、本発明をデジタルカメラに適用した場合を示したが、デジタルカメラに限らず、携帯電話等の他の電子機器に適用するようにしてもよい。
また、本実施の形態においては、表情を備えている被写体画像として、人物画像の表情を判別しているが、動物画像、似顔絵画像、キャラクタ、アバター画像（化身画像）、仮想生命体画像など、表情を備えている被写体画像の表情を判別し、この表情の判別結果に基づいて、撮影画像中の背景画像などを絵画調に変換し、この変換された絵画調画像を表示させるようにしてもよい。
【符号の説明】
【００５０】
１    デジタルカメラ
４    表示部
１０    撮像部
１１    ＣＰＵ
２４    メモリカード
【図１】
2011197999.tif 000003
【図２】
2011197999.tif 000004
【図３】
2011197999.tif 000005
【図４】
2011197999.tif 000006
【図５】
2011197999.tif 000007
【図６】
2011197999.tif 000008
【図７】
2011197999.tif 000009
【図８】
2011197999.tif 000010
【図９】
2011197999.tif 000011
【図１０】
2011197999.tif 000012
【図１１】
2011197999.tif 000013
【図１２】
2011197999.tif 000014
【図１３】
2011197999.tif 000015
【図１４】
2011197999.tif 000016