(57)【要約】【課題】ユーザが興味を持つように撮像時の状況を表現した画像を生成する撮像装置及びプログラムを提供する。【解決手段】本発明に係る撮像装置は、画像データ取得部が取得した撮像画像データが表す撮像画像の中で所定の基準を満たす被写体像を特定するとともに、特定した被写体像の特徴を特定する特徴特定部と、対応表を参照し、特徴特定部が特定した被写体像の特徴に基づいて、この特徴に対応する画像処理の処理内容を特定する処理内容特定部と、処理内容特定部が特定した処理内容で、画像データ取得部が取得した撮像画像データが表す撮像画像に対して画像処理を施す画像処理部と、を有する。【選択図】図３
2011176625.tif 000002
【特許請求の範囲】
【請求項１】
撮像部と、
前記撮像部が撮像した撮像画像を表す撮像画像データを取得する画像データ取得手段と、
前記画像データ取得手段が取得した前記撮像画像データが表す撮像画像の中で所定の基準を満たす被写体像を特定するとともに、特定した被写体像の特徴を特定する特徴特定手段と、
前記被写体像の特徴と画風を変更する画像処理の処理内容との対応関係を記録した対応表を参照し、前記特徴特定手段が特定した前記被写体像の特徴に基づいて、この特徴に対応する前記画像処理の処理内容を特定する処理内容特定手段と、
前記処理内容特定手段が特定した前記処理内容で、前記画像データ取得手段が取得した前記撮像画像データが表す前記撮像画像に対して前記画像処理を施す画像処理手段と、
を備えることを特徴とする撮像装置。
【請求項２】
前記画像処理手段は、前記撮像画像内の前記被写体像を少なくとも含む所定領域に対して前記画像処理を施す、
ことを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記特徴特定手段は、前記被写体像を複数特定するとともに、前記複数の被写体像の特徴をそれぞれ特定し、
前記処理内容特定手段は、前記対応表を参照し、前記複数の被写体像それぞれについて、前記特徴特定手段が特定した前記被写体像の特徴から前記処理内容を特定し、
前記画像処理手段は、前記複数の被写体像それぞれを少なくとも含む各所定領域に対して、それぞれ、前記処理内容特定手段が特定した前記処理内容で前記画像処理を施す画像処理手段と、
を備えることを特徴とする請求項１又は２に記載の撮像装置。
【請求項４】
撮像部と、
前記撮像部が撮像した第１撮像画像及び第２撮像画像をそれぞれ表す第１撮像画像データ及び第２撮像画像データを取得する画像データ取得手段と、
前記画像データ取得手段が取得した前記第１撮像画像データが表す第１撮像画像の中で所定の基準を満たす被写体像を特定するとともに、特定した被写体像の特徴を特定する特徴特定手段と、
前記被写体像の特徴と画風を変更する画像処理の処理内容との対応関係を記録した対応表を参照し、前記特徴特定手段が特定した前記被写体の特徴に基づいて、この特徴に対応する前記画像処理の処理内容を特定する処理内容特定手段と、
前記処理内容特定手段が特定した前記処理内容で、前記画像データ取得手段が取得した前記第２撮像画像データが表す前記第２撮像画像に対して前記画像処理を施す画像処理手段と、
を備えることを特徴とする撮像装置。
【請求項５】
前記第１撮像画像は、前記撮像装置を使用するユーザを撮像した画像である、
ことを特徴とする請求項４に記載の撮像装置。
【請求項６】
コンピュータに、
撮像部が撮像した撮像画像を表す撮像画像データを取得する画像データ取得ステップと、
前記画像データ取得ステップで取得した前記撮像画像データが表す撮像画像の中で所定の基準を満たす被写体像を特定するとともに、特定した被写体像の特徴を特定する特徴特定ステップと、
前記被写体像の特徴と画風を変更する画像処理の処理内容との対応関係を記録した対応表を参照し、前記特徴特定ステップで特定した前記被写体像の特徴に基づいて、この特徴に対応する前記画像処理の処理内容を特定する処理内容特定ステップと、
前記処理内容特定ステップで特定した前記処理内容で、前記画像データ取得ステップで取得した前記撮像画像データが表す前記撮像画像に対して前記画像処理を施す画像処理ステップと、
を行わせることを特徴とするプログラム。
【請求項７】
コンピュータに、
撮像部が撮像した第１撮像画像及び第２撮像画像をそれぞれ表す第１撮像画像データ及び第２撮像画像データを取得する画像データ取得ステップと、
前記画像データ取得ステップで取得した前記第１撮像画像データが表す第１撮像画像の中で所定の基準を満たす被写体像を特定するとともに、特定した被写体像の特徴を特定する特徴特定ステップと、
前記被写体像の特徴と画風を変更する画像処理の処理内容との対応関係を記録した対応表を参照し、前記特徴特定ステップで特定した前記被写体の特徴に基づいて、この特徴に対応する前記画像処理の処理内容を特定する処理内容特定ステップと、
前記処理内容特定ステップで特定した前記処理内容で、前記画像データ取得ステップで取得した前記第２撮像画像データが表す前記第２撮像画像に対して前記画像処理を施す画像処理ステップと、
を行わせることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置及びプログラムに関する。
【背景技術】
【０００２】
この種の技術として、例えば、特許文献１には、撮像画像内の顔の像の特徴量に基づいて被写体の年齢、性別のいずれかに関する推論処理を実行し、推論結果に基づいて、撮影された画像に対して、露出補正、ソフトフォーカス補正、肌色の彩度を調整する美肌補正、人物を痩身にみせる補正の少なくとも１つを実行する技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００７−２８０２９１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１に記載の技術は、被写体の写り方を補正するのみの技術であり、撮影時において、撮像時の状況（被写体の種別、撮影者の種別等）をユーザが興味を持つように表現した画像を生成するものではなかった。
【０００５】
本発明は、上記のような問題点を鑑みてなされたものであり、ユーザが興味を持つように撮像時の状況を表現した画像を生成する撮像装置及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記の課題を解決するために、本発明の第１の観点に係る撮像装置は、
撮像部と、
前記撮像部が撮像した撮像画像を表す撮像画像データを取得する画像データ取得手段と、
前記画像データ取得手段が取得した前記撮像画像データが表す撮像画像の中で所定の基準を満たす被写体像を特定するとともに、特定した被写体像の特徴を特定する特徴特定手段と、
前記被写体像の特徴と画風を変更する画像処理の処理内容との対応関係を記録した対応表を参照し、前記特徴特定手段が特定した前記被写体像の特徴に基づいて、この特徴に対応する前記画像処理の処理内容を特定する処理内容特定手段と、
前記処理内容特定手段が特定した前記処理内容で、前記画像データ取得手段が取得した前記撮像画像データが表す前記撮像画像に対して前記画像処理を施す画像処理手段と、
を備える。
【０００７】
上記の課題を解決するために、本発明の第２の観点に係る撮像装置は、
撮像部と、
前記撮像部が撮像した第１撮像画像及び第２撮像画像をそれぞれ表す第１撮像画像データ及び第２撮像画像データを取得する画像データ取得手段と、
前記画像データ取得手段が取得した前記第１撮像画像データが表す第１撮像画像の中で所定の基準を満たす被写体像を特定するとともに、特定した被写体像の特徴を特定する特徴特定手段と、
前記被写体像の特徴と画風を変更する画像処理の処理内容との対応関係を記録した対応表を参照し、前記特徴特定手段が特定した前記被写体の特徴に基づいて、この特徴に対応する前記画像処理の処理内容を特定する処理内容特定手段と、
前記処理内容特定手段が特定した前記処理内容で、前記画像データ取得手段が取得した前記第２撮像画像データが表す前記第２撮像画像に対して前記画像処理を施す画像処理手段と、
を備える。
【０００８】
上記の課題を解決するために、本発明の第３の観点に係るプログラムは、
コンピュータに、
撮像部が撮像した撮像画像を表す撮像画像データを取得する画像データ取得ステップと、
前記画像データ取得ステップで取得した前記撮像画像データが表す撮像画像の中で所定の基準を満たす被写体像を特定するとともに、特定した被写体像の特徴を特定する特徴特定ステップと、
前記被写体像の特徴と画風を変更する画像処理の処理内容との対応関係を記録した対応表を参照し、前記特徴特定ステップで特定した前記被写体像の特徴に基づいて、この特徴に対応する前記画像処理の処理内容を特定する処理内容特定ステップと、
前記処理内容特定ステップで特定した前記処理内容で、前記画像データ取得ステップで取得した前記撮像画像データが表す前記撮像画像に対して前記画像処理を施す画像処理ステップと、
を行わせる。
【０００９】
上記の課題を解決するために、本発明の第４の観点に係るプログラムは、
コンピュータに、
撮像部が撮像した第１撮像画像及び第２撮像画像をそれぞれ表す第１撮像画像データ及び第２撮像画像データを取得する画像データ取得ステップと、
前記画像データ取得ステップで取得した前記第１撮像画像データが表す第１撮像画像の中で所定の基準を満たす被写体像を特定するとともに、特定した被写体像の特徴を特定する特徴特定ステップと、
前記被写体像の特徴と画風を変更する画像処理の処理内容との対応関係を記録した対応表を参照し、前記特徴特定ステップで特定した前記被写体の特徴に基づいて、この特徴に対応する前記画像処理の処理内容を特定する処理内容特定ステップと、
前記処理内容特定ステップで特定した前記処理内容で、前記画像データ取得ステップで取得した前記第２撮像画像データが表す前記第２撮像画像に対して前記画像処理を施す画像処理ステップと、
を行わせる。
【発明の効果】
【００１０】
本発明に係る撮像装置及びプログラムによれば、ユーザが興味を持つように撮像時の状況を表現した画像が生成される。
【図面の簡単な説明】
【００１１】
【図１】本発明の実施形態１に係る撮像装置の構成を説明するための図である。
【図２】本発明の実施形態１に係る撮像装置のハードウェア構成を説明するための図である。
【図３】本発明の実施形態１に係る撮像装置が行う撮像処理（１）のフローチャートである。
【図４】本発明の実施形態１に係る撮像装置が撮像した撮像画像（静止画像）を示す図である。
【図５】撮像処理（１）において使用される対応表の一例を示す図である。
【図６】図３のフローチャートの画像処理のより詳しいフローチャートである。
【図７】本発明の実施形態１に係る撮像装置によって画像処理が施された処理後画像を示す図である。
【図８】本発明の実施形態２に係る撮像装置が行う撮像処理（２）のフローチャートである。
【図９】本発明の実施形態２に係る撮像装置によって画像処理が施された処理後画像を示す図である。
【発明を実施するための形態】
【００１２】
本発明に係る実施形態について図面を参照して説明する。なお、本発明は下記の実施形態及び図面によって限定されるものではない。下記の実施形態及び図面に変更（構成要素の削除も含む）を加えることができるのはもちろんである。また、以下の説明では、本発明の理解を容易にするために、重要でない公知の技術的事項の説明を適宜省略する。
【００１３】
（実施形態１）
まず、本実施形態に係る撮像装置１００の構成を、図１及び図２を参照して説明する。本実施形態に係る撮像装置１００は、デジタルカメラである。
【００１４】
撮像装置１００は、制御部１１０と、Ｉ／Ｆ部１２０と、撮像部１３０と、操作部１４０と、表示部１５０と、を備える。
【００１５】
撮像部１３０は、撮像素子と、撮像レンズ群と、撮像駆動部と、ＡＦＥ（Analog Front End）と、を含む。これらは、制御部１１０によって制御されて動作する。
【００１６】
撮像素子は、ＣＣＤ（Charge Coupled Device：電荷結合素子）イメージセンサ、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ等のイメージセンサによって構成される。撮像素子は、制御部１１０の制御のもと、撮像レンズ群を介して入射する光による画像を取り込んで画素毎に光電変換し、光電変換により発生した画素毎の電荷に基づく信号を撮像信号としてＡＦＥに供給する。
【００１７】
撮像レンズ群は、フォーカスレンズ、ズームレンズ等のレンズ群からなる。撮像駆動部は、撮像レンズ群の駆動、撮像素子に入射する光量の制御、及び、撮像素子に光を当てる時間（撮像素子の受光素子が受光する時間の制御）の制御等を行う機構である。撮像レンズ群及び撮像駆動部は制御部１１０の制御のもとで動作し、撮像素子は撮像を行う。
【００１８】
ＡＦＥは、制御部１１０の制御のもと、撮像素子から供給される撮像信号に所定の処理（以下、処理Ａという。）を行い、撮像素子が撮像した撮像画像を表すデジタルデータ（元画像データ）を生成して出力する。処理Ａは、ＯＢ（Optical Black）クランプ処理、ＣＤＳ（Correlated Double Sampling）処理、ＡＧＣ（Automatic Gain Control）処理、Ａ／Ｄ（Analog/digital）処理等を含む処理である。
【００１９】
撮像部１３０は、上記のような上記の構成によって、制御部１１０の制御のもと、撮像する方向にある人物及び背景等の撮像画像を取り込んでこの撮像画像を表す撮像信号を生成し、生成した撮像信号に基づいて、前記の撮像画像を表す元画像データを生成し、制御部１１０に供給する。
【００２０】
制御部１１０は、画像データ取得部１１０ａと特徴特定部１１０ｂと処理内容特定部１１０ｃと画像処理部１１０ｄとを備える。そして、制御部１１０（画像データ取得部１１０ａ、特徴特定部１１０ｂ、処理内容特定部１１０ｃ、及び画像処理部１１０ｄ）は、ＣＰＵ１１１と、ＲＯＭ１１２と、ＲＡＭ１１３と、によって構成される。
【００２１】
ＣＰＵ１１１は、撮像装置１００の各構成要素を制御する。また、ＣＰＵ１１１は、ＲＯＭ１１２に記録されている制御プログラムに従い、さらに、ＲＯＭ１１２に記録されている各種データを用い、制御部１１０（画像データ取得部１１０ａ、特徴特定部１１０ｂ、処理内容特定部１１０ｃ、画像処理部１１０ｄ）が行う後述の撮像処理（１）を実行する。ＲＯＭ１１２に記録されている制御プログラム、データ等は、一度、ＲＡＭ１１３に読み出されて使用されても良い。
【００２２】
ＣＰＵ１１１の機能の少なくとも一部は、各種専用回路によって実現されてもよい。つまり、制御部１１０の少なくとも一部を各種専用回路によって構成してもよい。各種専用回路としては、例えば、ＤＳＰ（Digital Signal Processor）、エンコーダ、デコーダ等がある。
【００２３】
ＲＯＭ１１２には、制御プログラム、及び、ＣＰＵ１１１が使用する各種データ等が記憶されている。各種データは、後述の撮像処理（１）で使用される対応表等を含む。
【００２４】
ＲＡＭ１１３は、ＣＰＵ１１１が使用するデータ、ＣＰＵ１１１が生成したデータ（静止画像データ等）、ＣＰＵ１１１に供給されるデータ（元画像データ）等を一時記憶する。ＲＯＭ１１２及びＲＡＭ１１３は、それぞれ、記憶部を構成する。記憶部は、ＲＯＭ１１２の代わりにフラッシュメモリ等を備えても良い。ＲＡＭ１１３には、制御プログラムがロードされてもよい。
【００２５】
なお、制御プログラムは、ＯＳ（Operation System）と協働してＣＰＵ１１１に撮像処理（１）を行わせるものであってもよい。この場合、ＯＳもＲＯＭ１１２に記録される。また、制御プログラムは、持ち運び可能な記憶媒体（例えば、ＣＤ−ＲＯＭ（Compact Disk Read Only Memory）、ＤＶＤ−ＲＯＭ（Digital Versatile Disk Read Only Memory））に記録され、撮像装置１００に供給（インストール）されてもよい。また、制御プログラムは、ネットワークを介して撮像装置１００に供給されてもよい。これらの場合には、記憶部は、フラッシュメモリ等を含み、制御プログラムは、ＲＯＭ１１２の代わりにフラッシュメモリに記録される。
【００２６】
制御プログラムが記録された、ＲＯＭ１１２、又は、持ち運び可能な記憶媒体等は、コンピュータが読み取り可能なプログラム製品（プログラムを記憶したコンピュータが読み取り可能な記憶媒体）になる。制御プログラムは、機能の少なくとも一部が専用回路によって実現されたコンピュータを動作させるものであってもよい。つまり、コンピュータは、全体として、撮像処理（１）を行うものであればよく、制御プログラムは、そのようなコンピュータを動作させるものであればよい。
【００２７】
なお、ＣＰＵ１１１は、ＡＦＥから供給される元画像データに対して各種処理（以下、処理Ｂという）を行い、ＹＵＶ（輝度・色差）形式等の静止画像データを生成する。処理Ｂは、輪郭強調、オートホワイトバランス、オートアイリス等の画質を向上させる処理を含む。このように、ＣＰＵ１１１は、ＡＦＥ（撮像部１３０）から供給された元画像データに基づいて静止画像データを生成することによって、撮像部１３０が撮像した撮像画像を表す静止画像データを取得する。
【００２８】
なお、制御部１１０がＤＳＰを含む場合、ＤＳＰは、ＡＦＥから元画像データを受け取り、受け取った元画像データに対して前記の処理Ｂと同様の処理を行うことによって静止画像データ（ＹＵＶ形式等）を生成する。これによって、制御部１１０は、撮像部１３０が撮像した撮像画像を表す静止画像データを取得する。
【００２９】
なお、ＣＰＵ１１１は、適宜、前記で生成した静止画像データを表示用データに変換し、表示部１５０に供給する。また、ＣＰＵ１１１は、適宜、メニュー画面、設定画面等を表す表示用データ（これらのテンプレート画像のデータは、ＲＯＭ１１２に記録されている。）を生成し、表示部１５０に供給する。表示用データは、例えば、ＲＧＢ（Red-Green-Blue）データである。
【００３０】
また、ＣＰＵ１１１は、適宜、前記で生成した静止画像データを圧縮し、圧縮した圧縮画像データ（これも静止画像データの一例である。）を生成する。制御部１１０がエンコーダを含む場合、このエンコーダが圧縮を行っても良い。ＣＰＵ１１１は、適宜、圧縮画像データを、Ｉ／Ｆ部１２０を介して記憶媒体５０に記録する。圧縮画像データは、例えば、ＪＰＥＧ（Joint Photographic Experts Group）形式の静止画像データである。
【００３１】
また、ＣＰＵ１１１は、撮像処理（１）において（特に画像処理をおこなう場合において）、静止画像データのデータ形式を処理し易いデータ形式に変換するものとする。例えば、ＹＵＶデータをＲＧＢデータに変換する。
【００３２】
上記のような構成によって、制御部１１０（画像データ取得部１１０ａ、特徴特定部１１０ｂ、処理内容特定部１１０ｃ、画像処理部１１０ｄ）は、撮像装置１００全体を制御するとともに、後述の撮像処理（１）を行う。
【００３３】
Ｉ／Ｆ部１２０は、外部とのインターフェース（Ｉ／Ｆ）である。Ｉ／Ｆ部１２０は、カードスロット、メディアコントローラ等を備える読取書込装置によって構成される。Ｉ／Ｆ部１２０は、制御部１１０が記憶媒体５０にデータを読み書きする場合に使用される。制御部１１０は、Ｉ／Ｆ部１２０を介して記憶媒体５０に対してデータを読み書きする。
【００３４】
操作部１４０は、１以上の操作キー（シャッターキー、選択キー等）と、この操作キーに対応し、操作キーの操作に対応した操作信号を出力する信号出力部（基板、接点等によって構成される。）と、を備える。操作部１４０は、ユーザからの操作入力を操作キーによって受け付け、受け付けた操作入力に応じた操作信号を信号出力部から出力し、制御部１１０に供給する。制御部１１０は、供給された操作信号に応じて処理を行う。
【００３５】
表示部１５０は、表示パネルと表示コントローラとを備える。表示コントローラには、制御部１１０から表示用データが供給される。表示コントローラは、供給された表示用データをアナログ信号に変換し、変換したアナログ信号に基づいて表示パネルを駆動し、表示パネルに画像を表示させる。このようにして、表示部１５０は、制御部１１０の制御のもと、表示用データによって表される画像を表示する。なお、表示部１５０が表示する画像としては、メニュー画面、設定画面、ライブビュー画像等がある。
【００３６】
記憶媒体５０は、フラッシュメモリ等を備えるメモリカード等によって構成され、撮像装置１００に取り付けられる。記憶媒体５０は、撮像装置１００に接続される、撮像装置１００の外部記憶部を構成する。制御部１１０は、Ｉ／Ｆ部１２０を介して、記憶媒体５０に対してデータ等を読み書きする。
【００３７】
次に、撮像装置１００が行う撮像処理（１）を、図３乃至図７を参照して説明する。この処理は、撮像装置１００の操作部１４０が操作されて、撮像モードが選択されたことを契機として開始されるものとする。
【００３８】
なお、撮像モードが開始すると、表示部１５０には所謂ライブビュー画像が表示される。例えば、画像データ取得部１１０ａは、撮像部１３０を制御し、撮像部１３０の撮像素子等を動作させ、所定のフレームレートで１画像分の元画像データを順次出力させる。画像データ取得部１１０ａは、撮像部１３０から供給される元画像データを順次取得し、取得した元画像データに上記処理Ｂの処理を行って、静止画像データを順次生成するとともに、この静止画像データに基づいて表示用データを順次生成する。画像データ取得部１１０ａは、順次生成した表示用データを順次表示部１５０に供給し、表示部１５０に表示用データが表す静止画像を順次表示する。これによって、撮像部１３０によって順次撮像される画像が、ライブビュー画像として、表示部１５０に略リアルタイムで連続して表示される。
【００３９】
まず、画像データ取得部１１０ａは、ユーザによってシャッター操作が行われたかを判別する（ステップＳ１０１）。ユーザがライブビュー画像を確認しながら、操作部１４０が備えるシャッターキーを全押しすると（シャッター操作が行われると）、操作部１４０はこのシャッター操作に応じた操作信号を画像データ取得部１１０ａに供給する。画像データ取得部１１０ａは、シャッター操作に応じた操作信号が操作部１４０が供給されると、ユーザによってシャッター操作が行われたと判別し（ステップＳ１０１；ＹＥＳ）、ステップＳ１０２の処理を行う。画像データ取得部１１０ａは、シャッター操作に応じた操作信号が操作部１４０から供給されていないと、ユーザによってシャッター操作が行われていないと判別し（ステップＳ１０１；ＮＯ）、ステップＳ１０１の処理を再び行う。これによって、画像データ取得部１１０ａは、ユーザによってシャッター操作が行われるまで待機する。
【００４０】
画像データ取得部１１０ａは、ステップＳ１０２の処理において、撮像部１３０を制御し、静止画像データ（撮像部１３０が撮像した撮像画像を表す撮像画像データ）を取得する。画像データ取得部１１０ａは、撮像部１３０の撮像素子等を動作させ、撮像部１３０に撮像動作用のフレームレートに応じた１画像分の撮像信号を生成させるとともに、この撮像信号に基づいて元画像データを生成させて出力させる。画像データ取得部１１０ａは、撮像部１３０から供給される元画像データを取得し、取得した元画像データに上記処理Ｂの処理を行って、静止画像データを生成する。これによって、画像データ取得部１１０ａは、静止画像データを取得する。画像データ取得部１１０ａは、静止画像データをＲＡＭ１１３に一時記録（保持）する。
【００４１】
次に、特徴特定部１１０ｂは、画像データ取得部１１０ａが取得した静止画像データ（ＲＡＭ１１３の保持している静止画像データ）を用いて、この静止画像データが表す静止画像（処理対象の静止画像）の中で所定の基準を満たす被写体像（主要被写体像）を特定するとともに、特定した主要被写体像の特徴を特定する（ステップＳ１０３）。
【００４２】
ここでの主要被写体像は、人物の顔を含む像である。特徴特定部１１０ｂは、静止画像データが表す静止画像から、眉、目、鼻、唇の各端点、顔の輪郭点、頭頂点や顎の下端点等の特徴点を検出することにより、これらの特徴点を含む領域を所定の基準を満たす主要被写体像（顔の像の領域である顔領域）として特定する。そして、特徴特定部１１０ｂは、特定した顔領域を分析し、この顔領域における顔の人物の年齢、性別、人種等（主要被写体像の特徴）を特定する。例えば、特徴特定部１１０ｂは、前記の特徴点によって特定される、顔領域の各器官の特徴、各器官の大きさ及びバランス等から、その顔の人物の年齢、性別を特定する。また、例えば、特徴特定部１１０ｂは、顔領域における肌の色合い、輝度の分布等から、その人物の人種を特定する。このような人物の年齢、性別、人種等の特定は、例えば、特開２００７−２８０２９１号公報等に記載された技術を用いることで行うことができる。
【００４３】
なお、特徴特定部１１０ｂは、顔のテンプレート画像を用いて、所定の閾値以上の一致度を有する領域を静止画像の中から特定するテンプレートマッチング等を行うことによって、前記の顔領域を特定してもよい。そして、特徴特定部１１０ｂは、特定した顔領域を分析し、上記と同様に、前記の特徴点等を検出し、特徴点等に基づいて、この顔の人物の年齢、性別、人種等を特定する。
【００４４】
以上により、特徴特定部１１０ｂは、顔領域（主要被写体像）を特定するとともに、顔領域を分析することによって、主要被写体像の特徴を特定する。特徴特定部１１０ｂは、処理対象の静止画像における、前記で特定した主要被写体像の位置（大きさ、形状も特定可能な位置）を特定するデータ（位置データ）と、前記で特定した主要被写体像の特徴を示すデータ（特徴データ）と、を生成し、両データを互いに対応付けてＲＡＭ１１３に保持する。
【００４５】
なお、特徴特定部１１０ｂは、主要被写体像を複数特定した場合には、それぞれの主要被写体像について、主要被写体像の特徴を特定する。この場合、特徴特定部１１０ｂは、位置データと、特徴データと、を主要被写体像それぞれについて生成し、両データを位置データ毎に互いに対応付けてＲＡＭ１１３に保持する。また、特徴特定部１１０ｂは、１つの主要被写体像について、特定される主要被写体像の特徴が複数ある場合には、位置データと、複数の特徴データと、を生成し、主要被写体毎に、各データを対応付けてＲＡＭ１１３に保持する。
【００４６】
例えば、図４のように、処理対象の静止画像７０に、男性７１と、女性７２とが写っているとすると、特徴特定部１１０ｂは、主要被写体像として、男性７１の顔の像７１ａと、女性７２の顔の像７２ａと、を特定し、これら像の特徴である男性及び女性等を特定する。
【００４７】
次に、処理内容特定部１１０ｃは、処理対象の静止画像に施す画像処理の処理内容を特定する（ステップＳ１０４）。これは、特徴特定部１１０ｂが特定した主要被写体像の特徴に基づいて行う。処理内容特定部１１０ｃは、ＲＡＭ１１３に保持された特徴データに基づいて、ＲＯＭ１１２に記録された対応表を参照して画像処理の処理内容を特定する。画像処理は、処理対象の静止画像の画風を変更する処理であり、例えば画風を、絵画調（油絵風、ちぎり絵風、水墨画風、色鉛筆画風、水彩画風等）に変更する処理、又は、モノクロ調、セピア調、ソフトフォーカス調、ビビッド調、モザイク調、ミニチュア写真風等の画風に変更する処理等がある。これら処理は、例えば、フォトショップ（登録商標）で用いられる画像処理と同様の画像処理を採用できる。
【００４８】
対応表とは、主要被写体像の特徴と、処理内容との対応関係を記録したものである。特徴と処理内容との関係は予め設定されているものとするが、両者の関係は、例えば、前記の特徴の印象（人が持っている印象）に応じた処理内容となるような関係であるとよい。
【００４９】
図５に対応表の一例を示す。図５のように、特徴が幼児である場合には、処理内容は画像の画風を色鉛筆画風に変更する処理とする。幼児は色鉛筆で絵を描くことがあるからである。特徴が男性である場合には、処理内容は画像の画風を油絵風に変更する処理とする。油絵は、絵の具を重ねる絵画技法であり、力強い男性を連想させるからである。特徴が女性である場合には、処理内容は画像の画風を水彩画風に変更する処理とする。水彩画は、優しい印象であり女性を連想させるからである。特徴が白人である場合には、処理内容は画像の画風を西洋画風（油絵風等のいずれか予め決められたいずれか１つ）に変更する処理とする。白人は、主に西洋人であり、西洋画のイメージと合致するからである。
【００５０】
処理内容特定部１１０ｃは、ＲＯＭ１１２に記録された図５のような対応表を参照し、ＲＡＭ１１３に保持された特徴データが示す特徴に基づいて、対応表の中の前記の特徴に対応した画像処理の処理内容を特定する。例えば、図４に示す静止画像７０が処理対象であり、対応表として図５の対応表が用いられる場合、主要被写体像である像７１ａは特徴が男性なので処理内容は油絵風に変換する処理となる。また、主要被写体像である像７２ａは特徴が女性なので処理内容は水彩画風に変換する処理となる。なお、ここでは、性別のみが特定されたものとする。
【００５１】
なお、特徴特定部１１０ｂが、１つの主要被写体像について、特徴を複数特定した場合、処理内容特定部１１０ｃは、複数の特徴のうちのいずれか１つに基づいて、対応表を参照して画像処理の処理内容を特定する。複数の特徴のうち、どの特徴に基づいて処理内容を特定するかは、適宜の方法で行うことができるが、例えば、ランダムで特定した特徴を処理内容の特定に用いる。または、各特徴について優先度を予め設定しておき、この優先度に基づいて、もっとも優先度の高い特徴を、処理内容の特定に用いる。例えば、性別に関する特徴の優先度を３とし、人種に関する特徴の優先度を２とした場合、優先度の大きい性別に関する特徴を処理内容の特定に用いる。この場合、処理内容特定部１１０ｃは、ＲＯＭ１１２に記録された、特徴と優先度との関係を記録した対応表を参照して処理内容の特定に用いる特徴を特定する。また、主要被写体像が複数特定されている場合には、処理内容特定部１１０ｃは、それぞれの主要被写体像について、画像処理の処理内容を特定する。
【００５２】
次に、画像処理部１１０ｄは、処理内容特定部１１０ｃが特定した処理内容で画像データ取得部１１０ａが取得した静止画像データが表す静止画像に画像処理を施す（ステップＳ１０５）。なお、処理内容を示すデータ（処理内容データ）は、適宜、位置データに対応付けられＲＡＭ１１３に記録される。これによって、ＲＡＭ１１３には、主要被写体毎に、位置データと処理内容データが対応付けられ記録される。
【００５３】
画像処理部１１０ｄが行う画像処理について図６を参照してより詳細に説明する。
【００５４】
画像処理部１１０ｄは、処理対象領域を特定する（ステップＳ１０５ａ）。画像処理部１１０ｄは、ＲＡＭ１１３に保持する位置データに基づいて、この位置データによって特定される主要被写体像の位置（形状及び大きさも含む）を基準とし、ＲＡＭ１１３に保持する静止画像データが表す処理対象の静止画像における処理対象領域を特定する。画像処理部１１０ｄは、主要被写体像の領域を処理対象領域と特定してもよいし、処理対象の静止画像における主要被写体像の領域を所定範囲（予め設定されているものとする。）まで広げた領域を処理対象領域としてもよい。また、画像処理部１１０ｄは、主要被写体像の周囲をそれぞれ輪郭抽出し、主要被写体像からその人物全体まで広げた領域を処理対象領域として特定してもよい。
【００５５】
画像処理部１１０ｄは、ＲＡＭ１１３に保持する静止画像データに基づいて、この静止画像上における、前記で特定した処理対象領域の画像を切り出し、切り出した画像（切り出し画像）を表す画像データ（切り出し画像データ）をＲＡＭ１１３に保持する（ステップＳ１０５ｂ）。
【００５６】
続いて、画像処理部１１０ｄは、ＲＡＭ１１３に保持した切り出し画像データを用いてこのデータが表す切り出し画像に対して、特徴特定部１１０ｂが特定した処理内容で画像処理を施す（ステップＳ１０５ｃ）。画像処理部１１０ｄは、ＲＡＭ１１３に保持された処理内容データが特定する処理内容で前記の切り出し画像に対して画像処理を施す（なお、画像処理に使用される演算パラメータは適宜ＲＯＭ１１２に記録されて使用されるものとする）。画像処理部１１０ｄは、画像処理後の画像（処理後切出画像）を表す画像データ（処理後切出画像データ）をＲＡＭ１１３に保持する。
【００５７】
画像処理部１１０ｄは、ＲＡＭ１１３に保持した処理後切出画像データが表す処理後切出画像を前記の切り出された後の静止画像に戻し（ステップＳ１０５ｄ）、この静止画像において、戻した処理後切出画像と周囲の画像領域との境界に対してぼかし加工を施す（ステップＳ１０５ｅ）。これによって、画像処理部１１０ｄは、ぼかし加工後の画像（処理後画像）を表す画像データ（処理後データ）を生成し、ＲＡＭ１１３に保持する。これによって、処理後画像が生成される。なお、主要被写体像が複数あるときには、一枚の静止画像において、主要被写体像毎に上記の処理がおこなわれ、複数の処理対象領域について画像処理が施された一枚の静止画像が生成される。また、ぼかし加工とは、境界の各画素について、近傍の複数（一例として、上下左右の４つ若しくは斜め方向も加えた８つ）の画素を平均化して、境目を目立たなくさせる画像処理のことである。絵画調に変換して処理対象領域に上書きした画像（画像処理後の画像）が、その周囲の画像となじむように（違和感がなくなるように）、ぼかし加工が行われる。
【００５８】
図３に戻って、画像処理部１１０ｄは、生成した処理後画像を表示部１５０に表示するとともに、この処理後画像をＩ／Ｆ部１２０を介して記憶媒体５０に記録する（ステップＳ１０６）。画像処理部１１０ｄは、ＲＡＭ１１３に保持した処理後画像データに基づいて、表示用データを生成して表示部１５０に供給し、表示部１５０に処理後画像を表示させる。また、画像処理部１１０ｄは、ＲＡＭ１１３に保持した処理後画像データをＩ／Ｆ部１２０を介して記憶媒体５０に記録する。
【００５９】
例えば、図４に示す静止画像７０が処理対象であり、対応表として図５の対応表が用いられ、処理対象領域が主要被写体像によって構成される場合、処理後画像は、主要被写体像である像７１ａが油絵風に変換され、主要被写体像である像７２ａが水彩画風に変換された画像になる（図７参照）。なお、ここでは、主要被写体像の特徴として性別のみが特定されたものとする。
【００６０】
なお、画像処理部１１０ｄは、撮像画像全体に、処理内容特定部１１０ｃが特定した処理内容の画像処理を施しても良い。主要被写体像が複数ある場合には、複数の主要被写体像のうちの、予め設定された方法（ランダム等）で特定された主要被写体像の特徴に応じた処理内容の画像処理が行われる。
【００６１】
また、上記で主要被写体像が特定されない場合には、画像処理は行われずに、静止画像がそのまま表示部１５０に表示される。
【００６２】
本実施形態では、以上のような構成によって、処理内容特定部１１０ｃは、被写体像の特徴と画風を変更する画像処理の処理内容との対応関係を記録した対応表（記憶部（ここでは、ＲＯＭ１１２）に記録されている。）を参照し、特徴特定部１１０ｂが特定した被写体像（主要被写体像）の特徴に基づいて、この特徴に対応する画像処理の処理内容を特定し、画像処理部１１０ｄは、処理内容特定部１１０ｃが特定した処理内容で、画像データ取得部１１０ａが取得した静止画像データが表す静止画像に対して画像処理を施す。
【００６３】
本実施形態によれば、静止画像上における主要被写体像の特徴に応じた処理内容の画像処理で、静止画像に対して画像処理を施すので、処理後画像は主要被写体の特徴に応じた画風の画像になり、撮像時の状況（ここでは、被写体の特徴）を、ユーザが興味を持つように表現した画像が生成される。特に本実施形態では、主要被写体像の特徴に応じた画像処理が対応表によって設定されているため、撮像時の状況が、ユーザの興味を引くような形式で表現された画像が生成される。
【００６４】
また、特に、画像処理部１１０ｄは、上記のように、撮像画像内の主要被写体像を少なくとも含む所定領域（処理対象領域）に対して画像処理を施すとよい。これによって、所定領域に、この主要被写体像の特徴に応じた処理内容の画像処理が施されるので、この所定領域は、主要被写体像の特徴に応じた画風に変更されるため、撮像時の状況（ここでは、被写体の特徴）を、所定領域について、ユーザが興味を持つように表現した処理後画像が生成される。そして、さらに、ユーザにとっておもしろい処理後画像が生成される。
【００６５】
特に、主要被写体像が複数である場合、つまり、特徴特定部１１０ｂは、一の静止画像データから主要被写体像を複数特定するとともに、複数の主要被写体像の特徴をそれぞれ特定し、処理内容特定部１１０ｃは、対応表を参照し、複数の主要被写体像それぞれについて、特徴特定部１１０ｂが特定した主要被写体像の特徴から処理内容を特定し、画像処理部１１０ｄは、複数の主要被写体像それぞれを少なくとも含む各所定領域に対して、それぞれ、処理内容特定手段が特定した処理内容で画像処理を施すことによって、複数の所定領域毎（主要被写体毎）に、ユーザが興味を持つように表現した処理後画像が生成される。そして、さらに、ユーザにとっておもしろい処理後画像が生成される。
【００６６】
処理対象画像は、背景画像の一部を含んでも良い。また、処理内容として、画像処理の種別だけでなく、その処理内容におけるより詳細な内容を定めるようにしてもよい。例えば、同じ種類の画風の画像へ変換する画像処理においても、その画風におけるタッチ（筆触）の粗さ等を適宜変更できるようにしてもよい。具体的には、処理対象領域の画像を鉛筆スケッチ画風に変換する際に、粗く書くか、又は、細かく書くか等までを変更可能とすることで、変換後の画像の雰囲気をより細かく変えることができる。
【００６７】
（実施形態２）
実施形態１の撮像装置１００は、一枚の撮像画像について、主要被写体像を特定するとともに、画像処理を行っていたが、実施形態２に係る撮像装置は、画像の撮影者を撮像し、撮影者が撮影した被写体を撮像して、撮影者を撮像した撮像画像に写った主要被写体像（撮影者の像）の特徴に基づく処理内容で、被写体を撮像した撮像画像に対して画像処理を行う。
【００６８】
実施形態２に係る撮像装置の構成は、実施形態１の撮像装置１００の構成と同様なので、以下では、実施形態２に係る撮像装置は撮像装置１００であるとして説明する。
【００６９】
次に、撮像装置１００が行う撮像処理（２）を、図８を参照して説明する。この処理は、撮像装置１００の操作部１４０が操作されて、撮像モードが選択されたことを契機として開始されるものとする。
【００７０】
なお、撮像モードが開始すると、実施形態１と同様に、表示部１５０には所謂ライブビュー画像が表示される。
【００７１】
まず、画像データ取得部１１０ａは、ユーザによって第１シャッター操作が行われたかを判別する（ステップＳ２０１）。この処理の詳しい説明は実施形態１のステップＳ１０１と同様であるので省略する。なお、この第１シャッター操作によって、後述の第２シャッター操作を行う撮影者（ユーザ）が撮像されるものとする。つまり、ここでは、撮像装置１００を用いて所望の被写体を撮影する撮影者が撮影される。画像データ取得部１１０ａは、第１シャッター操作が行われるまで待機する（ステップＳ２０１；ＮＯ）。
【００７２】
画像データ取得部１１０ａは、第１シャッター操作が行われると（ステップＳ２０１；ＹＥＳ）、撮像部１３０を制御し、第１静止画像データを取得する（ステップＳ２０２）。この処理の詳しい説明は実施形態１のステップＳ１０２と同様であるので省略する。画像データ取得部１１０ａは、取得した第１静止画像データをＲＡＭ１１３に一時記録（保持）する。
【００７３】
次に、特徴特定部１１０ｂは、画像データ取得部１１０ａが取得した第１静止画像データ（ＲＡＭ１１３の保持している第１静止画像データ）を用いて、この第１静止画像データが表す第１静止画像の中で所定の基準を満たす被写体像（主要被写体像）を特定するとともに、特定した主要被写体像の特徴を特定する（ステップＳ２０３）。この処理の詳しい説明は実施形態１のステップＳ１０３と同様であるので省略する。ここで特定される主要被写体像は、撮影者の顔等１つであるものとする。特徴特定部１１０ｂは、複数の主要被写体像が特定された場合、主要被写体像が特定されない場合には、例えば、処理エラーとして本処理を終了してもよい。また、特徴特定部１１０ｂは、１つの主要被写体像について、特定される主要被写体像の特徴が複数ある場合には、複数の特徴データを生成してＲＡＭ１１３に保持する。
【００７４】
次に、画像データ取得部１１０ａは、ユーザによって第２シャッター操作が行われたかを判別する（ステップＳ２０４）。この処理の詳しい説明は実施形態１のステップＳ１０１と同様であるので省略する。なお、この第２シャッター操作では、前記の撮影者によって、撮影したい所望の被写体が撮影される。つまり、ここでは、撮像装置１００を用いて撮影者によって所望の被写体が撮影される。画像データ取得部１１０ａは、第２シャッター操作が行われるまで待機する（ステップＳ２０４；ＮＯ）。
【００７５】
画像データ取得部１１０ａは、第２シャッター操作が行われると（ステップＳ２０４；ＹＥＳ）、撮像部１３０を制御し、第２静止画像データを取得する（ステップＳ２０５）。この処理の詳しい説明は実施形態１のステップＳ１０２と同様であるので省略する。画像データ取得部１１０ａは、取得した第２静止画像データをＲＡＭ１１３に一時記録（保持）する。
【００７６】
次に、処理内容特定部１１０ｃは、ＲＡＭ１１３に保持した第２静止画像データが表す第２静止画像に施す画像処理の処理内容を特定する（ステップＳ２０６）。これは、特徴特定部１１０ｂが特定した主要被写体像の特徴に基づいて行う。処理内容特定部１１０ｃは、ＲＡＭ１１３に保持された特徴データに基づいて、ＲＯＭ１１２に記録された対応表（図５参照）を参照して画像処理の処理内容を特定する。この処理の詳しい説明は実施形態１のステップＳ１０４と同様であるので省略する。特定された処理内容のデータ（処理内容データ）は、ＲＡＭ１１３に保持される。
【００７７】
次に、画像処理部１１０ｄは、処理内容特定部１１０ｃが特定した処理内容で画像データ取得部１１０ａが取得した第２静止画像データ（ＲＡＭ１１３に保持されている。）が表す第２静止画像に画像処理を施す（ステップＳ２０７）。画像処理の処理内容は、ＲＡＭ１１３に保持された処理内容データによって特定される。この処理の詳しい説明は実施形態１のステップＳ１０５と同様であるので省略する。画像処理は、第２静止画像全体に施される。画像処理後の第２静止画像は処理後画像になる。画像処理によって、処理後画像が生成される。
【００７８】
画像処理部１１０ｄは、生成した処理後画像を表示部１５０に表示するとともに、この処理後画像をＩ／Ｆ部１２０を介して記憶媒体５０に記録する（ステップＳ２０８）。この処理の詳しい説明は実施形態１のステップＳ１０６と同様であるので省略する。
【００７９】
例えば、図４に示す静止画像７０が処理対象であり、対応表として図５の対応表が用いられ、主要被写体像の特徴として男性が特定された場合、処理後画像は、例えば、油絵風に画像全体の画風が変更された処理後画像になる（図９参照）。なお、ここでは、主要被写体像の特徴として性別のみが特定されたものとする。
【００８０】
なお、第１撮像画像と第２撮像画像とは、同時に撮像されるように、撮像装置１００を構成してもよい。この場合には、撮像部１３０は、撮像素子等を二組備え、一方の撮像素子は、上記と同様に、撮像装置１００の前方（撮影者が撮像装置１００を操作する場合、撮影者が撮影したい被写体に向いた方向）を向き、他方の撮像素子は、撮像装置１００の後方（撮影者が撮像装置１００を操作する場合、撮影者に向いた方向）を向くように構成される。この場合、ステップＳ２０４及び２０５の処理は省略され、ステップＳ２０１のシャッター操作により、二組の撮像素子等が用いられて第１静止画像と第２静止画像とが略同時に撮像され、ステップＳ２０２で画像データ取得部１１０ａは、第１静止画像データと第２静止画像データとを取得する。
【００８１】
本実施形態では、以上のような構成によって、画像データ取得部１１０ａは、撮像部１３０が撮像した第１撮像画像（第１静止画像）及び第２撮像画像（第２静止画像）をそれぞれ表す第１撮像画像データ（第１静止画像データ）及び第２撮像画像データ（第２静止画像データ）を取得し、特徴特定部１１０ｂは、画像データ取得部１１０ａが取得した第１撮像画像データが表す第１撮像画像の中で所定の基準を満たす被写体像（撮影者の像）を特定するとともに、特定した被写体像の特徴を特定し、処理内容特定部１１０ｃは、被写体像の特徴と画風を変更する画像処理の処理内容との対応関係を記録した対応表（ＲＯＭ１１２等の記憶部に記録されている）を参照し、画像処理部１１０ｄは、特徴特定部１１０ｂが特定した被写体像の特徴に基づいて、この特徴に対応する画像処理の処理内容を特定し、処理内容特定部１１０ｃが特定した処理内容で、画像データ取得部１１０ａが取得した第２撮像画像データが表す第２撮像画像に対して画像処理を施す。
【００８２】
本実施形態によれば、第１静止画像上における主要被写体像の特徴に応じた処理内容の画像処理で、第２静止画像に対して画像処理を施すので、処理後画像は撮影者（撮像装置１００を使用するユーザ）の特徴に応じた画風の画像になり、撮像時の状況（ここでは、撮影者の特徴）を、ユーザが興味を持つように表現した画像が生成される。特に本実施形態では、主要被写体像（撮影者の像）の特徴に応じた画像処理が対応表によって設定されているため、ユーザの興味を引くような形式で撮影者が表現された画像が生成される。
【００８３】
実施形態２の他の説明については、実施形態１の説明に準じる。
【符号の説明】
【００８４】
５０・・・記憶媒体、１００・・・撮像装置、１１０・・・制御部、１１０ａ・・・画像データ取得部、１１０ｂ・・・特徴特定部、１１０ｃ・・・処理内容特定部、１１０ｄ・・・画像処理部、１１１・・・ＣＰＵ、１１２・・・ＲＯＭ、１１３・・・ＲＡＭ、１２０・・・Ｉ／Ｆ部、１３０・・・撮像部、１４０・・・操作部、１５０・・・表示部
【図１】
2011176625.tif 000003
【図２】
2011176625.tif 000004
【図３】
2011176625.tif 000005
【図４】
2011176625.tif 000006
【図５】
2011176625.tif 000007
【図６】
2011176625.tif 000008
【図７】
2011176625.tif 000009
【図８】
2011176625.tif 000010
【図９】
2011176625.tif 000011