(57)【特許請求の範囲】
【請求項１】
評価の指標となる所定の単位に属する１以上の美術絵画に共通な特徴を、構図の点からの特徴である所定の美術絵画相当の構図特徴と、美術絵画全体の点からの特徴である所定の美術絵画相当の画像特徴と、して保持する保持手段と、
評価の対象となる画像のデータを、評価画像のデータとして取得する取得手段と、
前記取得手段に取得された前記評価画像のデータに基づいて、構図の点から前記評価画像の構図特徴を解析する構図特徴解析手段と、前記取得手段に取得された前記評価画像のデータに基づいて、画像全体の点から前記評価画像の画像特徴を解析する画像特徴解析手段と、を有する解析手段と、
前記構図特徴解析手段により解析された前記評価画像の構図特徴について、前記保持手段に保持された前記所定の美術絵画相当の構図特徴との類似度合を評価する構図特徴評価手段と、前記画像特徴解析手段により解析された前記評価画像の画像特徴について、前記保持手段に保持された前記所定の美術絵画相当の画像特徴との類似度合を評価する画像特徴評価手段と、を有する評価手段と、
を備える画像処理装置。
【請求項２】
前記評価の指標となる所定の単位に属する１以上の美術絵画から特徴を取得し、共通な特徴を前記保持手段に保持させる共通特徴取得手段、
をさらに備える請求項１記載の画像処理装置。
【請求項３】
前記評価手段による評価結果を利用して、所定の処理を実行する評価結果利用手段、
をさらに備える請求項１又は２に記載の画像処理装置。
【請求項４】
所定のシーンを撮像することによって、撮像画像のデータを出力する撮像手段をさらに備え、
前記評価結果利用手段は、前記評価手段による評価結果を利用して、前記撮像手段が出力するデータであって、前記類似度合いの高いと評価された領域のデータを、記録する処理を実行する、
請求項３に記載の画像処理装置。
【請求項５】
所定のシーンを撮像することによって、撮像画像のデータを出力する撮像手段をさらに備え、
前記取得手段は、前記撮像画像のデータのうち一領域のデータを、前記評価画像のデータとして取得して、
前記評価結果利用手段は、前記評価手段による評価結果を利用して、構図取りを案内する情報を少なくとも提示する処理を実行する、
請求項３に記載の画像処理装置。
【請求項６】
前記保持手段には、複数の前記美術絵画相当の特徴が保持されており、
前記複数の美術絵画相当の特徴の少なくとも１つに係わる、複数の選択肢を提示する提示手段と、
前記提示手段により提示された前記複数の選択肢の中から、１以上の選択肢をユーザが選択する操作を受け付ける操作手段と、
をさらに備え、
前記評価手段は、前記解析手段により解析された前記評価画像の特徴について、前記ユーザにより選択されて前記操作手段によって受け付けられた前記１以上の選択肢に係わる前記美術絵画相当の特徴との類似度合を評価する、
請求項１乃至５の何れか１項に記載の画像処理装置。
【請求項７】
前記選択肢は、美術史の分類で用いられているものである、
請求項６に記載の画像処理装置。
【請求項８】
前記選択肢は、美術絵画を時代的又は地域的に分類する際に用いるものである、
請求項６に記載の画像処理装置。
【請求項９】
前記選択肢は、画家の名前である、
請求項６に記載の画像処理装置。
【請求項１０】
評価の指標となる所定の単位に属する複数の美術絵画に共通な特徴を、構図の点からの特徴である所定の美術絵画相当の構図特徴と、美術絵画全体の点からの特徴である所定の美術絵画相当の画像特徴と、して保持する保持手段を有する画像処理装置が、画像の評価を行う画像処理方法において、
評価の対象となる画像のデータを、評価画像のデータとして取得する取得ステップと、
前記取得ステップに取得された前記評価画像のデータに基づいて、構図の点から前記評価画像の構図特徴を解析する構図特徴解析ステップと、前記取得ステップに取得された前記評価画像のデータに基づいて、画像全体の点から前記評価画像の画像特徴を解析する画像特徴解析ステップと、を有する解析ステップと、
前記構図特徴解析ステップにより解析された前記評価画像の構図特徴について、前記保持手段に保持された前記所定の美術絵画相当の構図特徴との類似度合を評価する構図特徴評価ステップと、前記画像特徴解析ステップにより解析された前記評価画像の画像特徴について、前記保持手段に保持された前記所定の美術絵画相当の画像特徴との類似度合を評価する画像特徴評価ステップと、を有する評価ステップと、
を含む画像処理方法。
【請求項１１】
評価の指標となる所定の単位に属する１以上の美術絵画に共通な特徴を、構図の点からの特徴である所定の美術絵画相当の構図特徴と、美術絵画全体の点からの特徴である所定の美術絵画相当の画像特徴と、して保持する保持手段を有する画像処理装置に対して、画像の評価処理の実行を制御するコンピュータに、
評価の対象となる画像のデータを、評価画像のデータとして取得する取得機能と、
前記取得機能に取得された前記評価画像のデータに基づいて、構図の点から前記評価画像の構図特徴を解析する構図特徴解析機能と、前記取得機能に取得された前記評価画像のデータに基づいて、画像全体の点から前記評価画像の画像特徴を解析する画像特徴解析機能と、からなる解析機能と、
前記構図特徴解析機能により解析された前記評価画像の構図特徴について、前記保持手段に保持された前記所定の美術絵画相当の構図特徴との類似度合を評価する構図特徴評価機能と、前記画像特徴解析機能により解析された前記評価画像の画像特徴について、前記保持手段に保持された前記所定の美術絵画相当の画像特徴との類似度合を評価する画像特徴評価機能と、からなる評価機能と、
を実現させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置及び方法、並びにプログラムに関し、特に、多種多様なシーンの画像として、美術絵画風の画像を得ることが可能な技術に関する。
【背景技術】
【０００２】
従来、ユーザが、カメラを用いて所定のシーンを撮像する場合、自己の判断で適切な構図取りをすることは困難であることが多いため、意図しない撮像画像が得られることがあった。
そこで、適切な構図に近づくように構図取りをガイドする手法として、幾つかの手法が特許文献１乃至５において提案されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平０４−６７１３３号公報
【特許文献２】特開２００１−１２６０７０号公報
【特許文献３】特開平０４−７３７３１号公報
【特許文献４】特開２００３−２７４２２６号公報
【特許文献５】特開２００８−３５２４６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１乃至５に記載の手法を適用した場合、特定のシーンにとって適切な構図に近づくように構図取りをガイドすることができるのみであり、多種多様のシーンが与えられた場合、それらのシーンの全てにとって適切な構図に近づくように構図取りをガイドすることはできない。
一方で、近年、芸術的又は美しいと評価されている美術絵画風の構図を、「適切な構図」として、多種多様なシーンを適切な構図で撮像したいという要望が挙げられている。即ち、多種多様なシーンの画像として、美術絵画風の画像を得たいという要望が挙げられている。
多種多様のシーンに対応しきれない特許文献１乃至５を含む従来の手法では、当該要望に十分に応えることはできない。このため、当該要望に十分に応えることが可能な手法の実現が求められている。
【０００５】
本発明は、このような状況に鑑みてなされたものであり、多種多様なシーンについて、美術絵画風の画像のデータを得ることを目的とする。
【課題を解決するための手段】
【０００６】
本発明の一態様によると、
評価の指標となる所定の単位に属する１以上の美術絵画に共通な特徴を、構図の点からの特徴である所定の美術絵画相当の構図特徴と、美術絵画全体の点からの特徴である所定の美術絵画相当の画像特徴と、して保持する保持手段と、
評価の対象となる画像のデータを、評価画像のデータとして取得する取得手段と、
前記取得手段に取得された前記評価画像のデータに基づいて、構図の点から前記評価画像の構図特徴を解析する構図特徴解析手段と、前記取得手段に取得された前記評価画像のデータに基づいて、画像全体の点から前記評価画像の画像特徴を解析する画像特徴解析手段と、を有する解析手段と、
前記構図特徴解析手段により解析された前記評価画像の構図特徴について、前記保持手段に保持された前記所定の美術絵画相当の構図特徴との類似度合を評価する構図特徴評価手段と、前記画像特徴解析手段により解析された前記評価画像の画像特徴について、前記保持手段に保持された前記所定の美術絵画相当の画像特徴との類似度合を評価する画像特徴評価手段と、を有する評価手段と、
を備える画像処理装置を提供する。
【０００７】
本発明の別の態様によると、上述した本発明の一態様に係る画像処理装置に対応する画像処理方法及びプログラムの各々を提供する。
【発明の効果】
【０００８】
本発明によれば、多種多様なシーンの画像として、美術絵画風の画像を得ることができる。
【図面の簡単な説明】
【０００９】
【図１】本発明の一実施形態に係る撮像装置のハードウェアの構成を示すブロック図である。
【図２】図１の撮像装置が有する機能のうち、美術絵画観点評価処理を実現する機能についての機能的構成を示す機能ブロック図である。
【図３】図２の撮像装置が実行する油美術絵画観点評価処理を模式的に説明する図である。
【図４】図３の油美術絵画観点評価処理のうち、構図特徴解析処理及び構図特徴評価処理の内容を説明する図である。
【図５】図１の撮像装置が実行する、図３の油美術絵画観点評価処理を含む撮像画像処理の流れを説明するフローチャートである。
【図６】ユーザが、所定の美術絵画相当の構図特徴や画像特徴について、種類の選択、重み付け、設定条件等をカスタマイズするための操作画面の一例を示す図である。
【発明を実施するための形態】
【００１０】
以下、本発明の一実施形態を図面に基づいて説明する。
【００１１】
図１は、本発明に係る画像処理装置の一実施形態としての撮像装置１のハードウェアの構成を示すブロック図である。撮像装置１は、例えばデジタルカメラにより構成することができる。
【００１２】
撮像装置１は、CPU（Central  Processing  Unit）１１と、ROM（Read  Only  Memory）１２と、RAM（Random  Access  Memory）１３と、バス１４と、入出力インターフェース１５と、撮像部１６と、操作部１７と、表示部１８と、記憶部１９と、通信部２０と、ドライブ２１と、を備えている。
【００１３】
CPU１１は、ROM１２に記録されているプログラムにしたがって各種の処理を実行する。又は、CPU１１は、記憶部１９からRAM１３にロードされたプログラムにしたがって各種の処理を実行する。
RAM１３にはまた、CPU１１が各種の処理を実行する上において必要なデータ等も適宜記憶される。
【００１４】
例えば本実施形態では、後述する図２の評価画像取得部５１乃至評価結果利用部５８の各機能を実現するプログラムが、ROM１２や記憶部１９に記憶されている。したがって、CPU１１が、これらのプログラムにしたがった処理を実行することで、後述する図２の評価画像取得部５１乃至評価結果利用部５８の各機能を実現することができる。
【００１５】
CPU１１、ROM１２、及びRAM１３は、バス１４を介して相互に接続されている。このバス１４にはまた、入出力インターフェース１５も接続されている。入出力インターフェース１５には、撮像部１６、操作部１７、表示部１８、記憶部１９、及び通信部２０が接続されている。
【００１６】
撮像部１６は、図示はしないが、光学レンズ部と、イメージセンサと、を備えている。
【００１７】
光学レンズ部は、被写体を撮影するために、光を集光するレンズ、例えばフォーカスレンズやズームレンズ等で構成される。
フォーカスレンズは、イメージセンサの受光面に被写体像を結像させるレンズである。ズームレンズは、焦点距離を一定の範囲で自在に変化させるレンズである。
光学レンズ部にはまた、必要に応じて、焦点、露出、ホワイトバランス等の設定パラメータを調整する周辺回路が設けられる。
【００１８】
イメージセンサは、光電変換素子や、AFE（Analog  Front  End）等から構成される。
光電変換素子は、例えばCMOS（Complementary  Metal  Oxide  Semiconductor）型の光電変換素子等から構成される。光電変換素子には、光学レンズ部から被写体像が入射される。そこで、光電変換素子は、一定時間毎に被写体像を光電変換（撮像）して画像信号を蓄積し、蓄積した画像信号をアナログ信号としてAFEに順次供給する。
AFEは、このアナログの画像信号に対して、A/D（Analog/Digital）変換処理等の各種信号処理を実行する。各種信号処理によって、ディジタル信号が生成され、撮像部１６の出力信号として出力される。
なお、以下、撮像部１６の出力信号を、「撮像画像のデータ」と呼ぶ。したがって、撮像部１６からは撮像画像のデータが出力されて、CPU１１等に適宜供給される。
【００１９】
操作部１７は、レリーズ釦４１を含む各種釦等で構成され、ユーザの指示操作を受け付ける。
表示部１８は、各種画像を表示する。
記憶部１９は、DRAM（Dynamic  Random  Access  Memory）等で構成され、撮像部１６から出力された撮像画像のデータを一時記憶する。また、記憶部１９は、各種画像処理に必要な各種データ、例えば、画像のデータ、各種フラグの値、閾値等も記憶する。
通信部２０は、インターネットを含むネットワークを介して他の装置（図示せず）との間で行う通信を制御する。
【００２０】
入出力インターフェース１５にはまた、必要に応じてドライブ２１が接続され、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリ等よりなるリムーバブルメディア３１が適宜装着される。そして、それらから読み出されたプログラムが、必要に応じて記憶部１９にインストールされる。また、リムーバブルメディア３１は、記憶部１９に記憶されている画像データ等の各種データも、記憶部１９と同様に記憶することができる。
【００２１】
図２は、撮像装置１が有する機能のうち、美術絵画観点評価処理を実現する機能についての機能的構成を示す機能ブロック図である。
【００２２】
ここで、美術絵画観点評価処理とは、芸術的又は美しいと一般的に評価されている１以上の美術絵画に共通の特徴（以下、「美術絵画相当の特徴」と呼ぶ）を用いて、美術絵画の観点から画像を評価する処理をいう。
なお、年代や画家等が異なると、美術絵画の特徴も異なる場合がある。そこで、このような場合を考慮して、１以上の美術絵画は、任意に選択するのではなく、年代や画家といった所定の単位に属するものを選択すると好適である。即ち、複数の単位毎に美術絵画相当の特徴をそれぞれ取得して、美術絵画観点評価処理に用いるとよい。
このような美術絵画観点評価処理の結果は、各種各様の処理に用いることができる。例えば、美術絵画の観点から、被写体やシーンの選択をガイドしたり、構図取りをガイドしたり、構図を自動調整して記録したり等、各種処理を実行する場合に、美術絵画観点評価処理の結果を用いることができる。このような美術絵画観点評価処理の結果を用いた処理を実行することで、ユーザは、所定の美術絵画風のシーンの画像のデータを容易に得ることが可能になる。
【００２３】
図２に示すように、撮像装置１は、美術絵画観点評価処理を実現すべく、評価画像取得部５１と、主要被写体検出部５２と、構図特徴解析部５３と、構図特徴評価部５４と、画像特徴解析部５５と、画像特徴評価部５６と、美術絵画相当特徴記憶部５７と、を備えている。また、美術絵画観点評価処理の結果を利用すべく、評価結果利用部５８も撮像装置１に設けられている。
【００２４】
本実施形態では、評価画像取得部５１乃至画像特徴評価部５６及び評価結果利用部５８の各々は、図１に示す構成のうち、CPU１１というハードウェアと、ROM１２等に記憶されたプログラム（ソフトウェア）との組み合わせとして構成されている。
また、美術絵画相当特徴記憶部５７は、図１に示す構成のうち、撮像装置１のRAM１３若しくは記憶部１９、又はリムーバブルメディア３１内の一領域として構成されている。
【００２５】
このような評価画像取得部５１乃至評価結果利用部５８の各々の詳細にについて、図３を適宜参照しつつ説明する。
図３は、図２の撮像装置１が実行する美術絵画観点評価処理を模式的に説明する図である。
【００２６】
図３に示すように、ステップＳ１において、評価画像取得部５１は、評価画像取得処理を実行する。
評価画像取得処理とは、美術絵画観点評価処理の対象となる画像（以下、「評価画像」と呼ぶ）のデータを取得する処理をいう。
例えば図３の例では、フルサイズの撮像画像１０１のデータのうち一部の領域のデータが、評価画像１０２のデータとして取得されている。この場合、評価画像１０２のデータを処理対象として、後述するステップＳ２乃至Ｓ６の処理が実行されることで、評価画像１０２が所定の美術絵画風の画像として最適か否かが評価される。
なお、評価画像は、当然ながら評価画像１０２に限定されず、任意の画像でよい。例えば、評価画像取得部５１は、撮像画像１０１全体のデータを、評価画像のデータとして取得することもできる。また例えば、評価画像取得部５１は、他の装置から送信されて通信部２０に受信された画像のデータや、リムーバブルメディア３１からドライブ２１によって読み出された画像のデータ等からも、評価画像のデータを取得することができる。
【００２７】
ステップＳ２において、主要被写体検出部５２は、主要被写体抽出処理を実行する。
主要被写体抽出処理とは、評価画像の中から主要被写体を抽出する処理をいう。
主要被写体の抽出手法は、特に限定されず、各種各様の抽出手法を採用することができる。例えば、評価画像に人物の顔が含まれる場合には、任意の顔検出手法を採用することで、評価画像の中から検出された人物の顔を、主要被写体とすることができる。また例えば、任意の特徴点抽出手法を採用することで、評価画像の中から抽出された注目点領域を、主要被写体とすることができる。
例えば図３の例では、評価画像１０２の中から、主要被写体１０３が抽出されている。
【００２８】
ステップＳ３において、構図特徴解析部５３は、構図特徴解析処理を実行する。
ステップＳ４において、構図特徴評価部５４は、構図特徴評価処理を実行する。
【００２９】
ここで、構図特徴とは、画像の構図上の特徴をいい、美術絵画の持つそれらと対比されるものであり、例えば次のような種類が存在する。
例えば、構図特徴として、画像の画角（水平画角や垂直画角）、画角に相当する焦点距離やズーム倍率、アスペクト比（画像の縦横比）、及び、画像を作成する際の視点方向（カメラの撮像方向）の傾斜角（俯角、水平角、仰角等）、といった種類が存在する。また例えば、構図特徴として、主要被写体と視点（画像の中央）と距離又は角度、画像の構成（画像内での主要被写体の配置）や分割、及び、空間構成（画像内に占める主要被写体の面積比率等）や余白、といった種類が存在する。また例えば、構図特徴として、左右対称性（画像内における主要被写体の形状や配置、面積の対称性）、及び、構図や線情報の粗密や複雑さ（線情報画像のフラクタル次元等）、といった種類が存在する。
ここで、「画像」を「美術絵画そのもの」と読み替え、「被写体」を当該美術絵画に含まれる人物等の「対象物（オブジェクト）」と読み替えれば、これらが美術絵画のもつ特徴と容易に対比できることが判る。
なお、ここで挙げた構図特徴の種類は例示であり、当然ながらその他任意の種類を採用することができる。
【００３０】
ステップＳ３の構図特徴解析処理とは、評価画像の構図特徴を解析する処理をいう。
ステップＳ４の構図特徴評価処理とは、評価画像の構図特徴について、所定の美術絵画相当の構図特徴との類似度合を評価する処理をいう。即ち、評価画像の構図特徴と、所定の美術絵画相当の構図特徴とを比較することによって、構図特徴の点から、評価画像が所定の美術絵画風の画像として最適か否かを評価する処理が、構図特徴評価処理である。
【００３１】
以下さらに、図４を参照して、構図特徴解析処理及び構図特徴評価処理について詳細に説明する。
図４は、構図特徴解析処理及び構図特徴評価処理の内容を説明する図である。
構図特徴解析処理及び構図特徴評価処理は、図４に示す「評価種類」の項目毎に、処理内容が異なっている。
「評価種類」の項目には、評価画像が所定の美術絵画風の画像として構図特徴の点から最適か否かを評価する場合における、その評価の種類（以下、「構図特徴評価種類」と呼ぶ）が示されている。具体的には、「評価種類」の項目には、構図特徴の種類に応じて分類される構図特徴評価種類が示されている。即ち、図４において、所定の行（横方向の項目）には、所定の１つの構図特徴評価種類が対応付けられている。
所定の行の「解析内容」の項目には、当該行に対応する構図特徴評価種類についての、構図特徴解析処理の内容が示されている。
所定の行の「評価条件」の項目には、当該行に対応する構図特徴評価種類についての、構図特徴評価処理において判断される評価条件が示されている。
以下、構図特徴評価種類毎に、構図特徴解析処理及び構図特徴評価処理の内容について個々に説明する。
【００３２】
先ず、１行目の「評価種類」の項目に示す「画角の評価」が行われる場合における、構図特徴解析処理及び構図特徴評価処理の内容について説明する。
構図特徴解析部５３は、ステップＳ３の構図特徴解析処理として、１行目の「解析内容」の項目に示されるように、評価画像のデータに基づいて、主要被写体の距離、及び主要被写体の画角内の大きさ等を解析することで、評価画像の画角を求める。
次に、構図特徴評価部５４は、ステップＳ４の構図特徴評価処理として、１行目の「評価条件」の項目に示されるように、構図特徴解析部５３によって求められた評価画像の画角が、所定の美術絵画相当の画角の範囲内であるか否かを判定する。
例えば、所定の美術絵画相当の画角の範囲が１５度乃至７０度の範囲である場合には、構図特徴評価部５４は、評価画像の画角が１５度乃至７０度の範囲内であるか否かを判定する。
なお、ここでいう画角とは、画角そのものの他、画角に相当する焦点距離やズーム倍率も含む。
【００３３】
ここで、本実施形態では、所定の美術絵画相当の画角を示すデータは、所定の美術絵画相当の各種構図特徴の各々を示すデータの集合体（以下、「所定の美術絵画相当の構図特徴データ群」と呼ぶ）の一部として、図２の美術絵画相当特徴記憶部５７に記憶されている。即ち、所定の美術絵画について、各種構図特徴が予め解析され、それらの解析結果を示すデータ群が、所定の美術絵画相当の構図特徴データ群として、美術絵画相当特徴記憶部５７に記憶されている。
なお、所定の美術絵画は、特に１枚に限定されず、複数枚でもよい。複数枚の場合には、美術絵画１枚を単位としたり、或いはまた、同一画家の美術絵画の集合体や同一画風の美術絵画の集合体等を１単位とすることができる。そして、このような単位毎に、各種構図特徴が予め解析され、それらの解析結果を示すデータ群が、各々の単位の美術絵画相当の構図特徴データ群として、美術絵画相当特徴記憶部５７に記憶される。
ステップＳ４の構図特徴評価処理では、これらの単位の中から所定の単位が予め選択された状態で、所定の美術絵画相当の構図特徴データ群の中から、構図特徴評価種類に対応する構図特徴のデータが、構図特徴評価部５４によって読み出される。
例えば、上述の例では、画角の評価が行われるため、所定の美術絵画相当の画角を示すデータが、構図特徴評価部５４によって読み出されて、ステップＳ４の構図特徴評価処理で用いられる。
なお、以下、このような構図特徴評価部５４が美術絵画相当特徴記憶部５７から読み出す処理については、その説明を省略する。
【００３４】
次に、２行目の「評価種類」の項目に示す「視点方向の評価」が行われる場合における、構図特徴解析処理及び構図特徴評価処理の内容について説明する。
構図特徴解析部５３は、ステップＳ３の構図特徴解析処理として、２行目の「解析内容」の項目に示されるように、評価画像のデータに基づいて、評価画像の視点方向（撮影方向）を解析する。
例えば図示はしないが、傾斜センサが撮像装置１に設けられている場合には、構図特徴解析部５３は、評価画像のデータが撮像された時の傾斜センサの検出結果を解析することで、視点方向を示す傾斜角度を求めることができる。
次に、構図特徴評価部５４は、ステップＳ４の構図特徴評価処理として、２行目の「評価条件」の項目に示されるように、構図特徴解析部５３によって求められた評価画像の視点方向（傾斜角度）が、所定の美術絵画相当の傾斜角度の範囲内であるか否かを判定する。
ここで、所定の美術絵画相当の傾斜角度としては、水平の角度、俯角、仰角等が存在する。例えば、所定の美術絵画相当の傾斜角度が、水平０度乃至仰角１４度の範囲である場合には、構図特徴評価部５４は、評価画像の視点方向（傾斜角度）が水平０度乃至仰角１４度の範囲内であるか否かを判定する。
【００３５】
次に、３行目の「評価種類」の項目に示す「構図の複雑さの評価」が行われる場合における、構図特徴解析処理及び構図特徴評価処理の内容について説明する。
ここで、本実施形態では、構図の複雑さとして、線情報画像のフラクタル次元を採用するものとする。というのも、曲線や輪郭線等線状の図形において、フラクタル次元が１．０に近いと直線的であり、２．０に近づくにつれ、平面を充填するような面的な形状となることが知られており、構図の複雑さの指標として好適であるからである。例えば、実際の海岸線のフラクタル次元は１．１乃至１．４程度である。一般に美しいと評価される風景画の殆どでは、その線情報画像のフラクタル次元は、およそ１．４乃至１．６程度に分布する。特に、印象派の風景画（ゴッホ、ルノワール、モネの９枚の美術絵画）の線情報画像のフラクタル次元は、１．５２乃至１．５９と１．５５付近に集中している。
そこで、構図特徴解析部５３は、ステップＳ３の構図特徴解析処理として、３行目の「解析内容」の項目に示されるように、評価画像のデータに基づいて、評価画像の線情報画像のフラクタル次元を解析する。
次に、構図特徴評価部５４は、ステップＳ４の構図特徴評価処理として、３行目の「評価条件」の項目に示されるように、構図特徴解析部５３によって求められた評価画像の線情報画像のフラクタル次元が、所定の美術絵画相当の範囲内であるか否かを判定する。
例えば、所定の美術絵画相当のフラクタル次元の範囲が、１．５乃至１．６である場合には、構図特徴評価部５４は、評価画像の線情報画像のフラクタル次元が１．５乃至１．６の範囲内であるか否かを判定する。
【００３６】
次に、４行目の「評価種類」の項目に示す「主要被写体の見込み角度の評価」が行われる場合における、構図特徴解析処理及び構図特徴評価処理の内容について説明する。
構図特徴解析部５３は、ステップＳ３の構図特徴解析処理として、４行目の「解析内容」の項目に示されるように、評価画像のデータに基づいて、主要被写体の見込み角度を解析する。
見込み角度とは、画像内での被写体の大きさを示す角度であって、画像内の水平方向の見込み角度（以下、「水平見込み角度」と呼ぶ）と、画像内の垂直方向の見込み角度（以下、「垂直見込み角度」と呼ぶ）とが存在する。見込み角度は、画像内の被写体の幅や高さに基づいて求めることができる。
次に、構図特徴評価部５４は、ステップＳ４の構図特徴評価処理として、４行目の「評価条件」の項目に示されるように、構図特徴解析部５３によって求められた見込み角度が、所定の美術絵画相当の範囲内であるか否かを判定する。
例えば、所定の美術絵画相当の水平見込み角度の範囲と垂直見込み角度の範囲とが共に１０乃至４０５度の範囲である場合には、構図特徴評価部５４は、主要被写体の水平見込み角度と垂直見込み角度との各々が１０度乃至４０５度の範囲内であるか否かを判定する。
【００３７】
次に、５行目の「評価種類」の項目に示す「主要被写体の距離及び主要被写体の視点との角度の評価」が行われる場合における、構図特徴解析処理及び構図特徴評価処理の内容について説明する。
構図特徴解析部５３は、ステップＳ３の構図特徴解析処理として、５行目の「解析内容」の項目に示されるように、評価画像のデータに基づいて、主要被写体の距離、及び、当該主要被写体の距離に応じた、主要被写体の視点との角度を解析する。
例えば、構図特徴解析部５３は、評価画像における主要被写体の領域について、合焦距離や被写体距離の計測データに基づいて主要被写体の距離を求め、当該主要被写体の距離に応じた、主要被写体の視点との角度を求める。
次に、構図特徴評価部５４は、ステップＳ４の構図特徴評価処理として、５行目の「評価条件」の項目に示されるように、構図特徴解析部５３によって求められた主要被写体の距離に応じた主要被写体の視点との角度が、所定の美術絵画相当の範囲内であるか否かを判定する。
例えば、所定の美術絵画相当の対象物の視点との角度の範囲として、対象物の距離が１５０ｍ以内であるとして、正面の角度の範囲、具体的には例えば０乃至２０度の範囲が採用されているとする。この場合、評価画像における主要被写体の距離が１５０ｍ以内であるときには、構図特徴評価部５４は、主要被写体の視点の角度が正面の角度の範囲内、即ち０乃至２０度の範囲内であるか否かを判定する。
【００３８】
次に、６行目の「評価種類」の項目に示す「画面構成及び画面分割の評価」が行われる場合における、構図特徴解析処理及び構図特徴評価処理の内容について説明する。
構図特徴解析部５３は、ステップＳ３の構図特徴解析処理として、６行目の「解析内容」の項目に示されるように、評価画像のデータに基づいて、主要被写体の評価画像内の位置、具体的には例えば、主要被写体の画面に対する位置関係や、複数の主要被写体同士の位置関係を解析する。
次に、構図特徴評価部５４は、ステップＳ４の構図特徴評価処理として、６行目の「評価条件」の項目に示されるように、構図特徴解析部５３によって求められた主要被写体の評価画像内の位置が、所定の美術絵画相当の比例関係を満たしているか否か、又は、所定の美術絵画相当の画面分割位置と一致しているか否かをそれぞれ判定する。
例えば、所定の美術絵画相当の比例関係としては、いわゆる黄金比（１：１．６１８）の関係、１：√２の関係、１：√３の関係、１：√５の関係等を採用することができる。また、所定の美術絵画相当の画面分割位置としては、２等分線の位置、３等分線の位置、４等分線の位置、６等分線の位置等を採用することができる。
具体的には例えば、所定の美術絵画相当の比例関係が１：√２の関係である場合、構図特徴評価部５４は、主要被写体の評価画像内の位置関係が１：√２の関係を満たすか否かを判定する。
【００３９】
次に、７行目の「評価種類」の項目に示す「左右対称や非対象の評価」が行われる場合における、構図特徴解析処理及び構図特徴評価処理の内容について説明する。
構図特徴解析部５３は、ステップＳ３の構図特徴解析処理として、７行目の「解析内容」の項目に示されるように、評価画像のデータに基づいて、主要被写体の形状、及び、主要被写体の評価画像内の配置状態を解析する。具体的には例えば、構図特徴解析部５３は、主要被写体の輪郭についての形状やその画角内の配置を求める。
次に、構図特徴評価部５４は、ステップＳ４の構図特徴評価処理として、７行目の「評価条件」の項目に示されるように、構図特徴解析部５３によって求められた主要被写の形状や主要被写体の画角内の配置が、所定の美術絵画相当の左右若しくは上下対象となっているか否か、又は、所定の美術絵画相当の非対象となっているか否かを判定する。
所定の美術絵画相当の左右対象とは、所定の美術絵画相当の構図が左右対称（シンメトリー）となっている構図特徴をいう。所定の美術絵画相当の上下対象とは、所定の美術絵画の構図が上下対称となっている構図特徴をいう。所定の美術絵画相当の非対象とは、所定の美術絵画の構図が非対称となっている構図特徴をいう。
例えば所定の美術絵画相当の構図が左右対称となっている場合には、構図特徴評価部５４は、主要被写の形状や主要被写体の画角内の配置が、所定の美術絵画相当の左右対象となっているか否かを判定する。
【００４０】
次に、８行目の「評価種類」の項目に示す「空間構成及び余白の評価」が行われる場合における、構図特徴解析処理及び構図特徴評価処理の内容について説明する。
構図特徴解析部５３は、ステップＳ３の構図特徴解析処理として、８行目の「解析内容」の項目に示されように、評価画像のデータに基づいて、評価画像の画素総数に対する主要被写体の領域の画素数の割合（画素比率）を解析し、当該画素比率に基づいて、主要被写体の領域の評価画像に対する面積比率を求める。
次に、構図特徴評価部５４は、ステップＳ４の構図特徴評価処理として、８行目の「評価条件」の項目に示されるように、構図特徴解析部５３によって求められた主要被写の領域の評価画像に対する面積比率が、所定の美術絵画相当の範囲内であるか否かを判定する。
例えば所定の美術絵画相当の、人物等の対象物の絵画全体に対する面積比率の範囲が、５５乃至７０％の範囲内である場合、構図特徴評価部５４は、主要被写の領域の評価画像に対する面積比率が５５乃至７０％の範囲内であるか否かを判定する。
【００４１】
以上、図４を参照して、８つの構図特徴評価種類毎に、構図特徴解析処理及び構図特徴評価処理についてそれぞれ説明した。
なお、構図特徴評価種類は、図４の「評価種類」の各項目に示すものに特に限定されず、任意の種類を採用することができる。
また、構図特徴解析処理及び構図特徴評価処理において用いる構図特徴評価種類の数も、特に１種類に限定されず、複数種類であってもよい。即ち、複数の構図特徴評価種類毎に、構図特徴解析処理及び構図特徴評価処理をそれぞれ実行することが可能である。この場合、複数の構図特徴評価種類の評価条件の全てを満たしたときに、構図特徴の点で、評価画像が所定の美術絵画風の画像として最適であると判断してもよいし、複数の構図特徴評価種類の評価条件の一部を満たしたときに、構図特徴の点で評価画像が所定の美術絵画風の画像として最適であると判断してもよい。
【００４２】
また、例えば、所定の美術絵画相当の構図特徴の中には、他の特徴と互いに相関性が高い特徴も存在する。そこで、このような相関性に基づいて、構図特徴解析処理及び構図特徴評価処理を実行してもよい。
【００４３】
図３に戻り、このようなステップＳ４の構図特徴評価処理の結果、例えば図３の例では評価画像１０２に対する構図特徴評価処理結果１０４が、構図特徴の点で、評価画像が所定の美術絵画風の画像として不適であるという結果の場合、即ち図３中「評価ＮＧ」となった場合、処理はステップＳ１に戻され、それ以降の処理が繰り返される。
即ち、ステップＳ４の構図特徴評価処理で、構図特徴の点で、評価画像が所定の美術絵画風の画像として不適であると判断されると、ステップＳ１の処理で、フルサイズの撮像画像１０１の別の領域のデータが、別の評価画像のデータとして取得される。次に、ステップＳ２の処理で、別の評価画像から主要被写体が抽出される。そして、別の評価画像を処理対象として、ステップＳ３の構図特徴解析処理及びステップＳ４の構図特徴評価処理が実行される。
このようなステップＳ１乃至Ｓ４のループ処理の繰り返しの結果、構図特徴の点で、所定の評価画像が所定の美術絵画風の画像として最適であると判断された場合。即ち図３中「評価ＹＥＳ」となった場合、処理はステップＳ５に進む。
【００４４】
ステップＳ５において、画像特徴解析部５５は、画像特徴解析処理を実行する。
ステップＳ６において、画像特徴評価部５６は、画像特徴評価処理を実行する。
【００４５】
ここで、画像特徴とは、画像全体の特徴、例えば画像における、明度（輝度）、色、構成要素等の特徴をいい、美術絵画の持つそれらと対比されるものであって、例えば次のような種類が存在する。
例えば、画像特徴として、輪郭線等線情報の粗密や複雑さを示す特徴、具体的には例えば、１次元の線情報画像のフラクタル次元等の種類が存在する。また例えば、画像特徴として、画像の明度（輝度）変化の複雑さを示す特徴、具体的には例えば、２次元の明度変化のフラクタル次元等の種類が存在する。また例えば、画像特徴として、色彩分布のまとまり具合や複雑さ、即ち色彩分布のエントロピーや冗長度等の種類が存在する。また例えば、画像特徴として、色彩の数や、色相の数が存在する。
ここで、「画像」を「美術絵画そのもの」と読み替え、「１次元の線情報」を当該美術絵画の筆遣い、「色彩分布のまとまり具合や複雑さ」を当該美術絵画の色遣い、と読み替えれば、これらが美術絵画のもつ特徴と容易に対比できることが判る。
なお、ここで挙げた画像特徴の種類は例示であり、当然ながら任意の種類を採用することができる。
【００４６】
ステップＳ５の画像特徴解析処理とは、評価画像の画像特徴を解析する処理をいう。
ステップＳ６の画像特徴評価処理とは、評価画像の画像特徴について、所定の美術絵画相当の画像特徴との類似度合を評価する処理をいう。即ち、評価画像の画像特徴と、所定の美術絵画相当の画像特徴とを比較することによって、画像特徴の点から、評価画像が所定の美術絵画風の画像として最適か否かを評価する処理が、画像特徴評価処理である。
【００４７】
図３の例では、画像特徴として、１次元の線情報画像のフラクタル次元（図３においては「線情報のフラクタル次元」と略記されている）と、２次元の明度変化のフラクタル次元と、色相の数と、色相の冗長度といった種類が採用されている。
そこで、以下、これらの画像特徴の種類毎に、画像特徴解析処理及び画像評価処理の内容について個々に説明する。
【００４８】
先ず、線情報画像のフラクタル次元についての画像特徴解析処理及び画像特徴評価処理の内容について説明する。
画像特徴解析部５５は、ステップＳ５の画像特徴解析処理として、次のような処理を実行する。
即ち、画像特徴解析部５５は、評価画像のデータから、白黒画像のデータを生成する。次に、構図特徴解析部５３は、白黒画像のデータに対して２値化処理を施し、その結果得られる２値化白黒画像のデータに対して輪郭抽出フィルタ処理を施すことで、線情報画像のデータを生成する。例えば図３の例では、評価画像１０２のデータから２値化白黒画像１０５のデータが生成され、さらに、当該２値化白黒画像１０５のデータから線情報画像１０６のデータが生成されている。
そして、画像特徴解析部５５は、線情報画像のデータを用いて、ボックスカウンティング法等の適当な手法にしたがって、当該線情報画像のフラクタル次元を求める。
次に、画像特徴評価部５６は、ステップＳ６の画像特徴評価処理として、画像特徴解析部５５によって求められた評価画像の線情報画像のフラクタル次元が、所定の美術絵画相当の線情報画像のフラクタル次元の範囲内であるか否かを判定する。
なお、線情報画像のフラクタル次元は、このように画像特徴として用いることもできるし、上述したように、構図の複雑さの指標として構図特徴として用いることもできる。
【００４９】
ここで、本実施形態では、所定の美術絵画相当の線情報画像のフラクタル次元の範囲を示すデータは、所定の美術絵画相当の各種画像特徴の各々を示すデータの集合体（以下、「所定の美術絵画相当の画像特徴データ群」と呼ぶ）の一部として、図２の美術絵画相当特徴記憶部５７に記憶されている。即ち、所定の美術絵画について、各種画像特徴が予め解析され、それらの解析結果を示すデータ群が、所定の美術絵画相当の画像特徴データ群として、美術絵画相当特徴記憶部５７に記憶されている。
なお、上述したように、所定の美術絵画は、特に１枚に限定されず、複数枚でもよい。複数枚の場合には、美術絵画１枚を単位としたり、或いはまた、同一画家の美術絵画の集合体や同一画風の美術絵画の集合体等を１単位とすることができる。そして、このような単位毎に、各種画像特徴が予め解析され、それらの解析結果を示すデータ群が、各々の単位の美術絵画相当の画像特徴データ群として、美術絵画相当特徴記憶部５７に記憶される。
この場合、さらに、各々の単位毎に、美術絵画相当の画像特徴データ群と、上述した美術絵画相当の構図特徴データ群とが対応付けられて、美術絵画相当特徴記憶部５７に記憶される。
ステップＳ６の画像特徴評価処理では、これらの単位の中から所定の単位が予め選択された状態で、所定の美術絵画相当の画像特徴データ群の中から、処理対象の画像特徴のデータが、画像特徴評価部５６によって読み出される。
例えば、上述の例では、処理対象の画像特徴が線情報画像のフラクタル次元であるため、所定の美術絵画相当の線情報画像のフラクタル次元の範囲を示すデータが、画像特徴評価部５６によって読み出されて、ステップＳ６の構図特徴評価処理で用いられる。
なお、以下、このような画像特徴評価部５６が美術絵画相当特徴記憶部５７から読み出す処理については、その説明を省略する。
【００５０】
次に、２次元の明度変化のフラクタル次元についての画像特徴解析処理及び画像特徴評価処理の内容について説明する。
画像特徴解析部５５は、ステップＳ５の画像特徴解析処理として、次のような処理を実行する。
即ち、画像特徴解析部５５は、評価画像のデータを、カラー領域画像のデータに変換する。具体的には、評価画像のデータは、明度（輝度）情報と色彩情報とが分離されていない色空間座標（RGB空間やXYZ空間）の各画素の色情報の集合体である。そこで、画像特徴解析部５５は、評価画像のデータを構成する各画素の色情報を、明度（輝度）情報と色彩情報とが分離された色空間（HSV空間、YCｒCb空間、L*a*b*空間等）の色情報に変換する。このような明度情報と色彩情報とが分離された色空間の各画素の色情報の集合体を、ここでは「カラー領域画像のデータ」と呼称している。
画像特徴解析部５５は、カラー領域画像のデータから、各画素の明度情報の集合体（以下、「明度画像」のデータと呼ぶ）を生成する。
例えば図３の例では、評価画像１０２のデータからカラー領域画像１０７のデータが生成され、さらに、当該カラー領域画像１０７のデータから明度画像１０８のデータが生成されている。
そして、画像特徴解析部５５は、明度画像のデータに基づいて、２次元関数の明度変化を求め、２次元関数のフラクタル次元の算出法等の適当な手法にしたがって、評価画像全体の明度変化のフラクタル次元を求める。
次に、画像特徴評価部５６は、ステップＳ６の画像特徴評価処理として、画像特徴解析部５５によって求められた評価画像全体の明度変化のフラクタル次元が、所定の美術絵画相当の濃淡変化のフラクタル次元の範囲内か否か判定する。
例えば、印象派の絵画（ミレー、ゴッホ、及びセザンヌの３点の美術絵画）の絵画全体の濃淡変化のフラクタル次元は、２．３２乃至２．４０と計測されている。また、浮世絵（葛飾北斎の３点の美術絵画）の絵画全体の濃淡変化のフラクタル次元は、２．３６乃至２．５３と計測されている。そこで例えば、所定の美術絵画相当の濃淡変化のフラクタル次元の範囲として、２．３乃至２．４の範囲が設定されているとする。
この場合、画像特徴評価部５６は、評価画像全体の明度変化のフラクタル次元が２．３乃至２．４の範囲内であるか否かを判定する。
【００５１】
次に、色相の数についての画像特徴解析処理及び画像特徴評価処理の内容について説明する。
画像特徴解析部５５は、ステップＳ５の画像特徴解析処理として、次のような処理を実行する。
即ち、画像特徴解析部５５は、評価画像のデータを、カラー領域画像のデータに変換する。画像特徴解析部５５は、カラー領域画像のデータから、各画素の色相情報の集合体（以下、「色相画像」のデータと呼ぶ）を生成する。
例えば図３の例では、評価画像１０２のデータからカラー領域画像１０７のデータが生成され、さらに、当該カラー領域画像１０７のデータから色相画像１０９のデータが生成されている。なお、図３において、出願のフォーマットの都合上、色相画像１０９は、あたかも白黒画像のようにみえるが、実際にはカラー画像である。
画像特徴解析部５５は、色相画像のデータに基づいて、出現する色相の種類数を計数する。
次に、画像特徴評価部５６は、ステップＳ６の画像特徴評価処理として、画像特徴解析部５５によって計測された色相の種類数が、所定の美術絵画相当の色相の種類数の範囲内か否か判定する。
例えば、所定の美術絵画相当の色相の種類数の範囲が５乃至１５色の範囲内である場合、画像特徴評価部５６は、評価画像の色相画像における色相の種類数が５乃至１５の範囲内であるか否かを判定する。
【００５２】
次に、色相分布の冗長度についての画像特徴解析処理及び画像特徴評価処理の内容について説明する。
画像特徴解析部５５は、ステップＳ５の画像特徴解析処理として、次のような処理を実行する。
即ち、画像特徴解析部５５は、色相の数の場合と同様に、評価画像のデータに基づいて、色相画像のデータを生成する。次に、画像特徴解析部５５は、色相画像のデータを用いて、色相の出現数をカウントし、その出現確率を算出する。画像特徴解析部５５は、算出された色相の出現確率から、エントロピー最大値とエントロピー値を求めることによって、色相の冗長度を算出する。
なお、冗長度とは、ある物事についての情報がどの程度存在するのかを、情報のエントロピー概念を用いて表わす指標をいう。
次に、画像特徴評価部５６は、ステップＳ６の画像特徴評価処理として、画像特徴解析部５５によって算出された色相の冗長度が、所定の美術絵画相当の色相の冗長度の範囲内か否か判定する。
例えば、所定の美術絵画相当の色相の冗長度の範囲が０．４乃至０．５の範囲内である場合、画像特徴評価部５６は、評価画像の色相画像における色相の冗長度が０．４乃至０．５の範囲内であるか否かを判定する。
【００５３】
以上、画像特徴解析処理及び画像特徴評価処理について説明した。
なお、画像特徴は、上述した例に特に限定されず、任意の種類を採用することができる。
例えば、画像特徴として、彩度の数や、彩度分布の冗長度を採用することができる。この場合、カラー領域画像のデータから、各画素の彩度情報の集合体（以下、「彩度画像」のデータと呼ぶ）を生成する処理以外は、上述した色相の数や、色相分布の冗長度についての画像特徴解析処理及び画像特徴評価処理と基本的に同様の処理となる。
また、画像特徴解析処理及び画像特徴評価処理において用いる画像特徴の種類数は、特に１種類に限定されず、複数種類であってもよい。即ち、複数種類の画像特徴毎に、画像特徴解析処理及び画像特徴評価処理をそれぞれ実行することが可能である。この場合、１以上の画像特徴についての評価条件の全てを満たしたときに、評価画像が所定の美術絵画風の画像として画像特徴の点で最適であると判断してもよいし、１以上の画像特徴についての評価条件の一部を満たしたときに、評価画像が所定の美術絵画風の画像として画像特徴の点で最適であると判断してもよい。
【００５４】
また、例えば、所定の美術絵画相当の画像特徴の中には、他の特徴と互いに相関性が高い特徴も存在する。そこで、このような相関性に基づいて、画像特徴解析処理及び画像特徴評価処理を実行することもできる。
【００５５】
このようなステップＳ６の画像特徴評価処理の結果が、画像特徴の点で、評価画像が所定の美術絵画風の画像として不適であるという結果の場合、即ち図３中「評価ＮＧ」となった場合、処理はステップＳ１に戻され、それ以降の処理が繰り返される。
即ち、ステップＳ１乃至Ｓ６のループ処理が繰り返し実行されて、フルサイズの撮像画像１０１のデータの様々な領域のデータが、逐次、評価画像のデータとなり、構図特徴及び画像特徴の両者の点で、当該評価画像が所定の美術絵画風の画像として最適であるか否かがそれぞれ判断される。
そして、構図特徴及び画像特徴の両者の点で、所定評価画像が所定の美術絵画風の画像として最適であると判断された場合、即ち図３中「評価ＹＥＳ」となった場合、美術絵画観点評価処理全体が終了となる。
【００５６】
以上、図２乃至図４を参照して、美術絵画観点評価処理について説明した。
図２の評価結果利用部５８は、このような美術絵画観点評価処理の結果を用いて、各種各様の処理を実行することができる。
例えば、評価結果利用部５８は、構図特徴評価部５４や画像特徴評価部５６の評価結果を利用して、各種撮影条件を制限する処理、被写体やシーンの選択をガイドしたり構図取りをガイドするガイド情報を提示する処理、構図の自動調整をして記録する処理等を実行することができる。
具体的には例えば図３の例では、評価結果利用部５８は、美術絵画観点評価処理の結果を用いて、撮像画像１１０の中から、所定の美術絵画風の画像として最適であると判断される領域１１１を特定する。そして、CPU１１は、撮像画像１１０の領域１１１のデータをトリミングする（切り抜く）。これにより、部分画像１１２のデータが得られる。なお、このような一連の処理を、以下、「部分画像の切取り処理」と呼ぶ。
このような部分画像の切取り処理の結果得られた部分画像１１２のデータは、例えばリムーバブルメディア３１等に記録される。
【００５７】
次に、図５を参照して、図１のハードウェア構成の撮像装置１が実行する処理のうち、撮像画像のデータを記録するまでの一連の処理（以下、「撮像処理」と呼ぶ）について説明する。当該撮像処理では、美術絵画観点評価処理が適宜実行される。
図５は、本発明が適用される撮像処理の流れを示すフローチャートである。
【００５８】
撮像処理は、例えばユーザが撮像を指示する操作を操作部１７に対して行った場合、その操作を契機として開始される。即ち、次のような処理が実行される。
【００５９】
ステップＳ１において、CPU１１は、スルー撮像とスルー表示を行う。
即ち、CPU１１は、撮像部１６による撮像動作を継続させ、その間に所定時間間隔毎に撮像部１６から順次出力される撮像画像（以下、「フレーム画像」と適宜呼ぶ）のデータを、RAM１３や記憶部１９等のメモリに一時的に記憶させる。このようなCPU１１の一連の処理が、ここでいう「スルー撮像」である。
また、CPU１１は、スルー撮像時にメモリに一時的に記録された各フレーム画像のデータを順次読み出して、それぞれに対応するフレーム画像を表示部１８に順次表示させる。このようなCPU１１の一連の処理が、ここでいう「スルー表示」である。なお、スルー表示されているフレーム画像を、以下、「スルー画像」と呼ぶ。
【００６０】
ステップＳ２において、CPU１１は、美術絵画相当の条件を設定する。
即ち、上述したように、美術絵画１枚を単位としたり、或いはまた、同一画家の美術絵画の集合体や同一画風の美術絵画の集合体等を１単位として、各々の単位毎に、美術絵画相当の特徴のデータが美術絵画相当特徴記憶部５７に記憶されている。
このため、本実施形態では、CPU１１は、このような単位のうち何れの単位の美術絵画相当の特徴を使用するのかを設定する。さらに、CPU１１は、美術絵画相当の構図特徴の複数の種類のうち何れの種類を使用するのかを設定する。同様に、CPU１１は、美術絵画相当の画像特徴の複数の種類のうち何れの種類を使用するのかを設定する。
このようにして、美術絵画相当の単位、美術絵画相当の構図特徴、及び美術絵画相当の画像特徴が、美術絵画相当の条件の少なくとも一部として設定される。
さらに、本実施形態では、このような美術絵画相当の構図特徴や画像特徴を用いて美術絵画観点評価処理を実行する際に適切な評価画像が得られるように、撮像装置１の撮像条件も設定される。このような撮像装置１の条件としては、カメラの撮影画角の条件や、傾斜角度の条件等が存在する。カメラの撮影画角の条件は、撮影画角そのものを規定する条件であってもよいし、撮影画角を規定したことと等価になる条件、例えば、焦点距離、ズーム倍率、縦横比等を規定する条件であってもよい。傾斜角度の条件は、例えば撮影方向、光軸方向、又は画面中央の方向の水平角、俯角、仰角等を規定する条件である。これらの撮像装置１の撮像条件が所定の設定範囲に制限又は調整されることも、美術絵画相当の条件の設定の一部に含まれる。
【００６１】
ステップＳ３において、CPU１１は、レリーズ釦４１（図１）が半押しの状態であるか否かを判定する。
ユーザがレリーズ釦４１を半押ししていない場合、ステップＳ３においてＮＯであると判定され、処理はステップＳ３に戻される。即ち、ユーザがレリーズ釦４１を半押しするまでの間、ステップＳ３の判定処理が繰り返されて、撮像処理は待機状態になる。
【００６２】
その後、ユーザがレリーズ釦４１を半押しすると、ステップＳ３においてＹＥＳであると判定されて、処理はステップＳ４に進む。
ステップＳ４において、CPU１１は、撮影条件等に基づいてＡＦ処理（Ａｕｔｏｍａｔｉｃ  Ｆｏｃｕｓ処理：オートフォーカス処理）等を実行する。
【００６３】
ステップＳ５において、CPU１１は、スルー画像のデータを用いて、美術絵画観点評価処理（図３）を実行する。
【００６４】
ステップＳ６において、CPU１１は、ステップＳ５の美術絵画観点評価処理の結果に基づいて、構図等のガイド情報を生成し、スルー画像の上に合成表示させる。
例えば、CPU１１は、美術絵画観点評価処理の結果に基づいて、ステップＳ２の処理で設定された所定の美術絵画相当の構図特徴や画像特徴の設定値に近づくように又は設定範囲に入るように、構図の移動すべき方向を算出する。そして、CPU１１は、構図取り(フレーミング)をガイドするガイド情報を生成し、スルー画像の上に合成表示させる。
即ち、所定の美術絵画相当の構図特徴や画像特徴を満足するような構図の領域が決定され、当該領域を示すための各種ガイド情報が生成され、スルー画像の上に合成表示される。ガイド情報としては、例えば、構図ガイド枠、補助線、分割線、構図の移動すべき方向を示す矢印等が存在する。
さらに、CPU１１は、ガイド情報の他、評価画像の構図特徴や画像特徴の評価値等の解析評価情報や、ステップＳ２の処理で設定された美術絵画相当の条件から逸脱したことを報知する報知情報等を、スルー画像の上に合成表示してもよい。
【００６５】
ステップＳ７において、CPU１１は、レリーズ釦４１が全押しの状態であるか否かを判定する。
【００６６】
ユーザがレリーズ釦４１を全押ししていない場合、ステップＳ７においてＮＯであると判定され、処理はステップＳ８に進む。
ステップＳ８において、CPU１１は、レリーズ釦４１が解除されたか否かを判定する。
ユーザの指等がレリーズ釦４１から離された場合、ステップＳ８においてＹＥＳであると判定されて、撮像処理は終了となる。
これに対して、ユーザの指等がレリーズ釦４１から離されていない場合、ステップＳ８においてＮＯであると判定されて、処理はステップＳ４に戻され、それ以降の処理が繰り返される。即ち、レリーズ釦４１の半押し状態が継続している限り、ステップＳ４乃至Ｓ６，Ｓ７ＮＯ，Ｓ８ＮＯのループ処理が繰り返し実行される。
【００６７】
その後、ユーザがレリーズ釦４１を全押しすると、ステップＳ７においてＹＥＳであると判定されて、処理はステップＳ９に進む。
ステップＳ９において、CPU１１は、撮像部１６を制御して、撮像画像のデータを取得する。取得された撮像画像のデータは、RAM１３や記憶部１９等のメモリに一時的に記憶される。
【００６８】
ステップＳ１０において、CPU１１は、ステップＳ９の処理で取得した撮像画像のデータを用いて、美術絵画観点評価処理（図３）を実行する。
【００６９】
ステップＳ１１において、CPU１１は、ステップＳ１０の美術絵画観点評価処理の結果に基づいて、部分画像の切取り処理を実行する。
例えば、CPU１１は、美術絵画観点評価処理の結果に基づいて、ステップＳ２の処理で設定された所定の美術絵画相当の構図特徴や画像特徴の設定値に近づくような又は設定範囲に入るような領域を、フルサイズの撮像画像から特定する。そして、CPU１１は、撮像画像内の特定した領域を部分画像として、撮像画像のデータから部分画像のデータをトリミング（切取り）する。
即ち、図３を用いて上述したように、撮像画像１１０の一部の領域１１１が特定されて、領域１１１に対応する部分画像１１２のデータがトリミングされる処理が、部分画像の切取り処理の一例である。
【００７０】
ステップＳ１２において、CPU１１は、ステップＳ９の処理で取得した撮像画像のデータ、及び、ステップＳ１１の部分画像の切取り処理の結果得られた部分画像のデータを、リムーバブルメディア３１等に記録する処理（以下、「画像記録処理」と呼ぶ）を実行する。
これにより、撮像処理は終了となる。
【００７１】
なお、図示はしないが、ステップＳ１０及びＳ１１、並びにステップＳ１２のうち部分画像のデータを記録する処理は、このような撮像処理時だけでは無く、再生や編集の際にも実行されるようにしてもよい。
【００７２】
以上説明したように、本実施形態の撮像装置１は、評価の指標となる所定の単位に属する１以上の美術絵画から予め取得された特徴を、所定の美術絵画相当の特徴として保持する機能と、評価の対象となる画像のデータを評価画像のデータとして取得する機能と、取得された評価画像のデータに基づいて評価画像の特徴を解析する機能と、解析された評価画像の特徴について、保持された所定の美術絵画相当の特徴との類似度合を評価する機能と、を有している。
このような機能の実現により得られた評価の結果（以下、「美術絵画観点評価結果」と呼ぶ）を用いて、撮像条件を自動的に制限したり、撮像時に構図取りをガイドしたり、構図を自動的に調整した画像のデータを記録する等、各種処理の実行が可能になる。
これにより、例えば、次の（１）乃至（３）に示す効果を奏することが可能になる。
【００７３】
（１）美術絵画そのものと評価画像そのものとを比較するのではなく、各々の構図特徴や画像特徴を比較して、評価画像が評価される。そして、このような構図特徴や画像特徴としては、構図の粗密や複雑さ、明度変化の分布の複雑さ、色彩の分布のまとまり具合や複雑さ等、各種各様の種類を採用することができる。
これにより、形状、絵柄、配置の構図等が、サンプルとなる美術絵画と同一又は類似するシーンを対象とするだけでなく、形状、絵柄、配置の構図等がサンプルとは異なるシーンを対象としても、適切な美術絵画観点評価結果が得られる。即ち、人物以外の被写体を含むシーン、人物を含まない風景等のシーン、多様な被写体や分布のシーン等、多種多様なシーンについて、適切な美術界画観点評価結果が得られる。
これにより、ユーザは、多種多様なシーンの画像として、サンプルの美術絵画風の画像を得ることができる。このように、本実施形態の撮像装置１は、多種多様なシーンにも汎用的に適用できる。
できる。
（２）美術絵画観点評価結果に基づいて、撮像条件が自動的に制限されたり、撮像時に構図取りがガイドされたり、構図を自動的に調整した画像のデータが記録される。このため、ユーザは、たとえ初心者であっても、簡単かつ手軽な操作で、美術絵画風のシーンや構図の画像を得ることができる。
（３）また、撮像装置１は、既存の多数の美術絵画をサンプルとして、それらサンプルの画像のデータを記憶しておく必要は無く、画家や年代といった所定の単位に属する１以上の美術絵画に共通な特徴を、所定の美術絵画相当の特徴として記憶することができる。これにより、撮像装置１の記憶容量を削減でき、ひいては製造コストを抑制することができる。
【００７４】
なお、本発明は前記実施形態に限定されるものではなく、本発明の目的を達成できる範囲での変形、改良等は本発明に含まれるものである。
【００７５】
例えば、前記実施形態では、構図特徴評価部５４が利用する所定の美術絵画相当の構図特徴や、画像特徴評価部５６が利用する所定の美術絵画相当の画像特徴については、その種類や、その値若しくは範囲は、CPU１１により設定されていた（図５のステップＳ２）。しかしながら、特に前記実施形態に限定されない。
【００７６】
例えば、所定の美術絵画相当の構図特徴や画像特徴として、何れの種類を用いるのか（種類の選択）、どの種類を優先するのか（重み付け等）、どのような値や範囲とするのか（設定条件）等を、ユーザの好みに応じて、カスタマイズできるようにしてもよい。
【００７７】
図６は、ユーザが、所定の美術絵画相当の構図特徴や画像特徴について、種類の選択、重み付け、設定条件等をカスタマイズするための操作画面の一例を示している。
図６（Ａ）は、撮影設定のメニュー画面の一例を示している。
ユーザは、図６（Ａ）のメニュー画面が表示部１８（図１）に表示されている状態で、操作部１７（図１）を操作して、「絵画風撮影の設定」という項目を選択することによって、図６（Ｂ）のメニュー画面を表示部１８に表示させることができる。
図６（Ｂ）は、絵画風撮影の設定画面の一例を示している。
ユーザは、図６（Ｂ）のメニュー画面が表示部１８に表示されている状態で、操作部１７を操作して、「絵画風の画像特徴」という項目を選択することによって、図６（Ｃ）乃至図６（Ｆ）のうちの何れかのメニュー画面を表示部１８に表示させることができる。
また、ユーザは、図６（Ｃ）乃至図６（Ｆ）のうちの何れかのメニュー画面が表示部１８に表示されている状態で、操作部１７を操作することによって、図６（Ｃ）乃至図６（Ｆ）のうちの任意の別のメニュー画面を表示部１８に表示させることもできる。
図６（Ｃ）乃至図６（Ｆ）は、所定の美術絵画相当の構図特徴や画像特徴について、種類の選択、重み付け、設定条件等をカスタマイズするためのメニュー画面の一例を示している。
例えば、撮像装置１は、図６（Ｅ）や図６（Ｆ）に示すようなメニュー画面を表示し、即ち、複数種類の構図特徴や画像特徴を示す項目、例えば図６（Ｅ）では「画角の広さ」や「被写体との視点の角度」等の項目を選択肢として表示し、ユーザに対して、所望する種類の選択肢を選択操作させるようにしてもよい。この場合、ユーザが選択可能な種類数は、特に図６（Ｅ）や図６（Ｆ）の例に限定されず、１種類であってもよいし、複数種類であってもよい。さらに、撮像装置１は、図６（Ｅ）や図６（Ｆ）に示すようなメニュー画面を表示し、即ち、選択された種類の構図特徴や画像特徴の値や範囲を設定する項目、例えば図６（Ｆ）では「構図の複雑さ」の範囲として「１．５〜１．６」を設定しようとしている項目を表示し、ユーザに対して、所望する値や範囲を設定操作させるようにしてもよい。
また例えば、撮像装置１は、ユーザに対して、図６（Ｃ）や図６（Ｄ）に示すようなメニュー画面を表示し、即ち、構図特徴や画像特徴の種類を逐一細かく設定操作させる代りに、特定の画家の名前や特定の絵画作品等の典型例（図６（Ｃ）や図６（Ｄ）に表示されている絵参照）を選択肢として表示し、ユーザに所望の典型例（選択肢）を指定操作させるようにしてもよい。これにより、美術絵画に疎いユーザでも、簡単にカスタマイズの設定が可能になる。
また、美術絵画は、作風が似ている作品群として分類できる場合がある。例えば、同じ画家の同じ時期の作品群は、一般的に作風が似ている。また、１９世紀西洋絵画の「印象派」の作品群等、芸術上の有名な、運動、主義、思潮、流派等によって分類される作品群は、一般的に作風が似ている。したがって、撮像装置１は、美術史の分類や、美術絵画の時代的又は地域的に基づく分類に従って、各単位をそれぞれ決定して、各単位毎に、所定の美術絵画相当の構図特徴や画像特徴を保持するようにしてもよい。この場合、撮像装置１は、ユーザに対して、所望の単位を示す選択肢を表示し、例えば図６（Ｃ）に示すように「印象派」という単位を示す選択肢を表示したり、図６（Ｄ）に示すように「２０世紀絵画」という単位を示す選択肢を表示することによって、ユーザに対して、所望の単位（選択肢）を指定する指定操作させるようにしてもよい。
【００７８】
このように、所定の美術絵画相当の構図特徴や画像特徴について、種類の選択、重み付け、設定条件等を、ユーザの好みに応じてカスタマイズできるようにすることで、次のような効果を奏することができる。即ち、撮像装置１を操作するユーザは、たとえ初心者であっても、簡単かつ手軽な操作で、自己が所望する美術絵画風の構図により近づいた画像を得ることができる。
【００７９】
また例えば、前記実施形態では、所定の美術絵画相当の構図特徴と画像特徴とは明確に区別して用いられていた。
しかしながら、所定の美術絵画相当の構図特徴と画像特徴との間に相関性がある場合も存在する。このような場合には、構図特徴解析処理及び構図特徴評価処理と、画像特徴解析処理及び画像特徴評価処理とを個々に実行するのではなく、ひとまとまりの処理として実行してもよい。
【００８０】
また例えば、上述した実施形態では、本発明が適用される画像処理装置は、デジタルカメラ等の撮像装置として構成される例として説明した。しかしながら、本発明は、撮像装置に特に限定されず、撮像機能の有無を問わず、上述の画像処理を実行可能な電子機器一般に適用することができる。具体的には例えば、本発明は、パーソナルコンピュータ、ビデオカメラ、携帯型ナビゲーション装置、ポータブルゲーム機等に適用可能である。
【００８１】
上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。
【００８２】
一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、コンピュータ等にネットワークや記録媒体からインストールされる。コンピュータは、専用のハードウェアに組み込まれているコンピュータであってもよい。また、コンピュータは、各種のプログラムをインストールすることで、各種の機能を実行することが可能なコンピュータ、例えば汎用のパーソナルコンピュータであってもよい。
【００８３】
このようなプログラムを含む記録媒体は、ユーザにプログラムを提供するために装置本体とは別に配布される図１のリムーバブルメディア３１により構成されるだけでなく、装置本体に予め組み込まれた状態でユーザに提供される記録媒体等で構成される。リムーバブルメディアは、例えば、磁気ディスク（フロッピディスクを含む）、光ディスク、又は光磁気ディスク等により構成される。光ディスクは、例えば、CD-ROM（Compact  Disk-Read  Only  Memory），DVD（Digital  Versatile  Disk）等により構成される。光磁気ディスクは、MD（Mini-Disk）等により構成される。また、装置本体に予め組み込まれた状態でユーザに提供される記録媒体は、例えば、プログラムが記録されている図１のROM１２や、図１の記憶部１９に含まれるハードディスク等で構成される。
【００８４】
なお、本明細書において、記録媒体に記録されるプログラムを記述するステップは、その順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的或いは個別に実行される処理をも含むものである。
【符号の説明】
【００８５】
１・・・撮像装置、１１・・・CPU、１２・・・ROM、１３・・・RAM、１６・・・撮像部、１７・・・操作部、１８・・・表示部、１９・・・記憶部、２０・・・通信部、２１・・・ドライブ、３１・・・リムーバブルメディア、５１・・・評価画像取得部、５２・・・主要被写体検出部、５３・・・構図特徴解析部、５４・・・構図特徴評価部、５５・・・画像特徴解析部、５６・・・画像特徴評価部、５７・・・美術絵画相当特徴記憶部、５８・・・評価結果利用部
【図１】
0005499818.tif 000002
【図２】
0005499818.tif 000003
【図４】
0005499818.tif 000004
【図５】
0005499818.tif 000005
【図６】
0005499818.tif 000006
【図３】
0005499818.tif 000007