(57)【特許請求の範囲】
【請求項１】
撮影時に撮影シーンを観察する条件を取得する入力視環境取得手段と、
撮影された画像を観察する条件を取得する出力視環境取得手段と、
前記入力視環境取得手段で取得した撮影シーンを観察する条件及び前記出力視環境取得手段で取得した前記画像を観察する条件に基づいて、所定の色の見えモデルを用いて前記画像を変換する変換手段と、
前記画像の撮影時の焦点距離と撮影距離とに基づき算出される被写界深度及び前記焦点距離に基づき算出される画角の少なくとも一方を含む撮影条件、及び、前記画像の前記撮影条件に基づくシーン判定結果の少なくとも一方を用いて、前記変換手段が用いる前記色の見えモデルのパラメータを補正する補正手段と、
前記変換手段で変換した画像を保存する画像保存手段と
を備えることを特徴とする画像処理装置。
【請求項２】
前記色の見えモデルのパラメータは、前記入力視環境取得手段で取得した撮影シーンを観察する条件に基づく周囲の明るさ条件であることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記補正手段は、前記撮影条件及び前記シーン判定結果の少なくとも一方が所定の条件を満たす場合にのみ前記パラメータの補正を行うことを特徴とする請求項１又は２に記載の画像処理装置。
【請求項４】
撮影時に撮影シーンを観察する条件を取得する入力視環境取得ステップと、
撮影された画像を観察する条件を取得する出力視環境取得ステップと、
前記入力視環境取得ステップで取得した撮影シーンを観察する条件及び前記出力視環境取得手段で取得した前記画像を観察する条件に基づいて、所定の色の見えモデルを用いて前記画像を変換する変換ステップと、
前記画像の撮影時の焦点距離と撮影距離とに基づき算出される被写界深度及び前記焦点距離に基づき算出される画角の少なくとも一方を含む撮影条件、及び、前記画像の前記撮影条件に基づくシーン判定結果の少なくとも一方を用いて、前記変換ステップで用いる前記色の見えモデルのパラメータを補正する補正ステップと、
前記変換ステップで変換した画像を保存する画像保存ステップと
を備えることを特徴とする画像処理方法。
【請求項５】
撮像素子と、
請求項１〜３の何れか一項に記載の画像処理装置と
を備えることを特徴とする電子カメラ。
【請求項６】
コンピュータを、請求項１〜３の何れか一項に記載の画像処理装置として機能させる画像処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像処理装置、画像処理方法及び電子カメラに関する。
【背景技術】
【０００２】
照明の白色点や輝度、周囲の明るさと言ったいわゆる視環境が異なる条件では、色の見えが異なる。異なる視環境（シーンや画像の観察条件）下においても色の見えを再現するようにしたカラーマッチング技術としては、例えば、下記特許文献１に記載されたものが知られている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０００−５００８６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
人間は何かに注目している場合、「視野が狭くなる」という比喩に代表されるように、周囲が見えなくなる傾向にある。このため、同じシーンの撮影でも、ポートレートのように主要被写体（人物）に注目している場合と、風景写真のように周囲を広く見ながら撮影している場合とでは、撮影者の見た感覚は異なっている。
【０００５】
しかしながら、従来のカラーマッチング技術では、撮影者が実際に撮影しているときの意図（撮影者の見た感覚）を再現することはできなかった。
【０００６】
本発明は、このような点に鑑みてなされたものであり、撮影者が撮影時に実際に見ている感覚を、画像の見えに再現することができる画像処理装置、画像処理方法及び電子カメラを提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の第１の観点に係る画像処理装置は、撮影時に撮影シーンを観察する条件を取得する入力視環境取得手段と、撮影された画像を観察する条件を取得する出力視環境取得手段と、前記入力視環境取得手段で取得した撮影シーンを観察する条件及び前記出力視環境取得手段で取得した前記画像を観察する条件に基づいて、所定の色の見えモデルを用いて前記画像を変換する変換手段と、前記画像の撮影時の焦点距離と撮影距離とに基づき算出される被写界深度及び前記焦点距離に基づき算出される画角の少なくとも一方を含む撮影条件、及び、前記画像の前記撮影条件に基づくシーン判定結果の少なくとも一方を用いて、前記変換手段が用いる前記色の見えモデルのパラメータを補正する補正手段と、前記変換手段で変換した画像を保存する画像保存手段とを備えて構成される。
【０００８】
本発明の第２の観点に係る画像処理方法は、撮影時に撮影シーンを観察する条件を取得する入力視環境取得ステップと、撮影された画像を観察する条件を取得する出力視環境取得ステップと、前記入力視環境取得ステップで取得した撮影シーンを観察する条件及び前記出力視環境取得手段で取得した前記画像を観察する条件に基づいて、所定の色の見えモデルを用いて前記画像を変換する変換ステップと、前記画像の撮影時の焦点距離と撮影距離とに基づき算出される被写界深度及び前記焦点距離に基づき算出される画角の少なくとも一方を含む撮影条件、及び、前記画像の前記撮影条件に基づくシーン判定結果の少なくとも一方を用いて、前記変換ステップで用いる前記色の見えモデルのパラメータを補正する補正ステップと、前記変換ステップで変換した画像を保存する画像保存ステップとを備えて構成される。
【０００９】
本発明の第３の観点に係る電子カメラは、撮像素子と、本発明の第１の観点に係る画像処理装置とを備えて構成される。
【発明の効果】
【００１０】
本発明によれば、撮影者が撮影時に実際に見ている感覚を、画像の見えに再現することができるという効果がある。
【図面の簡単な説明】
【００１１】
【図１】本発明の実施形態のコンピュータシステムの概略構成を示す図である。
【図２】本発明の実施形態の画像処理装置の機能構成を示すブロック図である。
【図３】本発明の実施形態の画像処理装置による処理を示すフローチャートである。
【図４】本発明の実施形態の画像処理装置の入力視環境の周囲明るさ条件と出力視環境の周囲明るさ条件との組み合わせと階調補正曲線との対応を示す図である。
【図５】本発明の実施形態で用いる階調補正曲線の一例を示す図である。
【発明を実施するための形態】
【００１２】
以下、本発明の実施形態について、図面を参照して詳細に説明する。図１に示すように、本実施形態の画像処理装置は、パーソナルコンピュータ１で実現される。パーソナルコンピュータ１は、デジタルカメラ２、ＣＤ−ＲＯＭやＳＤカード等の記録媒体３、他のコンピュータ４等と接続され、各種の画像データの提供を受ける。パーソナルコンピュータ１は、提供された画像データに対して、異なる視環境下で観察する場合に色の見えを再現するための画像処理（変換処理）を行う。コンピュータ４は、インターネットやその他の電気通信回線５を経由して接続される。
【００１３】
パーソナルコンピュータ１が画像処理のために実行する画像処理プログラムは、ＣＤ−ＲＯＭ等の記録媒体３、インターネットやその他の電気通信回線５を経由して他のコンピュータ４等から提供され、パーソナルコンピュータ１内にインストールされる。パーソナルコンピュータ１は、ＣＰＵ（不図示）、メモリ（不図示）、周辺回路（不図示）、モニタ（ディスプレイ装置）６等を備え、ＣＰＵがインストールされたプログラムを実行する。なお、本実施形態の画像処理装置は、このようにソフトウエアとコンピュータシステムというハードウエア資源とを協働させることによって実現するのみならず、その一部又は全部を、電子回路を用いてハードウエアとして実現するようにしてもよい。また、本実施形態の画像処理装置は、ここでは、パーソナルコンピュータを用いて実現するものとするが、撮像素子（ＣＣＤやＣＭＯＳ等）や撮影レンズ等を備える電子カメラに搭載するようにしてもよい。
【００１４】
パーソナルコンピュータ１によって実現される画像処理装置１０の機能構成が、図２に示されている。この画像処理装置１０は、撮影画像を取得する画像取得部（画像取得手段）１１と、撮影画像の撮影時の撮影シーン観察条件を取得する入力視環境取得部（入力視環境取得手段）１３と、撮影画像を観察する予定の画像観察条件を取得する出力視環境取得部（出力視環境取得手段）１４と、入力視環境取得部１３で取得した撮影シーン観察条件及び出力視環境取得部１４で取得した画像観察条件に基づき、所定の色の見えモデルを用いて撮影画像を変換する見え再現部（変換手段）１５と、撮影画像の撮影時の撮影条件及び該撮影画像もしくは撮影条件に基づくシーン判定結果の少なくとも一方を用いて、見え再現部１５が用いる色の見えモデルのパラメータを補正する補正部（補正手段）１２と、見え再現部１５で変換した画像を保存する画像保存部（画像保存手段）１６とを備えて構成されている。なお、以下では「撮影シーン、もしくは画像を観察する条件（撮影シーン観察条件、又は画像観察条件）」を「視環境」と称する。
【００１５】
本実施形態の画像処理装置１０は、撮影時の視環境（撮影シーンの照明条件）で撮影された画像データを、人間の視覚特性を考慮して、撮影時の視環境とは異なる画像観察時の視環境（例えば、パーソナルコンピュータ１のディスプレイ装置６やプリンタを用いてプリントした写真）で、その画像の色の見えが再現されるように変換した画像データを生成する装置である。以下、この画像処理装置１０による処理の流れを、図３を用いて詳細に説明する。
【００１６】
（入力画像取得Ｓ１）
この画像処理は、パーソナルコンピュータ１で、ユーザがこの画像処理を開始するための操作を行うことにより開始される。処理が開始されると、まず、処理対象の画像データが画像取得部１１により取得される（ステップＳ１）。画像取得部１１による画像取得処理は、ユーザによる操作に応じて、例えば、記録媒体３等からユーザが指定したファイル名に係る画像データを読み込むことにより取得する処理である。なお、ここで取得される画像データには、露出、絞り値、ホワイトバランス値、焦点距離、撮影距離等の撮影時における撮影条件が付加情報として付加されているものとする。
【００１７】
（入力視環境取得Ｓ２）
次いで、入力視環境取得部１３により入力視環境として撮影シーンの視環境が取得される（ステップＳ２）。この入力視環境には、そのパラメータとして、撮影シーンの照明白色点（ＸＷ，ＹＷ，ＺＷ）、照明輝度ＹＷ０、及び周囲輝度ＹＳＷ０が含まれる。照明白色点（ＸＷ，ＹＷ，ＺＷ）と照明輝度ＹＷ０は、例えば、撮影者が撮影時に分光放射輝度計等の周囲光センサを用いて測定しておき、その測定結果をパーソナルコンピュータ１に付属するキーボード等を用いて入力し、この値を読み出すことにより取得することができる。なお、撮影時の照明白色点（ＸＷ，ＹＷ，ＺＷ）については、対象となる撮影画像を撮影した電子カメラに備わっているオートホワイトバランス機能を用いて算出した値を、撮影時の照明輝度ＹＷ０については同じく露出を自動調整するために用いる測光機能の結果を解析して算出した値を用いてもよい。
【００１８】
周囲輝度ＹＳＷ０は、電子カメラにおいて測光範囲を広げて測光した結果を使用して算出した値を用いてもよいし、ユーザが予め入力し画像データに付加された付加情報やパーソナルコンピュータ１においてキーボード等から入力した値を使用してもよい。また、周囲輝度ＹＳＷ０として、例えば、「昼間の外の明るさ」、「室内の明るさ」、「暗い」等の複数の選択肢を予め用意しておき、ユーザがこれらの中から近い条件を、キーボード等を用いて選択指定し、選択した結果に対する平均的な値を用いるようにしてもよい。なお、入力視環境としては、これらの照明白色点、照明輝度、周囲輝度の他、周囲の白色点等の他のパラメータが含まれていてもよい。
【００１９】
（出力視環境及び出力色空間取得Ｓ３）
次いで、出力視環境取得部１４により出力視環境及び出力色空間が取得される（ステップＳ３）。この出力視環境は、当該画像を鑑賞する予定の表示手段（パーソナルコンピュータのディスプレイ装置、電子式のフォトアルバム、写真印刷等）で観察する時の視環境情報である。出力視環境には、そのパラメータとして、当該表示手段に係る照明白色点（ＸＷ’，ＹＷ’，ＺＷ’）とデバイス輝度（照明輝度）ＹＷ０’、及び周囲輝度ＹＳＷ０’）が含まれる。なお、これらの照明白色点、デバイス輝度（照明輝度）、周囲輝度の他、周囲の白色点等の他のパラメータが含まれていてもよい。これらのパラメータの値は、ユーザがコンピュータシステム１においてキーボード等を用いて入力設定した値を読み込むことにより取得することができる。
【００２０】
また、出力視環境は、例えば、「印刷の標準視環境」、「印刷を電球照明下で観察する場合の視環境」、「ディスプレイの標準視環境」、「テレビ表示」、「カメラの背面液晶」等の複数の選択肢を用意しておき、これらの中からユーザが近い条件を選択し、選択した結果に対する一般的な視環境や標準視環境を出力視環境として設定することができる。例えば、ディスプレイの標準視環境で観察する場合には、ｓＲＧＢ標準視環境は、白色点＝Ｄ６５、輝度Ｙｄｅｖｉｃｅ０’＝８０Ｃｄ／ｍ２、周囲輝度ＹＳＷ０’＝４．１Ｃｄ／ｍ２である。ユーザがキーボード等を用いて、画像観察に使用するデバイスの白色点（Ｘｄｅｖｉｃｅ’，Ｙｄｅｖｉｃｅ’，Ｚｄｅｖｉｃｅ’）、輝度Ｙｄｅｖｉｃｅ０’、及び周囲照明白色点（ＸＳＷ’，ＹＳＷ’，ＺＳＷ’）、周囲照明輝度ＹＳＷ０’を入力する場合には、デバイス白色点と周囲照明白色点の混合として画像観察視環境における照明白色点（ＸＷ’，ＹＷ’，ＺＷ’）、輝度ＹＷ０’を決定する。
【００２１】
また、出力色空間は、ｓＲＧＢやＣＭＹＫ等のいくつかの選択肢を用意しておき、これらの中からユーザが選択指定したものを取得する。
【００２２】
（入力視環境の周囲の明るさ条件の決定Ｓ４）
次いで、後述する見え再現処理（ステップＳ８）で用いられる色の見えモデルのパラメータの一つとしての入力視環境の周囲の明るさ条件が決定される（ステップＳ４）。この処理は、見え再現部１５による処理の一部である。この処理では、ＣＩＥＣＡＭ０２で定義されているシーンの視環境における周囲の明るさＳｒを求める。すなわち、照明輝度と周囲輝度の比（ＹＳＷ０／ＹＷ０）としてＳｒを算出し、例えば、下記所定の条件に従って、シーンの視環境における周囲の明るさ条件（「平均的な明るさ」、「薄暗い」、「暗い」）を決定する。
Ｓｒ＞０．２の場合：平均的明るさ
０＜Ｓｒ≦０．２の場合：薄暗い
Ｓｒ＝０：暗い
【００２３】
（被写界深度算出Ｓ５）
次いで、被写界深度が算出される（ステップＳ５）。被写界深度ｄは、撮影条件を用いて以下の式（１）により算出される。なお、このステップＳ５、後述するステップＳ６及びステップＳ７は、補正部１２により行われる処理である。
【００２４】
【数１】
0005407600.tif 000002
但し、
Ｆ：Ｆナンバー
ｆ：焦点距離
ε：許容錯乱円
ｓ：撮影距離
【００２５】
これらの撮影条件（Ｆ，ｆ，ε，ｓ）は、画像データに付加されている付加情報に設定された値又は該設定された値に基づいて算出された値が用いられる。なお、許容錯乱円εは、電子カメラ２に搭載された撮像素子の画素サイズに応じて予め決定された値である。
【００２６】
（画角算出Ｓ６）
次いで、撮影条件としての焦点距離ｆから画角が算出される。
【００２７】
（撮影者の意図の判定及び入力視環境の周囲の明るさ条件の補正Ｓ７）
次にステップＳ５及びＳ６で求めた被写界深度ｄ及び画角により、撮影画像の撮影時における撮影者の意図（撮影者が人物等の主要被写体に注目しているか否か）を所定の条件に従って判定し、該所定の条件を満たす場合に、入力視環境の周囲の明るさ条件を実際に撮影者が意図している周囲の明るさ条件に補正する。すなわち、被写界深度が浅い場合や画角が狭い場合には、撮影者は人物等の主要被写体に注目していると推定されるので、ステップＳ４で決定された入力視環境の周囲の明るさ条件を、これよりも一段暗い条件に補正する。例えば、被写界深度が浅い場合（ｄ≦１ｍ）の場合には、ステップＳ４で決定された入力視環境の周囲の明るさ条件が「平均的な明るさ」である場合には「薄暗い」に補正し、ステップＳ４で決定された入力視環境の周囲の明るさ条件が「薄暗い」である場合には「暗い」に補正する。
【００２８】
被写界深度が上記よりも深い場合（１ｍ＜ｄ≦５ｍ）であっても、画角が小さい場合（画角＜４５°）にも、撮影者は主要被写体に注目していると推定されるので、ステップＳ４で決定された入力視環境の周囲の明るさ条件が「平均的な明るさ」である場合には「薄暗い」に補正し、ステップＳ４で決定された入力視環境の周囲の明るさ条件が「薄暗い」である場合には「暗い」に補正する。これら以外の場合には、撮影者は主要被写体に注目していない（風景等の全体を見ている）と推定されるので、周囲の明るさ条件の補正は行わずに、ステップＳ４で決定された入力視環境の周囲の明るさ条件のままとする。
【００２９】
（見え再現処理Ｓ８）
次いで、見え再現部１５は、画像取得部１１により取得された撮影画像、入力視環境取得部１３により取得された入力視環境（補正部１２により周囲の明るさ条件が補正された場合には該補正された視環境）、及び出力視環境取得部１４により取得された出力視環境に基づいて、見え再現処理を実行する（ステップＳ８）。この見え再現処理は、入力視環境（シーンの視環境）で観察したときの画像の見えが、画像を鑑賞する予定の出力視環境（パーソナルコンピュータのディスプレイ装置や写真印刷等）で観察した時に再現されるように画像変換した出力画像を作成する処理である。
【００３０】
見え再現処理では、ＣＩＥＣＡＭ０２（ＣＩＥ  Ｃｏｌｏｕｒ  Ａｐｐｅａｒａｎｃｅ  Ｍｏｄｅｌ  ２００２）やその他の色の見えモデルを用いて撮影画像から出力画像に変換する。ここでは一例として、パーソナルコンピュータ１の処理負担を軽減するため、ＣＩＥＣＡＭ０２よりも簡単な簡易色の見えモデルを用いて再現する場合の処理を説明する。但し、見え再現処理で用いる色の見えモデルは、このような簡易モデルに限定されるものではない。
【００３１】
まず、撮影画像はデバイス依存の色空間（撮像素子のカメラＲＧＢ空間）で記述されているので、デバイスに依存しない色空間であるＣＩＥ  １９３１  ＸＹＺ色空間へ色変換する。ＲＧＢ色空間からＸＹＺ色空間への変換は、例えば下記式（２）のようなマトリックスＭＲＧＢ→ＸＹＺを用いて変換する。
【００３２】
【数２】
0005407600.tif 000003
【００３３】
次に、入力視環境から出力視環境に色順応変換を行う。色順応変換では、まずそれぞれの視環境への順応度合いを示す順応ファクタＤ，Ｄ’をそれぞれの視環境における照明輝度と周囲の明るさから、下記式（３）及び式（４）を用いて算出する。
【００３４】
【数３】
0005407600.tif 000004
【００３５】
ここで、ＬＡ，ＬＡ’は順応輝度であり、入力視環境及び出力視環境において順応している輝度である。これらの順応輝度ＬＡ，ＬＡ’としては、通常は照明輝度の１／５を用いる。また、Ｆ，Ｆ’は入力視環境及び出力視環境における照明輝度と周囲輝度の比に応じて決まるパラメータであり、この時の入力視環境の周囲の明るさ条件としては、ステップＳ７で補正がなされた場合には補正後の条件が用いられる。ステップＳ７で補正がなされなかった場合には、ステップＳ４で決定された入力視環境に基づく条件が用いられる。
【００３６】
次に、ＸＹＺ色空間から錐体応答ＬＭＳ色空間へマトリックスＭＣＡＴ０２を用いて色変換する。ＬＭＳ色空間で入力視環境及び出力視環境における照明白色点（ＸＷ，ＹＷ，ＺＷ），（ＸＷ’，ＹＷ’，ＺＷ’）と順応ファクタＤ，Ｄ’を用いて、Ｖｏｎ  Ｋｒｉｅｓの色順応予測式を用いて色順応変換を行い、ＬＭＳ色空間からＸＹＺ色空間に変換する。次に、ＸＹＺ色空間からステップＳ３で取得した出力色空間Ｒ’Ｇ’Ｂ’に変換する。すなわち、下記式（５）のような色変換を各画素について行う。
【００３７】
【数４】
0005407600.tif 000005
【００３８】
その後、出力色空間の階調特性に合わせて階調変換を行う。この階調変換では、まず、出力色空間に応じてガンマ補正を行う。例えば、出力色空間としてｓＲＧＢ色空間が選択されていれば、約２．２乗のガンマ値をかける。次に、入力視環境と出力視環境の周囲の明るさ（照明輝度と周囲輝度の比）の組合せに応じて、図４を用いて階調補正曲線を選択し、階調補正を行う。この時の入力視環境の周囲の明るさ条件としては、ステップＳ７で補正がなされた場合には補正後の条件が用いられる。ステップＳ７で補正がなされなかった場合には、ステップＳ４で決定された入力視環境の周囲の明るさ条件が用いられる。なお、この階調補正曲線と出力色空間の階調特性を組み合わせた階調曲線を予め作成しておき、こちらを使用してもよい。
【００３９】
階調補正は以下のように行う。出力視環境の周囲の明るさも、上述した入力視環境の周囲の明るさと同様に、３タイプ（「平均的な明るさ」、「薄暗い」、「暗い」）に大別することができるので、周囲輝度／照明輝度（ＹＳＷ０’／ＹＷＯ’）に基づいて、上述した入力視環境の周囲の明るさ条件の判定（ステップＳ４）と同様の判定を行い、出力視環境の周囲の明るさ条件を決定する。次に、入力視環境の周囲の明るさ条件（ステップＳ７で補正がなされた場合には補正後の周囲の明るさ条件）と出力視環境の周囲の明るさ条件の組み合わせに対応する階調補正曲線の種別（「Ａ」〜「Ｅ」）を図４に従って特定する。
【００４０】
例えば、入力視環境の周囲の明るさが「平均的な明るさ」であり、これが補正されて「薄暗い」とされ、出力視環境の周囲の明るさが「平均的な明るさ」である場合には、階調補正曲線「Ｄ」が選択され、入力視環境の周囲の明るさが「薄暗い」であり、これが補正されて「暗い」とされ、出力視環境の周囲の明るさが「暗い」である場合には、階調補正曲線「Ｃ」が選択される。階調補正曲線「Ａ」〜「Ｅ」としては、例えば、図５に示すような曲線が予め設定されているものとし、対応する曲線を用いて階調補正が行われる。
【００４１】
（出力画像保存Ｓ９）
ステップＳ８において見え再現処理が完了し、見え再現部１５から出力される出力画像（変換画像）は、画像保存部１６により画像ファイルとしてパーソナルコンピュータ１が備えるメモリ（ハードディスク等）や記録媒体３に保存（記憶）される（ステップＳ９）。この保存処理の後、一連の処理が終了する。
【００４２】
本実施形態によれば、ポートレートや接写（マクロ撮影）をしているときのように、主要被写体に注目している撮影条件では、被写界深度が浅いので入力視環境の周囲明るさ条件を一段暗くなるように補正する。従って、実際より明るめに階調が補正され、撮影者の意図が反映された再現画像を得ることができる。一方、風景写真のように被写界深度を深くして撮影している場合には、入力視環境で決まる周囲の明るさ条件のまま使用するため、実際に見た印象や撮影意図に近い再現となる。
【００４３】
なお、上述した実施形態では、図３のステップＳ５で被写界深度を算出し、ステップＳ６で画角を算出し、ステップＳ７でこれらの被写界深度と画角の両方を用いて、入力視環境の周囲の明るさ条件を補正するか否かの判定を行うようにしたが、被写界深度及び画角の一方のみを用いて判定するようにしてもよい。
【００４４】
また、画像データの付加情報として設定される撮影条件に、撮影シーンモード（ポートレート、接写、風景等）が設定されている場合には、この撮影シーンモードに従ってステップＳ７における判定を行うようにしてもよい。この場合には、撮影シーンモードがポートレート又は接写である場合には撮影者が主要被写体に注目していると推定できるので、入力視環境の周囲の明るさ条件を補正し、撮影モードが風景である場合には撮影者が主要被写体に注目していない（全体を見ている）と推定されるので、入力視環境の周囲の明るさ条件を補正しない。この撮影シーンモードに従う判定は、上記の被写界深度及び／又は画角による判定に加えて行うようにしても、単独で行うようにしても何れでもよい。
【００４５】
さらに、ステップＳ７で行う判定処理では、上記では撮影条件に基づいて行っているが、撮影条件ではなく、撮影画像や撮影条件に基づいて公知の顔認識処理やその他の画像解析処理等を用いてシーン判定を行い、その判定結果に基づいて、撮影者が主要被写体に注目しているか否かを判定するようにしてもよい。このようなシーン判定は、上述した撮影条件（被写界深度、画角及び撮影シーンモードのうちの少なくとも１つ）に基づく判定に加えて行うようにしてもよいし、単独で行うようにしても何れでもよい。ステップＳ７の判定処理において、被写界深度、画角、撮影モード、シーン判定の何れか又は２以上の組み合わせのうちの何れを用いるかを、ユーザの選択により任意に変更できるようにしてもよい。
【００４６】
なお、以上説明した実施形態は、本発明の理解を容易にするために記載されたものであって、本発明を限定するために記載されたものではない。従って、上記の実施形態に開示された各要素は、本発明の技術的範囲に属する全ての設計変更や均等物をも含む趣旨である。
【符号の説明】
【００４７】
１…パーソナルコンピュータ、２…電子カメラ、３…記録媒体等、４…他のコンピュータ、５…電気通信回線、６…モニタ（ディスプレイ装置）、１０…画像処理装置、１１…画像取得部、１２…補正部、１３…入力視環境取得部、１４…出力視環境取得部、１５…見え再現部、１６…画像保存部。
【図１】
0005407600.tif 000006
【図２】
0005407600.tif 000007
【図３】
0005407600.tif 000008
【図４】
0005407600.tif 000009
【図５】
0005407600.tif 000010