(57)【要約】【課題】撮影画像データの情報損失を抑制し、且つ、画像処理装置或いは画像記録装置側で、撮像装置で得られた画像データ以上の高品質な鑑賞画像参照データを作成可能にする。【解決手段】撮像装置１００は、撮像により撮像装置の特性に依存したシーン参照生データを生成し、再現補助データ生成部１２により、シーン参照生データに対して出力媒体上での鑑賞画像形成のために最適化する画像処理を施して鑑賞画像参照データを生成する際の再現補助データを生成し、ヘッダ情報処理部８により、シーン参照生データのファイルヘッダ（ヘッダ領域）に再現補助データを添付して添付済みデータファイルを作成し、当該添付済みデータファイルを記憶デバイス９の記録メディアに記録する。【選択図】図１
2006203573.tif 000002
【特許請求の範囲】
【請求項１】
撮像により撮像装置の特性に依存したシーン参照生データを生成するシーン参照生データ生成手段と、
前記シーン参照生データに対して出力媒体上での鑑賞画像形成のために最適化する画像処理を施して鑑賞画像参照データを生成する際の再現補助データを生成する再現補助データ生成手段と、
前記シーン参照生データに前記再現補助データを添付して記録メディアに記録する記録制御手段と、
を備えることを特徴とする撮像装置。
【請求項２】
撮像により撮像装置の特性に依存したシーン参照生データを生成するシーン参照生データ生成手段と、
前記シーン参照生データに対して出力媒体上での鑑賞画像形成のために最適化する画像処理を施して鑑賞画像参照データを生成する際の再現補助データを生成する再現補助データ生成手段と、
撮影時の撮影条件設定を示す撮影情報データを生成する撮影情報データ生成手段と、
前記シーン参照生データに前記再現補助データ及び前記撮影情報データを添付して記録メディアに記録する記録制御手段と、
を備えることを特徴とする撮像装置。
【請求項３】
前記再現補助データには、シーン参照生データから標準化されたシーン参照画像データを生成するための撮像装置特性補正処理に必要な補正情報が含まれることを特徴とする請求項１又は２に記載の撮像装置。
【請求項４】
前記再現補助データには、出力媒体上での鑑賞画像参照データを生成する際に撮像装置での鑑賞画像参照データを復元するための復元情報が含まれることを特徴とする請求項１〜３の何れか一項に記載の撮像装置。
【請求項５】
前記再現補助データには、出力媒体上での鑑賞画像参照データを生成する際に撮像装置での鑑賞画像参照データの生成過程を再現するための再現情報が含まれることを特徴とする請求項１〜４の何れか一項に記載の撮像装置。
【請求項６】
前記再現情報には、撮影条件の正当性を判断するための指標値が含まれることを特徴とする請求項５に記載の撮像装置。
【請求項７】
前記指標値には、撮影時のユーザ特性、光源条件、露出条件の少なくとも一つを特定する値が含まれることを特徴とする請求項６に記載の撮像装置。
【請求項８】
前記光源条件、露出条件は、撮影時の撮影シーン判別処理の判別結果であることを特徴とする請求項７に記載の撮像装置。
【請求項９】
撮像装置の特性に依存したシーン参照生データと、当該シーン参照生データに対して出力媒体上での鑑賞画像形成のために最適化する画像処理を施して鑑賞画像参照データを生成する際の再現補助データと、を入力する入力手段と、
前記入力されたシーン参照生データに対し、前記入力された再現補助データに基づいて最適化処理を施して鑑賞画像参照データを生成する鑑賞画像参照データ生成手段と、
を備えることを特徴とする画像処理装置。
【請求項１０】
撮像装置の特性に依存したシーン参照生データと、当該シーン参照生データに対して出力媒体上での鑑賞画像形成のために最適化する画像処理を施して鑑賞画像参照データを生成する際の再現補助データと、撮影時の撮影条件設定を示す撮影条件データと、を入力する入力手段と、
前記入力されたシーン参照生データに対し、前記入力された再現補助データ及び撮影条件データに基づいて最適化処理を施して鑑賞画像参照データを生成する鑑賞画像参照データ生成手段と、
を備えることを特徴とする画像処理装置。
【請求項１１】
前記再現補助データには、シーン参照生データから標準化されたシーン参照画像データを生成するための撮像装置特性補正処理に必要な補正情報が含まれることを特徴とする請求項９又は１０に記載の画像処理装置。
【請求項１２】
前記再現補助データには、出力媒体上での鑑賞画像参照データを生成する際に撮像装置での鑑賞画像参照データを復元するための復元情報が含まれることを特徴とする請求項９〜１１の何れか一項に記載の画像処理装置。
【請求項１３】
前記再現補助データには、出力媒体上での鑑賞画像参照データを生成する際に撮像装置での鑑賞画像参照データの生成過程を再現するための再現情報が含まれることを特徴とする請求項９〜１２の何れか一項に記載の画像処理装置。
【請求項１４】
前記再現情報には、撮像装置での撮影条件の正当性を判断するための指標値が含まれることを特徴とする請求項１３に記載の画像処理装置。
【請求項１５】
前記指標値には、撮像装置による撮影時のユーザ特性、光源条件、露出条件の少なくとも一つを特定する値が含まれることを特徴とする請求項１４に記載の画像処理装置。
【請求項１６】
前記光源条件、露出条件は、撮影時の撮影シーン判別処理の判別結果であることを特徴とする請求項１５に記載の画像処理装置。
【請求項１７】
請求項９〜１６の何れか一項に記載の画像処理装置と、
前記画像処理装置の鑑賞画像参照データ生成手段により生成された鑑賞画像参照データを用いて出力媒体上に鑑賞画像を形成する画像形成手段と、
を備えることを特徴とする画像記録装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、デジタルカメラ等の撮像装置、撮像装置により得られた撮影画像データに対して出力媒体上での鑑賞画像形成用に最適化処理を施す画像処理装置及び画像記録装置に関する。
【背景技術】
【０００２】
近年、デジタルカメラ等の撮像装置により得られた撮影画像データは、ＣＤ−Ｒ（Compact Disc Recordable）、フロッピー（登録商標）ディスク、メモリーカードなどの記録メディアに記録されたり、インターネット等の通信ネットワーク経由で配信されたり、ＣＲＴ（Cathode Ray Tube）、液晶、プラズマ等のディスプレイモニタや携帯電話の小型液晶モニタの表示デバイスに表示されたり、デジタルプリンタ、インクジェットプリンタ、サーマルプリンタ等の出力デバイスを用いてハードコピー画像としてプリントされたりするなど、その出力方法は多種多様化している。
【０００３】
撮影画像データを鑑賞用途で出力する際には、鑑賞に使用するディスプレイモニタ上或いはハードコピー上において所望の画質が得られるように、一般に、撮影画像データに対し、階調調整、輝度調整、カラーバランス調整、鮮鋭性強調に代表される種々の画像処理が施される。特許文献１には、撮像装置から得られたシーン参照生データ（画像処理が施されていない、被写体の情報を忠実に表す生データ）から標準化されたシーン参照画像データを生成するための補正処理に必要な補助データを、シーン参照生データに添付して記録メディアに記録し、画像処理装置或いは画像記録装置側において、シーン参照生データに添付された補助データを用いて画像処理を行うことにより、撮影画像情報の情報損失を伴うことなく最適化された鑑賞画像を作成可能な技術が開示されている。
【特許文献１】特開２００４−９６５００号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、上述の従来の画像処理では、撮影画像データの情報損失が抑制され、画質調整の自由度が向上されるが、撮像装置内で最適化された鑑賞画像参照データを、画像処理装置或いは画像記録装置側で安定に再現できないという問題があった。また、撮像装置での本撮影に至るまでの、撮像装置に備えられた各種センサや演算プロセスの履歴情報は、画質調整時の有用な情報であるにも関わらず、画像処理装置或いは画像記録装置側でこれらの情報を得ることができないことから、撮像装置で得られた画像データよりも高品位な鑑賞画像参照データを生成することができないという問題があった。
【０００５】
本発明の課題は、撮影画像情報の情報損失を抑制し、且つ、画像処理装置或いは画像記録装置側で、撮像装置で得られた画像データ以上の高品質な鑑賞画像参照データを生成可能にすることである。
【課題を解決するための手段】
【０００６】
上記課題を解決するため、請求項１に記載の発明は、撮像により撮像装置の特性に依存したシーン参照生データを生成するシーン参照生データ生成手段と、
前記シーン参照生データに対して出力媒体上での鑑賞画像形成のために最適化する画像処理を施して鑑賞画像参照データを生成する際の再現補助データを生成する再現補助データ生成手段と、
前記シーン参照生データに前記再現補助データを添付して記録メディアに記録する記録制御手段と、を備えることを特徴としている。
【０００７】
請求項２に記載の発明は、撮像により撮像装置の特性に依存したシーン参照生データを生成するシーン参照生データ生成手段と、
前記シーン参照生データに対して出力媒体上での鑑賞画像形成のために最適化する画像処理を施して鑑賞画像参照データを生成する際の再現補助データを生成する再現補助データ生成手段と、
撮影時の撮影条件設定を示す撮影情報データを生成する撮影情報データ生成手段と、
前記シーン参照生データに前記再現補助データ及び前記撮影情報データを添付して記録メディアに記録する記録制御手段と、を備えることを特徴としている。
【０００８】
請求項３に記載の発明は、請求項１又は２に記載の撮像装置において、前記再現補助データには、シーン参照生データから標準化されたシーン参照画像データを生成するための撮像装置特性補正処理に必要な補正情報が含まれることを特徴としている。
【０００９】
請求項４に記載の発明は、請求項１〜３の何れか一項に記載の撮像装置において、前記再現補助データには、出力媒体上での鑑賞画像参照データを生成する際に撮像装置での鑑賞画像参照データを復元するための復元情報が含まれることを特徴としている。
【００１０】
請求項５に記載の発明は、請求項１〜４の何れか一項に記載の撮像装置において、前記再現補助データには、出力媒体上での鑑賞画像参照データを生成する際に撮像装置での鑑賞画像参照データの生成過程を再現するための再現情報が含まれることを特徴としている。
【００１１】
請求項６に記載の発明は、請求項５に記載の撮像装置において、前記再現情報には、撮影条件の正当性を判断するための指標値が含まれることを特徴としている。
【００１２】
請求項７に記載の発明は、請求項６に記載の撮像装置において、前記指標値には、撮影時のユーザ特性、光源条件、露出条件の少なくとも一つを特定する値が含まれることを特徴としている。
【００１３】
請求項８に記載の発明は、請求項７に記載の撮像装置において、前記光源条件、露出条件は、撮影時の撮影シーン判別処理の判別結果であることを特徴としている。
【００１４】
請求項９に記載の発明は、撮像装置の特性に依存したシーン参照生データと、当該シーン参照生データに対して出力媒体上での鑑賞画像形成のために最適化する画像処理を施して鑑賞画像参照データを生成する際の再現補助データと、を入力する入力手段と、
前記入力されたシーン参照生データに対し、前記入力された再現補助データに基づいて最適化処理を施して鑑賞画像参照データを生成する鑑賞画像参照データ生成手段と、
を備えることを特徴としている。
【００１５】
請求項１０に記載の発明は、撮像装置の特性に依存したシーン参照生データと、当該シーン参照生データに対して出力媒体上での鑑賞画像形成のために最適化する画像処理を施して鑑賞画像参照データを生成する際の再現補助データと、撮影時の撮影条件設定を示す撮影条件データと、を入力する入力手段と、
前記入力されたシーン参照生データに対し、前記入力された再現補助データ及び撮影条件データに基づいて最適化処理を施して鑑賞画像参照データを生成する鑑賞画像参照データ生成手段と、を備えることを特徴としている。
【００１６】
請求項１１に記載の発明は、請求項９又は１０に記載の画像処理装置において、前記再現補助データには、シーン参照生データから標準化されたシーン参照画像データを生成するための撮像装置特性補正処理に必要な補正情報が含まれることを特徴としている。
【００１７】
請求項１２に記載の発明は、請求項９〜１１の何れか一項に記載の画像処理装置において、前記再現補助データには、出力媒体上での鑑賞画像参照データを生成する際に撮像装置での鑑賞画像参照データを復元するための復元情報が含まれることを特徴としている。
【００１８】
請求項１３に記載の発明は、請求項９〜１２の何れか一項に記載の画像処理装置において、前記再現補助データには、出力媒体上での鑑賞画像参照データを生成する際に撮像装置での鑑賞画像参照データの生成過程を再現するための再現情報が含まれることを特徴としている。
【００１９】
請求項１４に記載の発明は、請求項１３に記載の画像処理装置において、前記再現情報には、撮像装置での撮影条件の正当性を判断するための指標値が含まれることを特徴としている。
【００２０】
請求項１５に記載の発明は、請求項１４に記載の画像処理装置において、前記指標値には、撮像装置による撮影時のユーザ特性、光源条件、露出条件の少なくとも一つを特定する値が含まれることを特徴としている。
【００２１】
請求項１６に記載の発明は、請求項１５に記載の画像処理装置において、前記光源条件、露出条件は、撮影時の撮影シーン判別処理の判別結果であることを特徴としている。
【００２２】
請求項１７に記載の発明は、請求項９〜１６の何れか一項に記載の画像処理装置と、
前記画像処理装置の鑑賞画像参照データ生成手段により生成された鑑賞画像参照データを用いて出力媒体上に鑑賞画像を形成する画像形成手段と、を備えることを特徴としている。
【００２３】
〈用語の説明〉
以下、本明細書で使用する用語について説明する。
【００２４】
本明細書の記載において「生成」とは、本発明に係る撮像装置、画像処理装置及び画像記録装置内において作用するプログラム、処理回路が、画像信号やデータを新たに作り出すことである。「作成」を同義語として用いることもある。
【００２５】
本明細書の記載において「撮像装置」とは、光電変換機能を有する撮像素子（イメージセンサ）を備えた装置であって、所謂デジタルカメラやスキャナがこれに含まれる。撮像素子の一例としては、ＣＣＤ（Charge Coupled Device：電荷結合素子）と、電荷転送機構と、市松模様のカラーフィルタとを組み合わせ感色性を付与したＣＣＤ型撮像素子や、ＣＭＯＳ（Complementary Metal-Oxide Semiconductor）型撮像素子が挙げられる。これらの撮像素子の出力電流はＡ/Ｄ変換器によりデジタル化される。この段階での各色チャンネルの内容は、撮像素子固有の分光感度に基づいた信号強度となっている。
【００２６】
また、「撮像装置の特性に依存したシーン参照生データ」とは、被写体に忠実な情報を記録した撮像装置の直接の生出力信号であり、Ａ/Ｄ変換器によりデジタル化されたデータそのものや、該データに固定パターンノイズ・暗電流ノイズ等のノイズ補正を行ったデータを意味する。このシーン参照生データは、階調変換・鮮鋭性強調・彩度強調のような画像鑑賞時の効果を向上するためにデータ内容を改変する画像処理や、撮像素子固有の分光感度に基づく各色チャンネルの信号強度を、ＲＩＭＭ ＲＧＢやｓＲＧＢ等の標準化された色空間にマッピングする処理を省略したものである。シーン参照生データの情報量（例えば階調数）はＡ/Ｄ変換器の性能に準じ、鑑賞画像参照データで必要とされる情報量（例えば階調数）と同等以上であることが好ましい。例えば、鑑賞画像参照データ（後述）の階調数が１チャンネルあたり8bitである場合、シーン参照生データの階調数は12bit以上が好ましく、14bit以上がより好ましく、また16bit以上がさらに好ましい。
【００２７】
また、「出力媒体」とは、例えば、ＣＲＴ（Cathode Ray Tube）、ＬＣＤ（Liquid Crystal Display）、プラズマディスプレイ等の表示デバイスや、銀塩印画紙、インクジェットペーパー、サーマルプリンタ用紙等のハードコピー画像生成用の用紙である。
【００２８】
また、「鑑賞画像参照データ」とは、ＣＲＴ、ＬＣＤ、プラズマディスプレイ等の表示デバイスに用いたり、銀塩印画紙、インクジェットペーパー、サーマルプリンタ用紙等の出力媒体上のハードコピー画像生成に用いるデジタル画像データを意味する。鑑賞画像参照データは、ＣＲＴ、ＬＣＤ、プラズマディスプレイ等の表示デバイスや、銀塩印画紙、インクジェットペーパー、サーマルプリンタ用紙等の出力媒体上において最適な画像が得られるよう「最適化処理」が施されたものであり、シーン参照生データとは異なっている。
【００２９】
また、「記録メディア」とは、撮像装置により出力される「シーン参照生データ」及び「再現補助データ」の保存に用いる記憶媒体であって、コンパクトフラッシュ（登録商標）、メモリースティック（登録商標）、スマートメディア（登録商標）、マルチメディアカード、ハードディスク、フロッピー（登録商標）ディスク、磁気記憶媒体（ＭＯ）、ＣＤ−Ｒなど何れであってもよい。また、記録メディアに書き込むユニットは、撮影装置と一体であっても、コードを介して有線接続された書き込みユニット、インターネット等の通信ネットワークを介して無線状態で接続された独立或いは遠隔地に設置されたユニットなどの何れの態様であってもよい。記録メディアに記録する時のファイル形式は、撮像装置固有の形式ではなく、ＴＩＦＦ（Tagged Image File Format）、ＪＰＥＧ（Joint Photographic Coding Experts Group）、Ｅｘｉｆ（Exchangeable Image File Format）などの規格化された汎用のファイル形式で記録されるのが好ましい。
【００３０】
また、「撮影情報データ」とは、撮影時の撮影条件設定の記録であり、Exifファイルのヘッダ部に書き込まれるタグ情報と同じものを含んでもよい。具体的には、露出時間、シャッタースピード、絞り値（Ｆナンバー）、ＩＳＯ感度、輝度値、被写体距離範囲、光源、ストロボ発光の有無、被写体領域、ホワイトバランス、ズーム倍率、撮影シーン、ストロボ光源の反射光の量、撮影彩度、被写体の種類、被写体構成に関する情報などを示すタグ（コード）などである。
【００３１】
また、「撮影情報データ」は、撮像装置の露出設定や焦点機能の自動化のために、カメラに備えられたセンサの撮影時に得た値、当該センサの値から加工されたデータ或いは当該センサの値に基づいて設定されたカメラの撮影条件に分類されるが、これ以外にも撮像装置に備えられた、撮影モードダイヤル（例えば、ポートレート、スポーツ、マクロ撮影モード等）や、ストロボ強制発光の設定スイッチ等を撮影者がマニュアルで設定した情報も含まれる。
【００３２】
また、「標準化されたシーン参照画像データ」とは、少なくとも撮像素子自体の分光感度に基づく各色チャンネルの信号強度を前述のＲＩＭＭ ＲＧＢやＥＲＩＭＭ ＲＧＢ、ｓｃＲＧＢ等の標準色空間にマッピング済みであり、階調変換・鮮鋭性強調・彩度強調のような画像鑑賞時の効果を向上する為にデータ内容を改変する画像処理が省略された状態の画像データを意味する。またシーン参照画像データは、撮像装置の光電変換特性(ISO1452が定義するopto-electronic conversion function, 例えば、コロナ社「ファインイメージングとディジタル写真」（社）日本写真学会出版委員会編４４９頁参照)の補正を行ったものであることが好ましい。標準化されたシーン参照画像データの情報量（例えば階調数）はＡ/Ｄ変換器の性能に準じ、鑑賞画像参照データで必要とされる情報量（例えば階調数）と同等以上であることが好ましい。例えば、鑑賞画像参照データの階調数が１チャンネルあたり8bitである場合、シーン参照画像データの階調数は12bit以上が好ましく、14bit以上がより好ましく、また16bit以上が更に好ましい。
【００３３】
また、「標準化されたシーン参照画像データを生成するための撮像装置特性補正処理」とは、「撮像装置の特性に依存したシーン参照生データ」を「標準化されたシーン参照画像データ」に変換する処理を意味する。この処理の内容は「撮像装置の特性に依存したシーン参照生データ」の状態に依存するが、少なくとも撮像素子固有の分光感度に基づく各色チャンネルの信号強度をＲＩＭＭ ＲＧＢやＥＲＩＭＭ ＲＧＢ、ｓｃＲＧＢ等の標準色空間にマッピングする処理が含まれる。例えば、「撮像装置の特性に依存したシーン参照生データ」が、カラーフィルタ配列に基づく補間処理を行っていない場合には、該処理の実施が加えて必要になる。（カラーフィルタ配列に基づく補間処理の詳細は、例えばコロナ社「ファインイメージングとディジタル写真」（社）日本写真学会出版委員会編５１頁に記載されている。）この結果、「シーン参照生データ」とほぼ同一の情報量を有しつつも、異なる「撮像装置」間での信号値の差異が補正された「標準化されたシーン参照画像データ」が得られる。
【００３４】
また、「最適化処理」とは、ＣＲＴ、ＬＣＤ、プラズマディスプレイ等の表示デバイスや、銀塩印画紙、インクジェットペーパー、サーマルプリンタ用紙等の出力媒体上において、最適な画像を得るための処理であり、例えば、ｓＲＧＢ規格に準拠したＣＲＴディスプレイモニタに表示することを前提とした場合、ｓＲＧＢ規格の色域内で最適な色再現が得られるように処理される。銀塩印画紙への出力を前提とした場合、銀塩印画紙の色域内で最適な色再現が得られるように処理される。また、色域の圧縮の以外にも、16bitから8bitへの階調圧縮、出力画素数の低減及び出力デバイスの出力特性（ＬＵＴ）への対応処理等も含まれる。更に、ノイズ抑制、鮮鋭化、カラーバランス調整、彩度調整或いは覆い焼き処理等の画像処理が行われることは言うまでもない。
【００３５】
「撮影情報データ」を用いた鑑賞画像参照データの最適化の例を以下に示す。
「被写体構成」の情報により、例えば部分的に彩度強調処理を施したり、ダイナミックレンジの広いシーンでは、覆い焼き処理を施すことが可能となる。
撮影シーンの判別結果により、例えば、夜景撮影では、ホワイトバランス調整の度合いを緩め、カラーバランスを特別に調整することが可能となる。
「ストロボ光源の反射光の量」情報によって、撮影者と被写体との距離が推定され、例えば、肌の白飛びを抑制する画像処理の条件設定に反映させることができる。
「被写体の種類」情報により、例えば人物撮影では、シャープネスの度合いを緩め、平滑化処理を強めることにより、肌のしわを目立たないようにすることができる。
【００３６】
本発明に係る画像記録装置は、本発明に係る撮像装置から取得されるデジタル画像データに対し、本発明に係る画像処理を施す機構以外にも、カラーネガフィルム、カラーリバーサルフィルム、白黒ネガフィルム、白黒リバーサルフィルム等、アナログカメラにより記録された写真感光材料の駒画像情報を入力するフィルムスキャナ、銀塩印画紙であるカラーペーパー上に再現された画像情報を入力するフラットベッドスキャナを備えていても良い。また本発明の撮像装置以外のデジタルカメラにより取得され、コンパクトフラッシュ（登録商標）、メモリースティック（登録商標）、スマートメディア（登録商標）、マルチメディアカード（登録商標）、フロッピー（登録商標）ディスク、光磁気記憶媒体（ＭＯ）、ＣＤ−Ｒなど、公知のあらゆる可搬式の「記録メディア」に保存されたデジタル画像データを読み取る手段、或いは通信手段を介してデジタル画像データを遠隔地より取得し、ＣＲＴ、ＬＣＤ、プラズマディスプレイ等の表示デバイスや、銀塩印画紙、インクジェットペーパー、サーマルプリンタ用紙等のハードコピー画像生成用の用紙など、公知のあらゆる出力媒体に鑑賞画像を形成する処理手段とを備えていてもよい。
【発明の効果】
【００３７】
本発明によれば、鑑賞画像参照データを生成するための再現補助データを撮像装置側で生成して、その再現補助データを撮像装置の特性に依存したシーン参照生データに添付して記録メディアに記録することにより、その記録メディアに記録されたデータを出力媒体に出力する際、その再現補助データを利用して鑑賞画像参照データが生成され、撮影画像情報の情報損失を抑制するとともに、撮像装置で得られた画像データ以上の高品質な鑑賞画像参照データを得ることが可能となる。
【００３８】
また、再現補助データに加え、撮影時の撮影条件設定である撮影情報データをシーン参照生データに添付することにより、画像処理装置或いは画像記録装置側では、再現補助データ及び撮影情報データを利用して鑑賞画像参照データが生成され、一層高品質な鑑賞画像参照データを得ることが可能となる。
【発明を実施するための最良の形態】
【００３９】
以下、図面を参照して、本発明の実施形態を詳細に説明する。
まず、本実施形態における構成について説明する。
【００４０】
〈撮像装置の構成〉
図１に、本発明の実施形態に係る撮像装置１００の主要部構成を示す。撮像装置１００は、図１に示すように、レンズ１、絞り２、ＣＣＤ（Charge Coupled Device）３、アナログ処理回路４、Ａ／Ｄ変換器５、一時記憶メモリ６、画像処理部７、ヘッダ情報処理部８、記憶デバイス９、ＣＣＤ駆動回路１０、制御部１１、再現補助データ生成部１２、操作部１４、表示部１５、ストロボ駆動回路１６、ストロボ１７、焦点距離調整回路１８、自動焦点駆動回路１９、モータ２０等を備えて構成されている。
【００４１】
撮像装置１００の光学系は、レンズ１、絞り２、ＣＣＤ３を備えて構成されている。
レンズ１は、フォーカスの調節を行い、被写体の光画像を結像する。絞り２は、レンズ１を透過した光束の光量を調節する。ＣＣＤ３は、レンズ１により受光面上に結像された被写体光を、ＣＣＤ３内の各センサ毎に光の入射量に応じた量の電気的な信号（撮像信号）へ光電変換する。そして、ＣＣＤ３は、ＣＣＤ駆動回路１０から入力されるタイミングパルスに制御されることにより、この撮像信号をアナログ処理回路４へ順次出力する。
【００４２】
アナログ処理回路４は、ＣＣＤ３から入力された撮像信号に対して、ＲＧＢ信号の増幅やノイズの低減処理等を行う。このアナログ処理回路４における処理は、操作部１４からの操作信号に応じて制御部１１を介してＯＮ／ＯＦＦが切り替えられるようになっている。
【００４３】
Ａ／Ｄ変換器５は、アナログ処理回路４から入力された撮像信号をデジタル信号に変換して出力する。以下では、Ａ／Ｄ変換器５で得られるデジタル信号をシーン参照生データとして説明する。
【００４４】
一時記憶メモリ６は、バッファメモリ等であり、Ａ／Ｄ変換器５から出力された画像データを一時的に格納する。
【００４５】
画像処理部７は、一時記憶メモリ６に格納された画像データに対し、表示部１５で表示するための階調補正、分光感度のクロストーク補正、暗電流ノイズ抑制、鮮鋭化、ホワイトバランス調整、彩度調整等の画質向上処理の他、画像サイズの変更、トリミング、アスペクト変換等の処理を施す。この画像処理部７における処理は、操作部１４からの操作信号に応じて制御部１１を介してＯＮ／ＯＦＦが切り替えられるようになっている。
【００４６】
ヘッダ情報処理部８は、一時記憶メモリ６に格納されたシーン参照生データのファイルヘッダ（ヘッダ領域）に、再現補助データ生成部１２で生成された再現補助データ（詳細は後述）を添付して添付済みデータファイル（図３参照）を作成する。
【００４７】
記憶デバイス９は、不揮発性の半導体メモリ等により構成されており、撮像装置１００の制御プログラムを記憶している。また、記憶デバイス９は、メモリーカード等の記録メディアを装着する装着部を備え、制御部１１から入力される制御信号に従って、装着部に装着された記録メディアの記録されたデータの読み出しや、記録メディアへのデータの書き込みを行う。
【００４８】
ＣＣＤ駆動回路１０は、制御部１１から入力される制御信号に従ってタイミングパルスを出力し、ＣＣＤ３の駆動制御を行う。
【００４９】
制御部１１は、ＣＰＵ（Central Processing Unit）等により構成され、記憶デバイス９に記憶されている撮像装置１００の制御プログラムを読み出して、読み出した制御プログラムに従って撮像装置１００全体の制御を行う。
【００５０】
例えば、制御部１１は、操作部１４からの操作信号に応じて、レンズ１の焦点距離とフォーカス（ピント）を調節するモータ２０の制御を行う自動焦点駆動回路１９、焦点距離調整回路１８、ＣＣＤ駆動回路１０、アナログ処理回路４、一時記憶メモリ６、画像処理部７、表示部１５、ストロボ駆動回路１６の制御を行うことにより、撮影動作を実行させる。また、制御部１１は、撮影で得られたシーン参照生データのファイルヘッダに添付する再現補助データ（詳細は後述）の生成を再現補助データ生成部１２に指示し、記憶デバイス９に対し、シーン参照生データに再現補助データが添付されたデータファイルを記録メディアに記録するように指示する。
【００５１】
再現補助データ生成部１２は、出力媒体上での鑑賞画像形成のための最適化する処理を施して鑑賞画像参照データを生成する際に必要な再現補助データを生成し、生成された再現補助データをヘッダ情報処理部８に出力する。再現補助データ生成部１２の内部構成については、後に図２を参照して詳細に説明する。
【００５２】
操作部１４は、シャッターボタン、電源のＯＮ／ＯＦＦボタン、ズームボタン等の各種機能ボタン、カーソルキー等を備え、各ボタンやキーに対応する操作信号を制御部１１に出力する。
【００５３】
表示部１５は、ＬＣＤ（Liquid Crystal Display）又はＥＬ（ElectroLuminescence）ディスプレイ等により構成され、制御部１１により入力された表示制御信号に従って、所要の表示処理を行う。例えば、表示部１５は、撮像装置１００の使用者が撮影に関する設定や条件を確認するための情報を表示したり、表示部１５での表示用に生成された鑑賞画像参照データを表示したりする。また、表示部１５は、撮影モード時には、ＣＣＤ３により取り込まれた画像を連続的に表示するファインダとしての機能を有する。
【００５４】
ストロボ駆動回路１６は、制御部１１から入力される制御信号により、被写体輝度が低い時にストロボ１７を駆動制御して発光させる。
【００５５】
ストロボ１７は、電池電圧を所定の高電圧に昇圧させ、電荷としてコンデンサに蓄える。そして、ストロボ１７は、ストロボ駆動回路１６により駆動されることにより、コンデンサに蓄えられた電荷によりＸ管を発光して、被写体に対して補助光を照射する。
【００５６】
焦点距離調整回路１８は、制御部１１から入力される制御信号により、レンズ１を移動させて焦点距離を調整するためのモータ２０の制御を行う。
自動焦点駆動回路１９は、制御部１１から入力される制御信号により、レンズ１を移動させてフォーカス（ピント）を調整するためのモータ２０の制御を行う。
【００５７】
図２に、再現補助データ生成部１２の内部構成を示す。再現補助データ生成部１２は、図２に示すように、撮像装置特性補正情報生成部１２１、鑑賞画像参照データ復元情報生成部１２２、処理プロセス再現情報生成部１２３により構成される。
【００５８】
撮像装置特性補正情報生成部１２１は、シーン参照生データから標準化されたシーン参照画像データを生成するための撮像装置特性補正処理に必要な情報（撮像装置特性補正情報）を生成する。撮像装置特性補正処理には、図４に示すように、シーン参照生データに対するフィルタ補間演算（ａ）と、マトリックス演算（ｂ）と、光電変換特性及びゲイン補正（ｃ）がある。
【００５９】
図４（ａ）に示すフィルタ補間演算は、１画素１色のフィルタ配列を有する画像データから１画素３色（ＲＧＢ）のリニア画像データに補間する処理である。ここで、フィルタ配列とは、ＣＣＤの色弁別用カラーフィルタの配列パターンであり、ＲＧＢ原色のベイヤー配列が一般的に用いられる。フィルタ補間方法としては、ニアレストネイバー（nearest neighbor）法、バイリニア（bi-linear interpolation）法、バイキュービック（bi-cubic convolution）法等を適用することが可能である。
【００６０】
ニアレストネイバー法では、着目画素の最近傍の画素を選択し、拡大・縮小のサイズに合わせてピクセルをそのまま拡大・縮小し、必要な箇所のみピクセルを補間する。バイリニア法では、着目画素の周囲の４つの画素の濃度値から、その座標（実数値）に応じて線形の濃度補間を行う。バイキュービック法では、バイリニア法よりも高精度で補間を行うために、着目画素の周囲の１６個の画素の濃度値から、３次関数を用いて補間する。補間に用いる式はsin(πｘ）/πｘで、理論（サンプリング定理）的には最も完全な濃度補間式である。これをテイラー展開でｘの３次の項で近似し、補間式として用いる。
【００６１】
図４（ｂ）に示すマトリックス演算は、カラーフィルタの分光特性や撮像素子の分光感度特性の違いから、同一の被写体色が異なる信号として記録される差異を補正するための演算処理であり、このマトリックス演算によりＲＧＢからＸＹＺ表色系の三刺激値に変換される。
【００６２】
図４（ｃ）は、撮像素子の光電変換特性（リニア変換特性）やゲイン補正（平行移動）に伴う差異を補正するための処理を表すもので、この処理は、図４（ｃ）に示すように、logＥ（Ｅ：露光量）に対しlogＹ（Ｙ：ＸＹＺ表色系の刺激値）がリニアに変換する特性となっている。
【００６３】
図４（ａ）〜（ｃ）に示すような撮像装置特性補正処理により、撮像装置の特性に依存したシーン参照生データからシーン参照画像データ等の標準化された色空間におけるＸＹＺ値へと変換される。なお、撮像装置特性補正処理で適用されるカラーフィルタの配列パターン、マトリクス演算の行列係数ａ〜ｉ、光電変換特性やゲイン補正に伴う差異を補正する係数値は、全て撮像装置毎に異なるものである。
【００６４】
鑑賞画像参照データ復元情報生成部１２２は、シーン参照画像データから鑑賞画像参照データを生成する際に撮像装置１００での鑑賞画像参照データを復元するための復元情報（鑑賞画像参照データ復元情報）のエンコード情報を生成する。
【００６５】
図５（ａ）に、シーン参照画像データの階調変換特性を示す。この階調変換特性は、図５（ａ）に示すように、logＥ（Ｅ：露光量）に対しlogＹ（Ｙ：ＸＹＺ表色系の刺激値）がリニアに変換する特性となっている。
【００６６】
図５（ｂ）に、シーン参照画像データと鑑賞画像参照データのｓＲＧＢ色空間における階調変換特性として、均等色空間であるＬ*ａ*ｂ*表色系のＬ*とlogＥ（Ｅ：露光量）の関係を示す。図５（ｂ）に示した階調変換特性では、今度は鑑賞画像参照データが、logＥに対しＬ*がリニアに変化する特性となっている。
【００６７】
図６（ａ）に、シーン参照画像データから鑑賞画像参照データの変換特性（図中の曲線）を示す。図６（ａ）に示す変換特性に、撮影時の撮影シーン（順光、逆光、アンダー、フラッシュ近接等）に伴う補正を加えることができる。図６（ｂ）に、逆光、フラッシュ近接撮影の光源条件、アンダー、オーバーの露出条件を補正するための鑑賞画像参照データの階調変換特性を示す。図６（ａ）の変換特性と、図６（ｂ）の変換特性を合成したものが、鑑賞画像参照データ復元情報となる。
【００６８】
処理プロセス再現情報生成部１２３は、シーン参照画像データから鑑賞画像参照データを生成する際に撮像装置１００での鑑賞画像参照データの生成過程を再現するための情報（処理プロセス再現情報）を生成する。
【００６９】
図７に、処理プロセス再現情報の一例を示す。処理プロセス再現情報は、本撮影から所定時間前（例えば、2500ms前）までの撮影条件の履歴情報を示し、具体的には、図７に示すように、ユーザ特性を示す手ぶれレベルと、撮影時の撮影シーン（順光、逆光、アンダー、フラッシュ近接等）の判別処理の処理結果を示す指標１〜３と、指標１〜３から算出される合計指標４と、算出された指標に対する評価値１、手ぶれレベルの評価値２及び撮影条件正当性の各項目についての履歴情報を示している。
【００７０】
処理プロセス再現情報において、手ぶれレベルは、手ぶれの度合いを、例えば１０段階（１〜１０の整数）で示したものであり、手ぶれの度合いが高いほど手ぶれレベルの数値が高くなる。
【００７１】
指標１〜３は、撮影時の撮影シーン（順光、逆光、アンダー、フラッシュ近接等）を特定するための数値である。図８に、撮影シーンを判別するための判別マップを示す。本実施形態では、図８に示すように、指標１をストロボ度（ストロボの度合い）、指標２を逆光度（逆光の度合い）、指標３をアンダー度（アンダーの度合い）とする。図８（ａ）に示すように、指標１（ストロボ度）と指標２（逆光度）で決定される領域から逆光と順光が判別され、指標１（ストロボ度）と指標３（アンダー度）で決定される領域から、アンダーとフラッシュ近接が判別される。撮影シーン判別処理については、後に図１０〜図２０を参照して詳細に説明する。
【００７２】
合計指標４の定義を式（１）に示す。
合計指標４＝10−［｛(指標１＋指標２＋指標３＋18)/36｝×10］      （１）
また、評価値１、評価値２は、それぞれ、光源条件・露出条件評価値、手ぶれ評価値を示しており、式（２）、（３）のように定義される。
評価値１＝合計指標４×3.4−5      （２）
評価値２＝−0.54×手ぶれレベル＋8.5      （３）
ここで、式（２）及び式（３）では、指標１〜３のうち、−６以下の値を−６、＋６以上の値を＋６としている。
【００７３】
撮影条件正当性は、撮影時の環境や撮影者の技術レベル等、撮影が正しく行われた程度を示す数値であり、評価値１及び評価値２を用いて式（４）のように定義される。
撮影条件正当性＝評価値１×0.8＋評価値２×0.2    （４）
撮影が正しく行われるほど撮影条件正当性の数値は高くなる。図７の処理プロセス再現情報に示すように、時間の経過とともに撮影条件正当性の数値が高くなるように撮影条件（光源条件、露出条件等）が調整される。
【００７４】
図８（ａ）及び（ｂ）では、図７に示す処理プロセス再現情報で示された指標１〜３の履歴を菱形で示している。図８に示す判別マップ上の履歴情報を表示部１５に表示するようにしてもよい。
【００７５】
なお、上述では、手ぶれレベルを１〜１０の整数値、指標１〜３の数値範囲を−６以上＋６以下としたが、これらの数値範囲は特に限定されない。数値範囲の変更に伴い、合計指標４や評価値１、評価値２の定義は変更される。また、手ぶれ以外のユーザ特性として、ユーザによる各種のモード設定を用いるようにしてもよい。また、処理プロセス再現情報に記録される履歴情報として、シャッタースピード、絞り値等を含めるようにしてもよい。
【００７６】
また、処理プロセス再現情報としての履歴情報の記録は、操作部１４により撮影モードが指定された後に開始し、シャッターボタンが押されたときを本撮影時としてもよいし、操作部１４のシャッターボタンが半押し状態になった後に履歴情報の記録を開始し、シャッターボタンが強く押されたときを本撮影時としてもよい。
【００７７】
図３に、記憶デバイス９の記録メディアに記録されるデータファイルのデータ構造を示す。再現補助データ生成部１２で生成される撮像装置特性補正情報、鑑賞画像参照データ復元情報及び処理プロセス再現情報は、図３に示すように、ヘッダ情報処理部８により、シーン参照生データのファイルヘッダに再現補助データとして添付されて添付済みのデータファイルが作成され、この添付済みのデータファイルが、記憶デバイス９の記録メディアに記録されることになる。
【００７８】
なお、撮像装置１００内で生成された鑑賞画像参照データを、表示部１５での表示用に用いるだけでなく、シーン参照画像データと、この鑑賞画像参照データとを関連付けて記録メディアに記録したり、この鑑賞画像参照データのサムネイル画像をシーン参照生データのメタデータとして添付して記録メディアに記録するようにしてもよい。
【００７９】
次に、撮像装置１００における動作について説明する。
図９のフローチャートを参照して、撮像装置１００において実行される画像データ記録処理について説明する。
【００８０】
操作部１４により撮影モードが指定されると、予備撮像が行われ（ステップＳ１）、予備撮像で得られた画像（以下、予備撮像画像という。）を表示部１５に表示するための鑑賞画像参照データが形成され（ステップＳ２）、その形成された鑑賞画像参照データが表示部１５に表示される（ステップＳ３）。なお、ステップＳ１では、操作部１４によりシャッターボタンが半押し状態になったときに予備撮像が行われるようにしてもよい。
【００８１】
次いで、処理プロセス再現情報生成部１２３において、撮影シーン判別処理（図１０〜図２０参照）が行われ、手ぶれレベルや、撮影シーン判別処理の処理結果としての指標１〜３等から撮影条件正当性を示す値が算出され、算出結果から撮影条件の正当性が判断される（ステップＳ４）。そして、撮影条件正当性の値が高くなるように撮影条件が調整される（ステップＳ５）。ステップＳ１〜Ｓ５の処理は、操作部１４のシャッターボタンが押されて本撮影が指示されるまで繰り返され、本撮影より所定時間前までの撮影条件の履歴情報が処理プロセス再現情報として生成される。
【００８２】
操作部１４のシャッターボタンが押され、本撮影が指示されると（ステップＳ６；ＹＥＳ）、ＣＣＤ３から得られた撮像信号がＡ／Ｄ変換器５によりデジタル信号に変換されることによりシーン参照生データが生成されると同時に（ステップＳ７）、再現補助データ生成部１２では、再現補助データとして、撮像装置特性補正情報、鑑賞画像参照データ復元情報、処理プロセス再現情報が生成される（ステップＳ８）。ステップＳ８で生成される処理プロセス再現情報は、ステップＳ１〜Ｓ５の処理で生成された本撮影前の履歴情報に、本撮影時の情報を追加したものである。なお、本撮影の後に、記録メディアへ記録するための鑑賞画像参照データを作成するステップを追加してもよい。
【００８３】
次いで、ヘッダ情報処理部８において、ステップＳ７で生成されたシーン参照生データのファイルヘッダに、ステップＳ８で生成された再現補助データがタグ情報として添付され（ステップＳ９）、添付済みデータファイル（図３参照）が作成される（ステップＳ１０）。この添付済みデータファイルは、記憶デバイス９の記録メディアに記録、保存され（ステップＳ１１）、本画像データ記録処理が終了する。
【００８４】
<撮影シーン判別処理>
次に、図１０のフローチャートを参照して、撮影条件の正当性を判断する際に必要な撮影シーン判別処理について説明する。
【００８５】
まず、撮影画像データ（例えば、シーン参照生データ）が所定の画像領域に分割され、各分割領域が撮影画像データ全体に占める割合を示す占有率（第１の占有率、第２の占有率）を算出する占有率算出処理が行われる（ステップＴ１）。占有率算出処理の詳細は、後に図１１、図１７を参照して説明する。
【００８６】
次いで、撮影画像データの階調分布の偏りを示す偏倚量を算出する偏倚量算出処理が行われる（ステップＴ２）。ステップＴ２の偏倚量算出処理については、後に図２０を参照して詳細に説明する。
【００８７】
次いで、ステップＴ１で算出された占有率と、撮影条件に応じて予め設定された係数に基づいて撮影シーンを特定するための指標１〜３が算出され（ステップＴ３）、本撮影シーン判別処理が終了する。ステップＴ３における指標の算出方法は、後に詳細に説明する。
【００８８】
次に、図１１のフローチャートを参照して、第１の占有率算出処理について詳細に説明する。
【００８９】
まず、撮影画像データのＲＧＢ値がＨＳＶ表色系に変換される（ステップＴ１０）。図１２は、ＲＧＢからＨＳＶ表色系に変換することにより色相値、彩度値、明度値を得る変換プログラム（ＨＳＶ変換プログラム）の一例を、プログラムコード（ｃ言語）により示したものである。図１２に示すＨＳＶ変換プログラムでは、入力画像データであるデジタル画像データの値を、InR、InG、InBと定義し、算出された色相値をOutHとし、スケールを0〜360と定義し、彩度値をOutS、明度値をOutVとし、単位を0〜255と定義している。
【００９０】
次いで、撮影画像データが、所定の明度と色相の組み合わせからなる領域に分割され、分割領域毎に累積画素数を算出することにより２次元ヒストグラムが作成される（ステップＴ１１）。以下、撮影画像データの領域分割について詳細に説明する。
【００９１】
明度（V）は、明度値が0〜25(v1)、26-50(v2)、51〜84(v3)、85〜169(v4)、170〜199(v5)、200〜224(v6)、225〜255(v7)の７つの領域に分割される。色相(H)は、色相値が0〜39、330〜359の肌色色相領域（H1及びH2）、色相値が40〜160の緑色色相領域（H3）、色相値が161〜250の青色色相領域（H4）、赤色色相領域（H5）の４つの領域に分割される。なお、赤色色相領域（H5）は、撮影条件の判別への寄与が少ないとの知見から、以下の計算では用いていない。肌色色相領域は、更に、肌色領域（H1）と、それ以外の領域（H2）に分割される。以下、肌色色相領域（H＝0〜39、330〜359）のうち、下記の式（５）を満たす色相’(H)を肌色領域（H1）とし、式（５）を満たさない領域を（H2）とする。
10 ＜ 彩度(S) ＜175、
色相'(H) = 色相(H) + 60      (0 ≦ 色相(H) < 300のとき)、
色相'(H) = 色相(H) - 300      (300 ≦ 色相(H) < 360のとき)、
輝度(Y) = InR × 0.30 + InG × 0.59 + InB × 0.11      （Ａ）
として、
色相’(H)／輝度(Y) ＜ 3.0 ×(彩度(S)／255)＋0.7      （５）
従って、撮影画像データの分割領域の数は４×７＝２８個となる。なお、式（５）において明度(V)を用いることも可能である。
【００９２】
２次元ヒストグラムが作成されると、分割領域毎に算出された累積画素数の全画素数（撮影画像全体）に占める割合を示す第１の占有率が算出され（ステップＴ１２）、本第１の占有率算出処理が終了する。明度領域vi、色相領域Hjの組み合わせからなる分割領域において算出された第１の占有率をRijとすると、各分割領域における第１の占有率は表１のように表される。
【表１】
2006203573.tif 000003
【００９３】
次に、指標の算出方法について説明する。
表２に、ストロボ撮影としての確度、即ち、ストロボ撮影時の顔領域の明度状態を定量的に示す指標αを算出するために必要な第１の係数を分割領域別に示す。表２に示された各分割領域の係数は、表１に示した各分割領域の第１の占有率Rijに乗算する重み係数であり、撮影条件に応じて予め設定されている。
【表２】
2006203573.tif 000004
【００９４】
図１３に、明度（v）−色相（H）平面を示す。表２によると、図１３において高明度の肌色色相領域に分布する領域(r1)から算出される第１の占有率には、正(+)の係数が用いられ、それ以外の色相である青色色相領域(r2)から算出される第１の占有率には、負(-)の係数が用いられる。図１５は、肌色領域（H1）における第１の係数と、その他の領域（緑色色相領域（H3））における第１の係数を、明度全体に渡って連続的に変化する曲線（係数曲線）として示したものである。表２及び図１５によると、高明度（V＝170〜224）の領域では、肌色領域（H1）における第１の係数の符号は正(+)であり、その他の領域（例えば、緑色色相領域（H3））における第１の係数の符号は負(-)であり、両者の符号が異なっていることがわかる。
【００９５】
明度領域vi、色相領域Hjにおける第１の係数をCijとすると、指標αを算出するためのHk領域の和は、式（６）のように定義される。
【数１】
2006203573.tif 000005
従って、H1〜H4領域の和は、下記の式(6-1)〜式(6-4)のように表される。
H1領域の和＝R11×(-44.0)＋R21×(-16.0)＋（中略）...＋R71×(-11.3)    (6-1)
H2領域の和＝R12×0.0＋R22×8.6＋（中略）... ＋R72×(-11.1)    (6-2)
H3領域の和＝R13×0.0＋R23×(-6.3)＋（中略）...＋R73×(-10.0)    (6-3)
H4領域の和＝R14×0.0＋R24×(-1.8)＋（中略）...＋R74×(-14.6)    (6-4)
【００９６】
指標αは、式(6-1）〜(6-4）で示されたH1〜H4領域の和を用いて、式（７）のように定義される。
指標α＝H1領域の和＋H2領域の和＋H3領域の和＋H4領域の和＋4.424    （７）
【００９７】
表３に、逆光撮影としての確度、即ち、逆光撮影時の顔領域の明度状態を定量的に示す指標βを算出するために必要な第２の係数を分割領域別に示す。表３に示された各分割領域の係数は、表１に示した各分割領域の第１の占有率Rijに乗算する重み係数であり、撮影条件に応じて予め設定されている。
【表３】
2006203573.tif 000006
【００９８】
図１４に、明度（v）−色相（H）平面を示す。表３によると、図１４において肌色色相領域の中間明度に分布する領域(r4)から算出される占有率には負(-)の係数が用いられ、肌色色相領域の低明度（シャドー）領域(r3)から算出される占有率には正(+)の係数が用いられる。図１６は、肌色領域（H1）における第２の係数を、明度全体に渡って連続的に変化する曲線（係数曲線）として示したものである。表３及び図１６によると、肌色色相領域の、明度値が85〜169(v4)の中間明度領域の第２の係数の符号は負(-)であり、明度値が26〜84(v2,v3)の低明度（シャドー）領域の第２の係数の符号は正(+)であり、両領域での係数の符号が異なっていることがわかる。
【００９９】
明度領域vi、色相領域Hjにおける第２の係数をDijとすると、指標βを算出するためのHk領域の和は、式（８）のように定義される。
【数２】
2006203573.tif 000007
従って、H1〜H4領域の和は、下記の式(8-1)〜式(8-4)のように表される。
H1領域の和＝R11×(-27.0)＋R21×4.5＋（中略）...＋R71×(-24.0)    (8-1)
H2領域の和＝R12×0.0＋R22×4.7＋（中略）... ＋R72×(-8.5)    (8-2)
H3領域の和＝R13×0.0＋R23×0.0＋（中略）...＋R73×0.0    (8-3)
H4領域の和＝R14×0.0＋R24×(-5.1)＋（中略）...＋R74×7.2    (8-4)
【０１００】
指標βは、式(8-1）〜(8-4）で示されたH1〜H4領域の和を用いて、式（９）のように定義される。
指標β＝H1領域の和＋H2領域の和＋H3領域の和＋H4領域の和＋1.554    （９）
指標α及び指標βは、撮影画像データの明度と色相の分布量に基づいて算出されるため、撮影画像データがカラー画像である場合の撮影シーンの判別に有効である。
【０１０１】
次に、図１７のフローチャートを参照して、指標γを算出するために実行される第２の占有率算出処理について詳細に説明する。
【０１０２】
まず、撮影画像データのＲＧＢ値がＨＳＶ表色系に変換される（ステップＴ２０）。次いで、撮影画像データが、撮影画像画面の外縁からの距離と明度の組み合わせからなる領域に分割され、分割領域毎に累積画素数を算出することにより２次元ヒストグラムが作成される（ステップＴ２１）。以下、撮影画像データの領域分割について詳細に説明する。
【０１０３】
図１８（ａ）〜（ｄ）に、撮影画像データの画面の外縁からの距離に応じて分割された４つの領域ｎ１〜ｎ４を示す。図１８（ａ）に示す領域ｎ１が外枠であり、図１８（ｂ）に示す領域ｎ２が、外枠の内側の領域であり、図１８（ｃ）に示す領域ｎ３が、領域ｎ２の更に内側の領域であり、図１８（ｄ）に示す領域ｎ４が、撮影画像画面の中心部の領域である。また、明度は、上述のようにv1〜v7の７つの領域に分割するものとする。従って、撮影画像データを、撮影画像画面の外縁からの距離と明度の組み合わせからなる領域に分割した場合の分割領域の数は４×７＝２８個となる。
【０１０４】
２次元ヒストグラムが作成されると、分割領域毎に算出された累積画素数の全画素数（撮影画像全体）に占める割合を示す第２の占有率が算出され（ステップＴ２２）、本第２の占有率算出処理が終了する。明度領域vi、画面領域njの組み合わせからなる分割領域において算出された第２の占有率をQijとすると、各分割領域における第２の占有率は表４のように表される。
【表４】
2006203573.tif 000008
【０１０５】
次に、第２の占有率を用いて算出される指標γの算出方法について説明する。
表５に、指標γを算出するために必要な第３の係数を分割領域別に示す。表５に示された各分割領域の係数は、表４に示した各分割領域の第２の占有率Qijに乗算する重み係数であり、撮影条件に応じて予め設定されている。
【表５】
2006203573.tif 000009
図１９は、画面領域ｎ１〜ｎ４における第３の係数を、明度全体に渡って連続的に変化する曲線（係数曲線）として示したものである。
【０１０６】
明度領域vi、画面領域njにおける第３の係数をEijとすると、指標γを算出するためのnk領域（画面領域nk）の和は、式（１０）のように定義される。
【数３】
2006203573.tif 000010
従って、ｎ１〜ｎ４領域の和は、下記の式(10-1)〜式(10-4)のように表される。
n1領域の和＝Q11×40.1＋Q21×37.0＋（中略）...＋Q71×22.0    (10-1)
n2領域の和＝Q12×(-14.8)＋Q22×(-10.5)＋（中略）...＋Q72×0.0    (10-2)
n3領域の和＝Q13×24.6＋Q23×12.1＋（中略）...＋Q73×10.1    (10-3)
n4領域の和＝Q14×1.5＋Q24×(-32.9)＋（中略）...＋Q74×(-52.2)    (10-4)
【０１０７】
指標γは、式(10-1）〜(10-4）で示されたｎ１〜ｎ４領域の和を用いて、式（１１）のように定義される。
指標γ＝n1領域の和＋n2領域の和＋n3領域の和＋n4領域の和−12.6201    （１１）
指標γは、撮影画像データの明度の分布位置による構図的な特徴（撮影画像データの画面の外縁からの距離）に基づいて算出されるため、カラー画像だけでなくモノクロ画像の撮影条件を判別するのにも有効である。
【０１０８】
次に、図２０のフローチャートを参照して、偏倚量算出処理（図１０のステップＴ２）について説明する。
【０１０９】
まず、撮影画像データのＲＧＢ（Red,Green,Blue）値から、式（Ａ）を用いて各画素の輝度Ｙ（明るさ）が算出され、輝度の標準偏差(x1)が算出される（ステップＴ２３）。輝度の標準偏差(x1)は、式（１２）のように定義される。
【数４】
2006203573.tif 000011
式（１２）において、画素輝度値とは、撮影画像データの各画素の輝度であり、平均輝度値とは、撮影画像データの輝度の平均値である。また、全体画素数とは、撮影画像データ全体の画素数である。
【０１１０】
次いで、式（１３）に示すように、輝度差分値(x2)が算出される（ステップＴ２４）。
輝度差分値(x2)＝（最大輝度値−平均輝度値）／255      （１３）
式（１３）において、最大輝度値とは、撮影画像データの輝度の最大値である。
【０１１１】
次いで、撮影画像データの画面中央部における肌色領域の平均輝度値(x3)が算出され（ステップＴ２５）、更に、当該画面中央部における平均輝度値(x4)が算出される（ステップＴ２６）。ここで、画面中央部とは、例えば、図１８において、領域ｎ３及び領域ｎ４により構成される領域である。
【０１１２】
次いで、肌色輝度分布値(x5)が算出され（ステップＴ２７）、本偏倚量算出処理が終了する。撮影画像データの肌色領域の最大輝度値をYskin_max、肌色領域の最小輝度値をYskin_min、肌色領域の平均輝度値をYskin_aveとすると、肌色輝度分布値(x5)は、式（１４）のように定義される。
x5＝(Yskin_max−Yskin_min)／2 −Yskin_ave      （１４）
【０１１３】
撮影画像データの画面中央部における肌色領域の平均輝度値をx6とする。ここでの画面中央部とは、例えば、図１８の領域ｎ２、領域ｎ３及び領域ｎ４から構成される領域である。このとき、図７及び図８に示す指標１は、指標α、指標γ、x6を用いて式（１５）のように定義され、指標２は、指標β、指標γ、x6を用いて式（１６）のように定義される。
指標１＝0.46×指標α＋0.61×指標γ＋0.01×x6−0.79        （１５）
指標２＝0.58×指標β＋0.18×指標γ＋(-0.03)×x6＋3.34     （１６）
ここで、式（１５）及び式（１６）において各指標に乗算される重み係数は、撮影条件に応じて予め設定されている。
【０１１４】
図７及び図８に示す指標３は、偏倚量算出処理で算出された偏倚量(x1)〜(x5)に、撮影条件に応じて予め設定された第４の係数を乗算することにより得られる。表６に、各偏倚量に乗算する重み係数である第４の係数を示す。
【表６】
2006203573.tif 000012
指標３は、式（１７）のように定義される。
指標３＝x1×0.02＋x2×1.13＋x3×0.06＋x4×(-0.01)＋x5×0.03−6.49    （１７）
この指標３は、撮影画像データの画面の構図的な特徴だけでなく、輝度ヒストグラム分布情報を持ち合わせており、特に、ストロボ（フラッシュ近接）撮影シーンとアンダー撮影シーンの判別に有効である。
【０１１５】
以上のように、本実施形態の撮像装置１００によれば、鑑賞画像参照データを生成するための再現補助データを撮像装置側で生成して、その再現補助データを撮像装置の特性に依存したシーン参照生データに添付して記録メディアに記録することにより、その記録メディアに記録されたデータを出力媒体上に出力する際、その再現補助データを利用して鑑賞画像参照データが生成され、撮影画像情報の情報損失を抑制するとともに、撮像装置で得られた画像データ以上の高品質な鑑賞画像参照データを得ることが可能となる。
【０１１６】
〈撮像装置の変形例〉
次に、撮像装置の記録メディアに記録された画像データの出力先で、一層好ましい画像を得るために、図１の撮像装置１００の構成に、撮影情報データ生成部１３を追加して構成される撮像装置１０１について説明する。図２１に、撮像装置１００の変形例としての撮像装置１０１の構成を示す。図２１の撮像装置１０１では、図１の撮像装置１００と同一の構成要素には同一の符号を付し、その構成説明を省略する。
【０１１７】
撮影情報データ生成部１３は、撮影時の撮影条件設定である撮影情報データを生成する。この撮影情報データは、例えば、カメラ名称やコード番号など、カメラ種別（機種）に直接関係する情報や、露出時間、シャッタースピード、絞り値（Ｆナンバー）、ＩＳＯ感度、輝度値、被写体距離範囲、光源、ストロボ発光の有無、被写体領域、ホワイトバランス、ズーム倍率、被写体構成、撮影シーン、ストロボ光源の反射光の量、撮影彩度などの撮影条件設定、被写体の種類に関する情報等である。
【０１１８】
図２２に、撮像装置１０１の記憶デバイス９の記録メディアに記録されるデータファイルのデータ構造を示す。再現補助データ生成部１２で生成される撮像装置特性補正情報、鑑賞画像参照データ復元情報及び処理プロセス再現情報と、撮影情報データ生成部１３で生成された撮影情報データは、ヘッダ情報処理部８により、シーン参照生データのファイルヘッダに再現補助データとして添付されて添付済みのデータファイルが作成され、この添付済みのデータファイルが、記憶デバイス９の記録メディアに記録されることになる。
【０１１９】
次に、撮像装置１０１における動作について説明する。
図２３のフローチャートを参照して、撮像装置１０１において実行される画像データ記録処理について説明する。
【０１２０】
操作部１４により撮影モードが指定されると、予備撮像が行われ（ステップＳ２０）、予備撮像で得られた画像（以下、予備撮像画像という。）を表示部１５に表示するための鑑賞画像参照データが形成され（ステップＳ２１）、その形成された鑑賞画像参照データが表示部１５に表示される（ステップＳ２２）。なお、ステップＳ２０では、操作部１４によりシャッターボタンが半押し状態になったときに予備撮像が行われるようにしてもよい。
【０１２１】
次いで、処理プロセス再現情報生成部１２３において、手ぶれレベルや、シーン判別処理結果としての指標１〜３等から撮影条件正当性の値が算出され、算出結果から撮影条件の正当性が判断される（ステップＳ２３）。そして、撮影条件正当性の値が高くなるように撮影条件が調整される（ステップＳ２４）。ステップＳ２０〜Ｓ２４の処理は、操作部１４のシャッターボタンが押されて本撮影が指示されるまで繰り返され、本撮影より所定時間前までの撮影条件の履歴情報が処理プロセス再現情報として生成される。
【０１２２】
操作部１４のシャッターボタンが押され、本撮影が指示されると（ステップＳ２５；ＹＥＳ）、ＣＣＤ３から得られた撮像信号がＡ／Ｄ変換器５によりデジタル信号に変換されることによりシーン参照生データが生成されると同時に（ステップＳ２６）、再現補助データ生成部１２では、再現補助データとして、撮像装置特性補正情報、鑑賞画像参照データ復元情報、処理プロセス再現情報が生成され（ステップＳ２７）、撮影情報データ生成部１３では、撮影情報データが生成される（ステップＳ２８）。ステップＳ２７で生成される処理プロセス再現情報は、ステップＳ２０〜Ｓ２４の処理で生成された本撮影前の履歴情報に、本撮影時の情報を追加したものである。なお、本撮影の後に、記録メディアへ記録するための鑑賞画像参照データを作成するステップを追加してもよい。
【０１２３】
次いで、ヘッダ情報処理部８において、ステップＳ２６で生成されたシーン参照生データのファイルヘッダに、ステップＳ２７で生成された再現補助データ及びステップＳ２８で生成された撮影情報データがタグ情報として添付され（ステップＳ２９）、添付済みデータファイル（図２２参照）が作成される（ステップＳ３０）。この添付済みデータファイルは、記憶デバイス９の記録メディアに記録、保存され（ステップＳ３１）、本画像データ記録処理が終了する。
【０１２４】
以上のように、図２１に示す撮像装置１０１によれば、再現補助データに加え、撮影時の撮影条件設定である撮影情報データをシーン参照生データのファイルヘッダに添付して記録メディアに記録することにより、その記録メディアに記録されたデータを出力媒体上に出力する際、撮影状況に応じた鑑賞画像参照データの生成が可能となる。
【０１２５】
添付済みデータファイルが記録された記録メディアは撮像装置本体から取り出され、画像処理装置や画像記録装置等の外部装置に装着され、その外部装置において、出力媒体上での鑑賞画像形成のために最適化する画像処理が施されて鑑賞画像参照データが生成されることになる。
【０１２６】
次に、記録メディアに記録された画像データに、出力媒体上での鑑賞画像形成のために最適化する画像処理を施す画像記録装置について説明する。
〈画像記録装置の構成〉
図２４に、本発明の実施形態に係る画像記録装置２０１の外観構成を示す。
【０１２７】
画像記録装置２０１には、本体２０２の一側面にマガジン装填部２０３が設けられ、本体２０２内には、出力媒体である銀塩印画紙に露光する露光処理部２０４と、露光された銀塩印画紙を現像処理して乾燥し、プリントを作成するプリント作成部２０５が備えられている。プリント作成部２０５で作成されたプリントは、本体２０２の他側面に設けられたトレー２０６に排出される。更に、本体２０２の内部には、画像記録装置２０１を構成する各部を制御する制御部２０７が備えられている。
【０１２８】
また、本体２０２の上部には、表示部２０８、透過原稿読み込み装置であるフィルムスキャナ部２０９、反射原稿入力装置２１０、操作部２１１が配置されている。更に、本体２０２には、各種記録メディアに記録された画像データを読み取り可能な画像読込部２１４、各種記録メディアに画像データを書き込む画像書込部２１５が備えられている。
【０１２９】
フィルムスキャナ部２０９や反射原稿入力装置２１０から読み込まれる原稿として写真感光材料がある。この写真感光材料としては、カラーネガフィルム、カラーリバーサルフィルム、白黒ネガフィルム、白黒リバーサルフィルム等が挙げられ、アナログカメラにより撮像された駒画像情報が記録される。フィルムスキャナ部２０９は、写真感光材料に記録された駒画像情報をデジタル画像データに変換し、駒画像データとする。また、写真感光材料が銀塩印画紙であるカラーペーパーの場合、反射原稿入力装置２１０は、この銀塩印画紙に記録された駒画像情報を、フラットベッドスキャナにより駒画像データに変換する。
【０１３０】
画像読込部２１４は、ＰＣカード用アダプタ２１４ａ、フロッピー（登録商標）ディスク用アダプタ２１４ｂを備え、それぞれ、ＰＣカード２１３ａ、フロッピー（登録商標）ディスク２１３ｂが差し込み可能になっている。ＰＣカード２１３ａは、例えば、デジタルカメラで撮像して複数の駒画像データが記憶されたメモリを有する。フロッピー（登録商標）ディスク２１３ｂには、例えば、デジタルカメラで撮像された複数の駒画像データが記録される。ＰＣカード２１３ａ及びフロッピー（登録商標）ディスク２１３ｂ以外に駒画像データが記録される記録メディアとしては、例えば、マルチメディアカード（登録商標）、メモリースティック（登録商標）、ＭＤデータ、ＣＤ−ＲＯＭ等が挙げられる。
【０１３１】
画像書込部２１５には、フロッピー（登録商標）ディスク用アダプタ２１５ａ、ＭＯ用アダプタ２１５ｂ、光ディスク用アダプタ２１５ｃが備えられ、それぞれ、フロッピー（登録商標）ディスク２１６ａ、ＭＯ２１６ｂ、光ディスク２１６ｃが差し込み可能になっている。光ディスク２１６ｃとしては、ＣＤ−Ｒ、ＤＶＤ−Ｒ等がある。
【０１３２】
なお、図２４では、操作部２１１、表示部２０８、フィルムスキャナ部２０９、反射原稿入力装置２１０、画像読込部２１４が、本体２０２に一体的に備えられた構造となっているが、これらの何れか１つ以上を別体として設けるようにしてもよい。
【０１３３】
なお、図２４に示した画像記録装置２０１では、感光材料に露光して現像してプリントを作成するものが例示されているが、プリント作成方式はこれに限定されず、例えば、インクジェット方式、電子写真方式、感熱方式、昇華方式等の方式を用いるようにしてもよい。
【０１３４】
〈画像記録装置の内部構成〉
図２５に、画像記録装置２０１の内部構成を示す。画像記録装置２０１は、図２５に示すように、制御部２０７、露光処理部２０４、プリント作成部２０５、フィルムスキャナ部２０９、反射原稿入力装置２１０、画像読込部２１４、画像書込部２１５、データ蓄積手段２７１、テンプレート記憶手段２７２、操作部２１１、表示部２０８により構成される。
【０１３５】
制御部２０７は、マイクロコンピュータにより構成され、ＲＯＭ（Read Only Memory）等の記憶部（図示略）に記憶されている各種制御プログラムと、ＣＰＵ（Central Processing Unit）（図示略）との協働により、画像記録装置２０１を構成する各部の動作を制御する。
【０１３６】
また、制御部２０７は、画像処理部２７０を有し、操作部２１１の情報入力手段１２からの入力信号に基づいて、フィルムスキャナ部２０９や反射原稿入力装置２１０から読み取られた画像データ、画像読込部２１４から読み込まれた画像データ又は通信手段（図示略）を介して外部機器より入力された画像データに画像処理を施して露光用画像情報を形成し、露光処理部２０４に出力する。この画像処理部２７０は、画像処理された画像データに対して出力形態に応じた変換処理を施して指定された出力先に出力する。画像処理部２７０の出力先としては、表示部２０８、画像書込部２１５、通信手段等がある。
【０１３７】
露光処理部２０４は、感光材料に画像の露光を行い、この感光材料をプリント作成部２０５に出力する。プリント作成部２０５は、露光された感光材料を現像処理して乾燥し、プリントＰ１、Ｐ２、Ｐ３を作成する。プリントＰ１は、サービスサイズ、ハイビジョンサイズ、パノラマサイズ等のプリントであり、プリントＰ２は、Ａ４サイズのプリントであり、プリントＰ３は、名刺サイズのプリントである。
【０１３８】
フィルムスキャナ部２０９は、アナログカメラにより撮像された現像済みのネガフィルムＮ、リバーサルフィルム等の透過原稿に記録された駒画像を読み取り、駒画像のデジタル画像信号を取得する。反射原稿入力装置２１０は、フラットベッドスキャナにより、プリントＰ（写真プリント、書画、各種の印刷物）上の画像を読み取り、デジタル画像信号を取得する。
【０１３９】
操作部２１１には、情報入力手段２１２が設けられている。情報入力手段２１２は、例えば、タッチパネル等により構成されており、情報入力手段２１２の操作信号を制御部２０７に出力する。また、操作部２１１は、キーボードやマウスを備えて構成するようにしてもよい。
【０１４０】
画像読込部２１４は、ＰＣカード２１３ａやフロッピー（登録商標）ディスク２１３ｂに記録された駒画像情報を読み出して制御部２０７に転送する。この画像読込部２１４は、画像転送手段２３０として、ＰＣカード用アダプタ２１４ａ、フロッピー（登録商標）ディスク用アダプタ２１４ｂ等を有する。画像読込部１４は、ＰＣカード用アダプタ２１４ａに差し込まれたＰＣカード２１３ａや、フロッピー（登録商標）ディスク用アダプタ２１４ｂに差し込まれたフロッピー（登録商標）ディスク２１３ｂに記録された駒画像情報を読み取り、制御部２０７に転送する。ＰＣカード用アダプタ２１４ａとしては、例えばＰＣカードリーダやＰＣカードスロット等が用いられる。
【０１４１】
画像書込部２１５は、画像搬送部２３１として、フロッピー（登録商標）ディスク用アダプタ２１５ａ、ＭＯ用アダプタ２１５ｂ、光ディスク用アダプタ２１５ｃを備えている。画像書込部２１５は、制御部２０７から入力される書込信号に従って、フロッピー（登録商標）ディスク用アダプタ２１５ａに差し込まれたフロッピー（登録商標）ディスク２１６ａ、ＭＯ用アダプタ２１５ｂに差し込まれたＭＯ２１６ｂ、光ディスク用アダプタ２１５ｃに差し込まれた光ディスク２１６ｃに、本発明における画像処理方法によって生成された画像データを書き込む。
【０１４２】
データ蓄積手段２７１は、画像情報とそれに対応する注文情報（どの駒の画像から何枚プリントを作成するかの情報、プリントサイズの情報等）とを記憶し順次蓄積する。
【０１４３】
テンプレート記憶手段２７２は、サンプル識別情報Ｄ１、Ｄ２、Ｄ３に対応してサンプル画像データ（背景画像やイラスト画像等を示すデータ）を記憶すると共に、該サンプル画像データとの合成領域を設定するテンプレートのデータを少なくとも１つ記憶する。ここで、オペレータの操作（このオペレータの操作は、クライアントの指示に基づく）によりテンプレート記憶手段２７２に予め記憶された複数のテンプレートから所定のテンプレートが選択されると、制御部２０７は、駒画像情報と当該選択されたテンプレートとを合成し、次いで、オペレータの操作（このオペレータの操作は、クライアントの指示に基づく）によりサンプル識別情報Ｄ１、Ｄ２、Ｄ３が指定されると、当該指定されたサンプル識別情報Ｄ１、Ｄ２、Ｄ３に基づいてサンプル画像データを選択し、当該選択されたサンプル画像データと、クライアントにより注文された画像データ及び／又は文字データを合成して、結果としてクライアントが所望するサンプル画像データに基づくプリントを作成する。このテンプレートによる合成は、周知のクロマキー法によって行なわれる。
【０１４４】
なお、サンプル識別情報は、サンプル識別情報Ｄ１、Ｄ２、Ｄ３の３種類に限らず、３種類より多くても、また、少なくてもよい。
また、プリントのサンプルを指定するサンプル識別情報Ｄ１、Ｄ２、Ｄ３は、操作部２１１から入力される様に構成されているが、サンプル識別情報Ｄ１、Ｄ２、Ｄ３が、プリントのサンプル又は注文シートに記録されているため、ＯＣＲ（Optical Character Reader）等の読み取り手段により読み取ることができる。又は、オペレータがキーボードから入力することもできる。
【０１４５】
このようにプリントのサンプルを指定するサンプル識別情報Ｄ１に対応してサンプル画像データを記録しておき、プリントのサンプルを指定するサンプル識別情報Ｄ１を入力し、この入力されるサンプル識別情報Ｄ１に基づきサンプル画像データを選択し、この選択されたサンプル画像データと、注文に基づく画像データ及び／又は文字データとを合成し、指定によるサンプルに基づくプリントを作成するため、種々の実物大のサンプルをユーザが実際に手にしてプリントの注文ができ、幅広いユーザの多様な要求に応じることができる。
【０１４６】
また、第１のサンプルを指定する第１のサンプル識別情報Ｄ２と第１のサンプルの画像データを記憶し、また、第２のサンプルを指定する第２のサンプル識別情報Ｄ３と第２のサンプルの画像データを記憶し、指定される第１及び第２のサンプル識別情報Ｄ２、Ｄ３とに基づいて選択されたサンプル画像データと、注文に基づく画像データ及び／又は文字データとを合成し、指定によるサンプルに基づくプリントを作成するため、さらに多種多様の画像を合成することができ、より一層幅広いユーザの多様な要求に応じたプリントを作成することができる。
【０１４７】
表示部２０８は、ＣＲＴやＬＣＤ等の表示ディスプレイにより構成され、制御部２０７から入力される表示制御信号に従って表示処理を行う。
【０１４８】
制御部２０７の画像処理部２７０は、通信手段（図示略）を用いて、画像記録装置２０１が設置されている施設内の別のコンピュータや、インターネット等の通信ネットワークを介した遠方のコンピュータから、撮像画像を表す画像データとプリント等の作業命令を受信し、遠隔操作で画像処理を実施したりプリントを作成したりすることも可能になっている。
【０１４９】
また、画像処理部２７０は、通信手段（図示略）を用いて、本発明の画像処理を施した後の撮影画像を表す画像データと付帯するオーダー情報を、施設内の別のコンピュータやインターネット等を介した遠方のコンピュータに対して送付することも可能になっている。
【０１５０】
このように画像記録装置２０１は、各種記録メディアの画像及び画像原稿を分割測光して得られた画像情報を取り込む入力手段と、この入力手段から取り入れた入力画像の画像情報を「出力画像の大きさ」と「出力画像における主要被写体の大きさ」という情報を取得又は推定して出力媒体上で画像を観察する際に好ましい印象を与える画像となるように処理を行う画像処理手段と、処理済の画像を表示、プリント出力、記録メディアに書き込む画像出力手段及び通信回線を介して施設内の別のコンピュータやインターネット等を介した遠方のコンピュータに対して画像データと付帯するオーダー情報を送信する通信手段とを有する。
【０１５１】
図２６に、画像記録装置２０１を、画像処理装置３０１と、画像処理装置３０１で画像処理された画像データを出力する出力部３０２に分けた場合の内部構成を示す。
【０１５２】
画像処理装置３０１は、図２６に示すように、入力部３０３、ヘッダ情報解析部３０４、撮像装置特性補正処理部３０５、鑑賞画像参照データ復元条件生成部３０６、処理プロセス再現部３０７、最適化処理部３０８により構成される。
【０１５３】
入力部３０３は、図２５の画像読込部２１４を含み、記録メディアを装着する装着部を備えている。入力部３０３は、記録メディアが装着部に装着されると、当該記録メディアに記録されたデータファイルを読み出して、ヘッダ情報解析部３０４に出力する。なお、本実施形態では、入力部３０３が、装着された記録メディアからデータファイルを読み出すこととして説明するが、有線又は無線の通信手段を備え、この通信手段を介してデータファイルを入力するようにしてもよい。
【０１５４】
ヘッダ情報解析部３０４は、入力部３０３から入力されたデータファイルを解析し、当該データファイルを、シーン参照生データ、再現補助データ（撮像装置特性補正情報、鑑賞画像参照データ復元情報、処理プロセス再現情報）及び撮影情報データに分け、シーン参照生データを撮像装置特性補正処理部３０５内のシーン参照画像データ生成部３１１へ出力し、撮像装置特性補正情報を装置特性補正処理部３０９へ出力し、鑑賞画像参照データ復元情報を鑑賞画像参照データ復元条件生成部３０６へ出力し、処理プロセス再現情報を処理プロセス再現部３０７へ出力し、撮影情報データを最適化処理部３０８内の撮影情報データ処理部３１３へ出力する。
【０１５５】
撮像装置特性補正処理部３０５は、装置特性補正処理部３０９、処理条件テーブル３１０、シーン参照画像データ生成部３１１、一時記憶メモリ３１２により構成される。
【０１５６】
装置特性補正処理部３０９は、ヘッダ情報解析部３０４から入力された撮像装置特性補正情報と処理条件テーブル３１０の参照により、シーン参照画像データの生成条件を決定する。処理条件テーブル３１０は、撮像装置の特性毎に、シーン参照画像データを生成するための処理条件を記憶するテーブルである。
【０１５７】
シーン参照画像データ生成部３１１は、ヘッダ情報解析部３０４から入力されたシーン参照生データに対し、装置特性補正処理部３０９で決定された生成条件に従って撮像装置特性補正処理を施して、撮像装置の特性に依存しない標準化されたシーン参照画像データを生成し、一時記憶メモリ３１２に出力する。具体的に、撮像装置特性補正処理には、少なくともシーン参照生データを生成した撮像装置の撮像素子固有の分光感度に基づく各色チャンネルの信号強度を、例えば、ＲＩＭＭ ＲＧＢやＥＲＩＭＭ ＲＧＢ、ｓｃＲＧＢ等の標準色空間にマッピングする処理が含まれる。
【０１５８】
一時記憶メモリ３１２は、シーン参照画像データ生成部３１１で生成されたシーン参照画像データを一時的に記憶する。
【０１５９】
鑑賞画像参照データ復元条件生成部３０６は、ヘッダ情報解析部３０４から入力された鑑賞画像参照データ復元情報に基づいて、撮像装置での鑑賞画像参照データを復元するための復元条件を決定する。
【０１６０】
処理プロセス再現部３０７は、ヘッダ情報解析部３０４から入力された処理プロセス再現情報に基づいて、撮像装置での鑑賞画像参照データの生成過程を再現するための再現条件を決定する。
【０１６１】
最適化処理部３０８は、撮影情報データ処理部３１３、鑑賞画像参照データ生成部３１４、一時記憶メモリ３１５、設定入力部３１６により構成される。
【０１６２】
撮影情報データ処理部３１３は、ヘッダ情報解析部３０４から入力された撮影情報データに基づいて、撮影条件に応じた鑑賞画像参照データを生成するための生成条件を決定する。
【０１６３】
鑑賞画像参照データ生成部３１４は、一時記憶メモリ３１２からシーン参照画像データを読み出し、撮影情報データ処理部３１３で決定された鑑賞画像参照データの生成条件と、鑑賞画像参照データ復元条件生成部３０６で決定された復元条件と、処理プロセス再現部３０７で決定された再現条件と、設定入力部３１６から指定された出力先（記憶デバイス３１８、出力デバイス３１７、表示部２０８）の情報に基づいて、当該シーン参照画像データに対して、出力先において最適な画像を得るための最適化処理を施して鑑賞画像参照データを生成し、設定入力部３１６の操作情報と共に一時記憶メモリ３１５に出力する。最適化処理には、例えば、出力先の色域への圧縮、１６bitから８bitへの階調圧縮、出力画素数の低減、出力デバイスや表示デバイスの出力特性（ＬＵＴ）への対応処理等が含まれる。更に、ノイズ抑制、鮮鋭化、カラーバランス調整、彩度調整、覆い焼き処理等の画像処理が含まれる。
【０１６４】
一時記憶メモリ３１５は、鑑賞画像参照データ生成部３１４で生成された鑑賞画像参照データを一時的に記憶し、設定入力部３１６により設定された出力先（記憶デバイス３１８、出力デバイス３１７、表示部２０８の何れか）に出力する。
【０１６５】
設定入力部３１６は、鑑賞画像参照データ生成部３１４で生成される鑑賞画像参照データの出力先を指定するための入力デバイスであり、図２５の操作部２１１に対応する。
【０１６６】
なお、画像処理装置３０１の各構成要素のうち、入力部３０３及び設定入力部３１６以外の構成要素が、図２５に示す画像処理部２７０に含まれる。
【０１６７】
出力部３０２は、表示部２０８、図２５の露光処理部２０４及びプリント作成部２０５に対応する出力デバイス３１７、図２５の画像書込部２１５に対応する記憶デバイス３１８により構成される。
【０１６８】
次に、画像記録装置２０１における動作について説明する。
図２７を参照して、画像記録装置２０１において実行される画像処理について説明する。
【０１６９】
入力部３０３にデータが入力されると（即ち、装着部に記録メディアが装着されると）（ステップＳ４０）、当該記録メディアに記録されたデータファイルが読み出され、ヘッダ情報解析部３０４において、データファイルの内容が解析され（ステップＳ４１）、シーン参照生データ、再現補助データ（撮像装置特性補正情報、鑑賞画像参照データ復元情報、処理プロセス再現情報）及び撮影情報データに分けられる。
【０１７０】
撮影情報データ処理部３１３では、撮影情報データに基づいて、撮影条件に応じた鑑賞画像参照データを生成するための生成条件が決定され（ステップＳ４２）、鑑賞画像参照データ復元条件生成部３０６では、鑑賞画像参照データ復元情報に基づいて、撮像装置での鑑賞画像参照データを復元するための復元条件が決定され（ステップＳ４４）、処理プロセス再現部３０７では、処理プロセス再現情報に基づいて、撮像装置での鑑賞画像参照データの生成過程を再現するための再現条件が決定される（ステップＳ４５）。
【０１７１】
装置特性補正処理部３０９では、撮像装置特性補正情報と処理条件テーブル３１０の参照により、シーン参照画像データの生成条件が決定され、シーン参照生データに対し、当該決定された生成条件に従って撮像装置特性補正処理が施され（ステップＳ４３）、シーン参照画像データが生成される（ステップＳ４６）。
【０１７２】
次いで、ステップＳ４２、Ｓ４４及びＳ４５で決定された各種画像処理条件（鑑賞画像参照データの生成条件、復元条件、再現条件）に基づいて、ステップＳ４６で生成されたシーン参照画像データに対して最適化処理が施され（ステップＳ４７）、鑑賞画像参照データが生成される（ステップＳ４８）。
【０１７３】
鑑賞画像参照データは、設定入力部３１６（操作部２１１）で設定された出力先において、当該出力先に応じた固有の処理が施され（ステップＳ４９）、当該出力先のデバイスから出力され（ステップＳ５０）、本画像処理が終了する。
【０１７４】
なお、図２７のフローチャートでは、図２２に示すような撮影情報データが含まれるデータファイルに対する画像処理について説明したが、図３に示すような撮影情報データを含まないデータファイルに対する画像処理では、図２７のステップＳ４２の処理は行われない。
【０１７５】
以上のように、本実施形態の画像記録装置２０１によれば、撮像装置から出力されたシーン参照生データのファイルヘッダに添付された再現情報データ、撮影情報データに基づいて最適化された鑑賞画像参照データを生成することにより、撮像画像情報の情報損失を伴うことなく、撮像装置で得られた画像データ以上の高品質な鑑賞画像参照データを得ることが可能となる。
【０１７６】
なお、再現補助データに処理プロセス再現情報が含まれていなくても、充分高品質な鑑賞画像参照データが得られるが、この処理プロセス再現情報が含まれている方が一層高品質な鑑賞画像参照データを得ることが可能である。
【図面の簡単な説明】
【０１７７】
【図１】本発明の実施形態に係る撮像装置の主要部構成を示すブロック図。
【図２】再現補助データ生成部の内部構成を示すブロック図。
【図３】図１の記憶デバイスの記録メディアに記録されるデータファイルのデータ構造を示す図。
【図４】撮像装置特性補正情報の内容を説明するための図。
【図５】シーン参照画像データの階調変換特性を示す図（ａ）と、シーン参照画像データと鑑賞画像参照データの階調変換特性を示す図（ｂ）。
【図６】シーン参照画像データから鑑賞画像参照データへの変換特性を示す図（ａ）と、光源条件、露光条件毎の鑑賞画像参照データの階調変換特性を示す図（ｂ）。
【図７】処理プロセス再現情報のデータ構造の一例を示す図。
【図８】撮影シーンを判別するための判別マップを示す図。
【図９】実施形態の撮像装置において実行される画像データ記録処理を示すフローチャート。
【図１０】撮像装置において実行される撮影シーン判別処理を示すフローチャート。
【図１１】明度・色相の領域毎に第１の占有率を算出する第１の占有率算出処理を示すフローチャート。
【図１２】ＲＧＢからＨＳＶ表色系に変換するプログラムの一例を示す図。
【図１３】明度（Ｖ）−色相（Ｈ）平面と、Ｖ−Ｈ平面上の領域ｒ１及び領域ｒ２を示す図。
【図１４】明度（Ｖ）−色相（Ｈ）平面と、Ｖ−Ｈ平面上の領域ｒ３及び領域ｒ４を示す図。
【図１５】指標αを算出するための、第１の占有率に乗算する第１の係数を表す曲線を示す図。
【図１６】指標βを算出するための、第１の占有率に乗算する第２の係数を表す曲線を示す図。
【図１７】撮影画像データの構図に基づいて第２の占有率を算出する第２の占有率算出処理を示すフローチャート。
【図１８】撮影画像データの画面の外縁からの距離に応じて決定される領域ｎ１〜ｎ４を示す図。
【図１９】指標γを算出するための、第２の占有率に乗算する第３の係数を表す曲線を領域別（ｎ１〜ｎ４）に示す図。
【図２０】偏倚量算出処理を示すフローチャート。
【図２１】本実施形態の変形例における撮像装置の主要部構成を示すブロック図。
【図２２】図２１の記憶デバイスの記録メディアに記録されるデータファイルのデータ構造を示す図。
【図２３】本実施形態の変形例の撮像装置において実行される画像データ記録処理を示すフローチャート。
【図２４】本発明の実施形態に係る画像記録装置の外観図。
【図２５】画像記録装置の内部構成を示すブロック図。
【図２６】画像処理装置及び出力部の内部構成を示すブロック図。
【図２７】画像記録装置において実行される画像処理を示すフローチャート。
【符号の説明】
【０１７８】
１  レンズ
２  絞り
３  ＣＣＤ
４  アナログ処理回路
５  Ａ／Ｄ変換器
６  一時記憶メモリ
７  画像処理部
８  ヘッダ情報処理部
９  記憶デバイス
１０  ＣＣＤ駆動回路
１１  制御部
１２  再現補助データ生成部
１２１  撮像装置特性補正情報生成部
１２２  鑑賞画像参照データ復元情報生成部
１２３  処理プロセス再現情報生成部
１３  撮影情報データ生成部
１４  操作部
１５  表示部
１６  ストロボ駆動回路
１７  ストロボ
１８  焦点距離調整回路
１９  自動焦点駆動回路
２０  モータ
１００、１０１  撮像装置
２０１  画像記録装置
２０２  本体
２０４  露光処理部
２０５  プリント作成部
２０７  制御部
２０８  表示部
２０９  フィルムスキャナ部
２１０  反射原稿入力装置
２１１  操作部
２１４  画像読込部
２１５  画像書込部
２７０  画像処理部
３０１  画像処理装置
３０２  出力部
３０３  入力部
３０４  ヘッダ情報解析部
３０５  撮像装置特性補正処理部
３０６  鑑賞画像参照データ復元条件生成部
３０７  処理プロセス再現部
３０８  最適化処理部
３０９  装置特性補正処理部
３１０  処理条件テーブル
３１１  シーン参照画像データ生成部
３１２  一時記憶メモリ
３１３  撮影情報データ処理部
３１４  鑑賞画像参照データ生成部
３１５  一時記憶メモリ
３１６  設定入力部
３１７  出力デバイス
３１８  記憶デバイス
【図１】
2006203573.tif 000013
【図２】
2006203573.tif 000014
【図３】
2006203573.tif 000015
【図４】
2006203573.tif 000016
【図５】
2006203573.tif 000017
【図６】
2006203573.tif 000018
【図７】
2006203573.tif 000019
【図８】
2006203573.tif 000020
【図９】
2006203573.tif 000021
【図１０】
2006203573.tif 000022
【図１１】
2006203573.tif 000023
【図１２】
2006203573.tif 000024
【図１３】
2006203573.tif 000025
【図１４】
2006203573.tif 000026
【図１５】
2006203573.tif 000027
【図１６】
2006203573.tif 000028
【図１７】
2006203573.tif 000029
【図１８】
2006203573.tif 000030
【図１９】
2006203573.tif 000031
【図２０】
2006203573.tif 000032
【図２１】
2006203573.tif 000033
【図２２】
2006203573.tif 000034
【図２３】
2006203573.tif 000035
【図２４】
2006203573.tif 000036
【図２５】
2006203573.tif 000037
【図２６】
2006203573.tif 000038
【図２７】
2006203573.tif 000039