(57)【要約】【課題】撮像画像情報の情報損失を伴うことなく、撮影シーンに応じて最適な鑑賞画像を形成する。【解決手段】撮像装置５１において撮影が行われ、シーン参照生データが生成される。また、装置特性補正情報処理部１０により撮像装置特性補正データが生成され、撮影情報データ処理部９により撮影情報データが生成される。また、シーン判別指標データ生成部１２により、光源条件及び露出条件を定量的に示すシーン判別指標データが生成される。シーン参照生データのファイルヘッダに撮像装置特性補正データ、撮影情報データ及びシーン判別指標データがタグ情報として添付され、添付済みのデータファイルが記憶デバイス１６の記録メディアに記録、保存される。【選択図】図１
2006203566.tif 000002
【特許請求の範囲】
【請求項１】
撮像により撮像装置の装置特性に依存したシーン参照生データを生成するシーン参照生データ生成手段と、
前記シーン参照生データに前記撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データを生成する再現補助データ生成手段と、
撮影時の撮影条件設定である撮影情報データを生成する撮影情報データ生成手段と、
撮影シーンを判別するためのシーン判別指標データを生成するシーン判別指標データ生成手段と、
前記シーン参照生データに、前記再現補助データ、前記撮影情報データ及び前記シーン判別指標データを添付し、さらにメディアに記録する記録制御手段と、
を備えたことを特徴とする撮像装置。
【請求項２】
請求項１に記載の撮像装置において、
前記シーン参照生データに基づいて表示用画像データを生成する表示用画像データ生成手段と、
前記表示用画像データを表示する表示手段と、
を備え、
前記シーン判別指標データ生成手段は、前記表示用画像データを用いてシーン判別指標データを生成することを特徴とする撮像装置。
【請求項３】
撮像装置の装置特性に依存したシーン参照生データ、当該シーン参照生データに前記撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データ、撮影時の撮影条件設定である撮影情報データ及び撮影シーンを判別するためのシーン判別指標データを入力する入力手段と、
前記シーン参照生データに対して、前記再現補助データに基づいて、前記撮像装置固有の装置特性を補正する処理を施してシーン参照画像データを生成するシーン参照画像データ生成手段と、
前記シーン参照画像データ生成手段により生成されたシーン参照画像データに対して、前記撮影情報データ及び前記シーン判別指標データに基づいて、出力媒体上での最適な鑑賞画像を形成するための画像処理を施して鑑賞画像参照データを生成する鑑賞画像参照データ生成手段と、
を備えたことを特徴とする画像処理装置。
【請求項４】
請求項３に記載の画像処理装置において、
前記鑑賞画像参照データ生成手段は、前記シーン判別指標データに基づいて、前記シーン参照画像データに施す階調調整方法及び調整量を決定することを特徴とする画像処理装置。
【請求項５】
撮像により撮像装置の装置特性に依存したシーン参照生データを生成するシーン参照生データ生成手段と、
前記シーン参照生データに前記撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データを生成する再現補助データ生成手段と、
撮影時の撮影条件設定である撮影情報データを生成する撮影情報データ生成手段と、
撮影シーンを判別するためのシーン判別指標データを生成するシーン判別指標データ生成手段と、
前記シーン判別指標データに基づいて階調変換データを生成する階調変換データ生成手段と、
前記シーン参照生データに、前記再現補助データ、前記撮影情報データ及び前記階調変換データを添付し、さらにメディアに記録する記録制御手段と、
を備えたことを特徴とする撮像装置。
【請求項６】
請求項５に記載の撮像装置において、
前記シーン参照生データに基づいて表示用画像データを生成する表示用画像データ生成手段と、
前記表示用画像データを表示する表示手段と、
を備え、
前記シーン判別指標データ生成手段は、前記表示用画像データを用いてシーン判別指標データを生成することを特徴とする撮像装置。
【請求項７】
撮像装置の装置特性に依存したシーン参照生データ、当該シーン参照生データに前記撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データ、撮影時の撮影条件設定である撮影情報データ及び階調変換データを入力する入力手段と、
前記シーン参照生データに対して、前記再現補助データに基づいて、前記撮像装置固有の装置特性を補正する処理を施してシーン参照画像データを生成するシーン参照画像データ生成手段と、
前記シーン参照画像データ生成手段により生成されたシーン参照画像データに対して、前記撮影情報データ及び前記階調変換データに基づいて、出力媒体上での最適な鑑賞画像を形成するための画像処理を施して鑑賞画像参照データを生成する鑑賞画像参照データ生成手段と、
を備えたことを特徴とする画像処理装置。
【請求項８】
撮像により撮像装置の装置特性に依存したシーン参照生データを生成するシーン参照生データ生成工程と、
前記シーン参照生データに前記撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データを生成する再現補助データ生成工程と、
撮影時の撮影条件設定である撮影情報データを生成する撮影情報データ生成工程と、
撮影シーンを判別するためのシーン判別指標データを生成するシーン判別指標データ生成工程と、
前記シーン参照生データに、前記再現補助データ、前記撮影情報データ及び前記シーン判別指標データを添付し、さらにメディアに記録する記録工程と、
を含むことを特徴とする画像処理方法。
【請求項９】
請求項８に記載の画像処理方法において、
前記シーン参照生データに基づいて表示用画像データを生成する表示用画像データ生成工程と、
前記表示用画像データを表示する表示工程と、
を含み、
前記シーン判別指標データ生成工程では、前記表示用画像データを用いてシーン判別指標データを生成することを特徴とする画像処理方法。
【請求項１０】
撮像装置の装置特性に依存したシーン参照生データ、当該シーン参照生データに前記撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データ、撮影時の撮影条件設定である撮影情報データ及び撮影シーンを判別するためのシーン判別指標データを入力する入力工程と、
前記シーン参照生データに対して、前記再現補助データに基づいて、前記撮像装置固有の装置特性を補正する処理を施してシーン参照画像データを生成するシーン参照画像データ生成工程と、
前記シーン参照画像データ生成工程において生成されたシーン参照画像データに対して、前記撮影情報データ及び前記シーン判別指標データに基づいて、出力媒体上での最適な鑑賞画像を形成するための画像処理を施して鑑賞画像参照データを生成する鑑賞画像参照データ生成工程と、
を含むことを特徴とする画像処理方法。
【請求項１１】
請求項１０に記載の画像処理方法において、
前記鑑賞画像参照データ生成工程では、前記シーン判別指標データに基づいて、前記シーン参照画像データに施す階調調整方法及び調整量を決定することを特徴とする画像処理方法。
【請求項１２】
撮像により撮像装置の装置特性に依存したシーン参照生データを生成するシーン参照生データ生成工程と、
前記シーン参照生データに前記撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データを生成する再現補助データ生成工程と、
撮影時の撮影条件設定である撮影情報データを生成する撮影情報データ生成工程と、
撮影シーンを判別するためのシーン判別指標データを生成するシーン判別指標データ生成工程と、
前記シーン判別指標データに基づいて階調変換データを生成する階調変換データ生成工程と、
前記シーン参照生データに、前記再現補助データ、前記撮影情報データ及び前記階調変換データを添付し、さらにメディアに記録する記録工程と、
を含むことを特徴とする画像処理方法。
【請求項１３】
請求項１２に記載の画像処理方法において、
前記シーン参照生データに基づいて表示用画像データを生成する表示用画像データ生成工程と、
前記表示用画像データを表示する表示工程と、
を含み、
前記シーン判別指標データ生成工程では、前記表示用画像データを用いてシーン判別指標データを生成することを特徴とする画像処理方法。
【請求項１４】
撮像装置の装置特性に依存したシーン参照生データ、当該シーン参照生データに前記撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データ、撮影時の撮影条件設定である撮影情報データ及び階調変換データを入力する入力工程と、
前記シーン参照生データに対して、前記再現補助データに基づいて、前記撮像装置固有の装置特性を補正する処理を施してシーン参照画像データを生成するシーン参照画像データ生成工程と、
前記シーン参照画像データ生成工程において生成されたシーン参照画像データに対して、前記撮影情報データ及び前記階調変換データに基づいて、出力媒体上での最適な鑑賞画像を形成するための画像処理を施して鑑賞画像参照データを生成する鑑賞画像参照データ生成工程と、
を含むことを特徴とする画像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、デジタルカメラ等の撮像装置、撮像装置により得られたデジタル画像データに対して出力媒体上での鑑賞画像を形成するために画像処理を施す画像処理装置及び画像処理方法に関する。
【背景技術】
【０００２】
近年、デジタルカメラ等の撮像装置で撮影されたデジタル画像データは、ＣＲＴ（Cathode Ray Tube）、液晶、プラズマ等のディスプレイモニタや携帯電話の小型液晶モニタの表示デバイスに表示されたり、デジタルプリンタ、インクジェットプリンタ、サーマルプリンタ等の出力デバイスからハードコピー画像としてプリントされたりする等、その表示・プリント方法は多種多様化してきている。
【０００３】
デジタル画像データを鑑賞用途で表示・プリントする際には、鑑賞に使用するディスプレイモニタ上、或いはハードコピー上において所望の画質が得られるように階調調整、輝度調整、カラーバランス調整、鮮鋭性強調に代表される種々の画像処理を施すことが一般に行われている。
【０００４】
例えば、撮像装置特性に依存したシーン参照生データに、シーン参照生データを標準化するための再現補助データを添付して記録することにより、汎用性のある画像データを生成する技術が開示されている（特許文献１参照）。
【０００５】
また、近年、デジタルカメラで撮影した画像データを、パーソナルコンピュータ等を介さずに、直接インクジェットプリンタ等に伝送して出力を行うPictBridgeと称する規格（CIPA DC-001）が提案されている。また、ＲＡＷデータを、現像ソフトを介さずに直接インクジェットプリンタ等で出力することも行われている。
【特許文献１】特開２００４−９６５００号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、一般的にデジタルカメラの撮影では、全ての撮影が最適な光源条件や露出条件で撮影されるわけではない。撮影された画像のシーン状態がいわゆる逆光、アンダー、ハイコントラスト等、鑑賞に好ましくない状態である場合には、最適な鑑賞画像を得ることが困難であった。
【０００７】
本発明は上記の従来技術における問題に鑑みてなされたものであって、撮像画像情報の情報損失を伴うことなく、撮影シーンに応じて最適な鑑賞画像を形成することができる撮像装置、画像処理装置及び画像処理方法を提供することを課題とする。
【課題を解決するための手段】
【０００８】
上記課題を解決するために、請求項１に記載の発明は、撮像装置において、撮像により撮像装置の装置特性に依存したシーン参照生データを生成するシーン参照生データ生成手段と、前記シーン参照生データに前記撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データを生成する再現補助データ生成手段と、撮影時の撮影条件設定である撮影情報データを生成する撮影情報データ生成手段と、撮影シーンを判別するためのシーン判別指標データを生成するシーン判別指標データ生成手段と、前記シーン参照生データに、前記再現補助データ、前記撮影情報データ及び前記シーン判別指標データを添付し、さらにメディアに記録する記録制御手段と、を備えたことを特徴とする。
【０００９】
ここで、本願明細書の記載において「生成」とは、本発明に係る撮像装置及び画像処理装置内において作用するプログラム、処理回路が、画像信号やデータを新たに作り出すことである。「作成」を同義語として用いることもある。
【００１０】
また、「撮像装置」とは、光電変換機能を有する撮像素子（イメージセンサ）を備えた装置であって、所謂デジタルカメラやスキャナがこれに含まれる。撮像素子の一例としては、ＣＣＤ（電荷結合素子(Charge Coupled Device)）と、電荷転送機構と、市松模様のカラーフィルタとを組み合わせ感色性を付与したＣＣＤ型撮像素子や、ＣＭＯＳ型撮像素子が挙げられる。これらの撮像素子の出力電流はＡ／Ｄ変換器によりデジタル化される。この段階での各色チャンネルの内容は、撮像素子固有の分光感度に基づいた信号強度となっている。
【００１１】
また、「撮像装置の装置特性に依存したシーン参照生データ」とは、被写体に忠実な情報を記録した撮像装置直接の生出力信号であり、前記Ａ／Ｄ変換器によりデジタル化されたデータそのものや、該データに固定パターンノイズ・暗電流ノイズ等のノイズ補正を行ったデータを意味し、ＲＡＷデータが含まれる。このシーン参照生データは、階調変換・鮮鋭性強調・彩度強調のような画像鑑賞時の効果を向上するためにデータ内容を改変する画像処理や、撮像素子固有の分光感度に基づく各色チャンネルの信号強度をＲＩＭＭ  ＲＧＢ（Reference Input Medium Metric ＲＧＢ）やＥＲＩＭＭ ＲＧＢ（Extended Reference Input Medium Metric ＲＧＢ）（Journal of Imaging Science and Technology 45巻 418〜426頁（2001年）参照）、ｓＲＧＢ（ＩＥＣ61966-2-1）、ｓｃＲＧＢ（ＩＥＣ61966-2-2）等の標準化された色空間にマッピングする処理を省略したことを特徴とする。シーン参照生データの情報量（例えば階調数）は前記Ａ／Ｄ変換器の性能に準じ、鑑賞画像参照データで必要とされる情報量（例えば階調数）と同等以上であることが好ましい。例えば鑑賞画像参照データの階調数が１チャンネルあたり8bitである場合、シーン参照生データの階調数は12bit以上が好ましく、14bit以上がより好ましく、また16bit以上がさらに好ましい。
【００１２】
また、「撮像装置固有の装置特性を補正する処理」とは、前述した「シーン参照生データ」を後述する「シーン参照画像データ」に変換する処理を意味する。この処理の内容はシーン参照生データの状態に依存するが、少なくとも撮像素子固有の分光感度に基づく各色チャンネルの信号強度をＲＩＭＭ  ＲＧＢやＥＲＩＭＭ ＲＧＢ等の標準色空間にマッピングする処理が含まれる。例えば、シーン参照生データが、カラーフィルタ配列に基づく補間処理を行っていない場合には、該処理の実施が加えて必要になる（カラーフィルタ配列に基づく補間処理の詳細は、例えばコロナ社「ファインイメージングとディジタル写真」（社）日本写真学会出版委員会編５１頁に記載されている。）。この結果、シーン参照生データとほぼ同一の情報量を有しつつも、異なる撮像装置間での信号値の差異が補正されたシーン参照画像データが得られる。
【００１３】
また、「再現補助データ」とは、データ内に記載された情報のみを活用して、撮像装置固有の装置特性を補正する処理が実施可能であるデータを意味する。少なくとも、撮像素子自体の分光感度に基づく各色チャンネルの信号強度をＲＩＭＭ  ＲＧＢやＥＲＩＭＭ ＲＧＢ等の標準色空間にマッピングすることが可能になる情報、すなわち撮像素子固有の分光感度特性かＲＩＭＭ  ＲＧＢのような特定の標準色空間に変換する時に使用すべきマトリックス係数が記載されている必要がある。例えば、撮像装置の機種名だけが記載されている場合は、本処理を実施する画像処理装置が機種名と前記マトリックス係数の対応表を保有していない可能性があるので十分なデータとは言えない。また例えば、本処理を実施する際に十分な情報が直接記載されていなくても、該情報のインターネット上での所在個所を示すＵＲＬが記載されている場合は、本処理を行うのに十分なデータとみなすことができる。これらの「再現補助データ」は、アドビシステム社推奨の画像フォーマットDigital Negative（ＤＮＧ）に従ったＤＮＧタグ等、画像ファイル内のヘッダ部に書き込まれるタグ情報として記録されることが好ましい。
【００１４】
また、「再現補助データ」を、「シーン参照生データ」とは独立してメディアに保存する態様である場合には、「再現補助データ」、「シーン参照生データ」の何れか、又は両方に対し、両者を関連付けるための情報を付与するか、又は別途関連情報の記載されたステータス情報ファイルを添付する必要がある。
【００１５】
また、「撮影情報データ」とは、撮影時の撮影条件設定の記録であり、Ｅｘｉｆファイルのヘッダ部に書き込まれるタグ情報と同じものを含んでもよい。具体的には露出時間、シャッタースピード、絞り値（Ｆナンバー）、ＩＳＯ感度、輝度値、被写体距離範囲、光源、ストロボ発光の有無、被写体領域、ホワイトバランス、ズーム倍率、被写体構成、撮影シーンタイプ、ストロボ光源の反射光の量、撮影彩度、被写体の種類に関する情報等を示すタグ（コード）等である。
【００１６】
「撮影情報データ」は、撮像装置の露出設定や焦点機能の自動化のために、カメラに備えられたセンサの撮影時に得た値、前記センサの値から加工されたデータ、或いは前記センサの値に基づいて設定されたカメラの撮影条件に分類されるが、これ以外にも撮像装置に備えられた、撮影モードダイヤル（例えばポートレート、スポーツ、マクロ撮影モード等）や、ストロボ強制発光の設定スイッチ等を撮影者がマニュアルで設定した情報も含まれる。
【００１７】
また、「撮影シーン」とは、撮影時の光源条件や露出条件による撮影画像の状態を意味する。例えば、「適正」、「逆光」、「アンダー」、「ハイコントラスト」等の状態がある。
【００１８】
また、「シーン判別指標データ」とは、上記の撮影シーンの度合いを表すものであり、例えば、逆光度、アンダー度、ハイコントラスト度等が挙げられる。「シーン判別指標データ」は、ＤＮＧフォーマットに従ったＤＮＧタグ等、画像ファイル内のヘッダ部に書き込まれるタグ情報として記録されることが好ましい。
【００１９】
また、「メディア」とは、撮像装置の出力するシーン参照生データ等の保存に用いる記憶媒体であって、コンパクトフラッシュ（登録商標）、メモリースティック、スマートメディア、マルチメディアカード、ハードディスク、フロッピー（登録商標）ディスク、磁気記憶媒体（ＭＯ）、或いはＣＤ−Ｒ等、何れであってもよい。また、記憶媒体に書き込むユニットは、撮像装置と一体であっても、コードを介して有線状態で接続された書き込みユニット、通信やインターネットを介して無線状態で接続された独立、或いは遠隔地に設置されたユニット等の何れの態様であってもよい。「メディアに記録する」時のファイル形式は、撮像装置固有の形式ではなく、ＴＩＦＦ（Tagged Image File Format）、ＪＰＥＧ（Joint Photographic Experts Group）、Ｅｘｉｆ（Exchangeable Image File Format）等の規格化された汎用のファイル形式で記録されるのが好ましい。
【００２０】
請求項２に記載の発明は、請求項１に記載の撮像装置において、前記シーン参照生データに基づいて表示用画像データを生成する表示用画像データ生成手段と、前記表示用画像データを表示する表示手段と、を備え、前記シーン判別指標データ生成手段は、前記表示用画像データを用いてシーン判別指標データを生成することを特徴とする。
【００２１】
請求項３に記載の発明は、画像処理装置において、撮像装置の装置特性に依存したシーン参照生データ、当該シーン参照生データに前記撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データ、撮影時の撮影条件設定である撮影情報データ及び撮影シーンを判別するためのシーン判別指標データを入力する入力手段と、前記シーン参照生データに対して、前記再現補助データに基づいて、前記撮像装置固有の装置特性を補正する処理を施してシーン参照画像データを生成するシーン参照画像データ生成手段と、前記シーン参照画像データ生成手段により生成されたシーン参照画像データに対して、前記撮影情報データ及び前記シーン判別指標データに基づいて、出力媒体上での最適な鑑賞画像を形成するための画像処理を施して鑑賞画像参照データを生成する鑑賞画像参照データ生成手段と、を備えたことを特徴とする。
【００２２】
ここで、「入力」とは、撮像装置の出力する「シーン参照生データ」、「再現補助データ」、「撮影情報データ」及び「シーン判別指標データ」を、撮像装置から本発明の画像処理装置に伝達することを意味する。
【００２３】
例えば、撮像装置と上述した記憶媒体への書き込みユニットが接続状態にあるとき、画像処理装置が、撮像装置から直接「シーン参照生データ」等を読み出せる機能を併せ持つ態様である場合には、本発明の画像処理装置は撮像装置との接続手段を有し、この接続手段が、本発明の入力手段に相当する。また、コンパクトフラッシュ（登録商標）、メモリースティック、スマートメディア、マルチメディアカード、フロッピー（登録商標）ディスク、光磁気記憶媒体（ＭＯ）、或いはＣＤ−Ｒ等、可搬式の「メディア」を用いる場合には、本発明の画像処理装置は対応する読み取り手段を有し、この読み取り手段が、本発明の入力手段に相当する。さらに、書き込みユニットが通信やインターネットを介して無線状態で接続された独立、或いは遠隔地に設置された態様であるとき、本発明の画像処理装置は、通信やインターネットに接続する通信手段を有し、この通信手段が本発明の入力手段に相当する。
【００２４】
また、「シーン参照画像データ」とは、少なくとも撮像素子自体の分光感度に基づく各色チャンネルの信号強度をＲＩＭＭ  ＲＧＢやＥＲＩＭＭ ＲＧＢ等の標準色空間にマッピング済みであり、階調変換・鮮鋭性強調・彩度強調のような画像鑑賞時の効果を向上するためにデータ内容を改変する画像処理が省略された状態の画像データを意味する。またシーン参照画像データは、撮像装置の光電変換特性（ＩＳＯ１４５２が定義するopto-electronic conversion function, 例えばコロナ社「ファインイメージングとディジタル写真」（社）日本写真学会出版委員会編４４９頁参照）の補正を行ったものであることが好ましい。シーン参照画像データの情報量（例えば階調数）は前記Ａ／Ｄ変換器の性能に準じ、鑑賞画像参照データで必要とされる情報量（例えば階調数）と同等以上であることが好ましい。例えば鑑賞画像参照データの階調数が１チャンネルあたり8bitである場合、シーン参照画像データの階調数は12bit以上が好ましく、14bit以上がより好ましく、また16bit以上がさらに好ましい。
【００２５】
また、「出力媒体」とは、例えば、ＣＲＴ、液晶ディスプレイ、プラズマディスプレイ等の表示デバイスや、銀塩印画紙、インクジェットペーパー、サーマルプリンタ用紙等のハードコピー画像生成用の用紙である。
【００２６】
ここで、「鑑賞画像参照データ」とは、ＣＲＴ、液晶ディスプレイ、プラズマディスプレイ等の表示デバイスや、銀塩印画紙、インクジェットペーパー、サーマルプリンタ用紙等の出力デバイス等の出力媒体上での鑑賞画像形成に用いるデジタル画像データを意味する。
【００２７】
また、「最適な鑑賞画像を形成するための画像処理」とは、ＣＲＴ、液晶ディスプレイ、プラズマディスプレイ等の表示デバイス、及び銀塩印画紙、インクジェットペーパー、サーマルプリンタ用紙等の出力媒体上において、最適な画像を得るための処理である。例えば、ｓＲＧＢ規格に準拠したＣＲＴディスプレイモニタに表示することを前提とした場合、ｓＲＧＢ規格の色域内で最適な色再現が得られるように処理される。銀塩印画紙への出力を前提とした場合、銀塩印画紙の色域内で最適な色再現が得られるように処理される。また色域の圧縮以外にも、１６bitから８bitへの階調圧縮、出力画素数の低減、及び出力デバイスの出力特性（ＬＵＴ）への対応処理等も含まれる。さらにノイズ抑制、鮮鋭化、カラーバランス調整、彩度調整、或いは覆い焼き処理等の画像処理が行われることは言うまでもない。
【００２８】
請求項４に記載の発明は、請求項３に記載の画像処理装置において、前記鑑賞画像参照データ生成手段は、前記シーン判別指標データに基づいて、前記シーン参照画像データに施す階調調整方法及び調整量を決定することを特徴とする。
【００２９】
請求項５に記載の発明は、撮像装置において、撮像により撮像装置の装置特性に依存したシーン参照生データを生成するシーン参照生データ生成手段と、前記シーン参照生データに前記撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データを生成する再現補助データ生成手段と、撮影時の撮影条件設定である撮影情報データを生成する撮影情報データ生成手段と、撮影シーンを判別するためのシーン判別指標データを生成するシーン判別指標データ生成手段と、前記シーン判別指標データに基づいて階調変換データを生成する階調変換データ生成手段と、前記シーン参照生データに、前記再現補助データ、前記撮影情報データ及び前記階調変換データを添付し、さらにメディアに記録する記録制御手段と、を備えたことを特徴とする。
【００３０】
請求項６に記載の発明は、請求項５に記載の撮像装置において、前記シーン参照生データに基づいて表示用画像データを生成する表示用画像データ生成手段と、前記表示用画像データを表示する表示手段と、を備え、前記シーン判別指標データ生成手段は、前記表示用画像データを用いてシーン判別指標データを生成することを特徴とする。
【００３１】
請求項７に記載の発明は、画像処理装置において、撮像装置の装置特性に依存したシーン参照生データ、当該シーン参照生データに前記撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データ、撮影時の撮影条件設定である撮影情報データ及び階調変換データを入力する入力手段と、前記シーン参照生データに対して、前記再現補助データに基づいて、前記撮像装置固有の装置特性を補正する処理を施してシーン参照画像データを生成するシーン参照画像データ生成手段と、前記シーン参照画像データ生成手段により生成されたシーン参照画像データに対して、前記撮影情報データ及び前記階調変換データに基づいて、出力媒体上での最適な鑑賞画像を形成するための画像処理を施して鑑賞画像参照データを生成する鑑賞画像参照データ生成手段と、を備えたことを特徴とする。
【００３２】
請求項８に記載の発明は、画像処理方法において、撮像により撮像装置の装置特性に依存したシーン参照生データを生成するシーン参照生データ生成工程と、前記シーン参照生データに前記撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データを生成する再現補助データ生成工程と、撮影時の撮影条件設定である撮影情報データを生成する撮影情報データ生成工程と、撮影シーンを判別するためのシーン判別指標データを生成するシーン判別指標データ生成工程と、前記シーン参照生データに、前記再現補助データ、前記撮影情報データ及び前記シーン判別指標データを添付し、さらにメディアに記録する記録工程と、を含むことを特徴とする。
【００３３】
請求項９に記載の発明は、請求項８に記載の画像処理方法において、前記シーン参照生データに基づいて表示用画像データを生成する表示用画像データ生成工程と、前記表示用画像データを表示する表示工程と、を含み、前記シーン判別指標データ生成工程では、前記表示用画像データを用いてシーン判別指標データを生成することを特徴とする。
【００３４】
請求項１０に記載の発明は、画像処理方法において、撮像装置の装置特性に依存したシーン参照生データ、当該シーン参照生データに前記撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データ、撮影時の撮影条件設定である撮影情報データ及び撮影シーンを判別するためのシーン判別指標データを入力する入力工程と、前記シーン参照生データに対して、前記再現補助データに基づいて、前記撮像装置固有の装置特性を補正する処理を施してシーン参照画像データを生成するシーン参照画像データ生成工程と、前記シーン参照画像データ生成工程において生成されたシーン参照画像データに対して、前記撮影情報データ及び前記シーン判別指標データに基づいて、出力媒体上での最適な鑑賞画像を形成するための画像処理を施して鑑賞画像参照データを生成する鑑賞画像参照データ生成工程と、を含むことを特徴とする。
【００３５】
請求項１１に記載の発明は、請求項１０に記載の画像処理方法において、前記鑑賞画像参照データ生成工程では、前記シーン判別指標データに基づいて、前記シーン参照画像データに施す階調調整方法及び調整量を決定することを特徴とする。
【００３６】
請求項１２に記載の発明は、画像処理方法において、撮像により撮像装置の装置特性に依存したシーン参照生データを生成するシーン参照生データ生成工程と、前記シーン参照生データに前記撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データを生成する再現補助データ生成工程と、撮影時の撮影条件設定である撮影情報データを生成する撮影情報データ生成工程と、撮影シーンを判別するためのシーン判別指標データを生成するシーン判別指標データ生成工程と、前記シーン判別指標データに基づいて階調変換データを生成する階調変換データ生成工程と、前記シーン参照生データに、前記再現補助データ、前記撮影情報データ及び前記階調変換データを添付し、さらにメディアに記録する記録工程と、を含むことを特徴とする。
【００３７】
請求項１３に記載の発明は、請求項１２に記載の画像処理方法において、前記シーン参照生データに基づいて表示用画像データを生成する表示用画像データ生成工程と、前記表示用画像データを表示する表示工程と、を含み、前記シーン判別指標データ生成工程では、前記表示用画像データを用いてシーン判別指標データを生成することを特徴とする。
【００３８】
請求項１４に記載の発明は、画像処理方法において、撮像装置の装置特性に依存したシーン参照生データ、当該シーン参照生データに前記撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データ、撮影時の撮影条件設定である撮影情報データ及び階調変換データを入力する入力工程と、前記シーン参照生データに対して、前記再現補助データに基づいて、前記撮像装置固有の装置特性を補正する処理を施してシーン参照画像データを生成するシーン参照画像データ生成工程と、前記シーン参照画像データ生成工程において生成されたシーン参照画像データに対して、前記撮影情報データ及び前記階調変換データに基づいて、出力媒体上での最適な鑑賞画像を形成するための画像処理を施して鑑賞画像参照データを生成する鑑賞画像参照データ生成工程と、を含むことを特徴とする。
【発明の効果】
【００３９】
請求項１、８に記載の発明によれば、撮像装置の装置特性に依存したシーン参照生データ、シーン参照生データに撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データ、撮影時の撮影条件設定である撮影情報データ及び撮影シーンを判別するためのシーン判別指標データを生成し、これらをシーン参照生データに添付し、メディアに記録するので、撮像画像情報の情報損失を伴うことなく、撮影シーンに応じて最適な鑑賞画像を形成するための情報を外部の装置に提供することができる。
【００４０】
請求項２、９に記載の発明によれば、シーン参照生データより画像サイズが小さい表示用画像データを用いるので、効率的にシーン判別指標データを生成することができる。
【００４１】
請求項３、１０に記載の発明によれば、撮像装置の装置特性に依存したシーン参照生データ、シーン参照生データに撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データ、撮影時の撮影条件設定である撮影情報データ及び撮影シーンを判別するためのシーン判別指標データを入力し、シーン参照生データに対して、再現補助データに基づいて、撮像装置固有の装置特性を補正する処理を施してシーン参照画像データを生成し、生成されたシーン参照画像データに対して、撮影情報データ及びシーン判別指標データに基づいて、出力媒体上での最適な鑑賞画像を形成するための画像処理を施して鑑賞画像参照データを生成するので、撮像画像情報の情報損失を伴うことなく、撮影シーンに応じて最適な鑑賞画像を形成することができる。
【００４２】
請求項４、１１に記載の発明によれば、シーン判別指標データに基づいて、シーン参照画像データに施す階調調整方法及び調整量を決定するので、撮影シーンに応じて最適な階調調整を行うことができる。
【００４３】
請求項５、１２に記載の発明によれば、撮像装置の装置特性に依存したシーン参照生データ、シーン参照生データに撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データ、撮影時の撮影条件設定である撮影情報データ及び階調変換データを生成し、これらをシーン参照生データに添付し、メディアに記録するので、撮像画像情報の情報損失を伴うことなく、撮影シーンに応じて最適な鑑賞画像を形成するための情報を外部の装置に提供することができる。
【００４４】
請求項６、１３に記載の発明によれば、シーン参照生データより画像サイズが小さい表示用画像データを用いるので、効率的にシーン判別指標データを生成することができる。
【００４５】
請求項７、１４に記載の発明によれば、撮像装置の装置特性に依存したシーン参照生データ、シーン参照生データに撮像装置固有の装置特性を補正する処理を施す際に用いる再現補助データ、撮影時の撮影条件設定である撮影情報データ及び階調変換データを入力し、シーン参照生データに対して、再現補助データに基づいて、撮像装置固有の装置特性を補正する処理を施してシーン参照画像データを生成し、生成されたシーン参照画像データに対して、撮影情報データ及び階調変換データに基づいて、出力媒体上での最適な鑑賞画像を形成するための画像処理を施して鑑賞画像参照データを生成するので、撮像画像情報の情報損失を伴うことなく、撮影シーンに応じて最適な鑑賞画像を形成することができる。
【発明を実施するための最良の形態】
【００４６】
［第１の実施の形態］
図１〜図１４を参照して、本発明の第１の実施の形態における撮像装置５１及び画像処理装置１３１について説明する。
【００４７】
＜撮像装置５１の構成＞
まず、撮像装置５１の構成を説明する。
図１は、撮像装置５１の機能的構成を示すブロック図である。図１に示すように、撮像装置５１は、レンズ１、絞り２、ＣＣＤ３、アナログ処理回路４、Ａ／Ｄ変換器５、一時記憶メモリ６、画像処理部７、制御部８、撮影情報データ処理部９、装置特性補正情報処理部１０、表示用画像データ生成部１１、シーン判別指標データ生成部１２、操作部１３、表示部１４、ヘッダ情報処理部１５、記憶デバイス１６、ＣＣＤ駆動回路１７、焦点距離調整回路１８、自動焦点駆動回路１９、モータ２０、ストロボ駆動回路２１、ストロボ２２等を備えて構成されている。
【００４８】
撮像装置５１の光学系は、レンズ１、絞り２、ＣＣＤ（固体撮像素子）３を備えて構成されている。
レンズ１は、フォーカスの調節を行い、被写体の光画像を結像する。絞り２は、レンズ１を透過した光束の光量を調節する。ＣＣＤ３は、レンズ１により受光面上に結像された被写体光を、ＣＣＤ３内のセンサ毎に光の入射量に応じた量の電気的な信号（撮像信号）へ光電変換する。そして、ＣＣＤ３は、ＣＣＤ駆動回路１７から出力されるタイミングパルスに制御されることにより、この撮像信号をアナログ処理回路４へ順次出力する。
【００４９】
アナログ処理回路４は、ＣＣＤ３から入力された撮像信号に対して、Ｒ、Ｇ、Ｂ信号の増幅やノイズの低減処理等を行う。このアナログ処理回路４における処理は、操作部１３からの操作信号に応じ制御部８を介してＯＮ／ＯＦＦが切り替えられるようになっている。
【００５０】
Ａ／Ｄ変換器５は、アナログ処理回路４から入力された撮像信号をデジタル画像データに変換して出力する。
一時記憶メモリ６は、バッファメモリ等であり、Ａ／Ｄ変換器５から出力されたデジタル画像データを一時格納する。
【００５１】
画像処理部７は、デジタル画像データの階調補正、分光感度のクロストーク補正、暗電流ノイズ抑制、鮮鋭化、ホワイトバランス調整、彩度調整等の画質向上処理の他、画像サイズの変更、トリミング、アスペクト変換等の処理を行う。この画像処理部７における処理は、操作部１３からの操作信号に応じ制御部８を介してＯＮ／ＯＦＦが切り替えられるようになっている。
【００５２】
制御部８は、ＣＰＵ（Central Processing Unit）等により構成され、記憶デバイス１６に記憶されている撮像装置５１の制御プログラムを読み出して、読み出したプログラムに従って撮像装置５１全体の制御を行う。具体的には、制御部８は、自動焦点駆動回路１９、焦点距離調整回路１８、ＣＣＤ駆動回路１７、アナログ処理回路４、一時記憶メモリ６、画像処理部７、撮影情報データ処理部９、装置特性補正情報処理部１０、表示用画像データ生成部１１、シーン判別指標データ生成部１２、操作部１３、表示部１４、ストロボ駆動回路２１の制御を行い、撮影を行う。
【００５３】
制御部８は、操作部１３によりシーン参照生データの出力が指定されると、後述するシーン参照生データ保存処理Ａを行い、撮影時におけるアナログ処理回路４における信号増幅やノイズの低減処理や画像処理部７における処理を省略し、記憶デバイス１６の記録メディアに、撮像装置特性補正データｄ１、撮影情報データｄ３及びシーン判別指標データｄ６をヘッダ情報として書き込むとともに、撮影されたデジタル画像データをシーン参照生データｄ２として記録する。例えば、撮像装置特性補正データｄ１及びシーン判別指標データｄ６はＤＮＧタグに書き込み、撮影情報データｄ３はＥｘｉｆタグに書き込む。制御部８は、特許請求の範囲に記載の撮像装置のシーン参照生データ生成手段及び記録制御手段としての機能を有する。
【００５４】
撮影情報データ処理部９は、撮影情報データｄ３を生成する。撮影情報データｄ３は、例えばカメラ名称やコード番号等、カメラ種別（機種）に直接関係する情報、或いは露出時間、シャッタースピード、絞り値（Ｆナンバー）、ＩＳＯ感度、輝度値、被写体距離範囲、光源、ストロボ発光の有無、被写体領域、ホワイトバランス、ズーム倍率、被写体構成、撮影シーンタイプ、ストロボ光源の反射光の量、撮影彩度等の撮影条件設定や、被写体の種類に関する情報等である。撮影情報データ処理部９は、特許請求の範囲に記載の撮像装置の撮影情報データ生成手段としての機能を有する。
【００５５】
装置特性補正情報処理部１０は、操作部１３からの操作信号により、制御部８の制御下においてアナログ処理回路４及び画像処理部７での処理を行わないシーン参照生データｄ２を記憶デバイス１６の記録メディアに記録する場合に、このシーン参照生データｄ２に撮像装置固有の装置特性を補正する処理（以下、撮像装置特性補正処理という。）を施す際に用いる撮像装置特性補正データｄ１を生成し、ヘッダ情報処理部１５に出力する。この撮像装置特性補正データｄ１は、特許請求の範囲に記載の「再現補助データ」に相当するものである。なお、装置特性補正情報処理部１０は、特許請求の範囲に記載の撮像装置の再現補助データ生成手段としての機能を有する。
【００５６】
表示用画像データ生成部１１は、撮像装置特性補正データｄ１及び撮影情報データｄ３に基づいて、シーン参照生データｄ２から鑑賞画像参照データｄ５を生成し、鑑賞画像参照データｄ５を縮小することにより表示用画像データを生成する。一般的に、表示装置の画像サイズは、鑑賞画像参照データｄ５よりも小さいので、公知の画像サイズ縮小方法、例えば、間引き、複数画素の平均、バイリニア、バイキュービック法等の補間方法を用いることができる。表示用画像データ生成部１１は、生成した表示用画像データを表示部１４及びシーン判別指標データ生成部１２に出力する。表示用画像データに対して、必要に応じて鮮鋭強調処理、ノイズ除去処理等を行ってもよいが、シーン判別指標データ生成部１２において、シーン判別指標データｄ６を生成するために表示用画像データを用いるので、鮮鋭強調処理、ノイズ除去処理等を行わない方が好ましい。ただし、シーン判別指標データ生成後に、これらの処理を行ってもよい。
【００５７】
シーン判別指標データ生成部１２は、表示用画像データ生成部１１により生成された表示用画像データを用いて、撮影シーンを判別するためのシーン判別指標データｄ６を生成する。画像サイズが小さい方が処理時間やメモリ等の面で効率的に処理を行うことができるので、シーン判別指標データｄ６を生成する際には、シーン参照生データｄ２ではなく、表示用画像データを用いることが好ましい。シーン判別指標データ生成部１２は、特許請求の範囲に記載の撮像装置のシーン判別指標データ生成手段としての機能を有する。
【００５８】
図２に、シーン判別指標データ生成部１２の内部構成を示す。シーン判別指標データ生成部１２は、図２に示すように、割合算出部３１及び指標算出部３２により構成される。割合算出部３１は、表色系変換部３３、ヒストグラム作成部３４、占有率演算部３５により構成される。
【００５９】
表色系変換部３３は、表示用画像データのＲＧＢ（Red，Green，Blue）値をＨＳＶ表色系に変換する。ＨＳＶ表色系とは、画像データを、色相（Hue）、彩度（Saturation）、明度（Value又はBrightness）の３つの要素で表すものであり、マンセルにより提案された表色体系を元にして考案されたものである。
【００６０】
なお、「明度」は特に注釈を設けない限り一般に用いられる「明るさ」の意味である。以下の記載において、ＨＳＶ表色系のＶ(0〜255)を「明度」として用いるが、他のいかなる表色系の明るさを表す単位系を用いてもよい。
【００６１】
ヒストグラム作成部３４は、画像データを、所定の色相と明度の組み合わせからなる領域に分割し、分割された領域毎に累積画素数を算出することによって２次元ヒストグラムを作成する。また、ヒストグラム作成部３４は、画像データを、当該画像データの画面の外縁からの距離と明度の組み合わせからなる所定の領域に分割し、分割された領域毎に累積画素数を算出することによって２次元ヒストグラムを作成する。
【００６２】
占有率演算部３５は、明度と色相の組み合わせによって分割された領域毎に、ヒストグラム作成部３４において算出された累積画素数の全画素数（画像データ全体）に占める割合を示す第１の占有率を算出する。また、占有率演算部３５は、画像データの画面の外縁からの距離と明度の組み合わせによって分割された領域毎に、ヒストグラム作成部３４において算出された累積画素数の全画素数（画像データ全体）に占める割合を示す第２の占有率を算出する。
【００６３】
指標算出部３２は、撮影シーンを判別するためのシーン判別指標データｄ６を算出する。具体的に、指標算出部３２は、占有率演算部３５において領域毎に算出された第１の占有率に、撮影条件に応じて予め（例えば、判別分析によって）設定された第１の係数（表１参照）を乗算して和をとることにより、撮影シーンを判別するための指標１を算出する。撮影シーンとは、順光、逆光、ストロボ等の、被写体を撮影する時の光源条件及びアンダー撮影等の露出条件を示す。指標１は、屋内撮影度、近接撮影度、顔色高明度等のストロボ撮影時の特徴を示すもので、ストロボ撮影シーンと判別されるべき画像を他の撮影シーンから分離するためのものである。
【００６４】
また、指標算出部３２は、占有率演算部３５において領域毎に算出された第１の占有率に、撮影条件に応じて予め（例えば、判別分析によって）設定された第２の係数（表２参照）を乗算して和をとることにより、撮影シーンを判別するための指標２を算出する。指標２は、屋外撮影度、空色高明度、顔色低明度等の逆光撮影時の特徴を複合的に示すもので、逆光撮影シーンと判別されるべき画像を他の撮影シーンから分離するためのものである。
【００６５】
さらに、指標算出部３２は、占有率演算部３５において領域毎に算出された第２の占有率に、撮影条件に応じて予め（例えば、判別分析によって）設定された第３の係数（表３参照）を乗算して和をとることにより、撮影シーンを判別するための指標３を算出する。指標３は、逆光とストロボ間における、画像データの画面の中心と外側の明暗関係の差異を示すものであり、逆光撮影シーン又はストロボ撮影シーンと判別されるべき画像のみを定量的に示すものである。
【００６６】
また、指標算出部３２は、画像データの画面中央部における肌色の平均輝度値、画像データの最大輝度値と平均輝度値との差分値、輝度標準偏差、画面中央部における平均輝度値、画像の肌色最大輝度値と肌色最小輝度値の差分値と肌色平均輝度値との比較値（後述の式（６）参照）のそれぞれに、撮影条件に応じて予め設定された第４の係数を乗算して和をとることにより、撮影シーンを判別するための指標４を算出する。指標４は、ストロボ撮影シーンとアンダー撮影シーンにおける、画像データの画面の中心と外側の明暗関係の差異を示すだけでなく、輝度ヒストグラムにおける分布情報を示すものであり、ストロボ撮影シーン又はアンダー撮影シーンと判別されるべき画像のみを定量的に示すものである。
【００６７】
また、指標算出部３２は、指標１、指標３及び画面中央部における肌色の平均輝度値（以下、指標４’という。）に、それぞれ、撮影条件に応じて予め設定された係数を乗算して和をとることにより指標５を算出する（後述の式（８）参照）。さらに、指標算出部３２は、指標２、指標３及び指標４’に、それぞれ、撮影条件に応じて予め設定された係数を乗算して和をとることにより指標６を算出する（後述の式（９）参照）。なお、指標算出部３２における指標１〜６の具体的な算出方法は、後述の本実施の形態の動作説明において詳細に説明する。
【００６８】
操作部１３には、図示しないレリーズボタン、電源のＯＮ／ＯＦＦボタン、ズームボタン等の各種機能ボタン、カーソルキー等が設けられ、各ボタンやキーに対応する操作信号を入力信号として制御部８に出力する。操作部１３は、シーン参照生データの出力を指定するための機能ボタンを備えている。
【００６９】
表示部１４は、制御部８からの制御信号により、表示用画像データを表示するとともに、撮像装置５１の使用者が撮影に関する設定や条件を確認するための情報を表示する。
【００７０】
ヘッダ情報処理部１５は、一時記憶メモリ６に格納されたデジタル画像データに対して、撮影情報データ処理部９により生成された撮影情報データｄ３、装置特性補正情報処理部１０により生成された撮像装置特性補正データｄ１、シーン判別指標データ生成部１２により生成されたシーン判別指標データｄ６をヘッダ情報として書き込み処理する。
【００７１】
記憶デバイス１６は、不揮発性の半導体メモリ等により構成されており、撮影されたデジタル画像データを記録するメモリカード等の記録メディアと、撮像装置５１の制御プログラムが記憶された読み出し可能なメモリとにより構成されている。
【００７２】
ＣＣＤ駆動回路１７は、制御部８から出力される制御信号をもとにタイミングパルスを出力し、ＣＣＤ３の駆動制御を行う。
【００７３】
焦点距離調整回路１８は、制御部８からの制御信号により、レンズ１を移動させて焦点距離を調整するためのモータ２０の制御を行う。
自動焦点駆動回路１９は、制御部８からの制御信号により、レンズ１を移動させてフォーカス（ピント）を調整するためのモータ２０の制御を行う。
【００７４】
ストロボ駆動回路２１は、制御部８からの制御信号により、被写体輝度が低い時にストロボ２２を駆動制御して発光させる。
ストロボ２２は、電池電圧を所定の高電圧に昇圧させ、電荷をコンデンサに蓄える。そして、ストロボ駆動回路２１により駆動されることにより、コンデンサに蓄えられた電荷によりＸ管を発光して、被写体に対して補助光を照射する。
【００７５】
＜撮像装置５１の動作＞
次に、撮像装置５１の動作について説明する。
図３は、図１に示す撮像装置５１において、操作部１３により、撮影されたデジタル画像データのシーン参照生データによる出力が設定され、レリーズスイッチが押下された際に、制御部８の制御により実行されるシーン参照生データ保存処理Ａを示すフローチャートである。以下、図３を参照してシーン参照生データ保存処理Ａについて説明する。
【００７６】
操作部１３のレリーズボタンが押下されると、制御部８により、各部が制御され撮影が行われる（ステップＳ１）。ＣＣＤ３から得られた撮像信号は、Ａ／Ｄ変換器５によりデジタル画像データに変換され、シーン参照生データｄ２が生成される（ステップＳ２）。また、装置特性補正情報処理部１０により撮像装置特性補正データｄ１が生成され（ステップＳ３）、撮影情報データ処理部９により撮影情報データｄ３が生成される（ステップＳ４）。また、表示用画像データ生成部１１により表示用画像データが生成され、シーン判別指標データ生成部１２により表示用画像データを用いてシーン判別指標データｄ６が生成される（ステップＳ５）。
【００７７】
ここで、図４を参照して、シーン判別指標データ生成処理について説明する。
図４に示すように、まず、割合算出部３１において、表示用画像データが所定の画像領域に分割され、各分割領域が画像データ全体に占める割合を示す占有率（第１の占有率、第２の占有率）を算出する占有率算出処理が行われる（ステップＳ１１）。占有率算出処理の詳細は、後に図５、図６を参照して説明する。
【００７８】
次いで、割合算出部３１において算出された占有率（第１の占有率、第２の占有率）と、少なくとも、画像データの画面中央部における肌色の平均輝度値と、撮影条件に応じて予め設定された係数に基づいて、撮影シーンを判別するための（光源条件及び露出条件を定量的に表す）シーン判別指標データｄ６（指標１〜６）が算出される（ステップＳ１２）。ステップＳ１２における指標算出処理は、後に詳細に説明する。
【００７９】
次に、図５を参照して、割合算出部３１において実行される第１の占有率算出処理について詳細に説明する。
【００８０】
まず、画像データのＲＧＢ（Red，Green，Blue）値がＨＳＶ表色系に変換される（ステップＳ２１）。次いで、画像データが、所定の明度と色相の組み合わせからなる領域に分割され、分割領域毎に累積画素数を算出することにより２次元ヒストグラムが作成される（ステップＳ２２）。
【００８１】
明度（V）は、明度値が0〜25(v1)、26〜50(v2)、51〜84(v3)、85〜169(v4)、170〜199(v5)、200〜224(v6)、225〜255(v7)の７つの領域に分割される。色相(H)は、色相値が0〜39、330〜359の肌色色相領域（H1及びH2）、色相値が40〜160の緑色色相領域（H3）、色相値が161〜250の青色色相領域（H4）、赤色色相領域（H5）の４つの領域に分割される。なお、赤色色相領域（H5）は、撮影シーンの判別への寄与が少ないとの知見から、以下の計算では用いていない。肌色色相領域は、さらに、肌色領域（H1）と、それ以外の領域（H2）に分割される。以下、肌色色相領域（H＝0〜39、330〜359）のうち、下記の式（２）を満たす色相’(H)を肌色領域（H1）とし、式（２）を満たさない領域を（H2）とする。ただし、入力画像データの値をInR、InG、InBとする。
【００８２】
10 ＜ 彩度(S) ＜175、
色相’(H) = 色相(H) + 60      (0 ≦ 色相(H) ＜ 300のとき)、
色相’(H) = 色相(H) − 300    (300 ≦ 色相(H) ＜ 360のとき)、
輝度(Y) = InR × 0.30 + InG × 0.59 + InB × 0.11      （１）
として、
色相’(H)／輝度(Y) ＜ 3.0 × (彩度(S)／255) ＋ 0.7      （２）
【００８３】
したがって、画像データの分割領域の数は４×７＝２８個となる。なお、式（１）及び（２）において明度(V)を用いることも可能である。
【００８４】
２次元ヒストグラムが作成されると、分割領域毎に算出された累積画素数の全画素数（撮影画像全体）に占める割合を示す第１の占有率が算出される（ステップＳ２３）。明度領域vi、色相領域Hjの組み合わせからなる分割領域において算出された第１の占有率をRijとする。
【００８５】
次に、指標１及び指標２の算出方法について説明する。
表１に、ストロボ撮影としての確度、すなわち、ストロボ撮影時の顔領域の明度状態を定量的に示す指標１を算出するために必要な第１の係数を分割領域別に示す。表１に示された各分割領域の係数は、各分割領域の第１の占有率Rijに乗算する重み係数であり、撮影条件に応じて予め設定されている。
【表１】
2006203566.tif 000003
【００８６】
明度領域vi、色相領域Hjにおける第１の係数をCijとすると、指標１は、式（３）のように定義される。
【数１】
2006203566.tif 000004
【００８７】
表２に、逆光撮影としての確度、すなわち、逆光撮影時の顔領域の明度状態を定量的に示す指標２を算出するために必要な第２の係数を分割領域別に示す。表２に示された各分割領域の係数は、各分割領域の第１の占有率Rijに乗算する重み係数であり、撮影条件に応じて予め設定されている。
【表２】
2006203566.tif 000005
【００８８】
明度領域vi、色相領域Hjにおける第２の係数をDijとすると、指標２は、式（４）のように定義される。
【数２】
2006203566.tif 000006
【００８９】
次に、図６を参照して、指標３を算出するために割合算出部３１において実行される第２の占有率算出処理について詳細に説明する。
【００９０】
まず、画像データのＲＧＢ値がＨＳＶ表色系に変換される（ステップＳ３１）。次いで、画像データが、撮影画像画面の外縁からの距離と明度の組み合わせからなる領域に分割され、分割領域毎に累積画素数を算出することにより２次元ヒストグラムが作成される（ステップＳ３２）。
【００９１】
図７（ａ）〜（ｄ）に、画像データの画面の外縁からの距離に応じて分割された４つの領域ｎ１〜ｎ４を示す。図７（ａ）に示す領域ｎ１が外枠であり、図７（ｂ）に示す領域ｎ２が、外枠の内側の領域であり、図７（ｃ）に示す領域ｎ３が、領域ｎ２のさらに内側の領域であり、図７（ｄ）に示す領域ｎ４が、撮影画像画面の中心部の領域である。また、明度は、上述のようにv1〜v7の７つの領域に分割するものとする。したがって、画像データを、撮影画像画面の外縁からの距離と明度の組み合わせからなる領域に分割した場合の分割領域の数は４×７＝２８個となる。
【００９２】
２次元ヒストグラムが作成されると、分割領域毎に算出された累積画素数の全画素数（撮影画像全体）に占める割合を示す第２の占有率が算出される（ステップＳ３３）。明度領域vi、画面領域njの組み合わせからなる分割領域において算出された第２の占有率をQijとする。
【００９３】
次に、指標３の算出方法について説明する。
表３に、指標３を算出するために必要な第３の係数を分割領域別に示す。表３に示された各分割領域の係数は、各分割領域の第２の占有率Qijに乗算する重み係数であり、撮影条件に応じて予め設定されている。
【表３】
2006203566.tif 000007
【００９４】
明度領域vi、画面領域njにおける第３の係数をEijとすると、指標３は、式（５）のように定義される。
【数３】
2006203566.tif 000008
【００９５】
次に、指標４の算出方法について説明する。
まず、画像データのＲＧＢ（Red，Green，Blue）値から、式（１）を用いて輝度Ｙを算出する。また、画像データの画面中央部における肌色領域の平均輝度値x1を算出する。ここで、画面中央部とは、例えば、図７において、領域ｎ３及び領域ｎ４により構成される領域である。次いで、画像データの最大輝度値と平均輝度値との差分値x2を算出する。
【００９６】
次いで、画像データの輝度の標準偏差x3を算出し、画面中央部における平均輝度値x4を算出する。また、画像データにおける肌色領域の最大輝度値Yskin_maxと最小輝度値Yskin_minの差分値と、肌色領域の平均輝度値Yskin_aveとの比較値x5を算出する。この比較値x5は、下記の式（６）のように表される。
x5＝(Yskin_max−Yskin_min)／2 −Yskin_ave （６）
【００９７】
次いで、算出された値x1〜x5のそれぞれに、撮影条件に応じて予め設定された第４の係数を乗算し、和をとることにより、指標４が算出される。指標４は、下記の式（７）のように定義される。
指標４＝0.06×x1＋1.13×x2＋0.02×x3＋(−0.01)×x4＋0.03×x5−6.50      （７）
【００９８】
また、画像データの画面中央部における肌色領域の平均輝度値を指標４’とする。ここでの画面中央部とは、例えば、図７の領域ｎ２、領域ｎ３及び領域ｎ４から構成される領域である。
【００９９】
また、指標５は、指標１、指標３、指標４’を用いて式（８）のように定義され、指標６は、指標２、指標３、指標４’を用いて式（９）のように定義される。
指標５＝0.46×指標１＋0.61×指標３＋0.01×指標４’−0.79        （８）
指標６＝0.58×指標２＋0.18×指標３＋(−0.03)×指標４’＋3.34      （９）
ここで、式（８）及び式（９）において各指標に乗算される重み係数は、撮影条件に応じて予め設定されている。
【０１００】
図３に戻り、シーン参照生データｄ２、撮像装置特性補正データｄ１、撮影情報データｄ３及びシーン判別指標データｄ６の生成後、シーン参照生データｄ２のファイルヘッダに撮像装置特性補正データｄ１、撮影情報データｄ３及びシーン判別指標データｄ６がタグ情報として記録、添付され（ステップＳ６）、添付済みのデータファイルが作成される（ステップＳ７）。この添付済みのデータファイルは、撮像装置５１に着脱可能に構成された記憶デバイス１６の記録メディアに記録、保存される（ステップＳ８）。
【０１０１】
図８は、ステップＳ８で記憶デバイス１６の記録メディアに記録されるデジタル画像データのデータ構造を示す図である。図８に示すように、撮影されたデジタル画像データは、シーン参照生データｄ２として記録され、そのヘッダ領域に、撮像装置特性補正データｄ１、撮影情報データｄ３及びシーン判別指標データｄ６が記録されている。この記録メディアを撮像装置５１から取り出して、画像処理装置や画像記録装置等の外部装置に装着することにより、シーン参照生データｄ２、撮像装置特性補正データｄ１、撮影情報データｄ３及びシーン判別指標データｄ６をこれらの外部装置に出力することができる。したがって、撮像装置５１によれば、撮像画像情報の情報損失を伴うことなく、撮影シーンに応じて最適な鑑賞画像を形成するための情報を外部の装置に提供することができる。
【０１０２】
以上、撮像装置５１について説明したが、これはシーン参照生データ、再現補助データ、撮影情報データ及びシーン判別指標データを生成する装置の一例に過ぎず、カラーネガフィルム、カラーリバーサルフィルム、白黒ネガフィルム、白黒リバーサルフィルム等、アナログカメラにより記録された写真感光材料の駒画像データを入力するフィルムスキャナや、銀塩印画紙であるカラーペーパー上に再現された画像データ、その他の反射原稿、透過原稿上に再現された画像データを入力するフラットベッドスキャナ等を使用して画像データを取得し、これに基づいてデータを生成する形態でもよい。
【０１０３】
＜画像処理装置１３１の構成＞
次に、画像処理装置１３１の構成を説明する。
図９は、画像処理装置１３１の機能的構成を示すブロック図である。図９に示すように、画像処理装置１３１は、入力部１０１、ヘッダ情報解析部１０２、撮像装置特性補正データｄ１に基づいてシーン参照生データｄ２に撮像装置特性補正処理を施してシーン参照画像データｄ４を生成する撮像装置特性補正処理部１１４、撮像装置特性補正処理部１１４により生成されたシーン参照画像データｄ４に最適な鑑賞画像を形成するための画像処理（以下、最適化処理という。）を施して鑑賞画像参照データｄ５を生成する最適化処理部１１５により構成されている。撮像装置特性補正処理部１１４と、最適化処理部１１５にはヘッダ情報解析部１０２がそれぞれ接続されており、さらに最適化処理部１１５には、記憶デバイス１１１、出力デバイス１１２、表示デバイス１１３がそれぞれ接続可能な状態となっている。以上の各構成要素はＣＰＵ等により構成される制御部１１６の統括的な制御下において動作する。
【０１０４】
入力部１０１は、記録メディア装着部（図示せず）を備えている。この装着部に、上述した撮像装置５１により撮影されたデータのファイル（図８参照）が記録された記録メディアが装着されると、入力部１０１は、記録されたデータファイルを読み出して、ヘッダ情報解析部１０２へ出力する。なお、本実施の形態においては、入力部１０１は、装着された記録メディアからデータを読み出すこととして説明するが、データ通信ケーブルや、無線又は有線の通信手段を備え、これらの通信手段を介してデータを入力するようにしてもよい。入力部１０１は、特許請求の範囲に記載の画像処理装置の入力手段としての機能を有する。
【０１０５】
ヘッダ情報解析部１０２は、入力部１０１から入力されたデータを解析し、シーン参照生データｄ２と、撮像装置特性補正データｄ１と、撮影情報データｄ３と、シーン判別指標データｄ６とに分け、撮像装置特性補正データｄ１を装置特性補正処理部１０３ａへ、シーン参照生データｄ２をシーン参照画像データ生成部１０４へ、撮影情報データｄ３を撮影情報データ処理部１０６へ、シーン判別指標データｄ６をシーン判別指標データ処理部１０７へ出力する。
【０１０６】
撮像装置特性補正処理部１１４は、図９に示すように、装置特性補正処理部１０３ａ、処理条件テーブル１０３ｂ、シーン参照画像データ生成部１０４及び一時記憶メモリ１０５を有して構成されている。撮像装置特性補正処理部１１４は、特許請求の範囲に記載の画像処理装置のシーン参照画像データ生成手段としての機能を有する。
【０１０７】
装置特性補正処理部１０３ａは、ヘッダ情報解析部１０２から撮像装置特性補正データｄ１が入力されると、処理条件テーブル１０３ｂの参照により、シーン参照画像データｄ４の生成条件を決定する。処理条件テーブル１０３ｂは、撮像装置の特性毎に、シーン参照画像データｄ４を生成するための処理条件を対応付けて記憶するテーブルである。
【０１０８】
シーン参照画像データ生成部１０４は、ヘッダ情報解析部１０２から入力されたシーン参照生データｄ２に対して、装置特性補正処理部１０３ａにより決定された生成条件により撮像装置特性補正処理を施して撮像装置特性に依存しないシーン参照画像データｄ４を生成し、一時記憶メモリ１０５に出力する。具体的には、撮像装置特性補正処理には、少なくともシーン参照生データｄ２を生成した撮像装置の撮像素子固有の分光感度に基づく各色チャンネルの信号強度を、例えばＲＩＭＭ  ＲＧＢやＥＲＩＭＭ ＲＧＢ等の標準色空間にマッピングする処理が含まれる。
【０１０９】
一時記憶メモリ１０５は、シーン参照画像データ生成部１０４により生成されたシーン参照画像データｄ４を一時的に記憶する。
【０１１０】
図９に示すように、最適化処理部１１５は、撮影情報データ処理部１０６、シーン判別指標データ処理部１０７、鑑賞画像参照データ生成部１０８、一時記憶メモリ１０９及び設定入力部１１０を有して構成されている。最適化処理部１１５は、特許請求の範囲に記載の画像処理装置の鑑賞画像参照データ生成手段としての機能を有する。
【０１１１】
撮影情報データ処理部１０６は、ヘッダ情報解析部１０２から入力された撮影情報データｄ３に基づいて、撮影条件に応じた鑑賞画像参照データｄ５を生成するための生成条件を決定し、鑑賞画像参照データ生成部１０８に出力する。
【０１１２】
シーン判別指標データ処理部１０７は、シーン判別指標データｄ６（指標１〜６）に基づいて撮影シーンを判別し、判別された撮影シーンに応じた鑑賞画像参照データｄ５を生成するための生成条件を決定し、鑑賞画像参照データ生成部１０８に出力する。
【０１１３】
図１０に、シーン判別指標データ処理部１０７の内部構成を示す。シーン判別指標データ処理部１０７は、図１０に示すように、シーン判別部１２１、階調調整方法決定部１２２、階調調整パラメータ算出部１２３、階調調整量算出部１２４により構成される。
【０１１４】
シーン判別部１２１は、シーン判別指標データｄ６に基づいて、画像データの撮影シーン（光源条件及び露出条件）を判別する。
【０１１５】
階調調整方法決定部１２２は、シーン判別部１２１において判別された撮影シーンに応じて、画像データに対する階調調整方法を決定する。例えば、撮影シーンが順光である場合は、図１１（ａ）に示すように、入力された画像データの画素値を平行移動（オフセット）補正する方法（階調調整方法Ａ）が適用される。撮影シーンが逆光である場合は、図１１（ｂ）に示すように、入力された画像データの画素値をガンマ補正する方法（階調調整方法Ｂ）が適用される。撮影シーンがストロボである場合は、図１１（ｃ）に示すように、入力された画像データの画素値をガンマ補正及び平行移動（オフセット）補正する方法（階調調整方法Ｃ）が適用される。撮影シーンがアンダーである場合は、図１１（ｂ）に示すように、入力された画像データの画素値をガンマ補正する方法（階調調整方法Ｂ）が適用される。
【０１１６】
階調調整パラメータ算出部１２３は、シーン判別指標データｄ６に基づいて、階調調整に必要なパラメータ（キー補正値等）を算出する。
【０１１７】
階調調整量算出部１２４は、階調調整パラメータ算出部１２３において算出された階調調整パラメータに基づいて、画像データに対する階調調整量を算出する。具体的に、階調調整量算出部１２４は、階調調整方法決定部１２２において決定された階調調整方法に対応して予め設定された複数の階調変換曲線の中から、階調調整パラメータ算出部１２３において算出された階調調整パラメータに対応する階調変換曲線を選択する。なお、階調調整パラメータ算出部１２３において算出された階調調整パラメータに基づいて階調変換曲線（階調調整量）を算出するようにしてもよい。
【０１１８】
図９に示す設定入力部１１０は、画像処理装置１３１にて生成したデジタル画像データを出力する記憶デバイス１１１、出力デバイス１１２、表示デバイス１１３の種類に関する操作情報が入力されると、この操作情報を鑑賞画像参照データ生成部１０８に出力する。
【０１１９】
鑑賞画像参照データ生成部１０８は、一時記憶メモリ１０５からシーン参照画像データｄ４を読み出し、撮影情報データ処理部１０６で決定された鑑賞画像参照データｄ５の生成条件、シーン判別指標データ処理部１０７で決定された鑑賞画像参照データｄ５の生成条件、及び設定入力部１１０から入力された記憶デバイス１１１、出力デバイス１１２、表示デバイス１１３の種類に関する操作情報に基づき、出力先において最適な画像を得るための最適化処理を施して鑑賞画像参照データｄ５を生成し、操作情報とともに一時記憶メモリ１０９へ出力する。最適化処理には、例えば、出力先の色域への圧縮、１６bitから８bitへの階調圧縮、出力画素数の低減、出力デバイスや表示デバイスの出力特性（ＬＵＴ）への対応処理等が含まれる。さらに、ノイズ抑制、鮮鋭化、カラーバランス調整、彩度調整、覆い焼き処理等の画像処理が含まれる。
【０１２０】
一時記憶メモリ１０９は、制御部１１６からの制御により鑑賞画像参照データ生成部１０８から入力された鑑賞画像参照データｄ５を設定入力部１１０からの操作情報に従い、記憶デバイス１１１、出力デバイス１１２、表示デバイス１１３の何れかに出力する。
【０１２１】
＜画像処理装置１３１の動作＞
図１２は、画像処理装置１３１の各部が連携することにより実行される画像データ生成処理Ａを示すフロー図である。以下、図１２を参照して画像処理装置１３１の動作について説明する。
【０１２２】
図８に示したデータ構造の画像データファイルが記録された記録メディアが装着されると、入力部１０１により、記録メディアに記録されたデジタル画像データファイルが入力される（ステップ４１）。入力されたデジタル画像データは、ヘッダ情報解析部１０２によりその内容が解析され（ステップＳ４２）、シーン参照生データｄ２（ステップＳ４３）、撮像装置特性補正データｄ１（ステップＳ４４）、撮影情報データｄ３（ステップＳ４５）、シーン判別指標データｄ６（ステップＳ４６）に分けられ、シーン参照生データｄ２及び撮像装置特性補正データｄ１は撮像装置特性補正処理部１１４へ、撮影情報データｄ３及びシーン判別指標データｄ６は最適化処理部１１５へ出力される。
【０１２３】
撮像装置特性補正データｄ１が撮像装置特性補正処理部１１４へ入力されると、装置特性補正処理部１０３ａにより処理条件テーブル１０３ｂが参照され、シーン参照画像データｄ４を生成するための処理条件が決定される。シーン参照画像データ生成部１０４により、シーン参照生データｄ２に対して、この処理条件に基づいて撮像装置特性補正処理が施され（ステップＳ４７）、シーン参照画像データｄ４が生成されて最適化処理部１１５に出力される（ステップＳ４８）。
【０１２４】
また、撮影情報データｄ３が最適化処理部１１５へ入力されると、撮影情報データ処理部１０６により、撮影情報データｄ３に基づいて撮影条件に応じた鑑賞画像参照データｄ５を生成するための処理条件が決定される。
【０１２５】
また、シーン判別指標データｄ６が最適化処理部１１５へ入力されると、シーン判別指標データ処理部１０７により、シーン判別指標データｄ６（指標１〜６）に基づいて、画像処理条件決定処理が行われる（ステップＳ４９）。
【０１２６】
図１３を参照して、画像処理条件決定処理を詳細に説明する。
まず、シーン判別指標データｄ６（例えば、指標４、指標５及び指標６）の値に基づいて、画像データの撮影シーン（光源条件及び露出条件）が判別される（ステップＳ６１）。以下、撮影シーン（光源条件及び露出条件）の判別方法について説明する。
【０１２７】
図１４（ａ）は、順光、逆光、ストロボの各光源条件で６０枚ずつ撮影し、合計１８０枚のデジタル画像データについて、指標５及び指標６を算出し、各光源条件での指標５及び指標６の値をプロットしたものである。図１４（ａ）によれば、指標５の値が０．５より大きい場合、ストロボ撮影シーンが多く、指標５の値が０．５以下で、指標６の値が−０．５より大きい場合、逆光シーンが多いことがわかる。このように指標５及び指標６の値により撮影シーンを定量的に判別することができる。
【０１２８】
図１４（ｂ）は、ストロボ撮影シーンとアンダー撮影シーンの撮影画像各６０枚のうち、指標５が０．５より大きい画像の指標４及び指標５を算出し、プロットしたものである。図１４（ｂ）によれば、指標４の値が０より大きい場合、ストロボ撮影シーンが多く、指標４の値が０以下の場合、アンダー撮影シーンが多いことがわかる。
【０１２９】
撮影シーンが判別されると、その判別された撮影シーンに応じて、画像データに対する階調調整方法が決定される（ステップＳ６２）。例えば、撮影シーンが順光である場合は階調調整方法Ａ（図１１（ａ））が選択され、逆光である場合は階調調整方法Ｂ（図１１（ｂ））が選択され、ストロボである場合は階調調整方法Ｃ（図１１（ｃ））が選択され、アンダーである場合は、階調調整方法Ｂ（図１１（ｂ））が選択される。
【０１３０】
階調調整方法が決定されると、指標に基づいて、階調調整に必要なパラメータ（階調調整パラメータ）が算出される（ステップＳ６３）。なお、以下では、8bitの画像データは16bitへと事前に変換されているものとし、画像データの値の単位は16bitであるものとする。
【０１３１】
階調調整パラメータとして、下記のＰ１〜Ｐ９のパラメータが算出される。
Ｐ１：撮影画面全体の平均輝度
Ｐ２：ブロック分割平均輝度
Ｐ３：肌色領域（Ｈ１）の平均輝度
Ｐ４：輝度補正値１＝Ｐ１−Ｐ２
Ｐ５：再現目標修正値＝輝度再現目標値(30360)−Ｐ４
Ｐ６：オフセット値1＝Ｐ５−Ｐ１
Ｐ７：キー補正値
Ｐ７’：キー補正値２
Ｐ８：輝度補正値２
Ｐ９：オフセット値２＝Ｐ５−Ｐ８−Ｐ１
【０１３２】
パラメータＰ７のキー補正値、パラメータＰ７’のキー補正値２、パラメータＰ８の輝度補正値２は、それぞれ、式（１０）、式（１１）、式（１２）のように定義される。
Ｐ７(キー補正値)＝[Ｐ３−((指標６／６)×18000＋22000)]／24.78      （１０）
Ｐ７’(キー補正値２)＝[Ｐ３−((指標４／６)×10000＋30000)]／24.78    （１１）
Ｐ８(輝度補正値２)＝(指標５／６)×17500      （１２）
【０１３３】
階調調整パラメータが算出されると、その算出された階調調整パラメータに基づいて、画像データに対する階調調整量が決定される（ステップＳ６４）。そして、ステップＳ６２において決定された階調調整方法に対応して予め設定された複数の階調変換曲線の中から、ステップＳ６３において算出された階調調整パラメータに対応する階調変換曲線が選択（決定）される。なお、ステップＳ６３において算出された階調調整パラメータに基づいて、階調変換曲線（階調調整量）を算出するようにしてもよい。
【０１３４】
以下、各撮影シーン（光源条件及び露出条件）の階調変換曲線の決定方法について説明する。
撮影シーンが順光である場合、パラメータＰ１をＰ５と一致させるオフセット補正（8bit値の平行シフト）を下記の式（１３）により行う。
出力画像のRGB値＝入力画像のRGB値＋Ｐ６      （１３）
したがって、撮影シーンが順光の場合、図１１（ａ）に示す複数の階調変換曲線の中から、式（１３）に対応する階調変換曲線が選択される。又は、式（１３）に基づいて階調変換曲線を算出（決定）してもよい。
【０１３５】
撮影シーンが逆光である場合、図１１（ｂ）に示す複数の階調変換曲線の中から、式（１０）に示すパラメータＰ７（キー補正値）に対応する階調変換曲線が選択される。なお、撮影シーンが逆光の場合、この階調変換処理とともに、覆い焼き処理を併せて行うことが好ましい。この場合、逆光度を示す指標６に応じて覆い焼き処理の程度も調整されることが望ましい。
【０１３６】
撮影シーンがアンダーである場合、図１１（ｂ）に示す複数の階調変換曲線の中から、式（１１）に示すパラメータＰ７’（キー補正値２）に対応する階調変換曲線が選択される。なお、撮影シーンがアンダーである場合は、逆光の場合に示したような覆い焼き処理は行わない。
【０１３７】
撮影シーンがストロボである場合、オフセット補正（8bit値の平行シフト）を式（１４）により行う。
出力画像のRGB値＝入力画像のRGB値＋Ｐ９      （１４）
したがって、撮影シーンがストロボの場合、図１１（ｃ）に示す複数の階調変換曲線の中から、式（１４）に対応する階調変換曲線が選択される。又は、式（１４）に基づいて階調変換曲線を算出（決定）してもよい。
【０１３８】
図１２に戻り、撮像装置特性補正処理部１１４から入力されたシーン参照画像データｄ４は、鑑賞画像参照データ生成部１０８により、撮影情報データ処理部１０６で決定された処理条件、シーン判別指標データ処理部１０７で決定された処理条件、及び設定入力部１１０から入力された操作情報に基づいて出力先に応じた最適化処理が施され（ステップＳ５０）、鑑賞画像参照データｄ５が生成されて、設定入力部１１０により設定されたデバイスに出力される（ステップＳ５１）。
【０１３９】
以上説明したように、画像処理装置１３１によれば、シーン参照生データｄ２、撮像装置特性補正データｄ１、撮影情報データｄ３及びシーン判別指標データｄ６を入力し、シーン参照生データｄ２に対して、撮像装置特性補正データｄ１に基づいて、撮像装置特性補正処理を施してシーン参照画像データｄ４を生成し、シーン参照画像データｄ４に対して、撮影情報データｄ３及びシーン判別指標データｄ６に基づいて、最適化処理を施して鑑賞画像参照データｄ５を生成するので、撮像画像情報の情報損失を伴うことなく、撮影シーンに応じて最適な鑑賞画像を形成することができる。また、シーン判別指標データｄ６に基づいて、シーン参照画像データｄ４に施す階調調整方法及び調整量を決定するので、撮影シーンに応じて最適な階調調整を行うことができる。
【０１４０】
［第２の実施の形態］
次に、図１５〜図２０を参照して、本発明の第２の実施の形態における撮像装置５２及び画像処理装置１３２について説明する。
【０１４１】
＜撮像装置５２の構成＞
図１５は、第２の実施の形態における撮像装置５２の機能的構成を示すブロック図である。撮像装置５２は、第１の実施の形態に示した撮像装置５１に、階調変換データ生成部２３を追加した構成である。撮像装置５２において、第１の実施の形態に示した撮像装置５１と同一の構成部分については同一の符号を付し、その構成については説明を省略する。以下、第２の実施の形態に特徴的な構成及び処理について説明する。
【０１４２】
制御部８は、操作部１３によりシーン参照生データの出力が指定されると、後述するシーン参照生データ保存処理Ｂを行い、撮影時におけるアナログ処理回路４における信号増幅やノイズの低減処理や画像処理部７における処理を省略し、記憶デバイス１６の記録メディアに、撮像装置特性補正データｄ１、撮影情報データｄ３及び階調変換データｄ７をヘッダ情報として書き込むとともに、撮影されたデジタル画像データをシーン参照生データｄ２として記録する。例えば、撮像装置特性補正データｄ１及び階調変換データｄ７はＤＮＧタグに書き込み、撮影情報データｄ３はＥｘｉｆタグに書き込む。
【０１４３】
階調変換データ生成部２３は、シーン判別指標データ生成部１２により生成されたシーン判別指標データｄ６に基づいて、階調変換データｄ７を生成する。階調変換データｄ７は、階調変換前後の値を定めたデータであり、ルックアップテーブルでもよいし、階調変換を示す変換式データでもよい。階調変換データ生成部２３は、第１の実施の形態に示した画像処理装置１３１のシーン判別指標データ処理部１０７と同様の構成であるため、説明を省略する。階調変換データ生成部２３は、特許請求の範囲に記載の撮像装置の階調変換データ生成手段としての機能を有する。
【０１４４】
ヘッダ情報処理部１５は、一時記憶メモリ６に格納されたデジタル画像データに対して、撮影情報データ処理部９により生成された撮影情報データｄ３、装置特性補正情報処理部１０により生成された撮像装置特性補正データｄ１、階調変換データ生成部２３により生成された階調変換データｄ７をヘッダ情報として書き込み処理する。
【０１４５】
＜撮像装置５２の動作＞
次に、撮像装置５２の動作について説明する。
図１６は、図１５に示す撮像装置５２において、操作部１３により、撮影されたデジタル画像データのシーン参照生データによる出力が設定され、レリーズスイッチが押下された際に、制御部８の制御により実行されるシーン参照生データ保存処理Ｂを示すフローチャートである。以下、図１６を参照してシーン参照生データ保存処理Ｂについて説明する。
【０１４６】
操作部１３のレリーズボタンが押下されると、制御部８により、各部が制御され撮影が行われる（ステップＳ７１）。ＣＣＤ３から得られた撮像信号は、Ａ／Ｄ変換器５によりデジタル画像データに変換され、シーン参照生データｄ２が生成される（ステップＳ７２）。また、装置特性補正情報処理部１０により撮像装置特性補正データｄ１が生成され（ステップＳ７３）、撮影情報データ処理部９により撮影情報データｄ３が生成される（ステップＳ７４）。また、シーン判別指標データ生成部１２によりシーン判別指標データｄ６が生成され、階調変換データ生成部２３により、シーン判別指標データｄ６に基づいて階調変換データｄ７が生成される（ステップＳ７５）。
【０１４７】
ここで、図１７を参照して、階調変換データ生成処理について説明する。
まず、シーン判別指標データｄ６（例えば、指標４、指標５及び指標６）の値に基づいて、画像データの撮影シーン（光源条件及び露出条件）が判別される（ステップＳ８１）。撮影シーンの判別方法については、第１の実施の形態の画像処理条件決定処理（図１３参照）におけるステップＳ６１と同様である。
【０１４８】
撮影シーンが判別されると、その判別された撮影シーンに応じて、画像データに対する階調調整方法が決定される（ステップＳ８２）。階調調整方法の決定については、第１の実施の形態の画像処理条件決定処理（図１３参照）におけるステップＳ６２と同様である。
【０１４９】
階調調整方法が決定されると、指標に基づいて、階調調整に必要なパラメータ（階調調整パラメータ）が算出される（ステップＳ８３）。階調調整パラメータの算出については、第１の実施の形態の画像処理条件決定処理（図１３参照）におけるステップＳ６３と同様である。
【０１５０】
階調調整パラメータが算出されると、その算出された階調調整パラメータに基づいて、画像データに対する階調調整量が決定される（ステップＳ８４）。そして、ステップＳ８２において決定された階調調整方法に対応して予め設定された複数の階調変換曲線の中から、ステップＳ８３において算出された階調調整パラメータに対応する階調変換曲線が選択（決定）され、階調変換データｄ７が生成される（ステップＳ８５）。なお、ステップＳ８３において算出された階調調整パラメータに基づいて、階調変換曲線（階調調整量）を算出し、階調変換データｄ７を生成するようにしてもよい。
【０１５１】
図１６に戻り、シーン参照生データｄ２、撮像装置特性補正データｄ１、撮影情報データｄ３及び階調変換データｄ７の生成後、シーン参照生データｄ２のファイルヘッダに撮像装置特性補正データｄ１、撮影情報データｄ３及び階調変換データｄ７がタグ情報として記録、添付され（ステップＳ７６）、添付済みのデータファイルが作成される（ステップＳ７７）。この添付済みのデータファイルは、撮像装置５２に着脱可能に構成された記憶デバイス１６の記録メディアに記録、保存される（ステップＳ７８）。
【０１５２】
図１８は、ステップＳ７８で記憶デバイス１６の記録メディアに記録されるデジタル画像データのデータ構造を示す図である。図１８に示すように、撮影されたデジタル画像データは、シーン参照生データｄ２として記録され、そのヘッダ領域に、撮像装置特性補正データｄ１、撮影情報データｄ３及び階調変換データｄ７が記録されている。この記録メディアを撮像装置５１から取り出して、画像処理装置や画像記録装置等の外部装置に装着することにより、シーン参照生データｄ２、撮像装置特性補正データｄ１、撮影情報データｄ３及び階調変換データｄ７をこれらの外部装置に出力することができる。したがって、撮像装置５２によれば、撮像画像情報の情報損失を伴うことなく、撮影シーンに応じて最適な鑑賞画像を形成するための情報を外部の装置に提供することができる。
【０１５３】
＜画像処理装置１３２の構成＞
図１９は、第２の実施の形態における画像処理装置１３２の機能的構成を示すブロック図である。画像処理装置１３２は、第１の実施の形態に示した画像処理装置１３１のシーン判別指標データ処理部１０７に代えて、階調変換データ処理部１１７を備えた構成である。画像処理装置１３２において、第１の実施の形態に示した画像処理装置１３１と同一の構成部分については同一の符号を付し、その構成については説明を省略する。以下、第２の実施の形態に特徴的な構成及び処理について説明する。
【０１５４】
入力部１０１は、記録メディア装着部（図示せず）を備えている。この装着部に、上述した撮像装置５２により撮影されたデータのファイル（図１８参照）が記録された記録メディアが装着されると、入力部１０１は、記録されたデータファイルを読み出して、ヘッダ情報解析部１０２へ出力する
【０１５５】
ヘッダ情報解析部１０２は、入力部１０１から入力されたデータを解析し、シーン参照生データｄ２と、撮像装置特性補正データｄ１と、撮影情報データｄ３と、階調変換データｄ７とに分け、撮像装置特性補正データｄ１を装置特性補正処理部１０３ａへ、シーン参照生データｄ２をシーン参照画像データ生成部１０４へ、撮影情報データｄ３を撮影情報データ処理部１０６へ、階調変換データｄ７を階調変換データ処理部１１７へ出力する。
【０１５６】
階調変換データ処理部１１７は、ヘッダ情報解析部１０２から入力された階調変換データｄ７に基づいて、鑑賞画像参照データｄ５を生成するための生成条件を決定し、鑑賞画像参照データ生成部１０８に出力する。
【０１５７】
鑑賞画像参照データ生成部１０８は、一時記憶メモリ１０５からシーン参照画像データｄ４を読み出し、撮影情報データ処理部１０６で決定された鑑賞画像参照データｄ５の生成条件、階調変換データ処理部１１７で決定された鑑賞画像参照データｄ５の生成条件、及び設定入力部１１０から入力された記憶デバイス１１１、出力デバイス１１２、表示デバイス１１３の種類に関する操作情報に基づき、出力先において最適な画像を得るための最適化処理を施して鑑賞画像参照データｄ５を生成し、操作情報とともに一時記憶メモリ１０９へ出力する。
【０１５８】
＜画像処理装置１３２の動作＞
図２０は、画像処理装置１３２の各部が連携することにより実行される画像データ生成処理Ｂを示すフロー図である。以下、図２０を参照して画像処理装置１３２の動作について説明する。
【０１５９】
図１８に示したデータ構造の画像データファイルが記録された記録メディアが装着されると、入力部１０１により、記録メディアに記録されたデジタル画像データファイルが入力される（ステップ９１）。入力されたデジタル画像データは、ヘッダ情報解析部１０２によりその内容が解析され（ステップＳ９２）、シーン参照生データｄ２（ステップＳ９３）、撮像装置特性補正データｄ１（ステップＳ９４）、撮影情報データｄ３（ステップＳ９５）、階調変換データｄ７（ステップＳ９６）に分けられ、シーン参照生データｄ２及び撮像装置特性補正データｄ１は撮像装置特性補正処理部１１４へ、撮影情報データｄ３及び階調変換データｄ７は最適化処理部１１５へ出力される。
【０１６０】
撮像装置特性補正データｄ１が撮像装置特性補正処理部１１４へ入力されると、装置特性補正処理部１０３ａにより処理条件テーブル１０３ｂが参照され、シーン参照画像データｄ４を生成するための処理条件が決定される。シーン参照画像データ生成部１０４により、シーン参照生データｄ２に対して、この処理条件に基づいて撮像装置特性補正処理が施され（ステップＳ９７）、シーン参照画像データｄ４が生成されて最適化処理部１１５に出力される（ステップＳ９８）。
【０１６１】
また、撮影情報データｄ３が最適化処理部１１５へ入力されると、撮影情報データ処理部１０６により、撮影情報データｄ３に基づいて撮影条件に応じた鑑賞画像参照データｄ５を生成するための処理条件が決定される。
【０１６２】
また、階調変換データｄ７が最適化処理部１１５へ入力されると、階調変換データ処理部１１７により、階調変換データｄ７に基づいて、鑑賞画像参照データｄ５を生成するための処理条件が決定される。
【０１６３】
そして、撮像装置特性補正処理部１１４から入力されたシーン参照画像データｄ４は、鑑賞画像参照データ生成部１０８により、撮影情報データ処理部１０６で決定された処理条件、階調変換データ処理部１１７で決定された処理条件及び設定入力部１１０から入力された操作情報に基づいて出力先に応じた最適化処理が施され（ステップＳ９９）、鑑賞画像参照データｄ５が生成されて、設定入力部１１０により設定されたデバイスに出力される（ステップＳ１００）。
【０１６４】
以上説明したように、画像処理装置１３２によれば、シーン参照生データｄ２、撮像装置特性補正データｄ１、撮影情報データｄ３及び階調変換データｄ７を入力し、シーン参照生データｄ２に対して、撮像装置特性補正データｄ１に基づいて、撮像装置特性補正処理を施してシーン参照画像データｄ４を生成し、シーン参照画像データｄ４に対して、撮影情報データｄ３及び階調変換データｄ７に基づいて、最適化処理を施して鑑賞画像参照データｄ５を生成するので、撮像画像情報の情報損失を伴うことなく、撮影シーンに応じて最適な鑑賞画像を形成することができる。
【０１６５】
なお、第２の実施の形態では、撮像装置５２において、シーン参照生データｄ２に、撮像装置特性補正データｄ１、撮影情報データｄ３及び階調変換データｄ７を添付することとしたが、さらに、シーン判別指標データｄ６を添付することとしてもよい。
【０１６６】
［第３の実施の形態］
＜画像記録装置２０１の構成＞
次に、図２１〜図２４を参照して、本発明の第３の実施の形態の画像記録装置２０１について説明する。
図２１は、画像記録装置２０１の概観構成を示す斜視図である。画像記録装置２０１は、出力デバイスとして画像を形成する画像記録手段と、表示デバイスとしてＣＲＴディスプレイモニタと、を備える。
【０１６７】
図２１に示すように、画像記録装置２０１には、本体２０２の一側面にマガジン装填部２０３が備えられている。本体２０２の内側には、出力メディアである銀塩印画紙に露光する露光処理部２０４と、露光された銀塩印画紙を現像処理して乾燥し、プリントを作成するプリント作成部２０５が備えられ、作成されたプリントは、本体２０２の他側面に設けられたトレー２０６に排出される。
【０１６８】
また、本体２０２の上部には、表示装置としてのＣＲＴ２０８、透過原稿を読み込む装置であるフィルムスキャナ部２０９、反射原稿入力装置２１０、操作部２１１が備えられている。このＣＲＴ２０８が、プリントを作成しようとする画像データの画像を画面に表示する表示手段を構成している。さらに、本体２０２には、各種デジタル記録媒体に記録された画像データを読み取り可能な画像読込部２１４、各種デジタル記録媒体に画像信号を書き込み（出力）可能な画像書込部２１５が備えられている。また、本体２０２の内部には、これらの各部を集中制御する制御部２０７が備えられている。
【０１６９】
画像読込部２１４には、ＰＣカード用アダプタ２１４ａ、フロッピー（登録商標）ディスク用アダプタ２１４ｂが備えられ、ＰＣカード２１３ａやフロッピーディスク２１３ｂが差し込み可能になっている。ＰＣカード２１３ａは、デジタルカメラで撮像された複数の駒画像データが記録されたメモリを有する。フロッピーディスク２１３ｂには、例えば、デジタルカメラで撮像された複数の駒画像データが記録されている。その他、駒画像データを有する記録媒体としては、マルチメディアカード、メモリースティック、ＣＤ−ＲＯＭ等が挙げられる。
【０１７０】
画像書込部２１５には、フロッピーディスク用アダプタ２１５ａ、ＭＯ用アダプタ２１５ｂ、光ディスク用アダプタ２１５ｃが備えられ、それぞれ、ＦＤ２１６ａ、ＭＯ２１６ｂ、光ディスク２１６ｃが差し込み可能になっており、画像データを画像記録メディアに書き込むことができるようになっている。光ディスク２１６ｃとしては、ＣＤ−Ｒ、ＤＶＤ−Ｒ等がある。
【０１７１】
なお、図２１では、操作部２１１、ＣＲＴ２０８、フィルムスキャナ部２０９、反射原稿入力装置２１０、画像読込部２１４が、本体２０２に一体的に備えられた構造となっているが、これらのいずれか１つ以上を別体として設けるようにしてもよい。
【０１７２】
なお、図２１に示した画像記録装置２０１では、感光材料に露光して現像してプリントを作成するものが例示されているが、プリント作成方式はこれに限定されず、例えば、インクジェット方式、電子写真方式、感熱方式、昇華方式等の方式を用いてもよい。
【０１７３】
＜画像記録装置２０１の内部構成＞
図２２は、画像記録装置２０１の内部構成を示すブロック図である。画像記録装置２０１は、図２２に示すように、制御部２０７、露光処理部２０４、プリント作成部２０５、フィルムスキャナ部２０９、反射原稿入力装置２１０、画像読込部２１４、通信手段（入力）２４０、画像書込部２１５、データ蓄積手段２７１、操作部２１１、ＣＲＴ２０８、通信手段（出力）２４１から構成される。
【０１７４】
制御部２０７は、マイクロコンピュータにより構成され、ＲＯＭ等の記憶部（図示略）に記憶されている画像処理プログラム等の各種制御プログラムと、ＣＰＵ（図示略）との協働により、画像記録装置２０１を構成する各部の動作を制御する。
【０１７５】
制御部２０７は、画像処理部２７０を有し、操作部２１１からの入力信号に基づいて、フィルムスキャナ部２０９や反射原稿入力装置２１０により取得した画像データ、画像読込部２１４から読み込まれた画像データ、外部機器から通信手段（入力）２４０を介して入力された画像データに対して、画像処理を施して出力用画像データ生成し、露光処理部２０４に出力する。また、画像処理部２７０は、画像処理された画像データに対して出力形態に応じた変換処理を施して出力する。画像処理部２７０の出力先としては、ＣＲＴ２０８、画像書込部２１５、通信手段（出力）２４１等がある。
【０１７６】
露光処理部２０４は、感光材料に画像の露光を行い、この感光材料をプリント作成部２０５に出力する。プリント作成部２０５は、露光された感光材料を現像処理して乾燥し、プリントＰ１、Ｐ２、Ｐ３を作成する。プリントＰ１は、サービスサイズ、ハイビジョンサイズ、パノラマサイズ等のプリントであり、プリントＰ２は、Ａ４サイズのプリントであり、プリントＰ３は、名刺サイズのプリントである。
【０１７７】
フィルムスキャナ部２０９は、アナログカメラにより撮像されてネガフィルムを現像して得られる現像済みのネガフィルムＮからの駒画像データを読み込む。反射原稿入力装置２１０は、駒画像を印画紙に焼き付けて現像処理したプリントＰからの駒画像データを読み込む。
【０１７８】
フィルムスキャナ部２０９や反射原稿入力装置２１０から読み込まれる原稿としては、写真感光材料があり、この写真感光材料としては、カラーネガフィルム、カラーリバーサルフィルム、白黒ネガフィルム、白黒リバーサルフィルム等がある。この写真感光材料には、アナログカメラにより撮像した駒画像データが記録される。フィルムスキャナ部２０９のフィルムスキャナにより、デジタル画像データに変換し、駒画像データとすることができる。また、写真感光材料が銀塩印画紙であるカラーペーパーの場合、反射原稿入力装置２１０のフラットベッドスキャナにより、駒画像データに変換することができる。
【０１７９】
画像読込部２１４は、ＰＣカード２１３ａやフロッピーディスク２１３ｂに記録された駒画像データを読み出して制御部２０７に転送する。この画像読込部２１４は、画像転送手段２３０として、ＰＣカード用アダプタ２１４ａ、フロッピーディスク用アダプタ２１４ｂ等を有する。画像読込部２１４は、ＰＣカード用アダプタ２１４ａに差し込まれたＰＣカード２１３ａや、フロッピーディスク用アダプタ２１４ｂに差し込まれたフロッピーディスク２１３ｂに記録された駒画像データを読み取り、制御部２０７に転送する。ＰＣカード用アダプタ２１４ａとしては、例えばＰＣカードリーダやＰＣカードスロット等が用いられる。
【０１８０】
通信手段（入力）２４０は、画像記録装置２０１が設置された施設内の別のコンピュータや、インターネット等を介した遠方のコンピュータから、撮像画像を表す画像データやプリント命令信号を受信する。
【０１８１】
画像書込部２１５は、画像搬送部２３１として、フロッピーディスク用アダプタ２１５ａ、ＭＯ用アダプタ２１５ｂ、光ディスク用アダプタ２１５ｃを備えている。画像書込部２１５は、制御部２０７から入力される書込信号に従って、フロッピーディスク用アダプタ２１５ａに差し込まれたフロッピーディスク２１６ａ、ＭＯ用アダプタ２１５ｂに差し込まれたＭＯ２１６ｂ、光ディスク用アダプタ２１５ｃに差し込まれた光ディスク２１６ｃに、生成された画像データを書き込む。
【０１８２】
データ蓄積手段２７１は、画像データとそれに対応するオーダー情報（どの駒の画像から何枚プリントを作成するかの情報、プリントサイズの情報等）等の情報を記憶し、順次蓄積する。
【０１８３】
操作部２１１は、情報入力手段２１２を有する。情報入力手段２１２は、例えば、タッチパネル等により構成されており、情報入力手段２１２の押下信号を入力信号として制御部２０７に出力する。なお、操作部２１１は、キーボードやマウス等を備えて構成するようにしてもよい。ＣＲＴ２０８は、制御部２０７から入力された表示制御信号に従って、画像データ等を表示する。
【０１８４】
通信手段（出力）２４１は、画像処理を施した後の画像データと付帯するオーダー情報とを、画像記録装置２０１が設置された施設内の他のコンピュータや、インターネット等を介した遠方のコンピュータに対して送信する。
【０１８５】
＜画像処理部２７０の構成＞
図２３は、画像記録装置２０１の画像処理部２７０の機能的構成を示すブロック図である。画像処理部２７０は、図２３に示すように、フィルムスキャンデータ処理部７０１、反射原稿スキャンデータ処理部７０２、画像データ書式解読処理部７０３、画像調整処理部７０４、ＣＲＴ固有処理部７０５、プリンタ固有処理部（１）７０６、プリンタ固有処理部（２）７０７、画像データ書式作成処理部７０８、ヘッダ情報解析部３０２、装置特性補正処理部３０３ａ、処理条件テーブル３０３ｂ、シーン参照画像データ生成部３０４、撮影情報データ処理部３０６、シーン判別指標データ処理部３０７、鑑賞画像参照データ生成部３０８から構成される。
【０１８６】
フィルムスキャンデータ処理部７０１は、フィルムスキャナ部２０９から入力された画像データに対し、フィルムスキャナ部２０９固有の校正操作・ネガ原稿の場合のネガポジ反転、ゴミキズ除去、グレーバランス調整、コントラスト調整、粒状ノイズ除去、鮮鋭化強調等を施し、画像調整処理部７０４に出力する。また、フィルムスキャンデータ処理部７０１は、フィルムサイズ、ネガポジ種別、フィルムに光学的あるいは磁気的に記録されたＩＳＯ感度、メーカー名、主要被写体に関わる情報・撮影条件に関する情報（例えばＡＰＳの記載情報内容）等も併せて画像調整処理部７０４に出力する。
【０１８７】
反射原稿スキャンデータ処理部７０２は、反射原稿入力装置２１０から入力された画像データに対し、反射原稿入力装置２１０固有の校正操作、ネガ原稿の場合のネガポジ反転、ゴミキズ除去、グレーバランス調整、コントラスト調整、ノイズ除去、鮮鋭化強調等を施し、画像調整処理部７０４に出力する。
【０１８８】
画像データ書式解読処理部７０３は、画像転送手段２３０や通信手段（入力）２４０から入力された画像データのデータ書式に従って、必要に応じて圧縮符号の復元、色データの表現方法の変換等を行い、画像処理部２７０内の演算に適したデータ形式に変換し、画像調整処理部７０４に出力する。また、画像データ書式解読処理部７０３は、第１の実施の形態に示した撮像装置５１による形式の画像データファイル（図８参照）が画像転送手段２３０又は通信手段（入力）２４０から入力されたか否かを判別し、入力された画像データをヘッダ情報解析部３０２に出力する。
【０１８９】
また、フィルムスキャナ部２０９、反射原稿入力装置２１０、画像転送手段２３０、通信手段（入力）２４０からの主要被写体に関わる情報及び撮影条件に関する情報を補足・補充する形で、操作部２１１から該情報を画像調整処理部７０４に送ることもできる。
【０１９０】
出力画像の大きさについての指定は操作部２１１から入力される。この他に、通信手段（入力）２４０から取得した出力画像の大きさについて指定があった場合や、画像転送手段２３０が取得した画像データのヘッダ情報やタグ情報に埋め込まれた出力画像の大きさについての指定があった場合には、画像データ書式解読処理部７０３が該情報を検出し、画像調整処理部７０４へ出力する。
【０１９１】
ヘッダ情報解析部３０２は、入力された画像データを解析し、シーン参照生データｄ２と、撮像装置特性補正データｄ１と、撮影情報データｄ３と、シーン判別指標データｄ６とに分ける。そして、シーン参照生データｄ２をシーン参照画像データ生成部３０４へ、撮像装置特性補正データｄ１を装置特性補正処理部３０３ａへ、撮影情報データｄ３を撮影情報データ処理部３０６へ、シーン判別指標データｄ６をシーン判別指標データ処理部３０７へ出力する。
【０１９２】
装置特性補正処理部３０３ａは、ヘッダ情報解析部３０２から撮像装置特性補正データｄ１が入力されると、処理条件テーブル３０３ｂの参照により、シーン参照画像データｄ４の生成条件を決定する。処理条件テーブル３０３ｂは、撮像装置の特性毎に、シーン参照画像データｄ４を生成するための処理条件を対応付けて記憶するテーブルである。
【０１９３】
シーン参照画像データ生成部３０４は、ヘッダ情報解析部３０２から入力されたシーン参照生データｄ２に対して、装置特性補正処理部３０３ａにより決定された生成条件により撮像装置特性補正処理を施して撮像装置特性に依存しないシーン参照画像データｄ４を生成し、鑑賞画像参照データ生成部３０８とデータ蓄積手段２７１に出力する。
【０１９４】
撮影情報データ処理部３０６は、ヘッダ情報解析部３０２から入力された撮影情報データｄ３に基づいて、撮影条件に応じた鑑賞画像参照データｄ５を生成するための生成条件を決定し、鑑賞画像参照データ生成部３０８に出力する。
【０１９５】
シーン判別指標データ処理部３０７は、シーン判別指標データｄ６に基づいて撮影シーンを判別し、判別された撮影シーンに応じた鑑賞画像参照データｄ５を生成するための生成条件を決定し、鑑賞画像参照データ生成部３０８に出力する。シーン判別指標データ処理部３０７は、第１の実施の形態の画像処理装置１３１のシーン判別指標データ処理部１０７と同様の構成である。
【０１９６】
画像調整処理部７０４は、操作部２１１及び制御部２０７からの指令に基づき、出力先のデバイス及び出力メディアに適合された鑑賞画像参照データｄ５を生成するための画像処理条件を、鑑賞画像参照データ生成部３０８へと転送する。
【０１９７】
鑑賞画像参照データ生成部３０８は、撮影情報データ処理部３０６で決定された画像処理条件、シーン判別指標データ処理部３０７で決定された画像処理条件、及び画像調整処理部７０４から送信された画像処理条件に基づき、シーン参照画像データｄ４から鑑賞画像参照データｄ５を生成する。
【０１９８】
画像調整処理部７０４は、操作部２１１又は制御部２０７の指令に基づいて、フィルムスキャナ部２０９、反射原稿入力装置２１０、画像転送手段２３０、通信手段（入力）２４０から受け取った画像データに対して、出力メディア上で画像を観察する際に好ましい印象を与える画像となるように画像処理を行い出力用のデジタル画像データを生成し、ＣＲＴ固有処理部７０５、プリンタ固有処理部（１）７０６、プリンタ固有処理部（２）７０７、画像データ書式作成処理部７０８、データ蓄積手段２７１へ処理済みの画像信号を送出する。
【０１９９】
ＣＲＴ固有処理部７０５は、画像調整処理部７０４から入力された画像データに対して、必要に応じて画素数変更やカラーマッチング等の処理を施し、制御情報等表示が必要な情報と合成した表示用の画像データをＣＲＴ２０８に出力する。
【０２００】
プリンタ固有処理部（１）７０６は、画像調整処理部７０４から入力された画像データに対して、必要に応じてプリンタ固有の校正処理、カラーマッチング、画素数変更等を行い、露光処理部２０４に出力する。
【０２０１】
画像記録装置２０１に、大判インクジェットプリンタ等の外部プリンタ２５１が接続されている場合には、接続されたプリンタ毎にプリンタ固有処理部（２）７０７が設けられている。このプリンタ固有処理部（２）７０７は、画像調整処理部７０４から入力された画像データに対して、適正なプリンタ固有の校正処理、カラーマッチング、画素数変更等を行う。
【０２０２】
画像データ書式作成処理部７０８は、画像調整処理部７０４から入力された画像データに対して、必要に応じてＪＰＥＧ、ＴＩＦＦ、Ｅｘｉｆ等に代表される各種の汎用画像フォーマットへの変換を行い、画像搬送部２３１や通信手段（出力）２４１に出力する。
【０２０３】
なお、鑑賞画像参照データ生成部３０８において生成される画像データは、上記ＣＲＴ固有処理部７０５、プリンタ固有処理部（１）７０６、プリンタ固有処理部（２）７０７、画像データ書式作成処理部７０８における処理を前提としたものであり、画像データ書式作成処理部７０８においては、鑑賞画像参照データｄ５の書式に基づき、ＣＲＴ用、露光処理部用、外部プリンタ用、通信手段（出力）用等、最適化した画像データであることを示すステータスファイルを添付した上で、個々に画像搬送部２３１に送信され、保存することが可能である。
【０２０４】
以上の、フィルムスキャンデータ処理部７０１、反射原稿スキャンデータ処理部７０２、画像データ書式解読処理部７０３、画像調整処理部７０４、ＣＲＴ固有処理部７０５、プリンタ固有処理部（１）７０６、プリンタ固有処理部（２）７０７、画像データ書式作成処理部７０８という区分は、画像処理部２７０の機能の理解を助けるために設けた区分であり、必ずしも物理的に独立したデバイスとして実現される必要はなく、例えば、単一のＣＰＵにおけるソフトウエア処理の種類の区分として実現されてもよい。
【０２０５】
また、ヘッダ情報解析部３０２、装置特性補正処理部３０３a、シーン参照画像データ生成部３０４、撮影情報データ処理部３０６、シーン判別指標データ処理部３０７、鑑賞画像参照データ生成部３０８という区分は、画像処理部２７０における本発明の機能の理解を助けるために設けた区分であり、必ずしも物理的に独立したデバイスとして実現される必要はなく、例えば単一のＣＰＵにおけるソフトウエア処理の種類の区分として実現されてもよい。
【０２０６】
＜画像処理部２７０の動作＞
図２４は、画像処理部２７０の各部が連携することにより実行される画像形成処理を示すフロー図である。以下、図２４を参照して画像処理部２７０各部の動作について説明する。
【０２０７】
画像転送手段２３０又は通信手段（入力）２４０から画像処理部２７０にデータが入力され（ステップＳ１０１）、画像データ書式解読処理部７０３により当該入力データが図８に示した形式の画像データファイルであると判別されると（ステップＳ１０２）、入力されたデジタル画像データファイルはヘッダ情報解析部３０２によりその内容が解析され（ステップＳ１０３）、シーン参照生データｄ２（ステップＳ１０４）、撮像装置特性補正データｄ１（ステップＳ１０５）、撮影情報データｄ３（ステップＳ１０６）、シーン判別指標データｄ６（ステップＳ１０７）に分けられる。
【０２０８】
撮像装置特性補正データｄ１は、装置特性補正処理部３０３ａに出力され、装置特性補正処理部３０３ａによる処理条件テーブル３０３ｂの参照によりシーン参照画像データｄ４を生成するための処理条件が決定される。シーン参照生データｄ２は、シーン参照画像データ生成部３０４に出力され、装置特性補正処理部３０３ａで決定された処理条件に基づいて撮像装置特性補正処理が施され（ステップＳ１０８）、シーン参照画像データｄ４が生成されて鑑賞画像データ生成部３０８に出力される（ステップＳ１０９）。
【０２０９】
撮影情報データｄ３は、撮影情報データ処理部３０６に出力され、撮影情報データ処理部３０６により撮影情報データｄ３に基づいて撮影条件に応じた鑑賞画像参照データｄ５を生成するための処理条件が決定される。また、操作部２１１及び制御部２０７からの指令に基づき、画像調整処理部７０４において、出力デバイス及び出力メディアに適合された鑑賞画像参照データｄ５を生成するための画像処理条件が決定される。
【０２１０】
シーン判別指標データｄ６は、シーン判別指標データ処理部３０７に出力され、シーン判別指標データ処理部３０７によりシーン判別指標データｄ６に基づいて画像処理条件決定処理が行われる（ステップＳ１１０）。画像処理条件決定処理については、第１の実施の形態に示した画像処理条件決定処理（図１３参照）と同様であるため、説明を省略する。
【０２１１】
シーン参照画像データ生成部３０４から入力されたシーン参照画像データｄ４は、鑑賞画像参照データ生成部３０８により、撮影情報データ処理部３０６により決定された画像処理条件、シーン判別指標データ処理部３０７で決定された画像処理条件、及び画像調整処理部７０４により決定された画像処理条件に基づいて最適化処理が施され（ステップＳ１１１）、鑑賞画像参照データｄ５が生成される（ステップＳ１１２）。鑑賞画像参照データｄ５は、出力先に応じてＣＲＴ固有処理部７０５、プリンタ固有処理部（１）７０６、プリンタ固有処理部（２）７０７、画像データ書式作成処理部７０８の何れかの処理部に出力される。鑑賞画像参照データｄ５は、出力された処理部において、出力先に応じた固有の処理が施され（ステップＳ１１３）、操作部２１１により指定された出力先から出力される（ステップＳ１１４）。
以上で、画像形成処理が終了する。
【０２１２】
以上説明したように、画像記録装置２０１によれば、撮像装置特性補正データｄ１、撮影情報データｄ３及びシーン判別指標データｄ６が添付されたシーン参照生データｄ２を取得して、撮像画像情報の情報損失を伴うことなく鑑賞画像参照データｄ５を生成し、ＣＲＴ、液晶ディスプレイ、プラズマディスプレイ等の表示デバイス、及び銀塩印画紙、インクジェットペーパー、サーマルプリンタ用紙等のハードコピー画像生成用の用紙等の出力媒体上に、撮影シーンに応じて最適な鑑賞画像を形成することができる。
【０２１３】
なお、第３の実施の形態では、シーン判別指標データ処理部３０７において、シーン判別指標データｄ６に基づいて撮影シーンを判別し、判別された撮影シーンに応じた鑑賞画像参照データｄ５を生成するための生成条件を決定することとしたが、第２の実施の形態における画像処理装置１３２と同様に、撮像装置５２により生成された画像データファイル（図１８参照）を取得し、階調変換データｄ７に基づいて階調変換を行うこととしてもよい。
【図面の簡単な説明】
【０２１４】
【図１】第１の実施の形態における撮像装置５１の機能的構成を示すブロック図である。
【図２】シーン判別指標データ生成部１２の内部構成を示すブロック図である。
【図３】撮像装置５１により実行されるシーン参照生データ保存処理Ａを示すフローチャートである。
【図４】シーン判別指標データ生成部１２により実行されるシーン判別指標データ生成処理を示すフローチャートである。
【図５】割合算出部３１において実行される第１の占有率算出処理を示すフローチャートである。
【図６】割合算出部３１において実行される第２の占有率算出処理を示すフローチャートである。
【図７】画像データの画面の外縁からの距離に応じて分割された領域ｎ１〜ｎ４を示す図である。
【図８】ステップＳ８で記憶デバイス１６の記録メディアに記録されるデジタル画像データのデータ構造を示す図である。
【図９】第１の実施の形態における画像処理装置１３１の機能的構成を示すブロック図である。
【図１０】シーン判別指標データ処理部１０７の内部構成を示すブロック図である。
【図１１】各階調調整方法に対応する階調変換曲線を示す図である。
【図１２】画像処理装置１３１により実行される画像データ生成処理Ａを示すフロー図である。
【図１３】シーン判別指標データ処理部１０７により実行される画像処理条件決定処理を示すフロー図である。
【図１４】撮影シーン（順光、ストロボ、逆光、アンダー）と指標４〜６の関係を示すプロット図である。
【図１５】第２の実施の形態における撮像装置５２の機能的構成を示すブロック図である。
【図１６】撮像装置５２により実行されるシーン参照生データ保存処理Ｂを示すフローチャートである。
【図１７】階調変換データ生成部２３により実行される階調変換データ生成処理を示すフローチャートである。
【図１８】ステップＳ７８で記憶デバイス１６の記録メディアに記録されるデジタル画像データのデータ構造を示す図である。
【図１９】第２の実施の形態における画像処理装置１３２の機能的構成を示すブロック図である。
【図２０】画像処理装置１３２により実行される画像データ生成処理Ｂを示すフロー図である。
【図２１】第３の実施の形態における画像記録装置２０１の概観構成を示す斜視図である。
【図２２】画像記録装置２０１の内部構成を示すブロック図である。
【図２３】画像記録装置２０１の画像処理部２７０の機能的構成を示すブロック図である。
【図２４】画像処理部２７０により実行される画像形成処理を示すフロー図である。
【符号の説明】
【０２１５】
１    レンズ
２    絞り
３    ＣＣＤ
４    アナログ処理回路
５    Ａ／Ｄ変換器
６    一時記憶メモリ
７    画像処理部
８    制御部
９    撮影情報データ処理部
１０    装置特性補正情報処理部
１１    表示用画像データ生成部
１２    シーン判別指標データ生成部
１３    操作部
１４    表示部
１５    ヘッダ情報処理部
１６    記憶デバイス
１７    ＣＣＤ駆動回路
１８    焦点距離調整回路
１９    自動焦点駆動回路
２０    モータ
２１    ストロボ駆動回路
２２    ストロボ
２３    階調変換データ生成部
３１    割合算出部
３２    指標算出部
３３    表色系変換部
３４    ヒストグラム作成部
３５    占有率演算部
５１    撮像装置
５２    撮像装置
１０１    入力部
１０２    ヘッダ情報解析部
１０３ａ  装置特性補正処理部
１０３ｂ  処理条件テーブル
１０４    シーン参照画像データ生成部
１０５    一時記憶メモリ
１０６    撮影情報データ処理部
１０７    シーン判別指標データ処理部
１０８    鑑賞画像参照データ生成部
１０９    一時記憶メモリ
１１０    設定入力部
１１１    記憶デバイス
１１２    出力デバイス
１１３    表示デバイス
１１４    撮像装置特性補正処理部
１１５    最適化処理部
１１６    制御部
１１７    階調変換データ処理部
１２１    シーン判別部
１２２    階調調整方法決定部
１２３    階調調整パラメータ算出部
１２４    階調調整量算出部
１３１    画像処理装置
１３２    画像処理装置
２０１    画像記録装置
２０２    本体
２０３    マガジン装填部
２０４    露光処理部
２０５    プリント作成部
２０６    トレー
２０７    制御部
２０８    ＣＲＴ
２０９    フィルムスキャナ部
２１０    反射原稿入力装置
２１１    操作部
２１２    情報入力手段
２１４    画像読込部
２１５    画像書込部
２３０    画像転送手段
２３１    画像搬送部
２４０    通信手段（入力）
２４１    通信手段（出力）
２５１    外部プリンタ
２７０    画像処理部
７０１    フィルムスキャンデータ処理部
７０２    反射原稿スキャンデータ処理部
７０３    画像データ書式解読処理部
７０４    画像調整処理部
７０５    ＣＲＴ固有処理部
７０６    プリンタ固有処理部（１）
７０７    プリンタ固有処理部（２）
７０８    画像データ書式作成処理部
３０２    ヘッダ情報解析部
３０３ａ  装置特性補正処理部
３０３ｂ  処理条件テーブル
３０４    シーン参照画像データ生成部
３０６    撮影情報データ処理部
３０７    シーン判別指標データ処理部
３０８    鑑賞画像参照データ生成部
２７１    データ蓄積手段
ｄ１    撮像装置特性補正データ
ｄ２    シーン参照生データ
ｄ３    撮影情報データ
ｄ４    シーン参照画像データ
ｄ５    鑑賞画像参照データ
ｄ６    シーン判別指標データ
ｄ７    階調変換データ
【図１】
2006203566.tif 000009
【図２】
2006203566.tif 000010
【図３】
2006203566.tif 000011
【図４】
2006203566.tif 000012
【図５】
2006203566.tif 000013
【図６】
2006203566.tif 000014
【図７】
2006203566.tif 000015
【図８】
2006203566.tif 000016
【図９】
2006203566.tif 000017
【図１０】
2006203566.tif 000018
【図１１】
2006203566.tif 000019
【図１２】
2006203566.tif 000020
【図１３】
2006203566.tif 000021
【図１４】
2006203566.tif 000022
【図１５】
2006203566.tif 000023
【図１６】
2006203566.tif 000024
【図１７】
2006203566.tif 000025
【図１８】
2006203566.tif 000026
【図１９】
2006203566.tif 000027
【図２０】
2006203566.tif 000028
【図２１】
2006203566.tif 000029
【図２２】
2006203566.tif 000030
【図２３】
2006203566.tif 000031
【図２４】
2006203566.tif 000032