(57)【要約】【課題】撮像画像データを用いて鑑賞用に出力媒体上に形成される鑑賞画像から撮像装置毎の品質のばらつきを無くして安定性を高めて品質向上を図る画像処理方法と、当該画像処理方法を用いた画像処理装置、当該画像処理方法を用いて出力媒体上に鑑賞画像を形成する画像記録装置、前記画像処理方法をコンピュータに実行させるためのプログラムおよび前記プログラムを記録したコンピュータ読取り可能な記録媒体を実現することである。【解決手段】画像処理装置１１７は、露出制御処理／グレーバランス調整処理、γ補正処理および非線形補正処理等（ステップＳ５〜Ｓ８）により鑑賞画像参照データを作成する前に、撮像装置毎に階調特性や色再現特性の補正を行う（ステップＳ３、Ｓ４）。【選択図】　　　　　図８
2004096508.tif 000002
【特許請求の範囲】
【請求項１】
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像処理方法において、
前記撮像画像データが有する色空間を撮像装置の色特性が除去されたシーン参照色空間に変換し、該撮像装置の階調特性を示す機種階調特性情報を用いて該撮像画像データが有する階調を該撮像装置の階調特性が除去されたシーン参照階調に変換した後に、当該変換後の撮像画像データを鑑賞用に最適化して前記鑑賞画像参照データを生成することを特徴とする画像処理方法。
【請求項２】
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像処理方法において、
撮像装置の色特性を示す機種色特性情報を用いて撮像画像データが有する色空間を該撮像装置の色特性が除去されたシーン参照色空間に変換し、撮像装置の階調特性を示す機種階調特性情報を用いて該撮像画像データが有する階調を該撮像装置の階調特性が除去されたシーン参照階調に変換した後に、当該変換後の撮像画像データを鑑賞用に最適化して前記鑑賞画像参照データを生成することを特徴とする画像処理方法。
【請求項３】
前記機種色特性情報を撮像画像データから取得することを特徴とする請求項２に記載の画像処理方法。
【請求項４】
撮像装置毎の彩度差を除去することにより撮像画像データが有する色空間を前記シーン参照色空間に変換することを特徴とする請求項１〜３のうち何れか一項に記載の画像処理方法。
【請求項５】
撮像画像データが有する色空間を前記シーン参照色空間に変換する場合、該色空間を予め設定された標準化された色空間に変換することを特徴とする請求項１〜３のうち何れか一項に記載の画像処理方法。
【請求項６】
前記機種階調特性情報を撮像画像データから取得することを特徴とする請求項１〜５のうち何れか一項に記載の画像処理方法。
【請求項７】
前記シーン参照色空間およびシーン参照階調を有する撮像画像データから前記鑑賞画像参照データを生成する際、該撮像画像データに明るさを補正する露出制御処理と色の偏りを補正するグレーバランス調整処理とを施した後に階調を補正する階調補正処理を施すことによって該鑑賞画像参照データを生成することを特徴とする請求項１〜６のうち何れか一項に記載の画像処理方法。
【請求項８】
前記階調補正処理を行う際、撮像画像データの階調を非線形に補正することを特徴とする請求項７に記載の画像処理方法。
【請求項９】
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像処理装置において、
複数種類の撮像装置の階調特性を示す機種階調特性情報を記憶する記憶手段と、
指定された撮像装置に対応する機種階調特性情報を、前記記憶手段に記憶された複数機種の機種階調特性情報のなかから取得する取得手段と、
前記取得手段により取得された機種階調特性情報を用いて撮像画像データが有する階調を撮像装置の階調特性が除去されたシーン参照階調に変換し、撮像画像データの階調特性を補正する階調特性補正手段と、
撮像画像データが有する色空間を撮像装置の撮像装置の色特性が除去されたシーン参照色空間に変換し、撮像画像データの色特性を補正する色特性補正手段と、
前記階調特性補正手段により撮像画像データの階調特性を補正させ、前記色特性補正手段により該撮像画像データの色特性を補正させた後に、当該補正後の撮像画像データを鑑賞用に最適化して前記鑑賞画像参照データを生成するよう制御する制御手段と、
を備えたことを特徴とする画像処理装置。
【請求項１０】
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像処理装置において、
複数種類の撮像装置の階調特性を示す機種階調特性情報と、複数種類の撮像装置の色特性を示す機種色特性情報とを記憶する記憶手段と、
指定された撮像装置に対応する機種階調特性情報および機種色特性情報を、前記記憶手段に記憶された複数種類の機種階調特性情報および機種色特性情報のなかから各々取得する取得手段と、
前記取得手段により取得された機種階調特性情報を用いて撮像画像データが有する階調を撮像装置の階調特性が除去されたシーン参照階調に変換し、撮像画像データの階調特性を補正する階調特性補正手段と、
前記取得手段により取得された機種色特性情報を用いて撮像画像データが有する色空間を撮像装置の色特性が除去されたシーン参照色空間に変換し、撮像画像データの色特性を補正する色特性補正手段と、
前記階調特性補正手段により撮像画像データの階調特性を補正させ、前記色特性補正手段により該撮像画像データの色特性を補正させた後に、当該補正後の撮像画像データを鑑賞用に最適化して前記鑑賞画像参照データを生成するよう制御する制御手段と、
を備えたことを特徴とする画像処理装置。
【請求項１１】
前記取得手段は、前記機種色特性情報を撮像画像データから取得することを特徴とする請求項１０に記載の画像処理装置。
【請求項１２】
前記色特性補正手段は、撮像装置毎の彩度差を補正することにより撮像画像データが有する色空間を前記シーン参照色空間に変換することを特徴とする請求項９〜１１のうち何れか一項に記載の画像処理装置。
【請求項１３】
前記色特性補正手段は、撮像画像データが有する色空間を前記シーン参照色空間に変換する場合、該色空間を予め設定された標準化された色空間に変換することを特徴とする請求項９〜１１のうち何れか一項に記載の画像処理装置。
【請求項１４】
前記取得手段は、前記機種階調特性情報を撮像画像データから取得することを特徴とする請求項９〜１３のうち何れか一項に記載の画像処理装置。
【請求項１５】
前記制御手段は、前記シーン参照色空間およびシーン参照階調を有する撮像画像データから前記鑑賞画像参照データを生成する際、該撮像画像データに明るさを補正する露出制御処理と色の偏りを補正するグレーバランス調整処理とを施した後に階調を補正する階調補正処理を施すことによって該鑑賞画像参照データを生成することを特徴とする請求項９〜１４のうち何れか一項に記載の画像処理装置。
【請求項１６】
前記制御手段は、前記階調補正処理を行う際、撮像画像データの階調を非線形に補正することを特徴とする請求項１５に記載の画像処理装置。
【請求項１７】
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像記録装置において、
複数種類の撮像装置の階調特性を示す機種階調特性情報を記憶する記憶手段と、
指定された撮像装置に対応する機種階調特性情報を、前記記憶手段に記憶された複数機種の機種階調特性情報のなかから取得する取得手段と、
前記取得手段により取得された機種階調特性情報を用いて撮像画像データが有する階調を撮像装置の階調特性が除去されたシーン参照階調に変換し、撮像画像データの階調特性を補正する階調特性補正手段と、
撮像画像データが有する色空間を撮像装置の撮像装置の色特性が除去されたシーン参照色空間に変換し、撮像画像データの色特性を補正する色特性補正手段と、
前記階調特性補正手段により撮像画像データの階調特性を補正させ、前記色特性補正手段により該撮像画像データの色特性を補正させた後に、当該補正後の撮像画像データを鑑賞用に最適化して前記鑑賞画像参照データを生成するよう制御する制御手段と、
を備えたことを特徴とする画像記録装置。
【請求項１８】
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像記録装置において、
複数種類の撮像装置の階調特性を示す機種階調特性情報と、複数種類の撮像装置の色特性を示す機種色特性情報とを記憶する記憶手段と、
指定された撮像装置に対応する機種階調特性情報および機種色特性情報を、前記記憶手段に記憶された複数種類の機種階調特性情報および機種色特性情報のなかから各々取得する取得手段と、
前記取得手段により取得された機種階調特性情報を用いて撮像画像データが有する階調を撮像装置の階調特性が除去されたシーン参照階調に変換し、撮像画像データの階調特性を補正する階調特性補正手段と、
前記取得手段により取得された機種色特性情報を用いて撮像画像データが有する色空間を撮像装置の色特性が除去されたシーン参照色空間に変換し、撮像画像データの色特性を補正する色特性補正手段と、
前記階調特性補正手段により撮像画像データの階調特性を補正させ、前記色特性補正手段により該撮像画像データの色特性を補正させた後に、当該補正後の撮像画像データを鑑賞用に最適化して前記鑑賞画像参照データを生成するよう制御する制御手段と、
を備えたことを特徴とする画像記録装置。
【請求項１９】
前記取得手段は、前記機種色特性情報を撮像画像データから取得することを特徴とする請求項１８に記載の画像記録装置。
【請求項２０】
前記色特性補正手段は、撮像装置毎の彩度差を補正することにより撮像画像データが有する色空間を前記シーン参照色空間に変換することを特徴とする請求項１７〜１９のうち何れか一項に記載の画像記録装置。
【請求項２１】
前記色特性補正手段は、撮像画像データが有する色空間を前記シーン参照色空間に変換する場合、該色空間を予め設定された標準化された色空間に変換することを特徴とする請求項１７〜１９のうち何れか一項に記載の画像記録装置。
【請求項２２】
前記取得手段は、前記機種階調特性情報を撮像画像データから取得することを特徴とする請求項１７〜２１のうち何れか一項に記載の画像記録装置。
【請求項２３】
前記制御手段は、前記シーン参照色空間およびシーン参照階調を有する撮像画像データから前記鑑賞画像参照データを生成する際、該撮像画像データに明るさを補正する露出制御処理と色の偏りを補正するグレーバランス調整処理とを施した後に階調を補正する階調補正処理を施すことによって該鑑賞画像参照データを生成することを特徴とする請求項１７〜２２のうち何れか一項に記載の画像記録装置。
【請求項２４】
前記制御手段は、前記階調補正処理を行う際、撮像画像データの階調を非線形に補正することを特徴とする請求項２３に記載の画像記録装置。
【請求項２５】
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像処理を行うコンピュータに、
指定された撮像装置に対応する機種階調特性情報を予め記憶された複数種類の機種階調特性情報のなかから取得する取得機能と、
前記取得機能により取得された機種階調特性情報を用いて、撮像画像データが有する階調を撮像装置の階調特性が除去されたシーン参照階調に変換し、撮像画像データの階調特性を補正する階調特性補正機能と、
撮像画像データが有する色空間を撮像装置の撮像装置の色特性が除去されたシーン参照色空間に変換し、撮像画像データの色特性を補正する色特性補正機能と、
前記階調特性補正手段により撮像画像データの階調特性を補正させ、前記色特性補正手段により該撮像画像データの色特性を補正させた後に、当該補正後の撮像画像データを鑑賞用に最適化して前記鑑賞画像参照データを生成するよう制御する制御機能と、
を実現させるためのプログラム。
【請求項２６】
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像処理を行うコンピュータに、
指定された撮像装置に対応する機種階調特性情報および機種色特性情報を予め記憶された複数種類の機種階調特性情報および機種色特性情報のなかから取得する取得機能と、
前記取得機能により取得された機種階調特性情報を用いて撮像画像データが有する階調を撮像装置の階調特性が除去されたシーン参照階調に変換し、撮像画像データの階調特性を補正する階調特性補正機能と、
前記取得機能により取得された機種色特性情報を用いて撮像画像データが有する色空間を撮像装置の色特性が除去されたシーン参照色空間に変換し、撮像画像データの色特性を補正する色特性補正機能と、
鑑賞画像参照データの生成前に、前記階調特性補正機能により撮像画像データの階調特性を補正させ、前記色特性補正機能により該撮像画像データの色特性を補正させるよう制御する制御機能と、
を実現させるためのプログラム。
【請求項２７】
前記取得機能は、前記機種色特性情報を撮像画像データから取得することを特徴とする請求項２６に記載のプログラム。
【請求項２８】
前記色特性補正機能は、撮像装置毎の彩度差を補正することにより撮像画像データが有する色空間を前記シーン参照色空間に変換することを特徴とする請求項２５〜２７のうち何れか一項に記載のプログラム。
【請求項２９】
前記色特性補正機能は、撮像画像データが有する色空間を前記シーン参照色空間に変換する場合、該色空間を予め設定された標準化された色空間に変換することを特徴とする請求項２５〜２７のうち何れか一項に記載のプログラム。
【請求項３０】
前記取得機能は、前記機種階調特性情報を撮像画像データから取得することを特徴とする請求項２５〜２９のうち何れか一項に記載のプログラム。
【請求項３１】
前記制御機能は、前記シーン参照色空間およびシーン参照階調を有する撮像画像データから前記鑑賞画像参照データを生成する際、該撮像画像データに明るさを補正する露出制御処理と色の偏りを補正するグレーバランス調整処理とを施した後に階調を補正する階調補正処理を施すことによって該鑑賞画像参照データを生成することを特徴とする請求項２５〜３０のうち何れか一項に記載のプログラム。
【請求項３２】
前記制御機能は、前記階調補正処理を行う際、撮像画像データの階調を非線形に補正することを特徴とする請求項３１に記載のプログラム。
【請求項３３】
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像処理を行うコンピュータに、
指定された撮像装置に対応する機種階調特性情報を予め記憶された複数種類の機種階調特性情報のなかから取得する取得機能と、
前記取得機能により取得された機種階調特性情報を用いて撮像画像データが有する階調を撮像装置の階調特性が除去されたシーン参照階調に変換し、撮像画像データの階調特性を補正する階調特性補正機能と、
撮像画像データが有する色空間を撮像装置の撮像装置の色特性が除去されたシーン参照色空間に変換し、撮像画像データの色特性を補正する色特性補正機能と、
前記階調特性補正手段により撮像画像データの階調特性を補正させ、前記色特性補正手段により該撮像画像データの色特性を補正させた後に、当該補正後の撮像画像データを鑑賞用に最適化して前記鑑賞画像参照データを生成するよう制御する制御機能と、
を実現させるためのプログラムコードを記録したコンピュータ読み取り可能な記録媒体。
【請求項３４】
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像処理を行うコンピュータに、
指定された撮像装置に対応する機種階調特性情報および機種色特性情報を予め記憶された複数種類の機種階調特性情報および機種色特性情報のなかから取得する取得機能と、
前記取得機能により取得された機種階調特性情報を用いて撮像画像データが有する階調を撮像装置の階調特性が除去されたシーン参照階調に変換し、撮像画像データの階調特性を補正する階調特性補正機能と、
前記取得機能により取得された機種色特性情報を用いて撮像画像データが有する色空間を撮像装置の色特性が除去されたシーン参照色空間に変換し、撮像画像データの色特性を補正する色特性補正機能と、
鑑賞画像参照データの生成前に、前記階調特性補正機能により撮像画像データの階調特性を補正させ、前記色特性補正機能により該撮像画像データの色特性を補正させるよう制御する制御機能と、
を実現させるためのプログラムコードを記録したコンピュータ読み取り可能な記録媒体。
【請求項３５】
前記取得機能は、前記機種色特性情報を撮像画像データから取得することを特徴とする請求項３４に記載の記録媒体。
【請求項３６】
前記色特性補正機能は、撮像装置毎の彩度差を補正することにより撮像画像データが有する色空間を前記シーン参照色空間に変換することを特徴とする請求項３３〜３５のうち何れか一項に記載の記録媒体。
【請求項３７】
前記色特性補正機能は、撮像画像データが有する色空間を前記シーン参照色空間に変換する場合、該色空間を予め設定された標準化された色空間に変換することを特徴とする請求項３３〜３５のうち何れか一項に記載の記録媒体。
【請求項３８】
前記取得機能は、前記機種階調特性情報を撮像画像データから取得することを特徴とする請求項３３〜３７のうち何れか一項に記載の記録媒体。
【請求項３９】
前記制御機能は、前記シーン参照色空間およびシーン参照階調を有する撮像画像データから前記鑑賞画像参照データを生成する際、該撮像画像データに明るさを補正する露出制御処理と色の偏りを補正するグレーバランス調整処理とを施した後に階調を補正する階調補正処理を施すことによって該鑑賞画像参照データを生成することを特徴とする請求項３３〜３８のうち何れか一項に記載の記録媒体。
【請求項４０】
前記制御機能は、前記階調補正処理を行う際、撮像画像データの階調を非線形に補正することを特徴とする請求項３９に記載の記録媒体。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、デジタルカメラ等の記撮像装置から出力されるデジタル画像データに対し出力媒体上での鑑賞画像形成用に最適化処理を施す画像処理方法、この画像処理方法を用いた画像処理装置、この画像処理方法を用いて出力媒体上に鑑賞画像を形成する画像記録装置、この画像処理方法をコンピュータに実行させるためのプログラムおよびこのプログラムが記録されたコンピュータで読取り可能な記録媒体とに関する。
【０００２】
【従来の技術】
近時、デジタルカメラ等の撮像装置で撮影されたデジタル画像データは様々な方法で表示・プリントされるようになってきている。このようなデジタル画像データは、例えば、ＣＲＴ（Ｃａｔｈｏｄｅ　Ｒａｙ　Ｔｕｂｅ）、液晶、プラズマ等のディスプレイモニタや携帯電話の小型液晶モニタの表示デバイスに表示されたり、デジタルプリンタ、インクジェットプリンタ、サーマルプリンタ等の出力デバイスからハードコピー画像としてプリントされる。
【０００３】
デジタル画像データを鑑賞用途で表示・プリントする際には、鑑賞時に使用するディスプレイモニタやハードコピー画像において所望の画質が得られるように階調調整、輝度調整、カラーバランス調整および鮮鋭性強調等の画像処理が施される。
【０００４】
これまでに、上記種々の表示・プリント方法に対応できるような画像処理方法の開発が進められている。例えば、デジタルＲＧＢ信号が表現する色空間を撮像装置特性に依存しない色空間に標準化する試みがあり、現在では多くのデジタル画像データがｓＲＧＢを標準化された色空間として採用している（「Ｍｕｌｔｉｍｅｄｉａ　Ｓｙｓｔｅｍｓ　ａｎｄ　Ｅｑｕｉｐｍｅｎｔ−Ｃｏｌｏｕｒ　Ｍｅａｓｕｒｍｅｎｔ　ａｎｄ　Ｍａｎａｇｅｍｅｎｔ−Ｐａｒｔ２−１：Ｃｏｌｏｕｒ　Ｍａｎａｇｅｍｅｎｔ−Ｄｅｆａｕｌｔ　ＲＧＢ　Ｃｏｌｏｕｒ　Ｓｐａｃｅ−ｓＲＧＢ」　ＩＥＣ”６１９６６−２−１を参照）。このｓＲＧＢの色空間は標準的なＣＲＴディスプレイモニタの色再現領域に対応して設定されている。
【０００５】
また、一般的なデジタルカメラは、ＣＣＤ（Ｃｈａｒｇｅ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ；電荷結合素子）と、電荷転送機構と、市松模様のカラーフィルタとを組み合わせて感色性を付与した光電変換機能を有するＣＣＤ型撮像素子（以下、単にＣＣＤとも称す）を備える。
【０００６】
デジタルカメラから出力されるデジタル画像データは、ＣＣＤを介して変換された電気的な元信号に対し、ＣＣＤの光電変換機能の補正、例えば、階調補正、分光感度のクロストーク補正、暗電流ノイズ抑制、鮮鋭化、ホワイトバランス調整、彩度調整等の画像処理が施されたものであり、画像編集ソフトを用いて読み取り・表示が可能なように規格化されたデータ形式へのファイル変換・圧縮処理等を経たものである。
【０００７】
このようなデータ形式としては、例えばＥｘｉｆ（ＥＸｃｈａｎｇｅａｂｌｅ　ｉｍａｇｅ　ｆｉｌｅ　ｆｏｒｍａｔ）ファイルの非圧縮ファイルとして採用されているＢａｓｅｌｉｎｅ　Ｔｉｆｆ　Ｒｅｖ．６．０ＲＧＢ　Ｆｕｌｌ　Ｃｏｌｏｒ　ＩｍａｇｅやＪＰＥＧ（Ｊｏｉｎｔ　Ｐｈｏｔｏｇｒａｐｈｉｃ　Ｅｘｐｅｒｔｓ　Ｇｒｏｕｐ）形式に準拠した圧縮データファイル形式が知られている。
【０００８】
ＥｘｉｆファイルはｓＲＧＢに準拠したものである。ＣＣＤの光電変換機能の補正はｓＲＧＢに準拠するディスプレイモニタ上で最も好適な画質となるよう設定されている。
【０００９】
一般に、どのようなデジタルカメラであっても、ｓＲＧＢ信号に準拠したディスプレイモニタの標準色空間（以下、モニタプロファイルとも称す）で表示することを指示するタグ情報と、画素数、画素配列および１画素当たりのビット数などの機種依存情報を示す付加情報とをデジタル画像データのファイルヘッダにメタデータとして書き込む機能を備えていれば、デジタル画像データをディスプレイモニタに表示する画像編集ソフトによってタグ情報を解析し、モニタプロファイルのｓＲＧＢへの変更を操作者に促したり自動的に変更処理を施したりできるので、異なるディスプレイ間の差異を低減して最適な画像状態で鑑賞可能となる。
【００１０】
また付加情報としては、機種依存情報以外にも、例えばカメラ名称やコード番号等のカメラ種別（機種）に直接関係する情報や、露出時間、シャッタースピード、絞り値（Ｆナンバー）、ＩＳＯ感度、輝度値、被写体距離範囲、光源、ストロボ発光の有無、被写体領域、ホワイトバランス、ズーム倍率、被写体構成、撮影シーンタイプ、ストロボ光源の反射光の量、撮影彩度などの撮影条件設定情報や、被写体の種類に関する情報等を示すタグ（コード）が用いられている。画像編集ソフトや出力デバイスは、これらの付加情報を読み取り、ハードコピー画像の画質をより好適なものとする機能を備えている。
【００１１】
【発明が解決しようとする課題】
ところで、ＣＲＴディスプレイモニター等の表示デバイスで表示される画像や、各種プリントデバイスによりプリントされるハードコピー画像は、用いられている蛍光体または色材の構成によって色再現領域が異なる。例えばｓＲＧＢ標準色空間に対応するＣＲＴディスプレイモニターの色再現領域は明るい緑や青の領域が広く、当該色再現領域には銀塩写真プリントやインクジェットプリンタ印刷等によるハードコピーでは再現できない領域がある。逆にインクジェット印刷のシアン領域や銀塩写真の黄色領域にはｓＲＧＢ標準色空間に対応するＣＲＴディスプレイモニターでは再現できない領域が存在する（例えばコロナ社「ファインイメージングとディジタル写真」（社）日本写真学会出版委員会編４４４頁参照）。
【００１２】
また加法混色のディスプレイと減法混色のプリンタとでは、階調再現として重視される領域に差異があり、プリントによってシャドー（影）の表現に違いが生じる。この為、ｓＲＧＢ標準色空間で記録された画像をプリントする場合は、両者の色域・輝度域の相違に基づいて再度マッピングする処理が行われている。
【００１３】
しかし、デジタルカメラがｓＲＧＢに準拠していたとしても、各メーカー毎あるいは同じメーカーであってもデジタルカメラの機種毎に階調特性や色再現空間の設計が異なっており、このことが各種プリントデバイスによりプリントされるハードコピー画像を高品質かつ安定に作成することの妨げとなっていた。
【００１４】
特開２００２−０１６８０７号公報および特開２００２−０１６８２１号公報には、デジタルカメラの機種毎に異なる機種階調特性を吸収するための機種階調特性曲線を他の階調補正曲線から独立してデジタルカメラの機種毎に作成し、この機種階調特性曲線を用いた変換によりデジタルカメラの機種固有の階調特性による影響を除去して高画質の処理済画像を得る方法が記載されている。
【００１５】
この方法は機種階調特性プロファイルを用いてデジタルカメラの機種階調特性を吸収する前処理を行った後に、プリンタのＡＥ（オート露出制御）およびＡＷＢ（オートホワイトバランス調整）を行う事を特徴としている。
【００１６】
しかし、本発明者等が上記方法による画像処理を多数の画像に対して試してみると、赤や緑の服を着た人物のクローズアップ写真や、芝生、森等を背景にした写真あるいは花のクローズアップ写真等で、ホワイトバランス調整のエラーが起きやすいという問題があることがわかった。
【００１７】
上記事情に鑑み、本発明の課題は、撮像画像データを用いて出力媒体上に形成される鑑賞画像から撮像装置毎に生じる品質のばらつきを無くして安定性を高めることにより品質向上を図る画像処理方法、当該画像処理方法を用いた画像処理装置、当該画像処理方法を用いて出力媒体上に鑑賞画像を形成する画像記録装置、当該画像処理方法をコンピュータに実行させるためのプログラムおよび当該プログラムが記録されてコンピュータで読取りが可能な記録媒体とを提供することである。
【００１８】
【課題を解決するための手段】
上記課題を解決するため、請求項１に記載の発明は、
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像処理方法において、
前記撮像画像データが有する色空間を撮像装置の色特性が除去されたシーン参照色空間に変換し、該撮像装置の階調特性を示す機種階調特性情報を用いて該撮像画像データが有する階調を該撮像装置の階調特性が除去されたシーン参照階調に変換した後に、当該変換後の撮像画像データを鑑賞用に最適化して前記鑑賞画像参照データを生成することを特徴とする。
【００１９】
また上記課題を解決するため、請求項２に記載の発明は、
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像処理方法において、
撮像装置の色特性を示す機種色特性情報を用いて撮像画像データが有する色空間を該撮像装置の色特性が除去されたシーン参照色空間に変換し、撮像装置の階調特性を示す機種階調特性情報を用いて該撮像画像データが有する階調を該撮像装置の階調特性が除去されたシーン参照階調に変換した後に、当該変換後の撮像画像データを鑑賞用に最適化して前記鑑賞画像参照データを生成することを特徴とする。
【００２０】
請求項３に記載の発明のように、請求項２に記載の発明において、
前記機種色特性情報を撮像画像データから取得することを特徴とする。
【００２１】
請求項４に記載の発明のように、請求項１〜３のうち何れか一項に記載の発明において、
撮像装置毎の彩度差を除去することにより撮像画像データが有する色空間を前記シーン参照色空間に変換することを特徴とする。
【００２２】
請求項５に記載の発明のように、請求項１〜３のうち何れか一項に記載の発明において、
撮像画像データが有する色空間を前記シーン参照色空間に変換する場合、該色空間を予め設定された標準化された色空間に変換することを特徴とする。
【００２３】
請求項６に記載の発明のように、請求項１〜５のうち何れか一項に記載の発明において、
前記機種階調特性情報を撮像画像データから取得することを特徴とする。
【００２４】
請求項７に記載の発明のように、請求項１〜６のうち何れか一項に記載の発明において、
前記シーン参照色空間およびシーン参照階調を有する撮像画像データから前記鑑賞画像参照データを生成する際、該撮像画像データに明るさを補正する露出制御処理と色の偏りを補正するグレーバランス調整処理とを施した後に階調を補正する階調補正処理を施すことによって該鑑賞画像参照データを生成することを特徴とする。
【００２５】
請求項８に記載の発明のように、請求項７に記載の発明において、
前記階調補正処理を行う際、撮像画像データの階調を非線形に補正することを特徴とする。
【００２６】
また上記課題を解決するため、請求項９に記載の発明は、
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像処理装置において、
複数種類の撮像装置の階調特性を示す機種階調特性情報を記憶する記憶手段と、
指定された撮像装置に対応する機種階調特性情報を、前記記憶手段に記憶された複数機種の機種階調特性情報のなかから取得する取得手段と、
前記取得手段により取得された機種階調特性情報を用いて撮像画像データが有する階調を撮像装置の階調特性が除去されたシーン参照階調に変換し、撮像画像データの階調特性を補正する階調特性補正手段と、
撮像画像データが有する色空間を撮像装置の撮像装置の色特性が除去されたシーン参照色空間に変換し、撮像画像データの色特性を補正する色特性補正手段と、
前記階調特性補正手段により撮像画像データの階調特性を補正させ、前記色特性補正手段により該撮像画像データの色特性を補正させた後に、当該補正後の撮像画像データを鑑賞用に最適化して前記鑑賞画像参照データを生成するよう制御する制御手段と、
を備えたことを特徴とする。
【００２７】
また上記課題を解決するため、請求項１０に記載の発明は、
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像処理装置において、
複数種類の撮像装置の階調特性を示す機種階調特性情報と、複数種類の撮像装置の色特性を示す機種色特性情報とを記憶する記憶手段と、
指定された撮像装置に対応する機種階調特性情報および機種色特性情報を、前記記憶手段に記憶された複数種類の機種階調特性情報および機種色特性情報のなかから各々取得する取得手段と、
前記取得手段により取得された機種階調特性情報を用いて撮像画像データが有する階調を撮像装置の階調特性が除去されたシーン参照階調に変換し、撮像画像データの階調特性を補正する階調特性補正手段と、
前記取得手段により取得された機種色特性情報を用いて撮像画像データが有する色空間を撮像装置の色特性が除去されたシーン参照色空間に変換し、撮像画像データの色特性を補正する色特性補正手段と、
前記階調特性補正手段により撮像画像データの階調特性を補正させ、前記色特性補正手段により該撮像画像データの色特性を補正させた後に、当該補正後の撮像画像データを鑑賞用に最適化して前記鑑賞画像参照データを生成するよう制御する制御手段と、
を備えたことを特徴とする。
【００２８】
請求項１１に記載の発明のように、請求項１０に記載の発明において、
前記取得手段は、前記機種色特性情報を撮像画像データから取得することを特徴とする。
【００２９】
請求項１２に記載の発明のように、請求項９〜１１のうち何れか一項に記載の発明において、
前記色特性補正手段は、撮像装置毎の彩度差を補正することにより撮像画像データが有する色空間を前記シーン参照色空間に変換することを特徴とする。
【００３０】
請求項１３に記載の発明のように、請求項９〜１１のうち何れか一項に記載の発明において、
前記色特性補正手段は、撮像画像データが有する色空間を前記シーン参照色空間に変換する場合、該色空間を予め設定された標準化された色空間に変換することを特徴とする。
【００３１】
請求項１４に記載の発明のように、請求項９〜１３のうち何れか一項に記載の発明において、
前記取得手段は、前記機種階調特性情報を撮像画像データから取得することを特徴とする。
【００３２】
請求項１５に記載の発明のように、請求項９〜１４のうち何れか一項に記載の発明において、
前記制御手段は、前記シーン参照色空間およびシーン参照階調を有する撮像画像データから前記鑑賞画像参照データを生成する際、該撮像画像データに明るさを補正する露出制御処理と色の偏りを補正するグレーバランス調整処理とを施した後に階調を補正する階調補正処理を施すことによって該鑑賞画像参照データを生成することを特徴とする。
【００３３】
請求項１６に記載の発明のように、請求項１５に記載の発明において、
前記制御手段は、前記階調補正処理を行う際、撮像画像データの階調を非線形に補正することを特徴とする。
【００３４】
上記課題を解決するため、請求項１７に記載の発明は、
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像記録装置において、
複数種類の撮像装置の階調特性を示す機種階調特性情報を記憶する記憶手段と、
指定された撮像装置に対応する機種階調特性情報を、前記記憶手段に記憶された複数機種の機種階調特性情報のなかから取得する取得手段と、
前記取得手段により取得された機種階調特性情報を用いて撮像画像データが有する階調を撮像装置の階調特性が除去されたシーン参照階調に変換し、撮像画像データの階調特性を補正する階調特性補正手段と、
撮像画像データが有する色空間を撮像装置の撮像装置の色特性が除去されたシーン参照色空間に変換し、撮像画像データの色特性を補正する色特性補正手段と、
前記階調特性補正手段により撮像画像データの階調特性を補正させ、前記色特性補正手段により該撮像画像データの色特性を補正させた後に、当該補正後の撮像画像データを鑑賞用に最適化して前記鑑賞画像参照データを生成するよう制御する制御手段と、
を備えたことを特徴とする。
【００３５】
また上記課題を解決するため、請求項１８に記載の発明は、
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像記録装置において、
複数種類の撮像装置の階調特性を示す機種階調特性情報と、複数種類の撮像装置の色特性を示す機種色特性情報とを記憶する記憶手段と、
指定された撮像装置に対応する機種階調特性情報および機種色特性情報を、前記記憶手段に記憶された複数種類の機種階調特性情報および機種色特性情報のなかから各々取得する取得手段と、
前記取得手段により取得された機種階調特性情報を用いて撮像画像データが有する階調を撮像装置の階調特性が除去されたシーン参照階調に変換し、撮像画像データの階調特性を補正する階調特性補正手段と、
前記取得手段により取得された機種色特性情報を用いて撮像画像データが有する色空間を撮像装置の色特性が除去されたシーン参照色空間に変換し、撮像画像データの色特性を補正する色特性補正手段と、
前記階調特性補正手段により撮像画像データの階調特性を補正させ、前記色特性補正手段により該撮像画像データの色特性を補正させた後に、当該補正後の撮像画像データを鑑賞用に最適化して前記鑑賞画像参照データを生成するよう制御する制御手段と、
を備えたことを特徴とする。
【００３６】
請求項１９に記載の発明のように、請求項１８に記載の発明において、
前記取得手段は、前記機種色特性情報を撮像画像データから取得することを特徴とする。
【００３７】
請求項２０に記載の発明のように、請求項１７〜１９のうち何れか一項に記載の発明において、
前記色特性補正手段は、撮像装置毎の彩度差を補正することにより撮像画像データが有する色空間を前記シーン参照色空間に変換することを特徴とする。
【００３８】
請求項２１に記載の発明のように、請求項１７〜１９のうち何れか一項に記載の発明において、
前記色特性補正手段は、撮像画像データが有する色空間を前記シーン参照色空間に変換する場合、該色空間を予め設定された標準化された色空間に変換することを特徴とする。
【００３９】
請求項２２に記載の発明のように、請求項１７〜２１のうち何れか一項に記載の発明において、
前記取得手段は、前記機種階調特性情報を撮像画像データから取得することを特徴とする。
【００４０】
請求項２３に記載の発明のように、請求項１７〜２２のうち何れか一項に記載の発明において、
前記制御手段は、前記シーン参照色空間およびシーン参照階調を有する撮像画像データから前記鑑賞画像参照データを生成する際、該撮像画像データに明るさを補正する露出制御処理と色の偏りを補正するグレーバランス調整処理とを施した後に階調を補正する階調補正処理を施すことによって該鑑賞画像参照データを生成することを特徴とする。
【００４１】
請求項２４に記載の発明のように、請求項２３に記載の発明において、
前記制御手段は、前記階調補正処理を行う際、撮像画像データの階調を非線形に補正することを特徴とする。
【００４２】
上記課題を解決するため、請求項２５に記載の発明は、
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像処理を行うコンピュータに、
指定された撮像装置に対応する機種階調特性情報を予め記憶された複数種類の機種階調特性情報のなかから取得する取得機能と、
前記取得機能により取得された機種階調特性情報を用いて、撮像画像データが有する階調を撮像装置の階調特性が除去されたシーン参照階調に変換し、撮像画像データの階調特性を補正する階調特性補正機能と、
撮像画像データが有する色空間を撮像装置の撮像装置の色特性が除去されたシーン参照色空間に変換し、撮像画像データの色特性を補正する色特性補正機能と、
前記階調特性補正手段により撮像画像データの階調特性を補正させ、前記色特性補正手段により該撮像画像データの色特性を補正させた後に、当該補正後の撮像画像データを鑑賞用に最適化して前記鑑賞画像参照データを生成するよう制御する制御機能と、
を実現させる。
【００４３】
上記課題を解決するため、請求項２６に記載の発明は、
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像処理を行うコンピュータに、
指定された撮像装置に対応する機種階調特性情報および機種色特性情報を予め記憶された複数種類の機種階調特性情報および機種色特性情報のなかから取得する取得機能と、
前記取得機能により取得された機種階調特性情報を用いて撮像画像データが有する階調を撮像装置の階調特性が除去されたシーン参照階調に変換し、撮像画像データの階調特性を補正する階調特性補正機能と、
前記取得機能により取得された機種色特性情報を用いて撮像画像データが有する色空間を撮像装置の色特性が除去されたシーン参照色空間に変換し、撮像画像データの色特性を補正する色特性補正機能と、
鑑賞画像参照データの生成前に、前記階調特性補正機能により撮像画像データの階調特性を補正させ、前記色特性補正機能により該撮像画像データの色特性を補正させるよう制御する制御機能と、
を実現させる。
【００４４】
請求項２７に記載の発明のように、請求項２６に記載の発明において、
前記取得機能は、前記機種色特性情報を撮像画像データから取得することを特徴とする。
【００４５】
請求項２８に記載の発明のように、請求項２５〜２７のうち何れか一項に記載の発明において、
前記色特性補正機能は、撮像装置毎の彩度差を補正することにより撮像画像データが有する色空間を前記シーン参照色空間に変換することを特徴とする。
【００４６】
請求項２９に記載の発明のように、請求項２５〜２７のうち何れか一項に記載の発明において、
前記色特性補正機能は、撮像画像データが有する色空間を前記シーン参照色空間に変換する場合、該色空間を予め設定された標準化された色空間に変換することを特徴とする。
【００４７】
請求項３０に記載の発明のように、請求項２５〜２９のうち何れか一項に記載の発明において、
前記取得機能は、前記機種階調特性情報を撮像画像データから取得することを特徴とする。
【００４８】
請求項３１に記載の発明のように、請求項２５〜３０のうち何れか一項に記載の発明において、
前記制御機能は、前記シーン参照色空間およびシーン参照階調を有する撮像画像データから前記鑑賞画像参照データを生成する際、該撮像画像データに明るさを補正する露出制御処理と色の偏りを補正するグレーバランス調整処理とを施した後に階調を補正する階調補正処理を施すことによって該鑑賞画像参照データを生成することを特徴とする。
【００４９】
請求項３２に記載の発明のように、請求項３１に記載の発明において、
前記制御機能は、前記階調補正処理を行う際、撮像画像データの階調を非線形に補正することを特徴とする。
【００５０】
上記課題を解決するため、請求項３３に記載の発明は、
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像処理を行うコンピュータに、
指定された撮像装置に対応する機種階調特性情報を予め記憶された複数種類の機種階調特性情報のなかから取得する取得機能と、
前記取得機能により取得された機種階調特性情報を用いて撮像画像データが有する階調を撮像装置の階調特性が除去されたシーン参照階調に変換し、撮像画像データの階調特性を補正する階調特性補正機能と、
撮像画像データが有する色空間を撮像装置の撮像装置の色特性が除去されたシーン参照色空間に変換し、撮像画像データの色特性を補正する色特性補正機能と、
前記階調特性補正手段により撮像画像データの階調特性を補正させ、前記色特性補正手段により該撮像画像データの色特性を補正させた後に、当該補正後の撮像画像データを鑑賞用に最適化して前記鑑賞画像参照データを生成するよう制御する制御機能と、
を実現させる。
【００５１】
上記課題を解決するため、請求項３４に記載の発明は、
撮像装置から出力された撮像画像データを鑑賞用に最適化して鑑賞画像参照データを生成する画像処理を行うコンピュータに、
指定された撮像装置に対応する機種階調特性情報および機種色特性情報を予め記憶された複数種類の機種階調特性情報および機種色特性情報のなかから取得する取得機能と、
前記取得機能により取得された機種階調特性情報を用いて撮像画像データが有する階調を撮像装置の階調特性が除去されたシーン参照階調に変換し、撮像画像データの階調特性を補正する階調特性補正機能と、
前記取得機能により取得された機種色特性情報を用いて撮像画像データが有する色空間を撮像装置の色特性が除去されたシーン参照色空間に変換し、撮像画像データの色特性を補正する色特性補正機能と、
鑑賞画像参照データの生成前に、前記階調特性補正機能により撮像画像データの階調特性を補正させ、前記色特性補正機能により該撮像画像データの色特性を補正させるよう制御する制御機能と、
を実現させる。
【００５２】
請求項３５に記載の発明のように、請求項３４に記載の発明において、
前記取得機能は、前記機種色特性情報を撮像画像データから取得することを特徴とする。
【００５３】
請求項３６に記載の発明のように、請求項３３〜３５のうち何れか一項に記載の発明において、
前記色特性補正機能は、撮像装置毎の彩度差を補正することにより撮像画像データが有する色空間を前記シーン参照色空間に変換することを特徴とする。
【００５４】
請求項３７に記載の発明のように、請求項３３〜３５のうち何れか一項に記載の発明において、
前記色特性補正機能は、撮像画像データが有する色空間を前記シーン参照色空間に変換する場合、該色空間を予め設定された標準化された色空間に変換することを特徴とする。
【００５５】
請求項３８に記載の発明のように、請求項３３〜３７のうち何れか一項に記載の発明において、
前記取得機能は、前記機種階調特性情報を撮像画像データから取得することを特徴とする。
【００５６】
請求項３９に記載の発明のように、請求項３３〜３８のうち何れか一項に記載の発明において、
前記制御機能は、前記シーン参照色空間およびシーン参照階調を有する撮像画像データから前記鑑賞画像参照データを生成する際、該撮像画像データに明るさを補正する露出制御処理と色の偏りを補正するグレーバランス調整処理とを施した後に階調を補正する階調補正処理を施すことによって該鑑賞画像参照データを生成することを特徴とする。
【００５７】
請求項４０に記載の発明のように、請求項３９に記載の発明において、
前記制御機能は、前記階調補正処理を行う際、撮像画像データの階調を非線形に補正することを特徴とする。
【００５８】
従って、多種類の撮像装置に対して高品質プリント用画像データを安定して作成する画像処理が実現できる。
本発明の画像形成方法の好ましい態様として、撮像装置の変換特性を補正する第１のステップ、露出制御処理とグレーバランス調整処理とを施す第２のステップ、および階調補正処理を施す第３のステップの少なくとも３つのステップより構成し、第１ステップから第３ステップへと、順番に処理を進行するようにしたことで、精度向上と効率化が図られる。
【００５９】
ここで、本願の各請求項において用いられる用語等を補足的に説明する。
「生成」は、本発明の撮像装置、画像処理装置および画像記録装置内において作用するプログラムが、電子ファイルを新たに作り出すことである。以下では「作成」を「生成」の同義語として用いている。
【００６０】
「撮像装置」は、光電変換機能を有する撮像素子を備えた装置であって、所謂デジタルカメラやスキャナが含まれる。この撮像素子の一例としては、上記ＣＣＤ型撮像素子や、ＣＭＯＳ型撮像素子が挙げられる。これらの撮像素子の出力電流はＡ／Ｄ変換器によりデジタル化される。この段階での各色チャンネルの内容は、撮像素子固有の分光感度に基づいた信号強度となっている。
【００６１】
「撮像画像データ」は、撮像装置により記録された被写体に忠実な情報を示す出力信号がＡ／Ｄ変換器によりデジタル化されたデータに固定パターンノイズ・暗電流ノイズ等のノイズ補正を行った後、階調変換、鮮鋭性強調、彩度強調等といった画像鑑賞時の効果を向上させる為の画像処理や、撮像素子固有の分光感度に基づく各色チャンネルの信号強度をＲＩＭＭ　ＲＧＢやＥＲＩＭＭ　ＲＧＢ（Ｊｏｕｒｎａｌ　ｏｆ　Ｉｍａｇｉｎｇ　Ｓｃｉｅｎｃｅ　ａｎｄ　Ｔｅｃｈｎｏｌｏｇｙ　４５巻　４１８〜４２６頁（２００１年）参照）などの標準色空間にマッピングする処理等が施されたデジタル画像データである。
【００６２】
「鑑賞画像参照データ」は、本発明の画像処理方法に基づいて生成された画像データであり、ＣＲＴ、液晶ディスプレイ、プラズマディスプレイ等の表示デバイスに表示する際に用いられるものや、また銀塩印画紙、インクジェットペーパー、サーマルプリンタ用紙等の出力媒体上のハードコピー画像生成に用いられるものを意味する。鑑賞画像参照データは、上記表示デバイスや、上記出力媒体上で鑑賞用に最適な画像を得るための最適化処理が施されている。
【００６３】
「シーン参照階調およびシーン参照色空間を有する撮像画像データ」（以下、シーン参照画像データという）は、撮像素子自体の分光感度に基づく各色チャンネルの信号強度をＲＩＭＭ　ＲＧＢやＥＲＩＭＭ　ＲＧＢなどの標準色空間にマッピング済みであり、階調変換、鮮鋭性強調、彩度強調のような画像鑑賞時の効果を向上する為の画像処理が省略されて処理された画像データを意味する。シーン参照画像データは、撮像装置の光電変換特性（ＩＳＯ１４５２が定義するｏｐｔｏ−ｅｌｅｃｔｒｏｎｉｃ　ｃｏｎｖｅｒｓｉｏｎ　ｆｕｎｃｔｉｏｎ、例えばコロナ社「ファインイメージングとディジタル写真」（社）日本写真学会出版委員会編４４９頁参照）の補正を行ったものが好ましい。
【００６４】
シーン参照画像データの情報量（例えば階調数）は、鑑賞画像参照データで必要とされる情報量（例えば階調数）と同等以上であることが好ましい。例えば鑑賞画像参照データの階調数が１チャンネルあたり８ｂｉｔである場合、シーン参照生データの階調数は１２ｂｉｔ以上が好ましく、１４ｂｉｔ以上がより好ましく、また１６ｂｉｔ以上がさらに好ましい。
【００６５】
「シーン参照階調」は、シーン参照画像データにおいて、画像鑑賞時の効果を向上する為の画像処理のうち階調変換処理が省略されて処理された画像データを意味する。階調変換処理は、撮像装置毎に設定が大きく異なると共に、これを高精度に推定するのが困難な為、本発明では階調変換処理を省略する際に機種階調特性情報を用いている。この結果、当該シーン参照階調は如何なる撮像装置により取得された撮像画像データであっても略同一の階調特性を示すことになる。
【００６６】
「シーン参照色空間」は、シーン参照画像データにおいて、画像鑑賞時の効果を向上する為の画像処理のうちＲＩＭＭ　ＲＧＢやＥＲＩＭＭ　ＲＧＢなどの標準色空間へのマッピング処理および彩度強調処理が省略されて処理された画像データを意味する。現在、多くのデジタル画像データが、ＣＲＴディスプレイモニタのｓＲＧＢを用いて標準色空間の設定を行っている。この点に注目し、本発明では撮像装置毎の補正を省略したので画像処理の効率化が図れる。その結果、シーン参照色空間は如何なる撮像装置により取得された撮像画像データであってもｓＲＧＢ標準色空間に準拠してさえいれば略同一の色再現特性を示すことになる。
【００６７】
「撮像装置の機種を指定する際に用いられる情報」（以下、機種情報という）は、撮像装置を特定するための情報であり、機種名、番号、記号またはコードによって示される。
【００６８】
機種情報は、画像処理装置あるいは画像記録装置内のメモリに直接記録されている必要はなく、ネットワークを介して接続された遠隔地のサーバから読み出されるようにしても良いし、画像処理装置あるいは画像記録装置からオペレータによりマニュアル入力されたり、あるいは撮像画像データ内に記録された情報として自動的に入力されるようにしても良い。
【００６９】
機種情報が撮像画像データ内に記録されている場合、撮像画像データ内のヘッダ部のタグ情報として記録される方式に基づいて撮像装置の機種名、番号、記号あるいはコードが自動的に入力される入力方法、あるいは撮像装置の機種を表す情報と対応する撮像画像データとの関連を示すステータス情報ファイルを添付する方式に基づいて撮像装置の機種名、番号、記号あるいはコードが自動的に入力される入力方法が利用可能である。
【００７０】
撮像装置の機種を表す情報が番号、記号あるいはコードによる情報の場合には、機種名との対応表が必要となるが、当該対応表は、画像処理装置あるいは画像記録装置内のメモリに直接記憶されている必要はなく、ネットワークを介して接続された遠隔地のサーバーから読み出されるようにしても良い。
【００７１】
「機種階調特性情報」は、撮像装置の機種に応じた機種階調特性の補正を行うための情報であり、階調特性を直接表す情報、あるいは撮像装置を特定する為の機種名、記号、番号またはコードによる情報である。
【００７２】
「機種階調特性情報」は、画像処理装置あるいは画像記録装置内のメモリに直接記録されている必要はなく、ネットワークを介して接続された遠隔地のサーバから読み出されるようにしても良いし、画像処理装置あるいは画像記録装置からオペレータによりマニュアル入力されたり、あるいは撮像画像データ内に記録された情報として自動的に入力されるようにしても良い。
【００７３】
機種階調特性情報が撮像画像データ内に記録されている場合には、撮像画像データ内のヘッダ部のタグ情報として記録される方式に基づいて機種階調特性情報が自動的に入力される入力方法、あるいは機種階調特性情報と対応する撮像画像データとの関連を示すステータス情報ファイルを添付する方式に基づいて機種階調特性情報が自動的に入力される入力方法が利用可能である。
【００７４】
機種階調特性情報が撮像装置を特定する為の機種名、記号またはコードによる情報であって、かつ当該情報が自動的に入力される場合には、画像処理装置あるいは画像記録装置は、機種名と階調特性との対応表を保有する必要がある。この対応表は、画像処理装置あるいは画像記録装置内のメモリに直接記憶されている必要はなく、ネットワークを介して接続された遠隔地のサーバーから読み出されるようにしても良い。
【００７５】
「機種色特性情報」は、撮像装置に応じた機種色特性の補正を行うためのデータであり、色特性を直接表す情報、あるいは撮像装置を特定する為の機種名、記号またはコードによる情報である。
【００７６】
機種色特性情報は、画像処理装置あるいは画像記録装置内のメモリに直接記録されている必要はなく、ネットワークを介して接続された遠隔地のサーバーから読み出されるようにしても良いし、画像処理装置あるいは画像記録装置からオペレータによりマニュアル入力されたり、あるいは撮像画像データ内に記録された情報として自動的に入力されるようにしても良い。
【００７７】
機種色特性情報が撮像画像データ内に記録されている場合には、撮像画像データ内のヘッダ部のタグ情報として記録される方式に基づいて機種色特性情報が自動的に入力される入力方法、あるいは機種色特性情報と対応する撮像画像データとの関連を示すステータス情報ファイルを添付する方式に基づいて機種色特性情報が自動的に入力される入力方法が利用可能である。
【００７８】
機種色特性情報が撮像装置を特定するための機種名、記号またはコードを示す情報であって、かつ当該情報が自動的に入力される場合には、画像処理装置あるいは画像記録装置は、機種名と色特性との対応表を保有する必要がある。この対応表は、画像処理装置あるいは画像記録装置内のメモリに直接記憶されている必要はなく、ネットワークを介して接続された遠隔地のサーバーから読み出されるようにしても良い。
【００７９】
撮像装置の機種を表す情報、機種階調特性情報および機種色特性情報が撮像画像データ内のヘッダ部のタグ情報として記録されるデータ形式としては、例えばＥｘｉｆファイルの非圧縮ファイルとして採用されているＢａｓｅｌｉｎｅ　Ｔｉｆｆ　Ｒｅｖ．６．０ＲＧＢ　Ｆｕｌｌ　Ｃｏｌｏｒ　ＩｍａｇｅやＪＰＥＧ形式に準拠した圧縮データファイル形式が知られている。
【００８０】
次に、各請求項毎に更なる補足説明を記す。
請求項１に記載の画像処理方法は、鑑賞用に最適化された鑑賞画像参照データの生成前に、撮像画像データの色空間をシーン参照色空間に変換すると共に、機種階調特性情報を用いて撮像画像データの階調をシーン参照階調に変換することによりシーン参照画像データを生成する前処理を施すことを特徴とする。
【００８１】
本発明者等は、実験結果に基づいて鋭意検討した結果、鑑賞用に最適化された鑑賞画像参照データの生成前に、撮像画像データの色空間をシーン参照色空間に変換すると共に、撮像画像データの階調を機種階調特性情報を用いてシーン参照階調とすることで、赤や緑の服を着た人物のクローズアップ写真や、芝生や森を背景にした写真、花のクローズアップ写真等における前述のホワイトバランス調整エラーが発生しなくなる事を見出した。
【００８２】
この理由として次のようなことが推測される。すなわち、一般のデジタルカメラは、赤や緑等の特定の色について選択的に彩度を強調する処理を行っているが、例えば特開２００２−１６８０７号公報が開示するようなグレーパッチで作成した機種階調特性プロファイルのみを適用した場合には、彩度強調後の色の領域が正しいシーン参照階調とはならず、ホワイトバランス調整のエラーが発生していたと推測される。
【００８３】
請求項１に記載の発明によれば、如何なる撮像装置により取得された撮像画像データであっても略同一の階調特性と色再現特性を示す。
【００８４】
請求項２に記載の画像処理方法は、鑑賞用に最適化された鑑賞画像参照データの生成前に、撮像画像データの階調を、機種階調特性情報を用いてシーン参照階調に変換すると共に、該撮像画像データの色空間を機種色特性情報を用いてシーン参照色空間に変換することによりシーン参照画像データを生成する前処理を施すことを特徴とする。
【００８５】
請求項３に記載の「機種色特性情報を該撮像装置から出力された撮像画像データから取得する」とは、撮像画像データ内のヘッダ部に書き込まれるタグ情報として記録されている機種色特性情報を取得することを意味している。機種色特性情報が撮像画像データとは独立にメディアに保存されている場合には、機種色特性情報あるいは撮像画像データの何れか、または両方に対し両者を関連付ける為の情報の付与、または別途関連情報が記録されたステータス情報ファイルを添付する必要がある。
【００８６】
現在、多くのデジタル画像データには標準化された色空間としてＣＲＴディスプレイモニタのｓＲＧＢが採用されているが、彩度強調処理の程度は全体あるいは特定色（例えば、肌色）に関して撮像装置毎に設定が大きく異なっており、当該設定を正確に推定するのは困難である。このため本発明では機種色特性情報を用いてシーン参照色空間に変換する処理を行う。
【００８７】
請求項４に記載の発明は、シーン参照色空間に変換する処理を撮像装置に応じた彩度差を補正する処理とする。これによりシーン参照階調への変換処理に伴う彩度変化も高精度に補正することが出来る。
【００８８】
請求項５に記載の発明は、シーン参照色空間に変換する処理を標準化された色空間に変換する処理とする。これにより処理精度の向上と高率化が達成でき、その結果、シーン参照色空間は、如何なる撮像装置により取得された撮像画像データであってもｓＲＧＢ標準色空間に準拠してさえいれば略同一の色再現特性を示し、また機種色特性情報を用いることにより特定色の彩度強調などの差異までも補正されて精度向上が図られる。
【００８９】
ここで、機種階調特性情報がグレーバッチを用いて作成されている場合、撮像装置間の差異を色特性に関して補正した後に階調特性に関して補正するのが好ましい。あるいは、マンセル色票のようなチャートの実写結果から各色相角毎に機種階調特性情報を作成することにより、色特性および階調特性の補正を１ステップで行うこともできる。
【００９０】
請求項６に記載の「機種階調特性情報を該撮像装置から出力された撮像画像データから取得する」とは、撮像画像データ内のヘッダ部に書き込まれるタグ情報として記録されている機種階調特性情報を取得することを意味している。機種階調特性情報が撮像画像データとは独立にメディアに保存されている場合には、機種階調特性情報あるいは撮像画像データの何れか、または両方に対し両者を関連付ける為の情報、または別途関連情報が記録されたステータス情報ファイルを添付する必要がある。
【００９１】
請求項７に記載の画像処理方法は、撮像装置固有の変換特性を補正する第１のステップ、露出制御処理とグレーバランス調整処理とを施す第２のステップ、階調補正処理を施す第３のステップの少なくとも３つのステップにより構成されているのが好ましい。
【００９２】
第１のステップは、撮像画像データからシーン参照画像データを生成するプロセスであり、第２のステップは、撮像装置固有の差異を更に少なくして画像データの共通化を図るプロセスと、出力媒体上で鑑賞用に好ましい鑑賞画像参照データを生成するためのプロセスの両面を併せ持っており、第１ステップと第３ステップとの橋渡しを行なっている。第３のステップは、出力媒体上で鑑賞用として好ましい画質を有する鑑賞画像参照データの生成プロセスである。
【００９３】
請求項７に記載の「露出制御処理」は、撮像画像データ全体の明るさを補正する処理である。撮像画像データは、第１のステップにより撮像装置固有の被写体情報の表し方が補正され共通化されているものの、撮像装置の露出制御は、撮像装置のＡＥの性能によるバラツキや撮影者によるマニュアル設定の違いによって明るさが異なる。
【００９４】
請求項７に記載の「グレーバランス調整処理」は、撮像画像データ全体の色の偏りを補正する処理である。撮像画像データは、第１のステップにより撮像装置固有の被写体情報の表し方が補正され共通化されているものの、撮像装置のグレーバランス制御（例えば、鑑賞光源の色温度補正）は、撮像装置のＡＷＢの性能によるバラツキや撮影者によるマニュアル設定の違いによって色の偏りが異なる。
【００９５】
第２のステップで行われるＡＥ処理およびＡＷＢ処理はＢＧＲ各色毎に設定された入出力変換テーブル（ルックアップテーブル、以下、ＬＵＴとも称す）に基づいて同時に調整されるのが好ましい。具体的には、ＢＧＲ各色のＬＵＴを個々に平行移動させることによりグレーバランスが調整され、同時に平行移動させることにより明るさが調整される。
【００９６】
請求項７に記載の「階調補正処理」は、ＣＲＴ、液晶ディスプレイ、プラズマディスプレイ等の表示デバイスや、銀塩印画紙、インクジェットペーパー、サーマルプリンタ用紙等のハードコピー画像生成用の原稿等の出力媒体上で、鑑賞用に好ましい階調に調整する処理である。具体的には、下記、非線型補正処理およびγ補正処理が含まれる。
【００９７】
請求項８に記載の発明は、第３のステップの階調補正処理が非線形補正処理を含むのが好ましく、更に第３のステップがγ値を補正するステップと非線形補正処理を施すステップの２つのステップにより構成され、先にγ値を補正する構成であるのが好ましい。
【００９８】
この非線形補正処理は、画像のハイライト部とシャドー部を非線形に修正することにより、例えば出力媒体の濃度の再現域が狭いことに起因する画像のハイライト部の白飛びやシャドー部の潰れを抑制する処理である。第２のステップ（ＡＥ／ＡＷＢ処理）によりプリントの濃度が上がるような場合には、ハイライト側の階調を硬調化させると共にシャドー側の階調を軟調化させ、逆にプリントの濃度が下がるような場合には、ハイライト側の濃度を軟調化させると共にシャドー側の階調を硬調化させるような修正量を求め、修正曲線に反映させるのが好ましい。
【００９９】
上記したγを補正する処理は、出力媒体毎に設定された基準階調曲線に基づく修正処理である。このような階調を硬調化させてプリンタの出力の見栄えを良くすること目的とする処理をγ補正処理と称する。ここでは、例えば出力媒体が銀塩印画紙の場合、基準階調曲線はＳ字状の曲線となっており、中間部はγ＝１．６に設定されている。
【０１００】
請求項９に記載の「記憶手段」は、コンパクトフラッシュ（登録商標）、メモリスティック（登録商標）、スマートメディア（登録商標）、マルチメディアカード（登録商標）、ハードディスク、フロッピー（登録商標）ディスク、磁気記録媒体（ＭＯ（Ｍａｇｎｅｔｏ　Ｏｐｔｉｃａｌ））、ＣＤ−Ｒ（Ｃｏｍｐａｃｔ　Ｄｉｓｃ−Ｒｅｃｏｒｄａｂｌｅ）等何れであっても良い。記録媒体に書き込むユニットは、撮像装置と一体であるがコードを介して有線接続された書き込みユニットや、通信やインターネットを介して無線接続された独立ユニットや、遠隔地に設置されたユニット等何れであっても良い。
【０１０１】
請求項９および１０に記載の「取得手段」は、撮像装置の複数の機種に対応する機種階調特性情報のなかから指定された機種に応じた機種階調特性情報を取得するためのプログラムあるいは処理回路である。
【０１０２】
請求項９および１０に記載の「階調特性補正手段」は、撮像画像データの階調を取得手段により取得された機種階調特性情報を用いて撮像装置の機種によらないシーン参照階調に変換し、当該撮像画像データの階調特性を補正するためのプログラムあるいは処理回路である。
【０１０３】
請求項９に記載の「色特性補正手段」は、撮像画像データの色空間を撮像装置の機種によらないシーン参照色空間に変換し、当該撮像画像データの色特性を補正するためのプログラムあるいは処理回路である。
【０１０４】
請求項１０に記載の「取得手段」は、撮像装置の複数の機種に対応する機種色特性情報のなかから指定された機種に応じた機種色特性情報を取得するためのプログラムあるいは処理回路である。
【０１０５】
請求項１０に記載の「色特性補正手段」は、撮像画像データの色空間を取得手段により取得された機種色特性情報を用いて撮像装置の機種によらないシーン参照色空間に変換し、当該撮像画像データの色特性を補正する為のプログラムあるいは処理回路である。
【０１０６】
【発明の実施の形態】
以下、本発明を適用した画像処理装置および画像記録装置の好適な実施の形態を説明する。
【０１０７】
なお、以下に説明する機種階調特性プロファイル１０３ｂは、本発明の請求項に記載の機種階調特性情報を記憶する記憶手段が有する機能を実現し、機種階調／色特性プロファイル１０３ｃは、機種階調特性情報と機種色特性情報とを記憶する記憶手段が有する機能を実現し、機種階調特性補正処理部１０３ａは、機種階調特性情報を取得する取得手段と階調特性を補正する階調特性補正手段が有する機能を実現し、機種色特性補正処理部１０４は、機種色特性情報を取得する取得手段と色特性を補正する色特性補正手段が有する機能を実現し、鑑賞画像参照データ生成部１０７は、鑑賞画像参照データ生成前に階調特性および色特性を補正させるよう制御する制御手段が有する機能を実現する。
【０１０８】
〈画像処理装置１１７〉
まず、本発明を適用した画像処理装置１１７の構成を説明する。図１は、本実施の形態における画像処理装置１１７の機能ブロック図である。
【０１０９】
画像処理装置１１７は、撮像画像データを記録メディアから読み出すための入力部１０１と、撮像画像データのヘッダ情報を解析するヘッダ情報解析部１０２とを備える。ここで記録メディアとは、例えば、コンパクトフラッシュ（登録商標）、メモリスティック（登録商標）、スマートメディア（登録商標）、マルチメディアカード（登録商標）、ハードディスク、フロッピ（登録商標）ーディスク、磁気記録媒体（ＭＯ（Ｍａｇｎｅｔｏ　Ｏｐｔｉｃａｌ））あるいはＣＤ−Ｒ（Ｃｏｍｐａｃｔ　Ｄｉｓｃ−Ｒｅｗｒｉｔａｂｌｅ）など何れであっても良い。
【０１１０】
画像処理装置１１７は、画像処理部１１６と鑑賞画像参照データ生成条件決定部１１４とを備え、画像処理部１１６および鑑賞画像参照データ生成条件決定部１１４にはヘッダ情報解析部１０２がそれぞれ接続され、鑑賞画像参照データ生成条件決定部１１４には記憶デバイス１１０、出力デバイス１１１、表示デバイス１１２がそれぞれ接続可能である。
【０１１１】
画像処理装置１１７は、制御部２０７を備え、メモリ７０あるいはメモリ７１に記録されたプログラムを実行する。画像処理装置１１７は、特にメモリ７０あるいはメモリ７１に格納された図７、図８にフローチャートに示す処理を行うためのプログラムを実行する。
【０１１２】
入力部１０１は、記録メディアに保存された撮像画像データを読み出し、ヘッダ情報解析部１０２は、撮像画像データと、当該撮像画像データに添付された撮像装置の機種を表す情報および撮影情報データとに分ける。
【０１１３】
画像処理部１１６は、機種階調特性補正処理部１０３ａ、機種色特性補正処理部１０４、露出制御処理／グレーバランス調整処理部１０５、非線形補正処理部１１３、一時記憶メモリ１１５を備えて構成される。
【０１１４】
機種階調特性補正処理部１０３ａは、ヘッダ情報解析部１０２から入力された撮像装置の機種を表す情報に基づき、機種階調特性プロファイル１０３ｂを参照して機種階調特性補正処理条件を決定する。機種階調特性補正処理部１０３ａは、当該機種階調特性補正処理条件に基づき機種階調特性補正処理を行ってシーン参照画像データを生成する。
なお、撮像装置の機種を表す情報は、ヘッダ情報解析部１０２から入力されたものに限らず、オペレータにより直接入力されたものであっても良い。
【０１１５】
機種色特性補正処理部１０４は、当該生成されたシーン参照画像データから機種色特性補正処理が施されたシーン参照画像データを生成する。露出制御処理／グレーバランス調整処理部１０５は、当該生成されたシーン参照画像データに露出制御処理／グレーバランス調整処理を施し、非線形補正処理部１１３は当該露出制御処理／グレーバランス調整処理後のシーン参照画像データに非線形補正処理を施す。一時記憶メモリ１１５は、当該非線形処理後のシーン参照画像データ（鑑賞画像参照データ）を一時的に記憶する。
【０１１６】
鑑賞画像参照データ生成条件決定部１１４は、撮影情報データ処理部１０６、鑑賞画像参照データ生成部１０７、一時記憶メモリ１０８、設定入力部１０９を備えて構成される。
【０１１７】
撮影情報データ処理部１０６は、ヘッダ情報解析部１０２から入力された撮影情報データに基づき、鑑賞画像参照データの生成条件を特定する。
【０１１８】
設定入力部１０９から入力されたデジタル画像データを出力する記憶デバイス１１０、出力デバイス１１１、表示デバイス１１２の種類に関する操作情報は、鑑賞画像参照データ生成部１０７に送られる。
【０１１９】
鑑賞画像参照データ生成部１０７は、撮影情報データ処理部１０６で特定された鑑賞画像参照データの生成条件と、鑑賞画像参照データ生成部１０７から入力された記憶デバイス１１０、出力デバイス１１１、表示デバイス１１２の種類に関する操作情報とに基づき、最終的な鑑賞画像参照データの生成条件を決定する。
【０１２０】
画像処理部１１６によって生成されて一時記憶メモリ１１５に記憶された鑑賞画像参照データは、一時記憶メモリ１０８に一時的に保存されて、設定入力部１０９から入力された操作情報に基づき、記憶デバイス１１０、出力デバイス１１１、表示デバイス１１２の何れかに出力される。
【０１２１】
〈画像処理装置１１７ａ〉
以上、本発明の好適な一実施の形態として画像処理装置１１７を説明したが、これに限らず、図２に示す画像処理装置１１７ａに対しても本発明は適用可能である。
【０１２２】
なお、図面簡略化のため、図２に示す画像処理装置１１７ａの各構成要素のうち画像処理装置１１７と同一の構成要素には、画像処理装置１１７と同一の符号を付し、画像処理装置１１７と異なる構成についてのみ詳細に説明する。特に、画像処理装置１１７ａは、画像処理装置１１７の機種階調特性プロファイル１０３ｂに替えて機種階調／色特性プロファイル１０３ｃを有する画像処理部１１６ａを備える。
【０１２３】
画像処理装置１１７ａは、制御部２０７を備え、メモリ７０ａあるいはメモリ７１ａに記録されたプログラムを実行する。画像処理装置１１７は、特にメモリ７０ａあるいはメモリ７１ａに格納された図９、図１０にフローチャートに示す処理を行うためのプログラムを実行する。
【０１２４】
機種階調特性補正処理部１０３ａは、撮像装置の機種を表す情報に基づき、機種階調／色特性プロファイル１０３ｃを参照して、機種階調特性補正処理条件を決定する。機種階調特性補正処理部１０３ａは、当該決定された機種階調特性補正処理条件に基づき機種階調特性補正処理を行ってシーン参照画像データを生成する。機種色特性補正処理部１０４は、当該生成されたシーン参照画像データに基づき、機種階調／色特性プロファイル１０３ｃを参照して機種色特性補正処理条件を決定する。機種色特性補正処理部１０４は、当該決定した機種色特性補正処理条件に基づき、シーン参照画像データに対し機種色特性補正処理を施して機種色特性補正補正処理後のシーン参照画像データを生成する。露出制御処理／グレーバランス調整処理部１０５は、機種色特性補正処理部１０４により生成されたシーン参照画像データに露出制御処理／グレーバランス調整処理を施し、非線形補正処理部１１３は、露出制御処理／グレーバランス調整処理後のシーン参照画像データに非線形補正処理を施す。一時記憶メモリ１１５は、非線形補正処理部１１３による非線形補正処理後のシーン参照画像データ（鑑賞画像参照データ）を一時的に記憶する。
【０１２５】
〈画像記録装置２０１〉
次に本発明を適用した画像記録装置２０１の構成を説明する。図３は画像記録装置２０１の外観を示す斜視図であり、図４は画像記録装置２０１の機能ブロック図である。
【０１２６】
画像記録装置２０１は、本体２０２の左側面にマガジン装填部２０３を備え、本体２０２の内部には出力メディアとしての銀塩印画紙に露光する露光処理部２０４と、露光された銀塩印画紙を現像処理してプリントを作成するプリント作成部２０５とが設けられている。作成されたプリントは本体２０２の右側面に設けられたトレー２０６に排出される。
【０１２７】
本体２０２の内部には、露光処理部２０４の上方位置に制御部２０７（図４参照）が設けられている。また、本体２０２の上部にはＣＲＴ２０８が配置されている。ＣＲＴ２０８はプリントを作成しようとする画像を画面に表示する表示機能を有する。
【０１２８】
ＣＲＴ２０８の左側に透過原稿読込装置としてのフィルムスキャナ部２０９が配置され、右側に反射原稿入力装置２１０が配置されている。フィルムスキャナ部２０９や反射原稿入力装置２１０から読み込まれる原稿として写真感光材料がある。
【０１２９】
この写真感光材料としては、カラーネガフィルム、カラーリバーサルフィルム、白黒ネガフィルム、白黒リバーサルフィルム等が挙げられ、アナログカメラにより撮像した駒画像情報が記録される。
【０１３０】
フィルムスキャナ部２０９のフィルムスキャナは、原稿からデジタル画像データを取り込んで駒画像データに変換可能となっている。また写真感光材料が銀塩印画紙であるカラーペーパーの場合、反射原稿入力装置２１０のフラットベットスキャナで駒画像データに変換可能となっている。
【０１３１】
本体２０２の制御部２０７の位置には画像読込部２１４が設けられている。画像読込部２１４にはＰＣカード用アダプタ２１４ａ、フロッピー（Ｒ）ディスク用アダプタ２１４ｂが設けられ、ＰＣカード２１３ａやフロッピー（Ｒ）ディスク２１３ｂが装着可能になっている。
【０１３２】
ＰＣカード２１３ａは、デジタルカメラで撮像された複数の駒画像データが記憶されたメモリーを有する。フロッピー（Ｒ）ディスク２１３ｂは、例えばデジタルカメラで撮像された複数の駒画像データを記憶する。ＣＲＴ２０８の手前には操作部２１１が配置され、この操作部２１１に情報入力手段２１２が設けられ、情報入力手段２１２は例えばタッチパネル等で構成される。
【０１３３】
他の記録媒体としては、マルチメディアカード（登録商標）、メモリースティック（登録商標）、ＭＤ、ＣＤ−Ｒ等が挙げられる。
【０１３４】
なお、操作部２１１、ＣＲＴ２０８、フィルムスキャナ部２０９、反射原稿入力装置２１０、画像読込部２１４は、本体２０２に一体的に設けられた構成となっているが、いずれか１つ以上を別体として設けるような構成であっても良い。
【０１３５】
本体２０２における制御部２０７の位置には画像書込部２１５が設けられている。画像書込部２１５にはＦＤ用アダプタ２１５ａ、ＭＯ用アダプタ２１５ｂ、光ディスク用アダプタ２１５ｃが設けられている。各アダプタに装着されたＦＤ２１６ａ、ＭＯ２１６ｂ、光ディスク２１６ｃは画像情報が書き込み可能である。
【０１３６】
制御部２０７は、情報入力手段２１２からの指令情報に基づき、フィルムスキャナ部２０９や反射原稿入力装置２１０からの原稿情報を読み込んでその画像データをＣＲＴ２０８に表示する。
【０１３７】
制御部２０７は、画像処理部２７０を有し、画像処理部２７０で画像データを画像処理して出力用画像データを生成し、露光処理部２０４に送る。露光処理部２０４は、感光材料に画像を露光して、この感光材料をプリント作成部２０５に送る。プリント作成部２０５は露光された感光材料を現像処理して乾燥し、プリントＰ１、Ｐ２、Ｐ３を作成する。プリントＰ１はサービスサイズ、ハイビジョンサイズ、パノラマサイズ等であり、プリントＰ２はＡ４サイズ、プリントＰ３は名刺サイズのプリント等である。
【０１３８】
画像読込部２１４は、ＰＣカード２１３ａやフロッピー（Ｒ）ディスク２１３ｂに記録された駒画像データを読み出す。画像読込部２１４は、画像転送手段２３０としてＰＣカード用アダプタ２１４ａ、フロッピー（Ｒ）ディスク用アダプタ２１４ｂ等を備える。画像読込部２１４は、ＰＣカード用アダプタ２１４ａに装着されたＰＣカード２１３ａ、またはフロッピー（Ｒ）ディスク用アダプタ２１４ｂに装着されたフロッピー（Ｒ）ディスク２１３ｂから駒画像データを読み取って制御部２０７へ転送する。ＰＣカード用アダプタ２１４ａとしては、例えばＰＣカードリーダやＰＣカードスロット等が用いられる。
【０１３９】
画像書込部２１５は、画像搬送部２３１としてＦＤ用アダプタ１５ａ、ＭＯ用アダプタ２１５ｂ、光ディスク用アダプタ２１５ｃを備え、ＦＤ２１６ａ、ＭＯ２１６ｂ、光ディスク２１６ｃがデータの書き込み／読み出し可能に装着できる。
【０１４０】
データ蓄積手段２７１は、画像情報と当該情報に対応する注文情報（どの駒の画像から何枚プリントを作成するかの情報、プリントサイズの情報等）とを記憶し順次蓄積する。フィルムスキャナ部２０９は現像済のネガフィルムＮの駒画像データを入力し、反射原稿入力装置２１０は駒画像をカラーペーパーに焼き付けて現像処理したプリントＰの駒画像データを入力する。
【０１４１】
テンプレート記憶手段２７２は、サンプル識別情報Ｄ１〜Ｄ３に対応してサンプル画像データである背景画像、イラスト画像等との合成領域を設定する少なくとも１個のテンプレートのデータを予め記憶する。駒画像は指定されたテンプレートと合成され、指定されたサンプル識別情報Ｄ１〜Ｄ３に基づくサンプル画像データと、注文に基づく画像データおよび／または文字データとが合成され、指定されたサンプルに基づくプリントが作成される。このテンプレートを用いた画像の合成処理は周知のクロマキー法によって行なわれる。
【０１４２】
また、画像記録装置２０１は、プリントのサンプルを指定するサンプル識別情報Ｄ１、Ｄ２、Ｄ３が操作部２１１から入力されるように構成されている。
ここで、サンプル識別情報Ｄ１〜Ｄ３は、プリントのサンプルまたは注文シートに予め記録されているので、ＯＣＲ等の読み取り手段によりこれらサンプル識別情報Ｄ１〜Ｄ３を読み取ることもできる。あるいはオペレータがキーボードからこれらサンプル識別情報Ｄ１〜Ｄ３を直接入力することもできる。
【０１４３】
上記したように画像記録装置２０１は、サンプル識別情報Ｄ１〜Ｄ３に対応してサンプル画像データを予め記録し、入力されたサンプル識別情報Ｄ１〜Ｄ３に基づきサンプル画像データを選択し、この選択されたサンプル画像データと、注文に基づく画像データおよび／または文字データとを合成し、指定によるサンプルに基づくプリントを作成するので、種々の実物大のサンプルをユーザが実際に手にしてプリントの注文ができ、幅広いユーザの多様な要求に応じることができる。
【０１４４】
また、画像処理部２７０には、図示しない通信手段が設けられ、施設内の別のコンピュータやインターネット等を介した遠方のコンピュータから、撮像画像を表す画像データとプリント等の作業命令とを受信し、遠隔操作で画像処理を実施したりプリントを作成することも可能である。
【０１４５】
上記画像処理部２７０の図示しない通信手段を用いて本発明の画像処理を施した後の画像データと付帯するオーダー情報とを、施設内の別のコンピュータやインターネット等を介した遠方のコンピュータに対して送付することも可能である。
【０１４６】
このように画像記録装置２０１は、各種記録メディアに記録された画像および画像原稿を分割測光して得られる画像情報を取り込む画像入力手段と、この画像入力手段から取り込まれた入力画像の画像情報を「出力画像の大きさ」と「出力画像における主要被写体の大きさ」という情報から画像鑑賞時に好ましい印象を与えるよう画像処理する画像処理手段と、処理済画像の表示、プリント出力あるいは記録メディアへの書き込み等を行う画像出力手段と、通信回線を介して施設内の別のコンピュータやインターネット等を介して接続された遠方のコンピュータに対して画像データおよび付帯するオーダー情報を送信する手段とを有する。
【０１４７】
〈画像処理部２７０〉
次に画像処理部２７０の構成を説明する。図５は、画像処理部２７０の機能ブロック図である。
【０１４８】
なお、説明簡略化のため、図５に示す画像処理部２７０の各構成部のうち図１、図２に示す画像処理装置１１７、画像処理装置１１７ａと同一の構成部については、同一符号を付して示す。
【０１４９】
画像処理部２７０は、画像調整処理部７０１、フィルムスキャンデータ処理部７０２、反射原稿スキャンデータ処理部７０３、画像データ書式解読処理部７０４、テンプレート処理部７０５、ＣＲＴ固有処理部７０６、プリンタ固有処理部Ａ７０７、プリンタ固有処理部Ｂ７０８、画像データ書式作成処理部７０９を備えると共に、図１、図２に示す画像処理装置１１７、１１７ａのヘッダ情報解析部１０２、機種階調特性補正処理部１０３ａ、機種色特性補正処理部１０４、露出制御処理／グレーバランス調整処理部１０５、撮影情報データ処理部１０６、鑑賞画像参照データ生成部１０７を備えて構成される。
【０１５０】
また、画像処理部２７０は、メモリ７０あるいは記録媒体７１を備え、メモリ７０あるいは記録媒体７１は制御部２０７によって実行される各種プログラムを格納する。メモリ７０あるいはメモリ７１は特に図７、図８のフローチャートに示す処理を行うためのプログラムを格納する。
【０１５１】
フィルムスキャンデータ処理部７０２は、フィルムスキャナ部２０９から入力される画像データに、フィルムスキャナ部固有の校正操作、ネガ原稿の場合のネガポジ反転、ゴミキズ除去、グレーバランス調整、コントラスト調整、粒状ノイズ除去、鮮鋭化強調等の処理を施して画像調整処理部７０１に送る。この際、フィルムサイズ、ネガポジ種別、フィルムに光学的あるいは磁気的に記録された主要被写体に関わる情報、撮影条件に関する情報（例えばＡＰＳの記載情報内容）等も同時に画像調整処理部７０１に送られる。
【０１５２】
反射原稿スキャンデータ処理部７０３は、反射原稿入力装置２１０から入力される画像データを、反射原稿入力装置固有の校正操作、ネガ原稿の場合のネガポジ反転、ゴミキズ除去、グレーバランス調整、コントラスト調整、ノイズ除去、鮮鋭化強調等の処理を施して画像調整処理部７０１に送る。
【０１５３】
画像データ書式解読処理部７０４は、画像転送手段２３０および受信用通信手段２４０から入力される画像データに対し、当該画像データのデータ書式に従い必要に応じて圧縮符号の復元や色データの表現方法の変換等を行ない、画像処理部２７０の演算に適したデータ形式に変換して画像調整処理部７０１に送る。
【０１５４】
出力画像の大きさについての指定は操作部２１１から入力されるが、この他に受信用通信手段２４０へ送られる出力画像の大きさについての指定や、画像転送手段２３０が取得した画像データのヘッダ情報やタグ情報に埋め込まれた出力画像の大きさについての指定があった場合には、画像データ書式解読処理部７０４がこの情報を検出して画像調整処理部７０１へ転送する。
【０１５５】
画像転送手段２３０あるいは受信用通信手段２４０から撮像画像データが入力された際、画像データ書式解読処理部７０４がこの旨を検出すると、ヘッダ情報解析部１０２は、撮像画像データを、当該鑑賞画像参照データとこの鑑賞画像参照データに添付された撮像装置の機種を表す情報および撮影情報データとに分ける。
【０１５６】
機種階調特性補正処理部１０３ａは、ヘッダ情報解析部１０２から入力された撮像装置の機種を表す情報に基づき、機種階調特性プロファイル１０３ｂを参照して、機種階調特性補正処理条件を決定する。機種階調特性補正処理部１０３ａは、当該決定された機種階調特性補正処理条件に従って機種階調特性補正処理を行ってシーン参照画像データを生成する。機種色特性補正処理部１０４は、生成されたシーン参照画像データに基づいて、機種色特性補正処理が施されたシーン参照画像データを生成する。露出制御処理／グレーバランス調整処理部１０５は、当該生成されたシーン参照画像データに露出制御処理／グレーバランス調整処理を施し、非線形補正処理部１１３は、当該露出制御処理／グレーバランス調整処理後のシーン参照画像データに非線形補正処理を施す等して鑑賞画像参照データを生成する。当該生成された鑑賞画像参照データはデータ蓄積手段２７１に一旦格納される
【０１５７】
画像調整処理部７０１は、操作部２１１および制御部２０７から入力された指令に基づき、出力デバイスおよび出力メディアに適合した撮像画像参照データを作成するための画像処理条件を鑑賞画像参照データ生成部１０７へ転送する。ここで、撮像画像参照データ生成部１０７は、ヘッダ情報解析部１０２から送信された撮影情報データおよび画像調整処理部７０１から送信された画像処理条件に基づき、最終の鑑賞画像参照データの生成条件を決定する。
【０１５８】
画像調整処理部７０１は、テンプレート処理が必要な場合にはテンプレート記憶手段２７２から所定のテンプレートを呼び出して画像データと共にテンプレート処理部７０５に転送し、テンプレート処理部７０５からテンプレート処理後の画像データ（テンプレートが合成された画像データ）を再び受け取る。
【０１５９】
画像調整処理部７０１は、操作部２１１または制御部２０７から入力された指令に基づき、フィルムスキャナ部２０９、反射原稿入力装置２１０、画像転送手段２３０、受信用通信手段２４０、テンプレート処理部７０５から受け取った画像データを、鑑賞時に好ましい印象を与えるよう画像処理する。画像調整処理部７０１は、当該画像処理後の出力用デジタル画像データを、ＣＲＴ固有処理部７０６、プリンタ固有処理部Ａ７０７、画像データ書式作成処理部７０９、データ蓄積手段２７１へ送出する。
【０１６０】
ＣＲＴ固有処理部７０６は、画像調整処理部７０１から受け取った画像データに対して、必要に応じて画素数変更やカラーマッチング等の処理を行ない、制御情報等表示が必要な情報と合成した表示用の画像データをＣＲＴ２０８に送出する。
【０１６１】
プリンタ固有処理部Ａ７０７は、必要に応じてプリンタ固有の校正処理、カラーマッチング、画素数変更等を行ない、露光処理部２０４に画像データを送出する。画像記録装置２０１に大判インクジェットプリンタ等の外部プリンタ装置２５１を接続する場合には、接続するプリンタ装置毎にプリンタ固有処理部Ｂ７０８を設け、適正なプリンタ固有の校正処理、カラーマッチング、画素数変更等を行なうようにする。
【０１６２】
画像データ書式作成処理部７０９は、画像調整処理部７０１から受け取った画像データに対して、必要に応じてＪＰＥＧ、ＴＩＦＦ、Ｅｘｉｆ等に代表される各種の汎用画像形式への変換を行ない、画像搬送部２３１や送信用通信手段２４１へ画像データを転送する。
【０１６３】
なお、鑑賞画像参照データ生成部１０７で決定された条件に基づいて生成された鑑賞画像参照データは、上記ＣＲＴ固有処理部７０６、プリンタ固有処理部Ａ７０７、プリンタ固有処理部Ｂ７０８、画像データ書式作成処理部７０９による処理を前提としたものである。特に、画像データ書式作成処理部７０９は、鑑賞画像参照データの書式に基づいてＣＲＴ用、露光出力部用、外部プリンタ用、送信用等に最適化した画像データであることを示すステータスファイルを添付して当該画像データを上記画像搬送部に送信する。
【０１６４】
フィルムスキャンデータ処理部７０２、反射原稿スキャンデータ処理部７０３、画像データ書式解読処理部７０４、画像調整処理７０１、ＣＲＴ固有処理部７０６、プリンタ固有処理部Ａ７０７、プリンタ固有処理部Ｂ７０８、画像データ書式作成処理部７０９という区分は、画像処理部２７０の機能の理解を助けるために設けた区分であり、必ずしも物理的に独立したデバイスとして実現される必要はなく、たとえば単一のＣＰＵにおけるソフトウエア処理の種類の区分として実現されてもよい。
【０１６５】
ヘッダ情報解析部１０２、機種階調特性補正処理部１０３ａ、機種階調特性プロファイル１０３ｂ（あるいは図６の機種階調／色特性プロファイル１０３ｃ）、機種色特性補正処理部１０４、露出制御処理／グレーバランス調整処理部１０５、非線形補正処理部１０６、鑑賞画像参照データ生成部１０７という区分は、画像処理部２７０における本発明の機能の理解を助けるために設けた区分であり、必ずしも物理的に独立したデバイスとして実現される必要はなく、たとえば単一のＣＰＵにおけるソフトウエア処理の種類の区分として実現されてもよい。
【０１６６】
〈画像処理部２７０ａ〉
以上、本発明の好適な一実施の形態として画像処理部２７０を説明したが、これに限らず、図６に示す画像処理部２７０ａに対しても本発明は適用可能である。
ここで、図６に示す各構成部のうち、図５と同一構成部には、同一の符号を付し、画像処理部２７０と異なる構成についてのみ詳細に説明する。
【０１６７】
画像処理部２７０ａは、メモリ７０ａあるいは記録媒体７１ａを備え、メモリ７０ａあるいは記録媒体７１ａは制御部２０７によって実行される各種プログラムを格納する。メモリ７０ａあるいはメモリ７１ａは特に図９、図１０のフローチャートに示す処理を行うためのプログラムを格納する。
【０１６８】
機種階調特性補正処理部１０３ａは、ヘッダ情報解析部１０２から入力された撮像装置の機種を表す情報に基づき、機種階調／色特性プロファイル１０３ｃを参照して機種階調特性補正処理条件を決定する。機種階調特性補正処理部１０３ａは、当該決定した機種階調特性補正処理条件に従って機種階調特性補正処理を行いシーン参照画像データを生成する。機種色特性補正処理部１０４は、当該生成されたシーン参照画像データに基づき、機種階調／色特性プロファイル１０３ｃを参照して機種色特性補正処理条件を決定する。機種色特性補正処理部１０４は、当該決定した機種色特性補正処理条件に従いシーン参照画像データに機種色特性補正処理を施して機種色特性補正処理後のシーン参照画像データを生成する。露出制御処理／グレーバランス調整処理部１０５は、当該生成されたシーン参照画像データに露出制御処理／グレーバランス調整処理を施し、非線形補正処理部１１３は、当該露出制御処理／グレーバランス調整処理後のシーン参照画像データに非線形補正処理を施す等して鑑賞画像参照データを生成する。当該生成された鑑賞画像参照データはデータ蓄積手段２７１に一旦格納される。
【０１６９】
〈画像処理装置１１７の動作〉
次に画像処理装置１１７の動作を説明する。図７は、画像処理装置１１７によって行われる画像処理を説明するフローチャートである。なお、画像処理部２７０の動作もここで説明する動作と同じであり、説明簡略化のためこれを省略する。
【０１７０】
また、図７のフローチャートによって説明される処理内容は、制御部２０７が実行するプログラムとしてメモリ７０あるいは記録媒体７１に格納されている。
【０１７１】
撮像画像データが例えば入力部１０１から入力されると（ステップＳ１）、制御部２０７は、機種階調特性補正処理部１０３ａにより、撮像装置の機種を表す情報に基づいて機種階調特性プロファイル１０３ｂの中から該当する機種階調特性プロファイルを特定する（ステップＳ２）。
【０１７２】
ステップＳ２の後、制御部２０７は、機種階調特性補正処理部１０３ａにより、同ステップで特定した機種階調特性プロファイルに基づいて撮像画像データに機種階調特性補正処理を施す（ステップＳ３）。
【０１７３】
ステップＳ３の後、制御部２０７は、機種色特性補正処理部１０４により、撮像画像データに機種色特性補正処理を施して（ステップＳ４）シーン参照画像データを生成する。
【０１７４】
ステップＳ４の後、制御部２０７は、露出制御処理／グレーバランス調整処理部１０５によりシーン参照画像データに露出制御特性補正処理／グレーバランス調整処理を施し（ステップＳ５）、その後非線形補正処理部１１３によりγ補正処理（ステップＳ６）および非線形補正処理をシーン参照画像データに対し順次施して（ステップＳ７）各出力メディアに応じた画質の最適化を図る。
【０１７５】
その後、制御部２０７は、非線形補正処理後のシーン参照画像データを鑑賞画像参照データに変換する（ステップＳ８）。
【０１７６】
なお、撮像装置の機種を表す情報は、オペレータによって直接入力されるものとするが、これに限らず、後述する図８のフローチャートのステップＳ１ａに示すようなヘッダ情報解析部１０２から入力されるようにしても良い。
【０１７７】
図８に示すフローチャートは、図７のステップＳ１の後にステップＳ１ａが新たに設けられたものとなっている。従って、図８の他のステップについては図７と同一符号を付して説明を省略する。
【０１７８】
図８のフローチャートによって説明される処理内容は、制御部２０７が実行するプログラムとしてメモリ７０あるいは記録媒体７１に格納されている。
【０１７９】
なお、この図８のフローチャートに示す動作は、画像処理部２７０によっても実行可能である。
【０１８０】
〈画像処理装置１１７ａの動作〉
次に画像処理装置１１７ａの動作を説明する。図９は、画像処理装置１１７ａによる画像処理を説明するフローチャートである。なお、図９に示すフローチャートは、上記した図７の各ステップのうち、ステップＳ２をステップＳ２ａに替え、ステップＳ４をステップＳ４ａに替えたものとなっている。従って、図９の他のステップについては図７と同一符号を付して説明を省略する。
【０１８１】
図９のフローチャートによって説明される処理内容は、制御部２０７が実行するプログラムとしてメモリ７０ａあるいは記録媒体７１ａに格納されている。
【０１８２】
また、この図９のフローチャートに示す動作は、画像処理部２７０ａによっても実行可能である。
【０１８３】
まずステップＳ２ａについて説明する。機種階調特性補正処理部１０３ａは、オペレータにより入力された撮像装置の機種を表す情報に基づき、機種階調特性プロファイル１０３ｂの中から該当する機種階調特性プロファイルを特定する処理と平行して、機種階調／色特性プロファイル１０３ｃの中から該当する機種色特性プロファイルを特定する処理を行う（ステップＳ２ａ）。
【０１８４】
次にステップＳ４ａについて説明する。ステップＳ２ａで特定された機種色特性プロファイルに基づき、撮像画像データに機種色特性補正処理を施す（ステップＳ４ａ）。
【０１８５】
画像処理装置１１７ａは、図１０のフローチャートに従って処理することも可能である。図１０に示すフローチャートは、図９のステップＳ１の後に図８のステップＳ１ａが新たに設けられたものとなっている。
【０１８６】
図１０のフローチャートによって説明される処理内容は、制御部２０７が実行するプログラムとしてメモリ７０ａあるいは記録媒体７１ａに格納されている。
【０１８７】
なお、この図１０のフローチャートに示す動作は、画像処理部２７０ａによっても実行可能である。
【０１８８】
以上説明したように、画像処理装置１１７は、露出制御処理／グレーバランス調整処理、γ補正処理および非線形補正処理等により鑑賞画像参照データを作成する前に、撮像装置毎に階調特性や色再現特性の補正を行う。
【０１８９】
従って、階調特性や色再現特性の設計が異なった撮像装置で撮影された画像データであっても、撮像装置の種類によらず高品位なプリントを作成するための鑑賞画像データが安定して得られる。
【０１９０】
なお上記した本実施の形態における記述は、本発明に係る画像処理方法および当該画像処理方法を実行するプログラムを記録した記録媒体、画像処理装置および画像記録装置の具体例を示すものであり、これに限定されるものではない。本実施の形態の１１７、１１７ａおよび画像記録装置２０１の細部構成、詳細動作は、本発明の趣旨を逸脱しない範囲で適宜変更可能である。
【０１９１】
【発明の効果】
本発明によれば、多種類の撮像装置に対して高品質プリント用画像データを安定して作成する画像処理が実現できる。
本発明の画像形成方法の好ましい態様として、撮像装置の変換特性を補正する第１のステップ、露出制御処理とグレーバランス調整処理とを施す第２のステップ、および階調補正処理を施す第３のステップの少なくとも３つのステップより構成し、第１ステップから第３ステップへと、順番に処理を進行するようにしたことで、精度向上と効率化が図られる。
【図面の簡単な説明】
【図１】本発明を適用した画像処理装置の機能ブロック図である。
【図２】本発明を適用した画像処理装置の機能ブロック図である。
【図３】本発明を適用した画像記録装置の外観を示す斜視図である。
【図４】本発明を適用した画像記録装置の機能ブロック図である。
【図５】図４に示す画像処理部の機能ブロック図である。
【図６】図４に示す画像処理部の機能ブロック図である。
【図７】本発明を適用した画像処理装置による画像処理を説明するフローチャートである。
【図８】本発明を適用した画像処理装置による画像処理を説明するフローチャートである。
【図９】本発明を適用した画像処理装置による画像処理を説明するフローチャートである。
【図１０】本発明を適用した画像処理装置による画像処理を説明するフローチャートである。
【符号の説明】
１１７、１１７ａ　画像処理装置
１０１　入力部
１０２　ヘッダ情報解析部
１１６、１１６ａ　画像処理部
１０３ａ　機種階調特性補正処理部
１０３ｂ　機種階調特性プロファイル
１０３ｃ　機種階調／色特性プロファイル
１０４　機種色特性補正処理部
１０５　露出制御処理／グレーバランス調整処理部
１１３　非線形補正処理部
１１５　一時記憶メモリ
１１４　鑑賞画像参照データ生成条件決定部
１０６　撮影情報データ処理部
１０７　鑑賞画像参照データ生成部
１０８　一時記憶メモリ
１０９　設定入力部
１１０　記憶デバイス
１１１　出力デバイス
１１２　表示デバイス
２０１　画像記録装置
２０２　本体
２０３　マガジン装填部
２０４　露光処理部
２０５　プリント作成部
２０６　トレー
２０７　制御部
２０８　ＣＲＴ
２０９　フィルムスキャナ部
２１０　反射原稿入力装置
２１１　操作部
２１２　情報入力手段
２１４　画像読込部
２１４ａ　ＰＣカード用アダプタ
２１４ｂ　ＦＤ用アダプタ
２１５　画像書込部
２１５ａ　ＦＤ用アダプタ
２１５ｂ　ＭＯ用アダプタ
２１５ｃ　光ディスク用アダプタ
２３０　画像転送手段
２３１　画像搬送部
２４０　受信用通信手段
２４１　送信用通信手段
２５１　外部プリンタ
２７０、２７０ａ　画像処理部
２７１　データ蓄積手段
２７２　テンプレート記憶手段
７０１　画像調整処理部
７０、７０ａ　メモリ
７１、７１ａ　記録媒体
７０２フィルムスキャンデータ処理部
７０３　反射原稿スキャンデータ処理部
７０４　画像データ書式解読処理部
７０５　テンプレート処理部
７０６　ＣＲＴ固有処理部
７０７　プリンタ固有処理部Ａ
７０８　プリンタ固有処理部Ｂ
７０９　画像データ書式作成処理部
【図１】
2004096508.tif 000003
【図２】
2004096508.tif 000004
【図３】
2004096508.tif 000005
【図４】
2004096508.tif 000006
【図５】
2004096508.tif 000007
【図６】
2004096508.tif 000008
【図７】
2004096508.tif 000009
【図８】
2004096508.tif 000010
【図９】
2004096508.tif 000011
【図１０】
2004096508.tif 000012