(57)【要約】【課題】デジタルカメラ等の撮像装置で撮影して得られた画像データに対して、画像を出力する時点の状況に適合した色再現を行う。【解決手段】画像処理装置における色補正部１を、忠実な色再現を実現する正確な色変換処理部３１と、好ましい色再現を実現する好ましい色変換処理部３２と、撮像した時点からの経過時間に応じた制御信号を出力する制御部１５と、前記制御信号に応じた重み係数信号を出力する重み係数算出部３４と、前記重み係数信号に応じた割合で、前記色変換処理部３１，３２からの出力を混合する信号処理部３３とを備えて構成する。したがって、撮像した直後と撮像してから相当日時経過後とでユーザが好ましいと感じる色再現が異なっても、適宜色補正処理の内容を変化させることで、ユーザの好みに合った画質を得ることができる。【選択図】　図１
2004023177.tif 000002
【特許請求の範囲】
【請求項１】
撮像して得られた画像データを出力に際して色補正処理を施すようにした画像処理方法において、
前記色補正処理として、前記画像データが撮像された時点からの経過時間に応じて、第１の色再現を実現する処理から、第２の色再現を実現する処理へと変化することを特徴とする画像処理方法。
【請求項２】
前記色補正処理に用いるパラメータを設定する工程を含み、
前記工程で設定されたパラメータに従って、前記色補正処理を施すことを特徴とする請求項１記載の画像処理方法。
【請求項３】
撮像して得られた画像データに色補正処理を施して出力画像データとする色補正手段を備え、前記出力画像データに基づいて画像出力装置に画像を出力させる画像処理装置において、
前記色補正手段に、前記画像データが撮像された時点からの経過時間に応じた制御信号を出力し、第１の色再現を実現する処理から、第２の色再現を実現する処理へと変化させる制御手段を含むことを特徴とする画像処理装置。
【請求項４】
前記色補正手段は、
前記画像データに施す色補正処理として、前記第１の色再現を実現する第１の色補正処理手段と、
前記画像データに施す色補正処理として、前記第２の色再現を実現する第２の色補正処理手段と、
前記制御手段からの制御信号に応じて、前記第１および第２の色補正処理手段から出力されるそれぞれの色補正データに対する重みを算出して、重み係数信号を出力する重み係数算出手段と、
前記重み係数信号を、前記第１および第２の色補正処理手段から出力される色補正データに乗算して、得られた積の和を前記出力画像データとして出力する信号処理手段とを備えて構成されることを特徴とする請求項３記載の画像処理装置。
【請求項５】
前記重み係数算出手段における経過時間の変化に対する重みの変化特性を設定する設定信号を前記制御手段に出力する設定手段をさらに備えていることを特徴とする請求項４記載の画像処理装置。
【請求項６】
前記請求項３〜５の何れかに記載の画像処理装置を備えていることを特徴とする画像形成装置。
【請求項７】
前記請求項３〜５の何れかに記載の画像処理装置を備えていることを特徴とする撮像装置。
【請求項８】
前記請求項１または２記載の画像処理方法をコンピュータに実行させることを特徴とするプログラム。
【請求項９】
前記請求項８記載のプログラムをコンピュータが読取り可能に格納したことを特徴とする記録媒体。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、たとえばデジタルカメラのような撮像装置によって撮像して得られた画像データに色補正処理を施して出力画像データとし、この出力画像データに基づいて画像出力装置に画像を出力させる画像処理方法および装置ならびに画像形成装置、撮像装置、プログラム、記録媒体に関する。
【０００２】
【従来の技術】
近年、ＯＡ機器のデジタル化が急速に進展し、またカラー画像出力の需要が増してきたことによって、電子写真方式のデジタルカラー複写機およびインクジェット方式や熱転写方式のカラープリンタ等の出力機器が広く一般に普及してきている。たとえば、デジタルカメラやスキャナ等の入力機器から入力された画像情報やコンピュータ上で作成された画像情報がこれらの出力機器を用いて出力されている。これらの入出力機器においては、入力された画像情報に対して、常に色再現の安定した画像を出力することが必要であり、デジタル画像処理技術の色変換（色補正）処理が重要な役割を果たしている。
【０００３】
ここで、色変換処理とは、たとえばＲＧＢで指定された入力画像情報を、プリンタなどの出力機器に適合したＣＭＹ（Ｋ）で指定された出力画像データへと変換する処理を意味する。そして、この色変換処理は、通常、忠実な色再現を実現することを目的として行われる。ここで、忠実な色再現とは、たとえば前記ＲＧＢで指定された入力画像情報に対して、プリンタなどの出力機器において前記ＣＭＹ（Ｋ）で指定されて出力される画像が、原稿や元の撮影対象の色をできるだけ正確に再現することを意味する。したがって、入力装置および出力装置が使用される条件の中で色差を最小にするということで、装置が異なっても、出力画像を入力画像に近付けるという処理内容は同じである。
【０００４】
上述のような色変換処理を実際に行うにあたって、入力画像データを均等色空間データに変換するための色座標変換方法を含めて、従来から数多くの提案がなされている。このような方法として、色彩科学ハンドブック新編，第１１３７〜１１４９頁（日本色彩学会編・東京大学出版会刊行）や日本画像学会誌，第３７巻，第４号（１９９８），第５５５　〜５５９　頁に記載されているテーブル参照（Ｌｏｏｋ　Ｕｐ　Ｔａｂｌｅ　：ルックアップテーブル、以下ＬＵＴと記す）法やマスキング法がある。以下では、そのままでは出力として不適切な信号になってしまう色信号の補正を行う処理、色自体を変化させるために色信号を変換する処理、および色自体が変化しなくても色信号の座標系を変換する処理を全て色変換と呼ぶことにする。
【０００５】
前記ＬＵＴ法の一つである直接変換法は、全ての入力画像データの組合せに対して色変換データを予め計算して、その結果を色変換テーブルに格納しておき、実際の変換処理は、入力画像データに対するテーブル値を参照し、出力画像データとして出力する方法である。この直接変換法は色変換テーブルにアクセスするものであり、回路構成も簡単で比較的高速に処理することが可能で、どのような非線形特性であっても適用することができる。
【０００６】
また、別のＬＵＴ法である３次元補間法は、選択された一部の入力画像データについての組合せに対するテーブル値を予め計算して色変換テーブルに格納しておき、実際の変換処理は、色変換テーブルに入力画像データに対応したテーブル値が格納されている場合にはそのまま用い、格納されていない場合には近傍のテーブル値を用いて３次元補間演算によって算出するものである。この３次元補間法は、予めテーブル値を算出しておくべき入力画像データ数に限りがあっても、全ての入力画像データの組合せに対して色変換値を求めることができ、前記補間演算の回路が必要になるものの、色変換テーブルのサイズを直接変換法の場合よりも小型化することができる。
【０００７】
一方、上述のような画像処理方法とは異なり、正確な色再現ではなく、好ましい色再現をすることを色変換処理の目的としている画像処理方法も知られている。ここで、好ましい色再現とは、画像処理の分野において一般に広く用いられている表現であり、具体的には以下で説明するいわゆる記憶色の再現をすることに相当する。また、上述の意味に加えて、鮮やかさを感じさせるような色を再現するという意味で用いる場合もある。
【０００８】
前記記憶色とは、たとえば人の肌、空の青、草木の緑等の色であって、元の画像に忠実な色の再現を行うよりも、人間が記憶している色に近い色の再現を好ましく感じるような色である。このような記憶色に近付ける処理を行うことで、ユーザにとって好ましい画像を出力することが可能となる。前記記憶色に近付ける処理とは、具体的には、たとえばカラーコーディネーター検定試験２級テキスト（東京商工会議所、ｐ７８〜８０）から引用すると、肌色については彩度を低下させ、それ以外の色については彩度と明度とを上昇させる処理である。
【０００９】
したがって、この好ましい色は、感性に基づくものであるので、ＣＩＥ（Ｃｏｍｍｉｓｓｉｏｎ　Ｉｎｔｅｒｎａｔｉｏｎａｌｅ　ｄｅ　ｌ’Ｅｃｌａｉｒａｇｅ：国際照明委員会）などの規格として定義されているものではなく、予め多くの被験者に対して評価実験を行って決定される。そして、画像処理装置において、たとえば上述のＬＵＴ法を用いて、この好ましい色再現のための色変換処理を実現するようになっている。
【００１０】
【発明が解決しようとする課題】
しかしながら、前記従来の方法では、風景などを撮影した後の時間経過に拘らず一定の色変換処理を行うので、たとえば撮影直後に出力し対象と見比べる場合や、時間が経ち記憶が曖昧になってから出力する場合のように、必ずしも画像を出力する時点の状況に適合する色再現がなされないという虞れがある。すなわち、たとえばデジタルカメラで風景を撮影し、その場で画像を表示したり印刷したりする場合には、撮影した風景と見比べられる可能性が高く、従って正確な色再現が望まれる。一方、風景を撮影した後、その場から離れた場所で画像を表示したりプリントアウトする場合には、正確な色再現よりも、人間にとって好ましい色再現を行うことが適切であると考えられる。
【００１１】
すなわち、前述の直接変換法や三次元補間法を用いて、従来では、精度の高い正確な色再現と、人間にとって好ましい色再現との何れかを実現するのみで、前述のように、出力機器の普及によって多様な出力形態が想定され、それぞれの形態での出力時点の状況に適合できていないという問題がある。
【００１２】
本発明の目的は、デジタルカメラ等の撮像装置で撮影して得られた画像データに対して、画像を出力する時点の状況に適合した色再現を行うことができる画像処理方法および画像処理装置ならびに画像形成装置、撮像装置、プログラム、記録媒体を提供することである。
【００１３】
【課題を解決するための手段】
本発明の画像処理方法は、撮像して得られた画像データを出力に際して色補正処理を施すようにした画像処理方法において、前記色補正処理として、前記画像データが撮像された時点からの経過時間に応じて、第１の色再現を実現する処理から、第２の色再現を実現する処理へと変化することを特徴とする。
【００１４】
上記の構成によれば、撮像して得られた画像データを出力するにあたって、撮像した時点からの経過時間によって、第１の処理から第２の処理へと色補正処理を変化する。
【００１５】
したがって、ユーザが好ましいと感じる色再現が、撮像した直後にはたとえば忠実な色再現であり、撮像してから相当日時経過後には好ましい色再現であり、このようにユーザが好ましいと感じる色再現が時間経過に伴って変化しても、適宜２つの色補正処理の寄与率を変化させることで、ユーザの好みに合った画質を得ることができる。
【００１６】
また、本発明の画像処理方法は、前記色補正処理に用いるパラメータを設定する工程を含み、前記工程で設定されたパラメータに従って、前記色補正処理を施すことを特徴とする。
【００１７】
上記の構成によれば、色補正処理を行うにあたって、その処理に用いるパラメータが、予め設定された固定値に限らず、ユーザ設定によって細かな調整を可能にするので、個別のユーザの好みに合わせた色補正処理を実現することができる。
【００１８】
さらにまた、本発明の画像処理装置は、撮像して得られた画像データに色補正処理を施して出力画像データとする色補正手段を備え、前記出力画像データに基づいて画像出力装置に画像を出力させる画像処理装置において、前記色補正手段に、前記画像データが撮像された時点からの経過時間に応じた制御信号を出力し、第１の色再現を実現する処理から、第２の色再現を実現する処理へと変化させる制御手段を含むことを特徴とする。
【００１９】
上記の構成によれば、撮像して得られた画像データを画像出力装置に出力するにあたって、制御手段は、色補正手段での色補正処理を、撮像した時点からの経過時間によって、第１の処理から第２の処理へと変化させる。
【００２０】
したがって、ユーザが好ましいと感じる色再現が、撮像した直後にはたとえば忠実な色再現であり、撮像してから相当日時経過後には好ましい色再現であり、このようにユーザが好ましいと感じる色再現が時間経過に伴って変化しても、適宜２つの色補正処理の寄与率を変化させることで、ユーザの好みに合った画質を得ることができる。
【００２１】
また、本発明の画像処理装置では、前記色補正手段は、前記画像データに施す色補正処理として、前記第１の色再現を実現する第１の色補正処理手段と、前記画像データに施す色補正処理として、前記第２の色再現を実現する第２の色補正処理手段と、前記制御手段からの制御信号に応じて、前記第１および第２の色補正処理手段から出力されるそれぞれの色補正データに対する重みを算出して、重み係数信号を出力する重み係数算出手段と、前記重み係数信号を、前記第１および第２の色補正処理手段から出力される色補正データに乗算して、得られた積の和を前記出力画像データとして出力する信号処理手段とを備えて構成されることを特徴とする。
【００２２】
上記の構成によれば、予め設定された内容で色補正処理を行う２つの色補正処理手段から出力される色補正データに重みを付けて加算するので、前記経過時間に応じて徐々に第２の色再現のデータの割合を増加させ、連続した色補正処理を行うことができる。
【００２３】
さらにまた、本発明の画像処理装置は、前記重み係数算出手段における経過時間の変化に対する重みの変化特性を設定する設定信号を前記制御手段に出力する設定手段をさらに備えていることを特徴とする。
【００２４】
上記の構成によれば、各経過時間の時点での２つの色補正処理の割合を、予め設定された固定値に限らず、ユーザ設定によって細かく調整できるようにするので、個別のユーザの好みに合わせた色補正処理を実現することができる。
【００２５】
また、本発明の画像形成装置は、前記の何れかの画像処理装置を備えていることを特徴とする。
【００２６】
上記の構成によれば、経過時間によって画像処理の割合を変化するので、撮像した直後と撮像してから相当日時経過後とでユーザが好ましいと感じる色再現が異なっても、適宜色補正処理の内容を変化させることで、ユーザの好みに合った画質を得ることができる画像形成装置を実現することができる。
【００２７】
さらにまた、本発明の撮像装置は、前記の何れかの画像処理装置を備えていることを特徴とする。
【００２８】
上記の構成によれば、経過時間によって画像処理の割合を変化するので、撮像した直後と撮像してから相当日時経過後とでユーザが好ましいと感じる色再現が異なっても、適宜色補正処理の内容を変化させることで、ユーザの好みに合った画質を得ることができる撮像装置を実現することができる。
【００２９】
また、本発明のプログラムは、前述の画像処理方法をコンピュータに実行させることを特徴とする。
【００３０】
上記の構成によれば、撮像した時点からの経過時間に応じて色補正処理の内容を変化させることでユーザの意図に応じた画像を出力するための画像処理方法を、コンピュータに読取らせて実行させることができる。したがって、この画像処理方法を汎用的なものとすることができる。
【００３１】
さらにまた、本発明の記録媒体は、前記のプログラムをコンピュータが読取り可能に格納したことを特徴とする。
【００３２】
上記の構成によれば、撮像した時点からの経過時間に応じて色補正処理の内容を変化させることでユーザの意図に応じた画像を出力するための画像処理方法を、コンピュータに容易に読込ませることができる。
【００３３】
【発明の実施の形態】
〔実施の形態１〕
本発明の実施の一形態について、図１〜図５に基づいて説明すれば、以下のとおりである。
【００３４】
図１は、本発明の実施の一形態の画像処理装置における色補正部１の電気的構成を示すブロック図である。本画像処理装置は、図２で示すプリンタ機能を備えたデジタルカメラ２に備えられるものであり、以下の構成によって、画像を再現するときの状況に適合した画像を出力するようになっている。
【００３５】
すなわち、一般的にデジタルカメラで写真を撮った場合には、その場で画像が印刷出力されることは少なく、たとえば旅行から帰ってからのように、ある程度時間が経過してから印刷出力されることが多い。
【００３６】
このように、写真を撮ったその場で印刷出力しない場合には、出力画像とオリジナル（この場合は風景などの被写体）との比較はされない。また、時間が経過することで記憶が薄れ、正確なオリジナルの色は忘れられる。したがって、このような場合には、第１の色再現であるオリジナルの色を忠実に再現する色再現処理よりも、オリジナルと色がずれたとしても、第２の色再現である記憶色処理を行って好ましい色再現処理を施した方が、より画質が向上する。
【００３７】
一方、デジタルカメラにおいては、写真を撮ったその場でビューワを用いて画像を確認することができ、また前述のように機会は少ないけれども、記録紙に印刷出力されることもある。したがって、このような場合には、被写体との比較がなされるので、忠実な色再現が望まれる。
【００３８】
そこで、本画像処理装置においては、以下の構成によって、撮影時点からの時間経過に対応して、忠実な色再現と好ましい色再現との割合を切換えて画像を出力するようになっている。
【００３９】
図２に示すデジタルカメラ２は、前述のようにプリンタ一体型のデジタルカメラであって、デジタルカメラにプリンタを組込んだものである。このデジタルカメラ２は、大略的に、カメラ部分とプリンタ部分とから構成される。前記カメラ部分は、撮像レンズ３、ストロボ４、撮影ボタン５、モード設定ボタン６、およびメモリカード挿入口７ならびに図示しない撮像素子、前記画像処理装置、前記メモリカードへの書き込み装置およびビューワなどを備えて構成される。前記プリンタ部分は、プリント開始ボタン８、前記記録紙の挿入／排出口９および図示しない記録紙への印刷装置などを備えて構成される。
【００４０】
このような構成によって、カメラとして機能する場合には、撮影ボタン５が押圧されることによって撮影を実行し、得られた画像データを画像ファイルとしてメモリカードに記録する。また、プリンタとして機能する場合には、プリント開始ボタン８が押圧されることによって画像の印刷を開始し、挿入／排出口９から記録紙を排出する。
【００４１】
ここで、印刷を行う際には、後述するように、前記画像ファイルに記録された撮影時刻と印刷する現在時刻とを比較して、さらにモード設定ボタン６によって設定された設定モードに従って重み係数を求めて、これらに応じて所定の色補正処理を行って印刷する。
【００４２】
図３は、前記デジタルカメラ２における画像処理装置１１の詳細な構成を示すブロック図である。このデジタルカメラ２は、前記画像処理装置１１、カラー画像入力装置１２、カラー画像出力装置１３、カラー画像表示装置１４、制御部（制御手段）１５および操作パネル１６を備えて構成されている。
【００４３】
前記カラー画像入力装置１２は、撮影した画像を電気信号に変換して出力するものであって、前記撮像レンズ３とともに、図示しないカラーフィルタや前記撮像素子であるＣＣＤ（Ｃｈａｒｇｅ　Ｃｏｕｐｌｅｄ　Ｄｅｖｉｃｅ）などを備えて構成されている。前記撮像レンズ３から入力された画像は、前記ＣＣＤにて読取られ、ＲＧＢ（Ｒ：赤・Ｇ：緑・Ｂ：青）のアナログ信号として出力される。
【００４４】
本発明の画像処理装置１１は、Ａ／Ｄ変換部２１、入力補正部２２、記憶部２３、前記色補正部１、黒生成／下色除去部２４、空間フィルタ処理部２５、出力階調補正部２６および階調再現処理部２７を備えて構成されている。
【００４５】
前記Ａ／Ｄ変換部２１は、入力された前記ＲＧＢのアナログ信号をデジタル信号に変換して出力するものである。前記入力補正部２２は、前記カラー画像入力１２装置の結像系や撮像系で生じた各種の歪みを取除く処理、カラーフィルタの特性や光源の色温度に基づくホワイトバランスの調整、および被写体の輝度補正などを行うものである。前記記憶部２１は、撮影した画像データをＪＰＥＧ（Ｊｏｉｎｔ　Ｐｉｃｔｕｒｅ　Ｅｘｐｅｒｔｓ　Ｇｒｏｕｐ）などのファイルフォーマットに圧縮符号化して記憶するためのものである。本実施形態の記憶部２３は、前記のメモリカードおよびその書込み／読出し装置から成る。
【００４６】
色補正部１は、入力された画像情報に対して色再現の安定した画像を出力するために、デジタル画像処理技術の色変換（色補正）処理を行うものである。この色補正部１では、色再現の忠実化のために、前記ＲＧＢ信号を、ＣＭＹ（Ｃ：シアン、Ｍ：マゼンタ、Ｙ：イエロー）信号に変換する処理も行う。この色補正処理としては、変換行列を利用するマスキング法や、ルックアップテーブル（ＬＵＴ）を用いる直接変換法や三次元補間法がある。
【００４７】
マスキング法とは、下式のように、ＲＧＢ値からＣＭＹ値への変換を行列演算を用いて実現するものである。
【００４８】
【数１】
2004023177.tif 000003
【００４９】
上式における変換の各パラメータａ１１〜ａ１４，ａ２１〜ａ２４，ａ３１〜ａ３４は、たとえば主要なＣＭＹ値の組合せを前記カラー画像出力装置１３に与えてカラーパッチを出力し、それを前述のカラー画像入力装置１２で読込み、対応するＲＧＢ値を求め、それらの関係を満たすものを最小二乗法で求めることで決定される。または、市販されているデジタルカメラ用のカラーパッチ（国際標準規格にもなっているＡＮＳＩ（Ａｍｅｒｉｃａｎ　Ｎａｔｉｏｎａｌ　Ｓｔａｎｄａｒｄｓ　Ｉｎｓｔｉｔｕｔｅ）　ＩＴ８．７（ＩＳＯ　１２６４１）　やＧｒｅｔａｇＭａｃｂｅｔｈ　社のＣｏｌｏｒＣｈｅｃｋｅｒＤＣなど）を読込んでＲＧＢ値とカラーパッチの測色値との対応関係を求め、カラー画像出力装置１３にＣＭＹＫ値を与えて出力される色の測色値の対応関係を求め、それぞれの測色値が一致するＲＧＢとＣＭＹＫから最小二乗法で各パラメータを求めてもよい。
【００５０】
前記ＬＵＴを作成する方法としては、ニューラルネットワークを用いてＲＧＢ値とＣＭＹ値との関係を記述するモデルを作成し、各ＲＧＢ値に対する出力ＣＭＹ値をＬＵＴとして持つ方法などがある。また、前記の変換行列を求めて、各ＲＧＢ信号に対して出力されるべきＣＭＹ信号を予め求めておき、ＬＵＴとして記憶しておく方法もある。色補正部１は、上述の方法を用いて、入力されたＲＧＢ信号からＣＭＹ信号を生成して、インクジェット方式や熱転写方式の記録装置などで実現されるカラー画像出力装置１３へ出力する。また、撮影した画像を、液晶ディスプレイなどで実現される前記ビューワ等のカラー画像表示装置１４に出力する場合は、該色補正部１は、入力されたＲＧＢ信号をカラー画像表示装置１４の特性に応じたＲ’Ｇ’Ｂ’信号に変換して出力する。この色補正部１については、後で詳述する。
【００５１】
前記黒生成／下色除去部２４は、黒生成部と下色除去部から構成される。黒生成部は、色補正されたＣＭＹ信号に基づいて、黒（Ｋ）生成処理を行う。下色除去部は、黒信号から計算される下色の量をＣＭＹ信号から減算し、ＣＭＹＫ４色のデータに変換する。
【００５２】
ここで、入力されるデータをＣ、Ｍ、Ｙとし、出力されるデータをＣ’、Ｍ’、Ｙ’、Ｋとするとき、黒生成および下色除去処理は、下式によってＣ、Ｍ、Ｙを補正する。ここで、ｍｉｎ（Ｃ，Ｍ，Ｙ）はＣ、Ｍ、Ｙの中で最小の値であり、α，βは予め定められた定数である。
【００５３】
Ｃ’＝Ｃ−αｍｉｎ（Ｃ，Ｍ，Ｙ）
Ｍ’＝Ｍ−αｍｉｎ（Ｃ，Ｍ，Ｙ）
Ｙ’＝Ｙ−αｍｉｎ（Ｃ，Ｍ，Ｙ）
Ｋ＝βｍｉｎ（Ｃ，Ｍ，Ｙ）
前記空間フィルタ処理部２５は、得られた画像データに対して、デジタルフィルタによる空間フィルタ処理を行って、空間周波数特性を補正するためのものである。これによって、出力画像のぼやけや粒状性劣化を防ぐように処理する。前記出力階調補正部２６は、濃度信号などの信号を、カラー画像出力装置１３の特性値である網点面積率に変換する出力階調補正処理を行う。前記階調再現処理部２７は、画像を画素に分離してそれぞれの階調を再現できるように処理する階調再現処理（中間調生成）を行う。
【００５４】
本実施形態においては、画像データは記憶部２３に記憶されており、制御信号などに応じて読出されて色補正部１に入力され、以下各処理が施されてカラー画像出力装置１３またはカラー画像表示装置１４に出力されるようになっている。
【００５５】
前記制御部１５は、上述の画像処理装置１１の各部の制御を行うためのものであり、タイマを備え、画像データが撮像された時点からの経過時間に応じた制御信号を画像処理装置１１に出力して、忠実な色再現をする色補正処理と好ましい色再現をする色補正処理との割合を切換えさせるようになっている。その制御の詳細は後述する。
【００５６】
前記操作パネル１６は、図２に示したモード設定ボタン６、撮影ボタン５およびプリント開始ボタン８などに相当し、さらにテンキー等の入力手段を備えていてもよい。この操作パネル１６は、各ボタン５，６，８が押圧操作されたか否かを検知することによって、ユーザの指示を受付ける。ユーザからの指示がなされた場合には、前記カラー画像表示装置１４に、現在設定されている出力モードなどを示すようになっている。ユーザは、この操作パネル１６を用いて、後述するように画像を出力する際のモードを選択し、または任意にパラメータを設定する。
【００５７】
図１を参照して、本実施形態の色補正部１は、第１の色補正処理手段であり、正確な色変換処理を行う正確な色変換処理部３１と、第２の色補正処理手段であり、好ましい色変換処理を行う好ましい色変換処理部３２と、信号処理部（信号処理手段）３３と、重み係数算出部（重み係数算出手段）３４とを備えて構成される。
【００５８】
前記正確な色変換処理部３１は、色補正処理として忠実な色再現を実現するものであり、入力されたＲＧＢ信号を、出力信号Ｃｃに変換して出力するようになっている。ここで、この色補正処理は、変換行列を用いるマスキング法によって行ってもよいし、ＬＵＴ法によって行ってもよい。この場合、カラーパッチなどを用いて機器のデータと測色計で測定した色データとの組合せから変換パラメータが作成されている。
【００５９】
より詳細には、デジタルカメラの場合は、パッチの測色値ＣＩＥ１９７６Ｌ＊　ａ＊　ｂ＊　データ（Ｌ＊　：明度、ａ＊　・ｂ＊　：色度）と、それを読込んだＲＧＢデータの組合せとからデジタルカメラの特性を表すモデルを作成し、プリンタの場合は、プリンタに与えたＣＭＹ（Ｋ）データと測色値ＣＩＥ１９７６Ｌ＊　ａ＊　ｂ＊　データの組合せとからプリンタの特性を表すモデルを作成する。これらのモデルを組合わせて、変換行列やＬＵＴを求めるようになっている。
【００６０】
また、ここでＣｃはシアン信号を意味する。マゼンタ信号Ｍｃ、イエロー信号Ｙｃについても同様に求められるけれども、図１および以下では、簡単のために、シアン信号Ｃｃについてのみ説明する。
【００６１】
一方、前記好ましい色変換処理部３２は、色補正処理として好ましい色再現を実現するものであり、前記正確な色変換処理部３１と同様に、予め求められた変換行列やＬＵＴを用いて色補正処理を行い、入力されたＲＧＢ信号を、出力信号Ｃｆに変換して出力するようになっている。
【００６２】
前記重み係数算出部３４は、制御部１５から入力される制御信号に応じて、前記の各色変換処理部３１，３２からそれぞれ出力される色補正後の出力信号ＣｃおよびＣｆに対する重みを算出して、重み係数信号を前記信号処理部３３に出力するものである。前記信号処理部３３は、入力された重み係数信号を、前記出力信号ＣｃおよびＣｆにそれぞれ乗算して、得られた積の和を取ることによって、出力画像データＣｏｕｔを作成する。この処理の詳細については後述する。
【００６３】
なお、本発明に係る色補正部１は上述の構成に限るものではなく、重み係数算出部３４を含まず、信号処理部３３は、正確な色変換処理部３１および好ましい色変換処理部３２からそれぞれ出力される出力信号ＣｃおよびＣｆの何れかを、前記制御信号に応じて選択して出力画像データＣｏｕｔとして出力する構成であってもよい。
【００６４】
図４は、前記色補正部１の動作を詳細に説明するためのフローチャートである。画像データの出力にあたって、ＲＧＢ信号は、前記正確な色変換処理部３１において出力信号Ｃｃへと色変換される（ステップＳ１１）とともに、並列処理で、前記好ましい色変換処理部３２において出力信号Ｃｆへと色変換され（ステップＳ１２）、信号処理部３３に入力される。
【００６５】
一方、制御部１５においては、内蔵する図示しないタイマによって、撮影を行った時間（撮影時刻）と現在時間との比較を行う。ここで、デジタルカメラで撮影された画像には、通常、撮影時刻も記録されており、制御部１５はこれを用いるようになっている。また、別の構成として、デジタルカメラ中に記録された画像ファイルのタイムスタンプを撮影時刻とみなし、これと現在時刻との比較を行う構成であってもよい。すなわち、現在の時刻をｔ、撮影時刻をｔ０、記憶色処理を考慮し始める時刻をｔ１、完全に記憶色処理に切換える時刻をｔ２とするときに、制御部１５は、現在時刻ｔと撮影時刻ｔ０との差に応じたレベルの出力信号を、制御信号として重み係数算出部３４および信号処理部３３に出力する。
【００６６】
制御信号を受信した重み係数算出部３４は、図５に示すように、色補正処理の重み係数ｋを、以下のように定義する。すなわち、
０≦ｔ−ｔ０≦ｔ１−ｔ０のときｋ＝０
ｔ１−ｔ０＜ｔ−ｔ０≦ｔ２−ｔ１のときｋ＝（ｔ−ｔ１）／（ｔ２−ｔ１）
ｔ２−ｔ０＜ｔ−ｔ０のときｋ＝１
とする。このようにして得られた重み係数信号を信号処理部３３に出力する。
【００６７】
信号処理部３３は、以上のようにして得られた重み係数ｋを用いて、出力信号Ｃｏｕｔを、
Ｃｏｕｔ＝（１−ｋ）Ｃｃ＋ｋＣｆとして計算する（ステップＳ２）。また、マゼンタおよびイエローの出力信号についても同様の処理を行う。
【００６８】
以上のように、本実施形態の色補正部１は、撮影時刻ｔ０と現在の時刻ｔとの差である経過時間に応じて、忠実な色再現をする色補正処理と好ましい色再現をする色補正処理との割合を変化するので、画像を再現するときの状況に適合して、ユーザの好みに合った画質を得ることができる。また、２つの色変換処理部３１，３２からの出力信号ＣｃとＣｆとに重み係数ｋを掛けて加算するので、前記経過時間に応じて、徐々に好ましい色再現の出力信号Ｃｆの割合を増加させ、連続した色補正処理を行うことができる。
【００６９】
なお、実施の形態の一例としての図５においては、前記のようにｔ１＜ｔ≦ｔ２の時間の重み係数ｋを直線的な時間変化で表しているけども、２次関数等の曲線的な時間変化であってもよい。
【００７０】
また、前記構成において、重み係数ｋの時間変化の特性を、ユーザが任意に設定できるようにしてもよい。すなわち、本実施形態のデジタルカメラ２はプリンタ一体型であり、このようなデジタルカメラにおいては、デジタルカメラで撮った画像を印刷せずにビューワに表示する場合と、その場で印刷する場合とがあり得る。このため、ユーザの希望に応じて、前記した重み係数ｋの時間変化の特性を変更可能とすることが望ましい。この特性の変更のための設定は、図２に示すモード設定ボタン６を用いて行うことができる。
【００７１】
すなわち、設定手段である前記モード設定ボタン６を押圧操作すると、スライダ（棒状の境界を示す印を表示し、その印を左右に動かして左右の分割された領域の比率を変えることで値を入力するインターフェイス）などが表示され、さらにこのモード設定ボタン６を操作することで、正確な色再現と好ましい色再現の比率を任意に設定することができる。具体的には、上述の記憶色処理を考慮し始める時刻ｔ１および完全に記憶色処理に切換える時刻ｔ２を変更することで実現することができる。たとえば、好ましい色再現を重視する場合には、時刻ｔ１，ｔ２を共に小さくすればよく、正確な色再現を重視する場合には、前記時刻ｔ１，ｔ２を共に大きくすればよい。重み係数ｋの特性を徐々に変化させる場合には、前記時刻ｔ１とｔ２との間隔を大きくすればよい。さらにまた、時刻ｔ１をｔ０に設定して、撮影直後から記憶色処理を考慮し始めることもできる。また、時刻ｔ２を大きな値に設定して、常に正確な色再現が行われるようにすることもできる。さらにまた、重み係数ｋの時間変化の特性を変更させる構成は、上述のものに限らず、重み係数ｋの変化範囲の上限および下限を変化させる構成も可能である。
【００７２】
このようにして、各経過時間の時点での２つの色補正処理の割合を、予め設定された固定値に限らず、ユーザ設定によって細かく調整できるようになるので、個別のユーザの好みに合わせた色補正処理を実現することができる。
【００７３】
また、上述の説明では、ｔ１＜ｔ２となる構成について説明しているけれども、ｔ２＝ｔ１となる構成であってもよい。すなわち、この場合には、重み係数ｋが０から１に切換わり、前述のように出力画像データＣｏｕｔとして、所定時間が経過するまでは忠実な色再現を実現する出力信号Ｃｃとし、前記所定時間が経過した時点で、好ましい色再現を実現する出力信号Ｃｆに切換える。このような構成では、重み係数算出部３４を不要として、また制御部１５も前記撮影時刻ｔ０から現在時刻ｔまでの経過時間を管理するだけでよく、さらに信号処理部３３も、積和演算を行う必要はなく、与えられた制御信号に応じて、出力信号ＣｃとＣｆとを切換えるだけでよい。こうして、簡単な構成で実現することができる。
【００７４】
〔実施の形態２〕
本発明の実施の他の形態について、図６に基づいて説明すれば、以下のとおりである。
【００７５】
図６は、本発明の実施の他の形態の画像処理装置４１の電気的構成を示すブロック図である。この画像処理装置４１は、前述の画像処理装置１１に類似し、対応する部分には同一の参照符号を付して示し、その説明を省略する。注目すべきは、この画像処理装置４１では、相互に別個の構成であるデジタルカメラ４２とプリンタ４３とが組合わせられて構成されることである。すなわち、前記画像処理装置１１における記憶部２３までのデジタルカメラでの画像処理に必要な最小限の構成が該デジタルカメラ４２に搭載され、前記黒生成／下色除去部２４以降のデジタルカメラでの画像処理に必ずしも必要でない構成がプリンタ４３に搭載されることである。
【００７６】
前記色補正部１は、入力されたＲＧＢ信号をカラー画像表示装置１４の特性に応じたＲ’Ｇ’Ｂ’信号に変換して出力する色補正部１ａと、前記のカラー画像出力装置１３のための色補正処理を行う色補正部１ｂとに分割され、それぞれ前記デジタルカメラ４２側の画像処理部４１ａと、プリンタ４３側の画像処理部４１ｂとに搭載されている。デジタルカメラ４２およびプリンタ４３にはまた、制御部１５ａ，１５ｂおよび操作パネル１６ａ，１６ｂがそれぞれ搭載され、これらの制御部１５ａ，１５ｂおよび操作パネル１６ａ，１６ｂを合わせての機能は、前述の制御部１５および操作パネル１６の単体の機能と同様である。
【００７７】
このようなプリンタ機能を備えていないデジタルカメラ４２の場合には、プリンタ機能を備えている場合と比較して、撮影時刻から印刷出力を行う時刻までの経過時間に大きな差が生じうる。したがって、この場合には、上述の実施の形態とは異なったモード設定をすることが望ましい。また、このようにデジタルカメラ４２と、プリンタ４３とが相互に別体となると、相互に接続可能なメーカや機種の任意の組合わせでの使用が想定されることになる。
【００７８】
ここで、一般に、デジタルカメラの（プリンタへの）出力特性は、通常は、デジタルカメラの機種毎に異なるものとなっている。そこで、デジタルカメラ４２から出力される色データの信号が、ｓＲＧＢ信号などの測色的な色空間との対応関係が定義されている色空間のデータであることが予め分かっている場合には、プリンタ４３側において、その定義されている関係を用いて、ＣＭＹ信号へと変換することができる。
【００７９】
一方、前記ｓＲＧＢ信号などの定義されている信号ではなく、機器固有の色データの信号が出力される場合には、以下のように変換を行う。そして、得られた変換テーブルを、プリンタ４３側においてデジタルカメラ４２の機種毎に保持することによって、次回の出力を容易にすることもできる。
【００８０】
すなわち、前記ｓＲＧＢ信号を用いることができない場合には、プリンタ４３において、ＣＭＹ（Ｋ）データと測色値（ＣＩＥ１９７６Ｌ＊　ａ＊　ｂ＊　データなど）との組合せを、変換行列やＬＵＴとして格納しておく。そして、デジタルカメラ４２からの画像データを印刷出力する際には、デジタルカメラ４２の入力特性を示すＲＧＢ−Ｌ＊ａ＊ｂ＊データ（各メーカーが作成したＩＣＣ（Ｉｎｔｅｒｎａｔｉｏｎａｌ　Ｃｏｌｏｒ　Ｃｏｎｓｏｒｔｉｕｍ）プロファイルなど）に基づいて色補正処理を行う。
【００８１】
そして、前記正確な色再現の場合には、測色データをそのまま使用して、ＲＧＢ→Ｌ＊　ａ＊　ｂ＊　→ＣＭＹ（Ｋ）の変換を行う。一方、好ましい色再現の場合には、予め主観評価実験で人が好ましいと感じる色の調整方法を調べておき、その処理を行ったＲＧＢ→Ｌ＊　ａ＊　ｂ＊　→Ｃ’Ｍ’Ｙ’（Ｋ’）の変換を行う。
【００８２】
また、前記時刻ｔ１，ｔ２の設定としては、たとえば前記記憶色処理を考慮し始める時刻ｔ１を１日、完全に記憶色処理に切換える時刻ｔ２を１週間に設定しておくことができる。この設定は、ユーザが選択する構成であってもよい。
【００８３】
なお、カラー画像入力装置１２は、上述のようにデジタルカメラ２，４２に備えられる構成に限るものではなく、スキャナなどに備えられる構成であってもよい。この場合には、画像ファイルファーマットとして撮影時刻が記録されている場合はそれを使用し、記録されていない場合には、ファイルのタイムスタンプを利用するなどして、同様の処理を行うことができる。また、本発明に係る撮像装置は、前記デジタルカメラ２，４２に限らず、ビデオカメラであってもよい。
【００８４】
さらにまた、本発明は、上述した画像処理方法を、パーソナルコンピュータなどのコンピュータに実行させるためのプログラムであってもよい。このプログラムをコンピュータにおいて実行すれば、上述した画像処理方法を実行できるので、上述と同様の効果を得ることができる。すなわち、前記プリンタ４３側の画像処理部４１ｂを前記パーソナルコンピュータに搭載し、プリンタはそのパーソナルコンピュータから出力されたＣＭＹ（Ｋ）信号に応じて印字処理を行うだけでもよい。この場合、プリンタ側で設定するよりも、パーソナルコンピュータの快適なユーザインタフェイスを使用して、前記重み係数ｋの設定などをより詳細に行うことができる。
【００８５】
また、本発明は、前記のプログラムを記録したコンピュータ読取り可能な記録媒体であってもよい。この記録媒体を、コンピュータにおいて読取って実行すれば、上述した画像処理方法を実行できるので、上述と同様の効果を得ることができる。このような構成によれば、画像処理を行うプログラムを記録した記録媒体を持ち運び自在に提供することができる。
【００８６】
前記構成において、前記記録媒体とは、ＲＯＭのようなメモリであってもよいし、または装置外部に備えられて接続された外部記録装置であってもよいし、または装置外部に備えられて接続された外部読取装置の記録媒体であってもよい。より詳細には、前記記録媒体は、装置本体と分離可能に構成される記録媒体であって、磁気テープやカセットテープ等のテープ系、フロッピーディスクやハードディスク等の磁気ディスクやＣＤ−ＲＯＭ／ＭＯ／ＭＤ／ＤＶＤ等の光ディスクのディスク系、ＩＣカード（メモリカードを含む）／光カード等のカード系、あるいはマスクＲＯＭ、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ　Ｐｒｏｇｒａｍｍａｂｌｅ　Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ　Ｅｒａｓａｂｌｅ　Ｐｒｏｇｒａｍｍａｂｌｅ　Ｒｅａｄ　Ｏｎｌｙ　Ｍｅｍｏｒｙ）、フラッシュＲＯＭ等の半導体メモリなどであってもよい。
【００８７】
前記いずれの場合においても、前記プログラムは、マイクロプロセッサがアクセスして実行する構成であっても良いし、一旦図示しない記憶エリアに読込んだ後に実行する構成であってもよい。
【００８８】
また、前記構成において、プログラムを読取る際には、インターネットを含む通信ネットワークに接続して、通信ネットワークからプログラムをダウンロードする構成であってもよい。なお、このように通信ネットワークからプログラムをダウンロードする場合には、そのダウンロード用のプログラムは予め本体装置に格納しておくか、あるいは別な記録媒体からインストールされるものであっても良い。
【００８９】
本発明は上述した各実施形態に限定されるものではなく、請求項に示した範囲で種々の変更が可能であり、異なる実施形態にそれぞれ開示された技術的手段を適宜組み合わせて得られる実施形態についても、本発明の技術的範囲に含まれる。
【００９０】
【発明の効果】
本発明の画像処理方法は、以上のように、撮像して得られた画像データを出力するにあたって、撮像した時点からの経過時間によって、第１の処理から第２の処理へと色補正処理を変化する。
【００９１】
それゆえ、撮像した直後と撮像してから相当日時経過後とでユーザが好ましいと感じる色再現が変化しても、適宜２つの色補正処理の寄与率を変化させることで、ユーザの好みに合った画質を得ることができる。
【００９２】
また、本発明の画像処理方法は、以上のように、色補正処理を行うにあたって、その処理に用いるパラメータを、予め設定された固定値に限らず、ユーザ設定によって細かな調整を可能にする。
【００９３】
それゆえ、個別のユーザの好みに合わせた色補正処理を実現することができる。
【００９４】
さらにまた、本発明の画像処理装置は、以上のように、撮像して得られた画像データを画像出力装置に出力するにあたって、撮像した時点からの経過時間によって、第１の処理から第２の処理へと変化する。
【００９５】
それゆえ、撮像した直後と撮像してから相当日時経過後とでユーザが好ましいと感じる色再現が変化しても、適宜２つの色補正処理の寄与率を変化させることで、ユーザの好みに合った画質を得ることができる。
【００９６】
また、本発明の画像処理装置は、以上のように、色補正手段として、前記第１の色再現を実現する第１の色補正処理手段と、前記第２の色再現を実現する第２の色補正処理手段と、それらからの色補正データにそれぞれ重み係数を乗算して得られた積の和を出力画像データとして出力する信号処理手段とを備えて構成する。
【００９７】
それゆえ、前記経過時間に応じて徐々に第２の色再現のデータの割合を増加させ、連続した色補正処理を行うことができる。
【００９８】
さらにまた、本発明の画像処理装置は、以上のように、前記経過時間の変化に対する重みの変化特性を設定可能とする。
【００９９】
それゆえ、各経過時間の時点での２つの色補正処理の割合を、予め設定された固定値に限らず、ユーザ設定によって細かく調整できるようにするので、個別のユーザの好みに合わせた色補正処理を実現することができる。
【０１００】
また、本発明の画像形成装置は、以上のように、前記の何れかの画像処理装置を備えている。
【０１０１】
それゆえ、経過時間によって画像処理の内容を変化させることで、ユーザの好みに合った画質を得ることができる画像形成装置を実現することができる。
【０１０２】
さらにまた、本発明の撮像装置は、以上のように、前記の何れかの画像処理装置を備えている。
【０１０３】
それゆえ、経過時間によって画像処理の内容を変化させることで、ユーザの好みに合った画質を得ることができる撮像装置を実現することができる。
【０１０４】
また、本発明のプログラムは、以上のように、前述の画像処理方法をコンピュータに実行させる。
【０１０５】
それゆえ、前記の画像処理方法を汎用的なものとすることができる。
【０１０６】
さらにまた、本発明の記録媒体は、前記のプログラムをコンピュータが読取り可能に格納する。
【０１０７】
それゆえ、前記の画像処理方法を、コンピュータに容易に読込ませることができる。
【図面の簡単な説明】
【図１】本発明の実施の一形態の画像処理装置における色補正部の電気的構成を示すブロック図である。
【図２】前記図１で示す画像処理装置を搭載するプリンタ機能を備えたデジタルカメラの構成を示す斜視図である。
【図３】図２で示すデジタルカメラにおける本発明の実施の一形態の画像処理装置の詳細な構成を示すブロック図である。
【図４】色補正動作を詳細に説明するためのフローチャートである。
【図５】色補正処理の重み係数の経過時間に対する変化を示すグラフである。
【図６】本発明の実施の他の形態の画像処理装置の電気的構成を示すブロック図である。
【符号の説明】
１；１ａ，１ｂ　　色補正部
２，４２　　デジタルカメラ
３　　撮像レンズ
４　　ストロボ
５　　撮影ボタン
６　　モード設定ボタン
７　　メモリカード挿入口
８　　プリント開始ボタン
９　　記録紙の挿入／排出口
１１，４１　　画像処理装置
１２　　カラー画像入力装置
１３　　カラー画像出力装置
１４　　カラー画像表示装置
１５；１５ａ，１５ｂ　　制御部
１６；１６ａ，１６ｂ　　操作パネル
２１　　Ａ／Ｄ変換部
２２　　入力補正部
２３　　記憶部
２４　　黒生成／下色除去部
２５　　空間フィルタ処理部
２６　　出力階調補正部
２７　　階調再現処理部
３１　　正確な色変換処理部（第１の色補正処理手段）
３２　　好ましい色変換処理部（第２の色補正処理手段）
３３　　信号処理部
３４　　重み係数算出部
４１ａ，４１ｂ　　画像処理部
４３　　プリンタ
【図１】
2004023177.tif 000004
【図２】
2004023177.tif 000005
【図３】
2004023177.tif 000006
【図４】
2004023177.tif 000007
【図５】
2004023177.tif 000008
【図６】
2004023177.tif 000009