(57)【要約】【課題】  撮影時において、ユーザが自由に指定した色を残してそれ以外の色成分を消す色変換を簡易な操作で実現可能とする。【解決手段】  撮像部と、撮像部で得られた画像データを処理する画像処理部と、画像処理部より出力される画像データを記録する記録部とを備えた撮像装置において、撮像部によって撮像され、画像処理部より出力される画像データに基づいて画像を表示する電子ビューファインダが表示される（Ｓ４０２〜Ｓ４０７）。この電子ビューファインダに表示中の画像の所定領域に含まれる色情報に基づいて指定色が決定される（Ｓ４０８〜Ｓ４１０）。そして、決定された指定色以外の色を消した色変換するように画像処理部のパラメータが設定される（Ｓ４１１）。【選択図】  図４
2010220229.tif 000002
【特許請求の範囲】
【請求項１】
撮像手段と、前記撮像手段で得られた画像信号を処理する画像処理手段と、
前記画像処理手段より出力される画像信号を記録する記録手段とを備えた撮像装置であって、
前記撮像手段によって撮像され前記画像処理手段より出力される画像信号に基づいた電子ビューファインダ画面、及び色決定のための情報を表示可能な表示手段と、
前記表示手段に表示された色決定のための情報に基づいて色値を決定する色決定手段と、
前記色決定手段によって決定された色値を残し、前記色値以外の前記画像信号中の色成分値を特定の値に変換する色変換パラメータを決定する色変換パラメータ決定手段と、を有し、
前記表示手段は、前記色変換パラメータ決定手段により決定されたパラメータに基づいて前記画像信号を前記画像処理手段により処理された画像を前記電子ビューファインダ画面に表示することを特徴とする撮像装置。
【請求項２】
更に、撮影指示を行う撮像指示手段と、
前記撮像指示手段による撮像指示に応じて、前記画像処理手段によって前記パラメータに基づいて処理された画像信号を記憶媒体に記録する記憶手段を有することを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記表示手段は、前記色決定手段における所定領域を前記電子ビューファインダ画面上に枠として表示することを特徴とする請求項１に記載の撮像装置。
【請求項４】
前記所定領域に対応する前記枠の位置及びまたは大きさをユーザに設定させる枠設定手段を更に備えることを特徴とする請求項３に記載の撮像装置。
【請求項５】
前記表示手段は、前記色値を有するパッチ画像を前記電子ビューファインダ画面とともに所定位置に表示することを特徴とする請求項１に記載の撮像装置。
【請求項６】
前記色変換パラメータ決定手段は、前記特定の値を無彩色を示す値に変換する色変換パラメータを決定することを特徴とする請求項１に記載の撮像装置。
【請求項７】
前記色変換パラメータ決定手段は、ＹＵＶ色空間の中に設定された格子点のうち、前記色値に対応する格子点および前記色値の近傍の格子点以外の格子点のＵ、Ｖ値を０にする色変換パラメータ決定することを特徴とする請求項１に記載の撮像装置。
【請求項８】
更に、前記色決定手段による前記色値の決定を開始させるための指示を入力可能な入力手段と、
前記入力手段による入力がなされた場合に、前記撮像手段の露出を適正に設定する露出制御を実行する実行手段とを備え、
前記色決定手段は、前記実行手段によって露出制御された後に前記撮像手段によって撮像された画像を用いて前記色値を決定することを特徴とする請求項１乃至７のいずれか１項に記載の撮像装置。
【請求項９】
前記色決定手段を機能させる動作モードでは、前記実行手段による前記撮像手段の露出を適正に設定するための露出制御の実行間隔が通常撮影時における該露出制御の実行間隔よりも短く設定されることを特徴とする請求項８に記載の撮像装置。
【請求項１０】
前記色決定手段を機能させる動作モードでは、前記実行手段による露出制御のＡＥ測光をスポット測光で行うことを特徴とする請求項８または９に記載の撮像装置。
【請求項１１】
前記色決定手段による前記色値の決定を開始させるための指示を入力可能な入力手段と、
前記入力手段による入力がなされた場合に、前記画像処理手段におけるホワイトバランス処理用のパラメータの適正化制御を実行する実行手段とを更に備え、
前記色決定手段は、前記実行手段によってホワイトバランス処理用のパラメータが適正化された後の前記画像処理手段から出力される画像を用いて前記色値を決定することを特徴とする請求項１乃至１０のいずれか１項に記載の撮像装置。
【請求項１２】
前記色決定手段を機能させる動作モードでは、前記実行手段によるホワイトバランス処理用のパラメータの適正化処理の実行間隔が通常撮影時における該適正化処理の実行間隔よりも短く設定されることを特徴とする請求項１１に記載の撮像装置。
【請求項１３】
前記色決定手段を機能させる動作モードでは、通常撮影時よりもオートフォーカス制御の精度を低くすることを特徴とする請求項１に記載の撮像装置。
【請求項１４】
撮像手段と、前記撮像手段で得られた画像信号を処理する画像処理手段と、前記画像処理手段より出力される画像信号を記録する記録手段とを備えた撮像装置の制御方法であって、
前記撮像手段によって撮像され前記画像処理手段より出力される画像信号に基づいた電子ビューファインダ画面、及び色決定のための情報を表示する表示工程と、
前記表示工程で表示される色決定のための情報に基づいて色値を決定する色決定工程と、
前記色決定工程において決定された色値を残し、前記色値以外の前記画像信号中の色成分値を特定の値に変換する色変換パラメータを決定する色変換パラメータ決定工程と、
前記表示工程では、前記色変換パラメータ決定工程において決定されたパラメータに基づいて前記画像信号を前記画像処理手段により処理して前記電子ビューファインダ画面に表示することを特徴とする撮像装置の制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は色のユーザカスタマイズを可能とする撮像装置及びその制御方法に関する。
【背景技術】
【０００２】
近年、デジタルカメラが普及し、多くのユーザがデジタルカメラを使用する機会が増えている。このため、デジタルカメラに対するユーザのニーズもより多様化してきている。
【０００３】
このような課題を解決するために、色相、彩度、明度等のパラメータをカスタマイズすることを可能とし、撮影時においてユーザが所望する色再現性を実現可能とするデジタルカメラが存在する（特許文献１を参照）。しかしながら、これらパラメータの変化と色の変化の関係をユーザに示すことは困難なため、最適な設定をするにはユーザの熟練を必要としていた。
【０００４】
ユーザにわかりやすく色を調整させるための方法に関する提案としては、画像のレタッチ処理において画像中の所望のソース色を指示するとともに、変換先の目標色として所望の色を指示することにより、指示されたソース色が指示された目標色に変換されるような色変換処理を実行する構成がある（特許文献２を参照）。
【０００５】
ユーザにわかりやすく色を調整させるための方法に関する提案としては、特許文献１や特許文献２が挙げられる。特許文献１には画像のレタッチ処理において画像中の所望のソース色を指示するとともに、変換先の目標色として所望の色を指示することにより、指示されたソース色が指示された目標色に変換されるような色変換処理を実行する構成が記載されている。また、特許文献２では、撮像装置で変更したい元色として肌色を取り込み、その取り込んだ肌色とＲＯＭに記憶された肌色再現目標値とに基づいて色補正係数を算出する構成が記載されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開平１１−１８７３５１号公報
【特許文献２】特開２００４−１２９２２６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、特許文献１は画像調整に関するものであるが、色あい、明るさコントラスト等の各パラメータをカスタマイズすることを可能とし、ユーザがこれらパラメータの変化と色の変化の関係から、最適な設定をするにはユーザの熟練を必要としていた。
【０００８】
また、特許文献２においても、ユーザがソース色に対して目標色を指定する必要があり、特殊な画像効果をつけた画像を撮像装置上で撮像動作に伴って容易に作成することは困難であった。
【０００９】
本発明は上記の課題に鑑みてなされたものであり、撮像装置の限られたユーザインターフェースにおいて、撮影する画像に対して特殊な効果を明瞭且つ容易に設定可能とし、撮影時における簡易な操作で実現可能とすることを目的とする。
【課題を解決するための手段】
【００１０】
上記課題を解決するための本発明による撮像装置は、撮像手段と、前記撮像手段で得られた画像信号を処理する画像処理手段と、前記画像処理手段より出力される画像信号を記録する記録手段とを備えた撮像装置であって、前記撮像手段によって撮像され前記画像処理手段より出力される画像信号に基づいた電子ビューファインダ画面、及び色決定のための情報を表示可能な表示手段と、前記表示手段に表示された色決定のための情報に基づいて色値を決定する色決定手段と、前記色決定手段によって決定された色値を残し、前記色値以外の前記画像信号中の色成分値を特定の値に変換する色変換パラメータを決定する色変換パラメータ決定手段と、を有し、前記表示手段は、前記色変換パラメータ決定手段により決定されたパラメータに基づいて前記画像信号を前記画像処理手段により処理して前記電子ビューファインダ画面に表示することを特徴とする。
【００１１】
また、本発明による撮像装置の制御方法は、撮像手段と、前記撮像手段で得られた画像信号を処理する画像処理手段と、前記画像処理手段より出力される画像信号を記録する記録手段とを備えた撮像装置の制御方法であって、前記撮像手段によって撮像され前記画像処理手段より出力される画像信号に基づいた電子ビューファインダ画面、及び色決定のための情報を表示する表示工程と、前記表示工程で表示される色決定のための情報に基づいて色値を決定する色決定工程と、前記色決定工程において決定された色値を残し、前記色値以外の前記画像信号中の色成分値を特定の値に変換する色変換パラメータを決定する色変換パラメータ決定工程と、前記表示工程では、前記色変換パラメータ決定工程において決定されたパラメータに基づいて前記画像信号を前記画像処理手段により処理して前記電子ビューファインダ画面に表示することを特徴とする。
【発明の効果】
【００１２】
上記構成によれば、撮像装置の限られたユーザインターフェースでもユーザは自由、明瞭且つ容易に指定色を設定することが可能となり、撮影時において、ユーザが指定した色を残し、指定された色以外の色成分が特定の色成分値に変換する色変換が行われる特殊効果を施した画像を簡易な操作で得ることが可能となる。
【図面の簡単な説明】
【００１３】
【図１】実施形態による撮像装置の構成を示すブロック図である。
【図２】実施形態による撮像装置の外観を示す図である。
【図３】実施形態による画像処理を説明する図である。
【図４】第１実施形態による色残しモード動作時の処理を説明するフローチャートである。
【図５】実施形態の撮像装置におけるＣＣＤの色配列を説明する概念図である。
【図６】実施形態の撮像装置におけるＣＣＤ信号の補間後のデータを説明する概念図である。
【図７】実施形態の輝度信号作成処理に用いられるフィルタを説明する図である。
【図８】実施形態による指定色取り込みモード時のＥＶＦ画面例を示す図である。
【図９】３次元ルックアップテーブルによる色変換処理を説明する図である。
【図１０】第２実施形態による色残しモード動作時の処理を説明するフローチャートである。
【図１１】第３実施形態による色残しモード動作時における、露出制御及びホワイトバランス制御の実行タイミングの切り替え処理を説明するフローチャートである。
【図１２】被写体を撮影している際のＥＶＦ表示画像を説明する図である。
【図１３】色残しモードにおける処理後の画像を説明する図である。
【図１４】第１実施形態による色残しモードの露出固定およびホワイトバランス係数固定時の動作を説明するフローチャートである。
【発明を実施するための形態】
【００１４】
以下、添付の図面を参照して本発明の好適な実施形態について説明する。
【００１５】
＜第１実施形態＞
図１は、本実施形態による撮像装置１００（本例ではデジタルカメラとする）の構成例を示す図である。実空間の像は撮影レンズ１０１と、絞り機能を備えるシャッター１０２とを経て、光学像を電気信号に変換する撮像素子１０３上に結像される。Ａ／Ｄ変換部１０５は撮像素子１０３から出力されるアナログ信号をデジタル信号に変換する。タイミング発生部１０６は、メモリ制御部１０８及びシステム制御部１０９により制御され、撮像素子１０３、Ａ／Ｄ変換部１０５及びＤ／Ａ変換部１０７にクロック信号や制御信号を供給する。
【００１６】
画像処理部１１０は、Ａ／Ｄ変換部１０５からのデータ或いはメモリ制御部１０８からのデータに対して所定の画素補間処理や色変換処理を行う。また、画像処理部１１０は、撮像した画像データを用いて所定の演算処理を行う。システム制御部１０９は画像処理部１１０の演算結果に基づいて露光制御部１１１や測距制御部１１２を制御し、ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＥＦ（フラッシュプリ発光）処理を行っている。さらに、画像処理部１１０は、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＴＴＬ方式のＡＷＢ（オートホワイトバランス）処理も行っている。
【００１７】
メモリ制御部１０８は、Ａ／Ｄ変換部１０５、タイミング発生部１０６、Ｄ／Ａ変換部１０７、画像処理部１１０、画像表示メモリ１１３、メモリ１１４、圧縮・伸長部１１５を制御する。Ａ／Ｄ変換部１０５から出力されたデータは画像処理部１１０とメモリ制御部１０８を介して、或いはメモリ制御部１０８のみを介して、画像表示メモリ１１３或いはメモリ１１４に書き込まれる。なお、画像表示メモリ１１３に画像データを書き込む際には、画像表示部１１６が備える表示器の解像度に応じて間引きされて書き込まれる。画像表示メモリ１１３に書き込まれた表示用の画像データはＤ／Ａ変換部１０７を介して画像表示用のアナログ信号となり、画像表示部１１６により表示される。画像表示部１１６はＴＦＴＬＣＤ等で構成される。なお、画像表示部１１６を用いて撮像した画像データを逐次表示すれば、所謂電子ビューファインダ機能を実現することが可能である。画像表示部１１６は、システム制御部１０９の指示により任意に表示をＯＮ／ＯＦＦすることが可能であり、表示をＯＦＦにした場合には撮像装置１００の電力消費を大幅に低減することが出来る。
【００１８】
メモリ１１４は撮影した静止画像や動画像を格納するためのメモリである。メモリ１１４は所定枚数の静止画像や所定時間の動画像を格納するのに十分な記憶量を備えている。これにより、複数枚の静止画像を連続して撮影する連射撮影やパノラマ撮影の場合にも、高速かつ大量の画像書き込みをメモリ１１４に対して行うことが可能となる。また、メモリ１１４はシステム制御部１０９の作業領域としても使用することが可能である。
【００１９】
圧縮・伸長部１１５は、適応離散コサイン変換（ＡＤＣＴ）等により画像データを圧縮伸長する。圧縮・伸長部１１５はメモリ１１４に格納された画像を読み込んで圧縮処理或いは伸長処理を行い、処理を終えたデータをメモリ１１４に書き込む。
【００２０】
露光制御部１１１は、絞り機能を備えるシャッター１０２を制御し、フラッシュ１１７と連携することによりフラッシュ調光機能も有する。測距制御部１１２は、撮影レンズ１０１のフォーカシングを制御する。ズーム制御部１１８は撮影レンズ１０１のズーミングを制御する。バリア制御部１１９は、保護部１５１の動作を制御する。保護部１５１は、撮像装置１００のレンズ１０１、シャッター１０２、撮像素子１０３を含む撮像部を覆うことにより、撮像部の汚れや破損を防止するバリアである。一般には、保護部１５１はレンズ１０１の保護を主たる目的とする。フラッシュ１１７は、ＡＦ補助光の投光機能、フラッシュ調光機能を有する。露光制御部１１１、測距制御部１１２はＴＴＬ方式を用いて制御されている。すなわち、撮像により得られた画像データを画像処理部１１０によって演算した演算結果に基づき、システム制御部１０９が露光制御部１１１と測距制御部１１２に対して制御を行っている。システム制御部１０９は撮像装置１００の全体の制御を司る。メモリ１２０は、システム制御部１０９の動作用の定数、変数、プログラム等を記憶する。
【００２１】
表示部１２１は、システム制御部１０９でのプログラムの実行に応じて、文字や画像により動作状態やメッセージ等を提示する液晶表示装置（ＬＤＣ）やＬＥＤ等である。なお、表示部１２１は、動作上体やメッセージの一部を提示するための音声やブザー音等を出力可能なスピーカ或いは圧電ブザー（発音素子）等を含んでもよい。表示部１２１は、撮像装置１００の操作部近辺の視認し易い位置に単数或いは複数個所設置されてもよい。また、表示部１２１は、その一部の機能が光学ファインダ１０４内に設置されている。
【００２２】
表示部１２１の表示内容のうち、ＬＣＤ等に表示するものとしては、シングルショット／連写撮影表示、セルフタイマ表示、圧縮率表示、記録画素数表示、記録枚数表示、残撮影可能枚数表示、シャッタースピード表示、絞り値表示、露出補正表示、フラッシュ表示、赤目緩和表示、マクロ撮影表示、ブザー設定表示、時計用電池残量表示、電池残量表示、エラー表示、複数桁の数字による情報表示、記録媒体１２２及び１２３の着脱状態表示、通信Ｉ／Ｆ動作表示、日付・時刻表示、等がある。また、表示部１２１の表示内容のうち、光学ファインダ１０４内に表示するものとしては、合焦表示、手振れ警告表示、フラッシュ充電表示、シャッタースピード表示、絞り値表示、露出補正表示、等がある。
【００２３】
不揮発性メモリ１２４は電気的に消去・記録可能なメモリであり、例えばＥＥＰＲＯＭ等が用いられる。１２５、１２６、１２７、１２８、１２９及び１３０は、システム制御部１０９の各種の動作指示を入力するための操作部を示している。これらの操作部はスイッチやダイアル、タッチパネル、視線検知によるポインティング、音声認識装置等のいずれか或いはそれらのうちの複数の組み合わせで構成される。これらの操作部について、以下に具体的に説明する。
【００２４】
モードダイアルスイッチ１２５は、電源オフ、自動撮影モード、撮影モード、パノラマ撮影モード、再生モード、マルチ画面再生・消去モード、ＰＣ接続モード等の各機能モードを切り替え設定するためのスイッチである。シャッタースイッチ１２６は、シャッターボタン（図２の２０３）の操作途中（シャッターボタンの半押し）で信号ＳＷ１を出力し、シャッターボタンの操作完了（シャッターボタンの全押し）で信号ＳＷ２を出力する。信号ＳＷ１により、ＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＡＷＢ（オートホワイトバランス）処理、ＥＦ（フラッシュプリ発光）処理等の動作開始が指示される。また、信号ＳＷ２により、一連の撮影処理の動作開始が指示される。撮影処理では、撮像素子１０２から読み出した信号をＡ／Ｄ変換部１０５でデジタル変換し（露光処理）、メモリ制御部１０８を介してメモリ１１４に画像データ（ＲＡＷデータ）として書き込む、露光処理された信号を画像処理部１１０やメモリ制御部１０８で演算処理（現像処理）してメモリ１１４に書き込む、メモリ１１４から画像データを読み出して圧縮・伸長部１１５で圧縮を行い、記録媒体１２２或いは１２３に書き込む（記録処理）という一連の処理が行なわれる。
【００２５】
画像表示ＯＮ／ＯＦＦスイッチ１２８は、画像表示部１１６のＯＮ／ＯＦＦを設定する。この機能により、光学ファインダ１０４を用いて撮影を行う際に、ＴＦＴＬＣＤ等から成る画像表示部１１６への電源供給を遮断することができ、省電力を図ることが可能となる。クイックレビューＯＮ／ＯＦＦスイッチ１２９は、撮影直後に撮影した画像データを自動再生するクイックレビュー機能のＯＮ／ＯＦＦを設定する。なお画像表示部１１６をＯＦＦとした場合におけるクイックレビュー機能（画像表示をＯＦＦにした場合においても撮像された画像をレビュー可能とする）の設定をする機能を備えるものとする。
【００２６】
操作部１３０は各種ボタンやタッチパネル等を含み、１つのスイッチまたは複数のスイッチの組み合わせにより各種操作指示ボタンとして機能する。このような操作指示としては、例えば、メニューボタン、セットボタン、マクロボタン、マルチ画面再生改ページボタン、フラッシュ設定ボタン、単写／連写／セルフタイマ切り替えボタン、メニュー移動＋（プラス）ボタン、メニュー移動−（マイナス）ボタン、再生画像移動＋（プラス）ボタン、再生画像−（マイナス）ボタン、撮影画質選択ボタン、露出補正ボタン、日付／時間設定ボタン、画像削除ボタン、画像削除取消しボタン等があげられる。
【００２７】
電源制御部１３１は、電池検出回路、ＤＣ−ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成されている。電源制御部１３１は、電池の装着の有無、電池の種類、電池残量の検出を行い、検出結果及びシステム制御部１０９の指示に基づいてＤＣ−ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体を含む各部へ供給する。電源部１３４は、アルカリ電池やリチウム電池等の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、ＡＣアダプタ等から構成される。電源部１３４は、コネクタ１３２、１３３を介して電源制御部１３１に接続される。
【００２８】
インタフェース１３５、１３６はメモリカードやハードディスク等の記録媒体と撮像装置１００内のバスとを接続する。メモリカードやハードディスク等の記録媒体とインタフェース１３５、１３６との接続はコネクタ１３７、１３８を介してなされる。記録媒体着脱検知部１３９はコネクタ１３７及び／またはコネクタ１３８に記録媒体１２２及び／またはコネクタ１２３が装着されているか否かを検知する。
【００２９】
なお、本実施形態では記録媒体を取り付けるインタフェース及びコネクタを２系統持つものとして説明している。もちろん、記録媒体を取り付けるインタフェース及びコネクタは、単数或いは複数、いずれの系統数を備える構成としても構わない。また、異なる規格のインタフェース及びコネクタを組み合わせて備える構成としても構わない。このようなインタフェース及びコネクタとしては、ＰＣＭＣＩＡカードやＣＦ（コンパクトフラッシュ（登録商標））カード等の規格に準拠したものを用いて構成して構わない。
【００３０】
さらに、インタフェース１３５及び１３６、そしてコネクタ１３７及び１３８をＰＣＭＣＩＡカードやＣＦ（コンパクトフラッシュ（登録商標））カード等の規格に準拠したものを用いて構成した場合、ＬＡＮカードやモデムカード、ＵＳＢカード、ＩＥＥＥ１３９４カード、Ｐ１２８４カード、ＳＣＳＩカード、ＰＨＳ等の通信カード、等の各種通信カードを接続することにより、他のコンピュータやプリンタ等の周辺機器との間で画像データや画像データに付属した管理情報を転送し合うことを可能とすることが出来る。
【００３１】
光学ファインダ１０４は、画像表示部１１６による電子ビューファインダ機能を使用すること無しに、光学ファインダのみを用いて撮影を行うことを可能とする。また、上述したように、光学ファインダ１０４内には表示部１２１の一部の機能、例えば、合焦表示、手振れ警告表示、フラッシュ充電表示、シャッタースピード表示、絞り値表示、露出補正表示などが設置されている。
【００３２】
通信部１１０は、ＲＳ２３２ＣやＵＳＢ、ＩＥＥＥ１３９４、Ｐ１２８４、ＳＣＳＩ、モデム、ＬＡＮ、無線通信、等の各種通信機能を有する。接続部１１２は通信部１１０により撮像装置１００を他の機器と接続するためのコネクタである。或いは無線通信の場合は、接続部１１２はアンテナである。
【００３３】
記録媒体１２２、１２３は、半導体メモリや磁気ディスク等から構成される記録部１３９、１４２と、撮像装置１００とのインタフェース１４０、１４３、撮像装置１００と接続を行うコネクタ１４１、１４４を備えている。
【００３４】
図２は、撮像装置１００（デジタルカメラ）の斜視図である。電源スイッチ２０１は電源をＯＮ／ＯＦＦするためのボタンである。参照番号２０２、２０５〜２０９は上述した操作部１３０の一部を構成している。モード切り替えレバー２０２は、撮影モード、再生モード、動画撮影モード、静止画撮影モード等の各機能モードを切り替え設定する。シャッターボタン２０３は上述のシャッタースイッチ１２６として機能する。ＬＣＤ２０４は上述した画像表示部１１６の一部を構成し、電子ビューファインダとして機能するほか、静止画像及び／または動画像を再生して得られる画面を表示する。メニューボタン２０５は、撮影パラメータやカメラの設定を変更するためのメニュー画面をＯＮ、ＯＦＦさせるスイッチである。セットボタン２０６は、メニューボタン２０５の操作により表示されたメニュー画面でのメニューの選択・決定等に使用する。削除ボタン２０７は画像の削除を指定する。ディスプレイボタン２０８は上述の画像表示ＯＮ／ＯＦＦスイッチ１２８を構成し、ＬＣＤ２０４における表示の有無を切り替えるためのボタンである。十字ボタン２０９は、この上下左右ボタンを使ってメニュー画面での項目の移動などを行ったり、再生モードでは左右ボタンを押して画像送りを行ったりするのに使用され得る。
【００３５】
図３は本実施形態によるデジタルカメラ１００内の画像処理部１１０の処理を説明するブロック図である。なお、以下で説明する各処理に用いられるパラメータ値（マトリクス演算のためのパラメータや３次元ルックアップテーブルのパラメータ）はメモリ１２０に格納されており、画像処理部１１０により適宜読み出される。Ａ／Ｄ変換部１０５によりＡ／Ｄ変換されたＣＣＤデジタル信号に対して、まずホワイトバランス処理部３０１にてホワイトバランス処理が行われる。ホワイトバランス処理についてはここでは説明しないが、例えば特開２００３−２４４７２３号公報に記載されている方法を用いて行うことができる。ホワイトバランス処理が行われたＣＣＤデジタル信号は補間処理部３０２に供給される。本実施形態の撮像素子１０３は図５に示すようなベイヤー配列のカラーフィルタを有するものとする。従って、補間処理部３０２では、図５に示されたＣＣＤのベイヤー配列データを図６に示されるようなＲ、Ｇ１、Ｇ２、Ｂの補間データに変換する処理が行なわれる。補間されたＣＣＤデジタル信号はマトリクス演算処理部３０３に入力され、式（１）に示される４×３のマトリクス演算が行われ、Ｒｍ、Ｇｍ、Ｂｍが求められる。
【００３６】
【数１】
2010220229.tif 000003
【００３７】
マトリクス演算処理されたＣＣＤデジタル信号は色差ゲイン演算処理部３０４において色差信号にゲインがかけられる。即ち、Ｒｍ、Ｇｍ、Ｂｍ信号は式（２）に従ってＹ、Ｃｒ、Ｃｂ信号へと変換される。そして、得られたＣｒ、Ｃｂ信号に式（３）に従ってゲインがかけられる。その後、式（４）（式（２）の逆行列演算）により、Ｒｇ、Ｇｇ、Ｂｇ信号へと変換される。
【００３８】
【数２】
2010220229.tif 000004
【００３９】
色差ゲイン演算処理されたＣＣＤデジタル信号はガンマ処理部３０５へ送られる。ガンマ処理部３０５では以下の式（５）〜（７）を用いてＣＣＤデジタル信号のガンマ変換を行う。ここで、ＧａｍｍａＴａｂｌｅは１次元ルックアップテーブルである。
Ｒｔ＝ＧａｍｍａＴａｂｌｅ［Ｒｇ］      …式（５）
Ｇｔ＝ＧａｍｍａＴａｂｌｅ［Ｇｇ］      …式（６）
Ｂｔ＝ＧａｍｍａＴａｂｌｅ［Ｂｇ］      …式（７）
【００４０】
上記ガンマ処理が施されたＣＣＤデジタル信号は色相補正演算処理部３０６へ送られる。色相補正演算処理部３０６は、以下の式（８）によりＲｔ、Ｇｔ、Ｂｔ信号をＹ、Ｃｒ、Ｃｂ信号へ変換し、さらに式（９）によりＣｒ、Ｃｂ、信号を補正し、その後、式（１０）（式（９）の逆行列演算）により、Ｒｈ、Ｇｈ、Ｂｈ信号へ変換する。
【００４１】
【数３】
2010220229.tif 000005
【００４２】
色相補正演算処理部３０６で処理されたＣＣＤデジタル信号は色差信号変換処理部３０７へと送られる。色差信号変換処理部３０７は、式（１１）を用いてＲｈ、Ｇｈ、Ｂｈ信号よりＵＶ信号を作成する。
【００４３】
【数４】
2010220229.tif 000006
【００４４】
一方、ホワイトバランス処理部３０１でホワイトバランス処理が施されたＣＣＤデジタル信号は、輝度信号作成部３０８にも供給される。輝度信号作成選択部３０８は、ＣＣＤデジタル信号を輝度信号へと変換する。例えば、図５に示すような原色フィルタの場合の輝度信号は、Ｒ、Ｂの信号をすべて０にして、図７に示す係数を持つ２次元フィルタ処理を施したものを輝度信号とする。なお、補色フィルタの場合の輝度信号はそのまま図７に示す係数を持つ２次元フィルタ処理を施したものを輝度信号とする。補色輝度信号処理部３０８で作成された輝度信号は高域強調処理部３０９にてエッジ強調処理され、さらにガンマ処理部３１０にてガンマ変換処理されてＹ信号が作成される。
【００４５】
ガンマ処理部３１０から出力されるＹ信号および、色差信号変換処理部３０７から出力されるＵ、Ｖ信号は色変換処理部３１１にて、Ｙ’、Ｕ’、Ｖ’信号へと変換される。色変換処理部３１１では、３次元ルックアップテーブルを用いた変換処理がなされるが、詳細は後述する。
【００４６】
本実施形態のデジタルカメラ（撮像装置１００）は、ユーザが指定した任意の色をだけを残した色変換が可能な撮影モード（以下、色残しモードという）を有する。この色残しモードでは、ＬＣＤ２０４上に図８に示す電子ビューファインダ（ＥＶＦ）画面８０１を表示し、リアルタイムに表示される撮像画像中の色取り込み枠８０２内に所望の色が入るようにして所定の操作を行うことにより、色取り込み枠８０２内の画像の色を指定色として決定する。具体的には例えば、図１２に示されるようにユーザが取り込み枠８０２で中央部の物体Ａを指定するとＡの色が指定色として決定される。この時、物体Ａと物体Ｂは同じ色である。そして決定された指定色だけが残り、それ以外の色成分が消去されるように色変換処理部３１１のルックアップテーブルが設定される。この結果、その後のＥＶＦ画面８０１における表示画像、及びシャッターボタン２０３の操作により記録される撮影画像は、図１３に示されるように上記指定色を有する物体ＡとＢの色だけが残り、それ以外の物体は色成分が除去された、無彩色（グレースケール）になるように変換されたものとなる。以下、本実施形態の色残しモードについて詳細に説明する。
【００４７】
まず、色残しモードにおける色残し処理について説明する。色変換処理部３１１では、３次元ルックアップテーブルによりＹＵＶをＹ’Ｕ’Ｖ’へ変換する。本実施形態においては、３次元ルックアップテーブルの容量を減らすため、Ｙ信号、Ｕ信号、及びＶ信号の最小値から最大値までを８分割した、９×９×９＝７２９個の３次元代表格子点におけるＹＵＶ値のリスト（ルックアップテーブル）を用意し、代表格子点以外のＹＵＶ信号は補間により求めるものとする。図９は本実施形態の３次元ルックアップテーブルを概念的に示す図である。各格子点には変換後のＹＵＶ値が入ることになる。例えば、格子点１１０１は、（３２，２５５，３２）の点であり、変換前と変換後に変化がなければ格子点１１０１には（３２，２５５，３２）が割り当てられることになる。また、格子点１１０１が変換後では（３２，２３０，２８）のようになるのであれば、その値が当該格子点１１０１に入ることになる。
【００４８】
例えば、図９の立方格子１１０２内における点１１０３のＹＵＶ値は、立方格子１１０２の頂点に対応する各格子点（ａ〜ｈ）のＹＵＶ値からの補間演算により求める。補間演算は以下の式（１２）〜式（１４）により行われる。ただし、式（１２）〜式（１４）において、入力ＹＵＶ信号をＹ、Ｕ、Ｖ、そのときの出力ＹＵＶ信号をＹｏｕｔ（Ｙ，Ｕ，Ｖ）、Ｕｏｕｔ（Ｙ，Ｕ，Ｖ）、Ｖｏｕｔ（Ｙ，Ｕ，Ｖ）とする。また、入力ＹＵＶ信号のＹ、Ｕ、Ｖそれぞれの信号値より小さく、かつ一番近い値の代表格子点（図１１ではａ）の信号をＹｉ、Ｕｉ、Ｖｉとする。さらに、代表格子点出力信号をＹｏｕｔ（Ｙｉ，Ｕｉ，Ｖｉ）、Ｕｏｕｔ（Ｙｉ，Ｕｉ，Ｖｉ）、Ｖｏｕｔ（Ｙｉ，Ｕｉ，Ｖｉ）とし、代表格子点のステップ幅をＳｔｅｐ（本実施形態においては３２）とする。従って、例えば格子点ｂの信号はＹｉ＋ｓｔｅｐ、Ｕｉ、Ｖｉ、格子点ｃの信号はＹｉ、Ｕｉ＋ｓｔｅｐ、Ｖｉのようになる。
【００４９】
Ｙ＝Ｙｉ＋Ｙｆ
Ｕ＝Ｕｉ＋Ｕｆ
Ｖ＝Ｖｉ＋Ｖｆ
Ｙｏｕｔ（Ｙ，Ｕ，Ｖ）＝Ｙｏｕｔ（Ｙｉ＋Ｙｆ，Ｕｉ＋Ｕｆ，Ｖｉ＋Ｖｆ）＝
（Ｙｏｕｔ（Ｙｉ，Ｕｉ，Ｖｉ）×（Ｓｔｅｐ−Ｙｆ）×（Ｓｔｅｐ−Ｕｆ）×（Ｓｔｅｐ−Ｖｆ）
＋Ｙｏｕｔ（Ｙｉ＋Ｓｔｅｐ，Ｕｉ，Ｖｉ）×（Ｙｆ）×（Ｓｔｅｐ−Ｕｆ）×（Ｓｔｅｐ−Ｖｆ）
＋Ｙｏｕｔ（Ｙｉ，Ｕｉ＋Ｓｔｅｐ，Ｖｉ）×（Ｓｔｅｐ−Ｙｆ）×（Ｕｆ）×（Ｓｔｅｐ−Ｖｆ）
＋Ｙｏｕｔ（Ｙｉ，Ｕｉ，Ｖｉ＋Ｓｔｅｐ）×（Ｓｔｅｐ−Ｙｆ）×（Ｓｔｅｐ−Ｕｆ）×（Ｖｆ）
＋Ｙｏｕｔ（Ｙｉ＋Ｓｔｅｐ，Ｕｉ＋Ｓｔｅｐ，Ｖｉ）×（Ｙｆ）×（Ｕｆ）×（Ｓｔｅｐ−Ｖｆ）
＋Ｙｏｕｔ（Ｙｉ＋Ｓｔｅｐ，Ｕｉ，Ｖｉ＋Ｓｔｅｐ）×（Ｙｆ）×（Ｓｔｅｐ−Ｕｆ）×（Ｖｆ）
＋Ｙｏｕｔ（Ｙｉ，Ｕｉ＋Ｓｔｅｐ，Ｖｉ＋Ｓｔｅｐ）×（Ｓｔｅｐ−Ｙｆ）×（Ｕｆ）×（Ｖｆ）
＋Ｙｏｕｔ（Ｙｉ＋Ｓｔｅｐ，Ｕｉ＋Ｓｔｅｐ，Ｖｉ＋Ｓｔｅｐ）×（Ｙｆ）×（Ｕｆ）×（Ｖｆ））／（Ｓｔｅｐ×Ｓｔｅｐ×Ｓｔｅｐ）
…式（１２）
【００５０】
Ｕｏｕｔ（Ｙ，Ｕ，Ｖ）＝Ｕｏｕｔ（Ｙｉ＋Ｙｆ，Ｕｉ＋Ｕｆ，Ｖｉ＋Ｖｆ）＝
（Ｕｏｕｔ（Ｙｉ，Ｕｉ，Ｖｉ）×（Ｓｔｅｐ−Ｙｆ）×（Ｓｔｅｐ−Ｕｆ）×（Ｓｔｅｐ−Ｖｆ）
＋Ｕｏｕｔ（Ｙｉ＋Ｓｔｅｐ，Ｕｉ，Ｖｉ）×（Ｙｆ）×（Ｓｔｅｐ−Ｕｆ）×（Ｓｔｅｐ−Ｖｆ）
＋Ｕｏｕｔ（Ｙｉ，Ｕｉ＋Ｓｔｅｐ，Ｖｉ）×（Ｓｔｅｐ−Ｙｆ）×（Ｕｆ）×（Ｓｔｅｐ−Ｖｆ）
＋Ｕｏｕｔ（Ｙｉ，Ｕｉ，Ｖｉ＋Ｓｔｅｐ）×（Ｓｔｅｐ−Ｙｆ）×（Ｓｔｅｐ−Ｕｆ）×（Ｖｆ）
＋Ｕｏｕｔ（Ｙｉ＋Ｓｔｅｐ，Ｕｉ＋Ｓｔｅｐ，Ｖｉ）×（Ｙｆ）×（Ｕｆ）×（Ｓｔｅｐ−Ｖｆ）
＋Ｕｏｕｔ（Ｙｉ＋Ｓｔｅｐ，Ｕｉ，Ｖｉ＋Ｓｔｅｐ）×（Ｙｆ）×（Ｓｔｅｐ−Ｕｆ）×（Ｖｆ）
＋Ｕｏｕｔ（Ｙｉ，Ｕｉ＋Ｓｔｅｐ，Ｖｉ＋Ｓｔｅｐ）×（Ｓｔｅｐ−Ｙｆ）×（Ｕｆ）×（Ｖｆ）
＋Ｕｏｕｔ（Ｙｉ＋Ｓｔｅｐ，Ｕｉ＋Ｓｔｅｐ，Ｖｉ＋Ｓｔｅｐ）×（Ｙｆ）×（Ｕｆ）×（Ｖｆ））／（Ｓｔｅｐ×Ｓｔｅｐ×Ｓｔｅｐ）
…式（１３）
【００５１】
Ｖｏｕｔ（Ｙ，Ｕ，Ｖ）＝Ｖｏｕｔ（Ｙｉ＋Ｙｆ，Ｕｉ＋Ｕｆ，Ｖｉ＋Ｖｆ）＝
（Ｖｏｕｔ（Ｙｉ，Ｕｉ，Ｖｉ）×（Ｓｔｅｐ−Ｙｆ）×（Ｓｔｅｐ−Ｕｆ）×（Ｓｔｅｐ−Ｖｆ）
＋Ｖｏｕｔ（Ｙｉ＋Ｓｔｅｐ，Ｕｉ，Ｖｉ）×（Ｙｆ）×（Ｓｔｅｐ−Ｕｆ）×（Ｓｔｅｐ−Ｖｆ）
＋Ｖｏｕｔ（Ｙｉ，Ｕｉ＋Ｓｔｅｐ，Ｖｉ）×（Ｓｔｅｐ−Ｙｆ）×（Ｕｆ）×（Ｓｔｅｐ−Ｖｆ）
＋Ｖｏｕｔ（Ｙｉ，Ｕｉ，Ｖｉ＋Ｓｔｅｐ）×（Ｓｔｅｐ−Ｙｆ）×（Ｓｔｅｐ−Ｕｆ）×（Ｖｆ）
＋Ｖｏｕｔ（Ｙｉ＋Ｓｔｅｐ，Ｕｉ＋Ｓｔｅｐ，Ｖｉ）×（Ｙｆ）×（Ｕｆ）×（Ｓｔｅｐ−Ｖｆ）
＋Ｖｏｕｔ（Ｙｉ＋Ｓｔｅｐ，Ｕｉ，Ｖｉ＋Ｓｔｅｐ）×（Ｙｆ）×（Ｓｔｅｐ−Ｕｆ）×（Ｖｆ）
＋Ｖｏｕｔ（Ｙｉ，Ｕｉ＋Ｓｔｅｐ，Ｖｉ＋Ｓｔｅｐ）×（Ｓｔｅｐ−Ｙｆ）×（Ｕｆ）×（Ｖｆ）
＋Ｖｏｕｔ（Ｙｉ＋Ｓｔｅｐ，Ｕｉ＋Ｓｔｅｐ，Ｖｉ＋Ｓｔｅｐ）×（Ｙｆ）×（Ｕｆ）×（Ｖｆ））／（Ｓｔｅｐ×Ｓｔｅｐ×Ｓｔｅｐ）
…式（１４）
【００５２】
以下、上記式（１２）、式（１３）、及び式（１４）のルックアップテーブル変換及び補間演算式を簡易的に以下のような式（１５）で表すことにする。ただし、式（１５）において、Ｙ、Ｕ、Ｖは入力信号値を示し、ＬＵＴは図９に示すような９×９×９のルックアップテーブルを示し、Ｙｏｕｔ、Ｕｏｕｔ、Ｖｏｕｔはルックアップテーブル変換及び補間演算した結果（図３のＹ’，Ｕ’，Ｖ’）を示す。即ち、色変換処理部３１１は以下の式（１５）に示される変換処理を実行する。
（Ｙｏｕｔ，Ｕｏｕｔ，Ｖｏｕｔ）＝ＬＵＴ［（Ｙ，Ｕ，Ｖ）］      …式（１５）
【００５３】
上述したように、色残しモードで指定色が決定されると、指定色を内包する立方格子が決定され、指定色の座標位置のＹＵＶ信号値はそのまま変更せずに、それ以外の座標位置のＵ，Ｖ信号が０となるようにその立方格子を形成する各格子点の値を変更する。例えば、図９において決定された指定色が点１１０３のＹＵＶ値であった場合、立方格子１１０２の格子点ａ〜ｈの値はそのままに、それ以外の代表格子点の値は、Ｙ信号はそのままに、Ｕ、Ｖ信号値が無彩色を示す０となるように変更される。すなわち、指定色以外の色が全てグレースケールに変更される。そして、色変換処理部３１１では変更後の３次元ルックアップテーブルを用いて色変換処理を実行する。なお、以下の説明では、このような格子点の値の変更をパラメータの設定と称する。
【００５４】
以上のように、指定された色により３次元ルックアップテーブルの格子点データを決定して色変換を行うので、ユーザの好みの色設定を、再生する画像に対して容易に与えることができる。また、上記の色変換処理では、３次元ルックアップテーブルにおいて、変更したい色の近傍の代表格子点のみが変更される。このため、画像中の一部の色のみを残し、他の色の色信号を消す変換を容易且つ高速に実現することができる。即ち、マトリクス演算部３０３、色差ゲイン演算処理部３０４、ガンマ処理部３０５、色相補正演算処理部３０６等で利用されるパラメータを変更するものではないので、所望の色（指定色を含む色の領域）だけを残すことができる。
【００５５】
図４は、色残しモード撮影時における本実施形態のデジタルカメラの処理を説明するフローチャートである。なお、色残しモード以外の通常の撮影モードは一般的なデジタルカメラにおける動作と違いがない為、ここでは色残しモードについての説明に限定する。
【００５６】
ユーザがデジタルカメラの撮影モードを色残しモードに設定すると、ステップＳ４０１において前回の色残しモードにて設定された前回の設定パラメータが色変換処理部３１１のパラメータとして設定される。ステップＳ４０２においてシステム制御部１０９は露出制御開始タイミングか否かを判定する。露出制御開始タイミングであればステップＳ４０３において露光制御部１１１により露出処理を行う。この露出処理はＥＶＦに表示するための露出設定である。この露出処理を頻繁に実行すると画面のちらつきの原因となるため、その実行間隔は時定数により設定されている。例えば、２秒に１回の割合で露出処理が行われるように設定されている。従って、この間隔でステップＳ４０２における判定が肯定となり、ステップＳ４０３で露出制御が行なわれることになる。
【００５７】
次に、ステップＳ４０４においてシステム制御部１０９はホワイトバランス制御の開始タイミングか否かを判定する。ホワイトバランス制御の開始タイミングであればステップＳ４０５へ進み、ホワイトバランス制御処理が行われる。ホワイトバランス制御処理も露出処理と同様に頻繁に実行すると画面のちらつきとなるため、例えば５秒に１回の割合で実行するように時定数が設定されている。ホワイトバランス制御処理では、ホワイトバランス処理をするためのホワイトバランス係数を求め、画像処理部１１０が用いるホワイトバランス係数を更新する。
【００５８】
ステップＳ４０６では、ステップＳ４０３の露出制御で設定された絞り、で撮像が実行され、撮像素子からのリアルタイム出力であるスルー画像に対して画像処理部１１０はステップＳ４０５で設定されたホワイトバランス係数を用いて画像処理を行う。そして、ステップＳ４０７において、ステップＳ４０６で画像処理された画像データをＥＶＦとして機能するＬＣＤ２０４（画像表示部１１６）上に表示する。
【００５９】
ＬＣＤ２０４上には図８に示すＥＶＦ画面８０１が表示される。図８に示すように、色残しモードにおいては、ＬＣＤ２０４上には、ＥＶＦ画面８０１、ＥＶＦ画面８０１内の色取り込み枠８０２、指定色表示枠８０３が表示されている。操作部１３０の所定操作による指定色の設定（ステップＳ４０８〜Ｓ４１０）および、シャッターボタン２０３の操作による画像の撮影（ステップＳ４１２、Ｓ４１３）を行うことが可能である。
【００６０】
まず、指定色の設定の仕方について説明する。ユーザは指定色を指定するために、カメラの方向および光学ズームを動作させ、色取り込み枠８０２一杯に所望の色が入るように画角を設定する。十字ボタン２０９の左ボタンが押されると、指定色の取り込み指示が入力されたとしてステップＳ４０８からステップＳ４０９へ進む。ステップＳ４０９では、その時点における色取り込み枠８０２内の画像の画素データが取得され、ステップＳ４１０ではその平均値が算出され指定色として決定される。指定色が決定されると指定色を表すパッチが指定表示枠８０３に表示される。
【００６１】
なお、上記ステップＳ４１０において色取り込み枠８０２内の画素値の平均が算出されるが、その際に用いる画素データは電子ビューファインダの表示用に間引かれた画像データ（画像表示メモリ１１３に格納されている画像データ）であってもよいし、メモリ１１４に格納されている画像データであってもよい。
【００６２】
ステップＳ４１０にて指定色が決定されると、処理はステップＳ４１１進む。ステップＳ４１１では、指定色だけ残しそれ以外の色信号を消す変換パラメータが決定される。本実施形態では、図９等により上述したように、３次元ルックアップテーブルの指定色を内包する立方格子を形成する格子点の変更値はそのままに、それ以外の格子点のＵＶ信号が全て０となるように決定される。すなわち、指定色及び指定色を内包する立方格子に含まれる格子点値の色以外は、図１４（ｂ）のように輝度のＹはそのままなのでモノクロ階調で表現される。そして、ステップＳ４０９において、色変換処理部３１１の３次元ルックアップテーブルを更新する。以降のＥＶＦのための画像表示（ステップＳ４０６，Ｓ４０７）や撮影実行時（ステップＳ４１６，Ｓ４１７）における画像処理部１１０の画像処理では、色変換処理部３１１において更新された３次元ルックアップテーブルが用いられることになる。なお、上述したように撮影実行時においては、シャッターボタン２０３の半押し状態で信号ＳＷ１が発生して撮影のためのＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＡＷＢ（オートホワイトバランス）処理、ＥＦ（フラッシュプリ発光）処理等が実行され、ユーザがシャッターボタンを押して、全押し状態で信号ＳＷ２が発生して一連の撮影処理が実行される。こうした一連の撮影処理により、画像処理部１１０で画像処理された指定色を残し、指定色以外の色がグレースケールに変更された画像データが、圧縮・伸張部１１５で圧縮処理されて記録媒体１２２或いは１２３に記録される。
【００６３】
また、指定色を内包する単位立方格子の値をそのままにするとしたが、指定色を含める。
【００６４】
なお、上記実施形態においては、指定色を１色しか設定しない例について説明したが、これに限られるものではなく、残したい指定色を複数設定可能にしてもよい。
【００６５】
また、本実施形態において、指定の取り込みを行うにあたり十字ボタン２０９の左右ボタンを用いたが、これに限られるものではない。他の操作ボタンに割り当ててもよいし、もしくは専用のボタンを設けてもよいことは明らかである。
【００６６】
また、本実施形態において指定色取り込み時のＥＶＦ画面中の色取り込み枠は中央付近に固定されているが、ユーザの指定により色取り込み枠をＥＶＦ画面中の任意の場所に移動することが可能なようにすることも可能である。また同様に色取り込み枠の大きさもユーザの指定により変化可能なようにすることも可能である。
【００６７】
また、本実施形態にける色変換処理部３１１の演算処理に３次元ルックアップテーブル処理と補間演算処理を用いているが、これに限られるものではない。３次元ルックアップテーブルは必要な信号値を全て持ったものであれば補間演算処理は不要である。また、指定色以外の色信号を０にすることが可能な処理であれば、例えば色空間ごとにマトリクス演算の係数を変化させるマトリクス演算処理を用いて行うことも可能である。
【００６８】
ここで、簡単にマトリクス演算処理を用いた処理について説明する。上記実施形態において、図９の各格子点上に変換後のＹＵＶ信号の値が設定されているが、マトリクス演算処理を用いた処理においては各格子点上に下に示す式（１６）のＭ１１〜Ｍ３３の係数が格納されており、Ｙｉｎ、Ｕｉｎ、Ｖｉｎに応じて、Ｍ１１〜Ｍ３３の係数が決定され、さらに式（１６）の演算が行われＹｏｕｔ、Ｕｏｕｔ、Ｖｏｕｔが求められるようにしてもよい。ただし、Ｍ１１〜Ｍ３３の決定はＹｉｎ、Ｕｉｎ、Ｖｉｎに一番近い格子点に格納されている係数、または、上記実施形態のように、各格子点からの補間演算により求められるようにしてもよい。
【００６９】
【数５】
2010220229.tif 000007
【００７０】
＜第２実施形態＞
第１実施形態では、露光処理とホワイトバランス処理がそれぞれ所定の時定数で決定される時間間隔で実行されるのみである（ステップＳ４０２〜Ｓ４０５）。第２実施形態では、指定色を決定するための画像取り込み時（ステップＳ４０８）に通常撮影とは異なるホワイトバランス処理や露光制御処理を実行する。これにより、指定色の取り込み時の露出やホワイトバランスをより適正にして、より正確な指定色の取り込みを実現する。
【００７１】
以下に第２実施形態について、第１実施形態とは異なる部分について説明する。第２実施形態では、第１実施形態で説明したステップＳ４０８の色取り込み処理において、露出制御処理及びホワイトバランス処理が実行される。図１０は、取り込み枠８０２内の画像情報を取得する際の第２実施形態による動作を説明するフローチャートであり、図４のステップＳ４０８に置き換わるものである。以下、図１０を用いて第２実施形態を説明する。
【００７２】
十字ボタン２０９の左ボタンが押されると、指定色の取り込み指示が入力されたと判定され、処理はステップＳ４０８からＳ４０９へ進む。ステップＳ４０９では図１０のステップＳ５０１〜Ｓ５０４に示される処理が実行される。
【００７３】
まず、ステップＳ５０１においてステップＳ４０３と同様の露出制御処理が、ステップＳ５０２においてステップＳ４０５と同様のホワイトバランス制御処理が実行される。露出制御処理では、露出が決定され、決定された露出に基づいて絞りおよびシャッタースピードが決定される（Ｓ５０１）。撮像装置は決定された絞りおよびシャッタースピードで撮影を行い、撮影されたデータを基にホワイトバランス制御処理を行う（Ｓ５０２）。
【００７４】
その後、ステップＳ５０３へ進み、上記露出設定で撮像を実行し、画像処理部１１０はホワイトバランス制御処理で決定されたホワイトバランス係数を用いたホワイトバランス処理を含む画像処理を実行し、その結果をＥＶＦに表示する。そして、ステップＳ５０４において、ステップＳ５０３のＥＶＦ表示に用いられた画像（画像表示メモリ１１３或いはメモリ１１４に格納されている画像）より、色取り込み枠８０２内の画素データを取得する。ステップＳ４１０、Ｓ４１３では上記ステップＳ５０１〜Ｓ５０４の手順で取得された画素データを用いてそれぞれ指定色を決定する。
【００７５】
以上のように、第２実施形態では、指定色の決定時において露出処理とホワイトバランス処理を実行する点が第１実施形態と相違する。すなわち、第１実施形態では十字ボタン２０９の左ボタンが押された時にＥＶＦに表示されている画像データを用いて色取り込み枠８０２内の画素を平均して指定色の決定が行われる。これに対して、第２実施形態においては、十字ボタン２０９の左ボタンが押されると、さらに露出制御やホワイトバランス制御が行われ、それらの設定に従って撮像及び画像処理された画像を用いて色取り込み枠８０２の画素の平均値が求められる。
【００７６】
また、第２実施形態によれば、指定色を決定する際に、適正露出に制御してから撮像した画像が用いられる。このため、適正な明るさで取り込まれた画像を用いて指定色を決定でき、ユーザは指定色をより正確に取り込むことが可能となる。
【００７７】
また、上記第２実施形態によれば、指定色を決定する際に、ホワイトバランス処理部３０１のパラメータを適正化してから、画像処理部１１０によって処理された画像が用いられる。このため、適正な色で指定色を取り込むことが可能となり、ユーザが指定色をより正確に取り込むことが可能となる。
【００７８】
＜第３実施形態＞
以下に第３実施形態を説明する。上述したように、撮像装置は通常撮影モードと、指定色を設定し、指定色以外の色信号を消す色残し撮影モードの２つのモードを有する。第３実施形態では、色残しモードと通常撮影モードとにおいて露出制御処理の実行間隔とホワイトバランス制御処理の実行間隔を変更する。すなわち、色残しモード時における露出制御処理の実行間隔とホワイトバランス制御処理のそれぞれの実行間隔を、通常撮影モード時よりも短くする。
【００７９】
なお、通常撮影モードにおける処理は、図４に示した処理から色変換に関わる処理、即ちステップＳ４０８〜Ｓ４１１を除いたものとなる。すなわち、通常撮影モードが設定されると、はじめに露出の決定が行われる。露出の決定が行われると決定された露出に基づいて絞りおよびシャッタースピードが決定され、これが当該撮像装置の絞りおよびシャッタースピードとして設定される。ここでの露出制御はＥＶＦに表示するための画像の露出制御であり、頻繁に変更すると画面のちらつきとなるため、時定数が設定されており、例えば２秒に１回の割合で露出の制御を行うように設定されている（ステップＳ４０２，Ｓ４０３）。次に、設定された絞りおよびシャッタースピードで撮影されたデータを基にホワイトバランス処理が行われる。この処理も露出制御と同様に頻繁に変更すると画面のちらつきとなるため、例えば５秒に１回の割合でホワイトバランス処理をするためのホワイトバランス係数を求め、画像処理に用いるホワイトバランス係数を更新する（ステップＳ４０４，Ｓ４０５）。次に、撮像が実行され、画像処理部１１０による画像処理を経て画像がＥＶＦの画面上に表示される（ステップＳ４０６，Ｓ４０７）。ユーザがシャッターをレリーズすれば撮影動作（ステップＳ４１６，Ｓ４１７）を実行する。またレリーズが行われなければ、Ｓ４０２に戻る。
【００８０】
一方、色残し撮影モード時においては、指定色をより正確な色で取り込む必要があるため、図４中のステップＳ４０２，Ｓ４０３による露出制御処理の時定数は通常撮影モードより短く設定される。例えば、１秒に１回の割合で露出制御が行われるように設定されている。また、ステップＳ４０４，Ｓ４０５のホワイトバランス制御処理においても同様に通常撮影モードより短い、例えば１秒に１回の割合で実行されるように設定されている。ホワイトバランス係数を求め、ホワイトバランス係数の更新を行うように設定されている。これにより、色変換撮影モードのＥＶＦ表示のちらつきは大きくなるが、常に露出およびホワイトバランスが正しい状態に保たれるため、より正確な指定色を設定可能となる。
【００８１】
以上の動作を実現するために、システム制御部１０９では図１１に示す処理が実行される。まず、ステップＳ６０１において色残しモードへ移行したか否かが検出される。色残しモードへ移行した場合はステップＳ６０２へ進み、露出制御の実行間隔を単位時間当たりＭａ回（上記の例では１秒に１回）に設定する。更に、ステップＳ６０３へ進み、ホワイトバランス制御処理の実行間隔を単位時間当たりＭｗ回に設定する（上記の例では１秒に１回）。一方、色残しモードが終了した場合、例えば通常撮影モードに戻った場合は、ステップＳ６０４からステップＳ６０５へ進む。ステップＳ６０５では、露出制御の実行間隔を単位時間当たりＮａ回（上記の例では１秒に１／２回）に設定する。更に、ステップＳ６０６へ進み、ホワイトバランス制御処理の実行間隔を単位時間当たりＮｗ回に設定する（上記の例では１秒に１／６回）。
【００８２】
以上のように、通常撮影モードにおけるＥＶＦ表示中の露出制御動作が行われる単位時間当たりの回数をＮａ、色残しモードにおけるＥＶＦ表示中の露出制御動作が行われる単位時間当たりの回数をＭａとした場合、Ｎａ＜Ｍａとなるように設定することにより、色残しモードにおける色取り込み時の画像をより適正な露出でプレビューすることが可能となる。従って、ユーザが指定色をより正確に取り込みやすくすることができる。
【００８３】
すなわち、通常撮影モードにおけるホワイトバランス制御動作にかかる時間よりも色残しモードにおける色撮り込み時の露出制御動作にかかる時間を短くすることによって、撮影場所や時間、環境照度の変化に対応した適正露出での取り込みを行うことが出来る。
【００８４】
また、通常撮影モードにおけるＥＶＦ表示中のホワイトバランス制御動作が行われる単位時間当たりの回数をＮｗ、色残しモードにおける色取り込み時のＥＶＦ表示中のホワイトバランス制御動作が行われる単位時間当たりの回数をＭｗとした場合、Ｎｗ＜Ｍｗとなるように設定することにより、色取り込み時の画像をより適正な露出でプレビューすることが可能となる。従って、ユーザが指定色をより正確に取り込みやすくすることができる。
【００８５】
なお、上記第２実施形態において、色残しモードを決定するための画像取り込み時における露出制御のＡＥ測光は通常の撮影モードと同じ画像全体を用いた評価測光により行われているが、画像の色取り込み枠以外の領域が極端に暗かったり、もしくは明るかった場合においては、画面全体を考慮した評価測光では、色取り込み枠の色が適正な明るさで指定色を取り込むことができない場合がある。このような問題を解決するため、図１０中のＳ５０１の露出制御処理を行う場合に、取り込み枠内の輝度が適正になるように測光方式をスポット測光に変更して、露出制御を行うようにしてもよい。このようにすれば、色取り込み枠８０２内の輝度をより適正になるように制御できる。
【００８６】
なお、上記第２実施形態において、色残しモードの指定色取り込み時に露出制御処理およびホワイトバランス制御処理を実行する実施形態について述べたが、同様に色取り込み時にオートフォーカス処理を実行するようにしてもよい。ただし、色残しモードの指定色取り込み時においては、色取り込みを高速に行うためにオートフォーカスの精度を下げるようにしてもよい。オートフォーカスの精度を下げるのは、フォーカス位置を決定するための評価信号を得るためのフォーカスレンズの駆動ステップ幅を通常撮影時の駆動ステップ幅より大きく設定することで実現することが可能である。
【００８７】
また、指定色の色取り込み時と本露光撮影時の露出およびホワイトバランスが大きく異なる場合に、ユーザが意図した指定色を残した撮影ができなくなる場合があるため、図１４に示したようにしてＡＥロック（Ｓ７０４）及びＷＢロック（Ｓ７０７）された状態でステップＳ４１６以降の撮影動作を行うようにしてもよい。
【００８８】
また、ＷＢロックは、予め白色等の無彩色の被写体（白紙画像）を取り込むことによってそこから算出されたホワイトバランス制御値を用いる白紙ホワイトバランスを設定した場合は、白紙ホワイトバランス制御値でロック（固定）して、指定色を取り込むようにしてもよい。また、上記問題を解決するために指定色の色取り込み時と本露光の露出が異ならないように、露出補正を禁止するようにしてもよい。
【００８９】
以上説明したように、上記各実施形態によれば、指定色をカメラで実際に取り込むことにより、決定することが可能となるため、撮像操作に伴い、容易にユーザの指定した色を残し、指定された色以外の色成分が特定の色成分値に変換される色変換が行われた特殊効果を施した画像を簡易な操作で得ることが可能となる。
【００９０】
（本発明に係る他の実施の形態）
なお、上述の本発明の実施形態では、指定色以外の色成分値を無彩色を示す値へ変換するパラメータを決定したが、無彩色に限らず、他の１つの有彩色に変換されるようにしても良い。すなわち、Ｙは変更せずにそのままの階調性を保ったまま、指定色以外がある１つの有彩色で表されるようにしても良い。
【００９１】
上述した本発明の実施の形態における撮像装置を構成する各手段、並びに撮像方法の各ステップは、コンピュータのＲＡＭやＲＯＭなどに記憶されたプログラムが動作することによって実現できる。このプログラム及び上記プログラムを記録したコンピュータ読み取り可能な記憶媒体は本発明に含まれる。
【００９２】
また、本発明は、例えば、システム、装置、方法、プログラムもしくは記憶媒体等としての実施の形態も可能であり、具体的には、複数の機器から構成されるシステムに適用しても良いし、また、一つの機器からなる装置に適用しても良い。
【００９３】
なお、本発明は、前述した実施の形態の機能を実現するソフトウェアのプログラム（実施の形態では図３に示すフローチャートに対応したプログラム）を、システムあるいは装置に直接、あるいは遠隔から供給し、そのシステムあるいは装置のコンピュータが前記供給されたプログラムコードを読み出して実行することによっても達成される場合を含む。
【００９４】
したがって、本発明の機能処理をコンピュータで実現するために、前記コンピュータにインストールされるプログラムコード自体も本発明を実現するものである。つまり、本発明は、本発明の機能処理を実現するためのコンピュータプログラム自体も含まれる。
【００９５】
その場合、プログラムの機能を有していれば、オブジェクトコード、インタプリタにより実行されるプログラム、ＯＳに供給するスクリプトデータ等の形態であっても良い。
【００９６】
プログラムを供給するための記録媒体としては、例えば、フロッピー（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスク、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、磁気テープ、不揮発性のメモリカード、ＲＯＭ、ＤＶＤ（ＤＶＤ−ＲＯＭ，ＤＶＤ−Ｒ）などがある。
【００９７】
その他、プログラムの供給方法としては、クライアントコンピュータのブラウザを用いてインターネットのホームページに接続し、前記ホームページから本発明のコンピュータプログラムそのもの、もしくは圧縮され自動インストール機能を含むファイルをハードディスク等の記録媒体にダウンロードすることによっても供給できる。
【００９８】
また、本発明のプログラムを構成するプログラムコードを複数のファイルに分割し、それぞれのファイルを異なるホームページからダウンロードすることによっても実現可能である。つまり、本発明の機能処理をコンピュータで実現するためのプログラムファイルを複数のユーザに対してダウンロードさせるＷＷＷサーバも、本発明に含まれるものである。
【００９９】
また、本発明のプログラムを暗号化してＣＤ−ＲＯＭ等の記憶媒体に格納してユーザに配布し、所定の条件をクリアしたユーザに対し、インターネットを介してホームページから暗号化を解く鍵情報をダウンロードさせ、その鍵情報を使用することにより暗号化されたプログラムを実行してコンピュータにインストールさせて実現することも可能である。
【０１００】
また、コンピュータが、読み出したプログラムを実行することによって、前述した実施の形態の機能が実現される他、そのプログラムの指示に基づき、コンピュータ上で稼動しているＯＳなどが、実際の処理の一部または全部を行い、その処理によっても前述した実施の形態の機能が実現され得る。
【０１０１】
さらに、以上のように得られたプログラムを記録媒体を介して、あるいはコンピュータと接続した状態で、撮像装置内のメモリに書き込まれた後、そのプログラムの指示に基づき、実際の処理の一部または全部を行い、その処理によって前述した実施の形態の機能が実現される。
【図１】
2010220229.tif 000008
【図２】
2010220229.tif 000009
【図３】
2010220229.tif 000010
【図４】
2010220229.tif 000011
【図５】
2010220229.tif 000012
【図６】
2010220229.tif 000013
【図７】
2010220229.tif 000014
【図８】
2010220229.tif 000015
【図９】
2010220229.tif 000016
【図１０】
2010220229.tif 000017
【図１１】
2010220229.tif 000018
【図１２】
2010220229.tif 000019
【図１３】
2010220229.tif 000020
【図１４】
2010220229.tif 000021