(57)【要約】【課題】  基準被写体の色が急変するといった不自然な現象を改善する。【解決手段】  本発明の撮像装置は、登録部、撮像部、探索部、および色調整部を備える。登録部では、基準被写体の登録が行われる。撮像部は、被写体を撮影し、画像データを出力する。探索部は、画像データの画面内から、基準被写体に合致する特定領域を探索する。色調整部は、特定領域の色情報が、登録された基準被写体の色情報に近づく方向に、画像データを色調整する。【選択図】      図２
2006074483.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮影し、画像データを出力する撮像部と、
前記画像データの画面内から、予め登録された基準被写体に類似する特定領域を探索する探索部と、
前記特定領域の色情報が、登録された前記基準被写体の色情報に近づく方向に、前記画像データを色調整する色調整部と、
を備えたことを特徴とする撮像装置。
【請求項２】
請求項１に記載の撮像装置において、
前記撮像部は、被写体を所定のフレームレートで撮影して動画像データを出力し、
前記探索部は、探索した前記特定領域を、前記動画像データのフレーム間にわたって追尾し、
前記色調整部は、前記特定領域の色情報がフレーム間で視覚的な許容幅を超えて変化しないよう、前記動画像データのフレームに色調整を行う
ことを特徴とする撮像装置。
【請求項３】
請求項１に記載の撮像装置において、
前記撮像部は、所定フレームレートで撮像されるモニタ表示用の動画像データと、レリーズ操作に同期して撮影される記録保存用の静止画像データを出力し、
前記探索部は、前記動画像データから前記特定領域を探索し、前記特定領域を前記動画像データのフレーム間で追尾することで、前記静止画像データの前記特定領域を推測し、
前記色調整部は、
推測される前記特定領域の色情報を前記静止画像データまたは前記動画像データから求め、前記特定領域の色情報が、登録された前記基準被写体の色情報に近づく方向に、前記静止画像データを色調整する
ことを特徴とする撮像装置。
【請求項４】
請求項１ないし請求項３のいずれか１項に記載の撮像装置において、
前記色調整部は、前記色調整を前記特定領域に対して部分的に実施する
ことを特徴とする撮像装置。
【請求項５】
請求項１ないし請求項４のいずれか１項に記載の撮像装置において、
前記探索部は、前記撮像部で撮影された画像データ中から、前記基準被写体の画像指定を受け付けることにより、前記基準被写体を登録する登録部を有し、前記基準被写体の画像と類似する特定領域を探索する
ことを特徴とする撮像装置。
【請求項６】
請求項１ないし請求項５のいずれか１項に記載の撮像装置において、
前記探索部は、前記基準被写体の登録ライブラリを管理する登録部を有し、前記登録ライブラリから前記基準被写体の登録情報を読み出して、前記画像データの画面内から前記基準被写体に類似する特定領域を探索し、
色調整部は、前記特定領域が存在すると、前記特定領域の色情報が、登録された前記基準被写体の色情報に近づく方向に前記画像データを色調整する
ことを特徴とする撮像装置。
【請求項７】
請求項１ないし請求項６のいずれか１項に記載の撮像装置において、
前記画像データを記録保存する記録部を備え、
前記記録部は、記録保存する画像データのインデックス用途として、「前記基準被写体の画像」、「前記特定領域の画像」、および「前記特定領域の画面内位置の情報」のいずれかを記録する
ことを特徴とする撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、被写体を撮影して画像データを出力する撮像装置に関する。
【背景技術】
【０００２】
従来、画像データに対して色調整を施す技術が知られている。
例えば、特許文献１には、複数の代表色ごとに色調整値を予め定めておき、その代表色ごとに色調整を行う技術が開示されている。
また例えば、特許文献２には、動画像データに対して色調整を施す技術が開示されている。
【特許文献１】特開２００３−３２６９９号公報（請求項１など）
【特許文献２】特開平１０−２２４６４７号公報（請求項５など）
【発明の開示】
【発明が解決しようとする課題】
【０００３】
ところで、直射日光と日陰とでは色温度が異なる。そのため、両方が画面内に混在するような構図では、画面内に色温度のムラが生じる。この場合、同一被写体でありながら、直射日光下と日陰のいずれに位置するかによって、被写体の色が変化してしまう。
【０００４】
また、夜景撮影や室内撮影においても、蛍光灯、電球、窓際から差し込む太陽光などが複雑に混在するため、同一画面内において色温度のムラが生じやすい。この場合も、同一被写体でありながら、画面内の位置によって色が変化してしまう。
特に、動画像では、この被写体の色変化の瞬間が動画として再生されるため、その不自然さが一層目立ちやすい。
【０００５】
そこで、本発明の目的は、画面内に色温度のムラがあっても、その影響を抑えて、基準被写体の色再現を安定化させることである。
また、本発明の別の目的は、動画像の途中で基準被写体の色が急変するといった不自然な現象を改善することである。
【課題を解決するための手段】
【０００６】
《１》
本発明の撮像装置は、撮像部、探索部、および色調整部を備える。
撮像部は、被写体を撮影し、画像データを出力する。
探索部は、画像データの画面内から、予め登録された基準被写体に類似する特定領域を探索する。
色調整部は、特定領域の色情報が、登録された基準被写体の色情報に近づく方向に、画像データに対して色調整を行う。
【０００７】
《２》
なお好ましくは、撮像部は、被写体を所定のフレームレートで撮影して動画像データを出力する。このとき、探索部は、探索した特定領域を動画像データのフレーム間にわたって追尾する。色調整部は、特定領域の色情報がフレーム間で視覚的な許容幅を超えて変化しないよう、動画像データのフレームに色調整を行う。
【０００８】
《３》
なお好ましくは、撮像部は、所定フレームレートで撮像されるモニタ表示用の動画像データと、レリーズ操作に同期して撮影される記録保存用の静止画像データを出力する。このとき、探索部は、動画像データから特定領域を探索し、特定領域を動画像データのフレーム間で追尾する。この追尾により、探索部は、静止画像データにおける特定領域を推測する。色調整部では、このように推測される特定領域の色情報を、静止画像データまたは動画像データから求める。色調整部は、求めた特定領域の色情報が、登録された基準被写体の色情報に近づく方向に、静止画像データの色調整を行う。
【０００９】
《４》
また好ましくは、色調整部は、色調整を特定領域に対して部分的に実施する。
【００１０】
《５》
なお好ましくは、探索部は、撮像部で撮影された画像データ中から、基準被写体の画像指定を受け付けて、基準被写体を登録する登録部を有する。この場合、探索部は、基準被写体の画像と類似する特定領域を探索する。
【００１１】
《６》
また好ましくは、探索部は、基準被写体の登録ライブラリを管理する登録部を有する。この場合、探索部は、登録ライブラリから基準被写体の登録情報を読み出し、画像データの画面内から基準被写体に類似する特定領域を探索する。探索の結果、特定領域が存在すると、色調整部は、特定領域の色情報が、登録された基準被写体の色情報に近づく方向に、画像データを色調整する。
【００１２】
《７》
なお好ましくは、画像データを記録保存する記録部を備える。この記録部は、記録保存する画像データのインデックス用途として、「基準被写体の画像」、「特定領域の画像」、および「特定領域の画面内位置の情報」のいずれかを記録する。
【発明の効果】
【００１３】
（１）
本発明の撮像装置は、まず、撮像した画像データの画面内から、基準被写体と類似する特定領域を探索する。撮像装置は、この特定領域の色情報が、登録された基準被写体の理想的な色情報に近づくように、画像データの色調整を行う。
その結果、予め登録された基準被写体については、画面内の色温度ムラに拘わらず、安定した色再現を得ることが可能になる。
【００１４】
（２）
ところで、動画像データの撮影において、フレーム間で被写体の色が急変した場合、不自然な画像になる。そこで、本発明は、動画像データを撮影する場合、次の動作を行うことが好ましい。
まず、探索した特定領域を動画像データのフレーム間にわたって追尾する。この追尾中の特定領域の色情報がフレーム間で視覚的な許容幅を超えて変化しないよう、動画像データのフレームに色調整を行う。
その結果、動画像の途中で、基準被写体の色再現が急変するといった不自然な現象を改善できる。
【００１５】
（３）
また、撮像装置には、モニタ表示用の動画像データを生成し、ユーザーからのレリーズ操作に応じて静止画像を生成するものがある。
そこで、モニタ表示用の動画像データを生成する場合には、このモニタ表示用の動画像データを用いて特定領域の追尾を行い、その追尾結果から静止画像データの特定領域を推測することが好ましい。この推測によって、例えば、高速移動する基準被写体（例えば鳥や自動車など）であっても、その基準被写体の位置をより正確に絞ることが可能になる。
そのため、いきなりのレリーズ操作であっても、基準被写体の範囲（特定領域）を迅速にかつ正確に求めることが可能になり、予め登録された基準被写体について安定した色再現を得ることが可能になる。
【００１６】
（４）
ところで、基準被写体を重視して色調整を行うと、背景部分などの色が本来変化しない箇所まで、色調整の副作用で色が変化してしまう。
そこで、本発明では、上述した色調整を、特定領域に対して部分的に実施することが好ましい。この場合、基準被写体の色再現を安定化しつつ、特定領域以外（例えば背景部分）に対する色調整の副作用を防止することができる。
【００１７】
（５）
また、本発明では、撮像部で撮影された画像データ中から、基準被写体の画像指定を受け付けることが好ましい。このような登録方法であれば、基準被写体の特定パラメータ（例えば代表色）を入力するといった面倒な手間が不要になる。その結果、ユーザーは即座に基準被写体の登録を完了することが可能になる。
【００１８】
（６）
なお、本発明では、基準被写体の登録データをライブラリ化して保存しておくことが好ましい。
このような撮像装置では、ユーザーが頻繁に撮影する基準被写体（例えば、家族の一人一人）を事前にライブラリ登録するといった利用が可能になる。この場合、ユーザーは、撮影のたびに同じ基準被写体を何度も登録するといった手間が不要になり、使い勝手のよい装置が実現する。
【００１９】
（７）
また、本発明では、記録保存する画像データのインデックス用途として、「基準被写体の画像」、「特定領域の画像」、および「特定領域の画面内位置の情報」のいずれかを記録することが好ましい。
「基準被写体の画像」や「特定領域の画像」については、画像データの内容を端的に示すインデックス画像として後利用できる。
また、「特定領域の画面内位置の情報」が記録されていれば、画像データから特定領域を抽出してインデックス画像として後利用することが可能となる。また、「特定領域の画面内位置の情報」はインデックス画像に比べてデータ量が少なく、記録容量を節約できるという副次的な効果もある。
これらのインデックス用途の情報は、いずれも、本発明の色調整の過程で既に求めたものを二次的に利用できる。そのため、上記構成は、記録画像に対してインデックス付加を行っても、インデックス生成の処理コストは新たに発生しないという点で非常に優れている。
【発明を実施するための最良の形態】
【００２０】
図１は、本実施形態の電子カメラ１１を示すブロック図である。
図１において、電子カメラ１１には、撮影レンズ１２が装着される。この撮影レンズ１２の像空間には、撮像素子１３の受光面が配置される。この撮像素子１３は、タイミングジェネレータ２２ｂの出力パルスによって動作が制御される。
【００２１】
この撮像素子１３で生成された画像は、Ａ／Ｄ変換部１５および信号処理部１６を介して、バッファメモリ１７に一時記憶される。
このバッファメモリ１７は、バス１８に接続される。このバス１８には、画像処理部１９、画像解析部１９ａ、被写体抽出部１９ｂ、カードインターフェース２０、マイクロプロセッサ２２、圧縮伸張部２３、および画像表示部２４が接続される。
【００２２】
この内、カードインターフェース２０は、着脱自在なメモリカード２１に対してデータの読み書きを行う。
また、マイクロプロセッサ２２には、スイッチ群２２ａからユーザー操作の信号が入力される。このスイッチ群２２ａには、レリーズ釦、メニュー釦、モード操作釦、マルチセレクタ釦、コマンドダイヤルなどが含まれる。
さらに、画像表示部２４は、電子カメラ１１の背面に設けられたモニタ画面２５に画像を表示する。このモニタ画面２５にはタッチパネル２５ａが設けられる。
【００２３】
［発明との対応関係］
以下、発明と本実施形態との対応関係について説明する。なお、ここでの対応関係は、参考のために一解釈を例示するものであり、本発明を徒らに限定するものではない。
請求項記載の撮像部は、撮像素子１３、およびＡ／Ｄ変換部１５に対応する。
請求項記載の探索部は、『画面内から基準被写体に類似する特定領域を探索または追尾する機能』を実現する被写体抽出部１９ｂに対応する。
請求項記載の色調整部は、画像解析部１９ａおよび画像処理部１９に対応する。
請求項記載の記録部は、『画像データにインデックスを付加して記録する機能』を実現するカードインターフェース２０、およびマイクロプロセッサ２２に対応する。
請求項記載の登録部は、『基準被写体を登録する機能』を実現するスイッチ群２２ａ、カードインターフェース２０、およびマイクロプロセッサ２２に対応する。
【００２４】
［本実施形態の動作説明］
図２および図３は、本実施形態の動作を説明する流れ図である。
以下、これらの流れ図に示すステップ番号に沿って、本実施形態の動作説明を行う。
【００２５】
ステップＳ０：  電子カメラ１１の主電源が投入されると、マイクロプロセッサ２２は、スイッチ群２２ａやタッチパネル２５ａを介して、ユーザーから基準被写体のライブラリへの登録を受け付ける。
この場合、ユーザーは下記のような登録方法を選択できる。
【００２６】
（１）ユーザーは、まず、メモリカード２１内に記録された画像データ群の中から、基準被写体を含む画像データを適宜選択して再生表示する。ユーザーは、この表示を見ながら、タッチパネル２５ａやマルチセレクタ釦を操作して、モニタ画面内に占める基準被写体の領域を登録画像として指定入力する。なお、電子カメラ１１に注視点入力機構を設け、ユーザーがこの注視点入力機構を用いて基準被写体の領域を指定してもよい。
【００２７】
（２）ユーザーは、メニュー選択により、基準被写体の種類（人物、顔など）を選択する。マイクロプロセッサ２２は、この種類に合致した画面内の基準被写体を、基準被写体の種類に応じて予め定められた抽出方法（例えば、選択された基準被写体の種類が顔の場合には公知の顔認識技術など）を用いて抽出して、抽出された領域を含む領域（基準被写体の領域）の画像を基準被写体の登録画像とする。
【００２８】
ステップＳ１：  画像解析部１９ａは、この基準被写体の登録画像について、色相Ｈ、彩度Ｓ、および明度Ｌの平均値を求める。さらに、画像解析部１９ａは、登録画像についてヒストグラム解析を行い、色相Ｈ、彩度Ｓ、および明度Ｌの最頻度値（つまり基準被写体の領域内の最大面積を占める領域の値）を求める。
マイクロプロセッサ２２は、基準被写体の登録画像と、これら６つの値（以下『特性値』という）とを、カードインターフェース２０を介してメモリカード２１に記録する。このような処理により、メモリカード２１内には、基準被写体の登録ライブラリが作成される。
【００２９】
ステップＳ２：  マイクロプロセッサ２２は、ユーザーが電子カメラ１１を撮影モードに切り換えると、基準被写体のライブラリ登録が完了したと判断し、ステップＳ３に動作を移行する。それ以外の場合、マイクロプロセッサ２２はステップＳ０に動作を戻し、ユーザーからの基準被写体の指定操作を更に受け付ける。
【００３０】
ステップＳ３：  これ以降、動画撮影が開始される。すなわち、マイクロプロセッサ２２は、タイミングジェネレータ２２ｂを介して、撮像素子１３に間引き読み出しの駆動パルスを与える。その結果、撮像素子１３からは、動画像データのフレーム（ここでは間引き読み出しによるドラフト画像）が所定のフレームレートで読み出される。
【００３１】
ステップＳ４：  動画像データの撮影開始直後、または基準被写体をフレーム内から見失っている場合、マイクロプロセッサ２２は、ステップＳ５に動作を移行する。
一方、動画像データのフレーム間にわたって基準被写体を追尾中の場合、マイクロプロセッサ２２はステップＳ７に動作を移行する。
【００３２】
ステップＳ５：  被写体抽出部１９ｂは、動画像データの現フレームを探索範囲として、基準被写体と類似する特定領域を探索する。このような画像探索には、パターンマッチング法（例えば、残差逐次検定法）などが使用可能である。
このような手法によれば、登録された基準被写体像領域と、現フレーム動画像データ中の基準被写体像に相当する領域とで、画像データの明るさ、色などが若干異なる場合でも、両者を対応付けることが可能となる。
なお、被写体抽出部１９ｂは、下調べとして、基準被写体の登録画像の特徴的な色（一般的な画像において出現頻度の低い色、例えば風景シーンにおける肌色）が、動画像の現フレーム内に存在するか否かを判定してもよい。このような下調べにより、ライブラリ登録された基準被写体のうち、どの基準被写体が画面内に存在しているかを簡単に高速テストすることができる。
また、この下調べにより、現フレームのどの辺に基準被写体が位置するかを、大雑把に把握し、探索範囲を限定することも可能になる。この大雑把な位置からパターンマッチングを開始することにより、基準被写体と類似する特定領域を短時間に探索することが可能になる。
【００３３】
ステップＳ６：  画像解析部１９ａは、基準被写体に類似する特定領域について、６つの特性値（色相Ｈ、彩度Ｓ、明度Ｌの平均値、および色相Ｈ、彩度Ｓ、明度Ｌの最頻度値）を求める。
画像解析部１９ａは、特定領域の特性値と、登録画像の特性値との間でそれぞれ差を求め、視覚的に同一に見える許容差の範囲に収まるか否かを判定する。
特性値の差が許容差の範囲外の場合、画像解析部１９ａは、特性値の差を縮める色調整（例えば、色相調整、彩度調整、明度調整）のパラメータを決定し、画像処理部１９に伝達する。
なお、このパラメータについては、前述の平均値の差を優先的に縮めるパラメータと、最頻度値の差を優先的に縮めるパラメータとがある。どちらのパラメータを採用するかについては、ユーザーがカスタム設定により予め設定しておくことが好ましい。
画像処理部１９は、画像解析部１９ａより伝達されたパラメータを用いて、現フレーム中の特定領域に対して色調整を施す。
この現フレームの色調整を完了すると、マイクロプロセッサ２２はステップＳ９に動作を移行する。
【００３４】
ステップＳ７：  このステップでは、動画像データの直前フレームにおいて、基準被写体の探索に成功している。そこで、直前フレームにおける基準被写体の位置付近に探索範囲を絞って、現フレームから基準被写体と類似する特定領域を探索する。このような画像探索にも、パターンマッチング法（例えば、残差逐次検定法）などが使用可能である。
【００３５】
ステップＳ８：  画像解析部１９ａは、基準被写体に類似する特定領域について、特性値（色相Ｈ、彩度Ｓ、明度Ｌの平均値、および色相Ｈ、彩度Ｓ、明度Ｌの最頻度値）を求める。
画像解析部１９ａは、直前フレームと現フレームとの間で特性値の差を求め、視覚的に同一に見える許容差の範囲に収まるか否かを判定する。
特性値の差が許容差の範囲外の場合、画像解析部１９ａは、この特性値の差を縮める色調整（例えば、色相調整、彩度調整、明度調整）のパラメータを決定し、画像処理部１９に伝達する。
ここでも、特性値の内、平均値または最頻度値のいずれを優先的に近づけるかを選択することが可能である。
画像処理部１９は、決定されたパラメータを用いて、現フレーム中の特定領域に対して色調整を施す。
この現フレームの色調整を完了すると、マイクロプロセッサ２２はステップＳ９に動作を移行する。
【００３６】
ステップＳ９：  画像表示部２４は、色調整その他の処理を完了した現フレームをモニタ表示する。
【００３７】
ステップＳ１０：  マイクロプロセッサ２２は、スイッチ群２２ａを介してユーザーから動画記録の指示があったか否かを判断する。
動画記録の指示があった場合、マイクロプロセッサ２２はステップＳ１１に動作を移行する。
一方、動画記録の停止指示があった場合、マイクロプロセッサ２２はステップＳ１２に動作を移行する。
なお、動画記録の指示がなかった場合、マイクロプロセッサ２２は、動画像データの記録処理を行わずにステップＳ１３に動作を移行する。
【００３８】
ステップＳ１１：  ユーザーからの動画記録の指示に従って、マイクロプロセッサ２２は、バッファメモリ１７内の色調整等の処理を施された現フレームの動画像データに圧縮処理を施す。この圧縮処理により、動画ファイル（ＭｏｔｉｏｎＪＰＥＧやＭＰＥＧなど）のフレームデータが生成され、バッファメモリ１７に蓄積される。この処理後、マイクロプロセッサ２２はステップＳ１３に動作を移行する。
なお、カードインターフェース２０は、逐次生成される動画ファイルが所定の書き込み量貯まるたびに、メモリカード２１への書き込みを順次実施する。
【００３９】
ステップＳ１２：  このステップでは、動画記録の停止処理に従って、動画ファイルの生成が完了する。
この動画ファイルに対して、マイクロプロセッサ２２は、下記のいずれかをインデックスとして、動画ファイルに関連付けて付加記録する。
（１）基準被写体の登録画像
（２）代表フレーム（例えば、最初のフレーム）における特定領域の画像
（３）代表フレームにおける特定領域の画面内位置の情報
この処理後、マイクロプロセッサ２２はステップＳ１３に動作を移行する。
【００４０】
ステップＳ１３：  ここで、マイクロプロセッサ２２は、スイッチ群２２ａを介してユーザーから静止画記録のレリーズ操作があったか否かを判断する。
静止画記録のレリーズ操作があった場合、マイクロプロセッサ２２はステップＳ１４に動作を移行する。
一方、静止画記録のレリーズ操作がない場合、マイクロプロセッサ２２はステップＳ３に動作を戻して、動画像データの撮影を継続する。
【００４１】
ステップＳ１４：  マイクロプロセッサ２２は、タイミングジェネレータ２２ｂを介して、撮像素子１３に静止画像読み出しの駆動パルスを与える。その結果、撮像素子１３からは、静止画像データ（ここでは全画素読み出しによる高解像度画像）が所定の読み出し速度で読み出される。
【００４２】
ステップＳ１５：  ここで、マイクロプロセッサ２２は、直前まで基準被写体の追尾が継続していたか否かを判断する。
追尾が継続していた場合、マイクロプロセッサ２２は、ステップＳ１８に動作を移行する。
一方、基準被写体を見失うなど、追尾中ではない場合、マイクロプロセッサ２２は、ステップＳ１６に動作を移行する。
【００４３】
ステップＳ１６：  被写体抽出部１９ｂは、静止画像データ（あるいは、静止画像データを低解像度化したプレビュー画像）の全域を探索範囲として、基準被写体と類似する特定領域を探索する。このような画像探索には、パターンマッチング法（例えば、残差逐次検定法）などが使用可能である。
なお、被写体抽出部１９ｂは、下調べとして、基準被写体の登録画像の特徴的な色（一般的な画像において出現頻度の低い色）が、静止画像データに存在するか否かを判定してもよい。このような下調べにより、ライブラリ登録された基準被写体のうち、どの基準被写体が画面内に存在しているかを簡単に高速テストすることができる。
また、この下調べにより、静止画像データのどの辺に基準被写体が位置するかを、大雑把に把握することも可能になる。この大雑把な位置からパターンマッチングを開始することにより、基準被写体と類似する特定領域を短時間に探索することが可能になる。
【００４４】
ステップＳ１７：  画像解析部１９ａは、ステップＳ１６の探索によって得られた基準被写体に類似する特定領域について、６つの特性値（色相Ｈ、彩度Ｓ、明度Ｌの平均値、および色相Ｈ、彩度Ｓ、明度Ｌの最頻度値）を求める。
画像解析部１９ａは、特定領域の特性値と、登録画像の特性値との差をそれぞれ求め、視覚的に同一に見える許容差の範囲内に収まるか否かを判定する。
特性値の差が許容差の範囲外の場合、画像解析部１９ａは、特性値の差を縮める色調整（例えば、色相調整、彩度調整、明度調整）のパラメータを決定し、画像処理部１９に伝達する。
ここでは、カスタム設定により、平均値の差を優先的に縮めるパラメータと、最頻度値の差を優先的に縮めるパラメータとのいずれかを選択できる。
画像処理部１９は、選択されたパラメータを用いて、静止画像データの特定領域に対して色調整を施す。
この静止画像データの色調整を完了すると、マイクロプロセッサ２２はステップＳ２１に動作を移行する。
【００４５】
ステップＳ１８：  このステップでは、直前まで基準被写体の追尾に成功している。そこで、被写体抽出部１９ｂは、直前までの基準被写体の撮影画面内の位置や移動経路から、静止画像データの撮影時点に起こる基準被写体の位置を推測する。
【００４６】
ステップＳ１９：  被写体抽出部１９ｂは、推測された基準被写体の位置の付近に探索範囲を絞る。その上で、被写体抽出部１９ｂは、静止画像データ（あるいは、静止画像データを低解像度化したプレビュー画像）から、基準被写体に類似する特定領域を探索する。このような画像探索には、パターンマッチング法（例えば、残差逐次検定法）などが使用可能である。
【００４７】
ステップＳ２０：  画像解析部１９ａは、基準被写体に類似する特定領域について、６つの特性値（色相Ｈ、彩度Ｓ、明度Ｌの平均値、および色相Ｈ、彩度Ｓ、明度Ｌの最頻度値）を求める。
画像解析部１９ａは、直前フレームと現フレームとの間で特性値の差を求め、視覚的に同一に見える許容差の範囲か否かを判定する。
特性値の差が許容差の範囲外の場合、画像解析部１９ａは、この特性値の差を縮める色調整（例えば、色相調整、彩度調整、明度調整）のパラメータを決定し、画像処理部１９に伝達する。
ここでも、特性値の内、平均値または最頻度値のいずれを優先的に近づけるかをカスタム設定により予め選択しておくことが可能である。
画像処理部１９は、決定されたパラメータを用いて、静止画像データの特定領域に対して色調整を施す。
このような色調整を完了すると、マイクロプロセッサ２２はステップＳ２１に動作を移行する。
【００４８】
ステップＳ２１：  画像表示部２４は、色調整その他の処理を完了した静止画像データをモニタ画面２５にプレビュー表示する。
【００４９】
ステップＳ２２：  圧縮伸張部２３は、色調整その他の処理を完了した静止画像データを画像圧縮し、静止画圧縮ファイルを生成する。
なお、カードインターフェース２０は、この静止画圧縮ファイルをメモリカード２１に記録する。
一方、マイクロプロセッサ２２は、下記のいずれかをインデックスとして、メモリカード２１内の静止画圧縮ファイルに関連付けて付加記録する。
（１）基準被写体の登録画像
（２）静止画像データにおける特定領域の画像
（３）静止画像データにおける特定領域の画面内位置の情報
【００５０】
ステップＳ２３：  ここで、マイクロプロセッサ２２は、電子カメラ１１が連写モードに設定されているか否かを判定する。
ここで、単写モードの場合、マイクロプロセッサ２２は、静止画撮影を完了して、ステップＳ３に動作を戻す。
また、連写モードに設定されており、レリーズ釦が継続的に押されている場合、マイクロプロセッサ２２は、ステップＳ１４に動作を戻して静止画撮影を継続する。
一方、連写モードに設定されており、レリーズ釦の押圧が解除されている場合、マイクロプロセッサ２２は、静止画像データの連写動作を完了して、ステップＳ３に動作を戻す。
【００５１】
以上説明した一連の動作により、本実施形態では、動画像データおよび静止画像データのいずれについても、基準被写体の色が急変するといった不自然な現象を改善することができる。
【００５２】
図４は、本実施形態の効果を説明する図である。ここでは、晴天下の人物全身を基準被写体として登録した例について説明する。図４（ａ）は、基準被写体登録時の各特性値、及び視覚的に同一に見える各特性値毎の許容差範囲を示している。
【００５３】
なお、ここでは、色相Ｈ、彩度Ｓ、明度Ｌの平均値は，特に顔認識技術などを用いて抽出された顔領域について算出され、色相Ｈ、彩度Ｓ、明度Ｌの最頻度値は、登録された基準被写体の服装部分を抽出して算出された場合について説明する。
このように色相Ｈ、彩度Ｓ、明度Ｌの平均値は、特定領域の一部の領域について算出するものであってもよい。
【００５４】
図４中の明度Ｌは、画像をＣＩＥのＬＡＢ表色系で表現した際のＬ＊値として与えられ、Ｌ＝０が最も暗く（黒色）、Ｌ＝１００が最も明るい状態（白色）を表現する。また、色相Ｈは、ＣＩＥのＬＡＢ表色系で表現した際のａ＊、ｂ＊の値をもとに、式１で与えられ、０〜３６０°の値をとる。０°がマゼンダに相当し、値が大きくなるにつれ赤、橙、黄緑、緑となり、１８０°で青緑、さらに値が大きくなるにつれ、シアン、青、紫と変化し、０°で再びマゼンダに戻る。
H＝tanθ（b*／a*）            （tanθ（b*／a*）≧０の場合）
H＝tanθ（b*／a*）＋３６０°  （tanθ（b*／a*）＜０の場合）
・・・式１
【００５５】
また、彩度Ｓは、ＣＩＥのＬＡＢ表色系で表現した際のａ＊、ｂ＊の値をもとに、式２で与えられ、Ｓ＝０が最も彩度が低く、Ｓ＝１００が最も彩度が高い状態を表現する。
Ｓ＝√（a*2 ＋b*2 ）    ・・・式２
【００５６】
図４（ｂ）は、撮影シーンが変わり、電球照明下にいる人物（基準被写体）に対して色調整を行った例を示す。色調整を行わない場合には、基準被写体登録時とは照明が変化したことにより、肌色領域の色相は黄色や赤色に偏り、最頻度値領域（服装部分）の色相も黄色から橙色の方向にずれている。
【００５７】
これに対して、色調整後の画像データは、顔領域、服装領域ともに、各特性値は図４（ａ）に示された許容範囲内の値に調整されており、登録された基準被写体と視覚的に同一とみなせる範囲となっている。
上述したような色調整の処理によって、画面内の色温度ムラによって生じる基準被写体の色変化を確実に抑制することができる。
【００５８】
上述の基準被写体の登録とそれに基づく撮影は、必ずしも時間的に連続して行われる必要はない。すなわち、撮影者は、既に撮影した画像から予め基準被写体をライブラリ登録しておき、例えば日をおいて撮影を行う際に、撮影画像の中の基準被写体に相当する被写体の色を、登録された基準被写体の色と視覚的に同じとみなせるように調整することができる。
【００５９】
さらには、上記実施形態においては、基準被写体は、予めライブラリ登録され、撮影データのうち、登録された基準被写体と類似する特定領域を検索する撮像装置の例について説明したが、ライブラリには基準被写体が複数登録され、その中から所望する基準被写体を適宜スイッチ群２２ａやタッチパネル２５ａなどによって選択する構成としてもかまわない。
【００６０】
また、上記実施形態においては、撮影によって得られた画像データの中から、予め登録された基準被写体に類似する特定領域を検索する例について説明したが、記録された画像データの中から、予め登録された基準被写体に類似する特定領域を探索する再生装置の構成としてもかまわない。
【００６１】
［本実施形態の補足事項］
なお、上述した実施形態では、色相Ｈ、彩度Ｓ、明度Ｌからなる特性値を基準にして、色調整を実施している。しかしながら、本発明はこれに限定されるものではない。例えば、ＲＧＢ値やＸＹＺ値やＬａｂ値その他の表色系を基準にして、色調整を実施してもよい。
【００６２】
また、上述した実施形態において、特性値の算出に先立って、平滑化や空間微分などの画像処理を施すことが好ましい。この平滑化を施すことにより、特性値に対する細かな絵柄の影響を低減できる。また、空間微分を施した場合には、画像の空間変化の大きな箇所に重点をおいた特性値を求めることができる。
【００６３】
なお、上述した実施形態では、説明を簡明にするために、色調整の処理に限って動作説明を行っている。しかしながら、本発明はこれに限定されるものではない。上述した色調整の処理を、ホワイトバランス調整や表色系変換（ＲＧＢからＹＣｂＣｒへの変換）や色補間処理などと併せて実施してもよい。
【００６４】
また、上述した実施形態では、基準被写体の追尾を開始すると、最新の画像データの特性値を、直前に撮影した画像データの特性値に近づけるように色調整を行う（ステップＳ８，ステップＳ２０）。この動作により、基準被写体の色を登録画像の色に近づけつつ、基準被写体の色を徐々に変遷させることが可能になる。
しかしながら、本発明はこれに限定されるものではない。例えば、最新の画像データの特性値を、元々の登録画像の特性値に近づけるように色調整を行ってもよい。
【００６５】
また、上述した実施形態では、撮像された動画像がモニタ表示用として用いられる場合について説明した。しかしながら、本発明はこれに限定されるものではない。静止画像と同様に動画像についても、メモリカード２１等の記録媒体に記録されるものであってもかまわない。
【００６６】
なお、上述した実施形態では、電子カメラ１１内で全ての発明動作を実施する場合について説明した。しかしながら、本発明はこれに限定されるものではない。例えば、記録された画像データをコンピュータに取り込み、コンピュータのソフトウェア処理により、本発明の色調整を実施してもよい。
【産業上の利用可能性】
【００６７】
以上説明したように、本発明は、撮像装置などに利用可能な技術である。
【図面の簡単な説明】
【００６８】
【図１】本実施形態の電子カメラ１１を示すブロック図である。
【図２】本実施形態の動作を説明する流れ図（１／２）である。
【図３】本実施形態の動作を説明する流れ図（２／２）である。
【図４】本実施形態の効果を示す図である。
【符号の説明】
【００６９】
１１  電子カメラ
１２  撮影レンズ
１３  撮像素子
１５  Ａ／Ｄ変換部
１６  信号処理部
１７  バッファメモリ
１８  バス
１９  画像処理部
１９ａ  画像解析部
１９ｂ  被写体抽出部
２０  カードインターフェース
２１  メモリカード
２２  マイクロプロセッサ
２２ａ  スイッチ群
２２ｂ  タイミングジェネレータ
２３  圧縮伸張部
２４  画像表示部
２５  モニタ画面
２５ａ  タッチパネル
【図１】
2006074483.tif 000003
【図２】
2006074483.tif 000004
【図３】
2006074483.tif 000005
【図４】
2006074483.tif 000006