(57)【要約】【課題】アスペクト比の設定に応じてイメージセンサ上の映像領域を変化させることでアスペクト比の異なる画像を生成する場合に、アスペクト比の設定を切り替えた際の画像の輝度や色の切り替わりの低減を図る。【解決手段】撮像素子１４が画像データとして出力する映像領域について、前記アスペクト比切り替え手段によるアスペクト比の設定に応じて夫々異なる映像領域が設定されており、アスペクト比の設定に依らず常に使用する映像領域を共通領域とし、前記アスペクト比の設定によって使用したり使用しなかったりする映像領域を非共通領域とし、前記共通領域と前記非共通領域とを合わせた領域を全映像領域として、評価値算出手段は、露出制御手段による露出制御とホワイトバランス制御手段によるホワイトバランス制御のための評価値を算出する際に、前記非共通領域の使用割合を可変にしている。【選択図】図５
2012039256.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮像して画像データを得る撮像手段と、
前記撮像手段で得られた画像データに基づいて露出制御を行う露出制御手段と、
前記撮像手段で得られた画像データに基づいてホワイトバランス制御を行うホワイトバランス制御手段と、
前記露出制御手段による露出制御及び前記ホワイトバランス制御手段によるホワイトバランス制御のうち少なくともいずれか一方のための評価値を算出する評価値算出手段と、
前記撮像手段により画像データを得るときのアスペクト比を切り替えるアスペクト比切り替え手段を備え、
前記撮像手段が画像データとして出力する映像領域について、前記アスペクト比切り替え手段によるアスペクト比の設定に応じて夫々異なる映像領域が設定されており、
前記評価値算出手段は、前記評価値を算出する際に、前記アスペクト比の設定によって使用したり使用しなかったりする映像領域の使用割合を可変にしたことを特徴とする撮像装置。
【請求項２】
前記アスペクト比の設定によらず常に使用する映像領域を共通領域とし、前記アスペクト比の設定によって使用したり使用しなかったりする映像領域を非共通領域とし、前記共通領域と前記非共通領域とを合わせた領域を全映像領域として、
前記評価値算出手段は、静止画撮影前にライブ画像を表示する待機状態では前記非共通領域の使用割合を可変にし、静止画撮影時では前記全映像領域を使用することを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記アスペクト比切り替え手段によるアスペクト比の設定が禁止されている状態で、前記評価値算出手段は全映像領域を使用することを特徴とする請求項１又は２に記載の撮像装置。
【請求項４】
前記アスペクト比切り替え手段によるアスペクト比の設定が禁止されている状態には動画撮影モードを含むことを特徴とする請求項３に記載の撮像装置。
【請求項５】
前記撮像手段により得られた画像データから被写体である人物の顔を検出する顔検出手段を更に具備することを特徴とする請求項１乃至４のいずれか１項に記載の撮像装置。
【請求項６】
前記アスペクト比の設定によって使用したり使用しなかったりする映像領域に、前記顔検出手段により検出した人物の顔が含まれる場合、前記評価値算出手段は、前記アスペクト比の設定によって使用したり使用しなかったりする映像領域の使用割合を増加させることを特徴とする請求項５に記載の撮像装置。
【請求項７】
被写体を撮像して画像データを得る撮像手段と、前記撮像手段で得られた画像データに基づいて露出制御を行う露出制御手段と、前記撮像手段で得られた画像データに基づいてホワイトバランス制御を行うホワイトバランス制御手段と、前記撮像手段により画像データを得るときのアスペクト比を切り替えるアスペクト比切り替え手段を備えた撮像装置の制御方法であって、
前記露出制御手段による露出制御及び前記ホワイトバランス制御手段によるホワイトバランス制御のうち少なくともいずれか一方のための評価値を算出する評価値算出ステップを有し、
前記撮像手段が画像データとして出力する映像領域について、前記アスペクト比切り替え手段によるアスペクト比の設定に応じて夫々異なる映像領域が設定されており、
前記評価値算出ステップでは、前記評価値を算出する際に、前記アスペクト比の設定によって使用したり使用しなかったりする映像領域の使用割合を可変にしたことを特徴とする撮像装置の制御方法。
【請求項８】
被写体を撮像して画像データを得る撮像手段と、前記撮像手段で得られた画像データに基づいて露出制御を行う露出制御手段と、前記撮像手段で得られた画像データに基づいてホワイトバランス制御を行うホワイトバランス制御手段と、前記撮像手段により画像データを得るときのアスペクト比を切り替えるアスペクト比切り替え手段を備えた撮像装置を制御するためのプログラムであって、
前記露出制御手段による露出制御及び前記ホワイトバランス制御手段によるホワイトバランス制御のうち少なくともいずれか一方のための評価値を算出する評価値算出処理をコンピュータに実行させ、
前記撮像手段が画像データとして出力する映像領域について、前記アスペクト比切り替え手段によるアスペクト比の設定に応じて夫々異なる映像領域が設定されており、
前記評価値算出処理では、前記評価値を算出する際に、前記アスペクト比の設定によって使用したり使用しなかったりする映像領域の使用割合を可変にしたことを特徴としたプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、被写体の光学像を撮像素子で光電変換し、それにより得られた画像信号からデジタル画像データを生成する撮像装置、その制御方法及びプログラムに関し、特に画像信号のアスペクト比を可変とする技術に関する。
【背景技術】
【０００２】
特許文献１には、複数の目的画像を広角画像から切り出して利用するシステム広角画像が開示されている。特許文献１に開示されている技術では、広角の画像と切り出した画像の夫々から情報を取得し、画角の変更時には広角画像の情報を利用した補正値を用いることで画角変化時の切り替わりの低減を図ることができる。
【０００３】
特許文献２には、アスペクト比を変更して撮影可能なカメラにおいて、アスペクト比の設定に応じて露出制御の測光範囲を変化させることで、アスペクト比の異なる各画面で夫々適正露光で撮影することが可能な技術が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００６−２２２８１６号公報
【特許文献２】特開平６−１８０４６７号公報
【特許文献３】特開平１０−２３２９３４号公報
【特許文献４】特開２０００−４８１８４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
アスペクト比を変化させて撮影することのできるカメラにおいて、イメージセンサ上で最も広い映像領域の画像データを取得し、画像処理の段階で画像データの一部を切り取ることでアスペクト比の異なる画像を生成する方法が広く行われている。
【０００６】
一方で、光学的なイメージサークルを最大限有効に活用するべく、アスペクト比の設定に応じて、イメージセンサ上の使用する映像領域を変化させることでアスペクト比の異なる画像を生成する方法が登場してきた。
【０００７】
後者のような、アスペクト比の設定によってイメージセンサ上の使用する映像領域を変化させる場合において、映像領域全体を評価する処理は、アスペクト比の設定を変えると評価する画像データが変わってしまう。そのため、評価結果がアスペクト比の設定の影響を大きく受けてしまうという問題があった。例えば、露出制御では映像領域全体の輝度を計測し、画像の明るさを適正に制御するが、アスペクト比の設定が変わって評価する映像領域が変化すると映像領域全体の輝度が変化してしまう。そのため、画像の明るさが変化してしまうという問題が発生する。また、映像領域全体の色レベルを計測して最適な色バランスに調整するホワイトバランス制御についても同様である。すなわち、アスペクト比の設定を切り替えることで露出制御やホワイトバランス制御のための評価値が変化し、明るさや色の切り替わりが発生してしまうという問題が引き起こされる。
【０００８】
本発明は上記のような点に鑑みてなされたものであり、アスペクト比の設定に応じてイメージセンサ上の映像領域を変化させることでアスペクト比の異なる画像を生成する場合に、アスペクト比の設定を切り替えた際の画像の輝度や色の切り替わりの低減を図ることを目的とする。
【課題を解決するための手段】
【０００９】
本発明の撮像装置は、被写体を撮像して画像データを得る撮像手段と、前記撮像手段で得られた画像データに基づいて露出制御を行う露出制御手段と、前記撮像手段で得られた画像データに基づいてホワイトバランス制御を行うホワイトバランス制御手段と、前記露出制御手段による露出制御及び前記ホワイトバランス制御手段によるホワイトバランス制御のうち少なくともいずれか一方のための評価値を算出する評価値算出手段と、前記撮像手段により画像データを得るときのアスペクト比を切り替えるアスペクト比切り替え手段を備え、前記撮像手段が画像データとして出力する映像領域について、前記アスペクト比切り替え手段によるアスペクト比の設定に応じて夫々異なる映像領域が設定されており、前記評価値算出手段は、前記評価値を算出する際に、前記アスペクト比の設定によって使用したり使用しなかったりする映像領域の使用割合を可変にしたことを特徴とする。
【発明の効果】
【００１０】
本発明によれば、アスペクト比の設定に応じてイメージセンサ上の映像領域を変化させることでアスペクト比の異なる画像を生成する場合に、アスペクト比の設定を切り替えた際の画像の輝度や色の切り替わりの低減を図ることが可能である。
【図面の簡単な説明】
【００１１】
【図１】実施形態に係る撮像装置の構成を示すブロック図である。
【図２】実施形態に係る撮像装置の主ルーチンの動作処理を示すフローチャートである。
【図３】実施形態に係る撮像装置の主ルーチンの動作処理を示すフローチャートである。
【図４】静止画撮影処理を示すフローチャートである。
【図５】評価値算出処理を示すフローチャートである。
【図６】アスペクト比が４：３のときにイメージセンサ上で使用する映像領域を示す図である。
【図７】アスペクト比が１６：９のときにイメージセンサ上で使用する映像領域を示す図である。
【図８】アスペクト比の設定によってイメージセンサ上で使用する映像領域が異なる場合の領域分割を示す図である。
【図９】アスペクト比が１６：９のときの領域分割を示す図である。
【図１０】アスペクト比が４：３のときの領域分割を示す図である。
【発明を実施するための形態】
【００１２】
以下、添付図面を参照して、本発明の好適な実施形態について説明する。
図１は、本発明の実施形態に係る撮像装置１００の構成を示すブロック図である。１０は撮影レンズ、１２は絞り機能を備えるシャッター、１４は光学像を電気信号に変換する撮像素子である。１６は撮像素子１４のアナログ信号出力をデジタル信号に変換するＡ／Ｄ変換器である。１８はタイミング発生回路であり、撮像素子１４、Ａ／Ｄ変換器１６、Ｄ／Ａ変換器２６にクロック信号や制御信号を供給する。タイミング発生回路１８は、メモリ制御回路２２及びシステム制御回路５０により制御される。
【００１３】
２０は画像処理回路であり、Ａ／Ｄ変換器１６からのデータ或いはメモリ制御回路２２からのデータに対して所定の画素補間処理や色変換処理を行う。また、画像処理回路２０は、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてシステム制御回路５０が露光制御部４０、測距制御部４２に対して制御を行う、ＴＴＬ（スルー・ザ・レンズ）方式のＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＥＦ（フラッシュプリ発光）処理を行う。さらに、画像処理回路２０は、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＴＴＬ方式のＡＷＢ（オートホワイトバランス）処理も行う。ホワイトバランスのための演算処理として映像信号を複数のブロックに分け各ブロックの色信号の積分値を得るブロック積分と、映像信号の各画素の信号値を色度座標に展開し所定の領域についての色信号の積分値を得る白サーチ積分を行う。白サーチ積分に使用する色度座標上の積分領域の設定は画像処理回路２０内に保持する。
【００１４】
２２はメモリ制御回路であり、Ａ／Ｄ変換器１６、タイミング発生回路１８、画像処理回路２０、画像表示メモリ２４、Ｄ／Ａ変換器２６、メモリ３０、圧縮・伸長回路３２を制御する。Ａ／Ｄ変換器１６のデータが画像処理回路２０、メモリ制御回路２２を介して、或いはＡ／Ｄ変換器１６のデータが直接メモリ制御回路２２を介して、画像表示メモリ２４或いはメモリ３０に書き込まれる。
【００１５】
２４は画像表示メモリ、２６はＤ／Ａ変換器、２８はＴＦＴ ＬＣＤ等からなる画像表示部である。画像表示メモリ２４に書き込まれた表示用の画像データはＤ／Ａ変換器２６を介して画像表示部２８により表示される。画像表示部２８を用いて撮像した画像データを逐次表示すれば、電子ファインダ機能を実現することが可能である。また、画像表示部２８は、システム制御回路５０の指示により任意に表示をＯＮ／ＯＦＦすることが可能であり、表示をＯＦＦにした場合には撮像装置１００の電力消費を大幅に低減することができる。
【００１６】
３０は撮影した静止画像や動画像を格納するためのメモリであり、所定枚数の静止画像や所定時間の動画像を格納するのに十分な記憶量を備える。これにより、複数枚の静止画像を連続して撮影する連写撮影やパノラマ撮影の場合にも、高速かつ大量の画像書き込みをメモリ３０に対して行うことが可能となる。また、メモリ３０はシステム制御回路５０の作業領域としても使用することが可能である。３２は圧縮・伸長回路であり、適応離散コサイン変換（ＡＤＣＴ）等により画像データを圧縮伸長する。圧縮・伸長回路３２は、メモリ３０に格納された画像を読み込んで圧縮処理或いは伸長処理を行い、処理を終えたデータをメモリ３０に書き込む。
【００１７】
４０は絞り機能を備えるシャッター１２を制御する露光制御部であり、フラッシュ４８と連携することによりフラッシュ調光機能も有する。４２は撮影レンズ１０のフォーカシングを制御する測距制御部である。４４は撮影レンズ１０のズーミングを制御するズーム制御部である。４６はバリアである保護部１０２の動作を制御するバリア制御部である。４８はストロボであり、ＡＦ補助光の投光機能、フラッシュ調光機能も有する。露光制御部４０、測距制御部４２はＴＴＬ方式を用いて制御されており、撮像した画像データを画像処理回路２０によって演算した演算結果に基づき、システム制御回路５０が露光制御部４０、測距制御部４２に対して制御を行う。
【００１８】
５０は撮像装置１００全体を制御するシステム制御回路である。５２はシステム制御回路５０の動作用の定数、変数、プログラム等を記憶するメモリである。メモリ５２はまたＡＥで用いるプログラム線図も格納している。プログラム線図は、露出値に対する絞り開口径とシャッター速度の制御値の関係を定義したテーブルである。
【００１９】
５４は液晶表示装置、スピーカー等の表示部であり、システム制御回路５０でのプログラムの実行に応じて、文字、画像、音声等を用いて動作状態やメッセージ等を表示する。表示部５４は、撮像装置１００の操作部近辺の視認し易い位置に単数或いは複数個所設置され、例えばＬＣＤやＬＥＤ、発音素子等の組み合わせにより構成される。また、表示部５４は、その一部の機能が光学ファインダ１０４内に設置される。
【００２０】
表示部５４の表示内容のうち、ＬＣＤ等に表示するものとしては、シングルショット／連写撮影表示、セルフタイマー表示、圧縮率表示、記録画素数表示、記録枚数表示、残撮影可能枚数表示、シャッタースピード表示、絞り値表示、露出補正表示、フラッシュ表示、赤目緩和表示、マクロ撮影表示、ブザー設定表示、時計用電池残量表示、電池残量表示、エラー表示、複数桁の数字による情報表示、記録媒体２００及び２１０の着脱状態表示、通信Ｉ／Ｆ動作表示、日付け・時刻表示、等がある。また、表示部５４の表示内容のうち、光学ファインダ１０４内に表示するものとしては、合焦表示、手振れ警告表示、フラッシュ充電表示、シャッタースピード表示、絞り値表示、露出補正表示、等がある。
【００２１】
５６は電気的に消去・記録可能な不揮発性メモリであり、例えばＥＥＰＲＯＭ等が用いられる。
【００２２】
６０、６１、６２、６３はシステム制御回路５０の各種の動作指示を入力するための操作手段であり、スイッチやダイアル、タッチパネル、視線検知によるポインティング、音声認識装置等の単数或いは複数の組み合わせで構成される。
【００２３】
ここで、これらの操作手段の具体的な説明を行う。６０はモードダイアルスイッチであり、電源ＯＦＦ、自動撮影モード、撮影モード、パノラマ撮影モード、再生モード、マルチ画面再生・消去モード、ＰＣ接続モード等の各機能モードを切り替え設定することができる。
【００２４】
６１はシャッタースイッチＳＷ１であり、不図示のシャッターボタンの操作途中でＯＮとなり、ＡＦ処理、ＡＥ処理、ＡＷＢ処理、ＥＦ処理等の動作開始を指示する。６２はシャッタースイッチＳＷ２であり、不図示のシャッターボタンの操作完了でＯＮとなり、露光処理、現像処理、記録処理という一連の処理の動作開始を指示する。露光処理では、撮像素子１４から読み出した信号をＡ／Ｄ変換器１６、メモリ制御回路２２を介してメモリ３０に画像データを書き込む。現像処理は、画像処理回路２０やメモリ制御回路２２での演算を用いて行われる。記録処理では、メモリ３０から画像データを読み出し、圧縮・伸長回路３２で圧縮を行い、記録媒体２００或いは２１０に画像データを書き込む。
【００２５】
６３は各種ボタンやタッチパネル等からなる操作部であり、メニューボタン、セットボタン、マクロボタン、マルチ画面再生改ページボタン、フラッシュ設定ボタン、単写／連写／セルフタイマー切り替えボタン、メニュー移動＋（プラス）ボタン、メニュー移動−（マイナス）ボタン、再生画像移動＋（プラス）ボタン、再生画像−（マイナス）ボタン、撮影画質選択ボタン、露出補正ボタン、日付／時間設定ボタン、表示切替ボタン、等がある。表示切替ボタンは、画像表示部２８を用いた電子ファインダ機能の設定を切り替えることが可能であり、画像表示部２８への表示をＯＮ／ＯＦＦすることができる。
【００２６】
８０は電源制御部であり、電池検出回路、ＤＣ−ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成される。電源制御部８０は、電池の装着の有無、電池の種類、電池残量の検出を行い、検出結果及びシステム制御回路５０の指示に基づいてＤＣ−ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体を含む各部へ供給する。８２はコネクタ、８４はコネクタ、８６はアルカリ電池やリチウム電池等の一次電池やＢＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ電池等の二次電池、ＡＣアダプタ等からなる電源である。
【００２７】
９０及び９４はメモリカードやハードディスク等の記録媒体とのインタフェースである。９２及び９６はメモリカードやハードディスク等の記録媒体と接続を行うコネクタである。９８は記録媒体着脱検知手段であり、コネクタ９２及び或いは９６に記録媒体２００或いは２１０が装着されているか否かを検知する。
【００２８】
なお、本実施形態では記録媒体を取り付けるインタフェース及びコネクタを２系統持つものとして説明している。もちろん、記録媒体を取り付けるインタフェース及びコネクタは、単数或いは複数、いずれの系統数を備える構成としても構わない。また、異なる規格のインタフェース及びコネクタを組み合わせて備える構成としても構わない。インタフェース及びコネクタとしては、ＰＣＭＣＩＡカードやＣＦ（コンパクトフラッシュ(登録商標)）カード等の規格に準拠したものを用いて構成して構わない。さらに、インタフェース９０及び９４、そしてコネクタ９２及び９６をＰＣＭＣＩＡカードやＣＦ（コンパクトフラッシュ）カード等の規格に準拠したものを用いて構成した場合、ＬＡＮカードやモデムカード、ＵＳＢカード、ＩＥＥＥ１３９４カード、Ｐ１２８４カード、ＳＣＳＩカード、ＰＨＳ等の通信カード、等の各種通信カードを接続することにより、他のコンピュータやプリンタ等の周辺機器との間で画像データや画像データに付属した管理情報を転送し合うことができる。
【００２９】
１０２はバリアである保護部であり、撮像装置１００のレンズ１０を含む撮像部を覆うことにより、撮像部の汚れや破損を防止する。１０４は光学ファインダであり、画像表示部２８による電子ファインダ機能を使用すること無しに、光学ファインダのみを用いて撮影を行うことが可能である。
【００３０】
１１０は通信部であり、ＲＳ２３２ＣやＵＳＢ、ＩＥＥＥ１３９４、Ｐ１２８４、ＳＣＳＩ、モデム、ＬＡＮ、無線通信、等の各種通信機能を有する。１１２は通信部１１０により撮像装置１００を他の機器と接続するコネクタ或いは無線通信の場合はアンテナである。
【００３１】
２００はメモリカードやハードディスク等の記録媒体である。記録媒体２００は、半導体メモリや磁気ディスク等から構成される記録部２０２、撮像装置１００とのインタフェース２０４、撮像装置１００と接続を行うコネクタ２０６を備える。同じく、２１０はメモリカードやハードディスク等の記録媒体である。記録媒体２１０は、半導体メモリや磁気ディスク等から構成される記録部２１２、撮像装置１００とのインタフェース２１４、撮像装置１００と接続を行うコネクタ２１６を備える。
【００３２】
図２及び図３は、本実施形態に係る撮像装置１００の主ルーチンの動作処理を示すフローチャートである。電池交換等の電源投入により、ステップＳ２０１でシステム制御回路５０はフラグや制御変数等を初期化し、ステップＳ２０２で画像表示部２８の画像表示をＯＦＦ状態に初期設定する。
【００３３】
ステップＳ２０３で、システム制御回路５０はモードダイアル６０の設定位置を判定する。ステップＳ２０３においてモードダイアル６０が電源ＯＦＦに設定されていたならば、ステップＳ２０５に進む。ステップＳ２０５では所定の終了処理を行い、その後ステップＳ２０３に戻る。所定の終了処理として、例えば各表示部の表示を終了状態に変更する。また、保護部１０２のバリアを閉じて撮像部を保護する。また、フラグや制御変数等を含む必要なパラメータや設定値、設定モードを不揮発性メモリ５６に記録する。また、電源制御部８０により画像表示部２８を含む撮像装置１００各部の不要な電源を遮断する。
【００３４】
ステップＳ２０３においてモードダイアル６０が撮影モードに設定されていたならば、ステップＳ２０６に進む。ステップＳ２０３においてモードダイアル６０がその他のモードに設定されていたならば、ステップＳ２０４に進み、システム制御回路５０は選択されたモードに応じた処理を実行し、その後ステップＳ２０３に戻る。
【００３５】
ステップＳ２０６で、システム制御回路５０は、電源制御部８０により電池等により構成される電源８６の残容量や動作情況が撮像装置１００の動作に問題があるか否かを判定する。ステップＳ２０６において問題があるならば、表示部５４を用いて画像や音声により所定の警告表示を行った後（ステップＳ２０８）、ステップＳ２０３に戻る。ステップＳ２０６において問題が無いならば、ステップＳ２０７に進む。
【００３６】
ステップＳ２０７で、システム制御回路５０は記録媒体２００或いは２１０の動作状態が撮像装置１００の動作、特に記録媒体に対する画像データの記録再生動作に問題があるか否かを判定する。ステップＳ２０７において問題があるならば、表示部５４を用いて画像や音声により所定の警告表示を行った後（ステップＳ２０８）、ステップＳ２０３に戻る。ステップＳ２０７において問題が無いならば、ステップＳ２０９に進む。
【００３７】
ステップＳ２０９で、システム制御回路５０はＯＶＦ（光学ビューファインダ）状態であるか否かを判定する。ステップＳ２０９においてＯＶＦ状態であれば、スルー画像の表示は行わず、ステップＳ３０１に進む。
【００３８】
ステップＳ２０９においてスルー画像（静止画撮影前後にファインダ機能として表示させるための撮像素子１４によって撮像されたライブ画像）を表示するＥＶＦ（電子ビューファインダ）状態であれば、ステップＳ２１０に進む。ステップＳ２１０で、システム制御回路５０は、スルー画像を画像表示部２８に表示するための撮影準備の初期化を行う。そして、準備が完了したら、スルー画像を画像表示部２８に表示開始する（ステップＳ２１１）。その後、ステップＳ３０１に進む。スルー表示状態においては、撮像素子１４、Ａ／Ｄ変換器１６、画像処理回路２０、メモリ制御回路２２を介して、画像表示メモリ２４に逐次書き込まれたデータを、メモリ制御回路２２、Ｄ／Ａ変換器２６を介して画像表示部２８により逐次表示することにより、電子ファインダ機能を実現している。
【００３９】
ここで、操作部６３による画像表示部２８への表示の設定としては、ＯＶＦ状態とＥＶＦ状態に設定可能であり、さらにＥＶＦ状態では４：３のアスペクト比と１６：９のアスペクト比の２種類にアスペクト比切り替えが可能である。すなわち、ＯＶＦ／ＥＶＦ（４：３）／ＥＶＦ（１６：９）の３つの状態に切り替えることが可能である。
【００４０】
ステップＳ３０１で、システム制御回路５０は、モードダイアル６０の設定位置が変更されているか否かを判定する。ステップＳ３０１においてモードダイアル６０の設定位置が変更されていれば、ステップＳ２０３に戻り、ダイアル状態をチェックする。ステップＳ３０１においてモードダイアル６０の設定位置が変更されていなければ、ステップＳ３０２に進む。
【００４１】
ステップＳ３０２で、システム制御回路５０はＯＶＦ状態であるか否かを判定する。ステップＳ３０２においてＯＶＦ状態であれば、スルー画像の表示は行わず、ステップＳ３０７に進む。ステップＳ３０２においてスルー画像を表示するＥＶＦ状態であれば、ステップＳ３０３に進む。
【００４２】
ステップＳ３０３で、システム制御回路５０は、ＡＥ処理及びＡＷＢ処理のためのマルチアスペクト比に対応した評価値を算出する。マルチアスペクト比に対応した評価値算出処理については図５を用いて後述する。
【００４３】
次に、ステップＳ３０４で、システム制御回路５０は、ステップＳ３０３において求めた評価値に基づいてＡＥ処理を行う。このとき、ステップＳ３０３において算出した評価値（測光結果）から適正露出との差分を算出し、露光制御部４０を用いてスルー画像に対するＡＥ処理を行う。
【００４４】
また、ステップＳ３０５で、システム制御回路５０は、ステップＳ３０３において求めた評価値に基づいてＡＷＢ処理を行う。このとき、ステップＳ３０３において算出した評価値（色レベル）から色バランスを最適化する係数を算出し、画像処理回路２０を用いてスルー画像に対するＡＷＢ処理を行う。
【００４５】
その後、ステップＳ３０６で、システム制御回路５０はスルー画像を画像表示部２８に表示し、ステップＳ３０７に進む。
【００４６】
ステップＳ３０７で、システム制御回路５０はシャッタースイッチＳＷ１（６１）が押されたか否かを判定し、押されていない場合、ステップＳ２０３に戻り、ダイアル状態や電池状態をチェックする。押されている場合、ステップＳ３０８に進む。
【００４７】
ステップＳ３０８で、システム制御回路５０の制御下で画像処理回路２０が撮像素子１４から得られた信号に対して所定の測距演算を行い、その演算結果をメモリ３０に格納する。システム制御回路５０はこの測距演算結果に基づいて測距制御部４２を用いてＡＦ処理を行い、撮影レンズ１０の焦点を被写体に合わせる。その後、ステップＳ３０９で、システム制御回路５０はスルー画像を画像表示部２８に表示し、ステップＳ３１０に進む。
【００４８】
ステップＳ３１０で、システム制御回路５０はシャッタースイッチＳＷ２（６２）が押されたか否かを判定し、押されている場合、ステップＳ３１２に進み、撮影処理を実行する。撮影処理については図４を用いて後述する。押されていない場合、ステップＳ３１１に進む。
【００４９】
ステップＳ３１１で、システム制御回路５０は再びシャッタースイッチＳＷ１（６１）が押されたか否かを判定し、押されている場合、ステップＳ３０９に戻り、シャッタースイッチＳＷ１（６１）の保持状態を継続する。押されていない場合、ステップＳ２０３に戻り、ダイアル状態や電池状態をチェックする。
【００５０】
ステップＳ３１２で、システム制御回路５０は静止画撮影処理を実行する。その後、ステップＳ３１３で、メモリ３０に保存された圧縮画像データを、静止画ファイルとして記録媒体２００に書き込む。また、ステップＳ３１４で、ステップＳ３１２において撮像された画像をスルー画像として画像表示部２８に表示して、静止画撮影処理を完了する。
【００５１】
ステップＳ３１５で、システム制御回路５０はシャッタースイッチＳＷ１（６１）が押されたか否かを判定し、押されている場合、ステップＳ３０９に戻り、スルー画像を表示し撮影待機状態に復帰する。押されていない場合、ステップＳ２０３に戻り、ダイアル状態をチェックする。
【００５２】
本実施形態に係る撮像装置１００では、イメージセンサ（撮像素子１４）上の映像領域を変化させることでアスペクト比の異なる画像を生成する。図６及び図７は、アスペクト比の設定によってイメージセンサ上で使用する映像領域が変化することを示す図である。図６はアスペクト比が４：３の場合の図であり、６０１はイメージセンサの全領域、６０２は映像として使用する領域を示す。図７はアスペクト比が１６：９の場合の図であり、７０１はイメージセンサの全領域、７０２は映像として使用する領域を示す。
【００５３】
図６及び図７に示すように、イメージセンサ上で使用する映像領域は４：３と１６：９で異なり、この様子をさらに詳しく説明するのが図８である。図８は、図６及び図７で示したようなアスペクト比の設定によってイメージセンサ上で使用する映像領域が異なる場合の領域分割についての図である。図８において、８０１はイメージセンサの全領域である。８０２はアスペクト比の設定によらず常に使用する映像領域、すなわちアスペクト比の設定が４：３と１６：９のどちらの場合であっても使用する映像領域であり、本実施形態ではこの領域を共通領域としている。８０３はアスペクト比の設定によって使用したり使用しなかったりする映像領域であり、本実施形態ではこの領域を非共通領域としている。本実施形態では、共通領域と非共通領域を合わせて全映像領域としている。
【００５４】
図９は、アスペクト比が１６：９のときの領域分割を示す図である。９０１はイメージセンサの全領域である。９０２は共通領域である。９０３は非共通領域である。また、図１０は、アスペクト比が４：３のときの領域分割を示す図である。１００１はイメージセンサの全領域である。１００２は共通領域である。１００３は非共通領域である。
【００５５】
図５は、図３のステップＳ３０３における、ＥＶＦ状態でのマルチアスペクト比に対応した評価値算出処理を示すフローチャートである。ステップＳ５０１で、システム制御回路５０は、操作部６３による画像表示部２８への表示の設定を参照し、アスペクト比が４：３の場合はステップＳ５０２に進み、アスペクト比が１６：９の場合はステップＳ５０３に進む。
【００５６】
ステップＳ５０２で、システム制御回路５０は、アスペクト比が４：３表示の場合に評価値を求める領域の設定を行う。図１０に示した共通領域１００２及び非共通領域１００３を評価値を算出する領域（ウィンドウ）として画像処理回路２０に設定する。また、ステップＳ５０３で、システム制御回路５０は、アスペクト比が１６：９表示の場合に評価値を求める領域の設定を行う。図９に示した共通領域９０２及び非共通領域９０３を評価値を算出する領域（ウィンドウ）として画像処理回路２０に設定する。
【００５７】
次に、ステップＳ５０４では、システム制御回路５０の制御下で全映像領域（共通領域及び非共通領域）の積分処理を行う。撮像素子１４から読み出した画像データに対して、画像処理回路２０はステップＳ５０２或いはステップＳ５０３で設定したウィンドウのうち、全映像領域に対して信号値の積分処理を実行する。
【００５８】
ステップＳ５０５で、システム制御回路５０は、ステップＳ５０４において行った全映像領域の積分結果から評価値を算出する。積分結果から、ＡＥ処理のための輝度値と、ＡＷＢ処理のための色レベルを求める。輝度信号についての積分値を輝度値として算出し、ＡＥ処理の評価値として利用する。また、色ごとの積分値を色レベルとして算出し、ＡＷＢ処理の評価値として利用する。
【００５９】
ステップＳ５０６で、システム制御回路５０の制御下、撮像素子１４から読み出した画像データを用いて、画像処理回路２０は全映像領域内の顔認識処理（画像内の顔を検出する処理）を行う。顔を検出する技術としては、様々な手法が公知となっている。例えば、ニューラルネットワークに代表される学習を用いた方法がある。また、目、鼻、口、及び顔の輪郭といった物理的な形状の特徴のある部位を画像データからテンプレートマッチングを用いて識別する手法がある。他にも、肌の色や目の形といった画像データの特徴量を検出し統計的解析を用いた手法が挙げられる（例えば、特許文献３、４等を参照）。本実施形態では、一対の目（両目）、鼻、口、及び顔の輪郭を検出し、これらの相対位置より人物の顔を決定する手法により顔の識別処理を行っている。
【００６０】
ステップＳ５０７では、システム制御回路５０の制御下でステップＳ５０４と同様の方法で、共通領域の積分処理を行う。撮像素子１４から読み出した画像データに対して、画像処理回路２０はステップＳ５０２或いはステップＳ５０３で設定したウィンドウのうち、共通領域に対して信号値の積分処理を実行する。
【００６１】
ステップＳ５０８で、システム制御回路５０は、ステップＳ５０５と同様の方法で、ステップＳ５０７において行った共通領域の積分結果から評価値を算出する。ステップＳ５０９で、システム制御回路５０は、ステップＳ５０６と同様の方法で、共通領域内の顔認識処理を行う。
【００６２】
ステップＳ５１０で、システム制御回路５０は、ステップＳ５０６とステップＳ５０９において求めた顔検出結果を比較し、非共通領域にも人物の顔が含まれるか否かを判定する。すなわち、ステップＳ５０６において求めた全映像領域での顔の数がステップＳ５０９において求めた共通領域での顔の数より多い場合、非共通領域に人物の顔が含まれると判定し、ステップＳ５１２に進む。ステップＳ５０６において求めた全映像領域での顔の数とステップＳ５０９において求めた共通領域での顔の数とが同じである場合、非共通領域に人物の顔が含まれないと判定し、ステップＳ５１１に進む。
【００６３】
ステップＳ５１１は、非共通領域に人物の顔が含まれない場合の、最終評価値の算出処理である。システム制御回路５０は、ステップＳ５０５とステップＳ５０８において夫々求めた全映像領域の評価値と共通領域の評価値を、下式（１）に示すように非共通領域を含む全映像領域の評価値に大きな係数を適用し、２つの評価値を混合することで最終評価値を求める。
最終評価値＝全映像領域の評価値×０．８＋共通領域の評価値×０．２・・・（１）
【００６４】
このように２つの評価値を混合することで、非共通領域も評価の対象としながら、全映像領域に重きを置いた評価を行うことが可能である。なお、評価値の混合は露出制御のための評価値とオートホワイトバランス制御のための評価値の夫々に対して適用する。
【００６５】
一方、ステップＳ５１２は、非共通領域に人物の顔が含まれる場合の、最終評価値の算出処理である。システム制御回路５０は、ステップＳ５０５とステップＳ５０８において夫々求めた全映像領域の評価値と共通領域の評価値を、下式（２）に示すように同程度となる係数を適用し、２つの評価値を混合することで最終評価値を求める。
最終評価値＝全映像領域の評価値×０．５＋共通領域の評価値×０．５・・・（２）
【００６６】
このように２つの評価値を混合することで、非共通領域に主被写体の人物が存在するような場合に、主被写体の輝度と色バランスを最適とするための評価を行うことが可能である。なお、評価値の混合は露出制御のための評価値とオートホワイトバランス制御のための評価値の夫々に対して適用する。
【００６７】
図４は、図３のステップＳ３１２における静止画撮影処理を示すフローチャートである。ステップＳ４０１で、システム制御回路５０は、タイミング発生器１８に同期して撮像素子１４から映像信号の読み出しを開始する。このとき、ステップＳ３０４のＡＥ処理の結果、ストロボ撮影であるときは、ストロボ４８は映像信号の先幕或いは後幕に同期して発光を行う。撮像素子１４から逐次読み出された映像信号はＡ／Ｄ変換器１６を通して画像データへ変換し、メモリ３０に逐次格納する。
【００６８】
ステップＳ４０２で、ステップＳ４０１において読み出した映像信号に対し、全映像領域の積分処理を行う。画像処理回路２０を用いて、アスペクト比の設定に応じて、図９及び図１０で図示した全映像領域に対して信号値の積分処理を実行する。
【００６９】
ステップＳ４０３で、システム制御回路５０は、ステップＳ４０２において行った全映像領域の積分結果から評価値を算出する。積分結果から、ＡＥ処理のための輝度値と、ＡＷＢ処理のための色レベルを求める。輝度信号についての積分値を輝度値として算出し、ＡＥ処理の評価値として利用する。また、色ごとの積分値を色レベルとして算出し、ＡＷＢ処理の評価値として利用する。
【００７０】
ステップＳ４０４で、システム制御回路５０は静止画用のＷＢ処理を行う。ステップＳ４０３において求めた評価値を用いて、所定のＷＢ演算を実行して静止画用のＷＢ制御値を求める。静止画用のＷＢ制御値をメモリ３０に格納してステップＳ４０５に進む。
【００７１】
ステップＳ４０５で、システム制御回路５０の制御下、信号処理回路２０で現像処理を実行する。現像処理はＪＰＥＧ等の所定の現像及び圧縮処理を行い、処理後の画像データをメモリ３０内に保存する一連の処理である。信号処理回路２０に現像処理を指示し現像後の画像はメモリ３０に格納され、一連の現像処理を終了する。
【００７２】
以上、アスペクト比の設定によってイメージセンサ上で使用する映像領域が変化するような場合において、アスペクト比の設定を切り替えた際に生じる明るさや色の切り替わりを低減する方法について説明した。
【００７３】
以上述べたように、アスペクト比の設定に応じてイメージセンサ上の映像領域を変化させることでアスペクト比の異なる画像を生成するような撮像装置において、アスペクト比の設定を切り替えた際の画像の輝度や色の切り替わりの低減を図ることが可能である。また、非共通領域に人物の顔が含まれるような場合には、非共通領域の使用割合を増加させることで被写体の輝度を色を最適とするための処理を行うことが可能である。
【００７４】
なお、本実施形態の説明においては、最終評価値の算出において、全映像領域の評価値と共通領域の評価値の割合を固定としたが、これに限定されるものでは無い。例えばアスペクト比に応じて混合比を切り替えるようにしてもよい。
【００７５】
また、本実施形態では、ＥＶＦ状態においては非共通領域の使用割合を可変し、静止画撮影時には全映像領域の評価値を用いた方法について説明したが、それに限られるものではない。例えば、動画撮影モード等アスペクト比の変更が禁止されているような状態では、静止画撮影時と同様に全映像領域の評価値を用いた方法も可能である。
【００７６】
（その他の実施形態）
また、本発明は、以下の処理を実行することによっても実現される。すなわち、上述した実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステム或いは装置に供給し、そのシステム或いは装置のコンピュータ（又はＣＰＵやＭＰＵ等）がプログラムを読み出して実行する処理である。
【符号の説明】
【００７７】
１０：撮影レンズ、１２：シャッター、１４：撮像素子、２０：画像処理回路、５０：システム制御回路、１００：撮像装置
【図１】
2012039256.tif 000003
【図２】
2012039256.tif 000004
【図３】
2012039256.tif 000005
【図４】
2012039256.tif 000006
【図５】
2012039256.tif 000007
【図６】
2012039256.tif 000008
【図７】
2012039256.tif 000009
【図８】
2012039256.tif 000010
【図９】
2012039256.tif 000011
【図１０】
2012039256.tif 000012