(57)【要約】【課題】  複数枚連続撮影の際に、撮影時間が把握できず、撮影終了の前にカメラを動かしてしまい、ブレた画像のような失敗画像を取得してしまう。【解決手段】  撮影条件の異なる複数枚の撮影画像を取得する撮像手段を有する撮像装置であって、前記撮像手段の撮影条件を設定する設定手段と、前記撮像手段による撮影を指示する指示手段と、前記指示手段による前記撮影の指示の前に、前記設定手段により設定された撮影条件を表示媒体に表示する表示手段と、を有し、前記表示手段は、前記指示手段による前記撮影の指示の前に、前記複数枚の撮影画像を撮影するための撮影条件のうち、最も露光時間の長い撮影条件あるいは前記複数枚の撮影画像を撮影するための露光時間の和を表示することを特徴とする。【選択図】  図１
2015041864.tif 000002
【特許請求の範囲】
【請求項１】
撮影条件の異なる複数枚の撮影画像を取得する撮像手段を有する撮像装置であって、
前記撮像手段の撮影条件を設定する設定手段と、
前記撮像手段による撮影を指示する指示手段と、
前記指示手段による前記撮影の指示の前に、前記設定手段により設定された撮影条件を報知する報知手段と、を有し、
前記報知手段は、前記指示手段による前記撮影の指示の前に、前記複数枚の撮影画像を撮影するための撮影条件のうち、最も露光時間の長い撮影条件を報知することを特徴とする撮像装置。
【請求項２】
撮影条件の異なる複数枚の撮影画像を取得する撮像手段を有する撮像装置であって、
前記撮像手段の撮影条件を設定する設定手段と、
前記撮像手段による撮影を指示する指示手段と、
前記指示手段による前記撮影の指示の前に、前記設定手段により設定された撮影条件を報知する報知手段と、を有し、
前記報知手段は、前記指示手段による前記撮影の指示の前に、前記複数枚の撮影画像を撮影するための露光時間の和を報知することを特徴とする撮像装置。
【請求項３】
前記複数枚の撮像画像を画像処理することにより１枚の処理後画像を生成する画像処理手段を有することを特徴とする請求項１または２に記載の撮像装置。
【請求項４】
前記報知手段の報知とは、表示媒体に表示させることであることを特徴とする請求項１乃至３のいずれか１つに記載の撮像装置。
【請求項５】
前記画像処理手段から出力される前記処理後画像に撮影条件を付帯情報として付与する付与手段を有し、
前記付帯情報は、複数枚の撮像画像のうち最も露光時間の長い撮像画像の撮影条件であることを特徴とする請求項３に記載の撮像装置。
【請求項６】
前記複数枚の撮像画像を、１枚は発光手段による発光が行われているときに、露光時間Ｔ１で撮像して画像を取得し、１枚は発光手段による発光が行われていないときに、露光時間Ｔ１で撮像して画像を取得し、１枚は発光手段による発光が行われていないときに、露光時間Ｔ２（Ｔ１＜Ｔ２）で撮像して画像を取得するように、この順に前記撮像手段を制御する制御手段を有することを特徴とする請求項１乃至５のいずれか１つに記載の撮像装置。
【請求項７】
前記複数枚の撮像画像を、１枚は発光手段による発光が行われていないときに、露光時間Ｔ２で撮像して画像を取得し、１枚は発光手段による発光が行われていないときに、露光時間Ｔ１（Ｔ１＜Ｔ２）で撮像して画像を取得し、１枚は発光手段による発光が行われているときに、露光時間Ｔ１で撮像して画像を取得するように、この順に前記撮像手段を制御する制御手段を有することを特徴とする請求項１乃至５のいずれか１つに記載の撮像装置。
【請求項８】
前記複数枚の撮像画像を、１枚は露光時間Ｔ１で撮像して画像を取得し、１枚は露光時間Ｔ２（Ｔ１＜Ｔ２）で撮像して画像を取得するように、この順に前記撮像手段を制御する制御手段を有することを特徴とする請求項１乃至５のいずれか１つに記載の撮像装置。
【請求項９】
撮影条件の異なる複数枚の撮影画像を取得する撮像手段を有する撮像装置の制御方法であって、
前記撮像手段の撮影条件を設定する設定ステップと、
前記撮像手段による撮影を指示する指示ステップと、
前記指示手段による前記撮影の指示の前に、前記設定手段により設定された撮影条件を報知する報知ステップと、を有し、
前記報知ステップでは、前記指示手段による前記撮影の指示の前に、前記複数枚の撮影画像を撮影するための撮影条件のうち、最も露光時間の長い撮影条件を報知することを特徴とする撮像装置の制御方法。
【請求項１０】
撮影条件の異なる複数枚の撮影画像を取得する撮像手段を有する撮像装置の制御方法であって、
前記撮像手段の撮影条件を設定する設定ステップと、
前記撮像手段による撮影を指示する指示ステップと、
前記指示手段による前記撮影の指示の前に、前記設定手段により設定された撮影条件を報知する報知ステップと、を有し、
前記報知手段は、前記指示手段による前記撮影の指示の前に、前記複数枚の撮影画像を撮影するための露光時間の和を報知することを特徴とする撮像装置の制御方法。
【請求項１１】
請求項９または１０に記載の撮像装置の制御方法のステップが記述されたコンピュータで実行可能なプログラム。
【請求項１２】
コンピュータに、請求項９または１０に記載の撮像装置の制御方法の各ステップを実行させるためのプログラムが記憶されたコンピュータが読み取り可能な記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数枚の撮像画像を連続して取得し、これらの撮像画像を合成することにより、１枚の画像を取得する撮像装置及び撮像装置の制御方法に関する。
【背景技術】
【０００２】
複数の異なる露光量で同一被写体を撮影し、露光量の異なる複数画面分の画像信号を合成して広ダイナミックレンジ（ＨＤＲ）合成画像を生成する技術がある（特許文献１）。この特許文献１では、露光量の異なる複数画面の露光量比を表示する手段を備えている構成が記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０００−９２３７８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、露光時間露光量比の表示では、ユーザーが出来た合成画像を見て直観的に認識できるものではなく、ユーザビリティの点で問題があった。
【０００５】
そこで、本発明は、露出の異なる複数枚の撮像画像を連続して撮像する撮像装置において、撮影するときに有用な撮影条件を示すユーザーインターフェースを提供することを特徴とする。
【課題を解決するための手段】
【０００６】
上記課題に鑑み、本発明は、撮影条件の異なる複数枚の撮影画像を取得する撮像手段を有する撮像装置であって、前記撮像手段の撮影条件を設定する設定手段と、前記撮像手段による撮影を指示する指示手段と、前記指示手段による前記撮影の指示の前に、前記設定手段により設定された撮影条件を報知する報知手段と、を有し、前記報知手段は、前記指示手段による前記撮影の指示の前に、前記複数枚の撮影画像を撮影するための撮影条件のうち、最も露光時間の長い撮影条件を報知することを特徴とする。
【０００７】
また、本発明は、撮影条件の異なる複数枚の撮影画像を取得する撮像手段を有する撮像装置であって、前記撮像手段の撮影条件を設定する設定手段と、前記撮像手段による撮影を指示する指示手段と、前記指示手段による前記撮影の指示の前に、前記設定手段により設定された撮影条件を報知する報知手段と、を有し、前記報知手段は、前記指示手段による前記撮影の指示の前に、前記複数枚の撮影画像を撮影するための露光時間の和を報知することを特徴とする。
【発明の効果】
【０００８】
露出の異なる複数枚の撮像画像を連続して撮像する撮像装置において、カメラの振れや被写体の動きなどによって撮影を失敗することを抑制する。
【図面の簡単な説明】
【０００９】
【図１】実施例１のデジタルカメラの機能構成を示すブロック図
【図２】各実施例の星空・人物撮影モードの撮影条件の説明図
【図３】実施例１の星空・人物撮影モードにおける画像処理のフロー図
【図４】星空・人物撮影モードの撮影条件の説明図
【発明を実施するための形態】
【００１０】
（実施例１）
図４は「星空・人物撮影モード」で最終的に出力される画像を生成するために撮影される画像を説明したものである。この撮影モードでは、撮影条件の異なる３枚の連写画像を扱う。１枚はフラッシュ（ストロボ）を発光させて、露光時間を短秒Ｔ１に設定して撮影した画像であり、他の１枚はフラッシュを発光させないで、露光時間を短秒Ｔ１に設定して撮影した画像である。そして、もう１枚は、フラッシュを発光させないで、露光時間を長秒Ｔ２に設定して撮影した画像である。
【００１１】
１枚目は、人物などの主被写体の撮影において、フラッシュを発光させた状態で適正露出となる撮影条件で撮影した画像である。また、３枚目は、背景の撮影において、フラッシュを発光させない状態で適正露出となる撮影条件で撮影した画像である。
【００１２】
２枚目の画像は、１枚目の画像のうち主被写体（例えば人物）の画像のみを抽出する画像処理を行うために必要な画像であり、基本的にフラッシュ発光動作以外は１枚目の画像と同一撮影条件で撮影した画像である。
【００１３】
以上の３種類の画像を用いて画像処理を行うことにより、背景が極端に暗い場合でも、主被写体も背景も適正露出で撮影した画像を取得することができ、前述した主被写体が露出オーバーとなるような不具合は生じない。
【００１４】
しかし、上述した３種類の撮影条件による連写画像を用いた画像処理により画像を取得する撮影方法（星空・人物撮影モード）において、下記に記すような不具合が判明した。
【００１５】
撮影準備の指示に当たるＳＷ１の操作においては、ＳＷ１を保持している間、ＡＥ処理によるシャッター速度（露光時間）、及び、Ｆ値などが、ＥＶＦ（Ｅｌｅｃｔｒｏｎｉｃ  Ｖｉｅｗ  Ｆｉｎｄｅｒ）などの画面に表示される。ユーザーはこれらの表示を参照して、撮影条件を認識することができ、場合によっては撮影条件の変更を行い、ユーザーにとって好ましい条件での撮影が可能となっている。
【００１６】
以上のようなカメラ操作系において、図４で示す星空・人物撮影モードの場合、撮影条件の表示を行うとすれば通常の連写撮影と同じように、ＳＷ１の操作時には、３枚の連写画像のうち撮影１枚目の画像におけるシャッター速度（図４ではＴ１）が表示される。
【００１７】
一方で、星空・人物撮影モードは、図５で示す通り、連写３枚分の露光時間が必要である。にもかかわらず、ユーザーはこれよりも少ないＳＷ１操作時に表示されている時間Ｔ１（撮影１枚目の画像のシャッター速度）を参照するため、撮影終了前にカメラ、もしくは、被写体を動かし、ブレた画像を取得してしまう可能性があった。そこで、本実施例では、星空・人物撮影モードのような多数枚の露光時間が強制される撮影モードの場合、星空を適正な露出で撮影するために行われる、最も露光時間の長い撮影条件が複数枚画像の撮影指示前に表示される。あるいは１回の撮影に掛かる時間、すなわち合成される複数枚の画像が撮影される露光時間の和が複数枚画像の撮影指示前に表示される。
【００１８】
図１は、本実施例に係る撮像装置の一例としてのデジタルカメラ１００の機能構成例を示すブロック図である。本実施例においては、被写体に対し静止画、及び、動画を撮影することのできる機能を有したデジタルカメラとなっている。
【００１９】
操作部１０１は、ユーザーがデジタルカメラ１００に対して各種コマンドを入力、設定するためのユーザーインターフェースになる。例えば、入力デバイスとして、各種コマンド設定の機能を有するメカニカルなスイッチやボタンにより構成している。また、タッチパネル式の液晶等の表示デバイスに、同様の機能を有するボタンを形成して表示させることにより構成してもよい。操作部１０１は、電源のＯＮ／ＯＦＦ、撮影条件の設定及び変更、撮影条件の確認、撮影済み画像の確認等で使用される。
【００２０】
操作部１０１にはシャッタースイッチも含まれている。シャッタースイッチの半押し状態の場合は第一のシャッタースイッチＳＷ１、全押し状態の場合は第二のシャッタースイッチＳＷ２として、撮影準備と本撮影（静止画撮影）の指示をシステム制御部１０２に通知する。
【００２１】
ＳＷ１の通知によりシステム制御部１０２に、後述するＡＦ（Ａｕｔｏ  Ｆｏｃｕｓ）処理、ＡＥ（Ａｕｔｏ  Ｅｘｐｏｓｕｒｅ）処理等の撮影条件の算出または設定の開始を指示する。一方で、ＳＷ２では、一連の撮影処理動作の開始コマンドとしてシステム制御部１０２に指示する。一連の撮影処理動作とは、撮像素子１０３からの画像信号の読み出し、Ａ／Ｄ変換、画像処理、任意の記録フォーマットへの変換処理を経て、画像記録部１１２への画像データ書き込み等の処理動作のことを指す。
【００２２】
システム制御部１０２は、操作部１０１からの指示に応じてデジタルカメラ１００の各部の動作を制御する。システム制御部１０２は一般的に、ＣＰＵ、ＣＰＵが実行するプログラムを記憶するＲＯＭ、及び、プログラムの読み込み用やワークエリア用としてのＲＡＭ等から構成される。
【００２３】
システム制御部１０２においては、画像処理部１０５から出力されるデジタル画像データから被写体輝度レベルを算出し、撮影モードに応じてシャッタースピード、及び、絞りの少なくとも一方を自動的に決定する自動露出制御（ＡＥ）処理を行う。
【００２４】
露出機構１０８ａは絞りおよびメカニカルシャッターの機能を有する。この露出機構１０８ａを用いて、システム制御部１０２から上述のＡＥ処理結果の通知を受けたメカ駆動部１０８の制御による絞りとシャッタースピードで動作させることで、レンズ１０７ａと撮像素子１０３の間の光路及び光量を確保することができる。これにより、上述のＡＥ処理で求まる露出条件による被写体の撮像素子１０３への露光が可能になる。
【００２５】
また、システム制御部１０２は、レンズ駆動部１０７を用いてレンズ光学系１０７ａのフォーカスレンズを駆動させ、画像処理部１０５が出力するデジタル画像データのコントラストの変化を検出し、これに基づいて自動合焦制御（ＡＦ）処理を行う。
【００２６】
また、本実施例の操作部１０１にはズーム機能を実施するためのズームレバーも設けられており、これにより、ズームレバーと連動するズームポジションまでレンズ光学系１０７ａの所定のズームレンズの移動を指示する信号がシステム制御部１０２に通知される。システム制御部１０２は、この信号に基づいてレンズ駆動部１０７を用いて、レンズ光学系１０７ａのズームレンズを所望のズームポジションになるまで移動させる。以上のレンズ光学系１０７ａの制御により、所望のズームポジションとなるレンズ配置による撮影を実現可能にする。
【００２７】
また、システム制御部１０２は、設定ＩＳＯ感度に応じたゲイン調整量をＡ／Ｄ変換部１０４へ通知する役割もある。設定ＩＳＯ感度は、ユーザーが設定した固定感度であってもよいし、システム制御部１０２がＡＥ処理の結果に基づいて動的に設定したＩＳＯ感度であってもよい。ＩＳＯ感度の設定については、後述する。
【００２８】
さらに、システム制御部１０２は、発光手段である発光部１１０の設定を行ったり、上述のシステム制御部１０２からのＡＥ処理結果によるシャッタースピードや撮影モードなどに応じて、本撮影時の発光部１１０の発光操作の要否を決定したりする。発光部１１０の発光手段は、例えばキセノン管や発光ダイオード等である。発光部１１０のフラッシュ（ストロボ）の発光を決定した場合、システム制御部１０２はＥＦ処理部１０９にフラッシュ発光実施を指示する。ＥＦ処理部１０９は、システム制御部１０２からフラッシュ発光実施の指示を受けると、発光部１１０を制御し、露出機構１０８のシャッターが開くタイミングで発光部１１０を発光させる。
【００２９】
撮像素子１０３は、ＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）センサ、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ−Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）センサなどの光電変換デバイスである。撮像素子１０３は、レンズ１０７ａ、露出機構１０８ａを介して結像する被写体光学像を画素単位のアナログ電気信号（アナログ画像データ）に変換する。
【００３０】
Ａ／Ｄ（Ａｎａｌｏｇ／Ｄｉｇｉｔａｌ）変換部１０４は、撮像素子１０３から出力されたアナログ画像データに対して、相関二重サンプリング、ゲイン調整、Ａ／Ｄ変換等を実施しして、デジタル画像データとして出力する。適用するゲイン調整量（増幅率）はシステム制御部１０２から通知されることにより与えられ、ゲインを大きく設定すれば信号レベルも大きくなるが、反面、画像中に含まれるノイズ成分も大きくなる。ここでのゲイン設定は、上述したＩＳＯ感度の設定に応じて変更するものであり、詳細は後述する。
【００３１】
画像処理部１０５は、Ａ／Ｄ変換部１０４から出力されたデジタル画像データに対して、さまざまな画像処理を実施する。例えば、ホワイトバランス補正、エッジ強調処理、ノイズ除去処理、画素補間処理、ガンマ補正処理、色差信号生成などの画像処理を行い、処理済みデジタル画像データとしてＹ（輝度）ＵＶ（色差）画像データを出力するなどの処理を行う。
【００３２】
また、画像処理部１０５は、各種撮影モードに対応した画像処理も実施する。本実施例で用いる星空・人物撮影モードも撮影モードの一つであり、詳細は後述する。
【００３３】
表示部１０６はＬＣＤなどの表示媒体を含み、上述の画像処理部１０５による処理済みデジタル画像データに対し、不図示のＤ／Ａ変換処理後の画像を表示させる。
【００３４】
また、カメラが設定されている撮影モードや、前述の第一のシャッタースイッチＳＷ１保持中の撮像時のシャッター速度やＩＳＯ感度などの撮影条件も、この表示部１０６を用いて表示することができる。本実施例の星空・人物撮影モードにおける、シャッタースイッチＳＷ１保持中の撮影条件の表示に関しては、後述する。
【００３５】
フォーマット変換部１１１は、画像処理部１０５から出力されたデジタル画像データに対し、例えばＤＣＦ（Ｄｅｓｉｇｎ  ｒｕｌｅ  ｆｏｒ  Ｃａｍｅｒａ  Ｆｉｌｅ  Ｓｙｓｔｅｍ）に準拠した記録用のデータファイルを生成する。フォーマット変換部１１１は、データファイル生成の過程で、ＪＰＥＧ形式やＭｏｔｉｏｎ  ＪＰＥＧ形式への符号化や、ファイルヘッダの生成などを行う。
【００３６】
画像記録部１１２では、フォーマット変換部１１１で生成したデータファイルを、デジタルカメラ１００の内蔵メモリや、デジタルカメラ１００に装着されているリムーバブルメディアなどに記録する。
【００３７】
外部接続部１１３は、デジタルカメラ１００をＰＣ（パーソナルコンピュータ）やプリンタといった外部装置に接続するためのインターフェースである。外部接続部１１３は、例えばＵＳＢ、ＩＥＥＥ１３９４などの一般的な規格に準拠して外部装置との通信を行って画像データ等の授受を行い、各外部機器の機能を活用する。
【００３８】
次に、本実施例のデジタルカメラ１００の動作について図１および図２（ａ）のフローチャートを用いて説明する。
【００３９】
ユーザーが操作部１０１の一つである電源スイッチ（不図示）をＯＮにすると、システム制御部１０２はこれを検知し、デジタルカメラ１００の各構成部に対し、電池やＡＣ入力（不図示）により電源を供給する。
【００４０】
本実施例のデジタルカメラ１００は、電源が供給されるとＥＶＦ（Ｅｌｅｃｔｒｏｎｉｃ  Ｖｉｅｗ  Ｆｉｎｄｅｒ）表示動作を開始するように構成されている。まず、電源が供給されると、露出機構１０８ａに設けられたメカニカルシャッターが開き、撮像素子１０３が露光される。撮像素子１０３の各画素で蓄積した電荷を、予め定められたフレームレートで順次読み出し、Ａ／Ｄ変換部１０４にアナログ画像データとして出力する。以上のように本実施例では、ＥＶＦ表示用の画像として、予め定められたフレームレートで順次読み出す、いわゆる電子シャッターを用いて連続して撮像することにより取得する（ステップＳ１）。
【００４１】
Ａ／Ｄ変換部１０４は、前述の通り、撮像素子１０３から出力されたアナログ画像データに対して、相関二重サンプリング、ゲイン調整、Ａ／Ｄ変換等を行い、デジタル画像データとして出力する。ここで、ゲイン調整に関し、以下に記載する。
【００４２】
撮像素子１０３では、露光量によってそのアナログ電気信号の出力信号レベルが変化する。明るい被写体では露光量が増加するため出力信号レベルも大きいものとなり、一方、暗い被写体では露光量が減少するため出力信号レベルも小さいものとなる。以上のようなレベル変動が生じるアナログ電気信号をＡ／Ｄ変換部１０４に入力し、ゲイン調整をせずに出力した場合、出力されたデジタル電気信号もレベル変動が生じる。
【００４３】
これに対し、デジタルカメラでは一般的に、被写体の明るさ（アナログ電気信号の出力信号レベル）によらずＡ／Ｄ変換部１０４からのデジタル電気信号の出力信号レベルを一定に保つようなゲインが、被写体の明るさに応じて設定されている。
【００４４】
以上のゲインは、撮影条件の一つであるＩＳＯ感度の設定に応じて変化し、調整されるものである。つまり、被写体の明るい低ＩＳＯ感度時よりも被写体の暗い高ＩＳＯ感度時の方がゲインとしては高い値に設定する。このため、ノイズ成分としても、高ＩＳＯ感度時の方が高ゲインによる増幅効果により、悪化することになる。
【００４５】
以上のようなＡ／Ｄ変換部１０４のゲイン設定に関係するＩＳＯ感度の設定については、ユーザーが設定した固定ＩＳＯ感度であってもよいし、システム制御部１０２からのＡＥ処理の結果に基づく動的な設定のＩＳＯ感度であってもよい。
【００４６】
画像処理部１０５は、Ａ／Ｄ変換部１０４から出力されたデジタル画像データに対してさまざまな処理を行い、画像処理済みデジタル画像データとして例えばＹＵＶ画像データを出力する。
【００４７】
また、表示部１０６は、画像処理部１０５が出力するデジタル画像データを用いて、不図示のＤ／Ａ変換処理を行った画像を逐次表示している。
【００４８】
システム制御部１０２は、操作部１０１からＳＷ１の通知を受けない限り、上述のＥＶＦ表示処理の実行を繰り返す（ステップＳ２）。
【００４９】
システム制御部１０２がＳＷ１の通知を受けると、通知を受けた時点で最新の撮像画像を用いてＡＦ処理、ＡＥ処理を行い、合焦位置および露出条件を決定し、撮影条件として設定する（ステップＳ３）。本実施例では、複数枚の連続撮影を行うので、各撮影に適した撮影条件をここで決定し、設定しておく。
【００５０】
また、ステップＳ３にて同時にシステム制御部１０２は、発光部１１０の発光要否も決定する（ＥＦ処理）。フラッシュを発光するか否かは、操作部１０１を用いて予め設定しても良いし、あるいは、上記ＡＥ処理結果を受けて設定してもよいし、もしくは、周囲の暗さを検知し自動的に判定して設定しても良い。
【００５１】
システム制御部１０２は、ステップＳ３にて設定されたＳＷ２後、すなわち撮影指示に応じた撮影の撮影条件を、表示部１０６に表示する（ステップＳ４）。本実施例では、この際に表示する撮影条件として、通常撮影モードでは撮影される１枚の露光時間であるところを、本実施例で提唱する星空・人物撮影モードのような複数枚の連続撮影においては、最も露光時間の長い撮影画像の露光時間を表示させる。あるいは、複数枚の撮影に必要な時間に対応する、各露光時間の和を表示させる。
【００５２】
システム制御部１０２は、操作部１０１からのＳＷ１の通知が継続している間、ＳＷ２（第二のシャッタースイッチ、全押しの通知）の通知を受け取るまで、撮影動作をすることなく待機し続ける（ステップＳ５）。一方で、ＳＷ２の通知を受ける前にＳＷ１の通知が途絶えた場合には、システム制御部１０２は固定した撮影条件を解除して、ＥＶＦ表示のための制御を再開させるように動作する。
【００５３】
ＳＷ２の通知を受けるとシステム制御部１０２は、発光部１１０を発光させる場合にはＥＦ処理部１０９を制御し、発光部１１０にプリ発光を行わせ、発光量の算出、ＥＦ枠の重み付けなどの処理を行う。そして、システム制御部１０２は、上述の算出された本発光量で発光部１１０を発光するようにＥＦ処理部１０９に指示して、本撮影処理に移行する。また、発光部１１０を発光させない場合は、システム制御部１０２は上述の調光制御を行わずに本撮影処理に移行する。
【００５４】
ＳＷ２の通知を受けてからの本撮影処理では、ＳＷ１時のＡＦ処理、ＡＥ処理、場合によってはＥＦ処理を経た撮影条件で、撮像素子１０３上に被写体光学像を結像、及び、露光する（ステップＳ６）。その後、撮像素子１０３からの画素単位のアナログ電気信号を、Ａ／Ｄ変換部１０４でデジタル画像データに変換して、この画像データを用いて画像処理部１０５で、後述する合成処理等も含めて画像処理を行う（ステップＳ７）。画像処理済みのデジタル画像データを、フォーマット変換部１１１によって記録用のデータファイル形式に変換し、画像記録部１１２により記録媒体に記録する。並行して、あるいは記録後に、システム制御部１０２が、表示部１０６にて該当する画像データの画像を表示する（ステップＳ８）。
【００５５】
以上が、本実施例で記すデジタルカメラにおける構成および撮影の基本動作のフローになる。
【００５６】
次に、本実施例で特徴的な星空・人物撮影モードの撮影についての画像処理のフロー及び各モジュールで生成される画像を、図２（ｂ）を用いて詳述する。図２（ｂ）に示す処理は、星空・人物撮影モード時に図２（ａ）のステップＳ６、Ｓ７でシステム制御部１０２の指示により行われる処理である。
【００５７】
図３に本実施例と後述する実施例２における撮影画像の各撮影条件と撮影順序を説明する図を示す。図中、「実施例１」の欄が、本実施例の星空・人物撮影モードの撮影順序、及び、星空・人物撮影モードで特徴的な撮影条件（ストロボ発光の有無、及び、露出時間（シャッター速度））である。
【００５８】
星空・人物撮影モードでは、撮影１枚目はフラッシュを発光させて、露光時間をＴ１で撮像して画像を取得する撮影工程（以後、この工程を「工程Ａ」と表記）である。撮影２枚目はフラッシュ発光をさせずに、露光時間をＴ１で撮像して画像を取得する撮影工程（以後、この工程を「工程Ｂ」と表記）である。そして、最後の撮影３枚目は、フラッシュ発光をさせずに、露光時間をＴ２で撮像して画像を取得する撮影工程（以後、この工程を「工程Ｃ」と表記）となっている。
【００５９】
星空・人物撮影モードにおいては、工程Ａおよび工程Ｂの露光時間Ｔ１は、人物のような主被写体に対しフラッシュ発光の状態で適正を示す露光時間であり、短秒となっている。一方で、工程Ｃの露光時間は、星空夜景などの暗い被写体に対し適正を示す露光時間であり、長秒となっている。従って、星空・人物撮影モードにおいては、露光時間Ｔ１およびＴ２の間には、Ｔ１＜Ｔ２なる関係がある。
【００６０】
工程Ａによる撮影で取得したＣＲＷ２０１は現像モジュール２０２で現像処理が実施され、ＹＵＶから成る中間画像２０３が得られる。ここでの現像処理とは、前記したホワイトバランス補正、エッジ強調処理、ノイズ除去処理、画素補間処理、ガンマ補正処理、色差信号生成などの通常の画像処理のことである。
【００６１】
また、同様に、工程Ｂによる撮影で取得したＣＲＷ２１１は現像モジュール２１２で現像処理が実施され、ＹＵＶから成る中間画像２１３が得られる。そして、工程Ｃによる撮影で取得したＣＲＷ２２１は現像モジュール２２２で現像処理が実施され、ＹＵＶから成る中間画像２２３が得られ、上述のＣＲＷと合わせ合計３種類のＣＲＷを取得する。
【００６２】
その後、工程Ａの中間画像２０３と工程Ｂの中間画像２１３を用いて、差分検出モジュール２４４により、マップ画像２４５が得られる。マップ画像２４５は、工程Ａの撮影でフラッシュ発光により反射して撮像素子１０３で受光した被写体部分のみが表示されるため、背景はほとんど表示されず、主に主被写体のみによるマップが形成される。
【００６３】
合成処理モジュール２４６では、工程Ａによる中間画像２０３、及び、工程Ｃによる中間画像２２３を用いて合成を行う。上述のマップ画像２４５の結果から、中間画像２０３における適正露出の画像（主に主被写体）を抽出し、この抽出画像と中間画像２２３とを合成して、最終画像（処理後画像）のＹＵＶ２４７を取得する。つまり、主被写体も、星空夜景も適正露出の画像を取得することができるのである。
【００６４】
以上のようにして取得した最終画像のＹＵＶ２４７をフォーマット変換部１１１によってＪＰＥＧ等の記録用のデータファイル形式に変換し、画像記録部１１２により記録媒体に記録する。このとき、最終画像（処理後画像）に付帯して記録媒体に記録する情報として、撮影条件の情報などが含まれているが、本実施例の星空・人物撮影モード撮影時の付帯情報としては、最も露光時間の長い工程Ｃの撮影条件を用いている。これにより、星空・人物撮影モード撮影における、工程Ｃの露出条件（シャッター速度、Ｆ値、ＩＳＯ感度など）をユーザーは知ることができ、星空夜景のみを撮影したい時などで大いに有効な情報とすることができる。これに限らず、人物の撮影に適した撮影条件も後に参照したいなど、別の目的があれば、最終画像の生成に用いた他の画像の撮影条件も併せて付帯してもよい。
【００６５】
以上のように、本実施例では、撮影指示前に撮影時の露光時間（シャッター速度）およびＦ値を表示部１０６に表示させるとき、撮影１枚目から３枚目までの露光時間の総和２Ｔ１＋Ｔ２を表示部１０６上に表示させる。あるいは複数枚の撮影画像のうち、最も長い露光時間であるＴ２を表示部１０６に表示させる。これにより、ユーザーは任意の１枚の撮影画像の露光時間が表示される場合に比べて、より連続して行われる複数枚の撮影に実際に必要な時間に近い情報を得られる。従って、ユーザーが撮影終了（本来３枚分の画像の撮影時間が必要）の前にカメラを動かし、ブレた画像を取得してしまうような失敗を少なくすることができる。また、星空・人物撮影モードにおいては、星空を適切に撮影するために必要な露光時間が表示されることになるので、本モードで最も重要視される星空撮影に適切な露光時間を撮影時に確認しながら撮影を行うことができる。
【００６６】
以上の本発明の効果は、本実施例の星空・人物撮影モードに限るものではなく、所定枚数の画像を連続して取得し、合成するような撮影モード（例えばブラケット撮影やＨＤＲ合成のための撮影）においても有効である。
【００６７】
本実施例では、記録媒体に記録する情報として、画像情報以外に、撮影条件の情報などからなる付帯情報も付与されているが、特にその中に、人物撮影に適した工程Ａの撮影条件と、星空撮影に適した工程Ｃの撮影条件が含まれている。これにより、ユーザーは付帯情報をもって人物のみや星空夜景のみを別途撮影したい時などに参照する有効な情報とすることができる。
【００６８】
また、本実施例では、星空とともに人物を適正に撮影する星空・人物撮影モードにおいて発光手段による発光を伴う撮影を含めて３枚の撮影を行っているが、星空とその他の建物等の被写体をどちらも適切に撮影するための撮影方法にも、本発明は適用できる。この撮影方法では、星空以外の被写体を適切な明るさで撮影するための露光時間Ｔ１で１枚目の撮影を行った後、星空を適切な明るさで撮影するための露光時間Ｔ２（Ｔ１＜Ｔ２）で撮影を行う。そして星空領域は露光時間Ｔ１の画像、それ以外の領域はＴ２の画像を主に使用して合成画像を生成する。このときも、星空・人物撮影モードと同様に、露光時間の和（Ｔ１＋Ｔ２）かあるいは、長く支配的な露光時間のＴ２の時間を、撮影指示前に表示部１０６に表示しておくと、ユーザーは２枚の撮影に実際に必要な時間に近い情報が得られる。
【００６９】
また、本実施例では、撮影時の露光時間の報知方法として表示部１０６への露光時間の表示を挙げたが、これに限らず、ユーザーが露光時間を把握できれば、音声等の他の報知方法でも構わない。
【００７０】
（実施例２）
本実施例は、図３の「実施例２」の欄で示す通り、星空・人物撮影モードの３種類の撮影画像における撮影順番が異なること以外は、図１の構成や図２（ａ）の撮影シーケンス等は実施例１と同様である。
【００７１】
すなわち、実施例１で記載した撮影工程Ａ〜Ｃに対し、撮影１枚目は工程Ｃにより画像を取得し、撮影２枚目は工程Ｂにより画像を取得し、撮影３枚目は工程Ａにより画像を取得する。また、本実施例においても、ＳＷ１時は撮影１枚目から３枚目までの露光時間の総和２Ｔ１＋Ｔ２を表示させているので、実施例１と同様の効果も同様に得ることができる。
【００７２】
一方で、本実施例では、実施例１と比べて撮影１枚目の撮影条件が大きく異なっており、これにより以下のような差異が生じる。
【００７３】
実施例１では、撮影１枚目はフラッシュ発光の状態で露光時間が短秒のＴ１で撮影を行い、その後、フラッシュを発光させずに露光時間が短秒Ｔ１の２枚目の撮影、露光時間が長秒Ｔ２の３枚目の撮影を行う。
【００７４】
これに対し、本実施例は、フラッシュは発光させず露光時間が長秒のＴ２で撮影を行い、次の２枚目でフラッシュを発光させずに露光時間が短秒Ｔ１の撮影、引き続き、フラッシュを発光させて露光時間が短秒Ｔ１の３枚目の撮影を行う。
【００７５】
すなわち、フラッシュを発光させてから、星空・人物撮影モード撮影終了までの時間として、実施例１は２Ｔ１＋Ｔ２、本実施例はＴ１であり、本実施例の方が大幅に短い。
【００７６】
被写体が人物の場合、その心理としてフラッシュの発光が終わった段階で撮影が終了したものと判断し、動いてしまい易い。このような心理が働き被写体が動いてしまった場合、当然、ブレた失敗画像が得られる。この点で、実施例１はフラッシュ発光から撮影終了までの時間が２Ｔ１＋Ｔ２と長く、上述のような失敗画像が得られ易いという側面を有していた。
【００７７】
これに対し、本実施例では、３種類の合成画像の撮影順番を変更するだけで、フラッシュ発光後Ｔ１という非常に短い時間で撮影を終了させることができるので、上述のようなブレた失敗画像の取得率も大幅に軽減することができる。
【００７８】
＜撮像と撮影＞
なお、本実施例において「撮影」とは、ＳＷ２の押下げにより行われる撮像及びその撮像により得られた画像の記録までの一連の動作を意味する。
【００７９】
（他の実施形態）
本発明の目的は以下のようにしても達成できる。すなわち、前述した各実施形態の機能を実現するための手順が記述されたソフトウェアのプログラムコードを記録した記憶媒体を、システムまたは装置に供給する。そしてそのシステムまたは装置のコンピュータ（またはＣＰＵ、ＭＰＵ等）が記憶媒体に格納されたプログラムコードを読み出して実行するのである。
【００８０】
この場合、記憶媒体から読み出されたプログラムコード自体が本発明の新規な機能を実現することになり、そのプログラムコードを記憶した記憶媒体およびプログラムは本発明を構成することになる。
【００８１】
また、プログラムコードを供給するための記憶媒体としては、例えば、フレキシブルディスク、ハードディスク、光ディスク、光磁気ディスクなどが挙げられる。また、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＤＶＤ−ＲＷ、ＤＶＤ−Ｒ、磁気テープ、不揮発性のメモリカード、ＲＯＭ等も用いることができる。
【００８２】
また、コンピュータが読み出したプログラムコードを実行可能とすることにより、前述した各実施形態の機能が実現される。さらに、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯＳ（オペレーティングシステム）等が実際の処理の一部または全部を行い、その処理によって前述した各実施形態の機能が実現される場合も含まれる。
【００８３】
更に、以下の場合も含まれる。まず記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれる。その後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行う。
【００８４】
また、本発明はデジタルカメラのような撮影を主目的とした機器にかぎらず、携帯電話、パーソナルコンピュータ（ラップトップ型、デスクトップ型、タブレット型など）、ゲーム機など、撮像装置を内蔵もしくは外部接続する任意の機器に適用可能である。従って、本明細書における「撮像装置」は、撮像機能を備えた任意の電子機器を包含することが意図されている。
【符号の説明】
【００８５】
１０１  操作部
１０２  システム制御部
１０３  撮像素子
１０４  Ａ／Ｄ変換部
１０５  画像処理部
１０６  表示部
１０７  レンズ駆動部
１０７ａ  レンズ光学系
１０８  メカ駆動部
１０８ａ  露出機構
１０９  ＥＦ処理部
１１０  発光部
１１１  フォーマット変換部
１１２  画像記録部
１１３  外部接続部
【図１】
2015041864.tif 000003
【図２】
2015041864.tif 000004
【図３】
2015041864.tif 000005
【図４】
2015041864.tif 000006