(57)【要約】【課題】簡単な操作でユーザの好みに応じたＨＤＲ撮影画像及び画像データを得る。【解決手段】  撮影機器は、被写体像を撮像する撮像部と、上記撮像部に、複数の露出値による複数の撮像を設定する共に、上記複数の露出値を切換え可能な露出変更部と、上記複数の露出値による複数の撮像によって得られた複数の撮像画像を画像合成する画像合成部と、上記画像合成部によって画像合成された画像に基づく表示を表示させる表示制御部と、上記露出変更部による上記複数の露出値の切換えを制御する操作検出部とを具備する。【選択図】図１
2013251724.tif 000002
【特許請求の範囲】
【請求項１】
被写体像を撮像する撮像部と、
上記撮像部に、複数の露出値による複数の撮像を設定する共に、上記複数の露出値を切換え可能な露出変更部と、
上記複数の露出値による複数の撮像によって得られた複数の撮像画像を画像合成する画像合成部と、
上記画像合成部によって画像合成された画像に基づく表示を表示させる表示制御部と、
上記露出変更部による上記複数の露出値の切換えを制御する操作検出部と
を具備したことを特徴する撮影機器。
【請求項２】
上記表示制御部は、上記複数の露出値に対応する補助表示を表示する
ことを特徴する請求項１に記載の撮影機器。
【請求項３】
上記操作検出部は、タッチパネルを利用した上記補助表示に対する操作によって、上記複数の露出値の切換えを制御する
ことを特徴する請求項２に記載の撮影機器。
【請求項４】
上記操作検出部は、上記撮像部の撮像を制御するシャッターボタンに対する操作によって、上記複数の露出値の切換えを制御する
ことを特徴する請求項１又は２に記載の撮影機器。
【請求項５】
上記露出変更部は、上記操作検出部の操作に応じて上記複数の露出値を決定する
ことを特徴する請求項１又は２に記載の撮影機器。
【請求項６】
上記露出変更部は、上記操作検出部の操作に応じて上記複数の露出値を切換える
ことを特徴する請求項５に記載の撮影機器。
【請求項７】
上記露出変更部は、上記複数の露出値を自動的に切換えると共に上記操作検出部の操作に応じて上記切換えを停止して上記複数の露出値を決定する
ことを特徴する請求項５に記載の撮影機器。
【請求項８】
前記画像合成部によって画像合成された画像に基づく画像ファイルを生成する記録制御部を具備し、
前記記録制御部は、前記複数の露出値に関する情報を前記画像ファイルに含める
ことを特徴とする請求項１に記載の撮影機器。
【請求項９】
前記画像合成部によって画像合成された画像に基づく画像ファイルを生成する記録制御部を具備し、
前記記録制御部は、前記画像合成された画像と合成前画像とを前記画像ファイルに含める
ことを特徴とする請求項１に記載の撮影機器。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ハイダイナミックレンジ撮影が可能な撮影機器に関する。
【背景技術】
【０００２】
近年、デジタルカメラなどの撮影機能付き携帯機器（撮影機器）が普及している。この種の撮影機器においては表示部を有して、撮影画像を表示する機能を有するものもある。更に、表示部にメニュー画面を表示して、撮影機器の操作を容易にしたものもある。
【０００３】
また、撮影機器においては、自動露出調整機能を備えたものもある。通常、主要被写体に対して露出が適正になるように露出調整が行われる。ところが、被写体の明暗差が大きい場合には、明るい部分が白飛びし、暗部が黒つぶれすることがある。
【０００４】
そこで、従来、露出を変化させながら複数枚の写真を撮影して合成することで、ダイナミックレンジを拡大し、白飛びや黒つぶれを抑制するハイダイナミックレンジ（ＨＤＲ）撮影が可能な撮影機器も商品化されている。
【０００５】
例えば、特許文献１においては、リアルタイムにヒストグラムを表示することにより、ダイナミックレンジ拡大の効果を確認する技術が提案されている。また、特許文献２においては、多重露光撮影モードを備えたカメラで、撮影した画像の中から撮影者が任意で画像を選択し、その画像をカメラのモニタ上で編集、合成することで、画像の補正の結果をその場で確認可能にして、撮影者の好みに応じた合成画像を提供する技術が開示されている。
【先行技術文献】
【特許文献】
【０００６】
【特許文献１】特開２００９−２３９６３７号公報
【特許文献２】特開２００６−２５３８１０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、従来、ユーザがＨＤＲ撮影により好みに応じた合成画像を得るためには、比較的煩雑な確認作業が必要であるという問題があった。
【０００８】
本発明は、簡単な操作でユーザの好みに応じたＨＤＲ撮影画像や画像データを得ることができる撮影機器を提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明に係る撮影機器は、撮影機器は、被写体像を撮像する撮像部と、上記撮像部に、複数の露出値による複数の撮像を設定する共に、上記複数の露出値を切換え可能な露出変更部と、上記複数の露出値による複数の撮像によって得られた複数の撮像画像を画像合成する画像合成部と、上記画像合成部によって画像合成された画像に基づく表示を表示させる表示制御部と、上記露出変更部による上記複数の露出値の切換えを制御する操作検出部とを具備する。
【発明の効果】
【００１０】
本発明によれば、簡単な操作でユーザの好みに応じたＨＤＲ撮影画像や画像データを得ることができるという効果を有する。
【図面の簡単な説明】
【００１１】
【図１】本発明の第１の実施の形態に係る撮影機器の回路構成を示すブロック図。
【図２】ＨＤＲ撮影モード時における表示画面上の表示を説明するための説明図。
【図３】ＨＤＲ撮影モード時における表示画面上の表示を説明するための説明図。
【図４】カメラ制御を説明するためのフローチャート。
【図５】本発明の第２の実施の形態において採用されるＨＤＲ撮影支援方法を説明するための説明図。
【図６】本発明の第２の実施の形態において採用されるＨＤＲ撮影支援方法を説明するための説明図。
【図７】本発明の第２の実施の形態において採用されるＨＤＲ撮影支援方法を説明するための説明図。
【図８】図６に対応したＨＤＲスケール表示６１を示す説明図。
【図９】ユーザ操作を示す説明図。
【図１０】水平方向に時間をとり、各合成ステップにおける撮像タイミングと撮像画素数を説明するための説明図。
【図１１】カメラ制御を示すフローチャート。
【図１２】第２の実施の形態を説明するためのフローチャート。
【図１３】第２の実施の形態を説明するためのフローチャート。
【図１４】第２の実施の形態の変形例を示すフローチャート。
【図１５】警告表示の一例を示す説明図。
【図１６】第２の実施の形態の他の変形例を示すフローチャート。
【図１７】警告表示の一例を示す説明図。
【図１８】記録部１６による画像のファイル化によって生成されるＲＡＷデータファイルの構造を示す説明図。
【図１９】ＨＤＲ合成前の各画像をそれぞれ関連づけてＲＡＷデータ記録する場合の例を示す説明図。
【発明を実施するための形態】
【００１２】
以下、図面を参照して本発明の実施の形態について詳細に説明する。
【００１３】
（第１の実施の形態）
図１は本発明の第１の実施の形態に係る撮影機器の回路構成を示すブロック図である。本実施の形態における撮影機器１は、本体部１０、交換レンズ２０及び表示部３０によって構成されている。本体部１０は、筐体中に撮影機器１の主要な回路部分が収納されて構成される。本体部１０は、前面に交換レンズ２０が着脱自在に取り付けられ、背面に表示部３０が設けられている。
【００１４】
表示部３０は、後述するように、撮像画像を表示する表示画面３１を有している。また、表示画面３１上には、タッチパネル３２が設けられている。タッチパネル３２は、ユーザが指で指し示した表示画面３１上の位置に応じた操作信号を発生することができる。この操作信号は、本体部１０の後述する信号処理及び制御部１１に供給される。これにより、信号処理及び制御部１１は、ユーザがタッチした表示画面３１上の位置やユーザが表示画面３１上を指でスライドさせるスライド操作を検出することができ、ユーザ操作に対応した処理を実行することができるようになっている。
【００１５】
表示部３０は、本体部１０の背面に沿って表示画面３１が設けられており、撮影者は、撮影時に表示画面３１上に表示されたスルー画を確認することができ、スルー画を確認しながら撮影操作を行うことができる。
【００１６】
交換レンズ２０は、本体部１０の撮像部１２に被写体像を導くレンズ部２１を有している。レンズ部２１は、ズームやフォーカシングのためのレンズ等を備えており、これらのレンズを駆動制御するための操作部２２を備えている。ズームリングやピントリング等によって構成される操作部２２の操作によって、ピントのみならず、ズーム位置や絞りの調整も可能である。
【００１７】
操作部２２は、ユーザ操作に基づく操作信号を制御部２３に出力する。制御部２３は、マイコン等によって構成されており、操作部２２からの操作信号に基づいて、回転操作及びシフト操作に基づくフォーカス信号及びズーム信号を発生して、駆動部２４を制御する。
【００１８】
モーター等によって構成された駆動部２４は、レンズ部２１に設けられたピント合わせに関連するピントレンズ及びズーミングに関連するズームレンズを駆動し、ピント制御及びズーム制御を行う。レンズ部２１にはピント制御部２１ａ及びズーム制御部２１ｂが設けられている。ピント制御部２１ａはピントレンズの位置に対応した信号をピント位置判定部２５ａに出力する。また、ズーム制御部２１ｂはズームレンズの位置（ズーム位置）に対応した信号をズーム位置判定部２５ｂに出力する。
【００１９】
ピント位置判定部２５ａは、ピント制御部２１ａの出力に基づいてピント位置を判定して判定結果を制御部２３に出力する。ズーム位置判定部２５ｂは、ズーム制御部２１ｂの出力に基づいてズーム位置を判定して判定結果を制御部２３に出力する。制御部２３は、ピント位置及びズーム位置の判定結果が与えられ、操作部２２の操作に対応したピント位置及びズーム位置となるように、駆動部２４を制御する。
【００２０】
交換レンズ２０には、通信部２８が設けられている。また、本体部１０には通信部１３が設けられている。通信部２８は、所定の伝送路を介して本体部１０の通信部１３との間で情報の送受を行う。制御部２３は、本体部１０の通信部１３との間の通信が確立すると、記録部２６に格納したレンズ情報及びズーム操作に関するズーム情報等を通信部２８，１３によって本体部１０に送信させることができる。
【００２１】
レンズ情報により、本体部１０は、交換レンズ２０がどのようなズーム機能を有しているか、ズームレンズの焦点距離範囲（倍率）、焦点距離、明るさナンバー等を認識することができる。また、本体部１０には、操作部２２からの回転操作の情報も与えられるようになっている。制御部２３は、通信部１３，２８介して本体部１０の信号処理及び制御部１１から制御信号が供給されて、信号処理及び制御部１１によって制御可能に構成されている。
【００２２】
なお、本実施の形態においては、種々の交換レンズを採用することができ、更に、交換レンズだけでなく、交換不能なレンズを採用してもよい。
【００２３】
撮影機器１を構成する本体部１０は、ＣＣＤやＣＭＯＳセンサ等の撮像素子によって構成された撮像部１２を有している。撮像部１２は、本体部１０の前面に設けられた交換レンズ２０からの被写体像を光電変換して撮影画像を得る。撮像部１２は、信号処理及び制御部１１によって駆動制御されて、撮影画像を出力する。
【００２４】
信号処理及び制御部１１は、例えば、図示しないＣＰＵ等によって構成されており、図示しないフラッシュメモリに記憶されたプログラムに従ってカメラ制御を行う。信号処理及び制御部１１は、撮像部１２に撮像素子の駆動信号を出力すると共に、撮像部１２からの撮影画像を読み出す。信号処理及び制御部１１は、読み出した撮影画像に対して、所定の信号処理、例えば、色調整処理、マトリックス変換処理、ノイズ除去処理、その他各種の信号処理を行う。
【００２５】
本体部１０には、時計部１４及び操作判定部１５も配設されている。時計部１４は信号処理及び制御部１１が用いる時間情報を発生する。操作判定部１５は、本体部１０に設けられた図示しないシャッターボタン、ファンクションボタン、撮影モード設定等の各種スイッチ等を含む操作部に対するユーザ操作に基づく操作信号を発生して、信号処理及び制御部１１に出力するようになっている。信号処理及び制御部１１は、操作信号に基づいて、各部を制御する。
【００２６】
信号処理及び制御部１１は、信号処理後の撮影画像を圧縮処理し、圧縮後の画像を記録部１６に与えて記録させることができる。記録部１６としては、例えばカードインターフェースを採用することができ、記録部１６はメモリカード等の記録媒体に画像情報及び音声情報等を記録可能である。
【００２７】
また、信号処理及び制御部１１の表示制御部１１ａは、表示に関する各種処理を実行する。表示制御部１１ａは、信号処理後の撮影画像を表示部３０及び接眼表示部１７に与えることができる。表示部３０及び接眼表示部１７は、夫々ＬＣＤ等の表示画面を有しており、表示制御部１１ａから与えられた画像を表示する。また、表示制御部１１ａは、各種メニュー表示等をこれらの表示画面に表示させることもできるようになっている。
【００２８】
また、本体部１０には、ユーザが目を接眼表示部１７の接眼する部分に近接させたことを検出するアイセンサ３５が設けられている。アイセンサ３５の検出結果によって、信号処理及び制御部１１は、ユーザが目を接眼する部分に近接させたか否かを判定することができるようになっている。
【００２９】
本実施の形態においては、信号処理及び制御部１１は、ＨＤＲ撮影モードによる撮影が可能である。タッチ・操作検出部１１ｂは、タッチパネル３２からの操作信号及び図示しない各操作部の操作を検出する操作判定部１５からの操作信号に基づいて、ユーザのタッチ操作、スライド操作、押下操作等を検出する。ＨＤＲモード設定部１１ｃは、タッチ・操作検出部１１ｂの検出結果に基づいて、ユーザがＨＤＲ撮影モードを指示したか否かを判定する。ＨＤＲモード設定部１１ｃは、ユーザによってＨＤＲ撮影モードが指示されたものと判定すると、各部をＨＤＲ撮影モードに設定する。例えば、露出変更部１１ｄは、ＨＤＲ撮影モードにおいては、絞り及びシャッタースピードを制御して、露出値ＥＶを変化させながら撮影を行わせる。
【００３０】
本実施の形態においては、ＨＤＲ撮影モード時には、表示制御部１１ａは、ＨＤＲモード設定部１１ｃに制御されて、ＨＤＲ撮影を制御するためのＨＤＲ補助表示を表示画面３１上に表示させる。なお、ＨＤＲ補助表示を接眼表示部１７の表示画面上に表示させるようにしてもよい。また、ＨＤＲモード設定部１１ｃは、ＨＤＲ撮影モードが指定された場合において、ユーザの更なる操作があった場合にのみ、ＨＤＲ補助表示を表示させるようにしてもよい。表示制御部１１ａは、ＨＤＲ撮影モード時には、タッチ・操作検出部１１ｂの検出結果に従って、ＨＤＲ補助表示の表示を変化させる。
【００３１】
本実施の形態においては、露出変更部１１ｄは、タッチ・操作検出部１１ｂの検出結果が与えられて、ユーザによる露出変更操作に従って露出値を設定することができるようになっている。
【００３２】
画像合成部１１ｅは、公知のＨＤＲ画像合成手法により、ＨＤＲ合成画像を生成する。例えば、画像合成部１１ｅは、撮像部１２から露出値ＥＶを変化させながら撮影された複数の撮像画像が与えられ、これらの画像を合成することで、白飛びや黒つぶれの少ない広いダイナミックレンジの画像を生成する。更に、画像合成部１１ｅは、生成したハイダイナミックレンジの画像に例えばトーンマッピング法等の処理を施してダイナミックレンジを縮小することで、規定のダイナミックレンジのＨＤＲ合成画像を生成する。
【００３３】
本実施の形態においては、画像合成部１１ｅは、タッチ・操作検出部１１ｂの検出結果が与えられて、ユーザによる露出変更操作に従った露出値で撮影された撮像画像同士のＨＤＲ画像合成を行う。
【００３４】
表示制御部１１ａは、画像合成部１１ｅからのＨＤＲ合成画像が与えられ、このＨＤＲ合成画像を表示部３０及び接眼表示部１７に与える。表示部３０及び接眼表示部１７は、表示制御部１１ａから与えられたＨＤＲ合成画像を表示する。表示制御部１１ａによって、ＨＤＲ撮影モード時には、表示画面３１上にＨＤＲ合成画像が表示されると共に、このＨＤＲ合成画像上にＨＤＲ補助表示が表示される。なお、ＨＤＲ補助表示を接眼表示部１７に表示させてもよい。
【００３５】
次に、このように構成された実施の形態の動作について図２乃至図４を参照して説明する。図２及び図３はＨＤＲ撮影モード時における表示画面上の表示を説明するための説明図であり、図４はカメラ制御を説明するためのフローチャートである。
【００３６】
本実施の形態においては、ユーザは、例えば、本体部１０を左手で支持し（図示省略）、右手で本体部１０を保持しながら撮影機器１による撮影を行う。図３に示すように、本体部１０の上面には右側にシャッターボタン５０が配設されており、ユーザは、右手の人差し指４８でシャッターボタン５０を押下することで撮影を行う。
【００３７】
撮影機器１の電源が投入されると、信号処理及び制御部１１は、図４のステップＳ１においてＨＤＲ撮影モードが指示されたか否かを判定する。ＨＤＲ撮影モードが指示されていない場合には、信号処理及び制御部１１は、ステップＳ２において、再生モードが指示されたか否かを判定する。再生モードが指示されると、信号処理及び制御部１１は、ステップＳ３において選択画像の再生を行う。ユーザが再生画像の変更を指示すると、信号処理及び制御部１１は、ステップＳ４から処理をステップＳ５に移行して画像の変更を行う。なお、信号処理及び制御部１１は、ステップＳ２において再生モードが指定されていない場合には、ステップＳ６において撮影画像を送信する画像通信モードに移行する。
【００３８】
ＨＤＲ撮影モードが指示されると、信号処理及び制御部１１は、ステップＳ１１において、レンズ交換が行われたか否かを判定して、レンズ交換が行われた場合には、交換レンズ２０の制御部２３との間で通信を行ってレンズ情報を取得する（ステップＳ１２）。
【００３９】
次に、信号処理及び制御部１１は、ステップＳ１３において、スルー画の表示を開始する。即ち、信号処理及び制御部１１は、撮像部１２からの撮像画像を取り込み、所定の信号処理を施す。表示制御部１１ａは、撮像画像を例えば表示部３０に与えて表示画面３１上にスルー画を表示させる。
【００４０】
次のステップＳ１４では、ＨＤＲモード設定部１１ｃによって、ＨＤＲ補助表示を表示させるための操作が行われたか否かが判定される。タッチ・操作検出部１１ｂは、ユーザによる表示画面３１上のタッチパネル３２の操作や、各種操作部の操作を検出する。ＨＤＲモード設定部１１ｃは、例えば、ユーザがタッチパネル３２の外側（画面外）から画面上へのスライド操作を行った場合に、ＨＤＲ補助表示の表示のための操作が行われたものと判定してもよい。また、例えば、ＨＤＲモード設定部１１ｃは、ユーザがシャッターボタン５０を半押しした場合に、ＨＤＲ補助表示のための操作が行われたものと判定してもよい。
【００４１】
図２は同一画角の同一被写体について、露出値が異なる４枚の撮像画像を示している。図２（ａ）が露出値が最も高く、図２（ｂ）、図２（ｃ）、図２（ｄ）の順で露出値が低くなる。図２の撮像画像４１は、比較的暗い背景４２と雲等の比較的明るい背景４３と人物４４とが撮像された状態を示している。図２（ａ）は露出値が最も高く、明るい背景４３の部分は白飛びしている。逆に、図２（ｄ）は露出値が最も低い例であり、暗い背景４２及び人物４４が黒つぶれしている。
【００４２】
ＨＤＲ撮影モード移行直後、ＨＤＲ補助表示のための操作が行われる前においては、予め決められている露出設定によりＨＤＲ画像合成が行われる。例えば、信号処理及び制御部１１は、自動露出調整時の露出値を基準露出値として、基準露出値よりも露出値が＋側の撮像画像と−側の撮像画像と、基準露出値の撮像画像との３枚の撮像画像によるＨＤＲ合成画像を生成するものとする。この場合には、信号処理及び制御部１１は、初期状態で最も大きい露出値で撮像した撮像画像、最も小さい露出値で撮像した撮像画像及び基準露出値の撮像画像の３枚の撮像画像を用いて、ＨＤＲ合成画像を生成する。例えば、図２（ａ）乃至（ｄ）の露出値を夫々＋側２段、＋側１段、−側１段、−側２段の露出値であるものとすると、信号処理及び制御部１１は、ステップＳ３２において、＋２段の露出及び−２段の露出値、即ち、図２（ａ），（ｄ）の露出値の撮像画像４１と基準露出値の撮像画像との３枚の撮像画像を用いてＨＤＲ合成画像を生成する。このＨＤＲ合成画像がスルー画として表示画面３１上に表示される。
【００４３】
ＨＤＲモード設定部１１ｃによって、ＨＤＲ補助表示を表示させるための操作があったものと判定された場合には、表示制御部１１ａは、ステップＳ２１において、ＨＤＲ補助表示を行う。図３は、スルー画上にＨＤＲ補助表示としてのＨＤＲスケール表示４５が表示されていることを示している。ＨＤＲスケール表示４５は、ＨＤＲ画像合成において合成する複数の撮像画像の露出値を、ユーザ操作によって変更決定させるためのものである。ＨＤＲスケール表示４５中には、ユーザのスライド操作に応答してスライド自在なバー表示４６，４７が含まれる。例えば、バー表示４６は、自動露出制御によって設定される基準露出値よりも露出値が高い（＋側）の露出値を設定するためのものであり、バー表示４７は、基準露出値よりも露出値が低い（−側）の露出値を設定するためのものである。
【００４４】
ユーザは、バー表示４６をスライドさせることによって＋側の露出値を変更決定し、バー表示４７をスライドさせることによって−側の露出値を変更決定することができる。露出変更部１１ｄは、基準露出値以外に、バー表示４６，４７によって設定された２つの露出値を順次設定し、撮像部１２からこれらの露出値で撮像された３枚の画像を出力させる。画像合成部１１ｅは、異なる露出値で撮像された３枚の撮像画像をＨＤＲ合成して、ＨＤＲ合成画像を生成する。
【００４５】
例えば、信号処理及び制御部１１は、ＨＤＲ撮影モードにおいて、図２（ａ）乃至（ｄ）のように、４つの露出値による撮像画像を得ることができるものとする。この場合には、バー表示４６，４７は、夫々＋側に２段階、−側に２段階のスライド操作が可能である。
【００４６】
露出変更部１１ｄは、バー表示４６を最も上側にスライドさせた場合に、図２（ａ）の露出値を設定し、バー表示４６をＨＤＲスケール表示４５の中央よりも少し上の位置にスライドさせた場合に、図２（ｂ）の露出値を設定する。また、露出変更部１１ｄは、バー表示４７を最も下側にスライドさせた場合に、図２（ｄ）の露出値を設定し、バー表示４７をＨＤＲスケール表示４５の中央よりも少し下の位置にスライドさせた場合に、図２（ｃ）の露出値を設定する。
【００４７】
いま、例えば、図２（ｂ），（ｃ）の撮像画像に基づくＨＤＲ合成画像が得られているものとする。図３（ａ）は、この場合において表示画面３１上に表示されるＨＤＲ合成画像４０及びＨＤＲスケール表示４５を示している。ここで、ユーザが、図３（ａ）に示すように、親指４９をバー表示４７上に配置した後ＨＤＲスケール表示４５の最下端に親指４９をスライドさせる操作によって、バー表示４７を図３（ｂ）に示すように最下端に移動させるものとする。同様に、ユーザがスライド操作によって、図３（ｂ）に示すように、バー表示４６を最上端にスライドさせるものとする。
【００４８】
これらの操作はステップＳ２２，Ｓ２５において検出され、露出変更部１１ｄは、ＨＤＲ画像合成に用いる画像として、図２（ａ），（ｄ）の露出値を設定する（ステップＳ２３，Ｓ２６）。こうして、撮像部１２からは、基準露出値による撮像画像の外に、図２（ａ），（ｄ）に示す撮像画像４１が出力される。画像合成部１１ｅは、これらの３枚の画像を合成することで、ＨＤＲ合成画像を生成する。このＨＤＲ合成画像４０は、表示制御部１１ａによって表示画面３１上に表示される（ステップＳ２４，Ｓ２７）。
【００４９】
なお、ステップＳ２２〜Ｓ２７に示すように、ユーザがバー表示４６，４７をスライドさせる毎に、このスライド操作に対応する露出値が設定され、設定された露出値に応じた撮像が取り込まれてＨＤＲ画像合成が行われる。例えば、図３（ａ）の状態で、バー表示４７のみを最下端にスライドさせると、図２（ｂ），（ｄ）の撮像画像４１に基づくＨＤＲ画像合成が行われる。
【００５０】
また、信号処理及び制御部１１は、バー表示４６に対するユーザによる露出値の変更操作をリセットするためのリセット表示５１を表示させることもできる。ユーザがリセット表示５１の位置において表示画面３１上をタッチすることで、信号処理及び制御部１１は、処理をステップＳ３１からステップＳ３２に移行して、初期設定された露出値でＨＤＲ撮影を行う。なお、ユーザがＨＤＲ補助表示に対する何らの操作も行わなかった場合にも、ステップＳ３２において初期状態でのＨＤＲ撮影が行われる。
【００５１】
更に、表示制御部１１ａは、シャッターボタン５０の半押し操作又はタッチパネル３２のタッチ・スライド操作無しで所定時間が経過すると、処理をステップＳ３３からステップＳ３４に移行して、ＨＤＲ補助表示の表示を消去する。信号処理及び制御部１１は、ＨＤＲ補助表示が表示されていない状態では、タッチパネル３２のタッチ操作によって撮影を行うタッチレリーズ操作が可能である。
【００５２】
信号処理及び制御部１１は、ステップＳ３５において、露出制御及びフォーカス制御を行う。信号処理及び制御部１１は、次のステップＳ３６において、撮影操作が行われたか否かを判定する。ユーザがシャッターボタン５０を操作して撮影を行うと、信号処理及び制御部１１は、ステップＳ３７において撮影を行う。信号処理及び制御部１１は、画像合成部１１ｅにおいて生成されたＨＤＲ合成画像を記録部１６に与えて画像ファイル化する。
【００５３】
このように本実施の形態においては、ＨＤＲ撮影モード時には、ＨＤＲ撮影における露出をユーザに変更させるためのＨＤＲ補助表示を表示させ、ユーザの露出変更操作に応じた露出で撮影した複数の撮像画像によってＨＤＲ合成画像を生成する。生成したＨＤＲ合成画像をスルー画として表示すると共に、ユーザによる露出変更操作を受け付ける。これにより、ユーザは、ＨＤＲ画像合成の結果をスルー画によって確認しながら、好みに応じた合成画像を選択して、ＨＤＲ撮影を行う。このように、簡単な操作でユーザの好みに応じたＨＤＲ撮影画像を得ることができる。
【００５４】
また、露出変更は、基準露出値に対して＋側の露出を変更する操作と、−側の露出を変更する操作によって行うことができる。これにより、ユーザは露出変更操作とＨＤＲ合成画像の結果との対応関係を直感的に理解しやすく、好みの合成画像を得るための操作が容易である。
【００５５】
（第２の実施の形態）
図５乃至図９は本発明の第２の実施の形態において採用されるＨＤＲ撮影支援方法を説明するための説明図である。本実施の形態のハードウェア構成は第１の実施の形態と同様である。
【００５６】
本実施の形態は、ＨＤＲモード設定部１１ｃによるＨＤＲ撮影モード時の各部の動作制御及び表示制御部１１ａによるＨＤＲ補助表示の表示の仕方が第１の実施の形態と異なる。第１の実施の形態においては、ＨＤＲ画像合成に用いる撮像画像の露出をユーザが設定することで、ユーザが好みの合成画像を簡単に撮影することを可能にした。これに対し、本実施の形態は、ＨＤＲ撮影モード時には、ＨＤＲ画像合成に用いる複数枚の撮像画像の露出を自動的に変化させながら、順次ＨＤＲ画像合成を行って表示し、ユーザに好みの合成画像を選択させるようにしたものである。
【００５７】
図５は表示画面３１上に表示されたＨＤＲ補助表示の表示例を示している。図５において、本体部１０の背面に設けられた表示画面３１には、スルー画６７（絵柄省略）が表示される。本実施の形態においては、ＨＤＲ撮影モード時には、表示制御部１１ａは、表示画面３１の一部に、ＨＤＲ補助表示として、ＨＤＲスケール表示６１を表示させるようになっている。ＨＤＲスケール表示６１は、露出値の範囲を示す目盛り表示６２、現在の露出値の範囲を示すバー表示６３、合成する撮像画像の枚数を示す合成枚数表示６４及び露出値の範囲の最大値を示す表示６５を含む。
【００５８】
ユーザは、例えば右手７１の親指７１ａと他の指とで本体部１０を把持し、右手７１の人差し指７１ｂによってシャッターボタン５０を押下操作することで、通常の撮影及びＨＤＲ撮影を行うことができる。
【００５９】
ＨＤＲモード設定部１１ｃは、タッチ・操作検出部１１ｂの検出結果に基づいて、ユーザのシャッターボタンの半押し操作を検出し、半押し操作が例えば２秒以上継続すると、ユーザによってＨＤＲ撮影モードが指定されたものと判定して、各部をＨＤＲ撮影モードに設定する。なお、信号処理及び制御部１１は、２秒以内の半押し操作については、ＡＥロックやＡＦロック等のユーザ操作であるものと判定する。これにより、シャッターボタン５０の半押し操作によって、ＡＥロック、ＡＦロックの操作とＨＤＲ撮影モードへの移行操作とを行うことができる。
【００６０】
本実施の形態においては、ＨＤＲ撮影モードが指示されると、露出変更部１１ｄは、規定の複数の露出値を設定して複数の露出値により複数枚の撮像画像を撮像させてＨＤＲ合成画像を得ると共に、設定する複数の露出値を所定の期間毎に切換える。例えば、露出変更部１１ｄは、自動露出調整時の露出値を基準ＥＶとし、基準ＥＶからプラス側とマイナス側に同一のＥＶ範囲だけ露出値が変化する複数の露出値を設定する。
【００６１】
図６及び図７は露出変更部１１ｄによる露出値の設定及び画像合成処理を説明するためのものである。図６は半押し操作後の３〜８秒の各秒毎の処理ステップ（合成ステップ）を示している。図６に示すように、シャッターボタンの半押し操作から３秒後、即ち、ＨＤＲ撮影モードに移行後の１秒後の第１の合成ステップにおいて、基準ＥＶ及び基準ＥＶから±１ＥＶの露出値を設定して３枚の画像を撮像する。合成フレームのＥＶ値の間隔は１ＥＶであり、これらの３枚の画像を合成してＨＤＲ合成画像を得る。このＨＤＲ合成画像は、表示制御部１１ａによって表示画面３１上に表示される。
【００６２】
同様に、シャッターボタンの半押し操作から４秒後、即ち、ＨＤＲ撮影モードに移行後の２秒後の第２の合成ステップでは、基準ＥＶ及び基準ＥＶから±２ＥＶの露出値を設定して３枚の画像を撮像する。合成フレームのＥＶ値の間隔は２ＥＶであり、これらの３枚の画像を合成してＨＤＲ合成画像を得る。このＨＤＲ合成画像は、表示制御部１１ａによって表示画面３１上に表示される。
【００６３】
以後同様に、１秒毎に順次第３〜第６の合成ステップが実施されて、ＨＤＲ画像合成に用いる撮像画像の露出値の切換え、撮像、ＨＤＲ画像合成及び表示が順次自動的に行われる。図７は図６に対応して合成される撮像画像の露出値を示すものであり、基準ＥＶが１０ＥＶである場合の露出値を示している。図７に示すように、シャッターボタンの半押し操作から３秒後の第１の合成ステップにおいて、９，１０，１１ＥＶの露出値で３枚の画像が撮像され、ＨＤＲ画像合成される。また、例えば、シャッターボタンの半押し操作から７秒後の第５の合成ステップでは、４，７，１０，１３，１６ＥＶの露出値で５枚の画像が撮像され、ＨＤＲ合成画像が生成される。
【００６４】
本実施の形態においては、ＨＤＲモード設定部１１ｃは、表示制御部１１ａを制御して、ＨＤＲ撮影モードにおける各合成ステップのＨＤＲ画像合成処理に連動させたＨＤＲスケール表示６１を表示させる。図８は図６に対応したＨＤＲスケール表示６１を示している。図８に示すように、表示制御部１１ａは、ＨＤＲ撮影モードへの移行と同時（０秒後）に、ＨＤＲスケール表示６１を表示する。ＨＤＲ撮影モード時には、露出を変えながら複数回の撮像を行い、得られた複数の撮像画像を画像合成する。従って、ＨＤＲ撮影モード時には、手プレ等の画角が変更する操作をしない方がよい。ＨＤＲ撮影が開始される前に、ＨＤＲスケール表示６１が表示されるので、ユーザはこの表示によって、画角を固定する等、ＨＤＲ撮影を行う準備をすることができる。
【００６５】
次に、表示制御部１１ａは、実際の露出の切換え及び複数枚の撮像に合わせて、ＨＤＲスケール表示６１の表示を変化させる。即ち、表示制御部１１ａは、ＨＤＲ撮影モードへの移行から１秒後の第１の合成ステップにおいて、ＨＤＲスケール表示６１中に上端が目盛りの±１の位置に位置するようにバー表示６３を表示する。次に、表示制御部１１ａは、ＨＤＲ撮影モードへの移行から２秒後の第２の合成ステップにおいて、上端が目盛りの±２の位置に位置するようにバー表示６３を表示する。以後同様に、表示制御部１１ａは、１秒毎の各合成ステップにおいて、バー表示６３の上端の位置を１目盛りずつ上昇させる。
【００６６】
また、表示画面３１には、ＨＤＲ合成画像がスルー画として順次表示されており、ユーザは、表示画面３１上の表示から、ＨＤＲ合成画像及びこのＨＤＲ合成画像を得るための露出設定を認識することができる。ユーザは、好みのＨＤＲ合成画像が表示されたタイミングで、シャッターボタンを全押しする。この全押し操作によって、ＨＤＲモード設定部１１ｃは、好みのＨＤＲ合成画像を得るための露出値を認識することができ、露出変更部１１ｄは、ユーザがシャッターボタンを全押ししたタイミングにおいて設定されていた露出値を設定する。これにより、ユーザが好みの合成画像を得るための複数の撮像が行われて、ＨＤＲ画像合成、表示及び記録が行われる。
【００６７】
なお、シャッターボタンの半押し操作からＨＤＲ撮影モードに移行するまでの２秒の時間、ＨＤＲ撮影モードからＨＤＲスケール表示６１を表示するまでの０秒の時間、露出を変えながらＨＤＲ合成画像を順次生成して表示する１秒の時間間隔は、適宜変更可能である。
【００６８】
また、ＨＤＲモード設定部１１ｃは、自動的な露出切換え及び画像合成処理のタイミングを、ユーザ操作に応じて変化させることもできる。図９はこのようなユーザ操作を示している。図９に示すように、ＨＤＲ撮影モード時において、ユーザが表示画面３１上を例えばスライド操作することによって、自動的な露出切換え及び画像合成処理を停止させることができる。例えば、ＨＤＲモード設定部１１ｃは、ユーザがスライド操作を行った回数を検出し、スライド回数だけ合成ステップを戻す。例えば、図６の第３の合成ステップにおいて、ユーザが２回のスライド操作を行うと、ＨＤＲモード設定部１１ｃの制御によって、露出変更部１１ｄは第１の合成ステップの露出値を設定し、表示制御部１１ａは第１の合成ステップのＨＤＲスケール表示６１を表示する。なお、ユーザが指を表示画面３１から離間させることによって、以後、ＨＤＲモード設定部１１ｃは、図６に示す自動的な露出切換え及び画像合成処理を再開する。
【００６９】
次に、このように構成された実施の形態の動作について図１０の説明図及び図１１乃至図１３のフローチャートを参照して説明する。図１０は水平方向に時間をとり、各合成ステップにおける撮像タイミングと撮像画素数を説明するためのものである。また、図１１はカメラ制御を示すフローチャートである。
【００７０】
撮影機器１の電源が投入されると、図１１のステップＳ４１において、スルー画表示が行われる。信号処理及び制御部１１は、撮像部１２からの撮像画像に対して所定の映像信号処理を施し、表示制御部１１ａによって表示画面３１上にスルー画を表示させる。ＨＤＲモード設定部１１ｃは、ステップＳ４２において、シャッターボタン５０の半押し操作が行われたか否かを判定する。ＨＤＲモード設定部１１ｃは、半押し操作が行われたものと判定すると、ステップＳ４３において、経過時間を初期化した後、半押し操作の経過時間（継続時間）の測定を開始する。
【００７１】
信号処理及び制御部１１は、ステップＳ４５においてオートフォーカス調整を行い、ステップＳ４６において自動露出調整を行う。なお、ステップＳ４６の処理によって、信号処理及び制御部１１は、撮像部１２の撮像素子の感度と、撮像素子の出力から求めた被写体の明るさとに基づいて、訂正露出を与えるＥＶ値を求めて基準ＥＶとして設定する。
【００７２】
次に、ＨＤＲモード設定部１１ｃは、半押し操作からの経過時間が２秒に到達したか否かを判定する（ステップＳ４７）。半押し操作が２秒以上継続している場合には、ＨＤＲモード設定部１１ｃは、各部にＨＤＲ撮影モードを設定する。
【００７３】
いま、半押し操作から２秒経過していないものとする。この場合には、信号処理及び制御部１１は、ステップＳ５０においてシャッターボタン５０の押下操作が終了したか否かを判定する。シャッターボタン５０の押下操作が終了した場合には、処理をステップＳ５０からステップＳ４２の半押し判定に戻す。シャッターボタン５０の押下操作が終了していない場合には、信号処理及び制御部１１は、シャッターボタン５０が全押しされたか否かを判定する（ステップＳ５１）。信号処理及び制御部１１は、シャッターボタン５０が全押しされていない場合には、ステップＳ５２から処理をステップＳ４７に戻して、半押し操作から２秒が経過したか否かを判定する。
【００７４】
ここで、半押し操作から２秒が経過するものとする。ＨＤＲモード設定部１１ｃは、ＨＤＲ撮影モードを設定し、表示制御部１１ａは、ステップＳ４８において、ＨＤＲスケール表示６１を表示させる。また、露出変更部１１ｄは、ステップＳ４９において、規定のタイミング及び順序で露出を設定し、画像合成部１１ｅは撮像部１２からの複数枚の撮像画像をＨＤＲ画像合成して、合成画像を生成する。表示制御部１１ａは、合成画像を表示画面３１に与えて表示させる。こうして、ユーザは、規定のタイミングで、露出を変化させながらＨＤＲ合成された合成画像の状態を表示画面３１上で確認することができる。なお、ステップＳ４９はステップＳ５０〜Ｓ５２の処理を経て繰り返されるようになっており、ＨＤＲ効果確認処理は、シャッターボタン５０の押下操作が終了するか又は全押しされるまで繰り返される。
【００７５】
図１２はステップＳ４９のＨＤＲ効果確認処理を具体的に示すフローチャートである。
【００７６】
ＨＤＲモード設定部１１ｃは、ステップＳ６１において、ユーザによる表示画面３１上のスライド操作を検出する。スライド操作を検出した場合には、例えば、所定時間内のスライド回数に応じて経過時間を戻す（ステップＳ６２）。スライドの１回で１合成ステップ戻すものとすると、図６の例では、１スライドにつき１秒だけ経過時間を戻せばよい。
【００７７】
ＨＤＲモード設定部１１ｃは、ステップＳ６３において、ユーザが表示画面３１をタッチしているか否かを判定する。ＨＤＲモード設定部１１ｃは、ユーザが表示画面３１をタッチしている場合にはタイマを停止し（ステップＳ６４）、タッチしていない場合には、タイマ停止中であるか否かを判定して（ステップＳ６５）、停止中であればタイマを再開する。
【００７８】
タイマによる経過時間に応じて、図６で示した各合成ステップが進行する。ユーザが指で表示画面３１をタッチしてタイマの経過時間を停止させることにより、合成ステップの進行を停止させることができる。また、ユーザがスライド操作することで、スライド回数に応じて経過時間を戻して、合成ステップを戻すことができる。
【００７９】
次に、露出変更部１１ｄは、ステップＳ６７において、経過時間に対応した情報を、図６に対応したテーブルを格納した図示しないメモリから取得する。即ち、露出変更部１１ｄは、テーブルから基準に対するＥＶ値の範囲の正の値の情報、合成フレーム数の情報及び合成フレームのＥＶ値間隔の情報を取得する。露出変更部１１ｄは、ステップＳ６８において取得フレーム数カウンタを０に初期化した後、ステップＳ６９において取得するフレームのＥＶ値を算出する。
【００８０】
例えば、露出変更部１１ｄは、取得するＥＶ値を
ＥＶ値＝（基準ＥＶ値−基準に対するＥＶ値の範囲の正の値）
＋（取得フレーム数カウンタ×合成フレームのＥＶ値間隔）  …（１）
によって算出する。
【００８１】
この（１）式によって、図６の各合成ステップにおいて取得する画像の露出値が決定される。例えば、図６の第１のステップにおいては、基準に対するＥＶ値の範囲の正の値は１であり、（基準ＥＶ値−基準に対するＥＶ値の範囲の正の値）＝基準ＥＶ−１ＥＶとなる。露出変更部１１ｄは、（１）にて算出した露出値を設定する。撮像部１２に設定された露出値で撮像を行う（ステップＳ７１）。
【００８２】
信号処理及び制御部１１は、ステップＳ７２において補正不能な手ブレが発生していないか否かを判定する。補正不能な手ブレが発生していない場合には、露出変更部１１ｄは、取得フレーム数カウンタを１増加させる。露出変更部１１ｄは、取得フレーム数カウンタが合成フレーム数に到達していない場合には、ステップＳ７４から処理をステップＳ６９に戻して、次に撮像における露出値を算出する。
【００８３】
図６の第１の合成ステップの例では、２つ目の取得フレームについての（１）式のＥＶ値は、ＥＶ値＝（基準ＥＶ−１）＋（１×１）＝基準ＥＶとなり、次のステップＳ７１において、基準ＥＶ値での撮像が行われる。更に、第１の合成ステップの３つ目の取得フレームについての（１）式のＥＶ値は、ＥＶ値＝（基準ＥＶ−１）＋（２×１）＝基準ＥＶ＋１ＥＶとなり、次のステップＳ７１において、基準ＥＶ＋１ＥＶでの撮像が行われる。
【００８４】
また、例えば、図６の第２の合成ステップの例では、１つ目の取得フレームについての（１）式のＥＶ値は、ＥＶ値＝（基準ＥＶ−２）＋（０×２）＝基準ＥＶ−２ＥＶとなり、２つ目の取得フレームについての（１）式のＥＶ値は、ＥＶ値＝（基準ＥＶ−２）＋（１×２）＝基準ＥＶとなり、３つ目の取得フレームについての（１）式のＥＶ値は、ＥＶ値＝（基準ＥＶ−２）＋（２×２）＝基準ＥＶ＋２ＥＶとなる。
【００８５】
こうして、ステップＳ６９〜Ｓ７４の各ステップによって、タイマが求めている経過時間に応じて、図６の第１乃至第６の合成ステップにおける各撮像時のＥＶ値が算出される。なお、信号処理及び制御部１１は、ステップＳ７２において、補正不能な手ブレが発生していると判定した場合には、ステップＳ７８において取得した画像を破棄し、ステップＳ６８に処理を戻して、各合成ステップにおける複数の撮像を繰り返す。
【００８６】
各合成ステップにおいて合成フレーム数に到達すると、処理はステップＳ７４からステップＳ７５に移行し、画像合成部１１ｅは、撮像された複数枚の画像のＨＤＲ画像合成を行う。次に、信号処理及び制御部１１は、露出の算出に用いた情報、即ち、基準に対するＥＶ値の範囲の正の値の情報、合成フレーム数の情報及び合成フレームのＥＶ値間隔の情報を、図示しない現在設定値メモリに保持する（ステップＳ７６）。なお、現在値設定メモリには、ステップＳ６７で取得した情報が上書き保存される。
【００８７】
表示制御部１１ａは、画像合成部１１ｅによって合成された合成画像を表示部３０に与えて表示画面３１に表示させる（ステップＳ７７）。これにより、ユーザは、タイマが求めている経過時間に対応する露出範囲で合成されたＨＤＲ合成画像を表示画面３１上で確認することができる。
【００８８】
図１１のステップＳ５１において、シャッターボタン５０の全押し操作が検出されるものとする。信号処理及び制御部１１は、ステップＳ５３においてＨＤＲ撮影モードであるか否かを判定し、ＨＤＲ撮影モードでない場合には、ステップＳ５５において通常の撮影操作を行う。信号処理及び制御部１１は、ＨＤＲ撮影モードである場合には、ステップＳ５４においてＨＤＲ撮影を行う。
【００８９】
図１３は図１１中のＨＤＲ撮影処理を具体的に示すフローチャートである。図１３において図１２と同一の手順には同一符号を付して説明を省略する。
【００９０】
図１３のフローは、図１２のステップＳ６１〜Ｓ６７を省略してステップＳ７８を追加すると共に、ステップＳ７６に代えてステップＳ７９を採用した点が図１２のフローと異なる。ステップＳ７８においては、露出変更部１１ｄは、現在値設定メモリに保持されている情報を取得する。
【００９１】
通常、撮像部１２の撮像素子の画素数に対して表示画面３１の画素数は小さく、スルー画表示時には、撮像素子の一部の画素からの情報を用いてスルー画を生成する。従って、ＨＤＲ効果確認時におけるＨＤＲ合成画像についても、実際の撮影時とは異なり、撮像素子の一部の画素からの情報のみを用いて生成されている。このため、シャッターボタン５０が全押しされると、再度露出値を設定して、複数の撮像を行い、得られた複数の撮像画像に対してＨＤＲ画像合成を行うことで、記録するＨＤＲ合成画像を得るようになっている。
【００９２】
現在値設定メモリには、シャッターボタン５０が全押しされたタイミングにおいて生成されている合成画像を得るための露出値の算出の元となる情報が保持されている。露出変更部１１ｄは、ステップＳ７８において、現在値設定メモリに保持されている情報を読み出す。露出変更部１１ｄは、ステップＳ６９〜Ｓ７４において、露出値を設定しながら撮像を行わせる。画像合成部１１ｅは、ステップＳ７５において、得られた複数の撮像画像をＨＤＲ画像合成してＨＤＲ合成画像を生成する。このＨＤＲ合成画像は、記録部１６に与えられて、記録メディアに記録される（ステップＳ７９）と共に、表示制御部１１ａに与えられて、表示画面３１上に表示される（ステップＳ７７）。
【００９３】
図１０は第２の合成ステップによる合成画像の表示時に、シャッターボタン５０が全押しされた場合の撮像タイミングを示している。図１０は水平方向の時間に時間をとり矩形によって撮像期間を示しており、垂直方向の振幅は撮像画像数を示している。
【００９４】
シャッターボタン５０の半押しから２秒後にＨＤＲ撮影モードに移行し、その１秒後に第１の合成ステップによる画像合成が行われる。ＨＤＲ撮影モードに移行する前の通常のスルー画の表示は、例えば３０ｆｐｓ（フレーム／秒）で行われているものとする。第１の合成ステップでは、図６の例では、基準ＥＶ、基準ＥＶ−１ＥＶ，基準ＥＶ＋１ＥＶの露出値による３枚の撮像が行われる。１秒間の第１の合成ステップが終了すると、第２の合成ステップに移行する。図６の例では、第２の合成ステップでは、基準ＥＶ、基準ＥＶ−２ＥＶ，基準ＥＶ＋２ＥＶの露出値による３枚の撮像が行われる。以後、シャッターボタン５０の半押しが継続されている期間は、１秒毎に合成ステップが進行し、露出値の範囲が次第に広がりながらＨＤＲ画像合成が行われる。
【００９５】
なお、各合成ステップにおいては、複数枚の撮像毎に１枚の合成画像が得られると共に、シャッター速度が変化することから、スルー画の表示は多少ぎくしゃくした表示となる。なお、各合成ステップで１回のみＨＤＲ画像を得るための撮像及び画像合成を行って、各合成ステップの期間にはＨＤＲ合成画像による静止画表示を行うようにしてもよい。
【００９６】
第２の合成ステップによるＨＤＲ合成画像の表示途中において、ユーザがシャッターボタン５０を全押しすると、ＨＤＲ撮影に移行し、第２の合成ステップにおける露出値が再度設定されて、撮像が行われる。この場合には、図１０に示すように、画像合成部１１ｅは、撮像素子の例えば全画素を用いた撮像画像を取得して、ＨＤＲ合成画像を生成する。
【００９７】
このように本実施の形態においても、第１の実施の形態と同様の効果を得ることができる。また、本実施の形態においては、ユーザはシャッターボタンを半押し及び全押しすることによって、好みのＨＤＲ合成画像を撮像することができ、極めて操作性に優れている。シャッターボタンの半押し操作によって、ＨＤＲ撮影モードに移行することができ、ＨＤＲ撮影時に手ブレが少ない状態での撮影が容易となる。また、半押ししたシャッターボタンを全押しするという簡単な操作で、好みの合成画像を得ることができる。
【００９８】
また、シャッターボタンを半押しするというユーザ操作によってＨＤＲ撮影モードに移行しており、ＨＤＲ撮影モード時にスルー画のフレームレートが低下する場合でも、ユーザが表示に違和感を覚えることもなく、表示の変化に慌てて誤操作することもない。
【００９９】
また、ＨＤＲ補助表示は撮影機器を構えた手の親指で届く範囲に設けられており、親指にて簡単に操作可能である。本実施の形態においては、スライド回数によって経過時間を戻す例について説明したが、ＨＤＲ補助表示中のバー表示をタッチしてスライドさせることにより、スライドの終点位置によって直接経過時間を指定するようにしてもよい。
【０１００】
また、本実施の形態においては、半押し操作経過後の比較的早い時間には、少ない枚数の撮像画像によってＨＤＲ合成画像を生成し、時間の経過と共に多くの枚数の撮像画像によってＨＤＲ合成画像を生成するようになっている。これにより、比較的早い時間で全押しすることによって速写性が必要なシーンにおいてもＨＤＲ合成画像を生成することができると共に、比較的遅い時間に全押しすることによって、風景等の凝った画像についてもＨＤＲ合成画像を取得することができる。
【０１０１】
なお、本実施の形態において、自動的な露出切換えは、図６の設定に限定されるものではないことは明らかである。
【０１０２】
（変形例）
図１４は第２の実施の形態の変形例を示すフローチャートである。図１４のフローは、ステップＳ６９に代えてステップＳ８１を採用すると共に、ステップＳ７８に代えてステップＳ８２〜８５を採用した点が図１２のフローと異なる。
【０１０３】
図１２のフローにおいては、取得するフレームのＥＶ値を計算によって求めたが、図１４のフローにおいては、ステップＳ８１において、取得するフレームのＥＶ値を図示しないメモリから読出す。信号処理及び制御部１１は、ステップＳ７２において、補正不能な手ブレを検出した場合には、ステップＳ８２において経過時間をカウントするタイマーを停止し、ステップＳ８３において基準ＥＶによる画像以外を破棄する。
【０１０４】
本変形例においては、ステップＳ８１においては、先ず基準ＥＶを設定し、ステップＳ７１において基準ＥＶの露出設定によって撮像を行う。従って、手ブレが発生した場合でも、基準ＥＶによる撮像は完了している。ステップＳ８３では基準ＥＶによる画像以外の画像を破棄することで、少なくとも基準ＥＶの露出設定によって撮像された撮像画像の表示を可能にする。ステップＳ８４では、表示制御部１１ａは、基準ＥＶによって撮像された撮像画像を表示部３０の表示画面３１に表示させる。また、表示制御部１１ａは、手ブレ等によるＨＤＲ画像合成が失敗したことを示す警告表示を表示画面３１上に表示させる。
【０１０５】
図１５は警告表示の一例を示す説明図である。図１５に示すように、表示画面３１上には、スルー画６７が表示されると共に、手ブレ等によるＨＤＲ画像合成が失敗したことを示す警告表示８１が表示される。ユーザはこの警告表示８１によって、ＨＤＲ画像合成が失敗したことを認識することができる。
【０１０６】
このように、本変形例では、ＨＤＲ撮影モード時において補正不能な手ブレが生じた場合でも、基準ＥＶの露出設定によって撮像した撮像画像を合成することなくそのまま表示すると共に、ＨＤＲ画像合成が失敗したことを示す警告表示を表示させることができる。ＨＤＲ撮影モードでの撮影では手ブレに注意する必要があることを知らないユーザであっても、ＨＤＲ撮影において手ブレに注意する必要があることを知らせることができ、また、ユーザにＨＤＲ撮影が行われていないことを確実に認識させることもできる。
【０１０７】
（変形例）
図１６は第２の実施の形態の他の変形例を示すフローチャートである。図１６のフローは、ステップＳ８３，Ｓ８４に代えてステップＳ９１，Ｓ９２を採用した点が図１４のフローと異なる。
【０１０８】
図１４のフローにおいては、補正不能な手ブレが生じた場合には、基準ＥＶ値で撮像した画像のみを表示する例を示したが、図１６のフローでは、補正不能な画像を破棄し、他の画像を用いてＨＤＲ合成画像を生成するようになっている。
【０１０９】
ステップＳ８１においては、先ず基準ＥＶを設定し、次に、基準ＥＶからの露出値が正負で対称となる露出値を順次設定する。画像合成部１１ｅは、ステップＳ９１において補正不能な画像を破棄し、ステップＳ９２において他の画像を用いてＨＤＲ合成画像を生成する。この場合には、基準ＥＶに対して露出値が対称となる露出値で撮像された画像を用いる。表示制御部１１ａは、合成画像を表示部３０の表示画面３１上に表示する。また、この場合にも、手ブレ等によるＨＤＲ画像合成が失敗したことを示す警告表示を表示画面３１上に表示させる。
【０１１０】
図１７は警告表示の一例を示す説明図である。図１７に示すように、表示画面３１上には、スルー画６７が表示されると共に、手ブレ等によるＨＤＲ画像合成が失敗したことを示す警告表示８１が表示される。また、ＨＤＲスケール表示６１では、５枚の撮像画像を用いたＨＤＲ合成画像が表示されていることが示される。
【０１１１】
このように、本変形例では、ＨＤＲ撮影モード時において補正不能な手ブレが生じた場合でも、補正不能な画像を除く画像によってＨＤＲ合成画像を生成して表示すると共に、ＨＤＲ画像合成が失敗したことを示す警告表示を表示させることができ、ユーザに、不完全なＨＤＲ撮影が行われていることを確実に認識させることができる。
【０１１２】
なお、上記各実施の形態においては、ＨＤＲ合成画像のみを記録する例について説明したが、画像合成に用いた各撮像画像（合成前画像）についても、合成画像と共に記録するようにしてもよい。再生時には、この合成前画像の画像ファイルを用いて、さらにユーザの好みに対応した補正も可能となる。更に、このような合成前の画像ファイルを使って再生する再生機器にも、本発明は適用可能である。
【０１１３】
また、上記各実施の形態においては、記録部１６に記録の形式は、特に限定されるものではない。例えば、記録部１６によって記録メディアに記録される合成画像は、ＪＰＥＧ形式でもよいし、ＲＡＷ形式でもよい。特に、ＲＡＷ形式のファイルで記録しておけば、合成前の画像も後の画像も記録しておき、後で再合成させることも可能である。
【０１１４】
例えば、記録部１６は図示しない記録媒体制御回路を有し、記録媒体制御回路によって記録媒体への画像ファイルデータ等の記録及び画像ファイルデータ等の読み出しの制御を行う。記録媒体としては、書換え可能な記録媒体が装填可能となるように構成され、本体部１０に対して着脱自在となっている。その他、無線通信でインターネットや電話回線、ＬＡＮなどに接続可能に構成してもよい。
【０１１５】
記録部１６による画像のファイル化によって生成されるＲＡＷデータファイルの構造について、図１８を参照して説明する。このＲＡＷデータファイルの構造は公知のものであり、以下概略のみを説明する。
【０１１６】
ＲＡＷデータファイルは、図１８に示すように、ＥＸＩＦに準拠したフォーマットでＲＡＷデータを記録するファイルであり、ＥＸＩＦと同様にヘッダーが設けられ、ＩＦＤ（Image File Directory）により各種のデータが割り当てられる。
【０１１７】
ＲＡＷ データファイルは、ファイル先頭のフィールドＦ１に、メイン画像データの再生に必要な情報（メイン画像データＩＦＤ０）、このメイン画像データの撮影時の情報（撮影情報ＩＦＤ１）が記録される。
【０１１８】
またＲＡＷ データファイルは、続くフィールドＦ２に、記録部１６で生成されるＪＰＥＧでデータ圧縮したサムネイル画像データが割り当てられ、さらに続くフィールドＦ３に、この本体部１０のメーカが独自に定義した情報（平文部メーカノートＩＦＤ）が記録される。ＲＡＷデータファイルは、これら先頭３フィールドＦ１〜Ｆ３がＥＸＩＦのフォーマットで作成されることから、ＥＸＩＦのファイルを処理可能な各種アプリケーションによっても、メイン画像データに割り当てたＲＡＷ データを再生できるように形成される。
【０１１９】
続いて、ＲＡＷデータファイルは、メイン画像データの撮影時の撮影情報ＤＳ０が割り当てられる。具体的には、フィールドＦ４に、ＲＡＷデータＤＲの撮影時における交換レンズ２０の絞りの設定（０ＥＶ、−１ＥＶ等の設定）、シャッタ速度、撮影モード等が記録される。続くフィールドＦ５に、撮影時を再現する画像処理に必要なパラメータが記録される。例えば、絞りは、先頭側のフィールドＦ４に、例えば０ＥＶと記録され、続くフィールドＦ５の画像処理情報ＤＳ０Ａに、具体的な絞り値５ ．６ 等が記録される。
【０１２０】
またＲＡＷデータファイルは、例えば、バルブ撮影においても工夫が必要である。続くフィールドＦ６に、各種の切り出し用基準情報ＤＳ０Ｂが設定される。具体的には、撮影時の合焦位置情報、撮影時の背景位置情報等が記録される。ここで、撮影時刻情報（Ｔｓｔ−Ｔｆｎ）は、撮影時に時計部１４から出力された時刻情報に基づいて記録される。また、加算前画像フラグは、後述するように、本実施形態においては、更新時間が経過するたびに、撮像部１２から画像データが読み出される、加算処理を行うと共にＲＡＷデータの記録を行うが、この加算前画像フラグは、加算演算を行う前の画像データであることを示す。同様に、加算後画像フラグは、加算演算を行った後の画像データであることを示す。
【０１２１】
また、フィールドＦ６に記録されるユーザ表示更新画像フラグは、バルブ撮影等において任意の時間で露出の進み具合をユーザが確認するために表示させた場合に、そのような操作を行ったことを示すフラグである。振動有無情報は、ブレ検知部（不図示）によって本体部１０に加えられた振動の有無を示す情報である。外乱横切り情報 は、画面を横切るような外乱画像の有無を示す情報である。撮像素子温度情報は、図示しない測温回路によって検出された温度情報である。ＲＡＷデータファイルは、他の各種のパラメータが順次割り当てられてこのメイン画像データの撮影時の撮影情報ＤＳ０が形成される。
【０１２２】
またＲＡＷデータファイルは、続いて編集処理の撮影情報ＤＳ１、ＤＳ２、……が記録される。編集処理の撮影情報ＤＳ１、ＤＳ２、……は、編集処理で設定される撮影情報であり、撮影時の撮影情報ＤＳ０に割り当てた撮影時を再現する画像処理情報ＤＳ０Ａに対応して設定される。撮影情報ＤＳ１、ＤＳ２、…… は、撮影時の撮影情報ＤＳ０のフィールドＦ４に割り当てた絞りの設定、シャッタ速度、撮影モード等の撮影情報に、履歴の情報が追加されて、先頭側のフィールドＦ７が形成される。続くフィールドＦ８に、直前フィールドＦ７に割り当てた撮影情報に対応する具体的な画像処理情報が記録される。
【０１２３】
ＲＡＷデータファイルは、編集処理の撮影情報ＤＳ１、ＤＳ２、…… の領域に続いて、サムネイル画像データＤＴの再生に必要な情報が割り当てられ、さらに続くフィールドにサムネイル画像データＤＴが割り当てられる。また続いてメイン画像データであるＲＡＷデータＤＲが割り当てられる。ＲＡＷデータファイルは、このメイン画像データに続いて、撮影時の撮影情報ＤＳ０に割り当てた切り出し用基準情報（フイールドＦ６）に対応する情報であって、編集処理時に設定した切り出し用基準情報を追加可能に形成される。
【０１２４】
ＨＤＲ撮影の場合、ＨＤＲ合成後の画像データをＲＡＷデータとして記録しても良いし、ＨＤＲ合成前の各画像をそれぞれ関連づけてＲＡＷデータ記録しても良いが、まず、ここでは、ＨＤＲ合成後の画像データをＲＡＷデータとして記録しておく方法について説明する。こちらの方が、記録時のデータ容量が少なくてすむ。つまり、合成によって撮像素子から出て来た本来の画像信号と異なる画素についてのみ、元の画像信号を持つようにした。これによって、通常は、合成後のＲＡＷデータのみを見ればよく、不自然な合成が気になった箇所のみは、必要に応じて、画素信号を元にもどすことが可能となり、好みの描写とすることが可能となる。ここでは、加工した画素を示す、「加工画素指定情報」と、合成前画像情報としての「加工画素オリジナルデータ」の２つの情報を記録するようにした。これによって、ユーザは、カメラが高速で簡便に行ったＨＤＲ合成画像を再加工することが容易になる。撮影時と再生時では、表示する装置の特性や大きさ、それに環境が異なり異なる画像表現をしたくなることがあるので、こうした工夫があるファイルの方がユーザにとって好ましい画像ファイル形式と言える。
【０１２５】
また、図１９はＨＤＲ合成前の各画像をそれぞれ関連づけてＲＡＷデータ記録する場合の例を示している。図１９の例は、合成画像ファイルをマルチ画像ファイルの一例としてのマルチピクチャーフォーマットの形式で構成した例である。一般に、マルチピクチャーフォーマットに従って作成されるマルチ画像ファイルは複数の画像ファイルが連結したものとして構成されている。各画像ファイルは何れも、ＳＯＩ（Start Of Image）から始まり、ＥＯＩ（End Of Image）で終わる。そして、マルチ画像ファイル中の各画像ファイルにはＡＰＰセグメントが設けられており、このＡＰＰセグメントに続いて画像データが記録される。
【０１２６】
例えば、図６の第１乃至第３のステップのように３枚の画像合成を行った場合における合成画像ファイルをマルチピクチャーフォーマットに従って作成した場合、合成画像ファイルは、図１９に示すように、１つのＲＡＷ合成画像ファイル（合成ＲＡＷ）と、３つのＲＡＷ合成前画像ファイル１、２、３とから構成される。
【０１２７】
図１９の例において、ＲＡＷ合成画像ファイルは、２つのＡＰＰセグメントＡＰＰ１（１）、ＡＰＰ２（１）を有している。ＡＰＰセグメントＡＰＰ１（１）には画像合成の情報及びＨＤＲ補助表示の情報を記録する。ＡＰＰセグメントＡＰＰ２（１）にはＭＰインデックスＩＦＤを記録する。ＭＰインデックスＩＦＤとは、合成画像ファイル中に記録されている各画像ファイルに対するオフセット量を示す情報である。なお、オフセット量は、例えば、ＪＰＥＧ合成画像データ中のある基準位置（例えば先頭位置）から各画像ファイルのＳＯＩまでの距離（例えばバイト数）とする。このようなＭＰインデックスＩＦＤにより、マルチ画像ファイル中の任意の画像ファイルを読み出すことが可能である。
【０１２８】
また、合成前画像ファイル１は２つのＡＰＰセグメントＡＰＰ１（２）、ＡＰＰ２（２）を有し、合成前画像ファイル２も２つのＡＰＰセグメントＡＰＰ１（３）、ＡＰＰ２（３）を有し、合成前画像ファイル３も２つのＡＰＰセグメントＡＰＰ１（４）、ＡＰＰ２（４）を有している。ＡＰＰセグメントＡＰＰ１（２）には合成前画像データ１に対応した露出情報１を記録する。また、ＡＰＰセグメントＡＰＰ１（３）には合成前画像データ２に対応した露出情報２を記録する。また、ＡＰＰセグメントＡＰＰ１（４）には合成前画像データ３に対応した露出情報３を記録する。
【０１２９】
なお、図１９は合成枚数が３枚の例であるが、合成枚数が４枚以上となった場合であっても同様の考え方でマルチ画像ファイルを作成できる。即ち、合成枚数が４以上となった場合であっても、ＳＯＩからＥＯＩの間に露出情報を記録するＡＰＰセグメントと合成前画像データとを記録してなる画像ファイルを順次追加するだけで良い。
【０１３０】
また、図１９で示した合成画像ファイルの構成は一例であり、マルチピクチャーフォーマットに準拠する範囲内で合成ＲＡＷ画像ファイル、画像ファイルの格納方法を自由に設定してよい。
【０１３１】
さらに、本発明の各実施形態においては、撮影のための機器として、デジタルカメラを用いて説明したが、カメラとしては、デジタル一眼レフカメラでもコンパクトデジタルカメラでもよく、ビデオカメラ、ムービーカメラのような動画用のカメラでもよく、さらに、携帯電話やスマートフォンなど携帯情報端末（ＰＤＡ：Personal Digital Assist）等に内蔵されるカメラでも勿論構わない。
【０１３２】
本発明は、上記各実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記各実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
【０１３３】
なお、特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。また、これらの動作フローを構成する各ステップは、発明の本質に影響しない部分については、適宜省略も可能であることは言うまでもない。
【符号の説明】
【０１３４】
１…撮影機器、１０…本体部、１１…信号処理及び制御部、１１ａ…表示制御部、１１ｂ…タッチ・操作検出部、１１ｃ…ＨＤＲモード設定部、１１ｄ…露出変更部、１１ｅ…画像合成部、１２…撮像部、２０…交換レンズ、３０…表示部、３１…表示画面、３２…タッチパネル。
【図１】
2013251724.tif 000003
【図２】
2013251724.tif 000004
【図３】
2013251724.tif 000005
【図４】
2013251724.tif 000006
【図５】
2013251724.tif 000007
【図６】
2013251724.tif 000008
【図７】
2013251724.tif 000009
【図８】
2013251724.tif 000010
【図９】
2013251724.tif 000011
【図１０】
2013251724.tif 000012
【図１１】
2013251724.tif 000013
【図１２】
2013251724.tif 000014
【図１３】
2013251724.tif 000015
【図１４】
2013251724.tif 000016
【図１５】
2013251724.tif 000017
【図１６】
2013251724.tif 000018
【図１７】
2013251724.tif 000019
【図１８】
2013251724.tif 000020
【図１９】
2013251724.tif 000021