(57)【要約】      （修正有）【課題】複数の露出で撮影・合成し、ダイナミックレンジを拡張させるＨＤＲ撮影への切り替え制御方法を提供する。【解決手段】光学像を電気信号に変換する撮像手段と、撮像手段の露出制御を行う露出制御手段と、異なる露出の複数画像を撮影し、合成する合成撮影手段と、撮像手段から出力される画像のヒストグラムを取得するヒストグラム取得手段と、ヒストグラムから通常撮影と合成撮影の切り替えを判定する合成判定手段を有し、合成判定手段は適正輝度範囲の閾値を持ち、切り替えの範囲閾値にヒステリシスを持たせる。【選択図】図５
2014143457.tif 000002
【特許請求の範囲】
【請求項１】
光学像を電気信号に変換する撮像手段と、
撮像手段の露出制御を行う露出制御手段と、
異なる露出の複数画像を撮影し、合成する合成撮影手段と、
撮像手段から出力される画像のヒストグラムを取得するヒストグラム取得手段と、
ヒストグラムから通常撮影と合成撮影の切り替えを判定する合成判定手段を有し、
合成判定手段は適正輝度範囲の閾値を持ち、
切り替えの範囲閾値にヒステリシスを持たせることを特徴とする撮像装置。
【請求項２】
通常撮影から合成撮影に切り替えた直後は適正輝度範囲の閾値を狭めることを特徴とする請求項１に記載の撮像装置。
【請求項３】
合成撮影から通常撮影に切り替えた直後は適正輝度範囲の閾値を広めることを特徴とする請求項１に記載の撮像装置。
【請求項４】
適正輝度範囲の閾値を変更したのち、時定数で元の閾値に戻ることを特徴とする請求項２又は請求項３に記載の撮像装置。
【請求項５】
光学像を電気信号に変換する撮像手段と、
撮像手段の露出制御を行う露出制御手段と、
異なる露出の複数画像を撮影し、合成する合成撮影手段と、
撮像手段から出力される画像のヒストグラムを取得するヒストグラム取得手段と、
ヒストグラムから通常撮影と合成撮影の切り替えを判定する合成判定手段を有し、
合成判定手段は適正輝度割合の閾値を持ち、
切り替えの割合閾値にヒステリシスを持たせることを特徴とする撮像装置。
【請求項６】
通常撮影から合成撮影に切り替えた直後は適正輝度割合の閾値を下げることを特徴とする請求項５に記載の撮像装置。
【請求項７】
合成撮影から通常撮影に切り替えた直後は適正輝度割合の閾値を上げることを特徴とする請求項５に記載の撮像装置。
【請求項８】
適正輝度割合の閾値を変更したのち、時定数で元の閾値に戻ることを特徴とする請求項６又は請求項７に記載の撮像装置。
【請求項９】
シーン判別手段を有し、シーン判別手段が判別したシーンに応じて閾値を変更することを特徴とする請求項１又は請求項２に記載の撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数の露出で撮影・合成し、ダイナミックレンジを拡張させるＨＤＲ撮影への切り替え制御方法に関する。
【背景技術】
【０００２】
近年、家庭用ビデオカメラやデジタルスチルカメラなどの撮像機器が一般に普及している。撮像素子に関しても、ＣＣＤ撮像素子に加えてＣＭＯＳ撮像素子も広く使用されつつある。これらの撮像素子は市場の要求を受け高画素化が進んでいるが、それに伴い撮像素子自身のダイナミックレンジが狭まる傾向がある。
【０００３】
この課題に対する解決方法の一つとして、ダイナミックレンジ拡張撮影（ＨＤＲ）が提案されている。特許文献１では、アンダー画像とオーバー画像を合成して、ダイナミックレンジを拡張する方法が提案されている。これにより、撮像素子のダイナミックレンジを超える画像の撮影が可能となり、ユーザーにとって便利な機能となっている。しかしながら通常撮影からＨＤＲ撮影に切り替える際、頻繁に切り替えが発生すると画像がチラついたように見え、ユーザーは見苦しく感じる可能性がある。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平６−２７３３５４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１等の方法では、通常撮影とＨＤＲ撮影の動的な切り替えに関して考慮されておらず、そのまま実施すれば先に述べたようなチラツキが発生してしまう。
【課題を解決するための手段】
【０００６】
本発明に係る撮像装置に於いては、第１に、
光学像を電気信号に変換する撮像手段と、
撮像手段の露出制御を行う露出制御手段と
異なる露出の複数画像を撮影し、合成する合成撮影手段と、
撮像手段から出力される画像のヒストグラムを取得するヒストグラム取得手段と、
ヒストグラムから通常撮影と合成撮影の切り替えを判定する合成判定手段を有し、
合成判定手段は適正輝度範囲の閾値を持ち、
切り替えの範囲閾値にヒステリシスを持たせることを特徴とする。
【０００７】
第２に、
第１に記載された撮像装置において、
通常撮影から合成撮影に切り替えた直後は適正輝度範囲の閾値を狭める
ことを特徴とする。
【０００８】
第３に、
第１に記載された撮像装置において、
合成撮影から通常撮影に切り替えた直後は適正輝度範囲の閾値を広める
ことを特徴とする。
【０００９】
第４に、
第２及び第３に記載された撮像装置において、
適正輝度範囲の閾値を変更したのち、時定数で元の閾値に戻る
ことを特徴とする。
【００１０】
第５に、
光学像を電気信号に変換する撮像手段と、
撮像手段の露出制御を行う露出制御手段と
異なる露出の複数画像を撮影し、合成する合成撮影手段と、
撮像手段から出力される画像のヒストグラムを取得するヒストグラム取得手段と、
ヒストグラムから通常撮影と合成撮影の切り替えを判定する合成判定手段を有し、
合成判定手段は適正輝度割合の閾値を持ち、
切り替えの割合閾値にヒステリシスを持たせることを特徴とする。
【００１１】
第６に、
第５に記載された撮像装置において、
通常撮影から合成撮影に切り替えた直後は適正輝度割合の閾値を下げる
ことを特徴とする。
【００１２】
第７に、
第５に記載された撮像装置において、
合成撮影から通常撮影に切り替えた直後は適正輝度割合の閾値を上げる
ことを特徴とする。
【００１３】
第８に、
第６及び第７に記載された撮像装置において、
適正輝度割合の閾値を変更したのち、時定数で元の閾値に戻る
ことを特徴とする。
【００１４】
第９に、
第１及び第２に記載された撮像装置において、
シーン判別手段を有し、
シーン判別手段が判別したシーンに応じて閾値を変更する
ことを特徴とする。
【発明の効果】
【００１５】
課題を解決するための手段に記載した構成により、
通常動画とＨＤＲ動画の切り替えにおいて、通常撮影と合成撮影の画像が頻繁に切り替わることがなく、チラつきの無い高画質な画像や動画像が撮影可能となる。
【図面の簡単な説明】
【００１６】
【図１】本実施例１・２のブロック図である。
【図２】本発明の実施例１・２における動画撮影フローを示した図である。
【図３】本発明の実施例１・２におけるＨＤＲの合成比を示した図である。
【図４】本発明の実施例１におけるＨＤＲ合成判定の適正輝度閾値を示した図である。
【図５】本発明の実施例１におけるＨＤＲ合成判定の輝度範囲ヒステリシスを示した図である。
【図６】本発明の実施例１における通常動画からＨＤＲ動画へ切り替えた時のヒステリシス時定数を示した図である。
【図７】本発明の実施例１におけるＨＤＲ動画から通常動画へ切り替えた時のヒステリシス時定数を示した図である。
【図８】本発明の実施例２におけるＨＤＲ合成判定の輝度割合を示した図である。
【図９】本発明の実施例２におけるＨＤＲ合成判定の輝度割合ヒステリシスを示した図である。
【発明を実施するための形態】
【００１７】
本発明をデジタルカメラを例に用いて説明を行う。
【００１８】
＜第１の実施形態＞
以下、図面を参照して本発明の実施例を説明する。図１は、本発明の実施例１・２の構成を示す図である。
【００１９】
図１において、１００は画像処理装置である。
【００２０】
１０は撮影レンズ、１２は絞り機能を備える機械式シャッター、１４は光学像を電気信号に変換する撮像素子、１６は撮像素子１４のアナログ信号出力をデジタル信号に変換するＡ／Ｄ変換器である。
【００２１】
１８は撮像素子１４、Ａ／Ｄ変換器１６にクロック信号や制御信号を供給するタイミング発生回路であり、メモリ制御回路２２及びシステム制御回路５０により制御される。１２の機械式シャッター以外にも、１８の撮像素子のリセットタイミングの制御によって、電子シャッタとして、蓄積時間を制御することが可能であり、動画撮影などに使用可能である。
【００２２】
２０は画像処理回路であり、Ａ／Ｄ変換器１６からのデータ或いはメモリ制御回路２２からのデータに対して所定の画素補間処理や色変換処理を行う。また２０の画像処理回路によって画像の切り出し、変倍処理を行うことで電子ズーム機能が実現される。
【００２３】
また、画像処理回路２０においては、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてシステム制御回路５０が露光制御手段４０、測距制御手段４２に対して制御を行う、ＴＴＬ方式のＡＦ処理、ＡＥ処理、ＥＦ処理を行っている。
【００２４】
さらに、画像処理回路２０においては、撮像した画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＴＴＬ方式のＡＷＢ（オートホワイトバランス）処理も行っている。
【００２５】
２２はメモリ制御回路であり、Ａ／Ｄ変換器１６、タイミング発生回路１８、画像処理回路２０、メモリ３０、圧縮・伸長回路３２を制御する。
【００２６】
Ａ／Ｄ変換器１６のデータが画像処理回路２０、メモリ制御回路２２を介して、或いはＡ／Ｄ変換器１６のデータが直接メモリ制御回路２２を介して、メモリ３０に書き込まれる。
【００２７】
２８はＴＦＴ  ＬＣＤ等から成る画像表示部であり、メモリ２０に書き込まれた表示用の画像データはメモリ制御回路２２を介して画像表示部２８により表示される。
【００２８】
画像表示部２８を用いて撮像した画像データを逐次表示すれば、電子ファインダー機能を実現することが可能である。
【００２９】
また、画像表示部２８は、システム制御回路５０の指示により任意に表示をＯＮ／ＯＦＦすることが可能であり、表示をＯＦＦにした場合には画像処理装置１００の電力消費を大幅に低減することが出来る。
【００３０】
３０は撮影した静止画像や動画像を格納するためのメモリであり、所定枚数の静止画像や所定時間の動画像を格納するのに十分な記憶量を備えている。
【００３１】
これにより、複数枚の静止画像を連続して撮影する連写撮影やパノラマ撮影の場合にも、高速かつ大量の画像書き込みをメモリ３０に対して行うことが可能となる。
【００３２】
また、メモリ３０はシステム制御回路５０の作業領域としても使用することが可能である。
【００３３】
３１はＦｌａｓｈＲＯＭ等で構成された不揮発性メモリである。システム制御回路５０が実行するプログラムコードは不揮発性メモリ３１に書き込まれ、逐次読み出しながらプログラムコードを実行する。また、不揮発性メモリ内にはシステム情報を記憶する領域や、ユーザー設定情報を記憶する領域を設け、さまざまな情報や設定を次回起動時に読み出して、復元することを実現している。
【００３４】
３２は適応離散コサイン変換（ＡＤＣＴ）等により画像データを圧縮伸長する圧縮・伸長回路であり、メモリ３０に格納された画像を読み込んで圧縮処理或いは伸長処理を行い、処理を終えたデータをメモリ３０に書き込む。
【００３５】
４０は絞り機能を備えるシャッター１２を制御する露光制御手段であり、フラッシュ４８と連動することによりフラッシュ調光機能も有するものである。
【００３６】
４２は撮影レンズ１０のフォーカシングを制御する測距制御手段、４４は撮影レンズ１０のズーミングを制御するズーム制御手段である。
【００３７】
４８はフラッシュであり、ＡＦ補助光の投光機能、フラッシュ調光機能も有する。
【００３８】
露光制御手段４０、測距制御手段４２はＴＴＬ方式を用いて制御されており、撮像した画像データを画像処理回路２０によって演算した演算結果に基づき、システム制御回路５０が露光制御手段４０、測距制御手段４２に対して制御を行う。
【００３９】
５０は画像処理装置１００全体を制御するシステム制御回路である。
【００４０】
６０、６２、６４、６６、７０及び７２は、システム制御回路５０の各種の動作指示を入力するための操作手段であり、スイッチやダイアル、タッチパネル、視線検知によるポインティング、音声認識装置等の単数或いは複数の組み合わせで構成される。
【００４１】
ここで、これらの操作手段の具体的な説明を行う。
【００４２】
６０はモードダイアルスイッチで、電源オフ、自動撮影モード、撮影モード、パノラマ撮影モード、動画撮影モード等の各機能モードを切り替え設定することが出来る。
【００４３】
６２はシャッタースイッチＳＷ１で、シャッターボタンの操作途中でＯＮとなり、ＡＦ（オートフォーカス）処理、ＡＥ（自動露出）処理、ＡＷＢ（オートホワイトバランス）処理等の動作開始を指示する。
【００４４】
６４はシャッタースイッチＳＷ２で、シャッターボタンの操作完了でＯＮとなる。フラッシュ撮影の場合、ＥＦ（フラッシュプリ発光）処理を行った後に、ＡＥ処理で決定された露光時間分、撮像素子１４を露光させ、フラッシュ撮影の場合、この露光期間中に発光させて、露光期間終了と同時に露光制御手段４０により遮光することで、撮像素子１４への露光を終了させる。撮像素子１４から読み出した信号をＡ／Ｄ変換器１６、メモリ制御回路２２を介してメモリ３０に画像データを書き込む読み出し処理、画像処理回路２０やメモリ制御回路２２での演算を用いた現像処理、メモリ３０から画像データを読み出し、圧縮・伸長回路３２で圧縮を行う、次に記録媒体２００に画像データを書き込む記録処理という一連の処理の動作開始を指示する。
【００４５】
６６は表示切替スイッチで、画像表示部２８の表示切替をすることが出来る。この機能により、光学ファインダー１０４を用いて撮影を行う際に、ＴＦＴ  ＬＣＤ等から成る画像表示部への電流供給を遮断することにより、省電力を図ることが可能となる。
【００４６】
７０は各種ボタン、タッチパネルや回転式ダイアル等からなる操作部で、メニューボタン、セットボタン、マクロボタン、マルチ画面再生改ページボタン、フラッシュ設定ボタン、単写／連写／セルフタイマー切り替えボタン等がある。またメニュー移動＋（プラス）ボタン、メニュー移動−（マイナス）ボタン、再生画像移動＋（プラス）ボタン、再生画像移動−（マイナス）ボタン、撮影画質選択ボタン、露出補正ボタン、日付／時間設定ボタン等もある。
【００４７】
７２はユーザーが撮像画像の倍率変更指示を行うズーム操作手段としてのズームスイッチ部である。以下、ズームスイッチ７２ともいう。このズームスイッチ７２は、撮像画角を望遠側に変更させるテレスイッチと、広角側に変更させるワイドスイッチからなる。このズームスイッチ７２を用いることにより、ズーム制御手段４４に撮影レンズ１０の撮像画角の変更を指示し光学ズーム操作を行うトリガとなる。また、画像処理回路２０による画像の切り出しや、画素補間処理などによる撮像画角の電子的なズーミング変更のトリガともなる。
【００４８】
８６はアルカリ電池の一次電池やＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉイオン電池等の二次電池、ＡＣアダプター等からなる電源手段である。
【００４９】
９０はメモリカードやハードディスク等の記録媒体とのインタフェース、９２はメモリカードやハードディスク等の記録媒体と接続を行うコネクタである。
【００５０】
１０２は、画像処理装置１００のレンズ１０を含む撮像部を覆う事により、撮像部の汚れや破損を防止するバリアである保護手段である。
【００５１】
１０４は光学ファインダであり、画像表示部２８による電子ファインダー機能を使用すること無しに、光学ファインダのみを用いて撮影を行うことが可能である。
【００５２】
１１０は通信手段でＵＳＢ、ＩＥＥＥ１３９４、ＬＡＮ、無線通信、等の各種通信機能を有する。
【００５３】
１１２は通信手段１１０により画像処理装置１００を他の機器と接続するコネクタ或いは無線通信の場合はアンテナである。
【００５４】
２００はメモリカードやハードディスク等の記録媒体である。
【００５５】
記録媒体２００は、半導体メモリや磁気ディスク等から構成される記録部２０２、画像処理装置１００とのインタフェース２０４、画像処理装置１００と接続を行うコネクタ２０６を備えている。
【００５６】
２１０はメモリカードやハードディスク等の記録媒体である。
【００５７】
図２は、本発明の実施例１・２における動画撮影フローを示した図である。
【００５８】
動画記録開始指示があると、Ｓ１０１で測光処理を行う。測光処理では適正露出を算出し、Ｓ１０２で画像の撮影を行う。Ｓ１０１の測光処理では被写体の輝度分布情報を算出し、輝度分布情報を用いてＳ１０３のＨＤＲ撮影をするかの判断を行う。ＨＤＲ撮影判断の詳細は図７を用いて後述する。Ｓ１０３でＨＤＲ動画撮影と判断されたなら、Ｓ１０４でアンダー画像を撮影する。アンダー画像の撮影に関しては、図８を用いて詳細に後述する。ここで撮影するアンダー画像は適正露出に対して、シャッター速度もしくは感度により露出差を設定する。どちらを選択するかは図８を用いて後述する。
【００５９】
露出の異なる２種類の画像を取得したら、Ｓ１０５にて合成処理を行う。合成処理に関しては図３を用いて詳細は後述する。
【００６０】
合成処理された画像は撮像素子から出力されたＲＧＢ−Ｂａｙｅｒデータ形式のままであるため、Ｓ１０６にてＹＵＶ形式に現像処理を行ったのち符号化処理を行い、Ｓ１０７で記録媒体へ動画像の記録を行う。
【００６１】
Ｓ１０８で記録終了指示があれば、本動画記録ルーチンを抜ける。終了指示があるまで、Ｓ１０１に戻り、動画記録を続ける。
【００６２】
図３は、本発明の実施例１・２におけるＨＤＲの合成比を示した図である。
【００６３】
図３の合成比率テーブルが示すように合成比率は適正画像の画素レベルによって決定される。適正画像の画素レベルが低いときは、非常に輝度レベルが低い画素なので、適正画像からの合成比率を高め、アンダー画像からの合成比率を低めている。逆に適正画像の画素レベルが高いときは、非常に輝度レベルが高い画素なので、白飛びが発生していないアンダー画像からの合成比率を高め、適正画像からの合成比率を低めている。この合成処理を実行することで、１度の露光で得られた画像より、ダイナミックレンジの広い画像を得ることができる。
【００６４】
図４は、本発明の実施例１・２におけるＨＤＲ合成判定の適正輝度閾値を示した図である。
【００６５】
Ｓ１０１の測光処理では、被写体の輝度分布を取得する。図４−Ａの輝度分布は被写体輝度の大部分が適正輝度範囲に収まっているためＨＤＲ動画ではなく通常動画記録と判断する。図４−Ｂの輝度分布は適正輝度範囲に収まっていない画素が多くある為、ダイナミックレンジが不足していることからＨＤＲ撮影が必要と判断する。
【００６６】
具体的にはヒストグラムを生成し、適正輝度範囲下限Ｌｖ＿Ｌｏから上限Ｌｖ＿Ｈｉの輝度に入っている画素は適正輝度範囲に収まっていると判定する。式（１）のように適正輝度範囲に収まっている画素数ＰｉｘＮｕｍＴｅｋｉｓｅｉを全画素数ＰｉｘＮｕｍＴｏｔａｌで割った割合ＴｅｋｉｓｅｉＲａｔｉｏが所定値以上か否かで、ＨＤＲ動画撮影かを判断する。
【００６７】
【数１】
2014143457.tif 000003
ＴｅｋｉｓｅｉＲａｔｉｏが所定値以上なら通常撮影、所定値以下ならＨＤＲ撮影を行う。この判定は動画記録中も常時行う必要があり、シーン変化にも追従させる。ＴｅｋｉｓｅｉＲａｔｉｏはヒステリシスを持たせ、通常撮影とＨＤＲ動画が頻繁に切り替わらないようにしている。これに関しては別図を用いて詳細に後述する。
【００６８】
図５は、本発明の実施例１におけるＨＤＲ合成判定の輝度範囲ヒステリシスを示した図である。
【００６９】
通常撮影とＨＤＲ撮影の切り替えは、適正輝度範囲に収まっている画素の割合で判定する。
【００７０】
図５−Ａは通常動画からＨＤＲ動画に切り替えるときの閾値を示している。実線で示しているのが閾値となり、点線で示しているのがＨＤＲ動画から通常動画に戻るときの閾値である。
【００７１】
図５−ＢはＨＤＲ動画から通常動画に切り替えるときの閾値を示している。実線で示しているのが閾値となり、点線で示しているのが通常動画からＨＤＲ動画に戻るときの閾値である。
【００７２】
これらのようにＨＤＲ動画に入るときと、ＨＤＲ動画から抜けるときの閾値を変更することで、切り替わった直後に戻るような判定はなくなるので、頻繁な切り替えが発生しなくなる。
【００７３】
この閾値はシーンによって変更することで、最適な切り替え判定を実現することができる。逆光時、風景撮影や夜景撮影によって閾値を変更させる。
【００７４】
図６は、本発明の実施例１における通常動画からＨＤＲ動画へ切り替えた時のヒステリシス時定数を示した図である。
【００７５】
図６−Ａは通常動画からＨＤＲ動画に切り替えるときの閾値を示している。実線で示しているのが切り替えの閾値Ｌｖ＿Ｌｏ＿１とＬｖ＿Ｈｉ＿１であり、点線で示しているのが切り替えた直後の閾値Ｌｖ＿Ｌｏ＿２とＬｖ＿Ｈｉ＿２である。図６−Ｂは通常動画からＨＤＲ動画に切り替えるときの閾値の変化を示している。切り替わった直後の閾値はＬｖ＿Ｌｏ＿２とＬｖ＿Ｈｉ＿２であるが、徐々にＬｖ＿Ｌｏ＿１とＬｖ＿Ｈｉ＿１に向かって戻り、最終的にはＬｖ＿Ｌｏ＿１とＬｖ＿Ｈｉ＿１と等しくなる。このように通常動画からＨＤＲ動画に切り替えた直後は閾値は狭めて、徐々に閾値を戻すことで、切り替えのチラつきを防ぐことができる。
【００７６】
図７は、本発明の実施例１におけるＨＤＲ動画から通常動画へ切り替えた時のヒステリシス時定数を示した図である。
【００７７】
図７−ＡはＨＤＲ動画から通常動画に切り替えるときの閾値を示している。実線で示しているのが切り替えの閾値Ｌｖ＿Ｌｏ＿１とＬｖ＿Ｈｉ＿１であり、点線で示しているのが切り替えた直後の閾値Ｌｖ＿Ｌｏ＿２とＬｖ＿Ｈｉ＿２である。図７−ＢはＨＤＲ動画から通常動画に切り替えるときの閾値の変化を示している。切り替わった直後の閾値はＬｖ＿Ｌｏ＿３とＬｖ＿Ｈｉ＿３であるが、徐々にＬｖ＿Ｌｏ＿１とＬｖ＿Ｈｉ＿１に向かって戻り、最終的にはＬｖ＿Ｌｏ＿１とＬｖ＿Ｈｉ＿１と等しくなる。このようにＨＤＲ動画から通常動画に切り替えた直後は閾値は拡げて、徐々に閾値を戻すことで、切り替えのチラつきを防ぐことができる。
【００７８】
＜第２の実施形態＞
以下、図面を参照して本発明の第２の実施例を説明する。  本実施例でも図１から図４までは実施例１と同じ構成・処理を行う。
【００７９】
図８は、本発明の実施例２におけるＨＤＲ合成判定の輝度割合を示した図である。
【００８０】
図８は切り替えの輝度範囲を示している。この輝度に収まっている割合をＰｉｘｅｌＲａｔｉｏをしたときに、適正割合ＴｅｋｉｓｅｉＲａｔｉｏが適正輝度割合閾値Ｒａｔｉｏ＿１を下回ったら通常動画からＨＤＲ動画に切り替える。逆に適正割合ＴｅｋｉｓｅｉＲａｔｉｏが適正輝度割合閾値Ｒａｔｉｏ＿２を上回ったらＨＤＲ動画から通常動画に切り替える。このときヒステリシスを持たせるためにＲａｔｉｏ＿１とＲａｔｉｏ＿２の関係は以下のようになる。
【００８１】
【数２】
2014143457.tif 000004
図９は、本発明の実施例２におけるＨＤＲ合成判定の輝度割合ヒステリシスを示した図である。
【００８２】
図９−Ａは通常動画からＨＤＲ動画に切り替えるときの輝度割合の閾値変化を示している。適正輝度割合閾値Ｒａｔｉｏ＿１を下回ると通常動画からＨＤＲ動画への切り替えと判断すると同時に、適正輝度割合閾値をＲａｔｉｏ＿２に変更する。適正輝度割合閾値はＲａｔｉｏ＿２から徐々にＲａｔｉｏ＿１に向かって戻り、最終的にはＲａｔｉｏ＿１と等しくなる。
【００８３】
図９−ＢはＨＤＲ動画から通常動画に切り替えるときの輝度割合の閾値変化を示している。適正輝度割合閾値Ｒａｔｉｏ＿１を上回るとＨＤＲ動画から通常動画への切り替えと判断すると同時に、適正輝度割合閾値をＲａｔｉｏ＿３に変更する。適正輝度割合閾値はＲａｔｉｏ＿３から徐々にＲａｔｉｏ＿１に向かって戻り、最終的にはＲａｔｉｏ＿１と等しくなる。
【００８４】
Ｒａｔｉｏ＿１、Ｒａｔｉｏ＿２とＲａｔｉｏ＿３の大小関係は以下の式（３）の関係となる。
【００８５】
【数３】
2014143457.tif 000005
この適正輝度割合閾値はシーンによって変更することで、最適な切り替え判定を実現することができる。逆光時、風景撮影や夜景撮影によって閾値を変更させる。
【００８６】
以上の説明のように、通常動画からＨＤＲ動画へ切り替える際に、輝度範囲閾値及び輝度範囲割合閾値にヒステリシスを持たせることで、通常動画とＨＤＲ動画の頻繁な切り替わりを防ぐことができ、記録された動画はチラつきのない高画質な動画を得ることができる。
【００８７】
前記２つの実施例では、シーン判別結果をもとに閾値の変更を行っていたが、カメラの回転方向や加速度情報、焦点距離情報、被写体距離情報、露出補正量に応じて閾値を変更してもよい。また閾値を変更した後の時定数も一定である説明を行ったが、シーンに応じて時定数の速度を変更してもよい。
【符号の説明】
【００８８】
１０：撮影レンズ  １２：シャッター  １４：撮像素子  １６：Ａ／Ｄ変換器  １８：タイミング発生回路  ２０：画像処理回路  ２２：メモリ制御回路  ２８：画像表示部  ３０：メモリ  ３２：画像圧縮・伸長回路
４０：露光制御手段  ４２：測距制御手段  ４４：ズーム制御手段  ４８：フラッシュ
５０：システム制御回路
６０：モードダイアルスイッチ  ６２：シャッタースイッチＳＷ１  ６４：シャッタースイッチＳＷ２
６６：表示切替スイッチ  ７０：操作部  ７２：ズームスイッチ
９０：インタフェース  ９２：コネクタ
１００：画像処理装置  １０２：保護手段  １０４：光学ファインダ
１１０：通信手段  １１２：コネクタ（またはアンテナ）
２００：記録媒体  ２０２：記録部  ２０４：インタフェース  ２０６：コネクタ
【図１】
2014143457.tif 000006
【図２】
2014143457.tif 000007
【図３】
2014143457.tif 000008
【図４】
2014143457.tif 000009
【図５】
2014143457.tif 000010
【図６】
2014143457.tif 000011
【図７】
2014143457.tif 000012
【図８】
2014143457.tif 000013
【図９】
2014143457.tif 000014