(57)【要約】【課題】連写撮影時のライブビュー表示期間以外の期間に黒画像を表示しても、ライブビュー画像が暗く観察されるのを抑制することができる撮像装置等を提供する。【解決手段】連写撮影における、連続する２枚の静止画像の撮影期間の間にライブビュー画像を撮影する撮像部２と、ライブビュー表示期間にライブビュー画像を表示し、他の期間に黒画像を表示する表示部４と、通常の表示輝度値よりも大きい連写中表示輝度値を算出してライブビュー画像の輝度を変更する表示輝度変更部３と、を備える撮像装置１。【選択図】図１
2018006827.tif 000002
【特許請求の範囲】
【請求項１】
複数枚の静止画像を連続して取得する連写撮影を行うことができる撮像装置において、
前記連写撮影時には、連続する２枚の静止画像の撮影期間の間のライブビュー撮影期間に、前記静止画像よりも読出時間が短いライブビュー画像を撮影する撮像部と、
前記連写撮影時において、前記ライブビュー撮影期間に取得された前記ライブビュー画像をライブビュー表示期間に表示し、前記ライブビュー表示期間以外の期間に黒画像を表示する表示部と、
前記連写撮影時に前記ライブビュー表示期間の表示と前記ライブビュー表示期間以外の期間の表示とが交互に表示されることに伴う視感輝度の低下を抑制するために、通常の設定条件に基づき算出される通常の表示輝度値よりも大きい連写中表示輝度値を算出して、前記連写中表示輝度値に基づき前記表示部に表示される前記ライブビュー画像の輝度を変更する表示輝度変更部と、
を具備することを特徴とする撮像装置。
【請求項２】
前記表示輝度変更部は、前記連写撮影の期間における前記黒画像を表示する期間の割合を示す像消失率が増加するに従って、前記連写中表示輝度値が大きくなるように、該連写中表示輝度値を算出することを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記表示輝度変更部は、さらに、単位時間当たりに取得される前記静止画像の枚数を示す連写レートが減少するに従って、前記連写中表示輝度値が前記通常の表示輝度値に近付くように、該連写中表示輝度値を算出することを特徴とする請求項２に記載の撮像装置。
【請求項４】
前記表示輝度変更部は、被写体輝度値が増加するに従って、前記通常の表示輝度値に対する前記連写中表示輝度値の比が大きくなるように、該連写中表示輝度値を算出することを特徴とする請求項１に記載の撮像装置。
【請求項５】
前記表示輝度変更部は、１つの前記ライブビュー表示期間が開始されてからの時間であるライブビュー表示経過時間が増加するに従って、前記通常の表示輝度値に対する前記連写中表示輝度値の比が大きくなるように、該連写中表示輝度値を算出することを特徴とする請求項１に記載の撮像装置。
【請求項６】
前記表示部は、表示設定値を変化させることにより表示特性が可変であり、
前記表示輝度変更部は、前記連写中表示輝度値に基づき前記表示設定値を設定することにより、前記表示部に表示される前記ライブビュー画像の輝度を変更することを特徴とする請求項１に記載の撮像装置。
【請求項７】
前記表示設定値は、前記表示部の照明輝度値と、前記表示部の表示階調特性値と、の少なくとも一方を含むことを特徴とする請求項６に記載の撮像装置。
【請求項８】
前記表示輝度変更部は、前記連写中表示輝度値に基づき前記表示部へ出力される前記ライブビュー画像の画像データを変更することにより、該表示部に表示される前記ライブビュー画像の輝度を変更することを特徴とする請求項１に記載の撮像装置。
【請求項９】
前記画像データの変更は、該画像データを取得する際の露出目標値の変更と、該画像データを取得する際の露出補正量の変更と、該画像データに対する階調変換特性の変更と、該画像データに対するゲイン値の変更と、の内の少なくとも１つにより行われることを特徴とする請求項８に記載の撮像装置。
【請求項１０】
コンピュータに、複数枚の静止画像を連続して取得する連写撮影を行わせるための撮像プログラムであって、
前記連写撮影時には、連続する２枚の静止画像の撮影期間の間のライブビュー撮影期間に、前記静止画像よりも読出時間が短いライブビュー画像を撮影する撮像ステップと、
前記連写撮影時において、前記ライブビュー撮影期間に取得された前記ライブビュー画像をライブビュー表示期間に表示し、前記ライブビュー表示期間以外の期間に黒画像を表示する表示ステップと、
前記連写撮影時に前記ライブビュー表示期間の表示と前記ライブビュー表示期間以外の期間の表示とが交互に表示されることに伴う視感輝度の低下を抑制するために、通常の設定条件に基づき算出される通常の表示輝度値よりも大きい連写中表示輝度値を算出して、前記連写中表示輝度値に基づき前記表示ステップにより表示される前記ライブビュー画像の輝度を変更する表示輝度変更ステップと、
をコンピュータに実行させるための撮像プログラム。
【請求項１１】
複数枚の静止画像を連続して取得する連写撮影を行う撮像方法であって、
前記連写撮影時には、連続する２枚の静止画像の撮影期間の間のライブビュー撮影期間に、前記静止画像よりも読出時間が短いライブビュー画像を撮影する撮像ステップと、
前記連写撮影時において、前記ライブビュー撮影期間に取得された前記ライブビュー画像をライブビュー表示期間に表示し、前記ライブビュー表示期間以外の期間に黒画像を表示する表示ステップと、
前記連写撮影時に前記ライブビュー表示期間の表示と前記ライブビュー表示期間以外の期間の表示とが交互に表示されることに伴う視感輝度の低下を抑制するために、通常の設定条件に基づき算出される通常の表示輝度値よりも大きい連写中表示輝度値を算出して、前記連写中表示輝度値に基づき前記表示ステップにより表示される前記ライブビュー画像の輝度を変更する表示輝度変更ステップと、
を有することを特徴とする撮像方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、連写撮影において静止画像撮影の合間にライブビュー画像を撮影して表示すると共に、静止画像撮影中は黒画像を表示する撮像装置、撮像プログラム、撮像方法に関する。
【背景技術】
【０００２】
電子カメラ等の撮像装置において、連写撮影を行っている最中（連写中）に被写体の画像を表示する方式として、例えば、レックビュー方式（レックビュー連写）と、ライブビュー方式（ライブビュー連写）と、がある。レックビュー方式は、撮像素子を全画素読み出し駆動（以下では、スチル駆動という）して得られた記録用の静止画像を縮小して表示する方式である。また、ライブビュー方式は、ある静止画像を撮影する期間と次の静止画像を撮影する期間との間の期間に撮像素子を加算間引き読み出し駆動（加算読み出し駆動と間引き読み出し駆動との少なくとも一方を行うものであり、以下では、スルー画駆動という）して得られたライブビュー画像を表示する方式である。
【０００３】
レックビュー連写は、駆動モードを切り替える必要がないために、連写コマ数を増やし易い利点がある。しかし、スチル駆動で得られる静止画像の画素数はスルー画駆動で得られるライブビュー画像の画素数よりも多いために、レックビュー連写は、１枚の静止画像を露光し終わった後に、画像データの読み出しを開始してから終了するまでに時間を要し、さらには画像処理にも時間を要するために、表示遅延（レイテンシー）の遅延時間増大を招くことになる。また、レックビュー連写は、連写速度（単位時間当たりの連写コマ数）が遅いと滑らかな動きを表示することができないために、動く被写体を追いながら撮影するには向いていない。
【０００４】
これに対してライブビュー連写は、読み出し画素数が少ないために、レックビュー連写よりも表示遅延（レイテンシー）が小さいが、静止画像を撮影している期間はライブビュー画像を取得することができない欠落期間となる（レックビュー連写の場合、次の静止画像の縮小画像が得られるまでは最後に得られた静止画像の縮小画像を表示し続けるために、こうした欠落期間が生じない）。そこで、この欠落期間にダミー画像として黒画像を表示する技術が従来より提案されている。人間の脳は、ライブビュー画像表示から黒画像表示に切り替わった後も、ライブビュー画像を表示していたときの被写体の動きを脳内で補間する作用が働く。このために、最後に得られたライブビュー画像を表示し続ける代わりに黒画像を表示することで、ライブビュー画像が連続しているかのような感覚で観察することができ、物体の動きが滑らかに感じられるメリットがある。こうして、動く被写体を追いながら撮影する場合には、表示遅延が小さく動きが滑らかに感じられるライブビュー連写の方が、レックビュー連写よりも適している。
【０００５】
しかし、例えば３０ｆｐｓや６０ｆｐｓといった表示レートの場合に人間は画像の明るさを積分値で感受するために、黒画像とライブビュー画像とを交互に表示する方法では、表示される画像の明るさを暗く感じてしまう。一例を挙げれば、黒画像の表示フレーム数とライブビュー画像の表示フレーム数とが同一である場合には、画像の明るさが半分程度になったように感じる、等である。
【０００６】
これに対して、例えば特開２０１３−１１８４６３号公報には、ライブビュー連写における上述した欠落期間のダミー画像として、黒画像ではなく、直前の画像の平均輝度に基づいて輝度レベルを決定したグレー画像を表示することで、人間が感受する画像の明るさを向上する技術が記載されている。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２０１３−１１８４６３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
しかしながら、グレー画像の場合には、黒画像と比較して人間の脳内における動きの補間作用が効果的に働かず、画像の連続的で滑らかな動きが黒画像を表示するときほどは感じられなくなってしまう。
【０００９】
本発明は上記事情に鑑みてなされたものであり、連写撮影時のライブビュー表示期間以外の期間に黒画像を表示しても、ライブビュー画像が暗く観察されるのを抑制することができる撮像装置、撮像プログラム、撮像方法を提供することを目的としている。
【課題を解決するための手段】
【００１０】
本発明のある態様による撮像装置は、複数枚の静止画像を連続して取得する連写撮影を行うことができる撮像装置において、前記連写撮影時には、連続する２枚の静止画像の撮影期間の間のライブビュー撮影期間に、前記静止画像よりも読出時間が短いライブビュー画像を撮影する撮像部と、前記連写撮影時において、前記ライブビュー撮影期間に取得された前記ライブビュー画像をライブビュー表示期間に表示し、前記ライブビュー表示期間以外の期間に黒画像を表示する表示部と、前記連写撮影時に前記ライブビュー表示期間の表示と前記ライブビュー表示期間以外の期間の表示とが交互に表示されることに伴う視感輝度の低下を抑制するために、通常の設定条件に基づき算出される通常の表示輝度値よりも大きい連写中表示輝度値を算出して、前記連写中表示輝度値に基づき前記表示部に表示される前記ライブビュー画像の輝度を変更する表示輝度変更部と、を具備する。
【００１１】
本発明のある態様による撮像プログラムは、コンピュータに、複数枚の静止画像を連続して取得する連写撮影を行わせるための撮像プログラムであって、前記連写撮影時には、連続する２枚の静止画像の撮影期間の間のライブビュー撮影期間に、前記静止画像よりも読出時間が短いライブビュー画像を撮影する撮像ステップと、前記連写撮影時において、前記ライブビュー撮影期間に取得された前記ライブビュー画像をライブビュー表示期間に表示し、前記ライブビュー表示期間以外の期間に黒画像を表示する表示ステップと、前記連写撮影時に前記ライブビュー表示期間の表示と前記ライブビュー表示期間以外の期間の表示とが交互に表示されることに伴う視感輝度の低下を抑制するために、通常の設定条件に基づき算出される通常の表示輝度値よりも大きい連写中表示輝度値を算出して、前記連写中表示輝度値に基づき前記表示ステップにより表示される前記ライブビュー画像の輝度を変更する表示輝度変更ステップと、をコンピュータに実行させるためのプログラムである。
【００１２】
本発明のある態様による撮像方法は、複数枚の静止画像を連続して取得する連写撮影を行う撮像方法であって、前記連写撮影時には、連続する２枚の静止画像の撮影期間の間のライブビュー撮影期間に、前記静止画像よりも読出時間が短いライブビュー画像を撮影する撮像ステップと、前記連写撮影時において、前記ライブビュー撮影期間に取得された前記ライブビュー画像をライブビュー表示期間に表示し、前記ライブビュー表示期間以外の期間に黒画像を表示する表示ステップと、前記連写撮影時に前記ライブビュー表示期間の表示と前記ライブビュー表示期間以外の期間の表示とが交互に表示されることに伴う視感輝度の低下を抑制するために、通常の設定条件に基づき算出される通常の表示輝度値よりも大きい連写中表示輝度値を算出して、前記連写中表示輝度値に基づき前記表示ステップにより表示される前記ライブビュー画像の輝度を変更する表示輝度変更ステップと、を有する。
【発明の効果】
【００１３】
本発明の撮像装置、撮像プログラム、撮像方法によれば、連写撮影時のライブビュー表示期間以外の期間に黒画像を表示しても、ライブビュー画像が暗く観察されるのを抑制することができる。
【図面の簡単な説明】
【００１４】
【図１】本発明の実施形態１における撮像装置の基本的な構成を示すブロック図。
【図２】上記実施形態１における撮像装置をデジタルカメラに適用したときの構成例を示すブロック図。
【図３】上記実施形態１の撮像装置における連写時の処理を示すフローチャート。
【図４】上記実施形態１の図３のステップＳ９におけるスルー画処理の詳細を示すフローチャート。
【図５】上記実施形態１において、基準表示輝度値に対する基本重みを像消失率に応じて決定する例を示す線図。
【図６】上記実施形態１において、基準表示輝度値に対する輝度増加量をさらに制御するための補正係数を、連写レートに応じて決定する例を示す線図。
【図７】上記実施形態１において、連写開始前後の撮像装置の処理の流れを示すタイミングチャート。
【図８】本発明の実施形態２におけるスルー画処理の詳細を示すフローチャート。
【図９】上記実施形態２において、基準表示輝度値に対する重みを被写体輝度値に応じて決定する例を示す線図。
【図１０】上記実施形態２において、連写開始前後の撮像装置の処理の流れを示すタイミングチャート。
【図１１】本発明の実施形態３におけるスルー画処理の詳細を示すフローチャート。
【図１２】上記実施形態３において、基準表示輝度値に対する重みを表示時間比率に応じて変化させる例を示す線図。
【図１３】上記実施形態３において、連写開始前後の撮像装置の処理の流れを示すタイミングチャート。
【発明を実施するための形態】
【００１５】
以下、図面を参照して本発明の実施の形態を説明する。
［実施形態１］
【００１６】
図１から図７は本発明の実施形態１を示したものであり、図１は撮像装置１の基本的な構成を示すブロック図である。
【００１７】
撮像装置１は、複数枚の静止画像を連続して取得する連写撮影を行うことができるように構成されていて、撮像部２と、表示輝度変更部３と、表示部４と、を備えている。
【００１８】
撮像部２は、連写撮影時において、連続する２枚の静止画像の撮影期間の間のライブビュー撮影期間に、静止画像よりも読出時間が短いライブビュー画像（スルー画ともいう）を撮影する。
【００１９】
表示部４は、連写撮影時において、ライブビュー撮影期間に取得されたライブビュー画像をライブビュー表示期間に表示し、ライブビュー表示期間以外の期間に黒画像を表示する。この表示部４は、例えば、表示設定値を変化させることにより表示特性が可変となっていて、可変な表示設定値は、表示部４の照明輝度値（バックライト輝度値あるいはフロントライト輝度値など）と、表示部４の表示階調特性値（例えば、表示ガンマ特性値）と、の少なくとも一方を含んでいる。
【００２０】
表示輝度変更部３は、連写撮影時にライブビュー表示期間の表示とライブビュー表示期間以外の期間の表示とが交互に表示されることに伴う視感輝度の低下を抑制するために、通常の設定条件に基づき算出される通常の表示輝度値よりも大きい連写中表示輝度値を算出して、この連写中表示輝度値に基づき表示部４に表示されるライブビュー画像の輝度を変更する。
【００２１】
具体的に、本実施形態の表示輝度変更部３は、連写撮影の期間における黒画像を表示する期間の割合を示す像消失率が増加するに従って、連写中表示輝度値が大きくなるように、連写中表示輝度値を算出するようになっている。
【００２２】
さらに、本実施形態の表示輝度変更部３は、単位時間当たりに取得される静止画像の枚数を示す連写レートが減少するに従って、連写中表示輝度値が通常の表示輝度値に近付くように、連写中表示輝度値を算出するようになっている。
【００２３】
なお、表示輝度変更部３によるライブビュー画像の輝度の変更は、連写中表示輝度値に基づき表示設定値を設定することにより行ってもよいし、連写中表示輝度値に基づき表示部４へ出力されるライブビュー画像の画像データを変更することにより行っても構わない。後者の場合には、画像データの変更は、画像データを取得する際の露出目標値の変更と、画像データを取得する際の露出補正量の変更と、画像データに対する階調変換特性の変更と、画像データに対するゲイン値の変更と、の内の少なくとも１つにより行われる。
【００２４】
次に、図２は、撮像装置１をデジタルカメラに適用したときの構成例を示すブロック図である。なお、ここでは撮像装置１としてデジタルカメラを例に挙げて説明するが、これに限定されるものではなく、撮像機能を備えた装置であれば任意の装置であって構わない。
【００２５】
図２に示す例のデジタルカメラは、レンズ交換式であり、交換式レンズ１０とカメラ本体３０とをインタフェース（Ｉ／Ｆ）２０を介して通信できるように接続して構成されている。
【００２６】
交換式レンズ１０は、例えばレンズマウントを介してカメラ本体３０に対して着脱自在に装着されるようになっており、レンズマウントに形成した電気接点（交換式レンズ１０側に設けられた電気接点およびカメラ本体３０側に設けられた電気接点）等によりインタフェース２０が構成されている。
【００２７】
交換式レンズ１０は、レンズ１１と、絞り１２と、ドライバ１３と、フラッシュメモリ１４と、マイクロコンピュータ１５と、を備えている。
【００２８】
レンズ１１は、被写体の光学像をカメラ本体３０の後述する撮像素子３２上に結像するための撮影光学系である。
【００２９】
絞り１２は、レンズ１１から撮像素子３２へ向かう光束の通過範囲を制御する光学絞りである。
【００３０】
ドライバ１３は、マイクロコンピュータ１５からの指令に基づき、レンズ１１を駆動してフォーカス位置の調整を行い、レンズ１１が電動ズームレンズ等である場合にはさらに焦点距離の変更も行う。固定焦点位置の撮像装置、例えば、デジタル顕微鏡のようにピント位置を変化させるレンズ１１を備えない場合には、被写体を固定しているステージ（不図示）を移動させることで撮影レンズと被写体との距離を調節し、合焦位置を合わせるようにする。加えて、ドライバ１３は、マイクロコンピュータ１５からの指令に基づき、絞り１２を駆動して開口径を変化させる。この絞り１２の駆動により、被写体の光学像の明るさが変化し、ボケの大きさなども変化する。
【００３１】
フラッシュメモリ１４は、マイクロコンピュータ１５により実行される制御プログラムや、交換式レンズ１０に関する各種の情報を記憶する記憶媒体である。
【００３２】
マイクロコンピュータ１５は、いわゆるレンズ側コンピュータであり、ドライバ１３、フラッシュメモリ１４、およびインタフェース２０と接続されている。そして、マイクロコンピュータ１５は、インタフェース２０を介して後述する本体側コンピュータであるマイクロコンピュータ５１と通信し、マイクロコンピュータ５１からの指令を受けて、フラッシュメモリ１４に記憶されている情報の読出／書込を行い、ドライバ１３を制御する。さらに、マイクロコンピュータ１５は、この交換式レンズ１０に関する各種の情報をマイクロコンピュータ５１へ送信する。
【００３３】
インタフェース２０は、交換式レンズ１０のマイクロコンピュータ１５と、カメラ本体３０のマイクロコンピュータ５１とを、双方向に通信できるように接続する。
【００３４】
次に、カメラ本体３０は、メカニカルシャッタ３１と、撮像素子３２と、アナログ処理部３３と、アナログ／デジタル変換部（Ａ／Ｄ変換部）３４と、バス３５と、ＳＤＲＡＭ３６と、画像処理部３７と、ＡＥ処理部３８と、ＡＦ処理部３９と、ＡＷＢ処理部４０と、ＪＰＥＧ処理部４１と、メモリインタフェース（メモリＩ／Ｆ）４２と、記録媒体４３と、ＬＣＤドライバ４４と、ＬＣＤ４５と、ＥＶＦ（電子ビューファインダ：Electronic View Finder）ドライバ４６と、ＥＶＦ４７と、ブレ検知ユニット４８と、操作部４９と、フラッシュメモリ５０と、マイクロコンピュータ５１と、を備えている。
【００３５】
メカニカルシャッタ３１は、レンズ１１からの光束が撮像素子３２へ到達する時間を制御するものであり、例えば遮光機能を有するシャッタ幕を走行させる光学シャッタとなっている。このメカニカルシャッタ３１は、マイクロコンピュータ５１の指令により駆動されて、撮像素子３２に光束が到達開始してから到達終了するまでの時間、つまり撮像素子３２の露光時間を制御する。
【００３６】
撮像素子３２は、撮像面に所定の画素ピッチで２次元状に配列された複数の画素を有し、撮像制御部であるマイクロコンピュータ５１の制御に基づき、絞り１２を介してレンズ１１から入射する光束を受光し撮像して（つまり、結像された被写体の光学像を光電変換して）アナログ画像信号を生成するものである。
【００３７】
本実施形態の撮像素子３２は、例えば、垂直方向および水平方向に配列された複数の画素の前面に原色ベイヤー配列（Ｒ（赤色）Ｇ（緑色）Ｂ（青色）ベイヤー配列）のカラーフィルタを配置した単板式の撮像素子として構成されている。なお、撮像素子３２は、単板式の撮像素子に限らないことは勿論であり、例えば基板厚み方向に色成分を分離するような積層式の撮像素子であってもよい。
【００３８】
さらに、撮像素子３２は、全画素の画素信号を読み出して出力する全画素読み出し駆動と、撮像素子３２の内部において複数の画素を加算することと、画素を間引くことと、の少なくとも一方を行って出力することで、読み出す画素数を減らした加算間引き読み出し駆動と、を行うことができるように構成されている。
【００３９】
通常、記録用のスチル（静止）画像データを得る際には全画素読み出し駆動を行い、ライブビュー画像（スルー画）を得る際、または記録用の動画像データを得る際などには加算間引き読み出し駆動を行う。このために以下では、全画素読み出し駆動をスチル駆動、加算間引き読み出し駆動をスルー画駆動、と呼ぶことにする。こうして、スチル駆動により得られる静止画像よりも、スルー画駆動により得られるスルー画の方が画素数が少ないために、スルー画の読出時間は静止画像よりも短く、また、画像処理に要する時間も短くなっている。
【００４０】
アナログ処理部３３は、撮像素子３２から読み出されたアナログ画像信号に対して、リセットノイズ等を低減した上で波形整形を行い、さらに目的の明るさとなるようにゲインアップを行う。
【００４１】
Ａ／Ｄ変換部３４は、アナログ処理部３３から出力されたアナログ画像信号をデジタル画像信号（適宜、画像データという）に変換する。
【００４２】
例えば、これら撮像素子３２、アナログ処理部３３、およびＡ／Ｄ変換部３４は、図１に示した撮像部２に該当する。ただし、これに限定されるものではなく、Ａ／Ｄ変換部３４を除外しても構わないし、アナログ処理部３３およびＡ／Ｄ変換部３４を除外しても構わない。あるいは、撮像部２が、撮像素子３２、アナログ処理部３３、およびＡ／Ｄ変換部３４に加えて、さらに交換式レンズ１０を含むと考えてもよい。
【００４３】
また、ここでは撮像素子３２がアナログ撮像素子であって撮像素子３２の外部にアナログ処理部３３およびＡ／Ｄ変換部３４が設けられている例を示したが、近年普及が進んでいるデジタル撮像素子の場合には、アナログ処理部３３およびＡ／Ｄ変換部３４が撮像素子３２の内部に設けられている構成となる。
【００４４】
バス３５は、撮像装置１内のある場所で発生した各種のデータや制御信号を、撮像装置１内の他の場所へ転送するための転送路である。本実施形態におけるバス３５は、Ａ／Ｄ変換部３４と、ＳＤＲＡＭ３６と、画像処理部３７と、ＡＥ処理部３８と、ＡＦ処理部３９と、ＡＷＢ処理部４０と、ＪＰＥＧ処理部４１と、メモリＩ／Ｆ４２と、ＬＣＤドライバ４４と、ＥＶＦドライバ４６と、ブレ検知ユニット４８と、マイクロコンピュータ５１と、に接続されている。
【００４５】
Ａ／Ｄ変換部３４から出力された画像データ（以下では適宜、ＲＡＷ画像データという）は、バス３５を介して転送され、ＳＤＲＡＭ３６に一旦記憶される。
【００４６】
ＳＤＲＡＭ３６は、上述したＲＡＷ画像データ、あるいは画像処理部３７、ＪＰＥＧ処理部４１等において処理された画像データ等の各種データを一時的に記憶する記憶部である。
【００４７】
画像処理部３７は、ＲＡＷ画像データに対して種々の画像処理を行うものであり、ＷＢ補正部６１、同時化処理部６２、階調処理部６３、色再現処理部６４、およびＮＲ処理部６５を含んでいる。
【００４８】
ＷＢ補正部６１は、白色の被写体が白色として観察されるように、画像データに対してホワイトバランス処理を行う。
【００４９】
同時化処理部６２は、１画素につきＲＧＢ成分の内の１色成分のみが存在するＲＧＢベイヤー配列の画像データから、着目画素に存在しない色成分を周辺画素から補間して求めることにより、全画素がＲＧＢの３色成分を全て備える画像データに変換するデモザイキング処理を行う。
【００５０】
階調処理部６３は、ＬＣＤ４５、ＥＶＦ４７、または外部モニタ等に画像を表示したときに、適切な階調特性で表示されるように補正用の階調変換処理（例えば、γ変換処理）を行う。この階調処理部６３の階調変換処理により、表示用または記録用の画像データの最終的なトーンが決定される。
【００５１】
色再現処理部６４は、画像データにカラーマトリクス演算を行うことにより、被写体の色をより忠実に再現する処理を行う。
【００５２】
ＮＲ処理部６５は、画像データに空間周波数に応じたコアリング処理などを行うことによりノイズ低減処理を行う。
【００５３】
こうして画像処理部３７によって各種の処理が行われた後の画像データは、ＳＤＲＡＭ３６に再び記憶される。
【００５４】
ＡＥ処理部３８は、ＲＡＷ画像データに基づき、画像の明るさを示す露出の評価値（例えば、被写体輝度値ＢＶ）を算出する。そして、ＡＥ処理部３８は、算出した評価値が予め決められた露出の目標値（ＡＥ目標値）となるように、ＡＰＥＸ（Additive system of Photographic EXposure）に基づいたプログラム線図等を用いて、撮影条件／露光条件（例えば、シャッタ速度ＴＶ、絞り値ＡＶ、感度ＳＶなど）を決定する。マイクロコンピュータ５１は、このＡＥ処理部３８により決定された撮影条件／露光条件に基づいて、自動露出（ＡＥ）制御、すなわち、絞り１２の制御、メカニカルシャッタ３１の制御または撮像素子３２の露光タイミング制御（いわゆる電子シャッタの制御）、アナログ処理部３３によるゲインの制御等を行う。なお、ＡＥ処理部３８は、ユーザにより露出補正が設定されている場合には、設定されている露出補正量を加味して撮影条件／露光条件を決定する。
【００５５】
ＡＦ処理部３９は、ＲＡＷ画像データから高周波成分の信号を抽出して、ＡＦ（オートフォーカス）積算処理により、合焦評価値を取得する。ここで取得された合焦評価値は、レンズ１１のＡＦ駆動に用いられる。なお、ＡＦがこのようなコントラストＡＦに限定されないことは勿論であり、例えば専用のＡＦセンサ（あるいは撮像素子３２上のＡＦ用画素）を用いて位相差ＡＦを行うように構成しても構わない。
【００５６】
ＡＷＢ処理部４０は、ＲＡＷ画像データに基づき、被写体のカラーバランスを検出して、ＲＧＢ各成分に対するゲインをそれぞれ算出し、算出したゲインをＲＧＢ各成分に乗算することでホワイトバランスを調整するオートホワイトバランス処理を行う。
【００５７】
ＪＰＥＧ処理部４１は、画像データを記録する際には、ＳＤＲＡＭ３６から画像データを読み出してＪＰＥＧ圧縮方式に従って圧縮することによりＪＰＥＧ画像データを生成し、ＳＤＲＡＭ３６に記憶させる。このＳＤＲＡＭ３６に記憶されたＪＰＥＧ画像データは、マイクロコンピュータ５１によりヘッダ等を付加されて、メモリＩ／Ｆ４２を介して記録媒体４３にＪＰＥＧファイルとして記録される。
【００５８】
また、ＪＰＥＧ処理部４１は、圧縮画像データの伸張も行う。すなわち、記録済み画像の再生を行う場合には、マイクロコンピュータ５１の制御に基づき、例えばＪＰＥＧファイルがメモリＩ／Ｆ４２を介して記録媒体４３から読み出され、ＳＤＲＡＭ３６に一旦記憶される。ＪＰＥＧ処理部４１は、ＳＤＲＡＭ３６に記憶されたＪＰＥＧファイル中のＪＰＥＧ画像データをＪＰＥＧ伸張方式に従って伸張し、伸張した画像データをＳＤＲＡＭ３６に記憶させる。
【００５９】
メモリＩ／Ｆ４２は、記録媒体４３へ画像データを記録する制御を行う記録制御部であり、さらに、記録媒体４３からの画像データの読み出しを行う読出制御部でもある。
【００６０】
記録媒体４３は、画像データを不揮発に記憶する記録部であり、例えばカメラ本体３０に着脱できるメモリカード等により構成されている。ただし、記録媒体４３は、メモリカードに限定されるものではなく、ディスク状の記録媒体でも構わないし、その他の任意の記録媒体であってもよい。従って、記録媒体４３は、撮像装置１に固有の構成である必要はない。
【００６１】
ＬＣＤドライバ４４は、ＳＤＲＡＭ３６に記憶されている画像データを読み出して、読み出した画像データを映像信号へ変換し、ＬＣＤ４５を駆動制御して映像信号に基づく画像をＬＣＤ４５に表示させる。
【００６２】
ＬＣＤ４５は、例えばカメラ本体３０の背面に設けられた表示パネルであり、上述したようなＬＣＤドライバ４４の駆動制御により、画像を表示すると共に、この撮像装置１に係る各種の情報を表示する。
【００６３】
ＥＶＦドライバ４６は、ＳＤＲＡＭ３６に記憶されている画像データを読み出して、読み出した画像データを映像信号へ変換し、ＥＶＦ４７を駆動制御して映像信号に基づく画像をＥＶＦ４７に表示させる。
【００６４】
ＥＶＦ４７は、例えば、カメラ本体３０の背面上部において、拡大光学系を介して観察するように構成されていて、上述したようなＥＶＦドライバ４６の駆動制御により、画像を表示すると共に、この撮像装置１に係る各種の情報を表示する。
【００６５】
ここに、ＬＣＤ４５とＥＶＦ４７との何れも、バックライトやフロントライトなどを予め設定された照明輝度値（バックライト輝度値あるいはフロントライト輝度値など）で点灯した上で、入力画像に対する表示用のトーン設定である表示階調特性（例えば、表示ガンマ特性）が適用されて、表示が行われることになる。これら照明輝度値および表示階調特性は、設定に応じて変更することができるようになっている。
【００６６】
これらＬＣＤ４５およびＥＶＦ４７は、図１に示した表示部４に該当し、ユーザは、ＬＣＤ４５とＥＶＦ４７との何れに表示を行うかを所望に選択することができるようになっている。
【００６７】
そして、ＬＣＤ４５またはＥＶＦ４７において行われる画像表示には、撮影直後の静止画の画像データを短時間だけ表示するレックビュー表示、記録媒体４３に記録されたＪＰＥＧファイルの再生表示、記録媒体４３に記録された動画像の再生表示、およびライブビュー表示などがある。
【００６８】
ブレ検知ユニット４８は、ジャイロセンサ等を備えたブレ検知部であり、例えば手ブレなどによる撮像装置１の動きの大きさをブレ量として検知する。そして、ブレ検知ユニット４８は、検知結果をマイクロコンピュータ５１へ出力するようになっている。このブレ検知ユニット４８により検知されたブレ量は、ユーザへの手ブレ警告として用いられ、あるいは図示しないブレ補正機構によるブレ補正に用いられる。
【００６９】
操作部４９は、この撮像装置１に対する各種の操作入力を行うためのものであり、撮像装置１の電源をオン／オフするための電源ボタン、画像の撮影開始を指示するための例えば１ｓｔ（ファースト）レリーズスイッチおよび２ｎｄ（セカンド）レリーズスイッチを有して構成されている２段式操作ボタンでなるレリーズボタン、記録画像の再生を行うための再生ボタン、撮像装置１の設定等を行うためのメニューボタン、項目の選択操作に用いられる十字キーや選択項目の確定操作に用いられるＯＫボタン等の操作ボタンなどを含んでいる。ここに、メニューボタンや十字キー、ＯＫボタン等を用いて設定できる項目には、撮影モード（単写撮影モード、連写撮影モード等）、記録モード（ＪＰＥＧ記録モード、ＲＡＷ＋ＪＰＥＧ記録モード等）、再生モード、各種パラメータの設定などが含まれている。この操作部４９に対して操作が行われると、操作内容に応じた信号がマイクロコンピュータ５１へ出力される。例えば、カメラが連写撮影モードに設定されているときに、レリーズボタンが押し続けられると、２ｎｄレリーズスイッチがオンしている間は静止画像の撮影を繰り返して行うことで、連写撮影が行われるようになっている。
【００７０】
フラッシュメモリ５０は、マイクロコンピュータ５１により実行される処理プログラムと、この撮像装置１に係る各種の情報と、を不揮発に記憶する記憶媒体である。ここに、フラッシュメモリ５０が記憶する情報としては、例えば、画像処理に用いるパラメータ、撮像装置１を特定するための機種名や製造番号、ユーザにより設定された設定値、などが幾つかの例として挙げられる。このフラッシュメモリ５０が記憶する情報は、マイクロコンピュータ５１により読み取られる。
【００７１】
マイクロコンピュータ５１は、カメラ本体３０内の各部を制御すると共に、インタフェース２０を介してマイクロコンピュータ１５へ指令を送信し交換式レンズ１０を制御するものであり、この撮像装置１を統括的に制御する制御部である。マイクロコンピュータ５１は、ユーザにより操作部４９から操作入力が行われると、フラッシュメモリ５０に記憶されている処理プログラムに従って、フラッシュメモリ５０から処理に必要なパラメータを読み込んで、操作内容に応じた各種シーケンスを実行する。
【００７２】
制御部であるマイクロコンピュータ５１は、撮影モードにおいて、撮像素子３２に撮像を行わせて画像データを取得させる撮像制御部としても機能するようになっている。特に連写撮影モードに設定されているときには、マイクロコンピュータ５１は、２ｎｄレリーズスイッチがオンの状態に維持さている間は撮像素子３２に静止画像の撮影を連続的に行わせると共に、連続する２枚の静止画像の撮影期間の間のライブビュー撮影期間に、ライブビュー画像を撮影させる連写制御部として機能するようになっている。
【００７３】
次に、図３は、撮像装置１における連写時の処理を示すフローチャートである。この処理（および、以下の各フローチャートに示す処理）は、制御部であるマイクロコンピュータ５１の制御に基づき行われる。
【００７４】
電源ボタンにより撮像装置１の電源がオンされて図示しないメインルーチンの処理を行っているときに、操作部４９の操作により撮像装置１が連写撮影モードに設定され、レリーズボタンが半押し（１ｓｔレリーズスイッチがオン）されてＡＥ処理およびＡＦ処理が行われ、さらにレリーズボタンが全押しされて２ｎｄレリーズスイッチがオンの状態に維持されると、この処理が実行される。
【００７５】
するとまず、連写撮影モードや連写コマ数などの連写設定の読み込みを行う（ステップＳ１）。この連写撮影モードの方式として撮像装置１に搭載できるのは、例えば、レックビュー方式（レックビュー連写）と、ライブビュー方式（ライブビュー連写）とであるが、ここでは、ライブビュー連写のみが撮像装置１に搭載されているか、もしくは、両方が搭載されているがライブビュー連写が選択されている状態にあるか、の何れかであるものとして以下の説明を行う。
【００７６】
続いて、撮像素子３２をスチル駆動に設定して（ステップＳ２）、静止画像を撮影するための撮影条件／露出条件を算出して設定する（ステップＳ３）。
【００７７】
こうして撮影の準備が整ったら、撮像素子３２による露光を開始する（ステップＳ４）。
【００７８】
この露光を開始した後も、連写を開始する前に取得したライブビュー画像の表示が表示遅延時間（画像の取り込みおよび画像処理などにより、表示されるまでに遅延が生じた時間）程度行われるが（図７参照）、表示遅延時間程度のライブビュー画像の表示が終わったら、その後はマイクロコンピュータ５１の制御に基づき、黒画像がＬＣＤ４５またはＥＶＦ４７に表示される（ステップＳ５）。
【００７９】
そして、ステップＳ３において設定された露光時間が経過したか否かを判定し（ステップＳ６）、まだ経過していないと判定された場合にはステップＳ５の黒画像表示を継続して行う。
【００８０】
また、ステップＳ６において、露光時間が経過したと判定された場合には、生成された画像を撮像素子３２から読み出して、アナログ処理部３３およびＡ／Ｄ変換部３４により処理し、ＳＤＲＡＭ３６に記憶した後に、画像処理部３７により画像処理を行って、メモリＩ／Ｆ４２を介して記録媒体４３に記録する処理を行う（ステップＳ７）。ただし、静止画像の読み出しや画像処理には時間を要するために、このステップＳ７の処理は、連写を終了しない限り、後述するステップＳ９の処理と並列して実行されることになる。
【００８１】
次に、２ｎｄレリーズスイッチのオン状態が解除されて、連写終了が撮影者により指示されたか否かを判定する（ステップＳ８）。
【００８２】
ここで、２ｎｄレリーズスイッチがオン状態のまま維持されていると判定された場合には、後で図４を参照して説明するようなスルー画処理を行う（ステップＳ９）。すなわち、表示遅延を除いて、スチル撮像を開始してから完了するまでは黒画像を表示するが、スチル撮像を完了した後は、連写を終了しない限り、スルー画表示に移行するようになっている。
【００８３】
そして、ステップＳ９のスルー画処理を所定時間行ったら、次の静止画像を撮影するために、ステップＳ２に戻って上述したような処理を行う。
【００８４】
一方、ステップＳ８において、２ｎｄレリーズスイッチのオン状態が解除されたと判定された場合には連写が終了となって、この処理から図示しないメイン処理にリターンする。
【００８５】
図４は、図３のステップＳ９におけるスルー画処理の詳細を示すフローチャートである。
【００８６】
この処理に入ると、表示輝度変更部３は、連写レートＮを算出する（ステップＳ１０）。
【００８７】
ここに、連写レートは、静止画像が１秒間に何コマ撮影されるか示すものであり、１秒当たりのフレーム数（ｆｐｓ）を単位として表される。そして、連写撮影は、通常、予め設定された連写レートで行われる。
【００８８】
ただし、予め設定された連写レートから算出される１コマ当たりの露光時間よりも、露出制御に基づき設定される露光時間が長い場合には、予め設定された連写レートで連写することができない。
【００８９】
また、記録媒体４３がメモリカード等である場合には、製品によって様々なメディア記録速度のものがあるために、連写して得られた複数枚の静止画像を撮影後に即座に記録媒体４３に書き込むことができない場合もある。こうした場合には、カメラ本体３０内のＳＤＲＡＭ３６、あるいはフラッシュメモリ５０などの内蔵メモリをバッファとして用いて連写を続けるが、内蔵メモリ容量とメディア記録速度との関係でバッファフルになってしまうと、予め設定された連写レートで連写することができなくなる。
【００９０】
従って、ここで算出する連写レートＮは、こうした実際の撮影状態を踏まえた連写レートである。
【００９１】
ここで、図７は、連写開始前後の撮像装置１の処理の流れを示すタイミングチャートである。
【００９２】
図示のように、連写を開始する前までは、ライブビュー画像ＬＶの撮像および表示が連続的に行われている。この連写開始直前の表示画像の明るさ（連写前の表示輝度値）は、例えば、後述する基準表示輝度値Ｂ０として用いられる。連写が開始されても、上述したように表示遅延時間（図７の例ではライブビュー画像ＬＶの２フレーム分の時間）だけは連写前に撮影したライブビュー画像ＬＶが表示されるが、その後は静止画像の撮像に対応して黒画像が表示される。
【００９３】
そして、この図７に示す例では、ある１枚の静止画像を撮影開始する時点から、次の１枚の静止画像を撮影開始する時点までの時間はＴｃである。従って、連写レートＮは、Ｎ＝１／Ｔｃにより算出される。また、連写中において、静止画像（例えばＳＴＬ１）を撮影する期間が静止画像撮影期間、連続する２枚の静止画像撮影期間（例えばＳＴＬ１とＳＴＬ２）の間がライブビュー撮影期間（図７の例では、４フレームのスルー画ＬＶ１１〜ＬＶ１４が撮影される期間）である。なお、ライブビュー撮影期間とライブビュー表示期間とは表示遅延時間だけずれており、同様に、静止画像撮影期間と黒画像表示期間（ライブビュー表示期間以外の期間）とも表示遅延時間だけずれている。
【００９４】
次に、表示輝度変更部３は、像消失率Ｒを算出する（ステップＳ１１）。
【００９５】
ここに、像消失率は、ある１枚の静止画像を撮影開始する時点から、次の１枚の静止画像を撮影開始する時点までの時間（図７の例においてはＴｃ）に対する、スルー画が表示されていない時間の割合である。図７に示す例においては、スルー画が表示されている時間（ライブビュー表示期間）はＴｓ、スルー画が表示されていない時間（ライブビュー表示期間以外の期間）はＴｂ＝（Ｔｃ−Ｔｓ）であるから、像消失率Ｒは、Ｒ＝Ｔｂ／Ｔｃにより算出される。
【００９６】
像消失率は、通常、連写コマ数が増えると上がる傾向にあるが、連写コマ数は上述したように各種の条件によって変化する。さらに、連写コマ数が同一であっても、露光時間が長い場合と短い場合とではスルー画を撮影することができる時間の長さが異なるために像消失率が異なるし、同様に、バッファに余裕がある場合とバッファフルの場合とでも像消失率が異なる。
【００９７】
従って、ここで算出する像消失率Ｒは、こうした実際の撮影状態を踏まえた像消失率である。
【００９８】
続いて、表示輝度変更部３は、ステップＳ１０において算出された連写レートＮと、ステップＳ１１において算出された像消失率Ｒとに基づいて、連写中表示輝度値Ｂを算出する（ステップＳ１２）。
【００９９】
この連写中表示輝度値Ｂの算出は、例えば、基準表示輝度値Ｂ０に対する重みＷを算出して、算出した重みＷをＢ０に乗算することにより行う。ここに、基準表示輝度値Ｂ０は、通常の設定条件に基づき算出される通常の表示輝度値であり、例えば、連写前の表示輝度値を用いることができる（図７において、連写前の表示輝度値を基準表示輝度値Ｂ０として用いている例を参照）。
【０１００】
そして、重みＷの算出は、像消失率Ｒに基づく基本重みＷｒに、連写レートＮに基づく補正係数Ｋを乗算することにより行う。
【０１０１】
上述したように、人間は画像の明るさを積分値で感受するために、例えば、像消失率Ｒが１／２の場合（つまり、黒画像の表示時間とライブビュー画像の表示時間とが同一である場合）には、画像の明るさが概略半分になったように感じてしまうし、像消失率Ｒが２／３の場合（つまり、黒画像の表示時間がライブビュー画像の表示時間の２倍である場合）には、画像の明るさが概略１／３になったように感じてしまう。
【０１０２】
こうして、基本重みＷｒは、像消失率Ｒが増加するにつれて人間が感受する輝度（視感輝度）が低下するのを抑制するために、原則的に、１以上の値の範囲で、像消失率Ｒの増加に応じて次第に増加するように設定される。
【０１０３】
最も単純なＷｒの設定方法は、ライブビュー画像の連写中表示輝度値ＢをＢ＝Ｂ０×Ｗｒとして、この連写中表示輝度値Ｂと、連写中の黒画像の表示輝度値と、を時間平均した輝度値が基準表示輝度値Ｂ０に一致するようにＷｒを設定する方法である。黒画像の表示輝度値が０である理想的な場合（ただし、黒画像でバックライト等の輝度を完全に遮ることは困難であるために、実際には黒画像の表示輝度値は幾らかの値をもつ）を例に挙げれば、Ｗｒ＝１／（１−Ｒ）として設定する（つまり、Ｂ＝Ｂ０／（１−Ｒ）となる）ことになる。
【０１０４】
これに対して、実際の製品により即した基本重みＷｒの設定例を図５に示す。ここに、図５は、基準表示輝度値Ｂ０に対する基本重みＷｒを、像消失率Ｒに応じて決定する例を示す線図である。なお、連写中にスルー画を取得するライブビュー連写が設定されていて、連写中に１フレーム以上の静止画が撮影され、かつ１フレーム以上のスルー画が撮影される場合には、像消失率Ｒが取り得る値の範囲は、０＜Ｒ＜１である。
【０１０５】
この図５に示す例では、像消失率Ｒが０＜Ｒ≦Ｒ１のときにはＷｒ＝１であるが、Ｒ１＜Ｒ＜Ｒ２においては基本重みＷｒが単調増加し、Ｒ２≦Ｒ＜１において最大値Ｗｒｍをとるようになっている。
【０１０６】
まず、像消失率Ｒが小さい（０＜Ｒ≦Ｒ１）ときには、表示輝度値の低下は比較的小さいために、輝度低下による違和感がないかまたは小さい。従って、このときには表示輝度値を変更しないようにしている。一方、表示輝度値を上げる場合には、表示部４の構成により上限があり、具体例としては、ＬＣＤ４５やＥＶＦ４７のバックライト輝度値やフロントライト輝度値には上限がある。従って、Ｒ２≦Ｒ＜１においては、このような上限に達したために、基本重みＷｒを最大値Ｗｒｍ以上には上げることができない（上限値でクリップしている）ことを示している。そして、Ｒ１＜Ｒ＜Ｒ２が、像消失率Ｒの増加に応じて、基本重みＷｒを増加する区間となっている。
【０１０７】
次に、図６は、基準表示輝度値Ｂ０に対する輝度増加量をさらに制御するための補正係数Ｋを、連写レートＮに応じて決定する例を示す線図である。なお、連写レートＮが取り得る値の範囲は０＜Ｎである。
【０１０８】
この図６に示す例では、連写レートＮが０＜Ｎ≦Ｎ１のときには補正係数Ｋは最小値Ｋｓ（Ｋｓ＜１）をとるが、Ｎ１＜Ｎ＜Ｎ２においては基本重みＫが単調増加し、Ｎ２≦Ｎにおいて最大値１をとるようになっている。従って、補正係数Ｋは、Ｋｓ≦Ｋ≦１の範囲をとり、つまり表示輝度値の増加を抑制する係数となっている。
【０１０９】
さらに、表示輝度変更部３は、上述したように求めた基本重みＷｒと補正係数Ｋとを用いて、次のように重みＷを算出する。
Ｗ＝１＋Ｋ×（Ｗｒ−１）
【０１１０】
すなわち、重みＷは、基本重みＷｒにおける値が１よりも大きい部分を、補正係数Ｋにより抑制したものとなっている。ここに、（Ｗｒ−１）≧０、かつＫ＞０であるために、Ｗ≧１である。特に、像消失率Ｒが小さい（０＜Ｒ≦Ｒ１）ときを除けば（つまり、実用上、輝度を増加しなくても済む場合を除けば）、Ｗ＞１となる。
【０１１１】
そして、表示輝度変更部３は、算出した重みＷを用いて、連写中表示輝度値Ｂを、
Ｂ＝Ｗ×Ｂ０
により算出する。従って、重みＷは、所定の条件（Ｒ１＜Ｒ）の下においては基準表示輝度値Ｂ０を増加する重みであり、表示輝度変更部３は、通常の設定条件に基づき算出される通常の表示輝度値である基準表示輝度値Ｂ０よりも大きい連写中表示輝度値Ｂを算出している。
【０１１２】
表示輝度変更部３により算出された連写中表示輝度値Ｂに基づいて、例えば表示部４の表示輝度値の設定が変更される（ステップＳ１３）。
【０１１３】
ここに、ライブビュー画像の輝度の変更は、例えば、連写中表示輝度値Ｂに基づき表示設定値（表示部４（ＬＣＤ４５あるいはＥＶＦ４７等）の照明輝度値（バックライト輝度値またはフロントライト輝度値など））を変更することにより行われるが、これに限定されるものではない。
【０１１４】
例えば、連写中表示輝度値Ｂに基づき、表示設定値としての表示部４の表示階調特性値（例えば、表示ガンマ特性値）を変更することによって、ライブビュー画像の輝度の変更を行ってもよいし、照明輝度値の変更と表示階調特性値の変更とを組み合わせても構わない。
【０１１５】
これらの場合には、表示輝度変更部３は、例えば、マイクロコンピュータ５１、ＬＣＤドライバ４４、およびＥＶＦドライバ４６などが該当する。
【０１１６】
また、ライブビュー画像の輝度の変更を、連写中表示輝度値Ｂに基づきライブビュー画像の画像データを変更することにより行うこともできる。
【０１１７】
例えば、画像データの変更を、画像データを取得する際の露出目標値（ＡＥ目標値）の変更、または画像データを取得する際の露出補正量の変更により行ってもよい。この場合には、表示輝度変更部３は、マイクロコンピュータ５１、あるいはさらにＡＥ処理部３８などが該当する。
【０１１８】
さらに、画像データの変更を、画像データに対する階調変換特性の変更により行っても構わない。この場合には、表示輝度変更部３は、例えば、マイクロコンピュータ５１、および画像処理部３７の階調処理部６３などが該当する。
【０１１９】
加えて、画像データの変更を、画像データに対するゲイン値の変更により行ってもよい。この場合には、表示輝度変更部３は、例えば、マイクロコンピュータ５１、およびアナログ処理部３３（アナログゲインの場合）あるいは画像処理部３７（デジタルゲインの場合）などが該当する。
【０１２０】
ここで述べたライブビュー画像の輝度を変更するための各種の方法は、適宜に組み合わせても構わない。なお、ここで述べた方法の内の幾つかは、ハイライト部の階調再現性を幾らか損なうことがあるが、連写中におけるスルー画の明るさ変化を軽減する目的を達成することはできる。
【０１２１】
図７は、このような設定の変更により、連写中のスルー画の表示輝度値ＤＢが、連写前の表示輝度値（例えば、基準表示輝度値Ｂ０）よりも高くなっていることを示している。そして、図７に示す例では、人間が感受する表示輝度値ＨＢが基準表示輝度値Ｂ０に一致するように、表示輝度値ＤＢが設定されている。
【０１２２】
なお、上述した図５および図６に示すような各関係は、例えばテーブルデータとして、フラッシュメモリ５０に予め記憶されている。ただし、テーブルデータとして記憶するに限定されるものではなく、例えば、関数として記憶しても構わない。
【０１２３】
続いて、撮像素子３２をスルー画駆動に設定して（ステップＳ１４）、スルー画を撮影するための撮影条件／露出条件を算出して設定する（ステップＳ１５）。
【０１２４】
そして、設定した撮影条件で１フレームのスルー画を撮像し（ステップＳ１６）、取得された画像データに対して画像処理を行って、表示用の画像データを生成する（ステップＳ１７）。
【０１２５】
こうして生成した１フレームの画像データを表示部４に表示する（ステップＳ１８）。
【０１２６】
その後、連続する２つの静止画像撮影期間の間のスルー画撮影期間が終了したか否かを判定する（ステップＳ１９）。
【０１２７】
ここで、スルー画撮影期間が終了していないと判定された場合には、ステップＳ１５へ戻って上述したような処理を行うことにより、次のフレームのスルー画を撮像する。
【０１２８】
一方、ステップＳ１９において、スルー画撮影期間が終了したと判定された場合には、この処理から図３に示した処理にリターンする。
【０１２９】
このような実施形態１によれば、通常の設定条件に基づき算出される通常の表示輝度値である基準表示輝度値Ｂ０よりも大きい連写中表示輝度値Ｂを算出して、この連写中表示輝度値Ｂに基づき表示部４に表示されるライブビュー画像の輝度を変更するために、連写撮影時に、ライブビュー表示期間の表示とライブビュー表示期間以外の期間の表示とが交互に表示されることに伴う視感輝度の低下を抑制することができる。
【０１３０】
さらに、連写撮影の期間における黒画像を表示する期間の割合を示す像消失率Ｒが増加するに従って、連写中表示輝度値が大きくなるように、連写中表示輝度値を算出するようにしたために、像消失率Ｒが高くなるにつれて視感輝度がより低下するのを適切に抑制することができ、像消失率Ｒによらない明るさの画像を観察することができる。
【０１３１】
そして、連写レートＮが減少するに従って、通常の表示輝度値である基準表示輝度値Ｂ０に近付くように連写中表示輝度値Ｂを算出するようにしたために、ライブビュー画像と黒画像との表示時間の割合に応じた視感輝度の適切な制御をすることができる。例えば、像消失率Ｒのみに基づいて連写中表示輝度値Ｂを制御してしまうと、連写中の静止画像の露光時間が長い場合には、黒画像が長い時間表示された後に、極短時間だけ明るいライブビュー画像が表示されることになるが、この場合にはフラッシュ発光のような眩しさを感じてしまう。これに対して、連写レートＮに基づく制御を行うことによりこうした眩しさを軽減し、連写中の快適な表示を実現することができる。
【０１３２】
また、連写中表示輝度値Ｂに基づき表示設定値を設定することにより表示部４に表示されるライブビュー画像の輝度を変更する場合には、ライブビュー画像の画像データを変更する必要がなく、画像処理の負荷を軽減することができる。
【０１３３】
ここに、表示設定値が、表示部４の照明輝度値と、表示部４の表示階調特性値と、の少なくとも一方を含むことで、照明輝度の変更による画像の明るさの絶対的な変更と、画像のダイナミックレンジ内での階調の変更による明るさの調整と、の少なくとも一方を行うことができる。そして、照明輝度の変更と表示階調特性の変更とを組み合わせた場合には、より広い明るさ範囲に対応することができる。
【０１３４】
一方、連写中表示輝度値Ｂに基づき画像データを変更することにより、表示部４に表示されるライブビュー画像の輝度を変更する場合には、表示部４の表示設定値の調整により変更することができる範囲の限界に達した場合でも、さらに調整を行うことができる。また、表示設定値の調整をすることができない表示部４にライブビュー画像を表示する場合でも、画像の明るさ調整を行うことができる。
【０１３５】
そして、画像データの変更を、画像データを取得する際の露出目標値の変更、または画像データを取得する際の露出補正量の変更により行う場合には、階調変換特性の変更により行う場合のような暗部における階調とびおよび明部における階調のつぶれの発生を抑制することができる。
【０１３６】
また、画像データの変更を、画像データに対する階調変換特性の変更により行う場合には、ライブビュー画像に対する撮影条件の変更が不要になる。そして、フレームレートによる制限などから露出を変更することができる範囲の限界に達した場合でも、さらに調整を行うことができる。
【０１３７】
加えて、画像データの変更を、画像データに対するゲイン値の変更により行う場合にも、ライブビュー画像に対する露光時間や絞り値などの撮影条件の変更が不要になる。
［実施形態２］
【０１３８】
図８から図１０は本発明の実施形態２を示したものであり、図８はスルー画処理の詳細を示すフローチャートである。
【０１３９】
この実施形態２において、上述の実施形態１と同様である部分については同一の符号を付すなどして説明を適宜省略し、主として異なる点についてのみ説明する。
【０１４０】
上述した実施形態１は、像消失率Ｒおよび連写レートＮに応じて連写中表示輝度値Ｂを制御するものであったが、本実施形態は、被写体輝度値ＢＶに応じて連写中表示輝度値Ｂを制御するものとなっている。
【０１４１】
まず、本実施形態の撮像装置１の構成は、上述した実施形態１の図１および図２に示した構成と同様であり、本実施形態の撮像装置１における連写時の処理は、上述した実施形態１の図３に示した処理と同様である。
【０１４２】
一方、図３のステップＳ９におけるスルー画処理の内容は、本実施形態においては図８に示すようになっている。
【０１４３】
すなわち、図８に示す処理に入ると、まず、上述したステップＳ１４の処理を行って、撮像素子３２をスルー画駆動に設定する。
【０１４４】
次に、上述したステップＳ１５の処理を行って、スルー画を撮影するための撮影条件／露出条件を算出して設定する。
【０１４５】
続いて、表示輝度変更部３は、ＡＥ処理部３８により算出された被写体輝度値ＢＶに基づいて、連写中表示輝度値Ｂを算出する（ステップＳ１２Ａ）。
【０１４６】
ここに、図９は、基準表示輝度値Ｂ０に対する重みＷｂを被写体輝度値ＢＶに応じて決定する例を示す線図である。
【０１４７】
まず、被写体輝度値ＢＶは、被写体の平均輝度値や重み付け平均輝度値などとして算出される。そして、この図９に示す例では、被写体輝度値ＢＶが０＜ＢＶ≦ＢＶ１のときにはＷｂ＝１であるが、ＢＶ１＜ＢＶ＜ＢＶ２においては重みＷｂが単調増加し、ＢＶ２≦ＢＶにおいて最大値Ｗｂｍをとるようになっている。
【０１４８】
まず、被写体輝度値ＢＶが小さい（０＜ＢＶ≦ＢＶ１）ときには、暗所視と明所視との変動が小さく、黒画像とスルー画とのコントラストが比較的小さいために、１フレーム以上の黒画像と１フレーム以上のスルー画とが交互に表示されても明るさ変化に対する違和感が小さい。従って、このときには連写中表示輝度値Ｂを変更しないようにしている。
【０１４９】
一方、被写体輝度値ＢＶが大きくなるに従って、暗所視と明所視との変動が大きくなり、黒画像とスルー画とのコントラストが大きくなる。この場合には、黒画像の暗さを感じ易くなって、明るさ変化に対する違和感も次第に大きくなる。そこで、ＢＶ１＜ＢＶ＜ＢＶ２においては、被写体輝度値ＢＶの増加に応じて、連写中表示輝度値Ｂを次第に大きくするように（つまり、重みＷｂを増加するように）している。
【０１５０】
さらに、ＢＶ２≦ＢＶにおいては、連写中表示輝度値Ｂを上げる上限に達したために、重みＷｂが最大値Ｗｂｍにクリップされている。
【０１５１】
なお、図９に示すような関係は、例えばテーブルデータ、あるいは関数などとして、フラッシュメモリ５０に予め記憶されている。
【０１５２】
そして、表示輝度変更部３は、算出した重みＷｂを用いて、連写中表示輝度値Ｂを、
Ｂ＝Ｗｂ×Ｂ０
により算出する。
【０１５３】
こうして、上述したステップＳ１３の処理を行って、表示輝度変更部３により算出された連写中表示輝度値Ｂに基づいて、例えば表示部４の表示輝度値の設定が変更される。
【０１５４】
図１０は、連写開始前後の撮像装置１の処理の流れを示すタイミングチャートである。この図１０には、被写体輝度値ＢＶが中程度の明るいシーンに対する表示輝度の設定例と、被写体輝度値ＢＶが小さい暗いシーンに対する表示輝度の設定例と、を並記している。
【０１５５】
図９を参照しながら図１０を見れば分かるように、暗いシーン（０＜ＢＶ≦ＢＶ１）では表示輝度値ＤＢは基準表示輝度値Ｂ０と同等であり、明るいシーン（ＢＶ１＜ＢＶ）では表示輝度値ＤＢは基準表示輝度値Ｂ０よりも大きくなっている。
【０１５６】
その後は、上述した実施形態１と同様のステップＳ１６〜Ｓ１９の処理を行い、ステップＳ１９においてスルー画撮影期間が終了していないと判定された場合にはステップＳ１５へ戻り、スルー画撮影期間が終了したと判定された場合には図３の処理にリターンする。
【０１５７】
このような実施形態２によれば、被写体輝度値ＢＶが増加するに従って、通常の表示輝度値である基準表示輝度値Ｂ０に対する比（重みＷｂ）が大きくなるように連写中表示輝度値Ｂを算出することによっても、上述した実施形態１とほぼ同様に、連写撮影時におけるライブビュー表示期間の表示とライブビュー表示期間以外の期間の表示とが交互に表示されることに伴う視感輝度の低下を抑制することができる。
【０１５８】
さらに、スルー画の間に黒画像が挟み込まれることによって画像の明るさが暗く感じられる程度は、黒画像とスルー画のコントラストによって変化する。例えば、星空や夜景のスルー画の間に黒画像が挟み込まれても、画像が暗くなったとは比較的感じ難い。一方、炎天下の風景のスルー画の間に黒画像が挟み込まれると、画像が暗くなったことを明確に感じ易い。これに対して本実施形態の構成によれば、画像が暗くなると感じるのを効果的に抑制することができる。
［実施形態３］
【０１５９】
図１１から図１３は本発明の実施形態３を示したものであり、図１１はスルー画処理の詳細を示すフローチャートである。
【０１６０】
この実施形態３において、上述の実施形態１，２と同様である部分については同一の符号を付すなどして説明を適宜省略し、主として異なる点についてのみ説明する。
【０１６１】
上述した実施形態１では、１つのライブビュー表示期間におけるスルー画の連写中表示輝度値Ｂは一定であったが、本実施形態は、１つのライブビュー表示期間におけるスルー画の連写中表示輝度値Ｂを時間の経過に応じて次第に変化させるものとなっている。
【０１６２】
本実施形態においても、撮像装置１の構成は図１および図２に示した構成と同様であり、連写時の処理は図３に示した処理と同様である。
【０１６３】
一方、図３のステップＳ９におけるスルー画処理の内容は、本実施形態においては図１１に示すようになっている。
【０１６４】
すなわち、図１１に示す処理に入ると、まず、上述したステップＳ１０の処理を行って連写レートＮを算出し、上述したステップＳ１１の処理を行って像消失率Ｒを算出する。
【０１６５】
次に、表示輝度変更部３は、例えば連写レートＮと像消失率Ｒとに基づいて、１回のライブビュー（ＬＶ）表示期間Ｔｓ（図１３参照）を、
Ｔｓ＝（１−Ｒ）／Ｎ
のように算出する（ステップＳ２１）。
【０１６６】
続いて、上述したステップＳ１４の処理を行って、撮像素子３２をスルー画駆動に設定する。
【０１６７】
さらに、１つのライブビュー表示期間Ｔｓが開始されてからの時間であるライブビュー表示経過時間ｔをリセットしてから、ライブビュー表示経過時間ｔの計測を開始する（ステップＳ２２）。
【０１６８】
その後は、上述したステップＳ１５〜Ｓ１７の処理を行って、スルー画として表示するための画像データを生成する。
【０１６９】
そして、ステップＳ２２において計測を開始したライブビュー表示経過時間ｔに基づいて、スルー画の連写中表示輝度値Ｂを算出する（ステップＳ１２Ｂ）。
【０１７０】
すなわち、表示輝度変更部３は、表示時間比率ｔｒをｔｒ＝（ｔ／Ｔｓ）により算出し、さらに、表示時間比率ｔｒに応じて重みＷｔを算出する。
【０１７１】
ここに、図１２は、基準表示輝度値Ｂ０に対する重みＷｔを表示時間比率ｔｒに応じて変化させる例を示す線図である。
【０１７２】
図示のように、重みＷｔは、表示時間比率ｔｒが０から１へ増加するに従って、１から最大値Ｗｔｍへ単調増加するようになっている。
【０１７３】
ここに、最大値Ｗｔｍは、上述した実施形態１の重みＷ＝｛１＋Ｋ×（Ｗｒ−１）｝と一致させても構わないが、１回のライブビュー表示期間Ｔｓにおける表示輝度値ＤＢの時間積分値が、実施形態１の１回のライブビュー表示期間Ｔｓにおける表示輝度値ＤＢの時間積分値と一致するような値に設定してもよい。例えば、図１２に示す重みＷｔが表示時間比率ｔｒの一次関数である場合には、
Ｗｔｍ＝１＋２×（Ｗ−１）＝１＋２Ｋ×（Ｗｒ−１）
とする、などである。
【０１７４】
なお、図１２に示すような関係は、例えばテーブルデータ、あるいは関数などとして、フラッシュメモリ５０に予め記憶されている。
【０１７５】
さらに、表示輝度変更部３は、算出した重みＷｔを用いて、連写中表示輝度値Ｂを、
Ｂ＝Ｗｔ×Ｂ０
により算出する。
【０１７６】
そして、上述したステップＳ１３の処理を行って、表示輝度変更部３により算出された連写中表示輝度値Ｂに基づいて、例えば表示部４の表示輝度値の設定を変更し、上述したステップＳ１８の処理を行って、１フレームの画像データを表示部４に表示する。
【０１７７】
ここに、図１３は、連写開始前後の撮像装置１の処理の流れを示すタイミングチャートである。
【０１７８】
図示のように、１回のライブビュー表示期間Ｔｓにおいて、時間が経過するほど、表示輝度値ＤＢが増加するようになっている。
【０１７９】
なお、図１２および図１３に示した例においては、ライブビュー表示期間Ｔｓの開始時点における表示輝度値ＤＢを基準表示輝度値Ｂ０に一致させるようにしているが、１回のライブビュー表示期間Ｔｓにおける表示輝度値ＤＢの時間平均が基準表示輝度値Ｂ０よりも大きくなれば表示が明るくなったと認識されるために、これに限定されるものではない。
【０１８０】
その後、上述したステップＳ１９の処理を行って、ステップＳ１９においてスルー画撮影期間が終了していないと判定された場合にはステップＳ１５へ戻り、スルー画撮影期間が終了したと判定された場合には図３の処理にリターンする。
【０１８１】
このような実施形態３によれば、上述した実施形態１とほぼ同様の効果を奏することができる。
【０１８２】
また、黒画像からライブビュー画像に切り替わる際に、ライブビュー画像の輝度が高いと眩しく感じる場合があるが、本実施形態３ではライブビュー表示経過時間ｔが増加するに従って、通常の表示輝度値である基準表示輝度値Ｂ０に対する比が大きくなるように連写中表示輝度値Ｂを算出しているために、１回のライブビュー表示期間Ｔｓが開始された時点の表示輝度値ＤＢが抑制され、こうした眩しさを軽減することができる。
【０１８３】
さらに、本実施形態３によれば、１回のライブビュー表示期間Ｔｓが終了する直前の表示輝度値ＤＢが高いために、ライブビュー画像から黒画像に切り替わる際のコントラストが高くなり、人間の脳内における動きの補間効果をより強めることができる。これにより、被写体の動きがより滑らかであると感じるようにすることができる。
【０１８４】
なお、上述した各部は、回路として構成されていてもよい。そして、任意の回路は、同一の機能を果たすことができれば、単一の回路として実装されていてもよいし、複数の回路を組み合わせたものとして実装されていても構わない。さらに、任意の回路は、目的とする機能を果たすための専用回路として構成されるに限るものではなく、汎用回路に処理プログラムを実行させることで目的とする機能を果たす構成であっても構わない。
【０１８５】
また、上述では主として撮像装置について説明したが、撮像装置と同様の作用を行う撮像方法であってもよいし、コンピュータに撮像装置と同様の処理を行わせるための処理プログラム、該処理プログラムを記録するコンピュータにより読み取りできる一時的でない記録媒体、等であっても構わない。
【０１８６】
さらに、本発明は上述した実施形態そのままに限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化することができる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明の態様を形成することができる。例えば、実施形態に示される全構成要素から幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。このように、発明の主旨を逸脱しない範囲内において種々の変形や応用をすることができることは勿論である。
【符号の説明】
【０１８７】
１…撮像装置
２…撮像部
３…表示輝度変更部
４…表示部
１０…交換式レンズ
１１…レンズ
１２…絞り
１３…ドライバ
１４…フラッシュメモリ
１５…マイクロコンピュータ（レンズ側コンピュータ）
２０…インタフェース（Ｉ／Ｆ）
３０…カメラ本体
３１…メカニカルシャッタ
３２…撮像素子
３３…アナログ処理部
３４…Ａ／Ｄ変換部
３５…バス
３６…ＳＤＲＡＭ
３７…画像処理部
３８…ＡＥ処理部
３９…ＡＦ処理部
４０…ＡＷＢ処理部
４１…ＪＰＥＧ処理部
４２…メモリＩ／Ｆ
４３…記録媒体
４４…ＬＣＤドライバ
４５…ＬＣＤ
４６…ＥＶＦドライバ
４７…ＥＶＦ
４８…ブレ検知ユニット
４９…操作部
５０…フラッシュメモリ
５１…マイクロコンピュータ（本体側コンピュータ）
６１…ＷＢ補正部
６２…同時化処理部
６３…階調処理部
６４…色再現処理部
６５…ＮＲ処理部
【図１】
2018006827.tif 000003
【図２】
2018006827.tif 000004
【図３】
2018006827.tif 000005
【図４】
2018006827.tif 000006
【図５】
2018006827.tif 000007
【図６】
2018006827.tif 000008
【図７】
2018006827.tif 000009
【図８】
2018006827.tif 000010
【図９】
2018006827.tif 000011
【図１０】
2018006827.tif 000012
【図１１】
2018006827.tif 000013
【図１２】
2018006827.tif 000014
【図１３】
2018006827.tif 000015