(57)【要約】【課題】露光中に被写体画像を所望のタイミングで確認しながら撮像できるようにする。【解決手段】撮像装置は、被写体像の画像データを取得する第１の撮像センサーと、被写体像の画像データを取得する第２の撮像センサーと、前記第１の撮像センサーへ前記被写体像が露光されている間、前記第２の撮像センサーで取得された画像データを積算する画像処理部と、前記積算された画像データに基づいて、前記被写体像を表示する画像表示部と、を備える。【選択図】図２
2012253399.tif 000002
【特許請求の範囲】
【請求項１】
被写体像の画像データを取得する第１の撮像センサーと、
被写体像の画像データを取得する第２の撮像センサーと、
前記第１の撮像センサーへ前記被写体像が露光されている間、前記第２の撮像センサーで取得された画像データを積算する画像データ処理部と、
前記積算された画像データに基づいて、前記被写体像を表示する画像表示部と、
を備える、撮像装置。
【請求項２】
被写体像を前記第１の撮像センサー及び前記第２の撮像センサーの撮像面に結像する撮像光学系と、
前記撮像光学系を通過した光線を前記第１の撮像センサーと前記第２の撮像センサーへ分光する半透過鏡と、
を更に備える、請求項１に記載の撮像装置。
【請求項３】
前記画像処理部は、前記第１の撮像センサーから読み出した画像データを、前記第１の撮像センサーの読出周期内に積算された前記第２の撮像センサーの画像データと置き換える処理を行う、請求項１に記載の撮像装置。
【請求項４】
前記画像処理部は、前記第１の撮像センサーの読出周期が到来した時点で、前記第２の撮像センサーが取得した画像データをリセットする、請求項１に記載の撮像装置。
【請求項５】
前記第１の撮像センサーの画素数は、前記第２の撮像センサーの画素数よりも多い、請求項１に記載の撮像装置。
【請求項６】
前記第１の撮像センサーの画像データの読み出し周期は、前記第２の撮像センサーの画像データの読み出し周期よりも長い、請求項１に記載の撮像装置。
【請求項７】
第１の撮像センサーにより被写体像の画像データを取得することと、
第２の撮像センサーにより被写体像の画像データを取得することと、
前記第１の撮像センサーへ前記被写体像が露光されている間、前記第２の撮像センサーで取得された画像データを積算することと、
前記積算された画像データに基づいて、前記被写体像を表示することと、
を備える、撮像方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本開示は、撮像装置及び撮像方法に関する。
【背景技術】
【０００２】
従来から、撮影露光中に画像を確認する方法として、撮像センサー画像を周期的に読み出し、加算して表示装置で表示するという方法が知られている。例えば、下記の特許文献１には、長秒モニタリングモードを選択した場合に、メインセンサーの読み出しを通常の長秒露光から、複数回の読み出しを行って加算する方式に変更し、その画像を用いて表示、モニタリングを行うという方法が提案されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００５−１１７３９５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、上記従来の技術において、メインセンサーの露光時間は、最終的に記録される画像の画質に影響を与えるため、読出し周期を自由に設定することが困難である。例えば、短い周期で頻繁に画像を読み出して加算すると、回路のノイズが画像データに含まれ、画像のＳ／Ｎ比が低下してしまう。その一方、比較的長い周期で長時間露光を続けて画像を読み出すと、いわゆる長秒露光時のノイズが画像に含まれてしまい、画像に固定パターンノイズが目立つようになる問題が生じる。
【０００５】
このため、読み出しの周期は、回路のノイズと長秒露光時のノイズの双方が生じないように、限られた範囲の周期（数分程度）に設定しなければならず、読み出しの周期に制約が生じていた。
【０００６】
しかしながら、数分の周期でモニタリング画像を更新した場合、被写体に動きがある場合は、露光中に被写体の動きを確認することが困難となる。例えば、夜空の花火を撮影する場合、花火は発光してから数秒程度で消滅してしまうため、数分の周期で画像の読み出しを行う場合、花火撮影のように数秒単位で被写体の確認を要する撮影が出来なくなる。
【０００７】
また、記録画像の画質低下を容認して、撮像センサの読出し周期を短くした場合であっても、撮像センサは通常画素数が非常に多いため、頻繁に読出しを繰り返すことで、消費電力が増大してしまう問題がある。また、撮像センサは、画素数が多いため、読み出し周期を十分に小さくすることは困難である。従って、動きの大きな被写体の構図を短い周期で確認しながら撮影することには困難が伴う。
【０００８】
そこで、露光中に被写体画像を所望のタイミングで確認しながら撮像できるようにすることが求められていた。
【課題を解決するための手段】
【０００９】
本開示によれば、被写体像の画像データを取得する第１の撮像センサーと、被写体像の画像データを取得する第２の撮像センサーと、前記第１の撮像センサーへ前記被写体像が露光されている間、前記第２の撮像センサーで取得された画像データを積算する画像データ処理部と、前記積算された画像データに基づいて、前記被写体像を表示する画像表示部と、を備える、撮像装置が提供される。
【００１０】
また、本開示によれば、第１の撮像センサーにより被写体像の画像データを取得することと、第２の撮像センサーにより被写体像の画像データを取得することと、前記第１の撮像センサーへ前記被写体像が露光されている間、前記第２の撮像センサーで取得された画像データを積算することと、前記積算された画像データに基づいて、前記被写体像を表示することと、を備える、撮像方法が提供される。
【発明の効果】
【００１１】
以上説明したように本開示によれば、露光中に被写体画像を所望のタイミングで確認しながら撮像することができる。
【図面の簡単な説明】
【００１２】
【図１】図１は、第１の実施形態に係る撮像装置の構成例を示す模式図である。
【図２】撮像装置１００の構成を示す模式図である。
【図３】作業用メモリのバッファの構成を示す模式図である。
【図４】メイン撮像センサーとサブ撮像センサーの読出し周期を示すタイミングチャートである。
【図５】画像バッファ（２）に保存される画像データを示す模式図である。
【図６】第２の実施形態において、画像バッファ（４）に保存される画像データを示す模式図である。
【図７】メイン撮像センサーの読出し周期を６０秒、サブ撮像センサーの読出し周期を１１秒とした例を示すタイミングチャートである。
【図８】サブ撮像センサーから読み出した画像データを画像バッファ（１）に保存する処理を示すフローチャートである。
【図９】サブ撮像センサーから読み出した画像データを画像バッファ（１）に保存した後の処理を示すフローチャート
【図１０】メイン撮像センサーで撮像した画像をバッファ（３）へ転送する処理を示すフローチャートである。
【図１１】メイン撮像センサーから読み出した画像データを画像バッファ（３）に保存した後の処理を示すフローチャート
【図１２】サブ撮像センサーから読み出した画像データを画像バッファ（１）に保存する処理を示すフローチャートである。
【図１３】第２の実施形態において、メイン撮像センサーから読出した画像データをバッファ（４）で加算する処理を示すフローチャートである。
【発明を実施するための形態】
【００１３】
以下に添付図面を参照しながら、本開示の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００１４】
なお、説明は以下の順序で行うものとする。
＜１．第１の実施形態＞
［１．１．撮像装置の概略構成例］
［１．２．撮像装置の構成例］
［１．３．サブ撮像センサーの記録画像の処理について］
［１．４．メイン撮像センサーの記録画像の処理について］
［１．５．サブ撮像センサーによる処理フローについて］
［１．６．メイン撮像センサーによる処理フローについて］
＜２．第２の実施形態＞
［２．１．第２の実施形態の処理について］
［２．２．メイン撮像センサーの読出し周期が、サブ撮像センサーの読出し周期の整数倍である場合について］
［２．３．第２の実施形態の処理フローについて］
【００１５】
＜１．第１の実施形態＞
［１．１．撮像装置の概略構成例］
まず、図１を参照して、本開示の第１の実施形態に係る撮像装置１００の概略構成について説明する。図１は、第１の実施形態に係る撮像装置１００の構成例を示す模式図である。図１に示すように、撮像装置１００は、メイン撮像センサー１０２、サブ撮像センサー１０４、ペリクルミラー（半透過鏡）１０６、撮像レンズ１０８、ＬＣＤ１３４、ＥＶＦ１３６を備える。
【００１６】
被写体側から撮像レンズ１０８を通して入ってきた光は、ペリクルミラー１０６によって分光され、メイン撮像センサー１０２とサブ撮像センサー１０４のそれぞれに結像される。メイン撮像センサー１０２は、主に最終的に記録する静止画を撮影するために使用し、サブ撮像センサー１０４よりも画素数がより多いものを使用する。これ対して、サブ撮像センサー１０４は、主にライブビュー画像の撮影や動画撮影に使用し、メイン撮像センサー１０２よりも画素数が小さいものを使用する。これにより、サブ撮像センサー１０４において、メイン撮像センサー１０２の読出し周期よりも早い周期のモニタリング周期を設定できる。
【００１７】
撮像装置１００は、画像表示部としてＥＶＦ１１２とＬＣＤ１１０を備えており、双方の画像表示部で画像の確認が可能である。なお、画像表示部として、ＥＶＦ１１２とＬＣＤ１１０の一方を備えるものであってもよい。
【００１８】
以上のように、本実施形態に係る撮像装置１００は、メイン撮像センサー１０２とサブ撮像センサー１０４の２つの撮像センサーを備えている。このため、メイン撮像センサー１０２で撮像した高画質の撮像画像の記録しながら、サブ撮像センサー１０４で撮像した画像をＥＶＦ１１２又はＬＣＤ１１０に表示することができる。これにより、長秒露光の際に、被写体の構図、明るさ等を確認しながら、所望の期間だけ露光を行うことが可能となる。
【００１９】
［１．２．撮像装置の構成例］
次に、本実施形態に係る撮像装置１００の構成例について説明する。図２は、撮像装置１００の構成を示す模式図である。図２に示すように、撮像装置１００は、図１に示した各構成要素の他に、画像信号処理部１１０、絞り制御部１１２、絞り１１３、メカシャッター制御回路１１４、メカシャッター１０５、シャッターボタン１１６、操作部１１８、ＣＰＵ１２０を有する。また、撮像装置１００は、ＲＯＭ１２２、作業用メモリ１２４、メディアコントローラ１２６、表示用メモリ１２８、ＬＣＤドライバ１３０、ＥＶＦドライバー１３２、画像表示用ＬＣＤ１３４、画像表示用ＥＶＦ１３６を備える。上述したように、撮像装置１００の画像表示部は、画像表示用ＬＣＤ１３４または画像表示用ＥＶＦ１３６から構成される。また、メディアコントローラ１２６には、外部から記録メディア２００が装着される。
【００２０】
図２に示す構成において、操作部１１８にてバルブ（ＢＵＬＢ）撮影の撮影モードと、モニタリング間隔(例えば１０秒)を設定し、シャッターボタン１１６を押すことで撮影が開始される。撮影が開始されると、メカシャッター制御回路１１４により、メカシャッター１０５が開いた状態に制御される。これにより、撮像レンズ１０８を通して入ってきた光がメイン撮像センサー１０２、サブ撮像センサー１０４のそれぞれに結像され、各センサーにおいて露光が開始される。
【００２１】
［１．３．サブ撮像センサーの記録画像の処理について］
サブ撮像センサー１０４は、操作部１１８にて設定されたモニタリング間隔の時間が経過すると露光を終了し読み出しを行う。なお、上述したように、モニタリング間隔は、一例として１０秒とする。サブ撮像センサー１０４にて光電変換され、Ａ／Ｄ変換されてデジタル化されたデータは、画像信号処理部１１０にて欠陥画素補正、ゲイン補正、ホワイトバランス補正などが行われた後、一旦作業用メモリ１２４の画像バッファ（１）１５０に保存される。
【００２２】
図３は、作業用メモリ１２４のバッファの構成を示す模式図である。図３に示すように、作業用メモリ１２４は、画像バッファ（１）１５０、画像バッファ（２）１５２、画像バッファ（３）１５３、画像バッファ（４）１５４、画像バッファ（５）１５５、を有して構成される。
【００２３】
画像バッファ（１）１５０と画像バッファ（２）１５２は、サブ撮像センサー１０４で撮像された画像データを保存する。先ず、１回目のモニタリング期間の間、サブ撮像センサー１０４で撮像された画像データは、先ず、画像バッファ（１）１５０に保存される。
【００２４】
その後、予め０値が書き込まれた画像バッファ（２）１５２と、撮影画像が保存されている画像バッファ（１）１５０の双方の画像データを読出し、画像信号処理部１１０にて両者を加算した後、画像バッファ（２）１５２に上書き保存を行う。この処理をモニタリング期間毎に行うことで、画像バッファ（２）１５２には、モニタリング期間毎の画素値を合計した値が保存されていく。
【００２５】
その後、作業用メモリ１２４の画像バッファ（２）１５２から画像データを読出し、読み出した画像データを画像信号処理部１１０にて、ＲＧＢ→ＹＣＣ変換処理、ガンマ補正処理など、表示するために適した処理を行った後、表示用メモリ１２８に保存される。そして、ＬＣＤドライバ１３０とＥＶＦドライバ１３２を経由して、画像表示用ＬＣＤ１３４と画像表示用ＥＶＦ１３６にそれぞれ画像が表示される。ＬＣＤ１３４とＥＶＦ１３６どちらを選択して表示するか、または両方に表示するかは、操作部１１８にてユーザが設定可能である。
【００２６】
２回目以降のモニタリング期間の撮影も、画像バッファ（１）１５０と撮影画像が保存されている画像バッファ（２）１５２の画像を読出し、画像信号処理部１１０にて加算した後、画像バッファ（２）１５２に上書き保存を行う動作を繰り返して処理を行う。
【００２７】
その後の処理も、前回の処理と同様に、ＲＧＢ→ＹＣＣ変換、ガンマ補正など表示に適した補正が行われた後、作業用メモリ１２４の画像バッファ（２）１５２から画像を読出し、画像信号処理部１１０にてＲＧＢ→ＹＣＣ変換、ガンマ補正など表示に適した処理が行われる。その後、表示用メモリ１２８に保存され、ドライバ（ＬＣＤドライバ１３０、ＥＶＦドライバー１３２）を経由して画像表示部（ＬＣＤ１３４、ＥＶＦ１３６）に表示される。
【００２８】
［１．４．メイン撮像センサーの記録画像の処理について］
メイン撮像センサー１０２は、シャッターボタン１１６が押されて撮影が開始されると同時に露光を開始するが、長秒時ノイズ等の影響を抑えるために、撮影終了時まで露光するのではなく、ある一定時間（ここでは１分とする）だけ経過すると露光を終了し、読み出しを行う。その後、再度露光を開始し、一定時間経過後に露光を終了して読み出すという動作を繰り返す。
【００２９】
換言すれば、メイン撮像センサー１０２の記録画像の処理では、１分間の露光の撮影を繰り返し、その画像データを加算して得られるデータを記録する処理を行う。例えば、露光時間が５分２０秒の撮影の場合、最終的に記録される画像は、１分間の露光による画像５枚と２０秒間の露光による最後の画像の１枚のデータを加算した画像になる。
【００３０】
具体的には、メイン撮像センサー１０２は、露光開始から１分が経過すると、露光を終了し、露光により得られた画像データの読み出しを行う。メイン撮像センサー１０２にて光電変換、Ａ／Ｄ変換され、デジタル化されたデータは、画像信号処理部１１０にて欠陥画素補正、ゲイン補正、ホワイトバランス補正などが行われた後、一旦作業用メモリ１２４の画像バッファ（３）１５３に保存される。
【００３１】
そして、初期値として予め０値を書き込んだ画像バッファ（４）１５４と、バッファ（３）１５３の画像を読出し、画像信号処理部にて両者を加算した後、画像バッファ（４）１５４に上書き保存を行う。その後は、１分が経過する毎に同様の処理を繰り返す。これにより、画像バッファ（４）１５４には、１分毎の画素値を合計した値が保存されていく。
【００３２】
次に、撮影終了時の処理について説明する。撮影者によってシャッターボタン１１６の押し下げが解除されると、メイン撮像センサー１０２は露光を終了し、前回までの撮影と同様に、前回の読み出し後から露光終了までに露光された画像データが画像バッファ（３）１５３に保存される。そして、画像バッファ（３）１５３に保存した画像データを、前回までの露光による加算された画像が保存されている画像バッファ（４）１５４の画像データに加算した後、画像バッファ（４）１５４に上書き保存を行う。
【００３３】
その後、画像バッファ（４）１５４から画像データが読み出され、読み出された画像データは、画像信号処理部１１０にて圧縮処理など記録に適した処理が行われ、作業用メモリ１２４の画像バッファ（５）１５５に保存される。その後、画像バッファ（５）１５５に保存された画像データは、メディアコントローラ１２４を通じて記録メディア２００に記録される。
【００３４】
図４は、メイン撮像センサー１０２とサブ撮像センサー１０４の読出し周期を示すタイミングチャートである。図４に示すように、メイン撮像センサー１０２は６０秒間隔で読出しが行われる。シャッターボタン１１６をオンにした後、時刻ｔ６で最初の読出しが行われ、画像データ（画像Ａ）が読み出される。その後、時刻ｔ１２で画像データ（画像Ｂ）が読み出され、時刻ｔ１８で画像データ（画像Ｃ）が読み出される。画像Ａ、画像Ｂ、画像Ｃ、・・・は、画像バッファ（４）１５４内で加算されていく。
【００３５】
一方、図４に示すように、サブ撮像センサー１０４は１０秒間隔で読出しが行われる。シャッターボタン１１６をオンにした後、時刻ｔ１で最初の読出しが行われ、画像データ（画像１）が読み出される。その後、時刻ｔ２で画像データ（画像２）が読み出され、時刻ｔ３で画像データ（画像３）が読み出される。画像１、画像２、画像３、・・・は、後述する処理により、画像バッファ（２）１５２内で加算されていく。
【００３６】
図５は、画像バッファ（２）１５２に保存される画像データを示す模式図である。画像バッファ（２）１５２には、画像データとして、画像１、画像１＋２、画像１＋２＋３・・・が１０秒毎に順次保存され、画像表示部に表示されていく。図４に示すタイミング（時刻ｔ１９とｔ２０の間）でシャッターボタン１１６がオフになった時点では、画像バッファ（２）１５２に画像１＋２＋・・・＋１９が保存され、画像表示部にモニタリング表示されることとなる。なお、以上のような画像データの処理は、ＣＰＵ１２０がＲＯＭ１２２に記憶されたプログラムを実行することによって行われる。以下に説明する図８〜図１３に示す処理についても同様に、ＣＰＵ１２０がＲＯＭ１２２に記憶されたプログラムを実行することによって行われる。
【００３７】
［１．５．サブ撮像センサーによる処理フローについて］
次に、第１の実施形態に係る処理について説明する。図８は、サブ撮像センサー１０４から読み出した画像データを画像バッファ（１）１５０に保存する処理を示すフローチャートである。先ず、ステップＳ１０では、シャッター１１６がオンになったか否かを判定し、オンになった場合はステップＳ１２へ進む。ステップＳ１２では、サブ撮像センサー１０４の露光を開始する。
【００３８】
次のステップＳ１４では、シャッターボタン１１６がオフになったか否かを判定する。シャッターボタン１１６がオフになっていない場合は、ステップＳ１６へ進む。ステップＳ１６では、モニタリング間隔が経過したか否かを判定し、モニタリング間隔が経過した場合はステップＳ１８へ進む。ステップＳ１８ではサブ撮像センサー１０４の露光を終了し、ステップＳ１９ではサブ撮像センサー１０４から読み出した画像データを画像バッファ（１）１５０へ転送する。これにより、サブ撮像センサー１０４による１回目のモニタリング周期の露光による画像データ（画像１）が画像バッファ（１）１５０へ転送される。
【００３９】
ステップＳ１９の後はステップＳ１０へ戻り、以降の処理が繰り返し行われる。これにより、画像１、画像２・・・が順次画像バッファ（１）１５０へ転送される。
【００４０】
ステップＳ１４において、シャッターボタン１１６がオフになった場合は、ステップＳ１８へ進む。ステップＳ１８では、モニタリング間隔が経過したか否かに関わらず、サブ撮像センサー１０４の露光を終了し、ステップＳ１９ではサブ撮像センサー１０４から読み出した画像データを画像バッファ（１）１５０へ転送する。
【００４１】
その後、ステップＳ１９からステップＳ１０へ戻った際には、シャッターボタン１１６がオフであるため、ステップＳ１２以降の処理は行われずに待機する。以上により、シャッターボタン１１６のオンからオフまでに読み出された画像データを順次に画像バッファ（１）１５０へ転送することができる。
【００４２】
図９は、サブ撮像センサー１０４から読み出した画像データを画像バッファ（１）１５０に保存した後の処理を示すフローチャートであって、画像バッファ（２）１５２で画像を加算していく処理を示している。先ず、ステップＳ２０では、サブ撮像センサー１０４による１回目の露光であるか否かを判定し、１回目の露光の場合はステップＳ２２へ進み、画像バッファ（２）１５２を初期化する。すなわち、ステップＳ２２では、画像バッファ（２）１５２に画像データが“０”であることを示すオール０を書き込む。
【００４３】
ステップＳ２２の後はステップＳ２４へ進み、サブ画像センサー１０２から画像バッファ（１）１５０への画像データの転送が終了したか否かを判定し、終了した場合はステップＳ２６へ進む。ステップＳ２６では、画像バッファ（２）１５２の画像データと画像バッファ（１）１５０の画像データを加算し、画像バッファ（２）１５２へ上書きする。１回目の露光の場合、画像１とオール０を加算するため、加算した値は画像１となり、画像１が、画像バッファ（２）１５２へ上書きされる。
【００４４】
次に、ステップＳ２８では、画像バッファ（２）１５２に保存されている画像データを画像信号処理部１１０を介して表示用メモリ１２８へ転送する。次のステップＳ２９では、表示用メモリ１２８の画像をＥＶＦドライバ１３２またはＬＣＤドライバ１３０を介して画像表示部へ送り、画像を表示する。
【００４５】
また、ステップＳ２４で画像バッファ（１）１５０への画像転送が完了していない場合は、ステップＳ２４で待機する。
【００４６】
以上のように、図８及び図９の処理によれば、サブ画像センサー１０４から読み出した画像１、画像２・・・を、順次に加算していくことができる。なお、画像バッファ（１）１５０のデータは、次にサブ画像センサー１０４から転送されてきた画像データによって上書きされる。
【００４７】
［１．６．メイン撮像センサーによる処理フローについて］
次に、メイン撮像センサー１０２による処理について説明する。図１０は、メイン撮像センサー１０２で撮像した画像を画像バッファ（３）１５３へ転送する処理を示している。先ず、ステップＳ３０では、シャッターボタン１１６がオンになったか否かを判定し、オンになった場合はステップＳ３２へ進む。ステップＳ３２では、メイン撮像センサー１０２の露光を開始する。
【００４８】
次のステップＳ３４では、シャッターボタン１１６がオフになったか否かを判定する。シャッターボタン１１６がオフになっていない場合は、ステップＳ３６へ進む。ステップＳ３６では、メイン撮像センサー１０２の読出周期の間隔が経過したか否かを判定し、読出周期が経過した場合はステップＳ３８へ進む。ステップＳ３８では、メイン撮像センサー１０２の露光を終了し、ステップＳ３９ではメイン撮像センサー１０２から読み出した画像データを画像バッファ（３）１５３へ転送する。これにより、メイン撮像センサー１０２による１回目の露光による画像データ（画像Ａ）が画像バッファ（３）１５３へ転送される。
【００４９】
ステップＳ３９の後はステップＳ３０へ戻り、以降の処理が繰り返し行われる。これにより、画像Ａ、画像Ｂ・・・が順次画像バッファ（３）１５３へ転送される。
【００５０】
ステップＳ３４において、シャッターボタン１１６がオフになった場合は、ステップＳ３８へ進む。ステップＳ３８では、読出周期間隔が経過したか否かに関わらず、メイン撮像センサー１０２の露光を終了し、ステップＳ３９ではメイン撮像センサー１０２から読み出した画像データを画像バッファ（３）１５３へ転送する。
【００５１】
その後、ステップＳ３９からステップＳ３０へ戻った際には、シャッターボタン１１６がオフであるため、ステップＳ３２以降の処理は行われずに待機する。以上により、シャッターボタン１１６のオンからオフまでにメイン撮像センサー１０２から読み出された画像データを順次に画像バッファ（３）１５３へ転送することができる。
【００５２】
図１１は、メイン撮像センサー１０２から読み出した画像データを画像バッファ（３）１５３に保存した後の処理を示すフローチャートであって、画像バッファ（４）１５４で画像を加算していく処理を示している。先ず、ステップＳ４０では、メイン撮像センサー１０２による１回目の露光であるか否かを判定し、１回目の露光の場合はステップＳ４２へ進み、画像バッファ（４）１５４を初期化する。すなわち、ステップＳ４２では、画像バッファ（４）１５４に画像データが“０”であることを示すオール０を書き込む。
【００５３】
ステップＳ４２の後はステップＳ４４へ進み、メイン撮像センサー１０２から画像バッファ（３）１５３への画像データの転送が終了したか否かを判定し、終了した場合はステップＳ４６へ進む。ステップＳ４６では、画像バッファ（４）１５４の画像データと画像バッファ（３）１５３の画像データを加算し、画像バッファ（４）１５４へ上書きする。１回目の露光の場合、画像Ａとオール０を加算するため、加算した値は画像Ａとなり、画像Ａが、画像バッファ（４）１５４へ上書きされる。
【００５４】
次に、ステップＳ４８では、画像バッファ（４）１５４に保存されている画像データを、画像信号処理部１１０を介して画像バッファ（５）１５５へ転送する。次のステップＳ４９では、メディアコントローラ１２６を通じて、画像バッファ（５）１５５の画像データを記録メディア２００に記録する。ステップＳ４９の後はステップＳ４０へ戻り、以降の処理を繰り返す。
【００５５】
また、ステップＳ４４で画像バッファ（３）１５３への画像転送が完了していない場合は、ステップＳ４４で待機する。
【００５６】
以上のように、図１０及び図１１の処理によれば、メイン画像センサー１０２から読み出した画像Ａ、画像Ｂ・・・を、順次に加算していくことができる。なお、画像バッファ（３）１５３のデータは、次に転送されてきた画像データによって上書きされる。
【００５７】
以上説明したように第１の実施形態によれば、メイン撮像センサー１０２で撮像している最中に、サブ撮像センサー１０４で撮像した画像を画像表示部へ表示することができる。従って、ユーザは、長秒時露光の場合等において、最適な構図となるタイミング、最適な露光量となるタイミングを画像表示部のモニタリング画像から判別することができ、所望のタイミングで露光を終了させることが可能となる。
【００５８】
また、記録される画像の画質を落とすことなく自由にモニタリング更新周期を設定することが可能となる。また、同等のモニタリング画像の更新レートであれば、メインセンサーのみを使用したモニタリングよりも消費電力を抑えることができる。また、逆に同等の消費電力なら画像の更新レートを上げる事ができる。
【００５９】
また、画素数の少ないサブ撮像センサー１０４の画像データをモニタリング表示用に使用するため、メイン撮像センサー１０２の画像をＬＣＤ表示用に間引く等の処理が不要になる。従って、画像処理に要する消費電力を低減することが可能となる。
【００６０】
＜２．第２の実施形態＞
［２．１．第２の実施形態の処理について］
次に、本発明の第２の実施形態について説明する。第１の実施形態では、モニタリング画像として、サブ撮像センサー１０４にて撮影された画像データのみを加算して表示している。第２の実施形態では、サブ撮像センサー１０４よりも長い周期で定期的に読み出されるメイン撮像センサー１０２の画像データもモニタリング画像として使用する。これにより、モニタリング画像を最終的に記録される画像の画質により近づけることができる。
【００６１】
図３に示す画像バッファ（１）１５０、画像バッファ（２）１５２では、サブ撮像センサー１０４で撮像された画像が１０秒毎に更新される。また、バッファ（３）１５３、画像バッファ（４）１５４には、メイン撮像センサー１０２の撮影画像が１分毎に更新される。ここまでの処理は第１の実施形態と同様である。
【００６２】
第２の実施形態では、メイン撮像センサー１０２の加算画像をバッファ（４）１５４に書き込む際に、画像信号処理部１１０にてサブ撮像センサー１０４と同じサイズに縮小し、縮小画像をバッファ（２）１５２に上書きする。
【００６３】
図６は、第２の実施形態において、画像バッファ（４）１５４に保存される画像データを示す模式図である。第２の実施形態では、時刻５までは第１の実施形態と同様に画像バッファ（２）１５２には、画像データとして画像１、画像１＋２、画像１＋２＋３・・・が順次に保存されていく。時刻６でメイン撮像センサー１０２の画像が撮影されると、それまでのサブ撮像センサー１０４の加算画像（画像１＋２＋３＋４＋５）がメイン撮像センサー１０２から読み出された画像Ａを表示用サイズに縮小した縮小画像Ａに書き換えられる。
【００６４】
次の時刻７では縮小画像Ａに画像７が加算され、次の時刻８では更に画像８が加算される。以降、同様にして、時刻１２でメイン撮像センサー１０２の画像が撮影されると、画像バッファ（２）１５２に保存されているサブ撮像センサー１０４の加算画像（画像７＋８＋９＋１０＋１１）がメイン撮像センサー１０２から読み出された画像Ｂの縮小画像Ｂに書き換えられる。
【００６５】
以降、同様の処理を行い、ｔ１９でシャッターボタンがＯＦＦされた時点では、画像Ａ＋Ｂ＋Ｃ＋画像１９の画像データが、画像表示部にモニタリング表示される。
【００６６】
［２．２．メイン撮像センサーの読出し周期が、サブ撮像センサーの読出し周期の整数倍である場合について］
上述した例では、メイン撮像センサー１０２の読出し周期がサブ撮像センサー１０４の読出し周期で割り切れる場合を示している。つまり、メイン撮像センサー１０２の読出し周期が、サブ撮像センサー１０４の読出し周期の整数倍である場合を示している。
【００６７】
メイン撮像センサー１０２の読出し周期がサブ撮像センサー１０４の読出し周期で割り切れない場合は、メイン撮像センサー１０２の露光終了時刻にサブ撮像センサー１０４の露光を終了させて、再度露光を開始させる処理を行う。つまり、この場合は、メイン撮像センサー１０２の読出し周期が到来すると、サブ撮像センサー１０４の画像データをリセットする処理を行う。
【００６８】
具体的に説明すると、図７では、メイン撮像センサー１０２の読出し周期を６０秒、サブ撮像センサー１０４の読出し周期を１１秒とした例を示している。この場合、シャッターオンから６６秒の時点で画像Ａ＋６の画像を表示すると、画像Ａは、シャッターボタンＯＮから６０秒間の露光の画像であり、画像６はｔ５（シャッターオンから５５秒）からｔ６(シャッターオンから６６秒)までの１１秒間の露光による画像である。このため、画像Ａと画像６を足し合わせると、実際よりも露光量が多くなり、不具合が生じる。
【００６９】
これを防ぐため、メイン撮像センサー１０２で画像Ａを読出した時刻ｔＡにて、画像６を露光中のサブ撮像センサー１０４をリセットし、サブ撮像センサー１０４は、再度ｔＡ時刻から露光を開始し、ｔＡからｔＢまでの６秒間露光した画像を画像６とする。このような処理を行うことで、メイン撮像センサー１０２の読み出し周期がサブ撮像センサー１０４の整数倍でない場合であっても、適正なモニタリング映像を表示することが可能となる。
【００７０】
［２．３．第２の実施形態の処理フローについて］
次に、第２の実施形態に係る処理について説明する。図１２は、サブ撮像センサー１０４から読み出した画像データを画像バッファ（１）１５０に保存する処理を示すフローチャートである。図１２において、ステップＳ１０〜Ｓ１９の処理は、図８の第１の実施形態と同様である。図１２では、ステップＳ１４の後、ステップＳ５０において、メイン撮像センサー１０２の露光が終了したか否かが判定される。ステップＳ５０でメイン撮像センサー１０２の露光が終了した場合は、ステップＳ５２へ進み、サブ撮像センサー１０４の露光が終了する。その後、ステップＳ５４では、サブ撮像センサー１０４の露光を再開する。これにより、図７の時刻ｔＡなど、メイン撮像センサー１０２の読出周期が到来して露光が終了するタイミングにおいて、サブ撮像センサー１０４の露光をリセットすることができる。
【００７１】
なお、画像バッファ（２）１５２にて画像データを加算する処理は、図９と同様である。
【００７２】
図１３は、第２の実施形態において、メイン撮像センサー１０２から読出した画像データを画像バッファ（４）１５４で加算する処理を示すフローチャートである。第２の実施形態において、メイン撮像センサー１０２から読出した画像データをバッファ（３）１５３に転送する処理は、第１の実施形態で説明した図１０の処理と同様である。
【００７３】
第２の実施形態の図１３の処理では、図１１のステップＳ４６の代わりに、ステップＳ６０の処理を行う。ステップＳ６０では、画像バッファ（４）１５４の画像データと画像バッファ（３）１５３の画像データを加算し、画像バッファ（４）１５４へ上書きすると同時に、加算して得られた画像データの縮小画像を画像バッファ（２）１５２へ上書きする。他のステップの処理は、図１１と同様である。
【００７４】
以上により、図７の時刻ｔ６、時刻ｔ１２など、メイン撮像センサー１０２の読出周期において、画像バッファ（２）１５２に画像Ａ、画像Ｂ・・・のデータを書き込むことができる。
【００７５】
以上説明したように第２の実施形態によれば、メイン撮像センサー１０２の画像データもモニタリング画像として使用することができるため、モニタリング画像をより高画質にすることが可能となる。従って、サブ撮像センサー１０４の画像だけでなく、メイン撮像センサー１０２の画像を用いてモニタリングすることで、実際の撮影画像により近いモニタリングが可能となる
【００７６】
以上、添付図面を参照しながら本開示の好適な実施形態について詳細に説明したが、本開示の技術的範囲はかかる例に限定されない。本開示の技術分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本開示の技術的範囲に属するものと了解される。
【００７７】
なお、以下のような構成も本開示の技術的範囲に属する。
（１）被写体像の画像データを取得する第１の撮像センサーと、
被写体像の画像データを取得する第２の撮像センサーと、
前記第１の撮像センサーへ前記被写体像が露光されている間、前記第２の撮像センサーで取得された画像データを積算する画像データ処理部と、
前記積算された画像データに基づいて、前記被写体像を表示する画像表示部と、
を備える、撮像装置。
【００７８】
（２）被写体像を前記第１の撮像センサー及び前記第２の撮像センサーの撮像面に結像する撮像光学系と、
前記撮像光学系を通過した光線を前記第１の撮像センサーと前記第２の撮像センサーへ分光するペリクルミラーと、
を更に備える、前記（１）に記載の撮像装置。
【００７９】
（３）前記画像処理部は、前記第１の撮像センサーから読み出した画像データを、前記第１の撮像センサーの読出周期内に積算された前記第２の撮像センサーの画像データと置き換える処理を行う、前記（１）に記載の撮像装置。
【００８０】
（４）前記画像処理部は、前記第１の撮像センサーの読出周期が到来した時点で、前記第２の撮像センサーが取得した画像データをリセットする、前記（１）に記載の撮像装置。
【００８１】
（５）前記第１の撮像センサーの画素数は、前記第２の撮像センサーの画素数よりも多い、前記（１）に記載の撮像装置。
【００８２】
（６）前記第１の撮像センサーの画像データの読み出し周期は、前記第２の撮像センサーの画像データの読み出し周期よりも長い、前記（１）に記載の撮像装置。
【００８３】
（７）第１の撮像センサーにより被写体像の画像データを取得することと、
第２の撮像センサーにより被写体像の画像データを取得することと、
前記第１の撮像センサーへ前記被写体像が露光されている間、前記第２の撮像センサーで取得された画像データを積算することと、
前記積算された画像データに基づいて、前記被写体像を表示することと、
を備える、撮像方法。
【符号の説明】
【００８４】
１００    撮像装置
１０２    メイン撮像センサー
１０４    サブ撮像センサー
１１０    画像信号処理部
１３４    画像表示用ＬＣＤ
１３６    画像表示用ＥＶＦ
【図１】
2012253399.tif 000003
【図２】
2012253399.tif 000004
【図３】
2012253399.tif 000005
【図４】
2012253399.tif 000006
【図５】
2012253399.tif 000007
【図６】
2012253399.tif 000008
【図７】
2012253399.tif 000009
【図８】
2012253399.tif 000010
【図９】
2012253399.tif 000011
【図１０】
2012253399.tif 000012
【図１１】
2012253399.tif 000013
【図１２】
2012253399.tif 000014
【図１３】
2012253399.tif 000015