(57)【要約】【課題】メカシャッタと電子シャッタのメリットを生かしてバランスの良い、使いやすい撮像装置を構築する。【解決手段】所望の露出を得るための露光時間よりも短い露光時間で複数枚の画像の撮影を行ない、複数枚の画像を合成することにより所望の露出の画像を得るための撮像装置であって、被写体像を撮像する撮像素子であって、電子シャッタ動作を行なうことが可能な撮像素子と、撮像素子への入射光路を機械的に遮蔽及び開放可能なメカシャッタと、複数枚の画像の撮影時に起こると予想される像ブレの程度に基づいて、撮像素子の電子シャッタ動作により複数枚の画像の撮影を行なう電子シャッタモードか、メカシャッタの動作により複数枚の画像の撮影を行なうメカシャッタモードかを選択する選択部とを具備する。【選択図】      図５
2006345317.tif 000002
【特許請求の範囲】
【請求項１】
所望の露出を得るための露光時間よりも短い露光時間で複数枚の画像の撮影を行ない、該複数枚の画像を合成することにより前記所望の露出の画像を得るための撮像装置であって、
被写体像を撮像する撮像手段であって、電子シャッタ動作を行なうことが可能な撮像手段と、
前記撮像手段への入射光路を機械的に遮蔽及び開放可能なメカシャッタと、
前記複数枚の画像の撮影時に起こると予想される像ブレの程度に基づいて、前記撮像手段の電子シャッタ動作により前記複数枚の画像の撮影を行なう電子シャッタモードか、前記メカシャッタの動作により前記複数枚の画像の撮影を行なうメカシャッタモードかを選択する選択手段と、
を具備することを特徴とする撮像装置。
【請求項２】
撮影した前記複数枚の画像を合成して１枚の前記所望の露出の画像を生成する画像合成手段をさらに具備することを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記画像合成手段は、前記複数枚の画像間の構図のズレを補正するズレ補正部を備え、該ズレ補正部により補正された画像を合成することを特徴とする請求項２に記載の撮像装置。
【請求項４】
前記選択手段は、前記複数枚の画像の撮影時に起こると予想される像ブレの程度が少ないと予想される場合に、前記電子シャッタモードを選択することを特徴とする請求項１に記載の撮像装置。
【請求項５】
前記選択手段は、前記複数枚の画像の撮影時に起こる像ブレの程度を予想するパラメータである撮影レンズの焦点距離に基づいて、前記電子シャッターモードか、前記メカシャッターモードかを選択することを特徴とする請求項１に記載の撮像装置。
【請求項６】
前記選択手段は、前記撮影レンズの焦点距離が所定値よりも短い場合に、前記電子シャッタモードを選択することを特徴とする請求項５に記載の撮像装置。
【請求項７】
前記選択手段は、前記複数枚の画像の撮影時に起こる像ブレの程度を予想するパラメータである撮影時の露光時間に基づいて、前記電子シャッターモードか、前記メカシャッターモードかを選択することを特徴とする請求項１に記載の撮像装置。
【請求項８】
前記選択手段は、前記露光時間が所定値より長い場合に、前記電子シャッタモードを選択することを特徴とする請求項７に記載の撮像装置。
【請求項９】
前記選択手段は、前記複数枚の画像の撮影時に起こる像ブレの程度を予想するパラメータである被写体距離に基づいて、前記電子シャッターモードか、前記メカシャッターモードかを選択することを特徴とする請求項１に記載の撮像装置。
【請求項１０】
前記選択手段は、前記被写体距離が所定値より遠い場合に、前記電子シャッタモードを選択することを特徴とする請求項９に記載の撮像装置。
【請求項１１】
前記選択手段は、前記複数枚の画像の撮影時に起こる像ブレの程度を予想するパラメータである撮影レンズの撮影倍率に基づいて、前記電子シャッターモードか、前記メカシャッターモードかを選択することを特徴とする請求項１に記載の撮像装置。
【請求項１２】
前記選択手段は、前記撮影倍率が所定値より小さい場合に、前記電子シャッタモードを選択することを特徴とする請求項１１に記載の撮像装置。
【請求項１３】
所望の露出を得るための露光時間よりも短い露光時間で複数枚の画像の撮影を行ない、該複数枚の画像を合成することにより前記所望の露出の画像を得るための撮像装置であって、
被写体像を撮像する撮像手段であって、電子シャッタ動作を行なうことが可能な撮像手段と、
前記撮像手段への入射光路を機械的に遮蔽及び開放可能なメカシャッタと、
前記複数枚の画像の枚数に基づいて、前記撮像手段の電子シャッタ動作により前記複数枚の画像の撮影を行なう電子シャッタモードか、前記メカシャッタの動作により前記複数枚の画像の撮影を行なうメカシャッタモードかを選択する選択手段と、
を具備することを特徴とする撮像装置。
【請求項１４】
前記選択手段は、前記複数枚の画像の枚数が多い場合に、前記電子シャッタモードを選択することを特徴とする請求項１３に記載の撮像装置。
【請求項１５】
所望の露出を得るための露光時間よりも短い露光時間で複数枚の画像の撮影を行ない、該複数枚の画像を合成することにより前記所望の露出の画像を得るための撮像装置であって、
被写体像を撮像する撮像手段であって、電子シャッタ動作を行なうことが可能な撮像手段と、
前記撮像手段への入射光路を機械的に遮蔽及び開放可能なメカシャッタと、
前記撮像装置の電源状態に基づいて、前記撮像手段の電子シャッタ動作により前記複数枚の画像の撮影を行なう電子シャッタモードか、前記メカシャッタの動作により前記複数枚の画像の撮影を行なうメカシャッタモードかを選択する選択手段と、
を具備することを特徴とする撮像装置。
【請求項１６】
前記選択手段は、前記電源が所定の残容量より下回っている場合に、電子シャッタモードを選択することを特徴とする請求項１５に記載の撮像装置。
【請求項１７】
所望の露出を得るための露光時間よりも短い露光時間で複数枚の画像の撮影を行ない、該複数枚の画像を合成することにより前記所望の露出の画像を得るための撮像装置で、電子シャッタ動作を行なうことが可能な撮像手段と、前記撮像手段への入射光路を機械的に遮蔽及び開放可能なメカシャッタとを備える撮像装置を制御する方法であって、
前記複数枚の画像の撮影時に起こると予想される像ブレの程度に基づいて、前記撮像手段の電子シャッタ動作により前記複数枚の画像の撮影を行なう電子シャッタモードか、前記メカシャッタの動作により前記複数枚の画像の撮影を行なうメカシャッタモードかを選択する選択工程を具備することを特徴とする撮像装置の制御方法。
【請求項１８】
所望の露出を得るための露光時間よりも短い露光時間で複数枚の画像の撮影を行ない、該複数枚の画像を合成することにより前記所望の露出の画像を得るための撮像装置で、電子シャッタ動作を行なうことが可能な撮像手段と、前記撮像手段への入射光路を機械的に遮蔽及び開放可能なメカシャッタとを備える撮像装置を制御する方法であって、
前記複数枚の画像の枚数に基づいて、前記撮像手段の電子シャッタ動作により前記複数枚の画像の撮影を行なう電子シャッタモードか、前記メカシャッタの動作により前記複数枚の画像の撮影を行なうメカシャッタモードかを選択する選択工程を具備することを特徴とする撮像装置の制御方法。
【請求項１９】
所望の露出を得るための露光時間よりも短い露光時間で複数枚の画像の撮影を行ない、該複数枚の画像を合成することにより前記所望の露出の画像を得るための撮像装置で、電子シャッタ動作を行なうことが可能な撮像手段と、前記撮像手段への入射光路を機械的に遮蔽及び開放可能なメカシャッタとを備える撮像装置を制御する方法であって、
前記撮像装置の電源状態に基づいて、前記撮像手段の電子シャッタ動作により前記複数枚の画像の撮影を行なう電子シャッタモードか、前記メカシャッタの動作により前記複数枚の画像の撮影を行なうメカシャッタモードかを選択する選択工程を具備することを特徴とする撮像装置の制御方法。
【請求項２０】
請求項１７乃至１９のいずれか１項に記載の制御方法をコンピュータに実行させることを特徴とするプログラム。
【請求項２１】
請求項２０に記載のプログラムをコンピュータ読み取り可能に記憶したことを特徴とする記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置における手ブレを補正する技術に関するものである。
【背景技術】
【０００２】
現在のカメラは、露出決定やピント合わせ等の撮影にとって重要な作業は全て自動化され、カメラ操作に未熟なユーザでも撮影失敗を起こす可能性は非常に少なくなっている。
【０００３】
また、最近では、カメラに加わる手ブレを防ぐシステムも研究されており、撮影者の撮影ミスを誘発する要因は殆ど無くなってきている。
【０００４】
ここで、手ブレを防ぐ防振システムについて簡単に説明する。
【０００５】
撮影時のカメラの手ブレは、周波数として通常１Ｈｚ乃至１０Ｈｚの振動であるが、露光時点においてこのような手ブレを起こしていても像ブレの無い写真を撮影可能とするための基本的な考えとして、手ブレによるカメラの振動を検出し、この検出結果に応じて補正レンズを光軸と直交する面内で変位させる方法が知られている（光学防振システム）。
【０００６】
この場合、カメラブレが生じても像ブレが生じない写真を撮影するためには、第１にカメラの振動を正確に検出し、第２にカメラの振動による光軸変化を補正することが必要となる。
【０００７】
像ブレの補正は、原理的には、加速度計、振動ジャイロ、レーザージャイロ等により加速度、角加速度、角速度、角変位等を検出し、この検出結果に対して適宜演算処理する振動検出部をカメラに搭載することによって行うことができる。そして、振動検出部からのカメラブレの検出情報に基づき撮影光軸を偏心させる補正レンズ（補正光学部）を駆動することにより像ブレ補正が行われる。
【０００８】
一方、手ブレが生じない程度の露光時間で複数回撮影をくり返し、これらの撮影により得られた画像に対して画像のズレを修正しながら合成して長い露光時間の撮影画像（合成画像）を得る方法がある（特許文献１）。
【特許文献１】特開平０９−２６１５２６号号公報
【発明の開示】
【発明が解決しようとする課題】
【０００９】
最近のデジタルカメラは、銀塩コンパクトカメラに比べて小さくなってきており、特にＶＧＡクラスの撮像素子を持つカメラは携帯電子機器（例えば、携帯電話）に内蔵されるほど小型になってきている。
【００１０】
このような中で、上述した光学防振システムをカメラに搭載しようとすると、補正光学部をよりいっそう小型化する必要がある。
【００１１】
しかし、補正光学部は、補正レンズを支持し、これを手ブレに合わせて高精度且つ大きなストロークで駆動してゆく必要があるため、小型化には限度がある。
【００１２】
一方、別の防振システムとしての特許文献１に示すような電子防振システムでは、上述した光学防振システムのような専用の補正レンズが不要となるため、製品全体を小型にできるメリットがある。
【００１３】
デジタルカメラにおいては、例えば携帯電話に搭載されるカメラに多く見られるような撮像素子の電荷蓄積時間を制御する電子シャッタを用いた撮影方法と、デジタルカメラに多く見られるような撮像素子への入射光路を遮蔽／開放自在なメカシャッタを用いた撮影方法がある。
【００１４】
Ｃ−ＭＯＳ型の撮像素子を用いた電子シャッタについて以下に説明する。
【００１５】
図１２は撮像素子の構成を示すブロック図である。
【００１６】
図１２において４１は撮像素子の画素領域であり、複数の画素が２次元的に配列されている。
【００１７】
４２は読み出す画素行を順次選択するシフトレジスタ等の読み出し用垂直走査領域（Ｖｓ・ＳＲ）、４６は蓄積開始（シャッタ）用に画素行を順次選択するシフトレジスタ等のシャッタ用垂直走査領域（Ｖｃ・ＳＲ）であり、これらの垂直走査回路４２，４６の２つで電子シャッタ走査を行う。
【００１８】
４３は画素領域４１からのセンサ信号、ノイズ信号を記憶するメモリである。
【００１９】
また、４４はメモリ４３からセンサ信号、ノイズ信号を出力するため、画素行毎にメモリ４３を走査する水平走査回路、４５はセンサ信号からノイズ信号を減算して出力信号Ｖｏｕｔを出力する差動アンプである。
【００２０】
図１３は電子シャッター動作を説明するための図である。
【００２１】
図１３に示す様に垂直走査回路（Ｖｃ・ＳＲ）４６で選択された行から、垂直走査回路（Ｖｓ・ＳＲ）４２で選択された行までが露光する時間となり、蓄積時間となる。
【００２２】
図１４は撮像素子の画素領域における１画素を示す回路である。
【００２３】
ＰＤはフォトダイオードであり、フォトダイオードＰＤのカソード側からの信号を転送用トランジスタＭｔｘをオンして増幅用トランジスタＭｓｆから出力する。
【００２４】
また、ＭｒｅｓはフォトダイオードＰＤのリセットを行うリセット用トランジスタ、Ｍｓｅｌは画素からの信号を選択的に出力する選択用トランジスタである。
【００２５】
また、この１画素は、画素信号とノイズ信号を蓄積容量Ｃｓ，Ｃｎに転送するトランジスタＭｓ１１、Ｍｎ１１および蓄積容量Ｃｓ，Ｃｎおよび蓄積容量Ｃｓ，Ｃｎからの信号をそれぞれ水平出力線に画素信号Ｓｏｕｔ、ノイズ信号Ｎｏｕｔとして出力するトランジスタＭｓ２１，Ｍｎ２１から構成されている。
【００２６】
図１５は撮像素子の駆動タイミングを示すタイムチャートであり、選択用トランジスタＭｓｅｌを駆動するＰＳＥＬ、リセット用トランジスタＭｒｅｓを駆動するＰＲＥＳ、転送用トランジスタＭｔｘを駆動するＰＴＸ、転送用トランジスタＭｎ１１を駆動するＰＴＮ、転送用トランジスタＭｓ１１を駆動するＰＴＳのタイミングを表している。
【００２７】
ここで垂直走査回路（Ｖｃ・ＳＲ）４６で選択されるラインをシャッターライン、垂直走査回路（Ｖｓ・ＳＲ）４２で選択されるラインを読み出しラインという。
【００２８】
はじめに読み出しラインについて説明する。
【００２９】
時刻ｔ１においてＰＲＥＳをハイレベルにしてリセット用トランジスタＭｒｅｓがオンすることで増幅トランジスタＭｓｆのゲート部分に貯められている電荷のリセットを行う。
【００３０】
その後時刻ｔ２でＰＳＥＬをハイレベルとして選択用トランジスタＭｓｅｌがオンし、時刻ｔ３でＰＴＮをハイレベルとして転送用トランジスタＭｎ１１がオンすることで蓄積容量Ｃｎにリセット時における電荷を転送する（Ｎ読みという）。
【００３１】
時刻ｔ４でＰＴＸをハイレベルとし、転送用トランジスタＭＴＸがオンすると、それまでフォトダイオードＰＤに蓄積されていた信号電荷が転送され、更に時刻ｔ５でＰＴＳをハイレベルとし、転送用トランジスタＭｓ１１がオンすることで信号電荷を蓄積容量Ｃｓに蓄積する。（Ｓ読みという）
時刻ｔ６でＰＴＸとＰＲＥＳを同時にハイレベルとし、リセット用トランジスタＭｒｅｓ、転送用トランジスタＭｔｘを同時にオンすることでフォトダイオードＰＤのリセットを行う。
【００３２】
時刻ｔ７でＰＴＸをローレベルとして転送用トランジスタＭｔｘがオフしてフォトダイオードＰＤへの蓄積を終了する。
【００３３】
このようなタイムチャートによれば、図１２のブロックの画素領域４１において水平走査回路４４と垂直走査回路４６によってある任意の画素だけを選択して出力Ｖｏｕｔまで出力することが可能である。
【００３４】
読み出しラインに先立ってシャッターラインも同様に動作をする。
【００３５】
シャッターラインの垂直走査回路（Ｖｃ・ＳＲ）４６により選択されたラインの画素部はシャッターラインの動作パルスＰＲＥＳ、ＰＴＸ、ＰＴＮ、ＰＴＳにより読み出しラインと同様にＮ読み、Ｓ読みがなされた後に画素リセットされる。
【００３６】
但しＰＳＥＬはローレベルであり、図１４の選択トランジスタＭｓｅｌはオフしているために画素からのデータはメモリ４３内の蓄積容量Ｃｓ，Ｃｎには出力されない。
【００３７】
次いで、遅れて前述した読み出しラインの動作が行われ、画素データはそれぞれ蓄積容量Ｃｓ、Ｃｎに出力され、最終的に差動アンプ４５でセンサ信号からノイズ成分の差分（減算）を行い、Ｖｏｕｔとして出力される。
【００３８】
以上の様にシャッターライン動作における画素リセットから読み出しライン動作における転送までの時間が蓄積時間となり、適正露光量を調整するための蓄積時間もこのローリングシャッターを用いれば可能になる。
【００３９】
このような電子シャッタによる撮影方法では撮影時にメカシャッタの作動音がしないというメリットがあるが、Ｃ−ＭＯＳ型の撮像素子の場合には上述した図１３よりわかる様にリセット時間（シャッターライン動作時間）、読み出し時間（読み出しライン動作時間）が画面の上下ですこしずつずれて来るので撮影中における手ブレの影響が画面上下に影響してくるデメリットがある。
【００４０】
図１６はそのことを示す露光（蓄積）動作の概念図であり、横軸４７は読み出しタイミング（図１２の差動アンプ４５の出力をＡ／Ｄ変換してマイコンなどに取り込む時間）、縦軸４８は画面における各画素の縦方向の位置を示している。
【００４１】
シャッターラインの動作４１０と読み出しラインの動作４１１の間が露光（蓄積）時間４９となるが画面の上下において各画素の読み出し時間がずれることになる。
【００４２】
高画素の撮像素子の場合には、この画面上下における読み出し時間差が大きくなるため、それによる画質劣化が表れてくる。
【００４３】
例えば画面左右位置は同じで上下方向に２点４１３ａ、４１３ｂの被写体があった構図４１２を撮影した場合を考える。
【００４４】
このときに画面の矢印４１４の方向に大きなブレが生じた状態で撮影してしまうと、実際の画像においては被写体点４１３ｂは４１３ｃの位置にずれて撮影されてしまう（勿論、山や人物も歪む）。
【００４５】
高画素の撮像素子の場合には、この画面上下における読み出し時間差が大きくなるため、それによる画質劣化も大きくなり、又、ブレが大きいほど、或いは被写体の撮影中移動速度が大きいほどこの画質劣化は大きくなる。
【００４６】
一方メカシャッタによる撮影方法ではＣ−ＭＯＳの撮像素子の場合には露光（蓄積）時間をメカシャッタで区切ることができるので短い露光時間を作り出すことができ、上記の画像が歪む問題は起きない。
【００４７】
図１７はメカシャッタの露光（蓄積）動作の概念図であり、横軸４７は読み出しタイミング（図１２の差動アンプ４５の出力をＡ／Ｄ変換してマイコンなどに取り込む時間）、縦軸４８は画面における各画素の縦方向の位置を示している。
【００４８】
シャッターラインの動作４１０と読み出しラインの動作４１１の間にフォトダイオードは蓄積を行っているが、ハッチングしてある領域ではメカシャッタが撮像素子を遮光しているために、フォトダイオードには被写体像情報は蓄積されない。
【００４９】
そしてメカシャッタが開放（４１５ａはメカシャッタが開いたタイミング、４１５ｂはメカシャッタが閉じたタイミング）している期間が被写体情報をフォトダイオードが露光（蓄積）する時間４９となる。
【００５０】
このようにメカシャッタの動作が速い場合には画面の上下における撮影画像のずれはなくなる。
【００５１】
このようにメカシャッタでは像ブレ（手ブレや被写体ブレ（撮影中の被写体移動）の総称）の影響を少なくできるメリットがあるが、撮影時にシャッタ音がするので、複数枚を連写する場合にはメカシャッタの作動音が継続して不快である。通常の連写ではメカシャッタ音の継続は問題にはならないが、前述した特許文献１のように複数枚の画像から１枚の画像を合成する目的の場合には、ユーザーは実際には１枚の画像を得ることを考えているので連続するシャッタ音は不快である。
【００５２】
このように電子シャッタ撮影の場合には連続したシャッタ音もなく好感触の撮影が可能であり、且つメカシャッタが作動することによるブレの影響も排除できるメリットがあるが、像ブレ（手ブレや被写体ブレ（被写体の撮影中移動）の総称）を十分に抑えることが出来ない。
【００５３】
又、メカシャッタの場合には像ブレの影響はある程度排除できるが、連続したシャッタ音による不快感、メカシャッタ動作によるブレが問題になる。
【００５４】
そこで、本発明は上述した課題に鑑みてなされたものであり、その目的は、メカシャッタと電子シャッタのメリットを生かしてバランスの良い、使いやすい撮像装置を構築することである。 
【課題を解決するための手段】
【００５５】
上述した課題を解決し、目的を達成するために、本発明に係わる撮像装置は、所望の露出を得るための露光時間よりも短い露光時間で複数枚の画像の撮影を行ない、該複数枚の画像を合成することにより前記所望の露出の画像を得るための撮像装置であって、被写体像を撮像する撮像手段であって、電子シャッタ動作を行なうことが可能な撮像手段と、前記撮像手段への入射光路を機械的に遮蔽及び開放可能なメカシャッタと、前記複数枚の画像の撮影時に起こると予想される像ブレの程度に基づいて、前記撮像手段の電子シャッタ動作により前記複数枚の画像の撮影を行なう電子シャッタモードか、前記メカシャッタの動作により前記複数枚の画像の撮影を行なうメカシャッタモードかを選択する選択手段と、を具備することを特徴とする。
【００５６】
また、本発明に係わる撮像装置は、所望の露出を得るための露光時間よりも短い露光時間で複数枚の画像の撮影を行ない、該複数枚の画像を合成することにより前記所望の露出の画像を得るための撮像装置であって、被写体像を撮像する撮像手段であって、電子シャッタ動作を行なうことが可能な撮像手段と、前記撮像手段への入射光路を機械的に遮蔽及び開放可能なメカシャッタと、前記複数枚の画像の枚数に基づいて、前記撮像手段の電子シャッタ動作により前記複数枚の画像の撮影を行なう電子シャッタモードか、前記メカシャッタの動作により前記複数枚の画像の撮影を行なうメカシャッタモードかを選択する選択手段と、を具備することを特徴とする。
【００５７】
また、本発明に係わる撮像装置は、所望の露出を得るための露光時間よりも短い露光時間で複数枚の画像の撮影を行ない、該複数枚の画像を合成することにより前記所望の露出の画像を得るための撮像装置であって、被写体像を撮像する撮像手段であって、電子シャッタ動作を行なうことが可能な撮像手段と、前記撮像手段への入射光路を機械的に遮蔽及び開放可能なメカシャッタと、前記撮像装置の電源状態に基づいて、前記撮像手段の電子シャッタ動作により前記複数枚の画像の撮影を行なう電子シャッタモードか、前記メカシャッタの動作により前記複数枚の画像の撮影を行なうメカシャッタモードかを選択する選択手段と、を具備することを特徴とする。
【００５８】
また、本発明に係わる撮像装置の制御方法は、所望の露出を得るための露光時間よりも短い露光時間で複数枚の画像の撮影を行ない、該複数枚の画像を合成することにより前記所望の露出の画像を得るための撮像装置で、電子シャッタ動作を行なうことが可能な撮像手段と、前記撮像手段への入射光路を機械的に遮蔽及び開放可能なメカシャッタとを備える撮像装置を制御する方法であって、前記複数枚の画像の撮影時に起こると予想される像ブレの程度に基づいて、前記撮像手段の電子シャッタ動作により前記複数枚の画像の撮影を行なう電子シャッタモードか、前記メカシャッタの動作により前記複数枚の画像の撮影を行なうメカシャッタモードかを選択する選択工程を具備することを特徴とする。
【００５９】
また、本発明に係わる撮像装置の制御方法は、所望の露出を得るための露光時間よりも短い露光時間で複数枚の画像の撮影を行ない、該複数枚の画像を合成することにより前記所望の露出の画像を得るための撮像装置で、電子シャッタ動作を行なうことが可能な撮像手段と、前記撮像手段への入射光路を機械的に遮蔽及び開放可能なメカシャッタとを備える撮像装置を制御する方法であって、前記複数枚の画像の枚数に基づいて、前記撮像手段の電子シャッタ動作により前記複数枚の画像の撮影を行なう電子シャッタモードか、前記メカシャッタの動作により前記複数枚の画像の撮影を行なうメカシャッタモードかを選択する選択工程を具備することを特徴とする。
【００６０】
また、本発明に係わる撮像装置の制御方法は、所望の露出を得るための露光時間よりも短い露光時間で複数枚の画像の撮影を行ない、該複数枚の画像を合成することにより前記所望の露出の画像を得るための撮像装置で、電子シャッタ動作を行なうことが可能な撮像手段と、前記撮像手段への入射光路を機械的に遮蔽及び開放可能なメカシャッタとを備える撮像装置を制御する方法であって、前記撮像装置の電源状態に基づいて、前記撮像手段の電子シャッタ動作により前記複数枚の画像の撮影を行なう電子シャッタモードか、前記メカシャッタの動作により前記複数枚の画像の撮影を行なうメカシャッタモードかを選択する選択工程を具備することを特徴とする。
【００６１】
また、本発明に係わるプログラムは、上記の制御方法をコンピュータに実行させることを特徴とする。
【００６２】
また、本発明に係わる記憶媒体は、上記のプログラムをコンピュータ読み取り可能に記憶したことを特徴とする。
【発明の効果】
【００６３】
本発明によれば、メカシャッタと電子シャッタのメリットを生かしてバランスの良い、使いやすい撮像装置を構築することが可能となる。 
【発明を実施するための最良の形態】
【００６４】
以下、本発明の好適な実施形態について、図面を参照して詳細に説明する。
【００６５】
（第１の実施形態）
図１は、本発明の第１の実施形態に係わるカメラ（撮像装置）の構成を示した図である。
【００６６】
なお、以下の説明では、手ブレや被写体ブレ（撮影中の被写体移動）を総称して、像ブレと呼ぶことにする。
【００６７】
図１において、撮影レンズ１１ａからの入射光束（撮影光）は、絞り１３ａで光量制限されたのちに、シャッタ１２ａを通り撮像部１９に結像する。
【００６８】
撮像部１９は、Ｃ−ＭＯＳ型撮像素子やＣＣＤなどの半導体撮像素子からなる。
【００６９】
撮影レンズ１１ａは更に複数の光学レンズ群により構成され、これらのレンズ群のうち一部又は全部がＡＦ駆動モータ１４ａからの駆動力を受けて光軸１０上を移動し、所定の合焦位置に停止することで焦点調節を行う。
【００７０】
ＡＦ駆動モータ１４ａは焦点駆動部１４ｂからの駆動信号を受けることで駆動される。
【００７１】
また、撮影レンズ１１ａのうち一部の光学レンズ群は、ズーム駆動モータ１５ａからの駆動力を受けて光軸１０上を移動し、所定のズーム位置に停止することで撮影画角を変更する。ズーム駆動モータ１５ａは、ズーム駆動部１５ｂからの駆動信号を受けることで駆動される。
【００７２】
絞り１３ａは、複数の絞り羽根を有しており、これらの絞り羽根は、絞り駆動部１３ｂからの駆動力を受けることで作動して光通過口となる開口面積（絞り口径）を変化させる。
【００７３】
シャッタ１２ａは、複数のシャッタ羽根を有しており、これらのシャッタ羽根は、シャッタ駆動部１２ｂからの駆動力を受けることで光通過口となる開口部を開閉する。これにより、撮像部１９に入射する光束を制御する。
【００７４】
また、撮影時の条件（被写体輝度等）などに応じてストロボ１６ａは閃光駆動部１６ｂからの駆動信号を受けて駆動（発光）する。
【００７５】
さらに、撮影動作を撮影者に知らせるためにスピーカー１７ａが発音駆動部１７ｂからの駆動信号を受けて駆動（発音）する。
【００７６】
焦点駆動部１４ｂ、ズーム駆動部１５ｂ、絞り駆動部１３ｂ、シャッタ駆動部１２ｂ、閃光駆動部１６ｂ、発音駆動部１７ｂの駆動は、撮影制御部１８により制御されている。
【００７７】
撮影制御部１８には、レリーズ操作部１２ｃ、絞り操作部１３ｃ、ズーム操作部１５ｃ、閃光操作部１６ｃ及び後述する防振操作部１２０からの操作信号が入力されるようになっており、カメラの撮影状態に合わせて上記操作信号を各々焦点駆動部１４ｂ、ズーム駆動部１５ｂ、絞り駆動部１３ｂ、シャッタ駆動部１２ｂ、閃光駆動部１６ｂに与えて撮影条件を設定し、撮影を行うようにしている。
【００７８】
シャッタモード切換操作部１２ｄは前述したメカシャッタによる撮影か電子シャッタによる撮影かをユーザーが選択する操作部であり、
（１）カメラ自動選択
（２）電子シャッタ選択
（３）メカシャッタ選択
の３つのモードを撮影者が選択できる。
【００７９】
なお、絞り１３ａの開口径やストロボ１６ａの発光は、通常は撮影時にカメラ側で自動的に設定するために、絞り操作部１３ｃおよび閃光操作部１６ｃは不要であるが、撮影者が任意に撮影条件を設定する時のために設けられている。
【００８０】
撮影制御部１８は、後述する信号処理部１１１に取り込まれた画像信号に基づいて被写体輝度の測定（測光）を行い、この測光結果に基づいて絞り１３ａの絞り口径とシャッタ１２ａの閉じタイミング（露光時間）を定めている。
【００８１】
また、撮影制御部１８は、焦点駆動部１４ｂを駆動させながら、信号処理部１１１からの出力に基づいて撮影レンズ１１ａの合焦位置を求めている。
【００８２】
撮影制御部１８内には撮影条件検出部１８ａ、モード選択部１８ｂが含まれているが、説明の都合上図１では独立して表している。
【００８３】
撮影条件検出部は撮影時の以下の条件を検出している。
（１）露光時間
（２）撮影焦点距離
（３）撮影被写体距離
（４）予め設定される連写撮影枚数
（５）電源状態
モード選択部１８ｂは撮影条件検出部１８ａの情報を元に連写時にはメカシャッタを用いるか電子シャッタを用いるかを選択する。
【００８４】
なお、モード選択部１８ｂはシャッタモード切換操作部１２ｄがカメラ自動選択のモードを選択している時に動作する。
【００８５】
モード選択部１８ｂの選択方法については後述する。
【００８６】
撮像部１９から出力される映像信号は、Ａ／Ｄ変換部１１０によりディジタル信号に変換されて信号処理部１１１に入力される。
【００８７】
信号処理部１１１は、入力された信号に対して輝度信号や色信号を形成するなどの信号処理を行ってカラー映像信号を形成する。
【００８８】
そして、信号処理部１１１で信号処理された映像信号は、信号切替部１１２を介して第２の画像補正部１１７ｂに入力される。
【００８９】
第２の画像補正部１１７ｂでは、入力された信号のガンマ補正や圧縮処理を行う。
【００９０】
第２の画像補正部１１７ｂの信号は、表示部１１８と記録部１１９に入力され、撮影された画像が表示部１１８に表示されるとともに記録部１１９に記録される。
【００９１】
ここで撮影者がレリーズ操作部１２ｃのレリーズボタンを半押ししたとき（スイッチＳＷ１がオンしたとき）には撮影準備動作（焦点調節動作や測光動作等）が開始される。
【００９２】
そして測光動作により得られた測光値に基づいてシャッタ１２ａの閉じタイミング（露光時間）と絞り１３ａの絞り口径を設定する。絞り１３ａの口径はこの時点で適正口径に変更される。
【００９３】
次に撮影者がレリーズ操作部１２ｃのレリーズボタンを押し切る（スイッチＳＷ２がオンする）と画像記録のための露光動作が始まる。
【００９４】
少し詳しく説明すると撮影者がレリーズ操作部１２ｃのレリーズボタンを押し切る（ＳＷ２）と撮像部１９に蓄積中の画像データ（電荷）は一旦すべてリセットされた後、再び電荷蓄積が始まる。
【００９５】
そしてレリーズ操作部１２ｃのレリーズボタン半押し（ＳＷ１）時に測光して決められた露光時間が経過した時点でシャッタ１２ａを閉じ、シャッタ１２ａが閉じている間に電荷の転送を行い、電荷の転送終了後にシャッタ１２ａを開ける。
【００９６】
ここで防振操作部１２０がオンの状態の時には上記露光時間を短く制限することで手ブレによる画質劣化を防いでいる。
【００９７】
但し、露光時間を短くすると露出がアンダーになってしまいノイズの影響を受け易くなるので、実際には短い露光時間で連続撮影を行うことで複数枚の画像を取得し、それらを合成することで露出の改善を図っている。
【００９８】
また、複数枚の各撮影間における手ブレにより夫々の画像は若干の構図変化が生じているので画像の構図あわせを行ってから合成するようにしている。
【００９９】
以下にこの機能の詳細説明を行う。
【０１００】
本実施形態において、連続した複数枚の画像の撮影に応じて撮像部１９から撮影ごとに複数出力される画像信号は、Ａ／Ｄ変換部１１０でディジタル信号に変換されてから信号処理部１１１にて信号処理が施される。
【０１０１】
一方、防振操作部１２０を操作して防振システムがオンにされたことが撮影制御部１８に伝えられると、信号処理部１１１からの画像データは信号切替部１１２を介して画像記憶部１１３に入力される。すなわち、第２の画像補正部１１７ｂへの入力は絶たれる。画像記憶部１１３は、撮影された複数枚の画像を記憶しておく。
【０１０２】
ここで画像記憶部１１３は得られた画像のすべてを記憶しておくのではなく、明らかに不良な画像は、信号処理部１１１及び撮影制御部１８で判定し、画像記憶部１１３にも第２の画像補正部１１７ｂにも伝わらないように信号切換部１１２が制御される。
【０１０３】
ズレ検出部１１４は、画像記憶部１１３に記憶された画像内における特徴点を抽出し、この特徴点の撮影画面内における位置座標を割り出す。
【０１０４】
例えば、図２に示すようにフレーム１２１ａにおいて人物１２２ａが建物１２３ａを背景にして立っている写真を撮影する場合を考える。
【０１０５】
複数枚撮影する場合にはフレーム１２１ｂの様に手ブレによりフレーム１２１ａに対して構図がずれた画像が撮影されることがある。
【０１０６】
ズレ検出部１１４は、画面の周辺に位置する建物１２３ａのうち輝度の高い点である窓１２４ａのエッジ１２５ａをエッジ検出により特徴点として取り出し、この特徴点１２５ａと、フレーム１２１ｂにおける特徴点１２５ｂとを比較し、その差分を補正（座標変換）する。
【０１０７】
図２では、フレーム１２１ｂの特徴点１２５ｂを矢印１２６のようにフレーム１２１ａの特徴点１２５ａに重ねるようにして、フレーム１２１ｂを座標変換する。
【０１０８】
ここで、特徴点として撮影画面の周辺を選択する理由を以下に説明する。
【０１０９】
多くの撮影の場合では、画面中央近傍に主被写体が位置し、且つ主被写体は人物である場合が多い。このようなとき、主被写体を特徴点として選ぶと被写体ブレによる不都合が出てくる。
【０１１０】
すなわち、複数枚の撮影を行っている時に撮影者の手ブレばかりでなく、被写体ブレも重畳してくるので被写体ブレに基づいて画像の座標変換をしてしまう。
【０１１１】
この場合、主被写体の構図が適正になるように座標変換するので好ましい画像ができるように思われるが、一般的には人物の動きは複雑であり、特徴点を選ぶ場所によってズレ検出精度が大きく左右される。
【０１１２】
例えば、主被写体（人物）の眼を特徴点として選んだ場合は瞬きの影響が出るし、手の先を特徴点として選択した場合には、手は動きやすいので実際の被写体全体のブレとは異なってしまう。
【０１１３】
この様に人物の１点を特徴点として画像の座標変換を行っても、その人物のすべてが適正に座標変換される訳ではなく、複数の画像を座標変換して合成する場合においても、各画像ごとに座標の位置がばらつき、好ましい画像は得られない。
【０１１４】
そこで、本実施形態の様に背景のような静止被写体を特徴点として選択して、画像の座標変換を行ったほうが好ましい画像が得られる。
【０１１５】
なお、画像のズレを求める方法は上記の様に周辺のエッジなどの特徴点を抽出してズレとする方法ばかりではなく、画面全体における各領域の画像間の動きベクトルを検出し、それらの中で最も頻度の高い動きベクトルをズレとする方法でも良い。
【０１１６】
座標変換部１１５ではズレ検出部１１４で求められた各画像間のズレ量に基づいて複数枚の画像の位置合わせを行う。
【０１１７】
ここで合成前に座標変換部１１５は以下の動作も行っている。
【０１１８】
先ず、各画像の座標を変換して位置合わせを行う時に基準となる画像を選ぶ。
【０１１９】
選ばれた基準画像に対して大幅にずれている画像は以降の合成に用いないように削除する。
【０１２０】
座標変換された各画像は、画像合成部１１６に出力されて各画像が１枚の画像に合成される。
【０１２１】
デジタル画像の場合には、１枚の露出不足の写真でもゲインアップすることで露出の補正が可能であるが、ゲインを高くするとノイズも多くなり見苦しい画像になってしまう。
【０１２２】
しかし、本実施形態のように多くの画像を合成して画像全体のゲインをアップさせる場合には、各画像のノイズが平均化されるためにＳ／Ｎ比の大きい画像を得ることができ、結果的にノイズを抑えて露出を適正化することができる。
【０１２３】
別の考え方をすれば、例えばノイズを許容して撮像部１９を高感度にして複数枚撮影し、これらを加算平均することで画像に含まれるランダムノイズを減少させているとも云える。
【０１２４】
合成された画像データは、第１の画像補正部１１７ａに入力されてガンマ補正や圧縮処理が行われ、更に合成時の各画像の端部欠損部を切り出し、画像サイズが小さくなった分を拡散補完する。すなわち、図３における互いが重ならない領域１２９をカットして、２枚の画像が重なった領域のみについて切り出して拡散補完処理を行う。
【０１２５】
その後記録部１１９に合成画像を記録する。
【０１２６】
一般にデジタルカメラの場合では撮影後に撮影画像をカメラの背面液晶モニタ（表示部１１８）に表示する。
【０１２７】
しかし本実施形態の様に画像を合成して露出補完を図る場合には、合成画像を作成してから表示するまでに時間がかかってしまう。
【０１２８】
そこで本実施形態においてはカメラの表示部１１３には合成前の画像を表示する様にしている。
【０１２９】
これはカメラの表示部１１３は小さいために露出不足の画像のゲインを上げて表示しても鑑賞時に見苦しい画像にならないためである。
【０１３０】
図１の記録部１１９から表示部１１８に入力される信号は、記録部１１９に記録された画像を再生する場合に必要とされる。
【０１３１】
上述したように複数枚の画像を撮影し、それらを合成する場合には、撮影直後では特定したコマを表示するわけであるが、表示禁止部１１８ａは合成処理が完了した後において画像を再生する時には上記特定コマを表示部１１８で表示するのではなく、合成処理が完了した画像を表示することで実際の画像を確認できる様にしている。
【０１３２】
なお、画像の再生モードの場合には一般的には記録部１１９内のすべての画像データを見ることが出来るが、複数枚を撮影してこれらを合成する場合においては撮影禁止部１１８ａが合成前の画像は再生時には見えない様にしている。
【０１３３】
これは再生時に上記複数枚の合成用画像を表示する様にすると、撮影者が認識していない画像が多く表示されることになり、画像の閲覧に時間がかかるばかりではなく混乱をきたすためである。
【０１３４】
図４は撮影動作をまとめたフローチャートであり、このフローはカメラの電源がオンになったときにスタートする。
【０１３５】
ステップＳ１００１では撮影者がレリーズボタンの半押し（ＳＷ１オン）を行うまで（撮影準備の指示があるまで）、このステップを循環して待機し、ＳＷ１がオンされるとステップＳ１００２に進む。
【０１３６】
ステップＳ１００２では撮像部１９が被写体を撮像し、信号処理部１１１でその画像のコントラストを検出しながら撮影制御部１８によりＡＦモータ１４ａを駆動してレンズ１１ａを繰り出し、もっともコントラストが高かった位置でレンズ１１ａの繰り出しを停止することでピント合わせを行う。また、同時に撮像部１９の出力信号から被写体の明るさを求める。
【０１３７】
ステップＳ１００３では撮影者が防振操作部１２０をオンにしているか否かを判別し、オンにしているときはステップＳ１００４に進み、オフの時はステップＳ１０１９に進む。
【０１３８】
先ず始めに防振操作部１２０をオンにしている場合について説明する。
【０１３９】
ステップＳ１００４ではステップＳ１００２で求めた被写体の明るさ等の撮影条件から撮影する枚数と各々の露光時間を求める。
【０１４０】
ここで云う撮影条件とは
（１）被写体の明るさ
（２）撮影光学系の焦点距離
（３）撮影光学系の明るさ（絞りの値）
（４）撮像素子の感度
の４点である。
【０１４１】
例えば撮像素子の感度がＩＳＯ２００に設定されていたとする。
【０１４２】
このとき被写体の明るさを測光し、それを適正に露光するためには絞り１３ａは全開（例えばｆ２．８）、シャッタ１２ａは露光時間１／８（秒）が必要である計算になったとする。
【０１４３】
このとき撮影焦点距離が３５ｍｍフィルム換算で３０ｍｍであるときは１／８（秒）の露光時間の撮影では手ブレの恐れがあるので、手ブレの恐れがない露光時間１／３２（秒）に設定し、４回撮影を行うように設定する。なお、一般的には、３５ｍｍフィルム換算で焦点距離がＦｍｍのレンズで撮影する場合には、露光時間を１／Ｆ（秒）よりも短くすれば撮影画像上では手ブレはほとんど目立たないといわれている。
【０１４４】
また、被写体の明るさを測光し、それを適正に露光するためには絞り１３ａは全開（例えばｆ２．８）、シャッタ１２ａは露光時間１秒が必要である計算になったとする。
【０１４５】
このとき撮影焦点距離が３５ｍｍフィルム換算で３０ｍｍであるときは１秒の撮影では手ブレの恐れがあるので、手ブレの恐れがない露光時間１／３２（秒）に設定し、３２回撮影を行うように設定するのが手ブレ対策では理想であるが、その場合には１回の露光時間が適性値に対してあまりにも短くなってしまうので、フォトダイオードに十分な信号蓄積が行えなくなる。そのためにそれらを合成しても良好な画像は得られない。
【０１４６】
このような条件となった場合には多少の手ブレは我慢して、例えば１／８（秒）で８回の露光を行う様に設定する。
【０１４７】
また、被写体の明るさを測光し、それを適正に露光するためには絞り１３ａは全開（例えばｆ２．８）、シャッタ１２ａは露光時間１／８０（秒）が必要である計算になったとする。
【０１４８】
撮影焦点距離が３５ｍｍフィルム換算で３００ｍｍであるときは、１／８０（秒）の露光時間の撮影では手ブレの恐れがあるので、手ブレの恐れがない露光時間１／３２０（秒）に設定し４回撮影を行うように設定する。
【０１４９】
また、被写体の明るさを測光し、それを適正に露光するためには絞り１３ａは全開（例えばｆ２．８）、シャッタ１２ａは露光時間１／２０（秒）が必要である計算になったとする。
【０１５０】
このとき撮影焦点距離が３５ｍｍフィルム換算で３００ｍｍであるときは１／２０（秒）の露光時間の撮影では手ブレの恐れがあるので、手ブレの恐れがない露光時間１／３００（秒）に設定し、１５回撮影を行うように設定するのが手ブレ対策では理想であるが、その場合には１回の露光時間が適性値に対してあまりにも短くなってしまうのでフォトダイオードに十分な信号蓄積が行えなくなる。そのためにそれらを合成しても良好な画像は得られない。
【０１５１】
このような条件となった場合には多少の手ブレは我慢して、１／１６０（秒）で８回の露光を行う様に設定する。
【０１５２】
以上の様に、複数枚の撮影を行う時の露光時間を撮影条件に合わせて決定し、更に何枚撮影するかも撮影条件に合わせて設定する。
【０１５３】
同一被写体を複数枚に分けて撮影するとしても、各撮影の露光条件はなるべく適正露光に近い方が撮像素子１９に正確な情報が撮像できる。
【０１５４】
そのために暗い被写体の場合や、撮影レンズが絞り込んでいる場合、撮像素子の感度が低く設定されている場合等には、複数枚撮影といえども各撮影の露光時間はなるべく長くして有効な露光条件にする。
【０１５５】
但し、あまり露光時間を長くすると手ブレによる劣化の影響が像面に表れるために、上述したように撮影焦点距離が３５ｍｍフィルム換算で３０ｍｍであるときは手ブレの恐れのない約焦点距離分の一である露光時間１／３２（秒）に設定している。そしてその露光時間では足りない分を撮影枚数で補完している。
【０１５６】
焦点距離が長い場合には更に露光時間を短くしないと手ブレによる像劣化が生ずるので更に露光時間を短くして、その分撮影枚数を増やして露出補完を行う。
【０１５７】
この様に複数枚撮影における露光時間は、撮影被写体が暗いほど、また撮影レンズが暗いほど、撮像素子の感度が低いほど長くなり、レンズの焦点距離が長いほど短くなる。
【０１５８】
そして、複数枚撮影における撮影枚数は撮影被写体が暗いほど、また撮影レンズが暗いほど、撮像素子の感度が低いほど、レンズの焦点距離が長いほど多くなる。
【０１５９】
以上の計算が終了した後で、カメラのファインダや液晶表示部（表示部１１８）に防振モード（複数回撮影モード）が設定されたことを表示すると同時に、求めた撮影枚数を表示して撮影者に知らせる。
【０１６０】
ステップＳ１００５では連写撮影時のシャッタモードを決める。
【０１６１】
ステップＳ１００５の詳細は後述する。
【０１６２】
ステップＳ１００６ではレリーズボタンを押し切る（ＳＷ２オン）まで（撮影の指示があるまで）、ステップＳ１００１からステップＳ１００６を循環して待機する。
【０１６３】
ステップＳ１００７では１枚目の撮影を開始する。
【０１６４】
先ず撮像部１９の電荷をリセットし、再蓄積を開始させる。このとき、メカシャッタが選択されている場合には、蓄積開始後にシャッタを開口する。
【０１６５】
次にステップＳ１００４で求められた露光時間だけ待機し、その後電荷の転送を行う。なお、メカシャッタが選択されいる場合には、電荷転送に先立ってメカシャッタを閉じる。
【０１６６】
そして得られた画像を一旦画像記憶部１１３に記憶しておく。
【０１６７】
また、この時同時に撮影開始の発音を発音駆動部１７ｂを介してスピーカー１７ａで発音する。
【０１６８】
この音は例えばピッ！と云う電子音でも良いし、フィルムカメラなどにおけるシャッタの開き音、ミラーアップの音などの擬似音でも良い。
【０１６９】
なお、ステップＳ１００７から後述するステップＳ１０１４までは短い露光時間の撮影を複数回繰り返し、それを合成してみかけの露出を適正にする合成撮影モードの動作である。
【０１７０】
ステップＳ１００８では複数枚の撮影のすべての撮影が完了するまでステップＳ１００７、Ｓ１００８を循環して待機する。
【０１７１】
そして撮影が完了するとステップＳ１００９に進む。
【０１７２】
ステップＳ１００９では撮影完了の発音を発音駆動部１７ｂを介してスピーカー１７ａで発音する。
【０１７３】
この音は例えばピッピッ！と云う電子音でも良いし、フィルムカメラなどにおけるシャッタの閉じ音、ミラーダウン音やフィルム巻き上げ音などの擬似音でも良い。
【０１７４】
この様に複数枚撮影する場合においても、その動作を表す発音は１セット（最初の撮影の露光開始から最後の撮影の露光完了までに１回）なので撮影者に複数枚撮影の違和感を与えることはない。
【０１７５】
特に、電子シャッタを用いて連写を行った場合においては、メカシャッタ動作の音や振動がまったく生じないので、撮影者は連写を行ったことすら認識しないで円滑な撮影が行える。
【０１７６】
ステップＳ１０１０では、ズレ検出部１１４が画像の周辺領域（例えば図２の建物１２３ａ）の中から特徴的な像を抽出し、その像の座標を求める。
【０１７７】
この座標は仮に一枚目の画像を基準としたときの２枚目以降の画像の相対的なズレ座標である。
【０１７８】
ステップＳ１０１１では座標変換部１１５が各画像の座標変換を行う。
【０１７９】
ステップＳ１０１２ではすべての画像が座標変換終了するまでステップＳ１０１０、１０１１を循環して待機し、すべての画像の座標変換が完了するとステップＳ１０１３に進む。
【０１８０】
ステップＳ１０１３では画像の合成を行う。
【０１８１】
ここで画像の合成は各画像の対応する座標の信号を加算平均することで行い、画像内のランダムノイズは加算平均することで減少させられる。
【０１８２】
そしてノイズの減少した画像を必要に応じてゲインを調整して露出の適正化を図る。
【０１８３】
ステップＳ１０１４では合成された画像の端部の様に各画像が構図ブレにより重ならなかった領域をカットし、元のフレームの大きさになるように画像を拡散補完する。
【０１８４】
ステップＳ１０１５では合成画像に対して信号のガンマ補正や圧縮処理を行う。
【０１８５】
ステップＳ１０１６ではステップＳ１０１５で求まった画像をカメラ背面などに配置された液晶表示部（表示部１１８）に表示する。
【０１８６】
ステップＳ１０１７ではステップＳ１０１５で求まった画像を例えば半導体メモリなどからなりカメラに対して着脱可能な記録媒体（記録部１１９）に記録する。
【０１８７】
ステップＳ１０１８ではスタートに戻る。
【０１８８】
なお、ステップＳ１０１８の段階で、まだ継続してレリーズボタンの半押し（ＳＷ１オン）操作が行われているときは、そのままステップＳ１００１、Ｓ１００２、Ｓ１００３、Ｓ１００４と再度フローを進めてゆくが、ステップＳ１０１８の段階でレリーズボタンの押し切り（ＳＷ２オン）が継続して操作されているときにはスタートに戻らずステップＳ１０１８で待機する。
【０１８９】
次にステップＳ１００３で防振操作部１２０がオフの場合について説明する。
【０１９０】
このときステップＳ１００３からステップＳ１０１９に進む。
【０１９１】
ステップＳ１０１９では防振システムを使用しないと手ブレによる画像劣化が生ずる撮影条件であるか否かを判断している。
【０１９２】
撮影条件は前述した様に被写体の明るさ、レンズの明るさ、撮像感度、撮影焦点距離であり、被写体の明るさ、レンズの明るさ、撮像感度に基づいて露光時間を求め、その露光時間が現状の撮影焦点距離においては手ブレによる画像劣化の可能性があるか否かをステップＳ１０１９で判断している。
【０１９３】
そして画像劣化の可能性がある時にはステップＳ１０２０に進み、そうでない時はステップＳ１０２１に進む。
【０１９４】
ステップＳ１０２０ではカメラのファインダや液晶表示部（表示部１１８）に防振モードに設定することを推奨する表示を行う。
【０１９５】
ステップＳ１０２１ではレリーズボタンを押し切る（ＳＷ２オン）まで（撮影の指示があるまで）、ステップＳ１００１からステップＳ１０２１を循環して待機する。
【０１９６】
ステップＳ１０２２では通常の撮影（一回の露光で有効な露光条件を形成する通常撮影モード）が完了する迄待機し、露光完了と共にステップＳ１０１５に進む。
【０１９７】
ここで省いているが通常撮影の場合においても撮影開始と完了の動作に合わせて撮影動作音をスピーカー１７ａより発音している。
【０１９８】
即ち、合成撮影モード（複数枚の撮影の合成）においても通常撮影モードにおいても同じ様式の撮影動作音を発音しており、電子シャッタ選択時にはその動作音の間隔の長さ（撮影開始音から撮影完了音迄の長さ）の違いにより長秒時露光か否かを撮影者が認識できる程度であり、複数枚の撮影を行っているか否かは撮影者には分からない様になっている。
【０１９９】
そのために合成撮影モードにおいても特別な撮影を行っているという認識を撮影者に与えることがなく、使いやすいカメラになっている。
【０２００】
ステップＳ１０１５では撮影画像に対して信号のガンマ補正や圧縮処理を行う。
【０２０１】
ステップＳ１０１６ではステップＳ１０１５で求まった画像をカメラ背面などに配置された液晶表示部（表示部１１８）に表示する。
【０２０２】
ステップＳ１０１７ではステップＳ１０１５で求まった画像を例えば半導体メモリなどからなりカメラに対して着脱可能な記録媒体（記録部１１９）に記録する。
【０２０３】
ステップＳ１０１８ではスタートに戻る。
【０２０４】
このフローで分かるように、防振操作部１２０をオフしている場合においても手ブレによる画像劣化が生ずる撮影条件の時には撮影者に防振システムの活用（合成撮影モード）を促す表示を行って画像劣化を未然に防いでおり、更に合成撮影モードにおいても各々の露光時間は焦点距離により変更することでいかなる焦点距離においても望ましい撮影が出来るようにしてる。
【０２０５】
次に、モード選択部１８ｂ（ステップＳ１００５）の動作を図５を用いて説明する。
【０２０６】
ステップＳ２００１でシャッタモード切換操作部１２ｄの状況を判定し、撮影者がメカシャッタを選択している場合にはステップＳ２００６に進み、連写撮影時にメカシャッタを選択してステップＳ１００６に進む。
【０２０７】
撮影者が電子シャッタを選択している場合にはステップＳ２００７に進み、連写撮影時に電子シャッタを選択してステップＳ１００６に進む。
【０２０８】
撮影者がカメラ自動を選択している場合にはステップＳ２００２に進む。
【０２０９】
ステップＳ２００２では撮影時の電源状態によりメカシャッタか電子シャッタを選択するようになっている。
【０２１０】
これはメカシャッタで連写を行う場合には十分な電力が必要なためであり、電源の残容量が予め決められた容量以下の状態においてはステップＳ２００７に進み電子シャッタを選択するようになっている。
【０２１１】
連写する枚数に応じて閾値となる容量を複数設定しておき、連写枚数が少ないような場合には、メカシャッタを選択する様にしても良い。
【０２１２】
ステップＳ２００２で残容量が所定量より大きい時にはステップＳ２００３に進む。
【０２１３】
ステップＳ２００３では各連写の露光時間が所定時間よりも長い場合（例えば１／８（秒）より長い露光秒時の場合）にはステップＳ２００７に進み電子シャッタを選択する。
【０２１４】
図１６で説明した様に電子シャッタの場合には読み出し時間の関係から手ブレや被写体ブレの影響で画面上下の構図ズレが生ずるが露光時間（図１６の露光時間４９）が長くなってゆくと相対的に読み出し時間の影響は小さくなってゆく。
【０２１５】
そのため電子シャッタによる連写を行ってもメカシャッタによる連写を行っても画像へのブレの影響は変わらなくなる。
【０２１６】
よって露光時間が所定より長くなる場合には電子シャッタを選択して連写撮影を行う様にしている。
【０２１７】
露光時間が短い場合にはステップＳ１００４で焦点距離に応じたブレ防止に必要な露光時間が短く設定されたことになり、電子シャッタではブレの影響が出る可能性があるのでステップＳ２００４に進み次の判断を行う。
【０２１８】
ステップＳ２００４では焦点距離が所定以下（例えば３５ｍｍフィルムカメラ換算で３０ｍｍより短い場合）は電子シャッタを選択するフローに進むためにステップＳ２００５に進む。これは焦点距離が短いときは手ブレによる影響が少ないために電子シャッタによる撮影でも画像劣化が小さいためである。
【０２１９】
焦点距離が長く、電子シャッタでは各撮影時に手ブレの影響が生じそうな場合にはステップＳ２００６に進みメカシャッタを選択する。
【０２２０】
ステップＳ２００５ではステップＳ２００４で焦点距離が短くブレの影響が少ないと判断された場合において被写体距離を条件にして、更にメカシャッタか電子シャッタの選択を行っている。
【０２２１】
被写体距離が所定距離より遠い場合（例えば１ｍ）には被写体ブレの影響が少ないので（このステップでは既に焦点距離も短いと分かっているので、被写体距離が遠い場合は被写体ブレは少ないと判定できる）、ステップＳ２００７に進み電子シャッタを選択する。
【０２２２】
被写体距離が近い場合には被写体ブレの影響が大きくなるのでステップＳ２００６に進み、メカシャッタを選択する。
【０２２３】
このようにシャッタのモードを選択した後にステップＳ１００６に進む。
【０２２４】
以上の様に撮影条件に応じてメカシャッタと電子シャッタの両方のメリットを生かすような構成とすることで違和感の少ない撮影とブレの少ない画像が得られる様になっている。
【０２２５】
以上説明したように、上記の第１の実施形態では、複数枚の連写画像を画像合成部により各画像間のズレを位置合わせして合成することで１枚の画像を取得する合成撮影モードを有する撮像装置において、撮像素子１９の電荷蓄積時間を制御する電子シャッタ（駆動部１６、撮影制御部１８で設定）と、電子シャッタを繰り返して複数枚の撮影を行う電子シャッタモードと、撮像素子への入射光路を遮蔽／開放自在なメカシャッタ１２ａと、メカシャッタを繰り返して複数枚の撮影を行うメカシャッタモードと、各撮影時の像ブレの影響が所定より少ない場合には電子シャッタモードを選択するモード選択部１８ｂ（ステップＳ１００５）を設けている。
【０２２６】
また、複数枚の連写画像を画像合成部により各画像間のズレを位置合わせして合成することで１枚の画像を取得する合成撮影モードを有する撮像装置において、撮像素子１９の電荷蓄積時間を制御する電子シャッタ（駆動部１６、撮影制御部１８で設定）と、電子シャッタを繰り返して複数枚の撮影を行う電子シャッタモードと、撮像素子への入射光路を遮蔽／開放自在なメカシャッタ１２ａと、メカシャッタを繰り返して複数枚の撮影を行うメカシャッタモードと、撮像装置の焦点距離が所定より短い場合には電子シャッタモードを選択するモード選択部１８ｂ（ステップＳ１００５）を設けている。
【０２２７】
また、複数枚の連写画像を画像合成部により各画像間のズレを位置合わせして合成することで１枚の画像を取得する合成撮影モードを有する撮像装置において、撮像素子１９の電荷蓄積時間を制御する電子シャッタ（駆動部１６、撮影制御部１８で設定）と、電子シャッタを繰り返して複数枚の撮影を行う電子シャッタモードと、撮像素子への入射光路を遮蔽／開放自在なメカシャッタ１２ａと、メカシャッタを繰り返して複数枚の撮影を行うメカシャッタモードと、撮影露光時間が所定より長い場合には電子シャッタモードを選択するモード選択部１８ｂ（ステップＳ１００５）を設けている。
【０２２８】
また、複数枚の連写画像を画像合成部により各画像間のズレを位置合わせして合成することで１枚の画像を取得する合成撮影モードを有する撮像装置において、撮像素子１９の電荷蓄積時間を制御する電子シャッタ（駆動部１６、撮影制御部１８で設定）と、電子シャッタを繰り返して複数枚の撮影を行う電子シャッタモードと、撮像素子への入射光路を遮蔽／開放自在なメカシャッタ１２ａと、メカシャッタを繰り返して複数枚の撮影を行うメカシャッタモードと、撮影被写体距離が所定より遠い場合には電子シャッタモードを選択するモード選択部１８ｂ（ステップＳ１００５）を設けている。
【０２２９】
また、複数枚の連写画像を画像合成部により各画像間のズレを位置合わせして合成することで１枚の画像を取得する合成撮影モードを有する撮像装置において、撮像素子１９の電荷蓄積時間を制御する電子シャッタ（駆動部１６、撮影制御部１８で設定）と、電子シャッタを繰り返して複数枚の撮影を行う電子シャッタモードと、撮像素子への入射光路を遮蔽／開放自在なメカシャッタ１２ａと、メカシャッタを繰り返して複数枚の撮影を行うメカシャッタモードと、撮像装置の電源状態が所定より消耗している場合には電子シャッタモードを選択するモード選択部１８ｂ（ステップＳ１００５）を設けている。
【０２３０】
また、複数枚の連写画像を画像合成部により各画像間のズレを位置合わせして合成することで１枚の画像を取得する合成撮影モードを有する撮像装置において、撮像素子１９の電荷蓄積時間を制御する電子シャッタ（駆動部１６、撮影制御部１８で設定）と、電子シャッタを繰り返して複数枚の撮影を行う電子シャッタモードと、撮像素子への入射光路を遮蔽／開放自在なメカシャッタ１２ａと、メカシャッタを繰り返して複数枚の撮影を行うメカシャッタモードと、電子シャッタモードかメカシャッタモードを選択するモード選択操作部１２ｄを設けている。 
（第２の実施形態）
図６は、本発明の第２の実施形態におけるモード選択部１８ｂ（ステップＳ１００５）の動作を示す図である。
【０２３１】
ステップＳ２００１でシャッタモード切換操作部１２ｄの状況を判定し、撮影者がメカシャッタを選択している場合にはステップＳ２００６に進み、連写撮影時にメカシャッタを選択してステップＳ１００６に進む。
【０２３２】
撮影者が電子シャッタを選択している場合にはステップＳ２００７に進み、連写撮影時に電子シャッタを選択してステップＳ１００６に進む。
【０２３３】
撮影者がカメラ自動を選択している場合にはステップＳ２００２に進む。
【０２３４】
ステップＳ２００２では撮影時の電源状態によりメカシャッタか電子シャッタを選択するようになっている。
【０２３５】
これはメカシャッタで連写を行う場合には十分な電力が必要なためであり、電源の残容量が予め決められた容量以下の状態においてはステップＳ２００７に進み電子シャッタを選択するようになっている。
【０２３６】
連写する枚数に応じて閾値となる容量を複数設定しておき、連写枚数が少ないような場合には、メカシャッタを選択する様にしても良い。
【０２３７】
ステップＳ２００２で残容量が所定量より大きい時にはステップＳ２００８に進む。
【０２３８】
ステップＳ２００８では各連写の露光時間と撮影焦点距離の積を被写体距離で割った値を求め、その結果によりメカシャッタか電子シャッタを選択している。
【０２３９】
ここで露光時間が短くても焦点距離が長い場合には手ブレの影響が大きく、逆に露光時間が長くても焦点距離が短い場合には手ブレの影響が小さいので、手ブレの影響が大きい時はメカシャッタ、影響が小さい時は電子シャッタを選択するのであるが、それに加えて焦点距離が短くても被写体に近い場合には被写体ブレの影響が大きくなり、被写体が遠くても焦点距離が長い場合にも被写体ブレの影響が大きくなる。
【０２４０】
それらを統合して考えてステップＳ２００８では露光時間と撮影焦点距離の積を被写体距離で割った値が所定値より小さい時はブレの影響が出にくいので電子シャッタを選択し、所定値よりも大きい場合には手ブレの影響がでる可能性があるのでメカシャッタを選択している。
【０２４１】
ここで撮影焦点距離と被写体距離の比はほぼ撮影倍率に比例するので、このフローにおいては撮影倍率が小さい（焦点距離が短い、被写体距離が遠い）時には電子シャッタを選択するアルゴリズムとなる。
【０２４２】
ステップＳ２００９では撮影枚数が所定枚数より少ない場合（例えば４枚以下）はステップＳ２００６に進みメカシャッタを選択し、多い場合にはステップＳ２００７に進み電子シャッタを選択する。
【０２４３】
これは撮影枚数が多い場合にメカシャッタを選択するとシャッタ動作音が大きく発生して不快なためである。
【０２４４】
このようにシャッタのモードを選択した後にステップＳ１００６に進む。
【０２４５】
以上の様に撮影条件に応じてメカシャッタと電子シャッタの両方のメリットを生かすような構成とすることで違和感の少ない撮影とブレの少ない画像が得られる様になっている。
【０２４６】
以上説明したように、上記の第２の実施形態では、複数枚の連写画像を画像合成部により各画像間のズレを位置合わせして合成することで１枚の画像を取得する合成撮影モードを有する撮像装置において、撮像素子１９の電荷蓄積時間を制御する電子シャッタ（駆動部１６、撮影制御部１８で設定）と、電子シャッタを繰り返して複数枚の撮影を行う電子シャッタモードと、撮像素子への入射光路を遮蔽／開放自在なメカシャッタ１２ａと、メカシャッタを繰り返して複数枚の撮影を行うメカシャッタモードと、連写枚数が所定より多い場合には電子シャッタモードを選択するモード選択部１８ｂ（ステップＳ１００５）を設けている。
【０２４７】
また、複数枚の連写画像を画像合成部により各画像間のズレを位置合わせして合成することで１枚の画像を取得する合成撮影モードを有する撮像装置において、撮像素子１９の電荷蓄積時間を制御する電子シャッタ（駆動部１６、撮影制御部１８で設定）と、電子シャッタを繰り返して複数枚の撮影を行う電子シャッタモードと、撮像素子への入射光路を遮蔽／開放自在なメカシャッタ１２ａと、メカシャッタを繰り返して複数枚の撮影を行うメカシャッタモードと、撮像装置の撮影倍率が所定より小さい場合には電子シャッタモードを選択するモード選択部１８ｂ（ステップＳ１００５）を設けている。
【０２４８】
（第３の実施形態）
第１の実施形態においては画像の位置あわせ及び合成処理すべてをカメラ内で行っていた。
【０２４９】
しかし、第３の実施形態においては、カメラでは複数画像の撮影、及び合成する画像の判定（撮影した画像の中で合成に適さない画像は記録しない）を行うだけであり、その後の複数画像の内の基準画像の選定、座標変換、合成処理は撮影後にパソコンなどの外部機器を利用して行なう。
【０２５０】
撮影された画像は半導体メモリなどで構成されカメラに対して着脱可能な記録媒体（記録部１１９）に記録されるわけであるが、この記録された画像の中には通常の撮影（防振モードでない撮影画像）と複数枚に分けて撮影した画像（防振モードでの撮影画像）が混在している。
【０２５１】
それらの画像の中から複数枚に分けて撮影した画像を選び出す作業は記録されている画像の量が多くなると極めて面倒な作業である。
【０２５２】
そこで本実施形態では複数枚に分けて撮影した画像は記録部１１９内で識別できる様に記録している。
【０２５３】
そしてカメラ付属のアプリケーションソフトは上記識別を認識して、それらのみを抽出すると共に自動的に複数枚画像を位置合わせして合成する。
【０２５４】
合成した画像は記録部１１９に再度記録すると共に、記録部１１９に記録されている上記複数枚の画像は削除される。
【０２５５】
これにより記録部１１９の記録容量に余裕が生まれる。
【０２５６】
図７はパソコンとカメラの連携図であり、ノートパソコン３３にデジタルカメラ３１をＵＳＢケーブル３２などでケーブル接続した状態を示す図である。
【０２５７】
これによりデジタルカメラ３１とノートパソコン３３の間で画像データのやりとりを行なうことができる。
【０２５８】
なお、ＵＳＢなどのケーブル接続ではなく、デジタルカメラ３１に内蔵される記録部１１９をカメラ本体から取り外してノートパソコン３３などに設けられているスロット３４に差し込むことでデータの制御を行っても良い。
【０２５９】
ノートパソコン３３には予め第３の実施形態におけるアプリケーションソフトがインストールされている。
【０２６０】
このアプリケーションソフトの動作を以下に述べる。
（１）デジタルカメラ３１の記録部１１９の記録画像の中から画像合成用に記録されている複数画像を識別して自動的にノートパソコン３３に取り込む。なお、データを移動するので記録部１１９内の合成用画像は削除される。
（２）ノートパソコン３３では取り込んだ画像の連写間のズレを座標変換補正した後にそれらを合成して露出の改善を行う。
（３）合成された画像にはガンマ補正や圧縮処理が施され、更に合成時の各画像の端部欠損部を切り出し、画像サイズが小さくなった分を拡散補完する。
（４）合成した画像を再び記録部１１９に戻す。
【０２６１】
以上の動作に関して詳細に説明する。
【０２６２】
図８に示す様にデジタルカメラ３１内の記録部１１９のフォルダ３５の中は２つのフォルダに分かれており、通常撮影した画像を格納する通常撮影フォルダ３６と、連続して撮影された合成用画像を格納する合成用画像フォルダ３７が存在する。
【０２６３】
通常撮影フォルダ３６にはその撮影順から３０９，３１０，３１１ａ，３１２，３１３ａ，３１４の画像が格納されている。
【０２６４】
ここで連続して撮影された合成用画像のうちの一枚（例えば一番初めに撮影した画像）３１１ａ（００３ａ）は通常画像フォルダ３６にも格納されている。
【０２６５】
そしてその画像の次の通常画像３１２は前の画像と一つ番号を飛ばしている。すなわち、通常画像フォルダ３６において、００４という番号の画像ファイルが存在しない。
【０２６６】
同様に画像３１３ａ（００６ａ）は合成用に撮影された複数枚の画像の内の始めの一枚である。そして、その次の通常画像である画像番号３１４に関しても００７は飛ばされ、ファイル番号００８になっている。
【０２６７】
合成用画像フォルダ３７には合成用に連写撮影された画像がすべて記録されており、ノートパソコン３３はこのフォルダ３７ごとノートパソコン３３にデータを移動する。
【０２６８】
そして連写撮影された画像３１１ａから３１１ｅに対して位置合わせを行った各々の画像は合成処理されて露出補完が行われ、ガンマ補正や圧縮処理、合成時の各画像の端部欠損部を切り出し、画像サイズが小さくなった分を拡散補完すると共に一旦ノートパソコン３３のメモリに記録しておく。
【０２６９】
同様にして連写撮影された画像３１３ａから３１３ｄに対しても位置合わせを行った各々の画像は合成処理されて露出補完が行われ、ガンマ補正や圧縮処理、合成時の各画像の端部欠損部を切り出し、画像サイズが小さくなった分を拡散補完すると共に一旦ノートパソコン３３のメモリに記録しておく。
【０２７０】
この様にして記録された合成画像は、まとめてデジタルカメラ３１の記録部１１９内に設けられた通常画像フォルダ３６のそれぞれ撮影順番の位置に移動される。なお、このときノートパソコン３３には画像データは残らない。
【０２７１】
このように合成処理された後の画像は、図９に示すように、記録部１１９の通常画像フォルダ３６に予め記録されている合成用に用意された画像の一枚３１１ａ，３１３ａの次に格納されるされる。すなわち、合成画像３１５はファイル名００４、合成画像３１６はファイル名００７となる。
【０２７２】
そのため、撮影者は合成した画像と合成前の露出の不足している画像を比較することができ、いずれかが不要の場合には簡単に削除することができる。
【０２７３】
図１０は、以上のようにパソコン側で画像の合成を行なう場合の、カメラ側の動作を説明するフローチャートであり、図１におけるステップＳ１０１０からＳ１０１３の画像のズレ検出、位置合わせ、合成のステップが省かれており、代わりにステップＳ３００１が設けられている。
【０２７４】
ステップＳ３００１では連続撮影の時に一枚目の画像のみはステップＳ１０１５に進ませ、そうでない画像はステップＳ１０１５，Ｓ１０１６はスキップさせている。
【０２７５】
これは、合成用に連続撮影された画像に対してアプリケーションで画像補正の処理を行わせるために、ステップＳ１０１５の処理を行わない画像を記録部１１９に記録させるためである。
【０２７６】
そして一枚目の画像に関しても同様にステップＳ１０１５の処理を行わない画像も記録部１１９に記録させるわけであるが、ステップＳ１０１５の処理を行なった画像も用意し、その画像はステップＳ１０１６で液晶モニターなどの表示部１１８に表示させると共に、図１１で示した通常画像フォルダ３６にも画像３１１ａ，３１３ａとして記録する。
【０２７７】
図１１はノートパソコン３３内での画像処理のフローチャートであり、ノートパソコン３３が指定されたデジタルカメラ３１或いはそのカメラに搭載されていた記録部１１９に合成用画像フォルダ３７が存在することを認識したときにスタートする。
【０２７８】
ステップＳ３００２では記録部１１９の合成画像フォルダ３７をフォルダごとノートパソコン３３のメモリに移動する。
【０２７９】
この時点で記録部１１９の合成用画像フォルダは削除される。なお、次の撮影時には自動的にこの合成画像フォルダは再作成される。
【０２８０】
勿論安全のために記録部１１９の合成用画像フォルダ３７は移動ではなくコピーをノートパソコン３３に作成しても良い。
【０２８１】
ステップＳ３００３ではノートパソコン３３に新たに記録された複数枚の撮影画像を順次読み出す。
【０２８２】
以降ステップＳ３００４から後述するステップＳ３０１０までは撮影された合成用画像（ノートパソコンに保存された画像）の特徴点を揃えて合成することでみかけの露出を適正にする電子的補正部の動作である。
【０２８３】
ステップＳ３００４では各画像における特徴点を抽出する。
【０２８４】
なお、特徴点を特定しなくても画面全領域を複数に分割し、それら各々の動きベクトルを求め、最も頻度の高い動きベクトルをズレ量としても良い。
【０２８５】
ステップＳ３００５では、ステップＳ３００４でもとめたズレ量に基づいて、図１における座標変換部１１５に対応するノートパソコン３３内のアプリケーションが各画像の座標変換を行う。
【０２８６】
ステップＳ３００６では、基準画像に対して座標変換された画像の合成を行う。
【０２８７】
ここで、画像の合成は各画像の対応する座標の信号を加算平均することで行い、画像内のランダムノイズは加算平均することで減少させられる。そして、ノイズの減少した画像をゲインアップして露出の適正化を図る。
【０２８８】
ステップＳ３００７では、一つのシーン（例えば図１１の画像３１１ａから３１１ｄ）のすべての画像について座標変換、合成が終了するまでステップＳ３００３からＳ３００７を循環して待機し、１シーンの画像の座標変換が完了するとステップＳ３００８に進む。
【０２８９】
ステップＳ３００８では、画像データのガンマ補正や圧縮処理を行ない、更に合成時の各画像の端部欠損部を切り出し、画像サイズが小さくなった分を拡散補完する。
【０２９０】
ステップＳ３００９では出来上がった合成画像を記録部１１９の通常撮影フォルダ３６の所定の場所にコピーする。
【０２９１】
ステップＳ３０１０では、ノートパソコン３３に保存した全画像の処理が完了したか否かを判定しており、全画像の処理が終わっていない場合（例えば図１１の画像３１３ａから３１３ｄの処理、合成が未終了の場合）にはステップＳ３００３に戻り新たな画像の読出しを始める。
【０２９２】
このようにしてすべての画像を合成し、記録部１１９に記録終了するとステップＳ３０１１でノートパソコン３３は全処理完了の表示を行う。また、この表示処理と同時にノートパソコン３３に保存した全画像を消去する。
【０２９３】
以上によりこのフローは終了する。
【０２９４】
なお、以上ではデジタルカメラ３１とノートパソコン３３を例にして説明を行ったがノートパソコン３３に限らず、デスクトップのパソコンや。パソコンでなくても専用のストレージや専用の処理装置を用意して、それとカメラを接続すること（或いはその装置に記録媒体１１９を入れること）で複数枚の画像の処理を行っても良いことは言うまでもない。
【０２９５】
以上のように、上記の実施形態では、長秒時の撮影を、短い秒時の数枚に分け、それらを位置合わせ合成して長秒時相当の画像を得ることで長秒時撮影時のブレの問題を軽減するシステムにおいて、短い秒時の複数枚の撮影を行う場合においても、その撮影期間中に像ブレ（手ブレや被写体ブレ）の影響が心配される場合にのみメカシャッタを用いて連続撮影合成する構成にしたので、ブレによる画質劣化を防ぐことができ、通常の連続撮影合成の場合には電子シャッタを用いてスムーズな撮影を可能にしている。
【０２９６】
このように、通常の連写合成撮影時においては、電子シャッタを用いるため、連写音が発生しないので、
（１）撮影時の違和感を無くせる
（２）メカシャッタ動作により発生するブレを抑えることができる
という効果が得られる。
【０２９７】
また、連写時の各撮影時にもブレ（手ブレ、被写体ブレ）が予想される撮影条件の場合にはメカシャッタを用いて連写撮影するので、ブレによる画質劣化を防ぐことができる。
【０２９８】
（他の実施形態）
また、各実施形態の目的は、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体（または記録媒体）を、システムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読み出し実行することによっても、達成されることは言うまでもない。この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。また、コンピュータが読み出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼働しているオペレーティングシステム（ＯＳ）などが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【０２９９】
さらに、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張カードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれた後、そのプログラムコードの指示に基づき、その機能拡張カードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される場合も含まれることは言うまでもない。
【０３００】
本発明を上記記憶媒体に適用する場合、その記憶媒体には、先に説明した手順に対応するプログラムコードが格納されることになる。
【図面の簡単な説明】
【０３０１】
【図１】本発明の第１の実施形態に係わるカメラの構成を示した図である。
【図２】第１の実施形態における画像合成を説明する図である。
【図３】第１の実施形態における画面の欠けを説明するための図である。
【図４】第１の実施形態における撮影動作を示すフローチャートである。
【図５】第１の実施形態におけるシャッタモード選択動作を示すフローチャートである。
【図６】第２の実施形態におけるシャッタモード選択動作を示すフローチャートである。
【図７】第３の実施形態におけるカメラとパソコンの接続説明図である。
【図８】第３の実施形態における合成処理前のファイル整理状態の説明図である。
【図９】第３の実施形態における合成処理後のファイル整理状態の説明図である。
【図１０】第３の実施形態におけるカメラの撮影動作を示すフローチャートである。
【図１１】第３の実施形態におけるパソコンでの画像処理動作を示すフローチャートである。
【図１２】ＣＭＯＳ撮像素子の概略図である。
【図１３】ローリングシャッタの概略動作の説明図である。
【図１４】ＣＭＯＳ撮像素子の１画素の回路構成図である。
【図１５】電子シャッタのタイムチャートである。
【図１６】電子シャッタの問題点の説明図である。
【図１７】メカシャッタの概略説明図である。
【符号の説明】
【０３０２】
１０  光軸
１１ａ  撮影レンズ
１２ａ  シャッタ
１２ｂ  シャッタ駆動部
１２ｃ  レリーズ操作部
１２ｄ  シャッタモード切換操作部
１３ａ  絞り
１３ｂ  絞り駆動部
１３ｃ  絞り操作部
１４ａ  ＡＦ駆動モータ
１４ｂ  焦点駆動部
１５ａ  ズーム駆動モータ
１５ｂ  ズーム駆動部
１５ｃ  ズーム操作部
１６ａ  ストロボ
１６ｂ  閃光駆動部
１６ｃ  閃光操作部
１７ａ  スピーカー
１７ｂ  発音駆動部
１８  撮影制御部
１８ａ  撮影条件検出部
１８ｂ  モード選択部
１９  撮像部
３１  デジタルカメラ
３２  ＵＳＢケーブル
３３  ノートパソコン
３４  カードスロット
３５  フォルダ
３６  通常画像フォルダ
３７  合成用画像フォルダ
３９  画像（００１）
４１  画素領域
４２  垂直走査回路（Ｖｓ・ＳＲ）
４３  メモリ
４４  水平走査回路
４５  差動アンプ
４６  垂直走査回路（Ｖｃ・ＳＲ）
４７  読み出し時間
４８  撮像素子の各画素の垂直方向位置
４９  露光（蓄積）時間
１１０  Ａ／Ｄ変換部
１１１  信号処理部
１１２  信号切替部
１１３  画像記憶部
１１４  ズレ検出部
１１５  座標変換部
１１６  画像合成部（合成ブロック）
１１７ａ  第１の画像補正部
１１７ｂ  第２の画像補正部
１１８  表示部
１１８ａ  表示禁止部
１１９  記録部
１２０  防振操作部
１２１ａ  フレーム
１２２ａ  人物
１２３ａ  建物
１２４ａ  窓
１２５ａ  特徴点（エッジ）
１２６  座標変換方向（量）
１２９  ２枚の画像が重ならない領域
３１０  画像（００２）
３１１ａ  画像（００３ａ）
３１１ｂ  画像（００３ｂ）
３１１ｃ  画像（００３ｃ）
３１１ｄ  画像（００３ｄ）
３１１ｅ  画像（００３ｅ）
３１２  画像（００５）
３１３ａ  画像（００６ａ）
３１３ｂ  画像（００６ｂ）
３１３ｃ  画像（００６ｃ）
３１３ｄ  画像（００６ｄ）
３１４  画像（００８）
３１５  合成後画像（００４）
３１６  合成後画像（００７）
４１０  シャッタライン
４１１  読み出しライン
４１２  撮影構図
４１３ａ  被写体点（上部）
４１３ｂ  被写体点（下部）
４１３ｃ  被写体点（下部、時間遅れによりずれた点）
４１４  ブレ方向
４１５ａ  メカシャッタ開口タイミング
４１５ｂ  メカシャッタ閉じタイミング
【図１】
2006345317.tif 000003
【図２】
2006345317.tif 000004
【図３】
2006345317.tif 000005
【図４】
2006345317.tif 000006
【図５】
2006345317.tif 000007
【図６】
2006345317.tif 000008
【図７】
2006345317.tif 000009
【図８】
2006345317.tif 000010
【図９】
2006345317.tif 000011
【図１０】
2006345317.tif 000012
【図１１】
2006345317.tif 000013
【図１２】
2006345317.tif 000014
【図１３】
2006345317.tif 000015
【図１４】
2006345317.tif 000016
【図１５】
2006345317.tif 000017
【図１６】
2006345317.tif 000018
【図１７】
2006345317.tif 000019