(57)【要約】【課題】大容量のメモリを用いることなく、画像合成を行うことが可能な撮像装置の技術を提供する。【解決手段】撮像装置は、撮像素子１５を移動させて撮像素子１５によって平面内の異なる位置で取得される複数の画像のそれぞれにおいて、複数の画像のうちの取得済みの他の画像と重複しない非重複領域ＡＲ１，ＡＲ２，ＡＲ３を特定し、複数の画像のそれぞれを撮影するごとに、撮像素子１５によって取得された撮影画像に関する非重複領域の画像データを第１の記憶部２９に転送することによって、複数の画像の合成画像ＣＩ４を生成する。【選択図】図７
2008131056.tif 000002
【特許請求の範囲】
【請求項１】
撮像素子により取得される画像データを合成し、合成画像を生成する撮像装置であって、
前記合成画像の生成に用いられる第１の記憶部と、
撮影光学系の光軸に垂直な平面内で前記撮像素子を移動させる移動手段と、
前記撮像素子によって前記平面内の異なる位置で取得される複数の画像のそれぞれにおいて、前記複数の画像のうちの取得済みの他の画像と重複しない非重複領域を特定する非重複領域特定手段と、
前記複数の画像のそれぞれを撮影するごとに、前記撮像素子によって取得された撮影画像に関する非重複領域の画像データを前記第１の記憶部に転送することによって、前記複数の画像の合成画像を生成する画像データ転送手段と、
を備えることを特徴とする撮像装置。
【請求項２】
請求項１に記載の撮像装置において、
前記非重複領域は、前記移動手段による前記撮像素子の移動量に基づいて特定されることを特徴とする撮像装置。  
【請求項３】
請求項１に記載の撮像装置において、
前記撮像素子からの前記画像データの読み出しを制御する読み出し制御手段、
をさらに備え、
前記読み出し制御手段は、前記撮像素子により取得される画像全体のうちの一部領域である前記非重複領域の画像データを前記撮像素子から読み出すことを特徴とする撮像装置。
【請求項４】
請求項１に記載の撮像装置において、
前記撮像素子により取得される画像データを記憶する第２の記憶部、
をさらに備え、
前記画像伝送手段は、前記撮像素子によって取得された撮影画像に関する画像データを前記第２の記憶部に一旦転送し、
前記非重複領域特定手段は、前記第１の記憶部に記憶されている画像と、前記第２の記憶部に記憶されている画像とを比較し、両画像の一致位置を求めることによって、前記非重複領域を特定することを特徴とする撮像装置。
【請求項５】
請求項１に記載の撮像装置において、
手ブレによる前記撮像装置のブレ量を検出するブレ検出手段、
をさらに備え、
前記非重複領域は、前記複数の画像の露光時点相互間において発生する前記ブレ量と前記移動手段による前記撮像素子の移動量とに基づいて特定されることを特徴とする撮像装置。
【請求項６】
請求項１に記載の撮像装置において、
前記画像データ転送手段は、前記非重複領域の画像データを前記撮像素子から前記第１の記憶部へと他の記憶部を介することなく転送することを特徴とする撮像装置。
【請求項７】
請求項１に記載の撮像装置において、
前記撮像素子により取得される画像１枚分以下の記憶容量を有する第２の記憶部、
をさらに備え、
前記画像データ転送手段は、前記非重複領域の画像データを前記第２の記憶部を介して前記第１の記憶部へと転送することを特徴とする撮像装置。
【請求項８】
撮像素子により取得される画像データを合成し、合成画像を生成する撮像方法であって、
ａ）撮影光学系の光軸に垂直な平面内で前記撮像素子を移動させて、前記平面内の異なる位置で前記撮像素子による複数の画像を取得する工程と、
ｂ）前記複数の画像のそれぞれについて、取得済みの他の画像と重複しない非重複領域を特定する工程と、
ｃ）前記複数の画像のそれぞれを撮影するごとに、前記撮像素子によって取得された撮影画像に関する非重複領域の画像データを、前記合成画像の生成に用いられる第１の記憶部に転送することによって、前記複数の画像の合成画像を生成する工程と、
を備えることを特徴とする撮像方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、合成画像を生成する撮像装置および撮像方法に関する。
【背景技術】
【０００２】
近年、デジタル一眼レフカメラ（ＤＳＬＲ）が急速に普及している。デジタル一眼レフカメラでは、撮像素子を用いて被写体像を取得しているが、当該撮像素子はそのサイズが大きくなると高価になる。このため、普及価格帯のデジタル一眼レフカメラでは、ＡＰＳ−Ｃサイズ(16.7mm×23.4mm)と呼ばれる比較的サイズの小さな撮像素子が用いられていることが多い。
【０００３】
しかし、従来の銀塩フィルムカメラ用に開発されたレンズを、ＡＰＳ−Ｃサイズの撮像素子を採用したデジタル一眼レフカメラに用いた場合には、光学像の中心部分しか利用することができず、例えば、魚眼レンズなどではその効果を発揮することができない。
【０００４】
このため、安価な小サイズの撮像素子を採用した撮像装置において、光軸をシフトさせながら、撮影する被写体の範囲を変えて複数枚の画像を撮影し、後からそれらを合成することによって、大きなサイズの撮像素子を使用した場合と同様な撮影画像を取得可能な撮像装置が提案されている（特許文献１）。
【０００５】
【特許文献１】特開２００３−６０９６７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、上記特許文献１においては、画像の合成処理において、撮影された複数枚の画像それぞれを記憶するためのメモリと画像合成用のメモリとを用いているため、画像合成のために大容量のメモリを必要としている。
【０００７】
そこで、本発明は、大容量のメモリを用いることなく、画像の合成を実行することが可能な撮像装置および撮像方法を提供することを目的とする。
【課題を解決するための手段】
【０００８】
本発明は、上記課題を解決すべくなされたものであり、その第１の側面は、撮像素子により取得される画像データを合成し合成画像を生成する撮像装置であって、前記合成画像の生成に用いられる第１の記憶部と、撮影光学系の光軸に垂直な平面内で前記撮像素子を移動させる移動手段と、前記画像データを前記第１の記憶部に転送する画像データ転送手段と、前記撮像素子によって前記平面内の異なる位置で取得される複数の画像のそれぞれにおいて、前記複数の画像のうちの取得済みの他の画像と重複しない非重複領域を特定する非重複領域特定手段と、前記複数の画像のそれぞれを撮影するごとに、前記撮像素子によって取得された撮影画像に関する非重複領域の画像データを前記第１の記憶部に転送することによって、前記複数の画像の合成画像を生成する画像データ転送手段とを備えることを特徴とする撮像装置である。
【０００９】
また、本発明の第２の側面は、撮像素子により取得される画像データを合成し、合成画像を生成する撮像方法であって、ａ）撮影光学系の光軸に垂直な平面内で前記撮像素子を移動させて、前記平面内の異なる位置で前記撮像素子による複数の画像を取得する工程と、ｂ）前記複数の画像のそれぞれについて、取得済みの他の画像と重複しない非重複領域を特定する工程と、ｃ）前記複数の画像のそれぞれを撮影するごとに、前記撮像素子によって取得された撮影画像に関する非重複領域の画像データを、前記合成画像の生成に用いられる第１の記憶部に転送することによって、前記複数の画像の合成画像を生成する工程とを備えることを特徴とする撮像方法である。
【発明の効果】
【００１０】
本発明によれば、撮像素子を移動させて撮像素子によって平面内の異なる位置で取得される複数の画像のそれぞれにおいて、複数の画像のうちの取得済みの他の画像と重複しない非重複領域を特定し、複数の画像のそれぞれを撮影するごとに、撮像素子によって取得された撮影画像に関する非重複領域の画像データを第１の記憶部に転送することによって、複数の画像の合成画像を生成するので、合成画像の生成に必要なメモリ量を削減することが可能になる。
【発明を実施するための最良の形態】
【００１１】
以下、本発明の実施形態を図面に基づいて説明する。
【００１２】
＜１．第１実施形態＞
＜１−１．構成＞
＜１−１−１．外観構成＞
図１および図２は、本発明の第１実施形態に係る撮像装置１Ａの外観構成を示す図である。ここで、図１は、撮像装置１Ａの正面外観図であり、図２は、撮像装置１Ａの背面外観図である。この撮像装置１Ａは、レンズ交換式一眼レフレックスタイプのデジタルカメラとして構成されている。
【００１３】
図１に示すように、撮像装置１Ａは、カメラ本体部（カメラボディ）２を備えている。このカメラ本体部２に対して、交換式の撮影レンズユニット（交換レンズ）３が着脱可能である。
【００１４】
撮影レンズユニット３は、主として、鏡胴３６、ならびに、鏡胴３６の内部に設けられるレンズ群３７（図３参照）及び絞り等によって構成される。レンズ群３７には、光軸方向に移動することによって焦点位置を変更するフォーカスレンズ等が含まれている。
【００１５】
カメラ本体部２は、撮影レンズユニット３が装着される円環状のマウント部Ｍｔを正面略中央に備え、撮影レンズユニット３を着脱するための着脱ボタン８９を円環状のマウント部Ｍｔ付近に備えている。
【００１６】
また、カメラ本体部２は、その正面左上部にモード設定ダイアル８２を備え、その正面右上部に制御値設定ダイアル８６を備えている。モード設定ダイアル８２を操作することによって、カメラの各種モード（各種撮影モード（人物撮影モード、風景撮影モード、連続撮影モード、および撮影範囲拡大モード等）、撮影した画像を再生する再生モード、および外部機器との間でデータ交信を行う通信モード等を含む）の設定動作（切替動作）を行うことが可能である。また、制御値設定ダイアル８６を操作することによれば、各種撮影モードにおける制御値を設定することが可能である。
【００１７】
また、カメラ本体部２は、正面左端部に撮影者が把持するためのグリップ部１４を備えている。グリップ部１４の上面には露光開始を指示するためのレリーズボタン１１が設けられている。グリップ部１４の内部には電池収納室とカード収納室とが設けられている。電池収納室にはカメラの電源として、例えば４本の単３形乾電池が収納されており、カード収納室には撮影画像の画像データを記録するためのメモリカード９０（図４参照）が着脱可能に収納されるようになっている。
【００１８】
レリーズボタン１１は、半押し状態（Ｓ１状態）と全押し状態（Ｓ２状態）の２つの状態を検出可能な２段階検出ボタンである。レリーズボタン１１が半押しされＳ１状態になると、被写体に関する記録用静止画像（本撮影画像）を取得するための準備動作（例えば、ＡＦ制御動作およびＡＥ制御動作等）が行われる。また、レリーズボタン１１がさらに押し込まれてＳ２状態になると、当該本撮影画像の撮影動作（撮像素子１５（後述）を用いて被写体像に関する露光動作を行い、その露光動作によって得られた画像信号に所定の画像処理を施す一連の動作）が行われる。
【００１９】
図２において、カメラ本体部２の背面略中央上部には、光学ファインダ１０が設けられている。光学ファインダ１０には、撮影レンズユニット３からの被写体像が導かれる。撮影者は、光学ファインダ１０を覗くことによって、被写体を視認することができる。より具体的には、撮影レンズユニット３を通過してきた被写体像を、ミラー機構１０３(図３参照)で上方に反射させ、ペンタプリズムを通した像を接眼レンズを介して見ることで、被写体像を視認することができる。このように、光学ファインダ１０を用いて構図決めを行うことが可能である。なお、本撮影画像の撮影時においては、ミラー機構１０３は被写体像の光路から待避し、撮影レンズユニット３からの光がシャッタユニット４０の開放タイミングに合わせて撮像素子１５に到達し、被写体に係る撮影画像（画像データ）が得られる。
【００２０】
カメラ本体部２の背面の略中央には、背面モニタ１２が設けられている。背面モニタ１２は、例えばカラー液晶ディスプレイ（ＬＣＤ）として構成される。背面モニタ１２は、撮影条件等を設定するためのメニュー画面を表示したり、再生モードにおいてメモリカード９０に記録された撮影画像を再生表示したりすることができる。
【００２１】
背面モニタ１２の左上部にはメインスイッチ８１が設けられている。メインスイッチ８１は２点スライドスイッチからなり、接点を左方の「ＯＦＦ」位置に設定すると、電源がオフになり、接点の右方の「ＯＮ」位置に設定すると、電源がオンになる。
【００２２】
背面モニタ１２の右側には方向選択キー８４が設けられている。この方向選択キー８４は円形の操作ボタンを有し、この操作ボタンにおける上下左右の４方向の押圧操作と、右上、左上、右下及び左下の４方向の押圧操作とが、それぞれ検出されるようになっている。なお、方向選択キー８４は、上記８方向の押圧操作とは別に、中央部のプッシュボタンの押圧操作も検出されるようになっている。
【００２３】
背面モニタ１２の左側には、メニュー画面の設定、画像の削除などを行うための複数のボタンからなる設定ボタン群８３が設けられている。
【００２４】
＜１−１−２．内部構成＞
次に、撮像装置１Ａの内部構成について説明する。図３は、撮像装置１Ａの縦断面図である。図３に示すように、撮像装置１Ａの内部には、撮像素子１５、ファインダ部１０２（ファインダ光学系）、ミラー機構１０３、焦点検出部１０７、ブレ補正ユニット２００及びシャッタユニット４０などが備えられている。
【００２５】
撮像素子（撮像センサ）１５（１５ａ）は、撮像装置１Ａに交換レンズ２が装着された場合の当該交換レンズ２が備えているレンズ群３７の光軸Ｌ上において、光軸Ｌに対して垂直な平面内に配置されている。撮像素子１５ａとしては、例えばフォトダイオードを有して構成される複数の画素がマトリクス状に２次元配置され、各画素の受光面に、それぞれ分光特性の異なる例えばＲ（赤）、Ｇ（緑）、Ｂ（青）のカラーフィルタが１：２：１の比率で配設されてなるベイヤー配列のＣＭＯＳカラーエリアセンサ（単に、「ＣＭＯＳ」とも称する）が用いられる。撮像素子１５ａは、レンズ群３７により結像された被写体の光像をＲ（赤）、Ｇ（緑）、Ｂ（青）各色成分のアナログの電気信号（画像信号）に変換し、Ｒ、Ｇ、Ｂ各色の画像信号として出力する。
【００２６】
上記の光軸Ｌ上において、被写体光をファインダ部１０２へ向けて反射される位置には、ミラー機構１０３（反射板）が配置されている。交換レンズ２を通過した被写体光は、ミラー機構１０３（後述の主ミラー１０３１）によって上方へ反射され、焦点板１０４（ピントグラス）に結像される。交換レンズ２を通過した被写体光の一部はこのミラー機構１０３を透過する。
【００２７】
ファインダ部１０２は、ペンタプリズム１０５と接眼レンズ１０６と光学ファインダ１０とを備えている。ペンタプリズム１０５は、断面５角形を呈し、その下面から入射された被写体像を内部での反射によって当該光像の天地左右を入れ替えて正立像にするためのプリズムである。接眼レンズ１０６は、ペンタプリズム１０５により正立像にされた被写体像を光学ファインダ１０の外側に導く。このような構成により、ファインダ部１０２は、撮影待機時において被写界を確認するための光学ファインダとして機能する。
【００２８】
ミラー機構１０３は、主ミラー１０３１及びサブミラー１０３２から構成されており、主ミラー１０３１の背面側において、サブミラー１０３２が主ミラー１０３１の背面に向けて倒れるように回動可能に設けられている。主ミラー１０３１を透過した被写体光の一部はサブミラー１０３２によって反射され、この反射された被写体光は焦点検出部１０７に入射される。
【００２９】
上記のミラー機構１０３は、所謂クイックリターンミラーとして構成されており、露光時には回転軸１０３３を回動支点として矢印Ａに示す上方に向けて跳ね上がり、焦点板１０４の下方位置で停止する。この際、サブミラー１０３２は、主ミラー１０３１の背面に対して矢印Ｂで示す方向に回転軸１０３４を支点として回動し、上記のミラー機構１０３が焦点板１０４の下方位置で停止したときには、主ミラー１０３１と略平行となるように折り畳まれた状態となる。これにより、交換レンズ２からの被写体光がミラー機構１０３によって遮られることなく撮像素子１５ａ上に届き、当該撮像素子１５ａが露光される。露光が終了すると、ミラー機構１０３は元の位置（図３に示す位置）に復帰する。
【００３０】
焦点検出部１０７は、被写体のピント情報を検出する測距素子等からなる所謂ＡＦセンサとして構成されている。この焦点検出部１０７は、ミラー機構１０３の底部に配設されており、例えば周知の位相差検出方式により合焦位置を検出する。
【００３１】
撮像素子１５ａは、ブレ補正ユニット２００にて光軸Ｌと直交する平面において二次元的に移動可能に保持されている。また、撮像素子１５ａの光軸方向直前には、赤外線の入射を防止するための（ＩＲカット用の）及び疑似カラーや色モアレの発生を防止するためのローパスフィルタ１０８が配置されており、さらにローパスフィルタ１０８の直前には、シャッタユニット４０が配置されている。このシャッタユニット４０は、上下方向に移動する幕体を備え、光軸Ｌに沿って撮像素子１５ａに導かれる被写体光の光路開口動作及び光路遮断動作を行うメカニカルフォーカルプレーンシャッタである。
【００３２】
撮像装置１Ａの上記各部は、例えば鉄などの金属材料からなるシャーシによって互いに連結（固定）されている。本実施形態では上記のシャーシが、前面シャーシ（図示省略）、側面シャーシ１８３及び底面シャーシ１８４から構成されてなる例を示している。これらのシャーシは、上述した撮像装置１Ａ内の各部品を支持する支持材としての役目を果たす。そして、シャーシ同士がビスにより固定され、さらにはシャーシの連結構造体と枠体１２０とがビスにより固定されることで、これらの部材が一体構造物化されているものである。なお、底面シャーシ１８４には、上述した三脚取付部１８５が設けられている。
【００３３】
＜１−１−３．電気的構成＞
次に、撮像装置１Ａの電気的構成について説明する。図４は、撮像装置１Ａの機能ブロック図である。
【００３４】
図４に示されるように、撮像素子１５ａ、ブレ補正ユニット２００、撮像素子位置センサ５８、ブレ検出センサ６０、レリーズボタン１１、操作部８０、背面モニタ１２、およびフラッシュ回路４４１等の撮像装置１Ａの各処理部は全体制御部５００に電気的に接続され、全体制御部５００によって動作制御される。
【００３５】
交換レンズ２は、ズーム・フォーカス駆動部３７１および絞り駆動部３３１を備えている。ズーム・フォーカス駆動部３７１は、ユーザにより設定される焦点距離となるように、また、焦点が合うように（フォーカシング）レンズ群３７に含まれるレンズを適宜光軸方向に駆動するものである。また、絞り駆動部３３１は、全体制御部５００により設定される絞り値となるように絞り３３の開口径を調整するものである。ズーム・フォーカス駆動部３７１および絞り駆動部３３１も電気的に全体制御部５００に接続され、全体制御部５００の制御下にて動作する。
【００３６】
シャッタユニット４０は、上述したように上下方向に移動する幕体を備えたフォーカルプレーンシャッタである。撮影動作時には、幕体が駆動して、シャッタユニット４０が開放状態となる。このとき、幕体が機械的に駆動するスイッチ（メカスイッチ）ＭＳに作用することで、全体制御部５００に対して信号を発する。フラッシュ撮影時には、メカスイッチＭＳからの信号に応答して、全体制御部５００がフラッシュ回路４４１を介して内蔵フラッシュ８を発光させる。
【００３７】
また、図４において、Ａ／Ｄ変換部２６、画像処理部２７、画像データ転送部２８および画像メモリ２９は、撮像素子１５ａにて取得された画像を扱う処理部を示している。すなわち、撮像素子１５ａにて取得されたアナログの画像信号は、Ａ／Ｄ変換部２６にてデジタル信号に変換され、画像処理部２７にて所定の画像処理がなされた後、画像データ転送部２８を介して画像メモリ２９に格納される。画像メモリ２９に格納された画像は、記録用画像としてメモリカード９０へ記録されることとなる。
【００３８】
このような撮像素子１５ａにより取得された画像に対する各種の処理も全体制御部５００の制御に基づいて行われる。なお、画像メモリ２９は、撮像素子１５ａにより取得された画像１枚分の画像データを格納可能な容量（記憶容量）を有するだけでなく、撮像素子１５ａにより取得される複数枚の画像に基づいて生成される合成画像の画像データを格納可能な容量を有している。
【００３９】
フラッシュ回路４４１は、内蔵フラッシュ８の発光を制御するための回路であり、全体制御部５００からの信号に基づいて、フラッシュ回路４４１により、内蔵フラッシュ８の発光タイミングおよび発光時間（発光量）が調整される。
【００４０】
測光部４１０は、例えば、撮像素子１５ａの近傍に設置され、交換レンズ２を介して撮像素子１５ａに向けて入射される光を受光することで、被写体の輝度を検出するものである。この測光部４１０で検出された被写体の輝度を示す信号（輝度情報）は、全体制御部５００に送信される。
【００４１】
操作部８０は、メインスイッチ８１、モード設定ダイアル８２等を含むものである。
【００４２】
全体制御部５００は、マイクロコンピュータを備えて構成される。具体的には、全体制御部５００は、各種演算処理を行うＣＰＵ７０と、演算を行うための作業領域となるＲＡＭ７５と、制御プログラム等が記憶されるＲＯＭ７６とを備え、上述したような撮像装置１Ａの各処理部の動作を統括的に制御する。ＲＯＭ７６としては、例えば、データの追記が可能なＥＥＰＲＯＭが採用される。これにより、ＲＯＭ７６は、データの追記が可能で、かつ、電源を落とした場合でもそのデータの内容を保持する。
【００４３】
全体制御部５００の各種の機能は、予めＲＯＭ７６内に記憶される制御プログラムに従ってＣＰＵ７０が演算処理を行うことにより実現される。図４において、ＡＦ／ＡＥ制御部７１、撮像素子制御部７２、ブレ補正制御部７３、および非重複領域演算部７４は、制御プログラムに従ってＣＰＵ７０が演算処理を行うことにより実現される機能の一部を模式的に示している。
【００４４】
ＡＦ／ＡＥ制御部７１は、自動焦点制御（ＡＦ）及び自動露出制御（ＡＥ）のために必要な動作制御を行う。すなわち、ＡＦのために、上述した焦点検出部（位相差ＡＦモジュール）１０７の出力信号を用いて位相差検出方式による合焦制御を行う。また、ＡＥのために、図示省略の測光部４１０で検出された被写体の輝度情報等に基づいて、当該被写体における適正な露出量（シャッタ速度等を含む）を求める演算を行う。
【００４５】
撮像素子制御部７２は、撮像素子１５ａによる画像信号の読み出し処理を制御する。具体的には、撮像素子制御部７２に備えられたタイミングジェネレータによって撮像素子１５ａへ駆動制御信号を出力し、被写体像を所定時間だけ露光させて画像信号に変換させ、当該画像信号をＡ／Ｄ変換部２６に出力させる。また、撮像素子制御部７２は、撮像素子１５ａ内の一部領域のみから画像信号の読み出しを行う部分読み出し処理をも制御する。
【００４６】
ブレ補正制御部７３は、手ブレ補正機能のための制御を行う。具体的には、ブレ補正制御部７３は、ブレ検出センサ６０から入力される２つの角速度に基づいて、振動による被写体像のブレ量およびその向きに対応する撮像素子１５ａの移動すべき位置（以下、「移動先位置」という。）を導出する。
【００４７】
さらにブレ補正制御部７３は、撮像素子位置センサ５８から得られる撮像素子１５ａの現状位置と、導出した移動先位置とを比較して撮像素子１５ａの移動すべき移動量および向きを導出する。さらに、導出した移動量および向きに応じた駆動パルスを生成し、この駆動パルスをブレ補正ユニット２００のピッチ方向アクチュエータ２０４とヨー方向アクチュエータ２０５とに送信することにより、撮像素子１５ａを移動先位置に移動させる。このように、撮像装置１Ａの振動に応じた移動先位置を導出し、撮像素子１５ａの現状位置と移動先位置とを比較して撮像素子１５ａの位置を移動先位置に順次移動させるクローズドループ制御が行われることにより、画像中の被写体像のブレが補正される。
【００４８】
また、ブレ補正制御部７３は、モード設定ダイアル８２によって撮影範囲拡大モードが選択された場合には、撮像素子１５ａを移動させて撮影範囲の変更を行うことによって、撮像素子１５ａよりも大きな面積を有する被写体像に関する画像データの取得を可能にさせる。詳細は、後述する。
【００４９】
非重複領域演算部７４は、撮像素子１５ａを移動させて撮影範囲の変更を行い、新たに撮影可能となった領域において、未だに画像データが取得されていない領域（非重複領域）の特定を撮像素子１５ａの移動量に基づいて行う。
【００５０】
＜１−１−４．ブレ補正ユニット＞
次に、ブレ補正ユニット２００について説明する。図５は、ブレ補正制御部７３の機能ブロック図を含むブレ補正機構の概略図である。
【００５１】
図５に示されるように、ブレ補正ユニット２００は、撮像素子ホルダ２０１とスライダ２０２と振れ台板２０３と、ピッチ方向アクチュエータ２０４と、ヨー方向アクチュエータ２０５とを備えて構成されている。
【００５２】
撮像素子ホルダ２０１は、撮像素子１５ａとローパスフィルタ１０８とを保持する移動基板である。
【００５３】
振れ台板２０３は、撮像素子ホルダ２０１が保持された状態のスライダ２０２を保持するためのブレ補正ユニット２００における所謂基台をなすものである。
【００５４】
そして、撮像素子ホルダ２０１の上下方向における一端辺部に設けられたヨー方向アクチュエータ２０５の駆動に応じて、振れ台板２０３に対して左右方向にスライダ２０２と撮像素子ホルダ２０１とが一体的にスライド移動することで撮像素子１５ａのヨー（Ｙ）方向の振れが補正される。また、撮像素子ホルダ２０１の左右方向における一端辺部に設けられたピッチ方向アクチュエータ２０４の駆動に応じて、スライダ２０２に対して撮像素子ホルダ２０１が上下方向にスライド移動することで撮像素子１５ａのピッチ（Ｐ）方向の振れが補正される。
【００５５】
また、撮像素子位置センサ５８は、磁石５８ａと４つのホール素子５８ｂとによって構成され、ヨー方向およびピッチ方向に移動された撮像素子１５ａの位置を検出する。
【００５６】
ブレ補正制御部７３は、ブレ検出部７３１と係数変換部７３２と位置検出処理部７３３と駆動制御部７３４とシーケンスコントロール部７３５と駆動パルス発生部７３６とを有している。
【００５７】
ブレ検出部７３１は、ピッチ方向ジャイロ６０ａとヨー方向ジャイロ６０ｂとから入力される角速度信号に基づいて、撮像装置１Ａのヨー方向およびピッチ方向のブレ量をそれぞれ算出する。
【００５８】
係数変換部７３２は、ブレ検出部７３１によって算出された各方向のブレ量を、撮像素子１５ａの各方向の移動量に変換する。
【００５９】
位置検出処理部７３３は、撮像素子位置センサ５８を構成するホール素子５８ｂの出力電圧を検出し、撮像素子１５ａの位置を算出する。
【００６０】
駆動制御部７３４は、撮像素子１５ａの位置情報と撮像素子１５ａの各方向の移動量とに基づいて、駆動信号を出力する。当該駆動信号は、ピッチ方向アクチュエータ２０４とヨー方向アクチュエータ２０５とを実際に駆動する駆動パルスを発生させる駆動パルス発生部７３６に入力される。
【００６１】
シーケンスコントロール部７３５は、レリーズボタン１１の押下を検出すると、係数変換部７３２と位置検出処理部７３３と駆動制御部７３４とによる上記各動作を制御し、ブレ補正ユニット２００によるブレ補正動作を実行させる。
【００６２】
＜１−２．動作＞
次に、モード設定ダイアル８２によって撮影範囲拡大モードが選択された場合の撮像装置１Ａの動作について説明する。図６は、撮像装置１Ａの背面から見た場合の撮像面における被写体像ＧＩと、合成画像ＣＩとを示す図である。図７は、撮像素子１５ａの移動と画像メモリ２９に転送される領域とを示す図である。
【００６３】
撮影範囲拡大モードでは、図６に示されるような撮像素子１５ａよりも大きな面積を有する領域ＲＧに結像する被写体像ＧＩを当該撮像素子１５ａを用いて撮影し、所望の画像（合成画像）ＣＩを取得することが可能となる。
【００６４】
具体的には、撮像装置１Ａは、撮影範囲拡大モードにおいてレリーズボタン１１のＳ２状態が検出されたときに、ブレ補正ユニット２００を制御して撮像素子１５ａをレンズ３７の光軸に対して垂直な平面内の異なる位置（ここでは、４つの位置）に順次に移動させて撮影範囲を変更し、撮影可能領域を拡大する。そして、撮像装置１Ａは、各位置における画像データをそれぞれ取得し、各画像データを用いて画像合成を行う。
【００６５】
より詳細には、図７に示されるように、１回目の露光の際には、撮像素子１５ａが撮像装置１Ａ背面から見て右下に移動され、台形の物体が存在する領域の撮影が行われる。そして、当該撮影によって取得された画像データが画像メモリ２９に転送される。これにより、画像ＣＩ１が生成される。
【００６６】
２回目の露光の際には、撮像素子１５ａは撮像装置１Ａ背面から見て右上に移動され、画像データの取得が行われる。当該画像データの取得は、２回目の露光による撮影画像全体のうち１回目の露光によって取得された画像ＣＩ１と重複しない非重複領域ＡＲ１（ここでは、円弧形の物体が存在する横線領域）について実行され、当該非重複領域ＡＲ１の画像データが画像メモリ２９に転送される。これにより、合成画像ＣＩ２が生成される。
【００６７】
３回目の露光の際には、撮像素子１５ａは撮像装置１Ａ背面から見て左上に移動され、画像データの取得が行われる。当該画像データの取得は、３回目の露光による撮影画像全体のうち１回目の露光と２回目の露光とによって取得された合成画像ＣＩ２と重複しない非重複領域ＡＲ２（ここでは、三角形の物体が存在する横線領域）について実行され、当該非重複領域ＡＲ２の画像データが画像メモリ２９に転送される。これにより、合成画像ＣＩ３が生成される。
【００６８】
４回目の露光の際には、撮像素子１５ａは撮像装置１Ａ背面から見て左下に移動され、４回目の露光による撮影画像全体のうち１回目の露光と２回目の露光と３回目の露光とによって取得された合成画像ＣＩ３と重複しない非重複領域ＡＲ３（ここでは、ハート形の物体が存在する横線領域）について画像データの取得が行われる。そして、当該非重複領域ＡＲ３の画像データが画像メモリ２９に転送される。これにより、画像メモリ２９に格納された合成画像ＣＩ４は、所望の画像として取得される。
【００６９】
このように、撮像装置１Ａにおいては、撮像素子１５ａを移動させて撮影範囲を変更し、取得された画像データを合成することによって、撮像素子１５ａよりも大きな面積を有する領域ＲＧに結像する被写体像ＧＩについての画像を取得することができる。
【００７０】
ここで、非重複領域の画像データの取得と当該画像データの転送について説明する。
【００７１】
非重複領域の特定は、撮像素子１５ａの移動量ＭＶｊ（図７参照）に基づいて、全体制御部５００の非重複領域演算部７４において実行される。非重複領域演算部７４は、撮像素子１５ａの移動によって撮影可能となった全領域（図中において黒枠で囲まれた領域）のうち、未だに画像データが取得されていない領域（取得済みの他の画像データと重複しない領域）を非重複領域として特定する。
【００７２】
具体的には、撮像装置１Ａのブレが存在しないものと仮定すると、撮像素子１５ａの移動によって撮影可能となった全領域の画像と、移動前に撮影可能な領域の画像とのズレ量は、撮像素子１５ａの移動量ＭＶｊに等しいことから、既に取得された撮影領域から当該移動によって拡大された撮影領域は、撮像素子１５ａの移動量ＭＶｊに基づいて特定される。
【００７３】
例えば、図７（ｂ）に示されるように、撮像素子１５ａをＹ方向に移動量ＭＶａ分移動させた場合には、当該移動によって撮像素子１５ａの上辺ＵＨが移動した領域（横線ハッチング）を非重複領域として特定する。そして、撮像素子１５ａにおいて当該非重複領域に対応する各画素を決定する。
【００７４】
次に、撮像素子制御部７２によって、非重複領域に対応する各画素に対して、画像信号の読み出し処理が実行される。なお、本実施形態において撮像素子１５ａとして採用するＣＭＯＳは、画像信号の読み出しを画素ごとに実行可能であるため、撮像素子１５ａ内の特定領域についての画像信号のみを読み出す処理（部分読み出し処理）は、容易に実行することが可能である。
【００７５】
このように、２回目以降の露光においては、撮像素子１５ａにより取得される画像全体のうちの一部領域である非重複領域についてのみ読み出し処理を実行するので、撮像素子１５ａからの画像信号の取得を高速化することが可能となる。
【００７６】
次に、非重複領域の画像データの転送手法について説明する。図８は、画像メモリ２９における画像データの格納状態を示す図である。なお、図８においては、１回目の露光により取得される画像データＴＲ１およびこれに関連する情報を砂地ハッチングで表し、２回目の露光により取得される画像データＴＲ２およびこれに関連する情報を縦線ハッチングで表し、３回目の露光により取得される画像データＴＲ３およびこれに関連する情報を斜線ハッチングで表している。また、図中の画像メモリ２９は、画像データが格納されている様子を概念的に表すものであり、画像ＣＩは、画像メモリ２９に格納された画像データに基づいて表現される合成画像を表している。また、画像（合成画像）ＣＩにおけるラインＬＮ１，ＬＮ２，ＬＮ３，ＬＮａ，ＬＮｂは、画像を構成する水平方向の画素列を表し、ここでは、簡単化して記載している。
【００７７】
上述のように、撮像素子１５ａにて取得されたアナログの画像信号は、Ａ／Ｄ変換部２６にてデジタル信号に変換され、画像処理部２７にて所定の画像処理がなされた後、画像データ転送部２８に入力される。
【００７８】
画像データ転送部２８は、全体制御部５００において決定された画像データの格納先に基づいて、入力された画像データの画像メモリ２９における格納先を設定し、画像メモリ２９に転送する。
【００７９】
また、全体制御部において決定される画像データの格納先は、画像メモリ２９において合成画像が生成されるように設定される。具体的には、画像データの格納先は、画像メモリ２９に格納された画像データを画像として現した場合に、合成画像を構成するような格納先に設定される。
【００８０】
より詳細には、画像メモリ２９において合成画像の１ライン毎に、画像データの格納先が規定されている場合には、画像データ転送部に入力された画像データは、対応する格納先に１ライン毎に分けて転送される。
【００８１】
例えば、合成画像ＣＩのラインＬＮ１，ＬＮ２，ＬＮ３に対応する格納先は、それぞれ格納領域ＫＭ１，ＫＭ２，ＫＭ３として規定されていた場合は、１回目の露光により取得された領域（砂地ハッチング）の画像データＴＲ１においてラインＬＮ１，ＬＮ２，ＬＮ３，ＬＮａに対応する画像データは、それぞれ格納領域ＫＭ１，ＫＭ２，ＫＭ３，ＫＭａの上段部分（砂地ハッチング）に転送され格納される。
【００８２】
また、２回目の露光により取得された非重複領域（縦線ハッチング）の画像データＴＲ２においてラインＬＮｂに対応する画像データは、画像メモリ２９においてラインＬＮｂに対応する格納領域ＫＭｂの上段部分（縦線ハッチング）に転送され格納される。
【００８３】
そして、３回目の露光により取得された非重複領域（斜線ハッチング）の画像データＴＲ３においてラインＬＮ３，ＬＮａ，ＬＮｂに対応する画像データは、それぞれ格納領域ＫＭ３，ＫＭａ，ＫＭｂの下段部分に転送され格納される。
【００８４】
このように、撮像素子１５ａを同一平面内で移動させて異なる位置で４枚の画像のそれぞれを撮影するごとに、撮像素子によって取得された撮影画像に関する非重複領域の画像データを撮像素子１５ａから画像メモリ２９へと他の記憶部を介することなく転送（直接転送）することによれば、合成画像の生成に必要なメモリ量を削減することができる。より詳細には、例えば、４回の撮影によって取得された４枚分の画像データをそれぞれ一旦画像合成用のメモリ以外の別個のメモリに格納し、さらに画像合成用のメモリを用いて合成画像を生成する場合に比べて、４枚分の画像データに相当する記憶容量のメモリを削減することが可能となる。
【００８５】
以上のように、撮像装置１Ａは、撮像素子１５を移動させて撮影範囲を変更し、当該撮像素子１５によって平面内の異なる位置で取得される複数の画像のそれぞれにおいて、複数の画像のうちの取得済みの他の画像と重複しない非重複領域を特定し、複数の画像のそれぞれを撮影するごとに、撮像素子１５によって取得された撮影画像に関する非重複領域の画像データを画像メモリ２９に転送することによって、複数の画像の合成画像を生成するので、合成画像の生成に必要なメモリ量を削減することが可能になる。
【００８６】
また、撮影範囲を変更させる手法としては、本実施形態のように撮像素子１５を移動させる手法の他に、レンズを移動させることによってレンズの光軸をシフトさせる手法が存在する。しかしながら、撮影範囲を変更させる手法としてレンズの光軸をシフトさせる手法を採用した場合には、生成される合成画像が不自然になるという問題がある。
【００８７】
具体的には、糸巻き型の歪曲収差があるレンズを用いて、２枚の画像を撮影して、合成画像を生成する場合を想定して説明する。図９は、レンズの光軸をシフトさせる手法を採用した場合に生成される合成画像を示す図であり、図１０は、撮像素子１５を移動させる手法を採用した場合に生成される合成画像を示す図である。
【００８８】
図９に示されるように、長方形の被写体ＨＴをレンズＬＮを移動させて光軸Ｌをシフトさせることにより、撮像素子１５を用いて２回に分けて撮影すると、画像ＧＰ１，ＧＰ２が取得される。
【００８９】
ここで、糸巻き型の歪曲収差があるレンズＬＮを用いて撮影を行うと、レンズの光軸中心において最も凹んだ画像が取得される。このため、画像ＧＰ１，ＧＰ２における被写体ＨＴ１，ＨＴ２は、それぞれ矢印ＰＱ１，ＰＱ２において最も凹んだ状態になる。
【００９０】
したがって、これらの画像ＧＰ１，ＧＰ２を合成させると、矢印ＰＱ３，ＰＱ４において被写体が凹み、接合部分（つなぎ目）ＳＧにおいて不自然で異常な画像ＣＩａが合成画像として取得される。
【００９１】
一方、撮像素子１５を移動させて長方形の被写体ＨＴを撮影した場合に取得される２枚の画像ＧＰ３，ＧＰ４は、レンズの光軸Ｌが移動しないため図１０のようになる。
【００９２】
したがって、これらの画像ＧＰ３，ＧＰ４を合成させると、接合部分ＳＧにおいて自然な画像ＣＩｂが合成画像として取得され、当該合成画像は、大きなサイズの撮像素子を用いて撮影した場合と同じ画像となる。
【００９３】
また、周辺減光が大きいレンズまたは周辺解像力が悪いレンズなどにおいても、同様の現象が生じる。
【００９４】
このように、撮影範囲を変更させる手法として、レンズの光軸をシフトさせる手法を採用した場合には、生成される合成画像が不自然な画像となる。一方、上述のように、撮像素子１５を移動させる手法を採用した場合には、自然な画像を取得することが可能となる。つまり、撮影範囲を変更させる手法としては、レンズの光軸をシフトさせる手法よりも撮像素子１５を移動させる手法の方が有効であると言える。
【００９５】
＜２．第２実施形態＞
次に、本発明の第２実施形態について説明する。第２実施形態では、撮像素子１５（１５ｂ）として、ＣＣＤ（Charge Coupled Device）を採用する場合について説明する。
【００９６】
＜構成＞
第２実施形態に係る撮像装置１Ｂは、撮像素子１５ｂとしてＣＣＤが用いられる点以外は、撮像装置１Ａと同様の構成を有しており、以下では相違する部分を中心に説明する。
【００９７】
＜読み出し処理＞
以下では、撮像装置１Ｂにおける撮像素子（ＣＣＤ）１５ｂからの画像信号の読み出し処理について説明する。図１１は、ＣＣＤ１５ｂの内部構成を示す図である。なお、図１１では、撮像装置１Ｂの正面から見た場合のＣＣＤ１５ｂの内部構成が簡単化されて表現されている。
【００９８】
図１１に示されるように、本実施形態で用いられるＣＣＤ１５ｂは、フォトダイオードを有して構成される画素ＲＨと、画像信号を水平方向に転送する水平転送路ＨＣｉと、取得された画像信号を増幅させる信号増幅器ＥＭとを有している。ＣＣＤ１５ｂでは、一定時間の受光により各画素ＲＨに蓄積された画像信号が、水平方向の１ラインごとに水平転送路ＨＣｉを用いて信号増幅器ＥＭにそれぞれ転送される。
【００９９】
撮像装置１Ｂにおいては、撮像装置１Ａと同様に、撮像素子１５ｂ内の一部領域のみから、画像信号の読み出しを行う部分読み出し処理が実行される。
【０１００】
例えば、図７（ｂ）の非重複領域ＡＲ１に対応する領域（図１１において点線により囲まれる領域）の画像信号を取得する場合には、撮像素子制御部７２から領域ＡＲ１の画像信号を取得する旨の制御信号が出力され、領域ＡＲ１に含まれる水平ラインの各画素の画像信号が、当該領域ＡＲ１の水平転送路ＨＣ１，ＨＣ２を用いて取得される。一方、領域ＡＲ１以外の他の領域に対しては、画像信号を廃棄する旨の制御信号（高速読出指令信号）が出力され、他の領域における水平転送路ＨＣｉを用いて画像信号の廃棄処理が高速に行われる。
【０１０１】
また、図７（ｄ）の非重複領域ＡＲ３に対応する領域（図１１において一点鎖線により囲まれる領域）の画像信号を取得する場合には、撮像素子制御部７２から領域ＡＲ３の画像信号を取得する旨の制御信号が出力され、領域ＡＲ３における水平転送路ＨＣ５１，ＨＣ５２，ＨＣ５３により画像信号の転送が開始される。そして、当該領域ＡＲ３の画像信号の転送が終了すると、転送の打ち切り処理が行われ、水平転送路ＨＣ５１，５２，５３に残っている画像信号の廃棄処理が高速に行われる。一方、領域ＡＲ３以外の他の領域に対しては、高速読出指令信号が出力され、他の領域における水平転送路ＨＣｉを用いて画像信号の廃棄処理が高速に行われる。
【０１０２】
このように、撮像素子としてＣＣＤを用いた場合にも、画像信号の部分読み出し処理を実行することが可能である。
【０１０３】
これによれば、撮影範囲拡大モードにおける２回目以降の露光においては、撮像素子１５ｂにより取得される画像全体のうちの一部領域である非重複領域についてのみ読み出し処理を実行することが可能になるので、撮像素子１５ｂからの画像信号の読み出し処理を高速化することが可能となる。
【０１０４】
また、撮像素子１５としてＣＣＤ１５ｂを用いる場合には、画像信号の読み出し側（画像信号の出力側）に非重複領域が生じるように、撮像素子１５ｂを移動させて撮影範囲を変更させることが好ましい。これによれば、転送路を用いた画像信号の転送開始と同時に非重複領域からの画像信号の読み出しが可能となり、非重複領域の画像信号の読み出しが速くなる。
【０１０５】
＜３．第３実施形態＞
次に、本発明の第３実施形態について説明する。第３実施形態における撮像装置１Ｃは、テンポラリメモリＴＭ１を新たに備え、当該テンポラリメモリＴＭ１に撮像素子１５によって取得される画像データを一旦格納する。そして、撮像装置１Ｃは、既に画像メモリ２９に転送されている画像とテンポラリメモリＴＭ１に格納されている画像とを比較して、両画像が最も一致する位置を求めることによって、テンポラリメモリＴＭ１における画像全体において、画像メモリ２９における画像と重複しない領域の画像を特定する。
【０１０６】
＜構成＞
第３実施形態に係る撮像装置１Ｃは、テンポラリメモリＴＭ１を新たに備える点以外は、撮像装置１Ａと同様の構成を有しており、以下では相違する部分を中心に説明する。
【０１０７】
撮像装置１Ｃに備えられるテンポラリメモリＴＭ１は、撮像素子１５により取得される画像１枚分以下の記憶容量を有し、撮像素子１５により取得された画像データを画像データ転送部２８を介して格納する（図４参照）。
【０１０８】
＜動作＞
以下では、撮影範囲拡大モードにおける撮像装置１Ｃの動作について説明する。図１２は、テンポラリメモリＴＭ１を用いた場合の画像データの転送の様子を示す概念図である。
【０１０９】
図１２に示されるように、２回目の露光により撮像素子１５によって取得された画像データは、一旦テンポラリメモリＴＭ１に格納される。
【０１１０】
そして、テンポラリメモリＴＭ１に格納された画像と、１回目の露光により既に画像メモリ２９に格納されている画像（格納画像）との比較処理が実行され、両画像の最も一致する位置（一致位置）が検出（決定）される。比較処理としては、例えば、画素単位で比較するパターンマッチング処理を採用することができる。
【０１１１】
例えば、テンポラリメモリＴＭ１に格納された画像において、格納画像に含まれている可能性の高い領域ＲＦ（破線囲まれた領域）の画像と格納画像ＣＩ１との比較処理が行われる（図１２参照）。具体的には、領域ＲＦの画像を格納画像ＣＩ１上で微少幅（例えば１画素）ずつシフトさせて、領域ＲＦの画像と格納画像ＣＩ１とのマッチング処理を行い、マッチング処理による評価値（例えば、相関値等）を最小とする位置を求める。そして、格納画像ＣＩ１において、評価値を最小とする位置を領域ＲＦの画像が最も一致する位置（一致位置）ＭＰとして検出する。
【０１１２】
上記のような比較処理により一致位置ＭＰが検出されると、非重複領域演算部７４において、テンポラリメモリＴＭ１に格納された画像と既に画像メモリ２９に格納された格納画像とを合成させた場合に、格納画像とテンポラリメモリＴＭ１に格納された画像の一部とがずれなく隣接する境界画素が一致位置ＭＰに基づいて決定され、非重複領域が特定される。簡単に言えば、非重複領域演算部７４では、当該一致位置ＭＰにテンポラリメモリＴＭ１に格納された画像を配置したときに、格納画像ＣＩ１と重複しない領域ＡＲ５の画像が非重複領域の画像として特定される。
【０１１３】
そして、テンポラリメモリＴＭ１から非重複領域ＡＲ５の画像データが、画像メモリ２９に転送される。
【０１１４】
これによれば、撮影中に（詳細には、１回目の露光時点から２回目の露光時点までの期間に）撮像装置１Ｃのブレが存在する場合であっても、撮像素子１５の移動量ＭＶｊに応じた画像のズレ量のみならず、撮像装置１Ｃのブレに応じた画像のズレ量をも考慮して、１回目の撮影画像と２回目の撮影画像との対応位置関係（換言すれば両画像のズレ量およびズレ方向）をより正確に求めることが可能になる。すなわち、撮像装置１Ｃのブレに起因する画像ズレをも補正することが可能になる。
【０１１５】
上述のようなテンポラリメモリＴＭ１を用いた画像データの転送は、３回目および４回目の露光によって取得された画像データを画像メモリ２９に転送する場合にも適用される。
【０１１６】
このように、既に画像メモリ２９に格納されている画像（格納画像）と新たに取得された画像とを比較して非重複領域を特定することによれば、撮像素子１５ａの移動および撮像素子１５の移動間に生じる手ブレ等による画像ズレを解消し、自然な合成画像を取得することが可能となる。
【０１１７】
また、上記のように、比較処理のために１回の露光で取得される画像１枚分の記憶容量を有するテンポラリメモリＴＭ１を新たに用いる場合においても、合成画像の生成に必要なメモリ量を削減することができる。
【０１１８】
＜４．第４実施形態＞
次に、本発明の第４実施形態について説明する。第４実施形態における撮像装置１Ｄは、撮影範囲拡大モードにおいてレリーズボタン１１のＳ２状態が検出された場合に、ブレ補正制御部７３を用いて撮像素子１５のブレ量の検出を開始する。そして、撮像素子１５の移動間のブレ量と撮像素子１５の移動量ＭＶｊとに基づいて、非重複領域を特定する。
【０１１９】
＜構成＞
第４実施形態に係る撮像装置１Ｄは、撮像装置１Ａと同様の構成を有している。
【０１２０】
＜動作＞
以下では、撮影範囲拡大モードにおける撮像装置１Ｄの動作について説明する。図１３は、撮像装置１Ｄのブレの様子と撮像素子１５の移動の様子とを示す概念図である。
【０１２１】
図１３に示されるように、撮像装置１Ｄにおいては、撮影範囲拡大モードにおいて１回目の露光時点から２回目の露光時点までの間に発生する撮像装置１Ｄのブレ量ＫＩが算出される。具体的には、ブレ補正制御部７３内のシーケンスコントロール部７３５は、撮影範囲拡大モードにおいてレリーズボタン１１のＳ２状態を検出すると、ブレ検出部７３１を制御して撮像装置１Ｄのヨー方向およびピッチ方向のブレ量ＫＩをそれぞれ算出する。これにより、１回目の露光時点から２回目の露光時点までの間に発生する撮像装置１Ｄのブレ量ＫＩを取得することが可能となる。
【０１２２】
そして、１回目の露光により既に画像メモリ２９に格納されている画像（格納画像）と２回目の露光により取得された画像とのズレ（画像ズレ）は、撮像素子１５の移動と撮像装置１Ｄのブレにより生じるものであることから、非重複領域演算部７４では、撮像素子１５の移動量ＭＶａと撮像装置１Ｄのブレ量ＫＩとに基づいて２つの画像における同一被写体のズレ量（画像ズレ量）が演算され、非重複領域が特定される。
【０１２３】
具体的には、撮像装置１Ｄのブレ量ＫＩをＸ方向成分とＹ方向成分とに分解し、Ｙ方向成分のブレ量と撮像素子１５の移動量ＭＶａとを加算もしくは減算することによって、Ｙ方向の画像ズレ量を取得する。そして、撮像素子１５をＸ方向の画像ズレ量（ここでは、ブレ量ＫＩのＸ方向成分）分およびＹ方向の画像ズレ量分移動させた場合を想定し、画像ズレ量分移動させた撮像素子１５によって撮影可能となる画像のうち、格納画像に含まれない領域の画像を非重複領域の画像として特定する。
【０１２４】
そして、撮像素子１５によって取得された非重複領域の画像データが、画像メモリ２９に転送される。
【０１２５】
上述のような撮像素子１５の移動量ＭＶｊと撮像装置１Ｄのブレ量ＫＩとに基づく非重複領域の特定は、３回目および４回目の露光によって取得される画像データに対しても同様に実行される。
【０１２６】
このように、撮像素子１５を平面内で移動させて異なる位置で取得される複数の画像を用いて合成画像を生成する場合に、複数の画像の露光時点相互間において発生する撮像素子１５の移動量ＭＶｊと撮像装置１Ｄのブレ量ＫＩとに基づいて非重複領域を特定することによれば、撮像素子１５の移動間に発生する手ブレ等によるズレを解消し、自然な合成画像を取得することが可能となる。
【０１２７】
＜５．変形例＞
以上、この発明の実施の形態について説明したが、この発明は、上記に説明した内容に限定されるものではない。
【０１２８】
例えば、上記第３実施形態においては、撮像素子１５によって取得された画像全てを用いて、当該画像と画像メモリ２９における画像との一致位置を検出していたが、これに限定されない。図１４は、取得された画像の一部と画像メモリ２９における画像との比較を行う様子を示す概念図である。
【０１２９】
例えば、図１４に示されるように、テンポラリメモリＴＭ１とは別に比較用のテンポラリメモリＴＭ２を新たに設けて、当該比較用のテンポラリメモリＴＭ２に２回目の露光により取得された画像の一部領域（所定の領域）ＲＳ１を転送し、比較用のテンポラリメモリＴＭ２に格納された所定領域ＲＳ１の画像と１回目の露光により取得され既に画像メモリ２９に格納されている画像との比較処理を行ってもよい。
【０１３０】
これによれば、２つの画像の一致位置の特定を高速に行うことが可能となり、より高速な合成画像の生成が可能となる。
【０１３１】
また、比較用のテンポラリメモリＴＭ２に転送される画像は、画像の一部に限定されず、例えば、数画素ごとに画素信号を間引いた画像等の比較のために必要な最小限の情報を有する画像（間引き画像）としてもよい。また、比較用のテンポラリメモリＴＭ２に転送される画像として、色信号を除いて輝度信号のみとした画像を用てもよい。
【０１３２】
また、上記第３実施形態と第４実施形態とを組み合わせてもよい。具体的には、既に画像メモリ２９に格納されている画像（格納画像）と新たに取得された画像とを比較して一致位置を検出し、当該一致位置と撮像素子１５の移動量ＭＶｊと撮像装置１Ｄのブレ量ＫＩとに基づいて、非重複領域を特定するようにしてもよい。これによれば、より正確な画像位置ズレ補正を行うことが可能となり、自然な合成画像を取得することが可能となる。
【０１３３】
また、上記第２実施形態では、垂直転送路を有しない構成の撮像素子（ＣＣＤ）１５ｂを例示したが、これに限定されない。図１５は、ＣＣＤ１５ｂの内部構成を示す図である。
【０１３４】
具体的には、図１５に示されるように、水平転送路ＨＣｊに加えて垂直転送路ＶＣを有する構成にしてもよい。この場合、垂直転送路ＶＣにおいて、非重複領域に対応する領域以外の画像信号は、高速読出指令を受けて高速に転送され廃棄される。
【０１３５】
例えば、領域ＡＲ１における画像信号を取得する場合には、水平転送路ＨＣｊによって各画素ＲＨの画像信号が垂直転送路ＶＣに順次に転送される。そして、垂直転送路ＶＣでは、領域ＡＲ１以外の他の領域の画像信号は、高速に転送され廃棄される。
【０１３６】
また、領域ＡＲ３における画像信号を取得する場合には、領域ＡＲ３の画像信号が取得されるまで、水平転送路ＨＣｊによって画像信号が順次に転送され、垂直転送路ＶＣにおいて、領域ＡＲ３以外の他の領域の画像信号は、高速に転送され廃棄される。領域ＡＲ３の画像信号が取得されると、高速読出指令信号が出力され転送路上の画像信号の廃棄処理が高速に実行される。
【図面の簡単な説明】
【０１３７】
【図１】本発明の第１実施形態に係る撮像装置の外観構成を示す図である。
【図２】本発明の第１実施形態に係る撮像装置の外観構成を示す図である。
【図３】撮像装置の縦断面図である。
【図４】撮像装置の機能ブロック図である。
【図５】ブレ補正制御部の機能ブロック図を含むブレ補正機構の概略図である。
【図６】撮像装置の背面から見た場合の撮像面における被写体像と、合成画像とを示す図である。
【図７】撮像素子の移動とメモリに転送される領域とを示す図である。
【図８】画像メモリにおける画像データの格納状態を示す図である。
【図９】レンズの光軸をシフトさせる手法を採用した場合に生成される合成画像を示す図である。
【図１０】撮像素子を移動させる手法を採用した場合に生成される合成画像を示す図である。
【図１１】ＣＣＤの内部構成を示す図である。
【図１２】テンポラリメモリを用いた場合の画像データの転送の様子を示す概念図である。
【図１３】撮像装置のブレの様子と撮像素子の移動の様子とを示す概念図である。
【図１４】取得された画像の一部と画像メモリにおける画像との比較を行う様子を示す概念図である。
【図１５】ＣＣＤの内部構成を示す図である。
【符号の説明】
【０１３８】
１Ａ，１Ｂ，１Ｃ，１Ｄ    撮像装置
２    カメラ本体部
３    撮影レンズユニット
１５，１５ａ，１５ｂ    撮像素子
１１  レリーズボタン
２９  画像メモリ
ＴＭ１，ＴＭ２  テンポラリメモリ
８２  モード設定ダイアル  
ＧＩ  被写体像
ＣＩ  合成画像
ＭＶｊ  撮像素子の移動量
ＫＩ  撮像装置のブレ量
【図１】
2008131056.tif 000003
【図２】
2008131056.tif 000004
【図３】
2008131056.tif 000005
【図４】
2008131056.tif 000006
【図５】
2008131056.tif 000007
【図６】
2008131056.tif 000008
【図７】
2008131056.tif 000009
【図８】
2008131056.tif 000010
【図９】
2008131056.tif 000011
【図１０】
2008131056.tif 000012
【図１１】
2008131056.tif 000013
【図１２】
2008131056.tif 000014
【図１３】
2008131056.tif 000015
【図１４】
2008131056.tif 000016
【図１５】
2008131056.tif 000017