撮像した被写体像に応じた電荷の蓄積を行う電荷蓄積手段と、露出制御を行う露出制御手段と、前記電荷蓄積手段により第1の蓄積を行って得られた画像データと第2の蓄積を行って得られた画像データとに基づいて、前記露出制御手段による露出制御に用いる画像データを演算する演算手段と、前記第1の蓄積を行って得られた画像データに基づいて、所定の条件を満たす対象の追尾を行う追尾手段と、前回の露出制御に用いる画像データの露光量と今回の露出制御に用いる画像データの露光量とが異なるように、前記第1及び第2の蓄積を行う際の露光量を制御する制御手段と、を有し、前記制御手段は、前回の露出制御に用いる画像データの露光量と今回の露出制御に用いる画像データの露光量との差よりも、前回の前記第1の蓄積の露光量と今回の前記第1の蓄積の露光量との差が小さくなるように、今回の前記第1の蓄積の露光量を制御し、前記演算手段は、前回の露出制御に用いる画像データを得るための演算を行うときと今回の露出制御に用いる画像データを得るための演算を行うときとで、演算方法を変更することを特徴とする撮像装置。前記制御手段は、前回の露出制御に用いる画像データの露光量と今回の露出制御に用いる画像データの露光量のいずれか一方が適正な露光量となるように前記第1及び第2の蓄積の露光量を制御し、前記演算手段は、前回の露出制御に用いる画像データの露光量と今回の露出制御に用いる画像データの露光量のうち、適正な露光量ではないほうの画像データを得る際には前記第1の蓄積を行って得られた画像データと前記第2の蓄積を行って得られた画像データとを加算し、適正な露光量であるほうの画像データを得る際には前記第1の蓄積を行って得られた画像データと前記第2の蓄積を行って得られた画像データとを加算平均することを特徴とする請求項1に記載の撮像装置。前回の前記第1の蓄積の露光量と今回の前記第1の蓄積の露光量との差を補償するように、前回の前記第1の蓄積を行って得られた画像データと今回の前記第1の蓄積を行って得られた画像データの少なくとも一方を補正する補正手段を有することを特徴とする請求項1または2に記載の撮像装置。前記補正手段は、前回の前記第1の蓄積の露光量と今回の前記第1の蓄積の露光量のうちいずれか一方が適正な露光量の場合、適正な露光量でない露光量で蓄積を行って得られた画像データを補正することを特徴とする請求項3に記載の撮像装置。前記追尾手段は、前記補正手段により補正された画像データを用いて前記追尾を行うことを特徴とすることを特徴とする請求項3または4に記載の撮像装置。前記制御手段は、前記第1の蓄積の露光量を変更せずに、前回の露出制御に用いる画像データの露光量と今回の露出制御に用いる画像データの露光量とが異なるように、前記第2の蓄積の露光量を制御し、前記第1の蓄積の露光量と前記第2の蓄積の露光量との差を補償するように、前記第1の蓄積を行って得られた画像データを補正する補正手段を有することを特徴とする請求項1または2に記載の撮像装置。前記演算手段は、前記補正手段により補正された前記第1の蓄積を行って得られた画像データ及び当該画像データに対応する前記第2の蓄積を行って得られた画像データを加算することを特徴とする請求項6に記載の撮像装置。撮像した被写体像に応じた信号を出力する撮像手段を有し、前記露出制御手段は、前記撮像手段で撮像を行う際に、前記演算手段により演算された画像データを用いて露出制御を行うことを特徴とする請求項1ないし7のいずれか1項に記載の撮像装置。撮像した被写体像に応じた電荷の蓄積を行う電荷蓄積手段と、露出制御を行う露出制御手段と、を有する撮像装置の制御方法であって、前記電荷蓄積手段により第1の蓄積を行って得られた画像データと第2の蓄積を行って得られた画像データとに基づいて、前記露出制御手段による露出制御に用いる画像データを演算する演算ステップと、前記第1の蓄積を行って得られた画像データに基づいて、所定の条件を満たす対象の追尾を行う追尾ステップと、前回の露出制御に用いる画像データの露光量と今回の露出制御に用いる画像データの露光量とが異なるように、前記第1及び第2の蓄積を行う際の露光量を制御する制御ステップと、を有し、前記制御ステップは、前回の露出制御に用いる画像データの露光量と今回の露出制御に用いる画像データの露光量との差よりも、前回の前記第1の蓄積の露光量と今回の前記第1の蓄積の露光量との差が小さくなるように、今回の前記第1の蓄積の露光量を制御し、前記演算ステップは、前回の露出制御に用いる画像データを得るための演算を行うときと今回の露出制御に用いる画像データを得るための演算を行うときとで、演算方法を変更することを特徴とする撮像装置の制御方法。しかしながら、特許文献2に記載された撮像装置のように、測光部から出力される測光データに基づいて被写体追尾を行う構成において、特許文献1に記載されたようにして測光可能範囲を拡大しようとした場合、以下のような問題が生じてしまう。測光可能範囲を拡大するために、電荷蓄積時間を長くした測光と短くした測光とを交互に行うことによって、被写体追尾処理において2つの測光データを相関演算する場合に、2つの測光データが示すそれぞれの輝度値が大きく異なってしまう。そのため、相関演算の精度が低下してしまい、被写体追尾ができなかったり被写体追尾の精度が低下したりしてしまう。そこで、本発明は、測光可能範囲を拡大でき、かつ、露出制御に用いるデータに基づいて被写体追尾を行う場合に精度よく被写体追尾を行うことができるようにすることを目的とする。上記目的を達成するために、本発明に係る撮像装置は、撮像した被写体像に応じた電荷の蓄積を行う電荷蓄積手段と、露出制御を行う露出制御手段と、前記電荷蓄積手段により第1の蓄積を行って得られた画像データと第2の蓄積を行って得られた画像データとに基づいて、前記露出制御手段による露出制御に用いる画像データを演算する演算手段と、前記第1の蓄積を行って得られた画像データに基づいて、所定の条件を満たす対象の追尾を行う追尾手段と、前回の露出制御に用いる画像データの露光量と今回の露出制御に用いる画像データの露光量とが異なるように、前記第1及び第2の蓄積を行う際の露光量を制御する制御手段と、を有し、前記制御手段は、前回の露出制御に用いる画像データの露光量と今回の露出制御に用いる画像データの露光量との差よりも、前回の前記第1の蓄積の露光量と今回の前記第1の蓄積の露光量との差が小さくなるように、今回の前記第1の蓄積の露光量を制御し、前記演算手段は、前回の露出制御に用いる画像データを得るための演算を行うときと今回の露出制御に用いる画像データを得るための演算を行うときとで、演算方法を変更することを特徴とする。また、上記目的を達成するために、本発明に係る撮像装置の制御方法は、撮像した被写体像に応じた電荷の蓄積を行う電荷蓄積手段と、露出制御を行う露出制御手段と、を有する撮像装置の制御方法であって、前記電荷蓄積手段により第1の蓄積を行って得られた画像データと第2の蓄積を行って得られた画像データとに基づいて、前記露出制御手段による露出制御に用いる画像データを演算する演算ステップと、前記第1の蓄積を行って得られた画像データに基づいて、所定の条件を満たす対象の追尾を行う追尾ステップと、前回の露出制御に用いる画像データの露光量と今回の露出制御に用いる画像データの露光量とが異なるように、前記第1及び第2の蓄積を行う際の露光量を制御する制御ステップと、を有し、前記制御ステップは、前回の露出制御に用いる画像データの露光量と今回の露出制御に用いる画像データの露光量との差よりも、前回の前記第1の蓄積の露光量と今回の前記第1の蓄積の露光量との差が小さくなるように、今回の前記第1の蓄積の露光量を制御し、前記演算ステップは、前回の露出制御に用いる画像データを得るための演算を行うときと今回の露出制御に用いる画像データを得るための演算を行うときとで、演算方法を変更することを特徴とする。本発明によれば、測光可能範囲を拡大でき、かつ、露出制御に用いるデータに基づいて被写体追尾を行う場合に精度よく被写体追尾を行うことができるようにすることを目的とする。以下に、本発明の好ましい実施の形態を、添付の図面に基づいて詳細に説明する。図1は、本発明の実施形態に係る撮像装置のブロック図であり、撮像装置は、カメラ本体100と、カメラ本体100に着脱可能な交換レンズであるレンズユニット200とで構成される。カメラ本体100の構成について説明する。制御部101は、各種の演算処理と撮像装置の全体を統括的に制御する。ミラー102はレンズユニット200の撮影レンズ202を通った被写体像を、ファインダー使用時にはファインダーと露出制御用の電荷蓄積を行う撮像素子B116第1の撮像素子に導く。また、撮影時には跳ね上がり、被写体像を撮像素子A第2の撮像素子106へと導く。以下では、ミラー102の状態について、撮影レンズ202を通った被写体像をファインダーと撮像素子B116に導く状態のことをダウン状態、撮影レンズ202を通った被写体像を撮像素子A106に導く状態のことをアップ状態とする。また、ミラー102をダウン状態にするための動作をダウン動作、アップ状態にするための動作をアップ動作とする。ミラー駆動部103は、制御部101からの制御信号に従ってミラー102を駆動する。シャッタ機構104はフォーカルプレーン型の先幕/後幕に相当するシャッタ幕を有していて、撮影レンズ202を通ってきた被写体像が撮像素子A106に導かれる時間を制御する。シャッタ駆動部105は、制御部101からの制御信号に従ってシャッタ機構104の駆動を行う。撮像素子A106は撮影レンズ202により結像された被写像に応じた電荷の蓄積を行い撮像信号を出力する固体撮像素子であり、例えば、CCDセンサやCMOSセンサなどである。撮像信号処理部A107は、撮像素子A106から出力される撮像信号の増幅処理や、アナログからデジタルへの変換を行うA/D変換処理、A/D変換後の画像データに対するキズ補正等の各種の補正処理、或いは、画像データを圧縮する圧縮処理等を行う。タイミング発生部A108は、撮像素子A106と撮像信号処理部A107に対して各種のタイミング信号を出力する。メモリ部109は、撮像信号処理部A107により処理された画像データ等を一時的に記憶し、また各種の調整値や制御部101による各種の制御を実行させるためのプログラムなどを記憶する。記録媒体制御インターフェースI/F部110は、記録媒体111に対する画像データ等の記録処理又は記録媒体111から画像データ等の読み出し処理を行うためのものである。記録媒体111は、画像データ等の各種のデータを記録する半導体メモリ等からなる着脱可能な記録媒体である。表示駆動部112は、制御部101からの制御信号に従って、撮影した静止画像や動画像等を表示する表示部113を駆動する。外部インターフェースI/F部114は、コンピュータやプリンタなどの外部機器115と画像データ、制御信号等の情報のやりとりを行う。撮像素子B116は、露出制御や光源検知に用いるデータを取得するための撮像素子であり、撮像した被写体像に応じた電荷の蓄積を行い撮像信号を出力する。本実施の形態では、RGBがストライプ配列のCCDセンサを用いるものとする。なお、読み出し時間の短いセンサであればCMOSセンサを用いてもよい。撮像信号処理部B117は、撮像素子B116から出力される撮像信号の増幅処理や、アナログからデジタルへの変換を行うA/D変換処理、A/D変換後の画像データに対するキズ補正等の各種の補正処理、或いは、画像データを圧縮する圧縮処理等を行う。タイミング発生部B118は、撮像素子B116と撮像信号処理部B117に対して各種のタイミング信号を出力する。ペンタプリズム119は、ミラー102で曲げられた光線を不図示のファインダと撮像素子B116へ導く。焦点検出部121は、位相差方式により焦点検出を行うものであって、ミラー102を透過して反射された光線により1対の画像を取得する。制御部101は、この1対の画像のズレ量から被写体のデファーカス量を演算して撮影レンズ202の駆動量を求め、レンズ制御部201へ伝える。焦点検出駆動部120は、制御部101からの制御信号に従って焦点検出部121を駆動する。次に、レンズユニット200の構成について説明する。撮影レンズ202は被写体像を撮像素子A106に結像させる。レンズ駆動部203は、焦点調節や変倍を行うために、レンズ制御部201からの制御信号に従って撮影レンズ202を駆動する。絞り機構204は撮影レンズ202を通った光束の光量を制御する。絞り駆動部205は、レンズ制御部201からの制御信号に従って絞り機構を駆動する。カメラ本体100とレンズユニット200との間では、制御部101とレンズ制御部201が通信をしていて、送信/受信の管理を行っている。図2は、本実施の形態の撮像装置の連写撮影シーケンスを示すタイミングチャートであり、連写撮影におけるNフレーム目N≧1の本画像露光開始前からN2目フレームの本画像露光終了後まで示している。連写撮影において、ダウン状態であったミラー102がアップ動作によりアップ状態となってから、ダウン動作が開始されるまでの間にNフレーム目の本画像露光を行う。すなわち、本画像を得るために撮像素子A106の蓄積を行う。続いて、ミラー102のダウン動作が完了しダウン状態となってから次にアップ動作が開始されるまでの間に、露出制御処理以下、AE処理とするの蓄積演算及び被写体追尾処理以下、追尾処理とするの蓄積演算を行う。追尾処理とは、連続する複数の画像において、撮像画面内で所定の条件を満たす追尾対象主被写体などの輝度パターン及び色パターンの分布からその追尾対象がどこに移動したかを演算する処理である。なお、ここでの蓄積は撮像素子B116による蓄積である。そして再び、ミラー102のアップ動作が完了しアップ状態となってから次にダウン動作が開始されるまでの間にN1フレーム目の本画像露光を行う。この時、直前のダウン状態におけるAE処理の蓄積演算の結果に基づいて露出制御を行って本画像露光を行う。また、N1フレーム目の直前のダウン状態及びNフレーム目の直前のダウン状態における追尾処理の蓄積演算の結果に基づいて、Nフレーム目で焦点調節の対象とした主被写体領域を追尾するようにN1フレーム目の焦点調節処理を行う。続いて再び、ミラー102のダウン動作が完了しダウン状態となってから次にアップ動作が開始されるまでの間に、AE処理の蓄積演算及び追尾処理の蓄積演算を行う。その後、ミラー102のアップ動作が完了しアップ状態となってから次にダウン動作が開始されるまでの間にN2フレーム目の本画像露光を行う。以降は上述のシーケンスが繰り返される。次に、本画像撮影に関する処理について説明する。ミラー102のアップ状態において本画像露光、すなわち、撮像素子A106の蓄積を行う。蓄積が完了すると、撮像信号処理部A107は、蓄積された撮像信号の読み出しを行う。タイミングチャートに示すように、蓄積された撮像信号の読み出しは、次の本画像の蓄積が開始するまでに完了しなければならない。撮像信号の読み出しが完了すると、撮像信号処理部A107は、読み出した撮像信号に対して現像処理及び圧縮処理を行う。現像処理及び圧縮処理が完了すると、記録媒体制御インターフェースI/F部110は、記録処理を開始する。このようにして、各種処理が行われた画像データは記録媒体111に記録される。上記では、本画像の蓄積から記録処理までを説明したが、図2に示すように、Nフレーム目の撮像信号に対する現像処理に並行して、撮像信号処理部A107は、N1フレーム目の本画像露光により蓄積された撮像信号の読み出しを行う。また、撮像信号処理部A107は、Nフレーム目の画像データに対する記録処理に並行してN1フレーム目の撮像信号に対する現像処理とN2フレーム目の本画像露光により蓄積された撮像信号の読み出しを行うなど、複数の処理を並行して行う。図3は、図2にあるAE処理及び追尾処理の詳細に示したタイミングチャートである。ミラー102がダウン状態になると、撮像素子B116で追尾用の蓄積である蓄積1を行う。追尾処理は、追尾演算の結果を焦点調節に反映させるために、焦点調節処理のタイミングに基づいて設定される追尾リミットまでに完了しなければならない。そのため、この蓄積1は追尾演算に利用可能な信号を得ることができる最低限の蓄積時間となっている。蓄積1が完了すると、撮像信号処理部B117は、蓄積1で蓄積された撮像信号の読み出しを行う。読み出しが完了すると、撮像信号処理部B117は追尾演算を行うために現像処理を行う。現像処理が完了すると、撮像信号処理部B117は追尾演算を行う。追尾演算ではYUVと言われるデータ形式を用いるため、このYUV形式への変換を含む現像処理を行っている。このようにして得られた追尾演算の結果は次の本撮影のための焦点調節処理に用いられる。また、蓄積1が完了すると、蓄積1で蓄積された撮像信号の読み出しを行っているときに、撮像素子B116はAE用の蓄積である蓄積2を行う。蓄積2が完了すると、撮像信号処理部B117は蓄積2で蓄積された撮像信号の読出しを行い、蓄積1で蓄積された撮像信号に基づく画像データ第1の画像データと蓄積2で蓄積された撮像信号に基づく画像データ第2の画像データとの加算演算を行う。蓄積1及び蓄積2で蓄積された撮像信号に基づく画像データの加算演算を行うことにより、蓄積1の蓄積時間と蓄積2の蓄積時間とを合計した蓄積時間で蓄積を行った場合の画像データと略等しい画像データが得られる。このように加算演算を行って得られた画像データは、蓄積1あるいは蓄積2で蓄積された撮像信号に基づく画像データよりも長い蓄積時間で蓄積された撮像信号に基づく画像データに相当する。そのため、蓄積1あるいは蓄積2で蓄積された撮像信号に基づく画像データよりも蛍光灯下等でのフリッカ光源の影響が軽減され、蓄積1あるいは蓄積2で蓄積された撮像信号に基づく画像データを用いて露出制御を行う場合より正確に露出制御を行うことができる。読み出し及び加算演算が完了すると、撮像信号処理部B117は、加算演算をした画像データを撮像画面に対応させて複数領域に分割してそれぞれの領域で積分動作を行い、各領域の積分データを算出する。そして、撮像信号処理部B117はこの積分結果を用いてAE演算を行う。撮像信号処理部B117は、このAE演算により、本画像撮影時のシャッタスピード露光時間、絞り値、ISO値撮像感度などの露出制御値を決定し、制御部101はこれらの露出制御値に基づいて各部を制御し本画像撮影を行う。図4は、図3で示したAE処理及び追尾処理の詳細を示している。図4aは、蓄積1で蓄積された撮像信号の流れを示している。撮像信号処理部B117は、蓄積1で撮像素子B116に蓄積された撮像信号を読み出した後、読み出した撮像信号に基づく画像データをストライプデータ1としてメモリ部109に記憶する。図4bは、追尾処理における読み出し後からYUV画像を生成するまでの詳細を示している。撮像信号処理部B117は、メモリ部109に記憶されたストライプデータ1を読み出し、補正処理及びデータの並び替え処理を行う。この補正処理及び並び替え処理の詳細については後述する。そして、撮像信号処理部B117は、補正処理及び並び替え処理された画像データを現像処理して、YUV画像を生成する。図4cは、追尾演算の詳細を示している。撮像信号処理部B117は、今回の蓄積1で蓄積された撮像信号に基づいて生成されたYUV画像データ以下、今回のYUV画像とすると前回のYUV画像とを比較する。そして、撮像信号処理部B117は、前回のYUV画像の主被写体領域に対して今回のYUV画像の主被写体領域が撮像画面のX方向Y方向それぞれにどの位ずれているかを算出する。撮像信号処理部B117は、このずれ量を用いて主被写体領域が撮像画面内のどこに移動したかを求め、追尾演算を行う。制御部101は、この追尾結果を用いて、今回の本画像撮影のための焦点調節処理を行う。図4dは、蓄積1で蓄積された撮像信号に基づく画像データと蓄積2で蓄積された撮像信号に基づく画像データとの加算演算の流れを示している。撮像信号処理部B117は、蓄積2で撮像素子B116に蓄積された撮像信号を読み出した後、読み出した撮像信号に基づく画像データをストライプデータ2としてメモリ部109に記憶する。次に、撮像信号処理部B117は、メモリ部109に記憶されたストライプデータ1及びストライプデータ2を読み出し加算演算を行い、得られた画像データをストライプデータ3としてメモリ部109に記憶する。このとき、撮像信号処理部B117は、加算値を1/2にするか否かを蓄積1及び蓄積2の露光量に基づいて選択する。図4eは、加算演算後からAE演算までの詳細を示している。まず、撮像信号処理部B117は、メモリ部109に記憶されたストライプデータ3を読み出し、データの並び替え処理を行う。撮像信号処理部B117は、並び替え処理された画像データに対して、前述したAE処理の積分動作と同様にして積分データを算出する。撮像信号処理部B117はこの積分データを用いてAE演算を行い、今回の本画像撮影時に用いるシャッタスピード、絞り値、ISO値などの露出制御値を決定する。図5は、前述のストライプ配列の画像データをベイヤ配列の画像データへ並び替える並べ替え処理の例を示している。本実施の形態では、撮像素子B116は主として露出制御や光源検知に用いるデータを取得するために利用するので、ストライプ配列のCCDセンサを撮像素子B116に用いている。そのため、撮像素子B116から読み出された撮像信号は図5のAに示すようなストライプ配列になっている。撮像信号処理部B117は、この撮像信号を一般的な撮像信号の配列である図5のBに示すようなベイヤ配列となるように画像データの並べ替え処理を行う。なお、撮像素子B116にベイヤ配列の撮像素子を用いる場合には、このような画像データの並び替え処理を行う必要はない。図6は、撮像素子B116の測光可能範囲を示す図である。本実施の形態では、撮像素子B116の測光可能範囲を拡大するために、適正な露光量以下、適露光とするでの蓄積と適正な露光量より低輝度側を重視した露光量以下、オーバー露光とするでの蓄積とを交互に行う。なお、本実施の形態では、露光量を交互に変更する場合、蓄積1と蓄積2との間で露光量を変更するのではなく、前回の蓄積1と今回の蓄積1、及び、前回の蓄積2と今回の蓄積2とで露光量を変更するものとする。なお、露光量を交互に変更する場合、適露光とオーバー露光とで変更するのではなく、適露光と適露光より高輝度側を重視した露光量以下、アンダー露光とするとで変更するようにしてもよい。図6aでは、撮像素子B116の、適露光で蓄積を行うときの測光可能範囲と適露光よりa段分オーバー露光で蓄積を行うときの測光可能範囲を示している。このように、適露光と適露光よりa段分オーバー露光とで蓄積を行い、蓄積して得られたそれぞれの画像データに基づいて測光を行うことにより、適露光で蓄積しただけの場合よりもaa>0段分低輝度側の範囲まで測光可能になる。すなわち、a段分測光可能範囲を拡大することができる。なお、以下では、適露光の露光量を0[EV]とし、適露光よりa段分オーバー露光の露光量を-a[EV]とするが、適露光の露光量は0[EV]以外の値であっても構わない。図6bは、AE演算に用いるデータと露光量の関係を示している。蓄積1及び蓄積2を適露光で行った場合、蓄積1及び2を行って得られる画像データを単純に加算すると、加算して得られる画像データの積分データの値が適正な露光量で蓄積した場合の輝度値の2倍の値を示すことになる。すなわち、適正な露光量よりも1段オーバー露光で蓄積を行った場合の輝度値に相当する。そこで、加算平均演算を行うことで、画像データの積分データの値が適正な露光量で蓄積した場合の輝度値を示すようにしている。図6bでは、前回の蓄積1及び蓄積2を適露光で行い得られたそれぞれ画像データを加算平均することで、加算平均して得られた画像データを適露光で蓄積した場合と略等しくしている。すなわち、図6bに示した前回の蓄積のように蓄積1及び蓄積2を適露光で行った場合、撮像信号処理部B117は、図4dにおいて加算値を1/2にすることを選択する。一方、図6bにおいて、今回の蓄積では、測光可能範囲を拡大するために、今回の蓄積を行って得られる画像データの積分データの値が適露光よりもa段分オーバー露光で蓄積した場合の輝度値を示すようにする。そこで、上記と同様にして、前回の蓄積1及び蓄積2をa段分オーバー露光で行い得られたそれぞれの画像データを加算平均することで、加算平均して得られた画像データをa段分オーバー露光で蓄積した場合と略等しくすることが考えられる。しかしながら、ここで、今回の蓄積1をa段分オーバー露光で蓄積した場合、前回の蓄積1とは露光量が大きく異なってしまい、被写体追尾ができなかったり被写体追尾の精度が低下したりしてしまうおそれがある。また、a段分オーバー露光で蓄積して得られた画像データを適露光で蓄積した場合と略等しくなるように補正しようとした場合、a段分オーバー露光することで適露光時には白とびしていなかった領域でも白とびが生じてしまう。そのような適露光時には白とびしていなかった白とび領域は、撮像素子B116から読み出した撮像信号が飽和している領域であるため、適露光で蓄積した場合と略等しくなるように補正できない。そこで、図6bに示すように、適露光時には白とびしていなかった白とび領域の発生を抑制するために、今回の蓄積1及び2では、適露光からa-1段分オーバー露光で蓄積を行い得られたそれぞれの画像データを加算する。すなわち、前回の露出制御に用いる画像データの露光量と今回の露出制御に用いる画像データの露光量とが異なるように、第1及び第2の蓄積を行う際の露光量を制御する。a-1段分オーバー露光で蓄積を行い得られたそれぞれの画像データを加算することで、加算して得られる画像データの積分データの値がa-1段分オーバー露光で蓄積した場合の輝度値の2倍の値を示すことになる。すなわち、a-1段分オーバー露光よりも1段オーバー露光で蓄積を行った場合の輝度値に相当し、a段分オーバー露光で蓄積を行った場合の輝度値と略等しくなる。このように、今回の蓄積1を適露光からa-1段分オーバー露光で行うことで、a段分オーバー露光で行う場合よりも適露光時には白とびしていなかった白とび領域の発生を抑制することができる。そのため、今回の蓄積1で得られた画像データを適露光で蓄積した場合と略等しくなるように補正しようとした場合に、より正確に補正することができる。なお、このようにa-1段分オーバー露光で蓄積を行った場合には、撮像信号処理部B117は、図4dにおいて加算値を1/2することを選択しない。すなわち、a-1段分オーバー露光で蓄積を行った場合には、撮像信号処理部B117は、図4dにおいて加算値を1/2しない。図6cは、追尾演算に用いる画像データと露光量の関係を示している。本実施の形態では、上述した理由から、追尾演算の精度を高めるために、追尾演算に用いる2つの画像データの露光量が略等しくなるように補正処理を行う。具体的には、図6cに示すように、a-1段分オーバー露光で蓄積を行って得られた画像データに対して、適露光との露光量差を補償するようにa-1段分ゲインダウンする補正処理を行う。この補正処理は図4bの補正処理に対応しており、図4bの補正処理における補正量は、前回の蓄積1と今回の蓄積1の露光量の差に基づいて決定される。なお、前回の蓄積1と今回の蓄積1の露光量の差を補償するために補正処理を行うので、前回の蓄積1及び今回の蓄積1により得られた画像データのうち少なくとも一方を補正すればよい。例えば、前回の蓄積1の露光量が適露光であれば、前回の蓄積1で得られた画像データは補正せず、今回の蓄積1で得られた画像データのみ補正すればよい。このような補正処理により、追尾演算に用いる2つの画像データの輝度値の差が小さくなり精度よく被写体追尾を行うことができる。以上のように、露光量を変えて測光のための蓄積を複数回行うので、測光可能範囲を拡大できる。また、複数の蓄積を行って得られたそれぞれの画像データを加算演算して得られた結果に基づいて露出制御を行うので、複数の蓄積のそれぞれの蓄積時間が短い場合であってもフリッカ光源の影響を軽減することができる。また、露出制御に用いるデータに基づいて被写体追尾を行う場合にも、被写体追尾に用いる複数の画像データの露光量の差を補償するための補正処理を行ってから追尾演算を行うので、精度よく被写体追尾を行うことができる。また、蓄積時の露光量に応じて、複数の蓄積を行って得られたそれぞれの画像データを加算演算する際の演算方法を変更するので、追尾に用いる複数の画像データの露光量の差を小さくできる。そのため、追尾に用いる複数の画像データの一方の画像データでのみ白とびする領域が生じることを軽減することができ、より正確に追尾演算を行うことができる。なお、上記の実施の形態では、連写撮影時の被写体追尾について説明を行ったが、本画像撮影前に被写体追尾を行う場合においても本発明は適用できる。また、上記の実施の形態で撮像信号処理部B117が実行した処理の少なくとも一部を、撮像信号処理部A107及び制御部101の少なくとも一方で行う構成であってもよい。あるいは、撮像信号処理部B117がなく、撮像信号処理部B117が実行した全ての処理を撮像信号処理部A107及び制御部101の少なくとも一方で行う構成であってもよい。また、カメラ本体にレンズユニットが内蔵された構成であってもよい。また、被写体追尾に用いる複数の画像データの露光量の差を補償するための補正処理を行う際に、被写体追尾に用いる複数の画像データの露光量が等しくなるように補正処理をしなくてもよい。すなわち、被写体追尾の精度が十分得られる程度に、複数の画像データの露光量の差の少なくとも一部を補償するような補正処理を行えばよい。また、被写体追尾に用いる複数の画像データの差が小さく上記の補正処理と演算方法の変更のいずれか一方のみで被写体追尾の精度が十分得られる程度に露光量の差を補償できる場合、上記の補正処理と演算方法の変更のいずれか一方のみ実行するようにしてもよい。また、被写体追尾に用いる複数の画像データの差を補償するために上記の演算方法の変更を優先して実行し、演算方法の変更では十分に補償出来ない場合に上記の補正処理を行うようにしてもよい。また、上記の実施形態の変形例として、追尾演算に用いる画像データを得るための蓄積1の露光量は常に適露光にして、蓄積2の露光量だけを交互に変更するようにしてもよい。すなわち、上記の実施の形態では、AE演算を簡単かつ正確に行うために、第1の蓄積及び第2の蓄積の露光量を等しくしているが、変形例では、追尾演算を簡単かつ正確に行うために、前回の第1の蓄積及び今回の第1の蓄積の露光量を等しくしている。このように第1の蓄積と第2の蓄積の露光量を異ならせた場合、図4dに示した加算演算の際に補正処理を行えばよい。例えば、前回の第1及び第2の蓄積を適露光で行い、今回の第1の蓄積を適露光、今回の第2の蓄積をa-1段オーバー露光で行ったとする。すなわち、第1の蓄積の露光量を変更せずに、前回の露出制御に用いる画像データの露光量と今回の露出制御に用いる画像データの露光量とが異なるように、第2の蓄積の露光量を制御する。この場合、図4dに示した加算演算の際に、今回の第1の蓄積を行って得られた画像データを、a-1段オーバー露光で蓄積した場合と略等しくなるように補正してから加算演算を行うようにする。そうすることで、今回のAE演算では、a段オーバー露光で蓄積した場合の測光結果を得ることができる。このとき、今回の第2の蓄積をa段オーバー露光で行い、今回の第1の蓄積を行って得られた画像データをa段オーバー露光で蓄積した場合と略等しくなるように補正してから加算平均演算を行う場合よりも、今回の第2の蓄積で白とびする白とび領域を軽減できる。そのため、より正確に露出制御を行うことができる。また、上記の実施形態で説明した方法と上記の変形例の方法とを切り換え可能な構成であってもよい。その場合、撮影モードや撮影条件などによって適した方法を選択する選択手段を有するようにしてもよい。例えば、不図示のフリッカ検出部によってフリッカが検出された場合には、フリッカの影響をより軽減させることができる上記の実施形態で説明した方法を選択するようにすればよい。反対に、フリッカが検出されない場合には、被写体追尾をより精度よく行うことができる変形例の方法を選択するようにすればよい。