被写体光を撮像する撮像素子部と、前記撮像素子部からの撮像信号に基づく動画像を記録する動画記録部と、被写体光の輝度を検出する輝度センサと、前記輝度センサにより検出された輝度に基づいて撮影中の動画像を構成するフレーム画像を適正な露出にするためのゲイン値を算出する露出算出部と、前記露出算出部により算出されたゲイン値を用いてゲイン処理を行う画像処理部と、前記露出算出部により算出されたゲイン値の変化が所定の閾値を超えた場合に、前記ゲイン値の更新を行わずフレーム画像の識別子に前記露出算出部により算出されたゲイン値を関連付けて記録する露出記録部と、を備えることを特徴とする撮像装置。前記動画像を再生するディスプレイ部と、前記動画像の再生時における露出応答速度を選択する選択部と、を備え、前記選択部により、前記動画像を適正な露出で再生する前記露出応答速度が選択されている場合に、前記ディスプレイ部により前記動画像を再生する際に、前記画像処理部は前記露出記録部に記録された前記識別子のフレーム画像に対して、前記識別子に関連付けて記録されている前記ゲイン値を用いたゲイン処理を行なうことを特徴とする請求項1に記載の撮像装置。前記動画像に含まれる複数のオブジェクトを認識するオブジェクト認識部を備え、前記輝度センサにより検出された、前記オブジェクトごとの輝度に基づいて、前記露出算出部は、撮影中の動画像を構成するフレーム画像に含まれるオブジェクトごとに該オブジェクトを適正な露出にするためのゲイン値を算出し、前記露出記録部は、前記オブジェクトの情報に、フレーム画像の識別子及び前記露出算出部により算出された該オブジェクトを適正な露出にするゲイン値を関連付けて記録する請求項1に記載の撮像装置。動画像を再生するディスプレイ部と、前記動画像の再生時における露出応答速度を選択する選択部と、前記動画像の再生時に明るさの基準となるオブジェクトを選択する操作部と、を備え、前記選択部により、前記動画像を適正な露出で再生する前記露出応答速度が選択されている場合に、前記ディスプレイ部により前記動画像を再生する際に、前記画像処理部は、前記操作部により選択された前記オブジェクトに関連付けられた前記識別子のフレーム画像に対して、その識別子と共に前記オブジェクトに関連付けられて記憶されている前記ゲイン値を用いたゲイン処理を行なうことを特徴とする請求項3に記載の撮像装置。動画像を再生するディスプレイ部と、前記動画像を記録する動画記録部と、前記動画像を構成するフレーム画像の内、該フレーム画像を適正な露出にするためのゲイン値の変化が所定の閾値を超えたフレーム画像の識別子に前記フレーム画像を適正な露出にするためのゲイン値を関連付けて記録する露出記録部と、前記動画像の再生時における露出応答速度を選択する選択部と、を備え、前記選択部により、前記動画像を適正な露出で再生する前記露出応答速度が選択されている場合に、前記ディスプレイ部により前記動画像を再生する際に、前記画像処理部は前記露出記録部に記録された前記識別子のフレーム画像に対して、前記識別子に関連付けて記録されている前記ゲイン値を用いたゲイン処理を行なうことを特徴とする再生装置。前記動画像に含まれる複数のオブジェクトから、明るさの基準となるオブジェクトを選択する操作部を備え、前記露出記録部は、前記オブジェクトの情報に、前記フレーム画像の識別子及び前記オブジェクトを適正な露出にするゲイン値を関連付けて記録し、前記選択部により、前記動画像を適正な露出で再生する前記露出応答速度が選択されている場合に、前記ディスプレイ部により前記動画像を再生する際に、前記画像処理部は、前記操作部により選択された前記オブジェクトに関連付けられた前記識別子のフレーム画像に対して、前記識別子と共に前記オブジェクトに関連付けて記憶されているゲイン値を用いたゲイン処理を行なうことを特徴とする請求項5に記載の再生装置。しかしながら、上述した特許文献1の撮像装置においては、画面全体もしくは特定のエリアの輝度の変化を検出し、それに応じた露出補正を実施していたため、特にシャッタ速度や絞りを固定にした場合、ユーザが意図する露出で動画像を撮影できず、撮影された動画像がユーザの意図する明るさで再生されないことがあった。本発明の目的は、撮影した動画像をユーザが意図する明るさで再生することである。本発明の撮像装置は、被写体光を撮像する撮像素子部と、前記撮像素子部からの撮像信号に基づく動画像を記録する動画記録部と、被写体光の輝度を検出する輝度センサと、前記輝度センサにより検出された輝度に基づいて撮影中の動画像を構成するフレーム画像を適正な露出にするためのゲイン値を算出する露出算出部と、前記露出算出部により算出されたゲイン値を用いてゲイン処理を行う画像処理部と、前記露出算出部により算出されたゲイン値の変化が所定の閾値を超えた場合に、前記ゲイン値の更新を行わずフレーム画像の識別子に前記露出算出部により算出されたゲイン値を関連付けて記録する露出記録部とを備えることを特徴とする。本発明の再生装置は、動画像を再生するディスプレイ部と、前記動画像を記録する動画記録部と、前記動画像を構成するフレーム画像の内、該フレーム画像を適正な露出にするためのゲイン値の変化が所定の閾値を超えたフレーム画像の識別子に前記フレーム画像を適正な露出にするためのゲイン値を関連付けて記録する露出記録部と、前記動画像の再生時における露出応答速度を選択する選択部とを備え、前記選択部により、前記動画像を適正な露出で再生する前記露出応答速度が選択されている場合に、前記ディスプレイ部により前記動画像を再生する際に、前記画像処理部は前記露出記録部に記録された前記識別子のフレーム画像に対して、前記識別子に関連付けて記録されている前記ゲイン値を用いたゲイン処理を行なうことを特徴とする。本発明によれば、撮影した動画像をユーザが意図する明るさで再生することができる。以下、図面を参照して、本発明の第1の実施の形態に係る撮像装置及び再生装置としてのデジタルカメラについて説明する。図1は、第1の実施の形態に係るデジタルカメラのシステム構成を示すブロック図である。図1に示すようにデジタルカメラ2は、メイン撮像素子部4、サブ撮像素子部6、画像処理部8、動画符号化処理部10、動画復号化処理部12、動画記録部14、ディスプレイ部16、露出算出部18、露出制御部20及び露出記録部22を備えている。メイン撮像素子部4は、CCDまたCMOS等により構成されて被写体光を撮像し、画像処理部8に対して撮像信号を出力する。サブ撮像素子部6は、被写体光の輝度を測光し、露出算出部18に測光結果を出力する。画像処理部8はメイン撮像素子部4から出力された撮像信号に対してホワイトバランス調整や解像度調整等の画像処理を施した動画像及びスルー画像等の画像データを生成する。また画像処理部8は後述するゲイン値を用い、動画像を構成するフレーム画像の露出制御を実施する。動画符号化処理部10は、動画像データを構成する各フレーム画像の圧縮等の符号化処理を行う。動画復号化処理部12は、符号化処理された動画像データを元の状態へと伸張させる等の復号化処理を行う。動画記録部14は、例えばデジタルカメラ2のカードスロットを介して装着されるメモリーカードであり動画像データ等を記憶する。ディスプレイ部16は、デジタルカメラ2の背面に設けられた液晶モニタであってメイン撮像素子部4からの撮像信号に基づくスルー画像、動画像等の画像を表示し、さらに各種設定を行う際のメニュー画面や撮影に関する情報等を表示する。露出算出部18は、動画撮影時にサブ撮像素子部6から出力された被写体光の輝度に基づいてその時点で生成されたフレーム画像を適正露出とするためのゲイン値を算出する。露出制御部20は、画像処理部8に対して露出算出部18において算出されたゲイン値を用いた露出制御の指示を行なう。なお、デジタルカメラ2の図示しない記憶部には、ゲイン処理に用いるゲイン値を更新するか否かの判断に用いる適正範囲と、後述するフレーム画像のフレーム番号とゲイン値を記録するか否かの判断に用いる閾値とが記憶されている。露出記録部22は、動画撮影時の各フレーム画像の内、算出されたゲイン値の変化が閾値を超えたフレーム画像のフレーム番号と、そのフレーム画像の輝度に基づいて露出算出部18により算出されたゲイン値とを関連付けて記録する。次にデジタルカメラ2による動画撮影について説明する。図2は実施の形態に係る動画撮影処理を示すフローチャートである。先ずユーザはデジタルカメラ2の図示しない操作部材を操作し、撮影モードを動画撮影モードに設定し、動画撮影開始を指示する撮影開始ボタンを押下する。これによりメイン撮像素子部4からの撮像信号に基づいて画像処理部8はフレーム画像の生成を開始するステップS1。また、露出算出部18は、画像処理部8によるフレーム画像の生成時に、サブ撮像素子部6からの出力信号に基づいてフレーム画像の輝度を検出し、そのフレーム画像の輝度に基づいてフレーム画像が適正露出となるためのゲイン値を算出するステップS2。露出制御部20は、前のフレーム画像のゲイン処理に用いたゲイン値に対する、算出されたゲイン値の変化が所定の閾値を超えたか否かを判断するステップS3。露出制御部20は、ゲイン値の変化が閾値を超えたと判断した場合にはステップS3、Yes、このフレーム画像のフレーム番号と、ステップS2で算出されたゲイン値を関連付けて露出記録部22に記録させるステップS4。露出制御部20は、ゲイン値の変化が所定の閾値を超えていないと判断した場合にはステップS3、No、ゲイン値の更新を行うか否かを判断するステップS5。露出制御部20は、ゲイン値の変化が適正範囲に含まれている場合にはゲイン更新を行わないステップS5、No。一方、露出制御部20は、ゲイン値の変化が適正範囲に含まれていない場合にはステップS5、Yes、画像処理部8において行うゲイン処理に用いるゲイン値をステップS2で算出されたゲイン値に更新するステップS6。画像処理部8はステップS4で露出記録部22にフレーム番号とゲイン値を記録した場合及びステップS5でゲイン値の更新を行なわないと判断した場合には、前のフレーム画像に対するゲイン処理に用いたゲイン値をよるゲイン処理を実行し、ステップS6でゲイン値を更新する場合には、ステップS2で算出された新たなゲイン値によるゲイン処理を実行するステップS7。画像処理部8は、ゲイン処理を実行したフレーム画像の記録を行なうステップS8。即ちゲイン処理が実行されたフレーム画像は、動画符号化処理部10で符号化処理が行なわれて動画記録部14に記録される。そしてユーザの撮影終了ボタンの押下による動画撮影の終了操作がなされない場合にはステップS9、No、ステップS1に戻って新たなフレーム画像の生成を行なう。またユーザにより終了操作がなされた場合にはステップS9、Yes、動画撮影処理を終了する。次に、動画像再生処理について説明する。先ずユーザはデジタルカメラ2の操作部材を操作することによって露出変化の応答速度を示す露出応答速度を選択する。ここで露出応答速度には、動画像が常に適正な露出で再生されるように記録されているフレーム番号のフレーム画像に対して、記録されたゲイン値を用いたゲイン処理を行なう設定や、動画記録部14に記録されている動画像データをそのままで再生させる設定がある。ユーザが操作部材を操作して動画記録部14に記録された動画像データに基づく動画像の再生指示を行なうと、動画記録部14に記録された動画像データは、動画復号化処理部12によって復号化処理が実施される。このとき、露出制御部20は、ユーザによる動画像の再生指示に基づき、露出記録部22からフレーム番号及びゲイン値を読み出す。画像処理部8は、復号化処理が施された動画像データに基づく動画像を、ユーザにより設定された露出応答速度に基づく明るさでディスプレイ部16に再生させる。例えば、露出応答速度の設定が常に適正露出にする設定の場合、画像処理部8は、露出制御部20によって読み出されたフレーム番号に該当するフレーム画像に対し、フレーム番号に関連付けられたゲイン値によるゲイン処理を行ない、各フレーム画像を適正露出に変更する。そして適正露出に変更されたフレーム画像を含む動画像はディスプレイ部16において再生される。また、露出応答速度の設定が動画撮影時での露出を変化させない設定の場合、復号化処理が実施された動画像データに基づく動画像は、ゲイン処理が行なわれずにディスプレイ部16において再生される。この第1の実施の形態においては、動画撮影時にゲイン値の変化が所定の閾値を超えたフレーム画像のフレーム番号と、そのフレーム画像を適正露出にするゲイン値とを関連付けて記録し、動画再生時に適正露出にする設定がなされているときに記録されているフレーム番号のフレーム画像に対しゲイン処理を行なうので、ユーザの意図した明るさの動画像を再生することができる。次に第2の実施の形態について説明する。図3は第2の実施の形態に係るデジタルカメラ2のシステム構成を示すブロック図である。なお第2の実施の形態の説明においては第1の実施の形態の構成と同一の構成には同一の符号を付して異なる部分について説明を行なう。図3に示すようにデジタルカメラ2は、メイン撮像素子部4からの撮像信号及びサブ撮像素子部6から測光結果に基づいてフレーム画像に含まれるオブジェクトを認識するオブジェクト認識部24を備える。オブジェクト認識部24は、動画撮影時に認識した各オブジェクトの位置等の情報を画像処理部8及び露出算出部18に送る。これにより画像処理部8によって生成されたフレーム画像には、オブジェクト認識部24により認識されたオブジェクトの情報が付加される。そしてフレーム画像は動画符号化処理部10で符号化処理が行なわれて動画記録部14に記録される。従って動画記録部14には、各フレーム画像にオブジェクトの情報が関連付けられた動画像データが記録される。また、露出算出部18は、画像処理部8によるフレーム画像生成時に、サブ撮像素子部6からの出力信号に基づいてフレーム画像の輝度を検出し、そのフレーム画像の輝度に基づいてフレーム画像が適正露出となるためのゲイン値を算出する。また露出算出部18は、オブジェクト認識部24から受け取ったオブジェクトの情報に基づいて各オブジェクトの位置を認識し、サブ撮像素子部6からの出力信号に基づいてフレーム画像に含まれる各オブジェクトの輝度を検出し、オブジェクトごとに各オブジェクトが適正露出となるためのゲイン値を算出する。露出制御部20は、前のフレーム画像のゲイン処理に用いたゲイン値に対する、算出されたフレーム画像のゲイン値の変化が所定の閾値を超えたか否かを判断する。露出制御部20は、フレーム画像のゲイン値の変化が閾値を超えたと判断した場合には、このフレーム画像のフレーム番号と、算出されたフレーム画像のゲイン値を関連付けて露出記録部22に記録させる。また露出制御部20はオブジェクトの情報にフレーム画像のフレーム番号及びオブジェクトごとの輝度に基づき算出されたゲイン値を関連付けて露出記録部22に記録させる。次に動画像を再生させる場合について説明する。ユーザが操作部材を操作して動画記録部14に記録された動画像データに基づく動画像の再生指示を行なうと、ディスプレイ部16に動画記録部14から読み出され、動画復号化処理部12で復号化された動画像データの先頭のフレーム画像、そのフレーム画像に関連付けられているオブジェクトの情報に基づくオブジェクトの位置を示す枠及びオブジェクトを選択するカーソルを含むオブジェクト選択画面が表示される。従ってユーザは操作部材を操作してカーソルを何れかの枠に重なるように移動させ、カーソル位置を決定するボタンを押下するこれにより、動画再生時に明るさの基準となるオブジェクトを選択する。動画再生時に明るさの基準となるオブジェクトの選択が行なわれると、復号化処理が実行された動画像データに基づく動画像は、ユーザにより選択されたオブジェクトが常に適正な露出となるように、画像処理部8によってゲイン処理が行なわれ、ディスプレイ部16において再生される。即ち画像処理部8は、受け取ったフレーム番号のフレーム画像に対し、選択されたオブジェクトに関連付けられて記録されているゲイン値を用いてゲイン処理を行なう。これにより各フレーム画像は、ユーザが選択したオブジェクトが適正露出になる明るさに変更されてディスプレイ部16において再生される。また、露出応答速度の設定が動画撮影時の露出を変化させない設定の場合、復号化処理が実行された動画像データに基づき動画像がディスプレイ部16において再生される。この第2の実施の形態においては、選択されたオブジェクトが適正露出となる動画像を再生させることができる。なお、上述の第2の実施の形態においては、オブジェクト認識部は、メイン撮像素子部4からの撮像信号及びサブ撮像素子部6からの撮像信号に基づいてオブジェクトを認識するものとして説明したが、これに限らず赤外線センサや熱源センサを設け、そのセンサからの情報を更に用いてオブジェクトを認識してもよい。このようにすればより高い精度でオブジェクトを認識することができる。また、上述の実施の形態においては、デジタルカメラによって動画像の再生を行ったが、PC等の再生装置によって動画像の再生を行なうようにしてもよい。この場合には上述の実施の形態における露出記録部22と同様な情報、即ち動画像データを構成するフレーム画像を適正露出にするためのフレーム画像のフレーム番号に関連付けられたそのフレーム画像を適正露出にするゲイン値を記録しておき、フレーム画像ごとにこのゲイン値を用いたゲイン処理を行ないながら動画再生を行なう。また、PCにフレーム画像に含まれるオブジェクトごとに、そのオブジェクトを適正露出にするためのゲイン値をフレーム番号に関連付けて記録しておき、選択したオブジェクトに関連付けて記録されているゲイン値を用いたゲイン処理を行ないながら動画再生を行なうようにしてもよい。