(57)【特許請求の範囲】
【請求項１】
撮影レンズにより結像された被写体像を光電変換する撮像素子を有する撮像手段と、
前記撮像手段より得られる異物検出用画像信号に含まれる異物の像から、少なくとも前記異物の位置及び大きさの情報を含む異物情報を検出する異物検出手段と、
前記撮影レンズの絞り値及び瞳位置の情報を含むレンズ情報を取得するレンズ情報取得手段と、
動画像撮影が行われるときに、前記撮像手段から連続的に出力される画像信号に基づいて生成される動画像データを記録するとともに、該動画像データに前記異物情報と前記レンズ情報とを付加して記録する記録手段と、
前記撮影レンズのズーム操作の開始および終了を検出するズーム操作検出手段と、を備え、
前記ズーム操作検出手段が前記撮影レンズのズーム操作の開始を検出するときに、前記記録手段は新規のフラグメントを作成し、
前記ズーム操作検出手段が前記撮影レンズのズーム操作の開始を検出してから、前記撮影レンズのズーム操作の終了を検出するまでの間に、前記レンズ情報取得手段は前記レンズ情報を更新して、前記記録手段は、前記更新されたレンズ情報を前記動画像データに付加して前記新規のフラグメントに記録することを特徴とする撮像装置。
【請求項２】
前記ズーム操作検出手段が前記撮影レンズのズーム操作の開始を検出してから、前記撮影レンズのズーム操作の終了を検出するまでの間に、前記レンズ情報取得手段は繰り返し前記レンズ情報を更新して、複数の更新されたレンズ情報を取得し、
前記記録手段は、前記複数の更新されたレンズ情報を前記動画像データに付加して前記新規のフラグメントに記録することを特徴とする請求項１に記載の撮像装置。 
【請求項３】
前記ズーム操作検出手段が前記撮影レンズのズーム操作の開始または前記撮影レンズのズーム操作の終了を検出するときに、前記レンズ情報取得手段は前記レンズ情報を更新することを特徴とする請求項１に記載の撮像装置。 
【請求項４】
前記ズーム操作検出手段が前記撮影レンズのズーム操作の終了を検出するときに、前記記録手段は新規のフラグメントを作成することを特徴とする請求項１に記載の撮像装置。
【請求項５】
前記レンズ情報取得手段は、一定のフレーム間隔ごとに繰り返し前記レンズ情報を更新することを特徴とする請求項２に記載の撮像装置。
【請求項６】
撮影レンズにより結像された被写体像を光電変換する撮像素子を有する撮像手段を備える撮像装置を制御する方法であって、
前記撮像手段より得られる異物検出用画像信号に含まれる異物の像から、少なくとも前記異物の位置及び大きさの情報を含む異物情報を検出する異物検出ステップと、
前記撮影レンズの絞り値及び瞳位置の情報を含むレンズ情報を取得するレンズ情報取得ステップと、
動画像撮影が行われるときに、前記撮像手段から連続的に出力される画像信号に基づいて生成される動画像データを記録するとともに、該動画像データに前記異物情報と前記レンズ情報とを付加して記録する記録ステップと、
前記撮影レンズのズーム操作の開始および終了を検出するズーム操作検出ステップと、を備え、
前記ズーム操作検出ステップで前記撮影レンズのズーム操作の開始が検出されるときに、前記記録ステップで新規のフラグメントを作成し、
前記ズーム操作検出ステップで前記撮影レンズのズーム操作の開始が検出されてから、前記撮影レンズのズーム操作の終了が検出されるまでの間に、前記レンズ情報取得ステップで前記レンズ情報が更新され、前記記録ステップで前記更新されたレンズ情報を前記動画像データに付加して前記新規のフラグメントに記録することを特徴とする撮像装置の制御方法。
【請求項７】
請求項６に記載の制御方法をコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ＣＣＤやＣＭＯＳセンサ等の撮像素子を用いた撮像装置における、光学ローパスフィルター等の表面に付着した異物による画質劣化を抑制する技術に関する。
【背景技術】
【０００２】
近年、デジタルカメラやデジタルビデオカメラなどのように、ＣＣＤ等の撮像素子を用いて画像信号を生成し、それをデータとして記録する撮像装置が数多く出回るようになってきている。デジタルカメラでは、従来記録媒体として使用していた感光フィルムが不要になり、これに代わって半導体メモリカードやハードディスク装置等のデータ記録媒体にデータ化された画像を記録する。これらのデータ記録媒体はフィルムと違って何度でも書き込み、消去が可能であるので、消耗品にかかる経費が少なくて済み、大変便利である。
【０００３】
通常、デジタルカメラには撮像画像を随時表示可能なＬＣＤ（液晶表示器）モニタ装置と、着脱可能な大容量記憶装置が搭載されている。
【０００４】
これら二つの装置を備えたデジタルカメラを利用すると、従来消耗品として使用してきた記録媒体であるフィルムが不要になるばかりでなく、撮像した画像をＬＣＤモニタ装置に表示してその場で直ちに確認できる。したがって、満足の得られない画像データはその場で消去したり、必要に応じて再撮影したりすることが可能となり、フィルムを用いる銀塩カメラと比較すると、写真撮影の効率が飛躍的に高まったと言える。
【０００５】
このような利便性と撮像素子の多画素化などの技術革新により、デジタルカメラの利用範囲は拡大してきており、近年では一眼レフ方式などレンズ交換が可能なデジタルカメラも多くなってきている。
【特許文献１】特開２００４−２２２２３１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
しかしながら、デジタルカメラでは、撮像素子に固定された撮像素子保護ガラス、光学フィルター等の表面上や光学系（以下、まとめて撮像素子光学系部品）にゴミ、ほこりなどの異物（以下、単にゴミ）が付着する場合がある。このように撮像素子光学系部品にゴミが付着すると、そのゴミによって光が遮られ、その部分が撮影されないなど、撮影した画像の品質が低下するという問題があった。
【０００７】
デジタルカメラに限らず銀塩フィルムを用いるカメラにおいても、フィルム上にゴミが存在すると写りこんでしまう問題はあったが、フィルムの場合は１コマごとにフィルムが移動するため、全てのコマに同様のゴミが写りこむことは大変稀である。
【０００８】
しかし、デジタルカメラの撮像素子は移動せず、共通した撮像素子で撮影を行うため、撮像素子光学系部品に一度ゴミが付着すると、多くのコマ（撮影画像）に同様のゴミが写りこんでしまう。特にレンズ交換式のデジタルカメラにおいては、レンズ交換時にカメラ内にゴミが入り込みやすいという問題がある。
【０００９】
したがって、撮影者は撮像素子光学系部品へのゴミの付着に常時気を使わねばならず、ゴミのチェックや清掃に多くの労力を費やしていた。特に撮像素子は、カメラ内部の比較的奥まったところに配置されているため、清掃やゴミの確認は容易ではない。
【００１０】
さらにレンズ交換式のデジタルカメラでは、レンズ着脱によりゴミの侵入が容易であるばかりでなく、レンズ交換式デジタルカメラの多くは撮像素子の直前にフォーカルプレーンシャッターを配置しており、撮像素子光学系部品上にゴミが付着しやすい。
【００１１】
このような撮像素子上のゴミは、通常撮像素子の表面にではなく、保護用のガラスや光学フィルター上に付着しているため、撮影レンズの絞り値や瞳位置により結像状態が異なる。即ち、絞りが開放値に近いとぼやけてしまい、小さいゴミが付着していたとしてもほとんど影響が無くなるが、逆に絞り値が大きくなるとはっきり結像し画像に影響を与えててしまう。
【００１２】
そこで、レンズの絞りを絞った状態で白い壁などを撮影し、撮像素子上のゴミだけが写った画像を予め用意して通常撮影画像と組み合わせて使用することで、ゴミを目立たなくする方法が知られている（特許文献１参照）。しかし、この方法では、ゴミ検出用に撮影した画像と、それに関連付ける本撮影画像群との対応付けを常に意識しなくてはならず、煩わしいという問題があった。
【００１３】
さらに近年では、レンズ交換式のデジタルカメラでも、動画を撮影する機能が備えられているものがある。当然ながら、動画でも静止画と同様にゴミが画像に写りこんでしまうことが問題となる。さらに動画撮影の場合、撮影中にズームイン／ズームアウトを行うことができるため、撮影レンズの絞り値や瞳位置が変化し、各フレームに対するゴミの結像状態が異なってしまうという問題がある。
【００１４】
従って、本発明は上述した課題に鑑みてなされたものであり、その目的は、撮像素子に固定された保護ガラス、フィルター等にゴミが付着した場合でも、撮影した動画像への影響を抑制できるようにすることである。
【課題を解決するための手段】
【００１５】
上述した課題を解決し、目的を達成するために、本発明に係わる撮像装置は、撮影レンズにより結像された被写体像を光電変換する撮像素子を有する撮像手段と、前記撮像手段より得られる異物検出用画像信号に含まれる異物の像から、少なくとも前記異物の位置及び大きさの情報を含む異物情報を検出する異物検出手段と、前記撮影レンズの絞り値及び瞳位置の情報を含むレンズ情報を取得するレンズ情報取得手段と、動画像撮影が行われるときに、前記撮像手段から連続的に出力される画像信号に基づいて生成される動画像データを記録するとともに、該動画像データに前記異物情報と前記レンズ情報とを付加して記録する記録手段と、前記撮影レンズのズーム操作の開始および終了を検出するズーム操作検出手段と、を備え、前記ズーム操作検出手段が前記撮影レンズのズーム操作の開始を検出するときに、前記記録手段は新規のフラグメントを作成し、前記ズーム操作検出手段が前記撮影レンズのズーム操作の開始を検出してから、前記撮影レンズのズーム操作の終了を検出するまでの間に、前記レンズ情報取得手段は前記レンズ情報を更新して、前記記録手段は、前記更新されたレンズ情報を前記動画像データに付加して前記新規のフラグメントに記録することを特徴とする。
【００１６】
また、本発明に係わる撮像装置の制御方法は、撮影レンズにより結像された被写体像を光電変換する撮像素子を有する撮像手段を備える撮像装置を制御する方法であって、前記撮像手段より得られる異物検出用画像信号に含まれる異物の像から、少なくとも前記異物の位置及び大きさの情報を含む異物情報を検出する異物検出ステップと、前記撮影レンズの絞り値及び瞳位置の情報を含むレンズ情報を取得するレンズ情報取得ステップと、動画像撮影が行われるときに、前記撮像手段から連続的に出力される画像信号に基づいて生成される動画像データを記録するとともに、該動画像データに前記異物情報と前記レンズ情報とを付加して記録する記録ステップと、前記撮影レンズのズーム操作の開始および終了を検出するズーム操作検出ステップと、を備え、前記ズーム操作検出ステップで前記撮影レンズのズーム操作の開始が検出されるときに、前記記録ステップで新規のフラグメントを作成し、前記ズーム操作検出ステップで前記撮影レンズのズーム操作の開始が検出されてから、前記撮影レンズのズーム操作の終了が検出されるまでの間に、前記レンズ情報取得ステップで前記レンズ情報が更新され、前記記録ステップで前記更新されたレンズ情報を前記動画像データに付加して前記新規のフラグメントに記録することを特徴とする。
【発明の効果】
【００１７】
本発明によれば、撮像素子に固定された保護ガラス、フィルター等にゴミが付着した場合でも、撮影した動画像への影響を抑制することが可能となる。
【発明を実施するための最良の形態】
【００１８】
以下、本発明の好適な実施形態について、図面を参照して詳細に説明する。
【００１９】
（第１の実施形態）
図１は、本発明の第１の実施形態に係るデジタルカメラ１２０の外観を示す斜視図、図２は図１の垂直断面図である。
【００２０】
図１において、カメラ本体１００の上部には、アクセサリシュー１１０、光学ファインダ１０４、ＡＥ（自動露出）ロックボタン１１２、ＡＦ（オートフォーカス）の測距点選択ボタン１１３、撮影操作をするためのレリーズボタン１１４が設けられている。また、電子ダイヤル４１１、モードダイヤル６０、および外部表示装置４０９も設けられている。電子ダイヤル４１１は、他の操作ボタンと併用してカメラに数値を入力したり、撮影モードを切り換えたりするための多機能信号入力装置である。また、外部表示装置４０９は、液晶表示装置から構成され、シャッタースピード、絞り値、撮影モードなどの撮影条件や、他の情報を表示する。
【００２１】
また、カメラ本体１００の背面には、撮影された画像や各種設定画面などを表示するＬＣＤモニタ装置４１７、ＬＣＤモニタ装置４１７に撮影した画像を表示する再生スイッチ６６、単写／連写スイッチ６８、十字配置スイッチ１１６、メニューボタン１２４、および電源スイッチ７２が設けられている。
【００２２】
単写／連写スイッチ６８は、後述するシャッタースイッチＳＷ２（６４）を押した場合に、１コマの撮影を行って待機状態とする単写モードと、シャッタースイッチＳＷ２（６４）を押している間連続して撮影を行い続ける連写モードとを設定することができる。
【００２３】
十字配置スイッチ１１６は、上下左右に配された４つのボタンと、中央に配されたＳＥＴボタン１１７を有し、ユーザがＬＣＤモニタ装置４１７に表示されるメニュー項目などの選択や実行をカメラに指示するために用いられる。
【００２４】
メニューボタン１２４は、ＬＣＤモニタ装置４１７にカメラの各種設定を行うためのメニュー画面を表示させるためのボタンである。例えば、撮影モードを選択、設定する時は、このメニューボタン１２４を押した後、十字配置スイッチ１１６の上下左右のボタンを操作して希望のモードを選択し、希望のモードが選択された状態でＳＥＴボタン１１７を押すことにより設定が完了する。
【００２５】
本実施形態のＬＣＤモニタ装置４１７は透過型であるため、ＬＣＤモニタ装置の駆動だけでは画像を視認することはできず、必ずその裏面には図２に示すようにバックライト照明装置４１６が必要である。このようにＬＣＤモニタ装置４１７とバックライト照明装置４１６は図３に示すように画像表示部２８を構成している。
【００２６】
図２に示すように、本実施形態の撮像装置は、主にカメラ本体１００と、交換レンズタイプのレンズユニット３００により構成されている。図２において、４０１は撮影光軸である。
【００２７】
レンズユニット３００において、３１０は複数のレンズから成る撮像レンズ、３１２は絞り、３０６は、レンズユニット３００をカメラ本体１００と機械的に結合するレンズマウントである。レンズユニット３００は、カメラ本体１００に対してレンズマウント３０６を介して着脱可能である。
【００２８】
カメラ本体１００において、ミラー１３０は撮影光路中に配置され、レンズユニット３００からの被写体光をファインダ光学系に導く位置（図２に示す位置、斜設位置と呼ぶ）と撮影光路外に退避する位置（退避位置と呼ぶ）との間で移動可能である。なお、ミラー１３０はクイックリターンミラーの構成としても、ハーフミラーの構成としても、どちらでも構わない。
【００２９】
図２において、ピント板２０４上にはミラー１３０から光学ファインダ１０４に導かれる被写体光が結像される。２０５はファインダの視認性を向上させるためのコンデンサレンズ、１３２はペンタゴナルダハプリズムであり、ピント板２０４およびコンデンサレンズ２０５を通った被写体光をファインダ観察用の接眼レンズ２０８および光学ファインダ１０４に導く。
【００３０】
２０９、２１０はそれぞれシャッターを構成する後幕と先幕で、これら後幕２０９、先幕２１０の開放によって後方に配置されている固体撮像素子である撮像素子１４が必要時間だけ露光される。撮像素子１４は、その前面に光学ローパスフィルタ４１８が配設されており、撮像素子１４に結像する被写体像の空間周波数を調整している。撮影画像に影響を及ぼすゴミ（異物）は、この光学ローパスフィルタ４１８に付着し、撮像素子１４に結像する被写体像に影として現れることにより、撮影画像の品質を劣化させる。
【００３１】
撮像素子１４はプリント基板２１１に保持されている。このプリント基板２１１の後方には、もう一枚のプリント基板である表示基板２１５が配置されている。この表示基板２１５の反対側の面にＬＣＤモニタ装置４１７およびバックライト照明装置４１６が配置されている。
【００３２】
２００は画像データを記録する記録媒体であり、８６は電池（携帯用電源）である。この記録媒体２００および電池８６は、カメラ本体１００に対して着脱可能である。
【００３３】
図３は、本発明の第１の実施形態に係るレンズ交換式のデジタルカメラの回路構成を示すブロック図である。
【００３４】
まず、レンズユニット３００の構成について説明する。
【００３５】
レンズマウント３０６内には、レンズユニット３００をカメラ本体１００と電気的に接続する各種機能が含まれている。３２０は、レンズマウント３０６において、レンズユニット３００をカメラ本体１００と接続するためのインターフェース、３２２はレンズユニット３００をカメラ本体１００と電気的に接続するコネクタである。
【００３６】
コネクタ３２２は、カメラ本体１００とレンズユニット３００との間で制御信号、状態信号、データ信号などを伝え合うと共に、各種電圧の電流を供給される機能も備えている。また、コネクタ３２２は電気通信のみならず、光通信、音声通信などを伝達する構成としても良い。
【００３７】
３４０は測光制御部４６からの測光情報に基づいて、後述するカメラ本体１００のシャッター１２を制御するシャッター制御部４０と連携しながら、絞り３１２を制御する絞り制御部である。３４２は撮像レンズ３１０のフォーカシングを制御するフォーカス制御部、３４４は撮像レンズ３１０のズーミングを制御するズーム制御部である。
【００３８】
３５０はレンズユニット３００全体を制御するレンズシステム制御回路である。レンズシステム制御回路３５０は、動作用の定数、変数、プログラムなどを記憶するメモリを備えている。更に、レンズユニット３００固有の番号などの識別情報、管理情報、開放絞り値や最小絞り値、焦点距離などの機能情報、現在や過去の各設定値などを保持する不揮発性メモリも備えている。
【００３９】
次に、カメラ本体１００の構成について説明する。
【００４０】
１０６はカメラ本体１００とレンズユニット３００を機械的に結合するレンズマウントである。１２は、後幕２０９および先幕２１０を備えるシャッターである。撮像レンズ３１０に入射した光線は、一眼レフ方式によって光量制限手段である絞り３１２、レンズマウント３０６及び１０６、ミラー１３０、シャッター１２を介して導かれ、光学像として被写体像を光電変換する撮像素子１４上に結像する。
【００４１】
１６は、撮像素子１４から出力されるアナログ信号をデジタル信号に変換するＡ／Ｄ変換器である。１８は撮像素子１４、Ａ／Ｄ変換器１６、Ｄ／Ａ変換器２６にそれぞれクロック信号や制御信号を供給するタイミング発生回路であり、メモリ制御回路２２及びシステム制御回路５０により制御される。
【００４２】
２０は画像処理回路であり、Ａ／Ｄ変換器１６からのデータ或いはメモリ制御回路２２からのデータに対して所定の画素補間処理や色変換処理を行う。また、画像処理回路２０は、必要に応じて、Ａ／Ｄ変換器１６から出力される画像データを用いて所定の演算処理を行う。得られた演算結果に基づいてシステム制御回路５０がシャッター制御部４０、焦点調節部４２を制御するための、ＴＴＬ（スルー・ザ・レンズ）方式のオートフォーカス（ＡＦ）処理、自動露出（ＡＥ）処理、フラッシュプリ発光（ＥＦ）処理を行うことができる。さらに、画像処理回路２０は、Ａ／Ｄ変換器１６から出力される画像データを用いて所定の演算処理を行い、得られた演算結果に基づいてＴＴＬ方式のオートホワイトバランス（ＡＷＢ）処理も行っている。
【００４３】
なお、本実施形態における図３に示す例では、焦点調節部４２及び測光制御部４６を専用に備えている。従って、焦点調節部４２及び測光制御部４６を用いてＡＦ処理、ＡＥ処理、ＥＦ処理の各処理を行い、画像処理回路２０を用いたＡＦ処理、ＡＥ処理、ＥＦ処理の各処理を行わない構成としても構わない。また、焦点調節部４２及び測光制御部４６を用いてＡＦ処理、ＡＥ処理、ＥＦ処理の各処理を行い、さらに、画像処理回路２０を用いたＡＦ処理、ＡＥ処理、ＥＦ処理の各処理を行う構成としてもよい。
【００４４】
２２はメモリ制御回路であり、Ａ／Ｄ変換器１６、タイミング発生回路１８、画像処理回路２０、画像表示メモリ２４、Ｄ／Ａ変換器２６、メモリ３０、圧縮・伸長回路３２を制御する。Ａ／Ｄ変換器１６から出力される画像データは、画像処理回路２０、メモリ制御回路２２を介して、或いはメモリ制御回路２２のみを介して、画像表示メモリ２４或いはメモリ３０に書き込まれる。
【００４５】
２４は画像表示メモリ、２６はＤ／Ａ変換器、２８はＬＣＤモニタ装置４１７、バックライト照明装置４１６等から成る画像表示部であり、画像表示メモリ２４に書き込まれた表示用の画像データはＤ／Ａ変換器２６を介して画像表示部２８により表示される。画像表示部２８を用いて、撮像した画像データを逐次表示することで、電子ビューファインダ（ＥＶＦ）機能を実現することができる。また、画像表示部２８は、システム制御回路５０の指示により任意に表示をＯＮ／ＯＦＦすることが可能であり、表示をＯＦＦにした場合にはカメラ本体１００の電力消費を大幅に低減することができる。
【００４６】
３０は撮影した静止画像を格納するためのメモリであり、所定枚数の静止画像を格納するのに十分な記憶容量を備えている。これにより、複数枚の静止画像を連続して撮影する連写撮影やパノラマ撮影の場合にも、高速かつ大量の画像書き込みをメモリ３０に対して行うことが可能となる。また、動画撮影時には、所定レートで連続的に書き込まれる画像のフレームバッファとして使用される。さらに、メモリ３０はシステム制御回路５０の作業領域としても使用することが可能である。
【００４７】
３２は公知の圧縮方法を用いて画像データを圧縮・伸長する圧縮・伸長回路である。圧縮・伸長回路３２は、メモリ３０に格納された画像を読み込んで圧縮処理或いは伸長処理を行い、処理を終えたデータを再びメモリ３０に書き込む。
【００４８】
４０はシャッター制御部であり、測光制御部４６からの測光情報に基づいて絞り３１２を制御する絞り制御部３４０と連携しながらシャッター１２を制御する。４２はＡＦ（オートフォーカス）処理を行うための焦点調節部である。レンズユニット３００内の撮像レンズ３１０に入射した光線を絞り３１２、レンズマウント３０６、１０６、ミラー１３０及び焦点調節用サブミラー（不図示）を介して一眼レフ方式で入射することにより、光学像として結像された画像の合焦状態を測定する。
【００４９】
４６はＡＥ（自動露出）処理を行うための測光制御部である。レンズユニット３００内の撮像レンズ３１０に入射した光線を、絞り３１２、レンズマウント３０６、１０６、ミラー１３０及び測光用サブミラー（図示せず）を介して一眼レフ方式で入射することにより、光学像として結像された画像の露出状態を測定する。４８はフラッシュであり、ＡＦ補助光の投光機能、フラッシュ調光機能も有する。測光制御部４６はフラッシュ４８と連携することにより、ＥＦ（フラッシュ調光）処理機能も有する。
【００５０】
また、焦点調節部４２による測定結果と、Ａ／Ｄ変換器１６からの画像データを画像処理回路２０によって演算した演算結果とを用いて、ＡＦ制御を行うようにしてもよい。さらに、測光制御部４６による測定結果と、Ａ／Ｄ変換器１６からの画像データを画像処理回路２０によって演算した演算結果とを用いて露出制御を行うようにしてもよい。
【００５１】
５０はカメラ本体１００全体を制御するシステム制御回路であり、周知のＣＰＵなどを内蔵する。５２はシステム制御回路５０の動作用の定数、変数、プログラム等を記憶するメモリである。
【００５２】
５４はシステム制御回路５０でのプログラムの実行に応じて、文字、画像、音声などを用いて動作状態やメッセージなどを外部に通知するための通知部である。通知部５４としては、例えばＬＣＤやＬＥＤなどによる視覚的な表示を行う表示部や音声による通知を行う発音素子などが用いられるが、これらのうち１つ以上の組み合わせにより構成される。特に、表示部の場合には、例えば外部表示装置４０９のようにカメラ本体１００の操作部７０近辺で、視認しやすい、単数あるいは複数箇所に設置されている。また、通知部５４は、その一部の機能が光学ファインダ１０４内に設置されている。
【００５３】
通知部５４の表示内容の内、ＬＣＤなどの画像表示部２８に表示するものとしては以下のものがある。まず、単写／連写撮影表示、セルフタイマ表示等、撮影モードに関する表示がある。また、圧縮率表示、記録画素数表示、記録枚数表示、残撮影可能枚数表示等の記録に関する表示がある。また、シャッター速度表示、絞り値表示、露出補正表示、調光補正表示、外部フラッシュ発光量表示、赤目緩和表示等の撮影条件に関する表示がある。その他に、マクロ撮影表示、ブザー設定表示、電池残量表示、エラー表示、複数桁の数字による情報表示、記録媒体２００及びＰＣ２１０の着脱状態表示がある。更に、レンズユニット３００の着脱状態表示、通信Ｉ／Ｆ動作表示、日付・時刻表示、外部コンピュータとの接続状態を示す表示等も行われる。
【００５４】
また、通知部５４の表示内容のうち、光学ファインダ１０４内に表示するものとしては、例えば、以下のものがある。合焦表示、撮影準備完了表示、手振れ警告表示、フラッシュ充電表示、フラッシュ充電完了表示、シャッター速度表示、絞り値表示、露出補正表示、記録媒体書き込み動作表示等である。
【００５５】
５６は後述するプログラムなどが格納された電気的に消去・記録可能な不揮発性メモリであり、例えばＥＥＰＲＯＭ等が用いられる。
【００５６】
６０、６２、６４、６６、６８、及び７０は、システム制御回路５０の各種の動作指示を入力するための操作手段であり、スイッチやダイヤル、タッチパネル、視線検知によるポインティング、音声認識装置等の単数或いは複数の組み合わせで構成される。
【００５７】
ここで、これらの操作手段の具体的な説明を行う。
【００５８】
６０はモードダイヤルで、自動撮影モード、プログラム撮影モード、シャッター速度優先撮影モード、絞り優先撮影モード、マニュアル撮影モード、焦点深度優先（デプス）撮影モード等の各機能撮影モードを切り替え設定することができる。他に、ポートレート撮影モード、風景撮影モード、接写撮影モード、スポーツ撮影モード、夜景撮影モード、パノラマ撮影モード、動画撮影モードなどの各機能撮影モードを切り替え設定することもできる。
【００５９】
６２はシャッタースイッチＳＷ１で、レリーズボタン１１４の操作途中（例えば半押し）でＯＮとなり、ＡＦ処理、ＡＥ処理、ＡＷＢ処理、ＥＦ処理等の動作開始を指示する。
【００６０】
６４はシャッタースイッチＳＷ２で、レリーズボタン１１４の操作完了（例えば全押し）でＯＮとなり、露光処理、現像処理、及び記録処理からなる一連の処理の動作開始を指示する。まず、露光処理では、撮像素子１４から読み出した信号をＡ／Ｄ変換器１６、メモリ制御回路２２を介してメモリ３０に書き込み、更に、画像処理回路２０やメモリ制御回路２２での演算を用いた現像処理が行われる。更に、記録処理では、メモリ３０から画像データを読み出し、圧縮・伸張回路３２で圧縮を行い、記録媒体２００あるいはＰＣ２１０に書き込む、または送信する。
【００６１】
６６は再生スイッチであり、撮影モード状態で撮影した画像をメモリ３０あるいは記録媒体２００、ＰＣ２１０から読み出して画像表示部２８に表示する再生動作の開始を指示する。他に、再生モード、マルチ画面再生・消去モード、ＰＣ接続モード等の各機能モードを設定することができる。
【００６２】
６８は単写／連写スイッチで、シャッタースイッチＳＷ２（６４）を押した場合に、１コマの撮影を行って待機状態とする単写モードと、シャッタースイッチＳＷ２（６４）を押している間、連続して撮影を行い続ける連写モードとを設定することができる。
【００６３】
７０は各種ボタンやタッチパネルなどから成る操作部である。一例として、ライブビュー開始／停止ボタン、動画記録開始／停止ボタン、メニューボタン１２４、ＳＥＴボタン１１７、マルチ画面再生改ページボタン、フラッシュ設定ボタン、単写／連写／セルフタイマー切り換えボタン、十字配置スイッチ１１６、ＡＥ（自動露出）ロックボタン１１２、ＡＦの測距点選択ボタン１１３、電子ダイヤル４１１を含む。更に、再生画像移動＋（プラス）ボタン、再生画像移動−（マイナス）ボタン、撮影画質選択ボタン、露出補正ボタン、調光補正ボタン、外部フラッシュ発光量設定ボタン、日付／時間設定ボタンなども含む。なお、上記十字配置スイッチ１１６の上下左右のボタンの各機能は、回転ダイヤルスイッチを備えることによって、より軽快に数値や機能を選択することが可能となる。
【００６４】
また、画像表示部２８のＯＮ／ＯＦＦを設定する画像表示ＯＮ／ＯＦＦスイッチ、撮影直後に撮影した画像データを自動再生するクイックレビュー機能を設定するクイックレビューＯＮ／ＯＦＦスイッチがある。また、ＪＰＥＧ圧縮の圧縮率を選択するため、あるいは撮像素子の信号をそのままデジタル化して記録媒体に記録するＲＡＷモードを選択するためのスイッチである圧縮モードスイッチがある。また、ワンショットＡＦモードとサーボＡＦモードとを設定可能なＡＦモード設定スイッチなどがある。ワンショットＡＦモードでは、シャッタースイッチＳＷ１（６２）を押した際にオートフォーカス動作を開始し、一旦合焦した場合、その合焦状態を保ち続ける。サーボＡＦモードでは、シャッタースイッチＳＷ１（６２）を押している間、連続してオートフォーカス動作を続ける。更に、後述するようにゴミ検出用画像を撮影してゴミ情報を取得する、ゴミ情報取得モードを設定することができる設定スイッチを含む。
【００６５】
７２は電源スイッチであり、カメラ本体１００の電源オン、電源オフの各モードを切り替え設定することができる。また、カメラ本体１００に接続されたレンズユニット３００、外部フラッシュ１１２、記録媒体２００、ＰＣ２１０等の各種付属装置の電源オン、電源オフの設定も合わせて切り替え設定可能である。
【００６６】
８０は電源制御部で、電池検出回路、ＤＣ−ＤＣコンバータ、通電するブロックを切り替えるスイッチ回路等により構成されている。電源制御部８０は、電池の装着の有無、電池の種類、電池残量の検出を行い、検出結果及びシステム制御回路５０の指示に基づいてＤＣ−ＤＣコンバータを制御し、必要な電圧を必要な期間、記録媒体を含む各部へ供給する。
【００６７】
８２、８４はコネクタ、８６はアルカリ電池やリチウム電池等の一次電池、ＮｉＣｄ電池やＮｉＭＨ電池、Ｌｉ‐ｉｏｎ電池、Ｌｉポリマー電池等の二次電池、ＡＣアダプター等からなる電源部である。
【００６８】
９０及び９４はメモリカードやハードディスク等の記録媒体やＰＣとのインタフェース、９２及び９６はメモリカードやハードディスク等の記録媒体やＰＣと接続を行うコネクタである。９８はコネクタ９２及び／或いは９６に記録媒体２００或いはＰＣ２１０が装着されているか否かを検知する記録媒体着脱検知回路である。
【００６９】
なお、本実施形態では記録媒体を取り付けるインタフェース及びコネクタを２系統持つものとして説明しているが、記録媒体を取り付けるインタフェース及びコネクタは、単数或いは複数、いずれの系統数を備える構成としても構わない。また、異なる規格のインタフェース及びコネクタを組み合わせて備える構成としても構わない。
【００７０】
インタフェース及びコネクタとしては、種々の記憶媒体の規格に準拠したものを用いて構成することが可能である。例えば、ＰＣＭＣＩＡ（Personal Computer Memory Card International Association）カードやＣＦ（コンパクトフラッシュ（登録商標））カード、ＳＤカード等である。インタフェース９０及び９４、そしてコネクタ９２及び９６をＰＣＭＣＩＡカードやＣＦカード等の規格に準拠したものを用いて構成した場合、各種通信カードを接続することができる。通信カードとしては、ＬＡＮカードやモデムカード、ＵＳＢ（Universal Serial Bus）カード、ＩＥＥＥ（Institute of Electrical and Electronic Engineers）１３９４カードがある。他にも、Ｐ１２８４カード、ＳＣＳＩ（Small Computer System Interface）カード、ＰＨＳ等がある。これら各種通信カードを接続することにより、他のコンピュータやプリンタ等の周辺機器との間で画像データや画像データに付属した管理情報を転送し合うことができる。
【００７１】
光学ファインダ１０４には、撮像レンズ３１０に入射した光線を、一眼レフ方式によって、絞り３１２、レンズマウント３０６、１０６、ミラー１３０、１３２を介して導き、光学像として結像させて表示することができる。これにより、画像表示部２８による電子ファインダ機能を使用すること無しに、光学ファインダのみを用いて撮影を行うことが可能である。また、光学ファインダ１０４内には、通知部５４の一部の機能、例えば、合焦状態、手振れ警告、フラッシュ充電、シャッター速度、絞り値、露出補正などが表示される。
【００７２】
１１２は、アクセサリシュー１１０を介して装着される、外部フラッシュ装置である。
【００７３】
１２０はレンズマウント１０６内でカメラ本体１００をレンズユニット３００と接続するためのインターフェースである。
【００７４】
１２２はカメラ本体１００をレンズユニット３００と電気的に接続するコネクタである。また、レンズマウント１０６及びコネクタ１２２にレンズユニット３００が装着されているか否かは、不図示のレンズ着脱検知部により検知される。コネクタ１２２はカメラ本体１００とレンズユニット３００との間で制御信号、状態信号、データ信号などを伝え合うと共に、各種電圧の電流を供給する機能も備えている。
【００７５】
コネクタ１２２を介して通信される、レンズユニット３００の各種光学情報（絞り、ズーム位置、瞳位置、焦点距離など）は、カメラ本体１００のメモリ３０に記憶される。通信の要求はカメラ本体１００側から行う場合もあれば、レンズユニット３００側から情報更新のたびに通信される場合もある。
【００７６】
また、コネクタ１２２は電気通信だけでなく、光通信、音声通信などを伝達する構成としてもよい。
【００７７】
２００はメモリカードやハードディスク等の記録媒体である。この記録媒体２００は、半導体メモリや磁気ディスク等から構成される記録部２０２、カメラ本体１００とのインタフェース２０４、カメラ本体１００と接続を行うコネクタ２０６を備えている。
【００７８】
記録媒体２００としては、ＰＣＭＣＩＡカードやコンパクトフラッシュ（登録商標）等のメモリカード、ハードディスク等を用いることができる。また、マイクロＤＡＴ、光磁気ディスク、ＣＤ−ＲやＣＤ−ＲＷ等の光ディスク、ＤＶＤ等の相変化型光ディスク等で構成されていても勿論構わない。
【００７９】
２１０はＰＣであり、磁気ディスク（ＨＤ）等から構成される記録部２１２、カメラ本体１００とのインタフェース２１４、カメラ本体１００と接続を行うコネクタ２１６を備えている。インターフェース９４はＵＳＢやＩＥＥＥ１３９４などが挙げられるが、特に限定はない。
【００８０】
（ゴミ検出処理）
本実施形態では、まず、撮像素子１４の前方に配置された光学ローパスフィルタ４１８に付着したゴミ（異物）の情報（撮像画面内のゴミの情報）であるゴミ情報（異物情報）を得るためのゴミ検出用画像（異物検出用画像信号）を撮影する。そして、ゴミデータを抽出し、ゴミ補正データ（ゴミ情報プロファイル）を生成しておく。ここでゴミ検出用画像は、できるだけ均一な輝度面を撮影した画像が望ましいが、身近な場所で容易に撮影できることが望ましいため、厳密な均一性を要求するものではない。例えば、青空や白い壁面を撮影することを想定している。
【００８１】
まず、光学ローパスフィルタ４１８に付着したゴミの位置を検出する処理の例を、図４のフローチャートを用いて説明する。この処理は、システム制御回路５０が不揮発性メモリ５６に記憶されたゴミ検出処理プログラムを実行することにより実施される。
【００８２】
ゴミ検出処理は、ゴミ検出用画像を撮像することにより行われる。ゴミ検出処理を行う場合、面光源装置の射出面や白い壁などの均一な色を持つ面にレンズユニット３００の撮影光軸４０１を向けてカメラを設置し、ゴミ検出の準備を行なう。または、レンズマウント１０６にゴミ検出用のライトユニット（レンズの代わりに装着する小型の点光源装置）を装着し、ゴミ検出の準備を行う。ライトユニットの光源は例えば白色ＬＥＤが考えられ、発光面のサイズを予め定めた絞り値（例えば、Ｆ３２）相当になるように調整するのが望ましい。
【００８３】
本実施形態では、通常の撮影レンズを用いた場合について説明するが、上記のライトユニットをレンズマウント１０６に取り付けてゴミ検出を行っても良い。このように、本実施形態においてゴミ検出用画像は、均一な色を有する画像である。
【００８４】
準備が終了した後、十字配置スイッチ１１６からゴミ検出処理の開始が指示されると、システム制御回路５０は、まず絞りの設定を行う。撮像素子近傍のゴミはレンズの絞り値によって結像状態が変わり、レンズの瞳位置によって位置が変化する。したがって、ゴミ補正データにはゴミの位置や大きさに加え、検出時の絞り値とレンズの瞳位置を保持する必要がある。
【００８５】
ただし、ゴミ補正データを作成する段階で、異なるレンズを用いたとしても常に同じ絞り値を使うことを予め決めておけば、必ずしもゴミ補正データ内に絞り値を保持する必要はない。また、瞳位置に関してもライトユニットを用いたり、特定のレンズのみの使用を許可することで、同様に必ずしもゴミ補正データ内に瞳位置を保持する必要はなくなる。
【００８６】
つまり、ゴミ補正データを作成する段階において、使用するレンズを複数許したり、絞り込む絞り値を適宜変更する場合には、検出時の絞り値とレンズの瞳位置を、ゴミ補正データ内に保持する必要があると言える。なお、ここで瞳位置とは、射出瞳の撮像面（焦点面）からの距離をいう。
【００８７】
ここでは、例えばＦ２２を指定する（ステップＳ２１）。
【００８８】
次にシステム制御回路５０はコネクタ１２２を介して絞り制御部３４０に対し、レンズユニット３００の絞り羽根制御を行わせ、ステップＳ２１で指定された絞り値に絞りを設定する（ステップＳ２２）。さらに、フォーカス制御部３４２に指示して、フォーカス位置を無限遠に設定する（ステップＳ２３）。
【００８９】
撮影レンズの絞り値とフォーカス位置が設定されると、ゴミ検出モードでの撮影を実行する（ステップＳ２４）。ステップＳ２４で行う撮像処理ルーチンの詳細に関しては図９を用いて後に説明する。撮影された画像データは、メモリ３０に格納される。
【００９０】
撮影が終了すると、撮影時の絞り値とレンズ瞳位置を取得（レンズ情報取得）する（ステップＳ２５）。画像処理回路２０にメモリ３０に記憶されている撮影画像の各画素に対応するデータを呼び出す（ステップＳ２６）。画像処理回路２０は、図６に示す処理を行い、ゴミが存在する画素の位置と大きさを取得する（ステップＳ２７）。ステップＳ２７で取得したゴミが存在する画素の位置と大きさ、およびステップＳ２５で取得した絞り値とレンズ瞳位置情報を、不揮発性メモリ５６に登録する（ステップＳ２８）。ここで、前述したライトユニットを用いた場合には、レンズ情報を取得できない。そこで、レンズ情報が取得できない場合は、ライトユニットを使ったと判断し、予め定められたレンズ瞳位置情報と、ライトユニットの光源径から算出される換算絞り値を登録する。
【００９１】
ここで、ステップＳ２８において、予め不揮発性メモリ５６に記録されている製造時からの不良画素（画素欠陥）の位置と、読み出した画素データの位置を比べて画素欠陥であるかどうかを確認する。そして、画素欠陥によるものでは無いと判断された領域のみ、不揮発性メモリ５６に位置を登録しても良い。
【００９２】
不揮発性メモリ５６に格納されるゴミ補正データのデータ形式例を図５に示す。図５に示した通り、ゴミ補正データには、検出用画像撮影時の、レンズ情報とゴミの位置、大きさの情報が格納される。
【００９３】
具体的には、検出用画像撮影時のレンズ情報として、検出用画像撮影時における実際の絞り値（Ｆ値）と、そのときのレンズ瞳位置を格納する。続いて記憶領域に検出したゴミ領域の数（整数値）を格納し、これに続き、個々の具体的なゴミ領域のパラメータを、ゴミ領域の数だけ繰返して格納する。ゴミ領域のパラメータは、ゴミの半径（例えば２バイト）、有効画像領域における中心のｘ座標（例えば２バイト）、おなじく中心のｙ座標（例えば２バイト）の３つの数値のセットである。
【００９４】
不揮発性メモリ５６の大きさ等によりゴミ補正データサイズに制限がある場合、ステップＳ２７で得たゴミ領域の先頭から優先してデータを格納する。これは、ステップＳ２７のゴミ領域取得ルーチン内では、後述するようにゴミ領域を、目立つゴミの順にソートするからである。
【００９５】
（ゴミ領域取得ルーチン）
次に、図６から図８を用いて、ステップＳ２７で行うゴミ領域取得ルーチンの詳細について説明する。
【００９６】
図７に示すように、呼び出した画像データをメモリ３０上に展開し、予め定められたブロック単位で処理を行う。これは、レンズやセンサ特性に起因する周辺減光に対応するためである。周辺減光とは、レンズの中央部に比べ周辺部の輝度が落ちてしまう現象であり、レンズの絞りを小さくすることである程度軽減されることが知られている。しかし、絞りを絞った状態でも、撮影画像に対して予め定められたスレッショルド値でゴミ位置の判定を行うと、レンズによっては周辺部のゴミが正確に検出できなくなるという問題がある。そこで、画像をブロック分割して周辺減光の影響を軽減する。
【００９７】
単純にブロック分割すると、ブロックとブロックの間でスレッショルド値が異なる場合、ブロック間をまたぐゴミの検出結果がずれてしまうという問題がある。そこで、ブロック間をオーバーラップさせ、オーバーラップ領域を構成するブロックのいずれかでゴミと判定された画素をゴミ領域として扱う。
【００９８】
ブロック内のゴミ領域判定は、図６に示す処理の流れで行う。まず、ブロック内の最大輝度Ｌmax、平均輝度Ｌaveを算出し、次式を用いてブロック内のスレッショルド値Ｔ１を算出する。
【００９９】
Ｔ１＝Ｌave×０.６＋Ｌmax×０.４
次に、スレッショルド値を超えない画素をゴミ画素とし（ステップＳ６１）、ゴミ画素によって構成される孤立領域を各々一つのゴミ領域ｄｉ（ｉ＝０，１，…，ｎ）とする（ステップＳ６２）。図８に示すように、ゴミ領域毎に、ゴミ領域を構成する画素の水平方向の座標の最大値Ｘmaxおよび最小値Ｘmin、垂直方向の座標の最大値Ｙmaxおよび最小値Ｙminを求め、ゴミ領域ｄｉのサイズを表す半径ｒｉを次式によって算出する（ステップＳ６３）。
【０１００】
ｒｉ＝√[｛（Ｘmax−Ｘmin）／２｝2＋｛（Ｙmax−Ｙmin）／２｝2]
Ｘmax、Ｘmin、Ｙmax、Ｙminとｒｉの関係を、図８に示す。
【０１０１】
その後ステップＳ６４で、ゴミ領域毎の平均輝度値を算出する。
【０１０２】
不揮発性メモリ５６のサイズによる制限などにより、ゴミ補正データのデータサイズが制限されている場合がある。このような場合に対応するために、ゴミ位置情報を、大きさやゴミ領域の平均輝度値によってソートする（ステップＳ６５）。本実施形態では、ｒｉの大きい順にソートする。ｒｉが等しい場合、平均輝度値の低い順にソートする。このようにすることで、目立つゴミを優先してゴミ補正データに登録することが出来る。なお、ソート済みのゴミ領域をＤｉ、ゴミ領域Ｄｉの半径をＲｉとする。
【０１０３】
なお、予め定められたサイズより大きいゴミ領域がある場合、ソートの対象から外し、ソート済みゴミ領域リストの末尾に配置しても良い。大きいゴミ領域については、後に補間処理をするとかえって画質を低下させる場合があり、補正対象の優先順位としては最下位として扱うことが望ましいからである。
【０１０４】
（撮像処理ルーチン）
次に、図９に示すフローチャートを用いて、図４のステップＳ２４で行われる撮像処理ルーチンの詳細について説明する。この処理はシステム制御回路５０が不揮発性メモリ５６に記憶された撮像処理プログラムを実行することにより実施される。
【０１０５】
この撮像処理ルーチンが実行されると、ステップＳ２０１でシステム制御回路５０は、図２及び図３に示すミラー１３０を作動させ、いわゆるミラーアップを行い、撮影光路外にミラー１３０を退避させる。
【０１０６】
次に、ステップＳ２０２で撮像素子１４での電荷蓄積を開始し、次のステップＳ２０３では図３に示したシャッター１２をそれぞれ走行させて露光を行う。そして、ステップＳ２０４で撮像素子１４の電荷蓄積を終了し、次のステップＳ２０５で撮像素子１４から画像信号を読み出してＡ／Ｄ変換器１６および画像処理回路２０で処理した画像データをメモリ３０に一次記憶する。
【０１０７】
次のステップＳ２０６で撮像素子１４から全ての画像信号の読み出しが終了すると、ステップＳ２０７でミラー１３０をミラーダウンし、ミラーを斜設位置に戻して一連の撮像動作を終了する。
【０１０８】
ステップＳ２０８にて、通常撮影かゴミ検出用画像撮影かを判断し、通常撮影時にはステップＳ２０９へ進んで、撮影した画像が記録媒体２００に記録される。
【０１０９】
（ゴミ除去処理）
次に、上述のゴミ補正データを用いて、静止画像ファイルに対して画像処理によりゴミ除去を行う動作の流れについて、図１０を用いて説明する。本実施形態は、動画像ファイルに対してゴミ除去処理を行うものであるが、動画像ファイルに対しても静止画像ファイルに対するゴミ除去処理と同様の手法を適用することができるので、静止画像ファイルに対するゴミ除去処理について説明する。
【０１１０】
まず、ゴミ除去処理を行う静止画像ファイルを指定し、ゴミ除去処理を行う装置（カメラ内の画像処理回路２０でもよいしカメラ外部の画像処理装置でもよい）に読み込ませる（ステップＳ１８０１）。
【０１１１】
次に、ゴミ除去処理を行う装置が、図６のステップＳ６５で作成したゴミ補正データを取得する（ステップＳ１８０２）。
【０１１２】
次に、ステップＳ１８０２で取得したゴミ補正データから、座標列Ｄｉ（ｉ＝１，２，…ｎ）、半径列Ｒｉ（ｉ＝１，２，…，ｎ）、絞り値ｆ１とレンズ瞳位置Ｌ１を得る（ステップＳ１８０３）。ここでＲｉは、図６のステップＳ６５で算出した座標Ｄｉのゴミの大きさである。さらに、ステップＳ１８０４で、撮影時の絞り値ｆ２とレンズの瞳位置Ｌ２を取得する。ステップＳ１８０５でＤｉを次式で変換する。ここで、ｄは画像中心から座標Ｄｉまでの距離、Ｈは撮像素子１４の表面とゴミとの距離であるとする。変換後の座標Ｄｉ’と変換後の半径Ｒｉ’は例えば次式で定義する。
【０１１３】
Ｄｉ’（ｘ，ｙ）＝（Ｌ２×（Ｌ１−Ｈ）×ｄ／（（Ｌ２−Ｈ）×Ｌ１））×Ｄｉ（ｘ，ｙ）
Ｒｉ’＝（Ｒｉ×ｆ１／ｆ２＋３）              （１）
ここでの単位はピクセルであり、Ｒｉ’についての「＋３」はマージン量である。
【０１１４】
ステップＳ１８０６で座標Ｄｉ’、半径Ｒｉ’で示される領域内のゴミを検出し、必要に応じて補間処理を適用する。補間処理の詳細については後述する。ステップＳ１８０７で全ての座標についてゴミ除去処理を適用したかどうかを判定し、全ての座標について処理が終わっていれば処理を終了し、そうでなければステップＳ１８０６に戻る。
【０１１５】
次に、ゴミ領域の補間処理の詳細について説明する。図１１は、補間ルーチンの流れを示すフローチャートである。
【０１１６】
まずステップＳ１９０１で、ゴミ領域判定を行う。ゴミ領域とは、次の条件全てを満たす領域とする。
（１）図１０のステップＳ１８０５で算出した中心座標Ｄｉ’、半径Ｒｉ’（式（１）で求められたＤｉ’，Ｒｉ’）に含まれる画素の平均輝度Ｙaveと最高輝度Ｙmaxを用いて次式で求められるスレッショルド値Ｔ２より暗い領域。
【０１１７】
Ｔ２＝Ｙave×０.６＋Ｙmax×０.４
（２）上記の中心座標Ｄｉ’、半径Ｒｉ’の円と接しない領域。
（３）（１）で選択された輝度の低い画素によって構成される孤立領域に対し、図６中のステップＳ６３と同様の方法で算出した半径値がl１画素以上、l２画素未満である領域。
（４）円の中心座標Ｄｉを含む領域。
【０１１８】
本実施形態では、l１は３画素、l２は３０画素とする。このようにすることで、孤立した小領域だけをゴミ領域として扱うことが可能になる。また、レンズ瞳位置が正確に取得できない場合には、（４）の条件は幅を持たせても良い。例えば、着目領域が座標ＤｉからＸ方向、Ｙ方向に夫々±３画素の範囲の座標を含めば、ゴミ領域と判定するなどという条件が考えられる。
【０１１９】
ステップＳ１９０２で、このような領域があればステップＳ１９０３へ進みゴミ領域補間を行い、存在しない場合は処理を終了する。ステップＳ１９０３で実行するゴミ領域補間処理は、公知の欠損領域補間法で行う。公知の欠損領域補間法には、例えば、特開２００１−２２３８９４号公報に開示されているパターン置換がある。特開２００１−２２３８９４号公報では赤外光を用いて欠損領域を特定しているが、本実施形態ではステップＳ１９０１で検出したゴミ領域を欠損領域として扱い、パターン置換によりゴミ領域を周囲の正常画素で補間する。パターン置換で埋められない画素については、パターン補間後の画像データに対し、補間対象画素に最も近い順に正常画素をｐ個選択し、その平均色を用いて補間する。
【０１２０】
次に、近年デジタルカメラやデジタルビデオカメラ等で、動画像データの記録に用いられている動画ファイルフォーマットである、ＭＰ４について説明する。
【０１２１】
ＭＰ４ファイル形式（ＩＳＯ／ＩＥＣ  １４４９６−１４；“Ｉｎｆｏｒｍａｔｉｏｎ  ｔｅｃｈｎｏｌｏｇｙ――Ｃｏｄｉｎｇ  ｏｆ  ａｕｄｉｏ−ｖｉｓｕａｌ  ｏｂｊｅｃｔｓ――Ｐａｒｔ  １４：ＭＰ４  ｆｉｌｅ  ｆｏｒｍａｔ”；ＩＳＯ／ＩＥＣ；２００３−１１−２４を参照）とは、ＩＳＯ／ＩＥＣ  ＪＴＣ１／ＳＣ２９／ＷＧ１１（Ｉｎｔｅｒｎａｔｉｏｎａｌ  Ｏｒｇａｎｉｚａｔｉｏｎ  ｆｏｒ  Ｓｔａｎｄａｒｄｉｚａｔｉｏｎ／Ｉｎｔｅｒｎａｔｉｏｎａｌ  Ｅｎｇｉｎｅｅｒｉｎｇ  Ｃｏｎｓｏｒｔｉｕｍ）によって規格化された、ＭＰＥＧなどの動画・音声のコンテンツデータをファイルに記録するために「ＩＳＯ  Ｂａｓｅ  Ｍｅｄｉａ  Ｆｉｌｅ  Ｆｏｒｍａｔ」（ＩＳＯ／ＩＥＣ  １４４９６−１２；“Ｉｎｆｏｒｍａｔｉｏｎ  ｔｅｃｈｎｏｌｏｇｙ――Ｃｏｄｉｎｇ  ｏｆ  ａｕｄｉｏ−ｖｉｓｕａｌ  ｏｂｊｅｃｔｓ――Ｐａｒｔ  １２：ＩＳＯ  ｂａｓｅ  ｍｅｄｉａ  ｆｉｌｅ  ｆｏｒｍａｔ”；ＩＳＯ／ＩＥＣ；２００４−０１−２３を参照）という汎用のファイル形式を元に拡張されたファイル形式である。なお、本実施形態はＭＰ４に限らず類似のファイル形式を用いるケースに対しても適用できる。例えば、ＩＳＯではＭＰ４と同様の基本構造を持つファイル形式規格として、「Ｍｏｔｉｏｎ  ＪＰＥＧ  ２０００ファイル形式」（ＩＳＯ／ＩＥＣ  １５４４４−３）や、「ＡＶＣファイル形式」（ＩＳＯ／ＩＥＣ  １４４９６−１５）といった標準規格が制定されている。
【０１２２】
図１２は、ＭＰ４ファイル形式におけるデータ構造を説明するための概念図である。
【０１２３】
ＭＰ４ファイル１００１は、映像・音声データの物理的位置、時間的位置や特性情報を示すメタデータ（ヘッダ情報）１００２と、符号化された映像・音声データの実態を示すメディアデータ１００３とから構成される。ＭＰ４形式では、コンテンツ全体のプレゼンテーションを「ムービー」、コンテンツを構成するメディアストリームのプレゼンテーションを「トラック」と呼んでいる。メタデータ１００２には、典型的には、動画像のデータ全体を論理的に取り扱うビデオトラック１００４と音声のデータ全体を論理的に取り扱うオーディオトラック１００５が含まれている。そして、ビデオトラック１００４とオーディオトラック１００５の基本的な構成内容は、ほとんど同等のものとなっている。すなわち、それぞれのトラックは、実際のメディアデータの様々なメタデータ情報を記録しており、その内容がメディアデータの特性に応じて多少異なっているだけである。
【０１２４】
ビデオトラック１００４に含まれるデータには、例えば、符号化データを復号化するための所謂デコーダの構成情報や動画像の矩形サイズなどの情報が含まれている。加えて、メディアデータが実際に記録されているファイル上の位置を示すオフセット１００６や、メディアデータのそれぞれのフレームデータ（ピクチャと呼ばれることもある）のサイズを示すサンプルサイズ１００７、それぞれのフレームデータのデコード時間を示すタイムスタンプ１００８などが記録されている。
【０１２５】
一方、メディアデータ１００３には、符号化データの基本単位を示す「サンプル」が連続して１つ以上記録されている「チャンク」と呼ばれるデータ構造により、動画像のデータと音声のデータの実体が記録されている。このチャンクは、メタデータ１００２のトラックに従って、動画像のメディアデータを含むビデオチャンク１００９と音声のメディアデータを含むオーディオチャンク１０１０とにより構成されている。
【０１２６】
図１２に示す構成は、ビデオチャンク１００９とオーディオチャンク１０１０が交互に記録されているように示しているが、その記録位置や順序は必ずしもこのようになっている必要はない。この例は、一般的に記録される形式の一例に過ぎない。しかしながら、このような交互の配置（インターリーブ）は、ほぼ同時刻に再生されるべき動画と音声のデータを近い位置に配置することにより、ファイルに記録されたデータのアクセス性を高めるといった効果があり、極めて一般的に見られる方法である。
【０１２７】
チャンクには、個々のメディアデータのサンプルがひとつ以上含まれている。例えば、図１２に示すように、ビデオチャンク１００９には、ビデオサンプル（フレーム）１０１１が連続して記録される。一般的には、このビデオサンプル（フレーム）１０１１は、ビデオのひとつのフレームデータ（ピクチャ）に相当する。それぞれのトラックとチャンクは次のように関連付けられている。
【０１２８】
例えば動画像のデータの場合、ビデオトラック１００４に含まれる情報は、メディアデータ１００３に含まれるそれぞれのビデオチャンク１００９に関する情報を含んでいる。オフセット１００６は、ビデオチャンク１００９のそれぞれのファイル上の相対位置を示す情報のテーブルから構成されており、テーブルの個々のエントリを参照することにより、どの位置に実際のビデオチャンクが記録されていてもその位置を知ることができる。サンプルサイズ１００７は、複数のチャンク内に含まれる複数のサンプル、すなわちビデオのフレームのそれぞれのサイズをテーブルとして記載している。より正確には、個々のチャンクの中に含まれるサンプルの数を記載した情報もビデオトラック１００４の中に記載されており、これらの情報から、個々のビデオチャンク１００９の中に含まれるサンプルを正確に取得することが可能となっている。タイムスタンプ１００８は、個々のサンプルのデコード時間をサンプル間の差分としてテーブルに記録するようになっている。このテーブルを参照することにより、それぞれのサンプルの所謂タイムスタンプを積算時間を計算することにより取得することが可能となる。このような、トラックとチャンクの関係は、オーディオトラック１００５とオーディオチャンク１０１０についても同様に成立するよう定義されている。これによって、ＭＰ４ファイルおよびＩＳＯ  Ｂａｓｅ  Ｍｅｄｉａ  Ｆｉｌｅ  Ｆｏｒｍａｔにおいては、メタデータ１００２とメディアデータ１００３により、符号化データを必要な単位で任意の位置からタイムスタンプなどの付加情報を持って取得することが出来るようになっている。なお、説明を簡単にするために、ここには規格化されているすべての記録情報については記載していない。規格化されている定義内容の詳細は、ＩＳＯ／ＩＥＣ  １４４９６の該当部分を参照することで知ることができる。
【０１２９】
ＭＰ４ファイル形式では、ファイルに記録されるデータは「ＢＯＸ」と呼ばれるデータ構造の内部に記述され、ＢＯＸを単位としてファイルに記録される。ＢＯＸは、次のようなフィールドから構成される。
・Ｓｉｚｅ：ｓｉｚｅフィールド自体を含む、ＢＯＸ全体のサイズ。
・Ｔｙｐｅ：ＢＯＸの種類を表す４バイトのタイプ識別子。通常は４文字の英数字で表される。
【０１３０】
その他のフィールドはＢＯＸによってはオプションであるため、ここでは説明を省略する。
【０１３１】
ファイル中に記録されるデータは、その種類によって異なるタイプのＢＯＸに保持される。例えば、メディアデータ１００３は符号化データを格納するＭｅｄｉａ  Ｄａｔａ  ＢＯＸ（ｔｙｐｅフィールドの内容は‘ｍｄａｔ’、以降の説明でＢＯＸのタイプを示す識別子が用いられる場合は、そのタイプで示されるＢＯＸを表現しているものとする）として、メタデータ１００２はコンテンツ全体のメタデータ情報を格納するＭｏｖｉｅ  ＢＯＸ（‘ｍｏｏｖ’）として記録される。前述のチャンクおよびサンプルに関する情報についても、同様に固有の識別子をもつＢＯＸとして、ｍｏｏｖの内部にトラック毎に記録される。
【０１３２】
また、ＭＰ４ファイル形式では、ｍｏｏｖにすべてのメタデータを記録する形だけではなく、メタデータを時系列順に複数の領域に分割して記録するような形式も許可している。この形式は「フラグメントムービー」（Ｆｒａｇｍｅｎｔｅｄ  Ｍｏｖｉｅ）と呼ばれている。
【０１３３】
図１３に、フラグメントムービー形式のファイルの構造を示す。フラグメントムービー形式では、コンテンツのメディアデータおよびメタデータは任意の時間単位で分割することができ、分割された「フラグメント」はファイルの先頭から時系列順に記録される。例えば、図１３では、ｍｏｏｖ１１０１は最初のフラグメントのメタデータを示しており、ｍｄａｔ１１０２に含まれるデータに関する情報を保持する。次に出現するｍｏｏｆ１１０３は２番目のフラグメントのメタデータであり、ｍｄａｔ１１０４の情報を保持する、というように以下同様にして記録される。なお、フラグメントムービー形式を取る場合、ｍｏｏｖ１１０１にフラグメントが存在することを示すＭｏｖｉｅ  Ｅｘｔｅｎｄｓ  Ｂｏｘ（‘ｍｖｅｘ’）１１０４を追加する必要がある。ｍｖｅｘ１１０４に含まれる情報は、全フラグメントを含むコンテンツ全体のｄｕｒａｔｉｏｎ（時間長）などである。このように、ＭＰ４ファイル形式のファイルでは、メディアデータに関する各種属性をメタデータ領域としてメディアデータと分離して保持することによって、メディアデータが物理的にどのように格納されているかに関わらず、所望のサンプルデータに容易にアクセスすることが可能になる。
【０１３４】
以降では、本実施形態における動画像および音声データの記録に用いる動画ファイルフォーマットをＭＰ４形式の図１３に示すようなフラグメントムービー形式とする。そして、動画記録時の、前述のゴミ補正データとビデオサンプル（フレーム）１０１１とを関連付ける方法に関して説明する。
【０１３５】
なお、前述の「Ｍｏｔｉｏｎ  ＪＰＥＧ  ２０００ファイル形式」（ＩＳＯ／ＩＥＣ  １５４４４−３）や、「ＡＶＣファイル形式」（ＩＳＯ／ＩＥＣ  １４４９６−１５）といった標準規格や、第三世代携帯電話を中心とする無線端末上での利用を前提に制約が課させられた動画ファイル規格である３ＧＰＰファイル形式（Ｔｈｒｉｒｄ  Ｇｅｎｅｒａｔｉｏｎ  Ｐａｒｔｎｅｒｓｈｉｐ  Ｐｒｏｊｅｃｔ）（３ＧＰＰ  ＴＳ  ２６．２４４  “Ｔｅｃｈｎｉｃａｌ  Ｓｐｅｃｉｆｉｃａｔｉｏｎ  Ｇｒｏｕｐ  Ｓｅｒｖｉｃｅｓ  ａｎｄ  Ｓｙｓｔｅｍ  Ａｓｐｅｃｔｓ  Ｔｒａｎｓｐａｒｅｎｔ  ｅｎｄ−ｔｏ−ｅｎｄ  ｐａｃｋｅｔ  ｓｗｉｔｃｈｅｄ  ｓｔｒｅａｍｉｎｇ  ｓｅｒｖｉｃｅ  （ＰＳＳ）；３ＧＰＰ  ｆｉｌｅ  ｆｏｒｍａｔ （３ＧＰ）（Ｒｅｌｅａｓｅ  ６）”  ３ｒｄ  Ｇｅｎｅｒａｔｉｏｎ  Ｐａｒｔｎｅｒｓｈｉｐ  Ｐｒｏｊｅｃｔ；２００３−０２−２８を参照）など、ＭＰ４で規定されているものと類似のファイル形式およびアーキテクチャが採用されている規格も、本発明に適用することが可能である。
【０１３６】
（動画撮影ルーチン）
次に、本実施形態における動画撮影時の動作について説明する。
【０１３７】
この処理はシステム制御回路５０が不揮発性メモリ５６に記憶された動画撮像処理プログラムを実行することにより実施される。
【０１３８】
動画撮影をするためには、まずモードダイヤル６０などを用いて、撮影モードを静止画撮影モードから動画撮影モードに変更する必要がある。
【０１３９】
この動画撮影ルーチンが実行されると、システム制御回路５０は、図３に示すクイックリターンミラー１３０を作動させ、いわゆるミラーアップを行い、撮影光路外にクイックリターンミラー１３０を退避させる。そして、シャッター１２を開放し、撮像素子１４に被写体光を露光させる。撮像素子１４が露光されて生成された画像データは、所定レートでフレームバッファとして作用するメモリ３０に連続的に書き込まれる。ＬＣＤモニタ装置４１７が電子ビューファインダ（ＥＶＦ）として機能し、書き込まれた画像データが逐次表示される。動画撮影モード時に、動画記録開始ボタンがＯＮされた（例えば、ＳＥＴボタン１１７が動画撮影モード時に押された）のを検知することで、動画撮影を開始し、画像データを順次ＭＰ４形式のファイルフォーマットで記録媒体２００へ記録する。
【０１４０】
動画撮影モード時に動画記録開始ボタンがＯＮされたことで、動画撮影が開始されると、まず新規ファイルを生成し、最初のフラグメントのメタデータのＢＯＸであるｍｏｏｖおよびメディアデータのＢＯＸであるｍｄａｔを作成する。
【０１４１】
次に、ゴミ位置補正データを作成する。ゴミ位置補正データには、動画像撮影に使われるレンズのレンズ情報である絞り値、レンズの瞳位置情報、および図５に示したゴミ補正データが格納されている。なお、作成されたゴミ位置補正データは、メモリ５２に格納される。メモリ５２に格納されたゴミ位置補正データを読み込み、現在のフラグメントのメタデータｍｏｏｖ内に書きこむ。
【０１４２】
図１４は動画撮影中にレンズユニット３００をズーム駆動させた場合の動作を示すフローチャートである。
【０１４３】
本実施形態では動画撮影中に、システム制御回路５０がズーム制御部３４４からズーム駆動が開始されたことを検知することによって以下の処理が行われる。
【０１４４】
ズーム駆動が開始されたことを検知すると、システム制御回路５０はフラグメントを新規作成する（ステップＳ１４０１）。なお、撮影された動画データは、フラグメント単位で分割記録される。
【０１４５】
次に、システム制御回路５０は撮像素子１４を露光させて動画撮像処理を行い、生成された動画像データをメモリ３０に格納する。動画像データのフレーム毎に順次に画像処理回路２０で画像処理を行い、メモリ３０に記録を行う（ステップＳ１４０２）。
【０１４６】
次に、システム制御回路５０はズーム制御部３４４からレンズがズーム駆動中であるか否かの情報を受け取り、レンズユニット３００がズーム駆動中（ズーム操作中）であるか否かの判断を行う（ステップＳ１４０３）。
【０１４７】
ステップＳ１４０３でズーム駆動中であると判断された場合は、システム制御回路５０はレンズ情報を取得する。なお、レンズ情報とは絞り値、瞳位置の情報である（ステップＳ１４０４）。
【０１４８】
ステップＳ１４０４で取得した現フレームのレンズ情報が、前フレームのレンズ情報から変化があるか否かの判断を行う（ステップＳ１４０５）。
【０１４９】
ステップＳ１４０５でレンズ情報の変化が見られた場合は、現フレームのレンズ情報を現在のフラグメントのメタデータｍｏｏｆ内に記録する（ステップＳ１４０６）。
【０１５０】
ステップＳ１４０５でレンズ情報の変化が検出されなかった場合には、フラグメントは更新せず、動画撮影、画像処理及び圧縮処理を行い、動画像データを現在のフラグメントのｍｄａｔに書き込む。
【０１５１】
また、ズーム駆動中である間は１つのフラグメントのメタデータｍｏｏｆ内に変化するレンズ情報を追加する形式で書き込んでいくことになる。そのため、レンズ情報をヘッダー部に記録する際に、同じレンズ情報に対応するフレームの範囲を示すフレーム数等の情報も同時に書き込む。なお、同じレンズ情報に対応するフレームの範囲を示す情報は、フレーム数に限るものではなく、レンズ情報とそれに対応するフレームを明らかにできる情報であれば他の情報でもよい。
【０１５２】
ステップＳ１４０３でズーム駆動中ではないと判断された場合は、フラグメントの分割を行い新たにフラグメントを作成し、このズーム駆動中の動作を終了する。
【０１５３】
ズーム駆動終了と判断されるまで、以上の一連の処理（ステップＳ１４０２〜ステップＳ１４０６）を繰り返す。
【０１５４】
なお、動画再生時には、図１０のゴミ除去処理におけるステップＳ１８０５のゴミ補正パラメータの変換時に、各フレームに対応したレンズ情報をフラグメントのｍｏｏｆより読み出すことでゴミ除去を行う。
【０１５５】
以上説明した第１の実施形態によれば、以下のような効果が得られる。
【０１５６】
上記のように画像にゴミ補正データを添付することで、ゴミ補正用画像データと撮影画像データの対応を意識する必要が無くなるという利点がある。また、ゴミ補正データが位置、大きさ、変換用データ（絞り値、レンズの瞳位置情報）で構成されるコンパクトなデータであるので、撮影画像データサイズが極端に大きくなることもない。また、ゴミ補正データで指定された画素を含む領域だけを補間処理することにより、誤検出の確率を大幅に低減することが可能になる。
【０１５７】
また、レンズのズーム駆動中はフラグメントの分割はせず１つのフラグメントに複数のレンズ情報を記録していくので、必要以上にフラグメントが分割されずデータ量を削減することができる。
【０１５８】
また、フラグメントが分割されないことは、動画ファイルの再生処理での負荷を軽減することができる。
【０１５９】
（第２の実施形態）
上記の第１の実施形態では、レンズのズーム駆動中において毎フレームの動画記録の際にレンズ情報を取得し、レンズ情報に変化が見られたらレンズ情報を記録した。
【０１６０】
これに対し、第２の実施形態では、レンズのズーム駆動開始時と終了時にのみレンズ情報を記録する。この第２の実施形態に係るデジタルカメラの構成は、第１の実施形態と同様であるため、説明を省略し、第１の実施形態と異なる動作のみについて説明する。
【０１６１】
図１５は本実施形態におけるズーム駆動中の動画記録の処理を示すフローチャートである。
【０１６２】
本実施形態では動画撮影中に、システム制御回路５０がズーム制御部３４４からズーム駆動が開始されたことを検知することによって以下の処理が行われる。
【０１６３】
まず、ズーム駆動が開始されたことを検知すると、システム制御回路５０はフラグメントを新規作成する（ステップＳ１５０１）。
【０１６４】
次に、システム制御回路５０はレンズ情報を取得する。このレンズ情報はズーム駆動開始時でのレンズ情報として現在のフラグメントのメタデータｍｏｏｆ内に記録する（ステップＳ１５０２）。なお、レンズ情報とは、絞り値、瞳位置の情報である。
【０１６５】
次に、システム制御回路５０は撮像素子１４を露光させて動画撮影処理を行い、撮影した動画をメモリ３０に格納する。撮影された動画像は各フレーム毎に順次に画像処理回路２０で画像処理され、メモリ３０に記録される（ステップＳ１５０３）。
【０１６６】
次に、システム制御回路５０はズーム制御部３４４からレンズがズーム駆動中であるか否かの情報を受け取り、レンズがズーム駆動中であるか否かの判断を行う（ステップＳ１５０４）。ここでズーム駆動中ではないと判断されるまで、ステップＳ１５０３とステップＳ１５０４の処理を繰り返す。
【０１６７】
ステップＳ１５０４でズーム駆動中ではない、すなわちズーム駆動が終了したと判断されたならば、システム制御回路５０はレンズ情報を取得する（ステップＳ１５０５）。このレンズ情報はズーム駆動終了時でのレンズ情報として現在のフラグメントのメタデータｍｏｏｆ内に記録する。なお、レンズ情報とは、絞り値、瞳位置の情報である。
【０１６８】
次に、システム制御回路５０は、フラグメントの分割を行い、新たにフラグメントを作成し、このズーム駆動中のフローを終了する（ステップＳ１５０６）。
【０１６９】
そして、図１０のゴミ除去処理におけるステップＳ１８０５のゴミ補正パラメータの変換時に、ズーム開始時と終了時のレンズ情報をフラグメントのｍｏｏｆより読み出し、その変移からズーム駆動中の中間のフレームにはレンズ情報を補間していくことによってゴミ除去を行う。
【０１７０】
以上説明した第２の実施形態によれば、第１の実施形態とほぼ同様の効果を得ることができる。
【０１７１】
さらに第２の実施形態では、ズーム駆動の開始時と終了時にのみレンズ情報を記録するので、データ量を減らすことができる。
【０１７２】
（第３の実施形態）
次に、第３の実施形態について説明する。第３の実施形態では、レンズのズーム駆動中においてある一定フレームの間隔で、動画記録と共にレンズ情報を記録する。この第３の実施形態に係るデジタルカメラの構成は、第１の実施形態と同様であるため、説明を省略し、第１の実施形態と異なる動作のみについて説明する。
【０１７３】
図１６は本実施形態におけるズーム駆動中の動画記録の処理を示すフローチャートである。
【０１７４】
本実施形態では動画撮影中に、システム制御回路５０がズーム制御回路３４４からズーム駆動が開始されたことを検知することによって以下の処理が行われる。
【０１７５】
まず、ズーム駆動が開始されたことを検知すると、システム制御回路５０はフラグメントを新規作成する（ステップＳ１６０１）。
【０１７６】
次に、システム制御回路５０は、レンズ情報を取得し、現在のフラグメントのメタデータｍｏｏｆ内に記録する。なお、レンズ情報とは、絞り値、瞳位置の情報である（ステップＳ１６０２）。
【０１７７】
次に、システム制御回路５０は、フレーム間隔をカウントするためのカウントを開始する。具体的にはカウント値に１を代入する（ステップＳ１６０３）。
【０１７８】
システム制御回路５０は、撮像素子１４を露光させて動画撮影処理を行い、撮影された動画像をメモリ３０に格納する。撮影された動画像は、各フレーム毎に順次に画像処理回路２０で画像処理され、メモリ３０に記録される（ステップＳ１６０４）。
【０１７９】
システム制御回路５０は、動画像の１フレームが撮影されると、フレーム間隔をカウントするためカウント値を＋１する（ステップＳ１６０５）。
【０１８０】
システム制御回路５０は、ズーム制御部３４４からレンズがズーム駆動中であるか否かの情報を受け取り、レンズがズーム駆動中であるか否かの判断を行う（ステップＳ１６０６）。
【０１８１】
ズーム駆動中ではないと判断されるまで、一連の処理（ステップＳ１６０２〜ステップＳ１６０７）を繰り返す。
【０１８２】
ステップＳ１６０７では、システム制御回路５０はカウント値が前もって定められたフレーム数（図１６では１０フレーム）に達したかどうかの判定を行う。カウント値が定められたフレーム数に達するまでは一連の処理（ステップＳ１６０４〜ステップＳ１６０７）を繰り返す。カウント値が定められたフレーム数に達した場合はステップＳ１６０２のレンズ情報記録を行い、ステップＳ１６０３で再びカウントを開始し、一連の処理（ステップＳ１６０４〜ステップＳ１６０７）を行う。
【０１８３】
ステップＳ１６０６でズーム駆動中ではない、すなわちズーム駆動が終了したと判断された場合は、ステップＳ１６０８でフラグメントの分割を行い、新たにフラグメントを作成し、このズーム駆動中のフローを終了する。
【０１８４】
そして、図１０のゴミ除去処理におけるステップＳ１８０５のゴミ補正パラメータの変換時に、一定間隔のフレームのレンズ情報をフラグメントのｍｏｏｖより読み出し、その変移からレンズ情報を記録していない中間のフレームに対して、前後のレンズ情報からレンズ情報を補間していく。これによって、ゴミ除去を行う。
【０１８５】
以上説明したように、上記の実施形態によれば、第１の実施形態とほぼ同様の効果を得ることができる。さらに第３の実施形態では、一定フレーム間隔でレンズ情報を記録していくので、データ量を減らすことができる。
【０１８６】
（他の実施形態）
上記の各実施例では、デジタルカメラ本体ではなく、別途用意された画像処理装置を用いてゴミ除去処理を実行したが、もちろんデジタルカメラ本体でゴミ除去処理を実行してもよい。その場合、当該処理は、システム制御回路５０が不揮発性メモリ５６に記憶されたゴミ除去処理プログラムを実行することにより実施される。
【０１８７】
また、各実施形態の目的は、次のような方法によっても達成される。すなわち、前述した実施形態の機能を実現するソフトウェアのプログラムコードを記録した記憶媒体（または記録媒体）を、システムあるいは装置に供給する。そして、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵ）が記憶媒体に格納されたプログラムコードを読み出し実行する。この場合、記憶媒体から読み出されたプログラムコード自体が前述した実施形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。また、コンピュータが読み出したプログラムコードを実行することにより、前述した実施形態の機能が実現されるだけでなく、本発明には次のような場合も含まれる。すなわち、プログラムコードの指示に基づき、コンピュータ上で稼働しているオペレーティングシステム（ＯＳ）などが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される。
【０１８８】
さらに、次のような場合も本発明に含まれる。すなわち、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張カードやコンピュータに接続された機能拡張ユニットに備わるメモリに書込まれる。その後、そのプログラムコードの指示に基づき、その機能拡張カードや機能拡張ユニットに備わるＣＰＵなどが実際の処理の一部または全部を行い、その処理によって前述した実施形態の機能が実現される。
【０１８９】
本発明を上記記憶媒体に適用する場合、その記憶媒体には、先に説明した手順に対応するプログラムコードが格納されることになる。
【図面の簡単な説明】
【０１９０】
【図１】本発明の第１の実施形態に係わるデジタルカメラを背面側から見た外観斜視図である。
【図２】本発明の第１の実施形態に係わるデジタルカメラの内部構造を示す垂直断面図である。
【図３】本発明に係わる撮像装置としてのレンズ交換式一眼レフデジタルカメラの回路構成を示すブロック図である。
【図４】第１の実施形態に係わるデジタルカメラにおけるゴミ検出処理を説明するフローチャートである。
【図５】ゴミ補正データのデータ形式例を示す図である。
【図６】図４のステップＳ２７で行われるゴミ領域取得ルーチンの詳細を説明するフローチャートである。
【図７】図６のステップＳ６２で行われるゴミ領域判定処理の処理単位を示す図である。
【図８】図６のステップＳ６３で行われるゴミ領域サイズ算出の概要を示す図である。
【図９】図４のステップＳ２４で行われる撮像処理ルーチンの詳細を説明するフローチャートである。
【図１０】ゴミ除去処理を示すフローチャートである。
【図１１】図１０のステップＳ１８０６で行われる保管ルーチンの詳細を説明するフローチャートである。
【図１２】ＭＰ４或いは類似のファイル形式におけるメタデータ、メディアデータの概念を説明する図である。
【図１３】フラグメントムービーの概念を説明する図である。
【図１４】第１の実施形態におけるズーム駆動時のフラグメントの分割方法を示すフローチャートである。
【図１５】第２の実施形態におけるズーム駆動時のフラグメントの分割方法を示すフローチャートである。
【図１６】第３の実施形態におけるズーム駆動時のフラグメントの分割方法を示すフローチャートである。
【図１】
0005014262.tif 000002
【図２】
0005014262.tif 000003
【図３】
0005014262.tif 000004
【図４】
0005014262.tif 000005
【図５】
0005014262.tif 000006
【図６】
0005014262.tif 000007
【図７】
0005014262.tif 000008
【図８】
0005014262.tif 000009
【図９】
0005014262.tif 000010
【図１０】
0005014262.tif 000011
【図１１】
0005014262.tif 000012
【図１２】
0005014262.tif 000013
【図１３】
0005014262.tif 000014
【図１４】
0005014262.tif 000015
【図１５】
0005014262.tif 000016
【図１６】
0005014262.tif 000017