(57)【要約】      （修正有）【課題】画像を削除する際に、画像同士の関連性や画像の種別などに応じて適切な処理候補を提示でき、ユーザの利便性を向上させる。【解決手段】画像管理装置は、第１の画像データと第２の画像データとを関連付けて記憶する記憶手段と、前記第１および第２の画像データの中から選択された画像データを前記記憶手段から読み出して再生する再生手段と、前記第１および第２の画像データの中から選択された画像データを前記記憶手段から削除する削除手段とを有し、前記第１の画像データの削除指示を受けた場合には、当該第１の画像データに関連付けて記憶された第２の画像データを削除するかについて提示を行ってから、当該第１の画像データの削除処理を実行し、前記第２の画像データの削除指示を受けた場合には、当該第２の画像データに関連付けて記憶された第１の画像データを削除するかについて提示を行わずに、前記第２の画像データの削除処理を実行する。【選択図】図３
2015023317.tif 000002
【特許請求の範囲】
【請求項１】
第１の画像データと第２の画像データを入力する入力手段と、
前記第１の画像データと前記第２の画像データとを関連付けて記憶する記憶手段と、
前記第１および第２の画像データの中から選択された画像データを前記記憶手段から読み出して再生する再生手段と、
前記第１および第２の画像データの中から選択された画像データを前記記憶手段から削除する削除手段と、
前記第１の画像データの削除指示を受けた場合には、当該第１の画像データに関連付けて記憶された第２の画像データを削除するかについて提示を行ってから、当該第１の画像データの削除処理を実行し、
前記第２の画像データの削除指示を受けた場合には、当該第２の画像データに関連付けて記憶された第１の画像データを削除するかについて提示を行わずに、前記第２の画像データの削除処理を実行するように前記削除手段を制御する制御手段と、を有することを特徴とする画像管理装置。
【請求項２】
前記記憶手段は、前記第１および第２の画像データのいずれか一方をメイン画像、いずれか他方をサブ画像として関連付けて記憶し、
前記制御手段は、
前記削除指示を受けた画像データがメイン画像の場合には、前記メイン画像の画像データのみを削除する第１の処理と、当該メイン画像に関連付けて記憶されたサブ画像の画像データも削除する第２の処理と、を選択可能に提示し、
前記削除指示を受けた画像データがサブ画像の場合には、前記サブ画像の画像データに関連付けて記憶されたメイン画像の画像データを削除するかについて提示を行わずに、前記サブ画像の画像データを削除するように前記削除手段を制御することを特徴とする請求項１に記載の画像管理装置。
【請求項３】
第１の画像データと第２の画像データを入力する入力手段と、
前記第１の画像データと前記第２の画像データとを関連付けて記憶する記憶手段と、
前記第１および第２の画像データの中から選択された画像データを前記記憶手段から読み出して再生する再生手段と、
前記第１および第２の画像データの中から選択された画像データを前記記憶手段から削除する削除手段と、
削除指示を受けた画像データが動画データの場合には、当該動画データから所定のフレームを抽出して静止画データとして保存しつつ当該動画データを削除する処理について提示を行ってから、当該動画データの削除処理を実行し、
前記削除指示を受けた画像データが静止画データの場合には、当該画像データの処理候補について提示を行わずに、当該画像データの削除処理を実行するように前記削除手段を制御する制御手段と、を有することを特徴とする画像管理装置。
【請求項４】
前記記憶手段は、前記第１および第２の画像データのいずれか一方をメイン画像、いずれか他方をサブ画像として関連付けて記憶し、
前記制御手段は、
前記削除指示を受けた画像データがメイン画像の動画データであって、前記メイン画像に関連付けて記憶されたサブ画像も動画データの場合には、当該サブ画像の動画データから所定のフレームを抽出して静止画データとして保存しつつ当該メイン画像の動画データを削除する第１の処理を提示し、
前記削除指示を受けた画像データがメイン画像の動画データであって、前記メイン画像に関連付けて記憶されたサブ画像が静止画データの場合には、当該メイン画像の動画データから所定のフレームを抽出して静止画データとして保存しつつ当該メイン画像の動画データを削除する第２の処理を提示し、
前記削除指示を受けた画像データがメイン画像の静止画データであって、前記メイン画像に関連付けて記憶されたサブ画像が動画データの場合には、当該サブ画像の動画データから所定のフレームを抽出して静止画データとして保存しつつ当該メイン画像の画像データを削除する第３の処理を提示し、
前記削除指示を受けたメイン画像の静止画データであって、前記メイン画像に関連付けて記憶されたサブ画像も静止画データの場合には、当該サブ画像の画像データを削除する第４の処理を提示することを特徴とする請求項３に記載の画像管理装置。
【請求項５】
前記制御手段は、前記削除指示を受けた画像データがサブ画像の動画データの場合には、当該サブ画像の動画データから所定のフレームを抽出して静止画データとして保存しつつ当該サブ画像の動画データを削除する第５の処理を提示し、
前記削除指示を受けた画像データがサブ画像の静止画データの場合には、当該サブ画像の画像データの処理候補について提示を行わずに、当該サブ画像の画像データを削除するように前記削除手段を制御することを特徴とする請求項３または４に記載の画像管理装置。
【請求項６】
前記記憶手段は、前記第１の処理を提示する場合、前記メイン画像と前記サブ画像が前記記憶手段の容量を占有するデータサイズを比較し、前記サイズが大きい方の動画データから所定のフレームを抽出して静止画データとして保存しつつ当該サイズが大きい方の動画データを削除することを特徴とする請求項４または５に記載の画像管理装置。
【請求項７】
前記所定のフレームは、動画データの注目フレームであることを特徴とする請求項４ないし６のいずれか１項に記載の画像管理装置。
【請求項８】
前記記憶手段は、ファイルシステムでのファイルの属性、ファイルのヘッダ部分に含まれる属性情報のいずれかを用いて関連付けを行うことを特徴とする請求項１ないし７のいずれか１項に記載の画像管理装置。
【請求項９】
前記ファイルの属性は、ファイル名、作成日時、更新日時のいずれかであることを特徴とする請求項８に記載の画像管理装置。
【請求項１０】
前記属性情報は、識別子、撮影日時、ファイル名のいずれかであることを特徴とする請求項８に記載の画像管理装置。
【請求項１１】
前記再生手段により再生されている画像について削除指示を行う指示手段と、
前記提示された処理を実行するか、キャンセルするかを選択可能な選択手段と、をさらに有することを特徴とする請求項１ないし１０のいずれか１項に記載の画像管理装置。
【請求項１２】
前記選択手段は、前記第１の画像と前記第２の画像の少なくともいずれかについて、削除せずに残す処理、静止画データとして保存する処理、削除する処理のいずれかをユーザが選択可能であることを特徴とする請求項１１に記載の画像管理装置。
【請求項１３】
前記制御手段は、前記選択手段により選択された処理を実行したことにより削減される画像データの容量を提示することを特徴とする請求項１２に記載の画像管理装置。
【請求項１４】
前記第１の画像を撮像する第１の撮像手段と、前記第２の画像を撮像する第２の撮像手段と、をさらに有し、
前記第１および第２の撮像手段は、動画と静止画を同時に撮像することが可能であり、
前記第１の画像は、前記第１の撮像手段により撮影者から見える被写体を撮像して得られた画像であり、
前記第２の画像は、前記第２の撮像手段により撮影者側の被写体を撮像して得られた画像であることを特徴とする請求項１ないし１３のいずれか１項に記載の画像管理装置。
【請求項１５】
入力手段が、第１の画像データと第２の画像データを入力する入力ステップと、
記憶手段が、前記第１の画像データと前記第２の画像データとを関連付けて記憶媒体に記憶する記憶ステップと、
再生手段が、前記第１および第２の画像データの中から選択された画像データを前記記憶媒体から読み出して再生する再生ステップと、
削除手段が、前記第１および第２の画像データの中から選択された画像データを前記記憶媒体から削除する削除ステップと、
制御手段が、前記第１の画像データの削除指示を受けた場合には、当該第１の画像データに関連付けて記憶された第２の画像データを削除するかについて提示を行ってから、当該第１の画像データの削除処理を実行し、
前記第２の画像データの削除指示を受けた場合には、当該第２の画像データに関連付けて記憶された第１の画像データを削除するかについて提示を行わずに、前記第２の画像データの削除処理を実行するように制御する制御ステップと、を有することを特徴とする画像管理方法。
【請求項１６】
入力手段が、第１の画像データと第２の画像データを入力する入力ステップと、
記憶手段が、前記第１の画像データと前記第２の画像データとを関連付けて記憶媒体に記憶する記憶手段と、
再生手段が、前記第１および第２の画像データの中から選択された画像データを前記記憶媒体から読み出して再生する再生ステップと、
削除手段が、前記第１および第２の画像データの中から選択された画像データを前記記憶媒体から削除する削除ステップと、
制御手段が、削除指示を受けた画像データが動画データの場合には、当該動画データから所定のフレームを抽出して静止画データとして保存しつつ当該動画データを削除する処理について提示を行ってから、当該動画データの削除処理を実行し、
前記削除指示を受けた画像データが静止画データの場合には、当該画像データの処理候補について提示を行わずに、当該画像データの削除処理を実行するように制御する制御ステップと、を有することを特徴とする画像管理方法。
【請求項１７】
コンピュータを、請求項１ないし１４のいずれか１項に記載された画像管理装置の各手段として機能させるプログラム。
【請求項１８】
コンピュータを、請求項１ないし１４のいずれか１項に記載された画像管理装置の各手段として機能させるプログラムを記憶した記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、画像データを管理する技術に関する。
【背景技術】
【０００２】
最近の携帯電話やスマートフォンには、撮影者から見える被写体を撮影する通常のカメラ（メインカメラ）とともに、撮影者自身や撮影者側の被写体を撮影するカメラ（サブカメラ）が搭載されているものがある。
【０００３】
また、１つの画像ファイル内に複数の画像データを記録する手法が提案されている。例えば、特許文献１には、１つのメイン画像データと、複数のサブ画像データと、サブ画像データの各々の位置情報とを含むマルチ画像ファイルについて、サブ画像データの一部を削除する処理が記載されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００９−２０６７６１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
上記特許文献１は、マルチ画像ファイルから一部のサブ画像データを削除した後、空き領域にデータを移動させて、ファイルの利用効率の低下やファイルサイズの増大、アクセス速度の低下を抑えるものである。しかしながら、特許文献１では、画像同士の関連性やメイン画像やサブ画像に動画が含まれる場合について考慮されておらず、また、ユーザに対して最適な削除指示を行うものでもない。
【０００６】
また、メイン画像とサブ画像とが関連付けられて管理されている場合、メイン画像を削除すると同時に関連するサブ画像も削除することで編集の利便性は向上する。しかしながら、ユーザがサブ画像の同時削除を意図していないにもかかわらず、サブ画像が不用意に削除されてしまうことも考えられる。また、サブ画像を個別に削除するとなると、同じ操作を繰り返し行う必要があり、手間がかかる。
【０００７】
これに対して、メイン画像とサブ画像は主従関係にあるため、サブ画像を単独で編集（削除）してもメイン画像に不都合は生じず、また、サブ画像については容易に削除できた方が利便性が向上する。
【０００８】
本発明は、上記課題に鑑みてなされ、その目的は、画像を削除する際に、画像同士の関連性や画像の種別などに応じて適切な処理候補を提示でき、ユーザの利便性を向上させる技術を実現することである。
【課題を解決するための手段】
【０００９】
上記課題を解決し、目的を達成するために、本発明の画像管理装置は、第１の画像データと第２の画像データを入力する入力手段と、前記第１の画像データと前記第２の画像データとを関連付けて記憶する記憶手段と、前記第１および第２の画像データの中から選択された画像データを前記記憶手段から読み出して再生する再生手段と、前記第１および第２の画像データの中から選択された画像データを前記記憶手段から削除する削除手段と、前記第１の画像データの削除指示を受けた場合には、当該第１の画像データに関連付けて記憶された第２の画像データを削除するかについて提示を行ってから、当該第１の画像データの削除処理を実行し、前記第２の画像データの削除指示を受けた場合には、当該第２の画像データに関連付けて記憶された第１の画像データを削除するかについて提示を行わずに、前記第２の画像データの削除処理を実行するように前記削除手段を制御する制御手段と、を有する。
【発明の効果】
【００１０】
本発明によれば、画像を削除する際に、画像同士の関連性や画像の種別などに応じて適切な処理候補を提示することができ、ユーザの利便性を向上させることができる。
【図面の簡単な説明】
【００１１】
【図１】本実施形態の撮像装置の構成を示すブロック図。
【図２】本実施形態の撮像装置による撮影処理を示すフローチャート。
【図３】本実施形態の撮像装置による再生処理を示すフローチャート。
【図４】本実施形態の撮像装置による画像削除処理を示すフローチャート。
【図５】本実施形態の撮像装置による再生モード画面を例示する図。
【図６】本実施形態の撮像装置による再生モード画面を例示する図。
【図７】本実施形態の撮像装置により生成される画像ファイルの構成を例示する図。
【発明を実施するための形態】
【００１２】
以下に、本発明を実施するための形態について詳細に説明する。尚、以下に説明する実施の形態は、本発明を実現するための一例であり、本発明が適用される装置の構成や各種条件によって適宜修正又は変更されるべきものであり、本発明は以下の実施の形態に限定されるものではない。また、後述する各実施形態の一部を適宜組み合わせて構成しても良い。
【００１３】
以下、本発明の画像管理装置を、デジタルカメラなどの撮像装置により実現した例について説明するが、ＰＤＡやスマートフォン、タブレット端末などの電子機器やパーソナルコンピュータ（ＰＣ）などの情報処理装置にも適用可能である。
【００１４】
＜装置構成＞図１を参照して、本発明に係る実施形態の撮像装置１００の構成及び機能の概略について説明する。
【００１５】
図１において、制御部１０１は、例えば、ＣＰＵやＭＰＵなどの演算処理装置およびＤＲＡＭやＳＲＡＭなどのメモリを備え、各種の処理プログラムを実行することにより撮像装置１００の後述する各部を制御したり、各部の間でのデータ転送を制御する。また、制御部１０１は、ユーザ操作を受け付ける操作部１０２からの操作信号に応じて、撮像装置１００の各部を制御する。また、制御部１０１は、後述する第１の画像処理部１１１および第２の画像処理部１６１によって生成された画像データを解析し、解析結果に応じて、撮像装置１００の各部を制御する。
【００１６】
操作部１０２は、例えば、電源ボタン、静止画記録ボタン、動画記録開始ボタン、ズーム調整ボタン、オートフォーカスボタンなどの撮影に関連する各種操作を入力するスイッチ類を含む。また、操作部１０２は、メニュー表示ボタン、決定ボタン、その他カーソルキー、ポインティングデバイス、タッチパネルなどを含み、ユーザが操作部１０２を操作することにより、操作に応じた操作信号が制御部１０１に出力される。
【００１７】
バス１０３は、各種データ、制御信号、コマンドなどを撮像装置１００の各ブロックに送るための汎用バスである。
【００１８】
第１の撮像部１１０および第２の撮像部１６０はそれぞれ、不図示の撮影レンズにより取り込まれた被写体の光学像を、絞りなどにより適正な光量に調整した上で、ＣＣＤセンサやＣＭＯＳセンサなどの撮像素子で受光することにより画像信号に変換する。さらに、第１の撮像部１１０および第２の撮像部１６０はそれぞれ、撮像素子で生成された電気信号をＡ／Ｄ変換器によってデジタル画像信号に変換した上で第１の画像処理部１１１および第２の画像処理部１６１へ送出する。
【００１９】
第１の画像処理部１１１および第２の画像処理部１６１は、第１の撮像部１１０および第２の撮像部１６０から得られた画像信号に対して、所定の制御値に従ってホワイトバランス（ＷＢ）や色、明るさなどの画質を調整する処理を施し、画像データを生成する。第１の画像処理部１１１および第２の画像処理部１６１で処理された各画像データは、制御部１０１によって、メモリ１０４や後述の映像出力部１５０や表示制御部１３１に送出される。
【００２０】
本実施形態においては、例えば、第１の撮像部１１０および第２の撮像部１６０はそれぞれ、「光学ズーム」機能および「光学防振」機能を有し、第１の画像処理部１１１および第２の画像処理部１６１は、「電子ズーム」機能および「電子防振」機能を有する。ここで、「光学ズーム」機能および「電子ズーム」機能は、ユーザ操作に応じて画像を拡大する機能である。また、「光学防振」機能および「電子防振」機能は、装置本体の振動による画像の揺れを防止する機能である。これらの各機能は、制御部１０１による制御に応じて、同時に、交互に、或いは単独で使用されうる。
【００２１】
「光学ズーム」機能は、操作部１０２のズームボタンの操作量に応じて、第１および第２の撮像部１１０、１６０のズームレンズを移動させ、取り込まれる被写体の光学像を拡大／縮小する機能である。また、「電子ズーム」機能は、操作部１０２のズームボタンの操作量に応じて、第１および第２の画像処理部１１１、１６１が、第１および第２の撮像部１１０、１６０で生成された画像信号の一部を切り出し、拡大した画像信号を生成する処理である。「光学防振」機能は、不図示の振動検出部（光学センサなど）から得られる加速度信号を用いて補正量を算出し、算出された補正量に応じて補正レンズを移動させることで、画像の揺れを防止する機能である。「電子防振」機能は、不図示の振動検出部（光学センサなど）からの加速度信号に基づいて、第１および第２の撮像部１１０、１６０で生成された画像信号の位置を調整することにより、画像の揺れを防止する機能である。なお、「電子防振」機能は、不図示の振動検出部（光学センサなど）からの加速度信号に基づいて、第１および第２の撮像部１１０、１６０の撮像素子における読み出し位置をずらすことによって実現することも可能である。これらの各機能は公知の技術であるため、さらなる詳細な説明は省略する。
【００２２】
音声入力部１２０は、例えば、内蔵された無指向性のマイクまたは音声入力端子を介して接続された外部マイクなどにより、撮像装置１００の周囲の音声を集音（収音）して得られたアナログ音声信号をデジタル信号に変換して音声処理部１２１に送出する。
【００２３】
音声処理部１２１は、音声入力部１２０から入力されたデジタル音声信号のレベルを適正化するなどの音声信号に関する処理を行う。音声処理部１２１で処理された音声信号は、制御部１０１によってメモリ１０４に送出される。
【００２４】
メモリ１０４は、第１および第２の画像処理部１１１、１６１並びに音声処理部１２１により得られた画像信号及び音声信号を一時的に記憶する。第１および第２の画像処理部１１１、１６１並びに音声処理部１２１は、メモリ１０４に一時的に記憶された画像信号や音声信号を読み出し、画像信号の符号化や音声信号の符号化などを実行し、圧縮画像信号および圧縮音声信号を生成する。制御部１０１は、これら圧縮画像信号および圧縮音声信号を記録再生部１４０に送出する。
【００２５】
記録再生部１４０は、記録媒体１４１に対して第１および第２の画像処理部１１１、１６１並びに音声処理部１２１で生成された圧縮画像信号および圧縮音声信号、その他撮影に関する制御プログラムやパラメータなどを記録する。また、音声信号を圧縮符号化しない場合には、制御部１０１は、音声処理部１２１により生成された音声信号と第１および第２の画像処理部１１１、１６１により生成された圧縮画像信号とを、記録再生部１４０に送出し記録媒体１４１に記録する。ここで、記録媒体１４１は、装置に内蔵されたものでも、装置に着脱可能なものでも良く、上述のように生成された圧縮画像信号、圧縮音声信号、音声信号その他の各種データを記録できれば良い。例えば、記録媒体１４１は、ハードディスク、光ディスク、光磁気ディスク、ＣＤ−Ｒ、ＤＶＤ−Ｒ、磁気テープ、不揮発性の半導体メモリ、フラッシュメモリ、などのあらゆる方式の記録媒体を含む。
【００２６】
また、記録再生部１４０は、制御部１０１からの制御指令に従い、記録媒体１４１に記録された圧縮画像信号、圧縮音声信号、音声信号、各種データ、プログラムを読み出す。記録再生部１４０で読み出された圧縮画像信号および圧縮音声信号は、第１および第２の画像処理部１１１、１６１、音声処理部１２１にそれぞれ送出される。第１および第２の画像処理部１１１、１６１並びに音声処理部１２１は、圧縮画像信号および圧縮音声信号を一時的にメモリ１０４に記憶し、所定の手順で復号する。さらに、第１および第２の画像処理部１１１、１６１並びに音声処理部１２１は、復号した音声信号を音声出力部１５１へ、復号した画像信号を映像出力部１５０および表示制御部１３１へ送出する。また、記録媒体１４１に非圧縮の音声信号が記録されている場合には、制御部１０１は、音声信号を直接音声出力部１５１に送出する。
【００２７】
音声出力部１５１は、例えば音声出力端子からなり、装置に接続されたイヤホンやスピーカなどから音声を出力するための音声信号を送出する。音声出力部１５１は、撮像装置１００に内蔵され、音声信号に応じた音声を出力するスピーカであっても良い。
【００２８】
映像出力部１５０は、例えば映像出力端子からなり、装置に接続された外部ディスプレイなどに映像を表示させるために画像信号を送出する。また、音声出力部１５１および映像出力部１５０は、統合された１つの端子、例えばＨＤＭＩ（登録商標）（Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ  Ｍｕｌｔｉｍｅｄｉａ  Ｉｎｔｅｒｆａｃｅ）のような端子であっても良い。
【００２９】
表示制御部１３１は、第１の画像処理部１１１および第２の画像処理部１６１から送出される画像信号に応じた映像や、ユーザが装置を操作するためのメニュー画面などを表示部１３０に表示する。表示部１３０は、例えば、液晶ディスプレイ、有機ＥＬディスプレイ、電子ペーパなどの表示デバイスであればどのような形式であっても良い。
【００３０】
＜動作説明＞次に、本実施形態の撮像装置１００の基本動作について説明する。
【００３１】
本実施形態の撮像装置１００は、ユーザが操作部１０２の電源ボタンを操作すると、操作部１０２から制御部１０１に起動の指示が送出される。この指示を受けて、制御部１０１は、不図示の電源供給部を制御して、撮像装置１００の各ブロックに対して電源を供給する。
【００３２】
電源が供給されると、制御部１０１は、例えば、操作部１０２のモード切り替えスイッチによりいずれの動作モードに設定されているか判定する。動作モードとしては、例えば、静止画撮影モード、動画撮影モード、再生モードなどがある。
【００３３】
静止画撮影モードでは、撮像装置１００は撮影待機状態でユーザが操作部１０２の静止画記録ボタンを操作すると撮影を開始し、圧縮画像信号が記録媒体１４１に記録され、再び撮影待機状態に戻る。動画撮影モードでは、撮像装置１００は撮影待機状態でユーザが操作部１０２の動画記録開始ボタンを操作すると撮影を開始し、その間、圧縮画像信号と圧縮音声信号または音声信号が記録媒体１４１に記録される。そして、ユーザが操作部１０２の動画記録終了ボタンを操作すると撮影を終了し、撮影待機状態に戻る。再生モードでは、ユーザが選択したファイルに対応する圧縮画像信号や圧縮音声信号、音声信号を記録媒体１４１から読み出して、音声出力部１５１から音声信号を出力し、表示部１３０に映像を再生する。
【００３４】
（静止画撮影モード）ここで、静止画撮影モードについて説明する。
【００３５】
ユーザが操作部１０２を操作することにより静止画撮影モードが設定されると、まず制御部１０１は、前述したように撮像装置１００の各ブロックを撮影待機状態にする。
【００３６】
撮影待機状態では、第１および第２の画像処理部１１１、１１６は、画像信号を表示制御部１３１に送出し、表示部１３０に画像信号に関する映像を表示させる。ユーザはこの様にして表示された画面を見ながら撮影の準備を行う。
【００３７】
撮影待機状態で、ユーザが操作部１０２の静止画記録ボタンを操作することにより撮影指示信号が送出されると、制御部１０１は撮影制御信号を撮像装置１００の各ブロックに送出し、以下のように制御を行う。すなわち、
第１および第２の撮像部１１０、１６０はそれぞれ、撮像素子で生成された電気信号をＡ／Ｄ変換器によってデジタル画像信号に変換した上で第１および第２の画像処理部１１１、１１６へ送出する。
【００３８】
第１および第２の画像処理部１１１、１６１は、第１および第２の撮像部１１０、１６０から入力されたデジタル画像信号に対して、ホワイトバランス（ＷＢ）や色、明るさなどの画質調整処理を施し、画像データを生成する。第１および第２の画像処理部１１１、１１６で処理された各画像データは、制御部１０１によって、メモリ１０４や映像出力部１５０や表示制御部１３１に送出される。ユーザは、表示部１３０に表示された映像を見ることで、撮影された静止画を確認することができる。
【００３９】
第１および第２の画像処理部１１１、１１６は、メモリ１０４に一時的に記憶された画像信号を読み出して所定の符号化を行い、圧縮画像信号を生成し、記録再生部１４０に出力する。
【００４０】
記録再生部１４０は、ＵＤＦ、ＦＡＴなどのファイルシステムのもとで、圧縮画像信号を静止画ファイルとして記録媒体１４１に書き込んでいく。
【００４１】
なお、制御部１０１は、第１および第２の画像処理部１１１、１１６による符号化処理が終了すると、撮像装置１００の各ブロックに制御信号を送出して、撮影待機状態に戻る。
【００４２】
（動画撮影モード）次に、動画撮影モードについて説明する。
【００４３】
撮影待機状態までの動作は上述した静止画撮影モードと同様である。撮影待機状態で、ユーザが操作部１０２の動画記録開始ボタンを操作することにより撮影指示信号が送出されると、制御部１０１は撮影制御信号を撮像装置１００の各ブロックに送出し、以下のように制御を行う。すなわち、
第１および第２の撮像部１１０、１６０はそれぞれ、撮像素子で生成された電気信号をＡ／Ｄ変換器によってデジタル画像信号に変換した上で第１および第２の画像処理部１１１、１１６へ送出する。
【００４４】
第１および第２の画像処理部１１１、１１６は、第１および第２の撮像部１１０、１６０から入力されたデジタル画像信号に対して、上述したようにホワイトバランス（ＷＢ）や色、明るさなどを調整する画質調整処理を施し、画像データを生成する。第１および第２の画像処理部１１１、１１６で処理された各画像データは、制御部１０１によって、メモリ１０４や表示制御部１３１に送出され、表示制御部１３１は、表示部１３０に動画を表示する。
【００４５】
一方、音声入力部１２０は、マイクにより得られたアナログ音声信号をデジタル信号に変換し、得られたデジタル音声信号を音声処理部１２１に送出する。音声処理部１２１は、入力されたデジタル音声信号のレベルの適正化処理などを行う。制御部１０１は、音声処理部１２１により処理された音声信号をメモリ１０４に送出する。メモリ１０４は、第１および第２の画像処理部１１１、１６１並びに音声処理部１２１により得られた画像信号及び音声信号を一時的に記憶する。
【００４６】
第１および第２の画像処理部１６１並びに音声処理部１２１は、メモリ１０４に一時的に記憶された画像信号や音声信号を読み出し、画像信号の符号化や音声信号の符号化などを実行し、圧縮画像信号および圧縮音声信号を生成する。制御部１０１は、これら圧縮画像信号および圧縮音声信号を記録再生部１４０に送出する。
【００４７】
記録再生部１４０は、ＵＤＦ、ＦＡＴなどのファイルシステムのもとで、データストリームを１つの動画ファイルとして記録媒体１４１に書き込んでいく。また、音声を圧縮しない場合には、制御部１０１は、音声処理部１２１で生成した音声信号を第１および第２の画像処理部１１１、１６１で生成された圧縮画像信号と共に、記録再生部１４０に送出する。記録再生部１４０は、前述したファイルシステムのもとで、データストリームを１つの動画ファイルとして記録媒体１４１に書き込んでいく。
【００４８】
以上の動作を撮影中は継続する。
【００４９】
また、撮影中に、操作部１０２から入力される操作信号または第１および第２の画像処理部１１１、１６１により生成された画像データの解析結果に応じて、制御部１０１は、第１および第２の撮像部１１０、１６０や第１および第２の画像処理部１１１、１６１、音声処理部１２１などに制御信号を送出する。例えば、レンズの移動や絞り調整などをするための制御信号を第１および第２の撮像部１１０、１６０に送出すると共に、画像や音声を調整するための制御信号を第１および第２の画像処理部１１１、１６１、並びに音声処理部１２１に送出する。
【００５０】
同様に撮影中に、ユーザが操作部１０２のズームキーを操作することで、制御部１０１は、第１および第２の撮像部１１０、１６０の「光学ズーム」機能や、第１および第２の画像処理部１１１、１６１の「電子ズーム」機能を制御する。同様に、制御部１０１は、前述した第１および第２の撮像部１１０、１６０の「光学防振」機能や、第１および第２の画像処理部１１１、１６１の「電子防振」機能を制御する。
【００５１】
そして、ユーザが操作部１０２の動画記録終了ボタンを操作し撮影終了信号が送出されると、制御部１０１は撮影制御信号を撮像装置１００の各ブロックに送出し、以下のように制御を行う。すなわち、
第１および第２の画像処理部１１１、１６１、音声処理部１２１はそれぞれ、画像信号および音声信号をメモリ１０４へ送出することを停止する。そして、メモリ１０４に記憶されている残りの画像信号と音声信号とを読み出して所定の符号化を行い、圧縮画像信号および圧縮音声信号を生成する。
【００５２】
制御部１０１は、最後に生成された圧縮画像信号と圧縮音声信号を合成してデータストリームを生成し、記録再生部１４０に送出する。音声を圧縮しない場合には、制御部１０１は、音声処理部１２１により生成された音声信号と圧縮画像信号とを記録再生部１４０に送出する。
【００５３】
記録再生部１４０は、前述したファイルシステムのもとで、データストリームを１つの動画ファイルとして記録媒体１４１に書き込んでいき、データストリームの供給が停止されると、制御部１０１はサムネイルを生成するために以下のように制御を行う。
【００５４】
記録再生部１４０は記録媒体１４１に記録した動画ファイルの先頭フレームの圧縮画像信号を読み出し、第１および第２の画像処理部１１１、１６１に送出する。第１および第２の画像処理部１１１、１６１は、圧縮画像信号を一時的にメモリ１０４に記憶させ、所定の手順で復号する。
【００５５】
次に、第１および第２の画像処理部１１１、１６１は、得られた画像信号に対してサムネイル用の所定の符号化を行い、サムネイル用圧縮画像信号を生成する。制御部１０１は、サムネイル用圧縮画像信号を記録再生部１４０に送出する。記録再生部１４０は、前述したファイルシステムのもとで、サムネイル用圧縮画像を、元の動画ファイルに結合させるように記録媒体１４１に書き込み、動画ファイルを完成させて記録動作を停止する。
【００５６】
制御部１０１は、記録動作が停止すると、撮影待機状態に移行させるように制御信号を撮像装置１００の各ブロックに送出して、撮影待機状態に戻る。
【００５７】
以上のように、本実施形態の撮像装置は、複数の撮像部や画像処理部を有することで同時に複数の静止画および／または動画の撮影が可能である。これにより、例えば第１の撮像部１１０と第１の画像処理部１１１により被写体側を撮影した第１の画像データを生成すること、第２の撮像部１６０と第２の画像処理部１６１により撮影者側を撮影した第２の画像データを生成することが可能となる。更にまた、両撮影を同時に、或いは所定の時差で行い、両画像データを関連付けて記録媒体１４１に記録することが可能となる（以下、同時撮影記録ともいう）。
【００５８】
（再生モード）次に、再生モードについて説明する。
【００５９】
ユーザが操作部１０２を操作することにより再生モードが設定されると、制御部１０１は、撮像装置１００を再生状態に移行させるための再生制御信号を各ブロックに送出し、以下のように制御を行う。すなわち、
記録再生部１４０は、記録媒体１４１に記録された圧縮画像信号からなる静止画ファイル、または圧縮画像信号と圧縮音声信号または音声信号とからなる動画ファイルを読み出す。制御部１０１は記録再生部１４０により読み出された圧縮画像信号および圧縮音声信号を、第１および第２の画像処理部１１１、音声処理部１２１に送出する。非圧縮の音声信号が記録されている場合には、制御部１０１は、音声信号を直接音声出力部１５１に送出する。
【００６０】
第１および第２の画像処理部１１１、１６１、音声処理部１２１は、圧縮画像信号、圧縮音声を一時的にメモリ１０４に記憶させ、所定の手順で復号する。制御部１０１は、復号した音声信号を音声出力部１５１へ、復号した画像信号を映像出力部１５０や表示制御部１３１に送出する。表示制御部１３１は、入力された画像信号にかかる映像を表示部１３０に表示させ、音声出力部１５１は、入力された音声信号にかかる音声を内蔵されたスピーカや、接続されたイヤホンやスピーカから出力する。
【００６１】
また、本実施形態の撮像装置１００は、同時撮影記録された静止画および／または動画の再生を行う。これは、例えば、第１の画像（被写体）を表示部１３０に表示している場合に、ユーザが操作部１０２のボタンやタッチパネルなどを操作することで、同時に撮影・記録された第２の画像（撮影者）を表示することが可能である。更にまた、再生モードでは、再生画像の視聴中に、第１の撮像部１６０および第１の画像処理部１６１を制御することにより視聴者を撮影し、再生中の画像を第１の画像とし、視聴者を第２の画像として撮影し、関連付けて記録再生することも可能である。
【００６２】
＜撮影処理＞次に、図２を参照して、本実施形態の撮像装置による撮影処理について説明する。
【００６３】
なお、図２の処理は、記録媒体１４１に記録されたプログラムを、メモリ１０４に読み出して制御部１０１が実行することにより実現する。ユーザが操作部１０２を操作することにより動画撮影モードが設定されると、制御部１０１は、撮像装置１００の各ブロックを制御して動画撮影を開始する。
【００６４】
図２において、Ｓ２０１では、第１の画像処理部１１１および音声処理部１２１で符号化された動画データをメモリ１０４に一時記憶する。
【００６５】
Ｓ２０２では、メモリ１０４に記憶された動画データの時間長が所定の時間長以上か否かの判定を行い、所定の時間長以上の場合はＳ２０４へ進み、所定の時間長未満の場合はＳ２０３へ進む。ここで、所定の時間長はメモリ１０４に一時記憶可能な動画データの上限値以下に設定される。
【００６６】
Ｓ２０３では、メモリ１０４に記憶された動画データの中で最も古い動画データの破棄を行い、Ｓ２０４へ進む。破棄する動画データの単位は、秒単位でもよいし、動画の圧縮形式によってはＧＯＰ（Ｇｒｏｕｐ  Ｏｆ  Ｐｉｃｔｕｔｒｅｓ）単位でも良い。
【００６７】
Ｓ２０４では、操作部１０２の静止画記録ボタンが押されたか否かの判定を行い、静止画記録ボタンが押された場合はＳ２０５へ進み、押されない場合はＳ２０１へ戻る。
【００６８】
Ｓ２０５では、Ｓ２０１にてメモリ１０４に一時記憶された動画データを記録媒体１４１へ書き込む可能か否かの判定を行う。ここでは、メモリ１０４に一時記憶された動画データのデータサイズと、記録媒体１４１の空き容量から後述するＳ２０９にて撮影される静止画データの見積もり容量を差し引いた値とを比較する。そして、動画データのデータサイズの方が小さいと判定した場合は書き込み可能と判定し、Ｓ２０８へ進む。また、動画データのデータサイズの方が大きいと判定した場合は書き込み不可と判定し、Ｓ２０９へ進む。なお、メモリ１０４に一時記憶された動画データが所定の時間長に満たない場合に書き込み不可と判定しても良い。
【００６９】
Ｓ２０８では、メモリ１０４に一時記憶された動画データを、新たに単独の動画ファイルとして記録媒体１４１に記録する。
【００７０】
Ｓ２０９では、前述した静止画撮影処理を行う。
【００７１】
以上のように、本実施形態の撮像装置によれば、一度の操作で動画と静止画とを関連付けて同時に撮影し、同時に撮影された画像データのいずれか一方をメイン画像、いずれか他方をサブ画像として関連付けて記録することが可能である。なお、関連付けはＤＣＦファイル番号によって行うことができる。例えば保存された静止画のファイル名を”ＩＭＧ＿ｎｎｎｎ．ＪＰＧ”（ｎは０〜９の数値）とした場合に、同時に記録される動画のファイル名を”ＭＶＩ＿ｎｎｎｎ．ＭＯＶ”とし、両ファイルの”ｎｎｎｎ”の部分を共通にする。また、ファイル名に限らず、ファイルシステムにおけるファイルの属性（作成日時、更新日時など）やファイルのヘッダ部分に付加される属性情報（識別子、撮影日時など）に関連情報を追記しても良い。
【００７２】
図２では、第１の画像処理部１１１で動画データと静止画データを撮影する処理を説明したが、第１の撮像部１１０で撮影され第１の画像処理部１１１で処理された画像データと、第２の撮像部１６０で撮影され第２の画像処理部１６１で処理された画像データとを関連付けて記録しても良い。更に、第１の画像処理部１１１および第２の画像処理部１６１で処理される画像は静止画でも動画でも良い。例えば、第１の撮像部１１０で被写体の静止画撮影を行うと同時に第２の撮像部１６０で撮影者の動画撮影を行うことで被写体を撮影している撮影者の表情の変化などを撮影できる。
【００７３】
図７は、本実施形態の撮像装置１００により撮影され記録媒体１４１へ記録される画像データの構成を例示している。
【００７４】
図７において、７０１はデジタルカメラで一般的に使用されるＤＣＦ（Ｄｅｓｉｇｎ ｒｕｌｅ ｆｏｒ Ｃａｍera Ｆｉｌｅ Ｓｙｓｔｅｍ）規格にて規定されているＤＣＦルートディレクトリである。７０２、７０３は同様にＤＣＦ規格に従って作成されたＤＣＦディレクトリ、７０４〜７１３は同様にＤＣＦ規格に従って作成された画像ファイルであり、拡張子”ＪＰＧ”は静止画、”ＭＯＶ”は動画である。ここで、前述のようにＤＣＦファイル番号が同一のもが関連画像（かつメイン画像）、また、ファイル名が”ＳＵＢ”で始まるものが関連画像（かつサブ画像）となる。すなわち、静止画ファイル７０４とサブ画像ファイル７０５は互いに関連画像であり、メイン画像が静止画である。ここでサブ画像ファイル７０５の拡張子が”ＪＰ＿”となっているのは同一のＤＣＦファイル番号に複数のメイン画像を設定しないようにするためである。同様に、ファイル７０６、７０７はメイン画像が静止画でサブ画像が動画の関連画像、７０８、７０９はメイン画像が動画でサブ画像が静止画の関連画像、７１０、７１１はメイン画像が動画でサブ画像も動画の関連画像である。
【００７５】
＜再生処理＞次に、図３を参照して、本実施形態の撮像装置による再生処理について説明する。
【００７６】
なお、図３の処理は、記録媒体１４１に記録されたプログラムを、メモリ１０４に読み出して制御部１０１が実行することにより実現する。ユーザが操作部１０２を操作することにより再生モードが設定されると、制御部１０１は、撮像装置１００の各ブロックを制御して再生処理を開始する。
【００７７】
図３において、Ｓ３０１では、ファイル検索を行って記録媒体１４１に再生可能なファイルが存在するか否かを判定し、存在しない場合はＳ３０７へ進み、存在する場合はＳ３０２に進む。
【００７８】
Ｓ３０２では、最初に再生する初期画像を設定する。初期画像は、例えば、ＤＣＦディレクトリ番号が最大かつそのディレクトリ内のＤＣＦファイル番号が最大の画像が設定される。つまり画像を撮影・記録する度にＤＣＦファイル番号をインクリメントしてファイル名を決定し、新規ディレクトリを作成する際はＤＣＦディレクトリ番号をインクリメントしてディレクトリ名を決定していく場合、最後に撮影された最新の画像が初期画像となる。
【００７９】
Ｓ３０３では、Ｓ３０２で設定されたメイン画像の再生処理を行い、表示部１３０にメイン画像を表示する。
【００８０】
Ｓ３０４では、再生モードの終了指示を受けたか判定し、終了指示を受けていない場合はＳ３０５に進み、終了指示を受けた場合は本処理を終了する。
【００８１】
Ｓ３０５では、操作部１０２から画像送り指示を受けたか判定し、画像送り指示を受けていない場合はＳ３０９に進み、画像送り指示を受けた場合はＳ３０６に進む。
【００８２】
Ｓ３０６では、Ｓ３０５で受けた操作指示に従い、画像送り処理を実行する。ここでは、例えば、画像送り操作によって再生中の画像より後または前の画像を選択する指示があったか判定し、画像の選択指示があった場合に、ＤＣＦファイル番号の順番で後または前に位置する画像をメイン画像として設定し、Ｓ３０３へ戻る。Ｓ３０３では、Ｓ３０６で設定されたメイン画像の再生処理を行い、表示部１３０にメイン画像を表示する。
【００８３】
Ｓ３０９では、操作部１０２からサブ画像の選択指示を受けたか判定し、選択指示を受けていない場合はＳ３１４に進み、選択指示を受けた場合はＳ３１０に進む。ここで、サブ画像の選択操作とは、現在表示中のメイン画像に関連するサブ画像を選択または表示することである。この操作は、例えばタッチパネルで操作する場合は、図５（Ａ）のように、メイン画像５０１が全面に表示され、サブ画像５０２がメイン画像５０１に重畳して相対的に小さく表示される画面において、サブ画像５０２をタッチする。これにより、図５（Ｄ）のように、サブ画像５３１が全面に表示され、メイン画像５３２が小さく表示される画面に切り替わる。なお、この操作はタッチパネルに限らず、操作部１０２のボタンやキー操作などにより行っても良い。
【００８４】
Ｓ３１０では、Ｓ３０９で選択されたサブ画像の再生処理を行い、表示部１３０にサブ画像を表示する。
【００８５】
ステップ３１１では、操作部１０２から画像削除指示を受けたか判定し、画像削除指示を受けていない場合はＳ３０９に戻り、画像削除指示を受けた場合はＳ３１２に進む。
【００８６】
Ｓ３１２では、後述するサブ画像削除処理を行い、Ｓ３１３では、サブ画像の選択を解除し、Ｓ３０３へ戻る。
【００８７】
Ｓ３１４では、操作部１０２から画像削除指示を受けたか判定し、画像削除指示を受けていない場合はＳ３０３へ戻り、画像削除指示を受けた場合はＳ３１５に進む。
【００８８】
Ｓ３１５では、後述するサブ画像削除処理を行い、Ｓ３１６では、ファイル検索を行って記録媒体１４１に再生可能なファイルが存在するか否かを判定し、存在しない場合はＳ３０７へ進み、存在する場合はＳ３０７に進む。
【００８９】
Ｓ３１７では、再生するメイン画像を設定し、Ｓ３０３へ戻り、Ｓ３０７で設定されたメイン画像の再生処理を行い、表示部１３０にメイン画像を表示する。ここで設定される再生画像は、現在表示中のＤＣＦファイル番号の画像が存在する場合にはその画像を、存在しない場合は、ＤＣＦファイル番号の順番で後または前に位置する画像をメイン画像とする。
【００９０】
なお、Ｓ３０１やＳ３１６でファイル検索を行った結果、記録媒体１４１に再生可能なファイルが存在しない場合は、Ｓ３０７で、文字や絵などを表示することにより、再生可能なファイルが存在しないことをユーザに報知する。
【００９１】
Ｓ３０８では、再生モードの終了指示を受けたか判定し、終了指示を受けていない間はＳ３０７に戻り、終了指示を受けた場合は本処理を終了する。
【００９２】
（サブ画像削除処理）ここで、図４（Ａ）と図５を参照して、Ｓ３１２における画像削除処理について説明する。
【００９３】
Ｓ３０９でサブ画像の削除指示を受けると、図５（Ｅ）のように、サブ画像５４１が全面に表示され、メイン画像５４２が小さく表示される画面に、タッチ操作可能なキー５４３が表示される。ユーザはこのキー５４３を操作することで現在表示中のサブ画像５４１の削除指示を行うことができる。なお、キー５４３は、ユーザが画像の削除またはキャンセルのいずれかの操作を選択可能であり、画像の削除が操作されると、図４（Ａ）のサブ画像の削除処理が実行され、Ｓ４０１でサブ画像のみを削除する。
【００９４】
（画像削除処理１）ここで、図４（Ｂ）と図５を参照して、Ｓ３１５における画像削除処理の第１例について説明する。
【００９５】
Ｓ３１４でメイン画像の削除指示を受けると、図５（Ｂ）のように、メイン画像５１１が全面に表示され、サブ画像５１２が小さく表示される画面に、タッチ操作可能なキー５１３が表示される。ユーザはこのキー５１３を操作することで現在表示中のメイン画像５１１の削除指示を行うことができる。なお、キー５１３は、ユーザがメイン画像のみを削除、サブ画像も削除、またはキャンセルのいずれかの操作を選択可能である。
【００９６】
図４（Ｂ）は、Ｓ３１５の画像削除処理の第１例を示している。図４（Ｂ）において、Ｓ４１１では、図５（Ｂ）に示す削除対象を選択するためのＧＵＩ画面を表示する。Ｓ４１２では、ユーザがキー５１３のうち、メイン画像のみを削除、サブ画像も削除、またはキャンセルのいずれかの操作を選択したか判定する。ここで、メイン画像のみ削除が操作されると、Ｓ４１４に進み、現在表示中のメイン画像の削除を行い、Ｓ３１６へ進む。この場合、削除されなかったサブ画像が削除されたメイン画像に代わってメイン画像となる。このサブ画像からメイン画像へ変更する処理は、同じＤＣＦファイル番号にファイルが１つだけ存在する場合にその画像をメイン画像としたり、”ＳＵＢ”で始まるファイル名を”ＩＭＧ”に変更すれば良い。
【００９７】
Ｓ４１２で、サブ画像も削除が操作された場合には、Ｓ４１３へ進み、メイン画像に関連付けられたサブ画像の削除を行った後、Ｓ４１４へ進む。
【００９８】
（画像削除処理２）次に、図４（Ｃ）と図５を参照して、Ｓ３１５における画像削除処理の第２例について説明する。
【００９９】
Ｓ３１４でメイン画像の削除指示を受けると、図５（Ｃ）のように、メイン画像５２１が全面に表示され、サブ画像５２２が小さく表示される画面に、タッチ操作可能なキー５３３が表示される。ユーザはこのキー５３３を操作することで現在表示中のメイン画像とサブ画像の削除指示をまとめて行うことができる。なお、キー５３３は、ユーザがメイン画像とサブ画像を削除、またはキャンセルのいずれかの操作を選択可能である。
【０１００】
図４（Ｃ）は、Ｓ３１５の画像削除処理の第２例を示している。図４（Ｃ）において、Ｓ４２１では、現在表示中のメイン画像にサブ画像があるか（同時表示されているか）判定し、サブ画像がある場合はＳ４２２に進む。Ｓ４２２では、図５（Ｃ）のＧＵＩ画面を表示し、サブ画像も削除されることをユーザに報知する。
【０１０１】
図５（Ｃ）のＧＵＩ画面でＯＫが操作されると、Ｓ４２３に進み、サブ画像の削除を行った後、Ｓ４２４へ進み、メイン画像の削除を行い、Ｓ３１６へ進む。また、Ｓ４２１でサブ画像がない場合もＳ４２４へ進み、メイン画像の削除を行う。
【０１０２】
（画像削除処理３）次に、図４（Ｄ）と図６を参照して、Ｓ３１２における画像削除処理の第３例について説明する。
【０１０３】
Ｓ３１１でサブ画像の削除指示を受けると、サブ画像が動画の場合は図６（Ａ）のように、メイン画像６１１が全面に表示され、サブ画像６１２が小さく表示される画面に、タッチ操作可能なキー６１３が表示される。また、サブ画像が静止画の場合は図６（Ｂ）のように、メイン画像６２１が全面に表示され、サブ画像６２２が小さく表示される画面に、タッチ操作可能なキー６２３が表示される。ユーザはこれらのキー６１３、６２３を操作することで現在表示中のサブ画像６１２、６２２の削除指示や変換指示を行うことができる。なお、キー６１３は、ユーザがサブ画像を削除または変換、或いはキャンセルのいずれかの操作を選択可能である。また、キー６２３は、ユーザがサブ画像を削除またはキャンセルのいずれかの操作を選択可能である。
【０１０４】
図４（Ｄ）は、Ｓ３１２の画像削除処理の第３例を示している。図４（Ｄ）において、Ｓ４３１では、現在表示中のサブ画像が動画であるか判定し、動画の場合はＳ４３２に進み、静止画の場合はＳ４３５に進む。Ｓ４３２では、図６（Ａ）のＧＵＩ画面を表示し、ユーザが”サブ動画を削除”と”サブ動画を変換”のいずれの操作を行ったか判定し、”サブ動画を削除”が選択された場合はＳ４３５に進み、”サブ動画を変換”が選択された場合はＳ４３３に進む。
【０１０５】
Ｓ４３３では、静止画として残すフレームを決定する。ここでは、例えば、サブ動画の先頭フレームや、所定時間が経過した時点のフレーム、あるいは動画中の注目フレームが抽出される。なお、注目フレームとは、例えば動画中で音声が大きく入力されているフレームや被写体の笑顔が検出されているフレームなどである。
【０１０６】
Ｓ４３４では、Ｓ４３３で選択されたフレームを、削除するサブ画像の代わりに静止画として保存する。ここで保存される静止画は、前述のようにメイン画像と関連付けするために、メイン画像と同一のＤＣＦファイル番号のファイル名とする。Ｓ４３５では、現在表示中のサブ画像またはサブ動画の削除を行い、Ｓ３１３に戻る。
【０１０７】
（画像削除処理４）次に、図４（Ｅ）と図６を参照して、Ｓ３１５における画像削除処理の第４例について説明する。
【０１０８】
Ｓ３１４でメイン画像の削除指示を受けると、図６（Ｃ）のように、メイン画像６３１が全面に表示され、サブ画像６３２が小さく表示される画面に、タッチ操作可能なキー６３３が表示される。ユーザはこのキー６３３を操作することで現在表示中のメイン画像６３１および／またはサブ画像６３２の削除指示や変換指示、削除しない指示や処理により削減される容量の提示を行うことができる。なお、キー６３３は、ユーザがメイン画像および／またはサブ画像を残す、変換する、削除する操作のいずれかを設定可能であり、加えて当該設定を実行する、或いはキャンセルする操作を選択可能である。
【０１０９】
図４（Ｅ）は、Ｓ３１５の画像削除処理の第４例を示している。図４（Ｅ）において、Ｓ４４１では、現在表示中のメイン画像が動画であるか判定し、動画の場合はＳ４４２に進み、静止画の場合はＳ４４５に進む。Ｓ４４２では、Ｓ３１４で削除指示されたサブ画像が動画であるか判定し、動画の場合はＳ４４３に進み、静止画の場合はＳ４４４に進む。
【０１１０】
Ｓ４４３では、メイン画像もサブ画像も動画であるので、図６（Ｃ）のＧＵＩ画面においてサブ画像の変換を選択し、Ｓ４４７へ進む。Ｓ４４４では、メイン画像は動画であるが、サブ画像は静止画であるので、図６（Ｃ）のＧＵＩ画面においてメイン画像の変換を選択し、Ｓ４４７へ進む。
【０１１１】
また、Ｓ４４５では、Ｓ３１４で削除指示されたサブ画像が動画であるか判定し、動画の場合はＳ４４３に進み、静止画の場合はＳ４４６に進む。Ｓ４４６では、メイン画像もサブ画像も静止画であるので、図６（Ｃ）のＧＵＩ画面においてサブ画像の削除を選択し、Ｓ４４７へ進む。
【０１１２】
Ｓ４４７では、Ｓ４４１〜Ｓ４４６にて選択されたメイン画像および／またはサブ画像の処理候補についてユーザによる設定変更を受け付ける。このユーザによる設定変更の操作は、例えば、図６（Ｃ）のＧＵＩ画面において、メイン画像および／またはサブ画像の処理内容として、ユーザがタッチパネルや操作部１０２によりラジオボタンの”残す”、”変換”、”削除”のいずれかを選択する操作である。
【０１１３】
Ｓ４４８〜Ｓ４５２では、メイン画像について図４（Ｄ）と同様の処理を行い、メイン画像の削除または静止画への変換を行う。Ｓ４５３〜Ｓ４５７では、サブ画像について図４（Ｄ）と同様の処理を行い、サブ画像の削除または静止画への変換を行う。
【０１１４】
上述した画像削除処理１、２によれば、現在全画面表示されている画像がサブ画像の場合はサブ画像を即座に削除可能とし、メイン画像の場合はサブ画像が存在することをユーザに明示する。これにより、ユーザは、メイン画像とサブ画像を同時に削除するか、いずれかを選択して削除するかを選択することができる。
【０１１５】
また、上述した画像削除処理３、４によれば、メイン画像および／またはサブ画像が静止画なのか動画なのかに応じて最適な処理候補をユーザに提示することができる。これにより、メイン画像を残すことを優先しつつ、メイン動画やサブ動画の変換処理や削除処理を提示することで、記録媒体の空き容量を削減することができる。
【０１１６】
なお、本実施形態では、サブ画像よりもメイン画像を優先し、静止画よりも動画を優先して変換処理を提示するようにしたが、メイン画像とサブ画像のそれぞれが記録媒体を占有するサイズを比較することにより優先度を変更しても良い。
【０１１７】
また、本実施形態では、メイン画像とサブ画像を関連付けて管理しているが、別ファイルのまま管理し、メイン画像にサブ画像を埋め込む処理を行っても良い。この場合に、メイン画像の削除指示を受けたならば、メイン画像のみを削除するか、サブ画像も削除するか、メイン画像とサブ画像を両方削除するかを提示するようにしても良い。
【０１１８】
また、本実施形態では、装置自身が備える撮像部および画像処理部により生成された画像を対象としたが、ネットワークなどの通信手段を介して外部機器やサーバなどから取得した画像を対象とする場合でも同様に、本発明を適用可能である。
【０１１９】
［他の実施形態］本発明は、以下の処理を実行することによっても実現される。即ち本実施形態の機能を実現するソフトウェア（プログラム）を、ネットワーク又は各種記憶媒体を介してシステムあるいは装置に供給し、そのシステムあるいは装置のコンピュータ（またはＣＰＵやＭＰＵなど）がプログラムを読み出して実行する処理である。
【図１】
2015023317.tif 000003
【図２】
2015023317.tif 000004
【図３】
2015023317.tif 000005
【図４】
2015023317.tif 000006
【図５】
2015023317.tif 000007
【図６】
2015023317.tif 000008
【図７】
2015023317.tif 000009