(57)【要約】【課題】  合成された動画における各部画像の動作の比較、検討を的確に行うことができるように合成を行うことを可能にする。【解決手段】  予め個々に撮像した左右部分動画の先頭フレームを左右並列表示する（Ｓ２０１）。Ｌキーが操作された場合には、液晶モニタの左領域に表示されている、左部分動画データの次フレームの画像を表示する（Ｓ２０３）。Ｒキーが操作された場合には、液晶モニタの右領域に表示されている、右部分動画データの次フレームの画像を表示する（Ｓ２０５）。しかる後に、ＯＫキーが操作されたか否かを判断し（Ｓ２０６）、操作されたならば、この表示されているフレームをカップリングムービーにおけるスタートフレームとして決定する（Ｓ２０７）。そして、この決定したスタートフレームから左右部分動画のフレーム毎の合成を開始する（Ｓ２０８）。【選択図】      図７
2005244799.tif 000002
【特許請求の範囲】
【請求項１】
動画を構成する各フレームにおける所定部分の画像を順次撮像する第１の動画撮像手段と、
前記フレームにおける前記所定部分とは異なる部分の画像を順次撮像する第２の動画撮像手段と、
前記第１及び第２の動画撮像手段により撮像された動画のいずれか少なくとも一方において、合成を開始するフレームを指定する指定手段と、
この指定手段により指定されたフレームから、前記第１及び第２の動画撮像手段により撮像された動画をフレーム毎に合成する合成手段と、
この合成手段の合成により得られた合成動画を記録する動画記録手段と
を備えることを特徴とする撮像装置。
【請求項２】
前記第１の動画撮像手段は、前記各フレームにおける左右の一方側部分の画像を撮像し、前記第２の動画撮像手段は、他方側部分の画像を撮像することを特徴とする請求項１記載の撮像装置。
【請求項３】
前記指定手段は、前記第１及び第２の動画撮像手段により撮像された動画の双方において、合成を開始するフレームを指定することを特徴とする請求項１又は２記載の撮像装置。
【請求項４】
前記指定手段は、前記第１及び第２の動画撮像手段により撮像された動画の一方において、合成を終了するフレームをさらに指定し、
前記合成手段は、前記指定手段により開始を指定されたフレームから、終了を指定されたフレームまでの動画をフレーム毎に合成することを特徴とする請求項１、２又は３記載の撮像装置。
【請求項５】
前記第１及び第２の動画撮像手段により撮像された動画を再生表示する表示手段を更に備え、
前記指定手段は、前記表示手段に動画が再生表示されている状態における所定の操作に応答して、当該操作時点で前記表示手段に表示されている動画のフレームを前記合成の開始又は終了フレームとして指定することを特徴とする請求項１から４にいずれか記載の撮像装置。
【請求項６】
操作手段と、
この操作手段の操作に応じて、前記表示手段に表示されている動画各フレームの画像をスクロール表示させる表示制御手段とを更に備え、
前記指定手段は、前記表示手段に動画の任意のフレームからなる静止画が再生表示されている状態における所定の操作に応答して、当該操作時点で表示されている動画のフレームを前記合成の開始又は終了フレームとして指定することを特徴とする請求項５記載の撮像装置。
【請求項７】
動画を構成する各フレームにおける所定部分の画像を順次撮像する第１の動画撮像手段と、
この第１の動画撮像手段により撮像された動画において、合成を開始するフレームを指定する指定手段と、
この指定手段により指定されたフレームの画像を表示するとともに、前記フレームにおける前記所定部分とは異なる部分の被写体像を表示する表示手段と、
この表示手段に前記所定部分とは異なる部分の被写体像が表示されている状態における操作に応じて、前記所定部分とは異なる部分の画像を順次撮像する第２の動画撮像手段と、
前記指定手段により指定されたフレームから、前記第１及び第２の動画撮像手段により撮像された動画をフレーム毎に合成する合成手段と、
この合成手段の合成により得られた合成動画を記録する動画記録手段と
を備えることを特徴とする撮像装置。
【請求項８】
前記合成手段の合成により得られた合成動画に基づき動画ファイルを生成する生成手段を更に備え、
前記記録手段は、前記生成手段により生成された動画ファイルを記録することを特徴とする請求項１から７にいずれか記載の撮像装置。
【請求項９】
動画撮像手段と動画記録手段とを備える撮像装置が有するコンピュータを、
前記動画撮像手段を制御して、動画を構成する各フレームにおける所定部分の画像を順次撮像させる第１の撮像制御手段と、
前記フレームにおける前記所定部分とは異なる部分の画像を順次撮像させる第２の撮像制御手段と、
前記第１及び第２の撮像制御手段の制御により撮像された動画のいずれか少なくとも一方において、合成を開始するフレームを指定する指定手段と、
この指定手段により指定されたフレームから、前記第１及び第２の撮像制御手段の制御により撮像された動画をフレーム毎に合成する合成手段と、
この合成手段の合成により得られた合成動画を前記動画記録手段に記録させる記録制御手段と
して機能させることを特徴とする動画合成制御プログラム。
【請求項１０】
動画撮像手段と表示手段及び動画記録手段手段を備える撮像装置が有するコンピュータを、
前記動画撮像手段を制御して、動画を構成する各フレームにおける所定部分の画像を順次撮像させる第１の撮像制御手段と、
前記第１の撮像制御手段の制御により撮像された動画において、合成を開始するフレームを指定する指定手段と、
この指定手段により指定されたフレームの画像を前記表示手段に表示させるとともに、前記フレームにおける前記所定部分とは異なる部分の被写体像を表示させる表示制御手段と、
この表示制御手段の制御により前記所定部分とは異なる部分の被写体像が表示されている状態における操作に応じて、前記動画撮像手段を制御し前記所定部分とは異なる部分の画像を順次撮像させる第２の撮像制御手段と、
前記指定手段により指定されたフレームから、前記第１及び第２の撮像制御手段の制御により撮像された動画をフレーム毎に合成する合成手段と、
この合成手段の合成により得られた合成動画を前記動画記録手段に記録させる記録制御手段と
して機能させることを特徴とする動画合成制御プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、動画を撮像する撮像装置、この撮像装置における動画合成制御プログラムに関する。
【背景技術】
【０００２】
従来、撮像した動画を構成する各フレームの左側部分と右側部分の画像を合成する機能を備えた電子カメラが提案されるに至っている。この電子カメラは、シャッターキーが操作されると、動画撮像時間の計測を開始するとともに１回目の動画撮像処理を実行する。この１回目の動画撮像処理では、撮像した第１の動画を構成する各フレームにおける右半分の部分画像のデータを切り出し、ＤＲＡＭに一時保存し、シャッターキーの操作をやめると、１回目の動画撮像処理を終了する。また、再度シャッターキーが操作されると、前記計測した１回目の動画撮像時間内にて２回目の動画撮像処理を実行し、第２の動画を構成する各フレームにおける左半分の部分画像のデータを切り出し、ＤＲＡＭに一時保存する。
【０００３】
そして、２回目の動画撮像処理が終了すると、１回目の動画撮像で得られた第１の動画各フレームにおける右半分の部分画像と、２回目の動画撮像で得られた第２の動画の各フレームにおける左半分の部分画像とを各フレームの右左に配置して、フレーム毎に合成を行って合成動画を作成し、メモリ・カードに保存する。したがって、最終的に、各フレームの右半分に１回目の動画撮像で撮像した部分画像が存在しかつ左半分に２回目の動画撮像で撮像した部分画像が存在する合成動画を保存することができるものである（例えば、特許文献１参照。）。
【特許文献１】特開２００３−２７４２６３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
前述のような電子カメラの動画合成機能は、スポーツ、ダンス、芸術系等において、第１の動画としてあるプレイヤの動作を撮像し、第２の動画として他のプレイヤの動作を撮像して合成を行い、これにより再生時に画面の左右に比較対照となる両プレイヤの動作を表示し、これを見ることにより各プレイヤの一連動作を比較、検討する場合等に主として用いられる。したがって、動画の各フレームにおける左右の画像は、各プレイヤの動作タイミングが合致していることが、両プレイヤ動作の比較、検討等を的確に行う上で望ましい。
【０００５】
しかるに、前述した従来の電子カメラにおける動画合成技術にあっては、単に動画撮像時間を一致させて１回目の撮像時間と２回目の撮像時間とを行い、しかる後に両者の合成を行うに過ぎないことから、合成される各動画におけるフレーム画像のタイミングにユーザが関与することはできない。したがって、合成された動画にあっては、左右プレイヤの一連動作におけるタイミングが合致していない場合が生じ、スポーツ、ダンス、芸術系等において左右画像を比較、検討する際に必ずしも有用となるものではなかった。
【０００６】
本発明は、かかる従来の課題に鑑みてなされたものであり、合成された動画における各部画像の動作の比較、検討を的確に行うことができるように合成を行うことのできる撮像装置及び動画合成制御プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
前記課題を解決するため請求項１記載の発明に係る撮像装置にあっては、動画を構成する各フレームにおける所定部分の画像を順次撮像する第１の動画撮像手段と、前記フレームにおける前記所定部分とは異なる部分の画像を順次撮像する第２の動画撮像手段と、前記第１及び第２の動画撮像手段により撮像された動画のいずれか少なくとも一方において、合成を開始するフレームを指定する指定手段と、この指定手段により指定されたフレームから、前記第１及び第２の動画撮像手段により撮像された動画をフレーム毎に合成する合成手段と、この合成手段の合成により得られた合成動画を記録する動画記録手段とを備える。
【０００８】
したがって、第１の動画撮像手段により撮像された動画と、第２の動画撮像手段により撮像された画像とが、指定手段により指定されたフレームから合成されることから、撮像されて合成される各動画におけるフレーム画像の開始タイミングにユーザが関与することが可能となる。よって、この開始タイミングに対するユーザの関与により、合成された動画の各フレームにおける所定部分の画像と、異なる部分の画像との動作タイミングを整合させることが可能となる。
【０００９】
また、請求項２記載の発明に係る撮像装置にあっては、前記第１の動画撮像手段は、前記各フレームにおける左右の一方側部分の画像を撮像し、前記第２の動画撮像手段は、他方側部分の画像を撮像する。したがって、前記開始タイミングに対するユーザの関与により、合成された動画の各フレームにおける左右各部分の画像の動作タイミングを整合させることが可能となる。
【００１０】
また、請求項３記載の発明に係る撮像装置にあっては、前記指定手段は、前記第１及び第２の動画撮像手段により撮像された動画の双方において、合成を開始するフレームを指定する。したがって、両動画に対する開始タイミングに対するユーザの関与により、合成された動画の各フレームにおける左右各部分の画像の動作タイミングをより高精度に整合させることができる。
【００１１】
また、請求項４記載の発明に係る撮像装置にあっては、前記指定手段は、前記第１及び第２の動画撮像手段により撮像された動画の一方において、合成を終了するフレームをさらに指定し、前記合成手段は、前記指定手段により開始を指定されたフレームから、終了を指定されたフレームまでの動画をフレーム毎に合成する。したがって、ユーザは、合成の開始タイミングのみならず終了タイミングにも関与することができ、これにより、合成された動画の各フレームにおける各部分の画像の動作タイミングを最初から最後まで整合させることが可能となる。
【００１２】
また、請求項５記載の発明に係る撮像装置にあっては、前記第１及び第２の動画撮像手段により撮像された動画を再生表示する表示手段を更に備え、前記指定手段は、前記表示手段に動画が再生表示されている状態における所定の操作に応答して、当該操作時点で前記表示手段に表示されている動画のフレームを前記合成の開始又は終了フレームとして指定する。したがって、再生された動画を見ながら、合成の開始タイミングを指定することができる。これにより、的確なタイミングで合成の開始フレームを指定することができ、その結果、各部分の画像の動作タイミングをより高精度に整合させることができる。
【００１３】
また、請求項６記載の発明に係る撮像装置にあっては、操作手段と、この操作手段の操作に応じて、前記表示手段に表示されている動画各フレームの画像をスクロール表示させる表示制御手段とを更に備え、前記指定手段は、前記表示手段に動画の任意のフレームからなる静止画が再生表示されている状態における所定の操作に応答して、当該操作時点で表示されている動画のフレームを前記合成の開始又は終了フレームとして指定する。したがって、動画の各フレームを表示手段にスクロール表示させながら、開始フレームの指定を行うことができ、これにより的確かつ容易に開始フレームを指定することができる。
【００１４】
また、請求項７記載の発明に係る撮像装置にあっては、動画を構成する各フレームにおける所定部分の画像を順次撮像する第１の動画撮像手段と、この第１の動画撮像手段により撮像された動画において、合成を開始するフレームを指定する指定手段と、この指定手段により指定されたフレームの画像を表示するとともに、前記フレームにおける前記所定部分とは異なる部分の被写体像を表示する表示手段と、この表示手段に前記所定部分とは異なる部分の被写体像が表示されている状態における操作に応じて、前記所定部分とは異なる部分の画像を順次撮像する第２の動画撮像手段と、前記指定手段により指定されたフレームから、前記第１及び第２の動画撮像手段により撮像された動画をフレーム毎に合成する合成手段と、この合成手段の合成により得られた合成動画を記録する動画記録手段とを備える。
【００１５】
したがって、各部分の動画の撮像終了と同時に合成も終了することとなり、合成動画の作成を迅速に完了することができる。しかも、ユーザは実際に動作している被写体像の表示手段で見ながら、開始フレームを決定できることとなり、各部分動画の開始タイミングの整合性をより高めることができる。
【００１６】
また、請求項８記載の発明に係る撮像装置にあっては、前記合成手段の合成により得られた合成動画に基づき動画ファイルを生成する生成手段を更に備え、前記記録手段は、前記生成手段により生成された動画ファイルを記録する。したがって、この動画ファイルを外部機器を用いて再生して各プレイヤの動作の比較、検討を行うといったことも可能になる。
【００１７】
また、請求項９記載の発明に係る動画合成制御プログラムにあっては、動画撮像手段と動画記録手段とを備える撮像装置が有するコンピュータを、前記動画撮像手段を制御して、動画を構成する各フレームにおける所定部分の画像を順次撮像させる第１の撮像制御手段と、前記フレームにおける前記所定部分とは異なる部分の画像を順次撮像させる第２の撮像制御手段と、前記第１及び第２の撮像制御手段の制御により撮像された動画のいずれか少なくとも一方において、合成を開始するフレームを指定する指定手段と、この指定手段により指定されたフレームから、前記第１及び第２の撮像制御手段の制御により撮像された動画をフレーム毎に合成する合成手段と、この合成手段の合成により得られた合成動画を前記動画記録手段に記録させる記録制御手段として機能させる。したがって、前記コンピュータがこのプログラムに従って処理を実行することにより、請求項１記載の発明と同様の作用効果を奏する。
【００１８】
また、請求項１０記載の発明に係る動画合成制御プログラムにあっては、動画撮像手段と表示手段及び動画記録手段手段を備える撮像装置が有するコンピュータを、前記動画撮像手段を制御して、動画を構成する各フレームにおける所定部分の画像を順次撮像させる第１の撮像制御手段と、前記第１の撮像制御手段の制御により撮像された動画において、合成を開始するフレームを指定する指定手段と、この指定手段により指定されたフレームの画像を前記表示手段に表示させるとともに、前記フレームにおける前記所定部分とは異なる部分の被写体像を表示させる表示制御手段と、この表示制御手段の制御により前記所定部分とは異なる部分の被写体像が表示されている状態における操作に応じて、前記動画撮像手段を制御し前記所定部分とは異なる部分の画像を順次撮像させる第２の撮像制御手段と、前記指定手段により指定されたフレームから、前記第１及び第２の撮像制御手段の制御により撮像された動画をフレーム毎に合成する合成手段と、この合成手段の合成により得られた合成動画を前記動画記録手段に記録させる記録制御手段として機能させる。したがって、前記コンピュータがこのプログラムに従って処理を実行することにより、請求項６記載の発明と同様の作用効果を奏する。
【発明の効果】
【００１９】
以上説明したように、請求項１、９に係る発明によれば、第１に撮像された動画と、第２に撮像された画像とが、指定されたフレームから合成されることから、撮像されて合成される各動画におけるフレーム画像の開始タイミングにユーザが関与することが可能となる。よって、この開始タイミングに対するユーザの関与により、合成された動画の各フレームにおける所定部分の画像と所定部分とは異なる部分の画像との動作タイミングの整合性を図ることが可能となる。これにより、スポーツ、ダンス、芸術系等において所定部分の画像と所定部分とは異なる部分の画像を比較、検討する際に、再生される合成動画においてプレイヤの一連動作のタイミングを一致させることも可能となり、各プレイヤの動作の比較、検討を的確に行うことが可能となる。
【００２０】
さらに、請求項２に係る発明によれば、開始タイミングに対するユーザの関与により、合成された動画の各フレームにおける左右各部分の画像の動作タイミングの整合性を図ることが可能となる。
【００２１】
また、請求項３に係る発明によれば、両動画に対する開始タイミングに対するユーザの関与により、合成された動画の各フレームにおける左右各部分の画像の動作タイミングをより高精度に整合させることができる。
【００２２】
また、請求項４に係る発明によれば、ユーザは、合成の開始タイミングのみならず終了タイミングにも関与することができ、これにより、合成された動画の各フレームにおける各部分の画像の動作タイミングを最初から最後まで整合させることが可能となる。
【００２３】
また、請求項５に係る発明によれば、再生された動画を見ながら、合成の開始タイミングを指定することができる。これにより、的確なタイミングで合成の開始フレームを指定することができ、その結果、各部分の画像の動作タイミングをより高精度に整合させることができる。
【００２４】
また、請求項６に係る発明によれば、動画の各フレームを表示手段にスクロール表示させながら、開始フレームの指定を行うことができ、これにより的確かつ容易に開始フレームを指定することができる。
【００２５】
また、請求項７、１０に係る発明によれば、各部分の動画の撮像終了と同時に合成も終了することとなり、合成動画の作成を迅速に完了することができる。しかも、ユーザは実際に動作している被写体像の表示手段で見ながら、開始フレームを決定できることとなり、各部分動画の開始タイミングの整合性をより高めることができる。
【００２６】
また、請求項８に係る発明によれば、この動画ファイルを外部機器を用いて再生して各プレイヤの動作の比較、検討を行うといったことも可能になる。
【発明を実施するための最良の形態】
【００２７】
以下、本発明の実施の形態を図にしたがって説明する。
（第１の実施の形態）
【００２８】
図１は、本発明の各実施の形態に共通するデジタルカメラ１の背面斜視図である。図示のように、このデジタルカメラ１には、カメラ本体２の上面に電源キー３と、シャッターキー４とが配設され、カメラ本体２の背面に光学ファインダ５と、記録（ＲＥＣ）モードと再生（ＰＬＡＹ）モードとを切り換えるモード切換スイッチ６、記録画像や各種の情報を表示するとともに電子ビューファインダとして機能する液晶モニタ７、メニュー画面を表示させるためのメニュー（ＭＥＮＵ）キー８、表示されたメニュー項目等の選択や確定操作に使用する操作キー９が配設されている。
【００２９】
デジタルカメラ１においては、記録モードの下位モードとして静止画撮像モードに加え、通常の動画撮像モード、カップリングムービーモードが用意されており、操作キー９の操作によって各撮像モードが選択可能となっている。ここで、カップリングムービーモードとは、図２（ａ）（ｂ）に示すように、動画を構成する各フレームを左フレーム部ＬＦと右フレーム部ＲＦとに区分して各々動画撮像を行い、最終的には同図（ｃ）に示すように、左フレーム部ＬＦと右フレーム部ＲＦとを単一のフレームＦに合成して、この合成された複数のフレームＦからなる動画を作成するモードである。
【００３０】
このため、デジタルカメラ１には、さらに左フレーム部ＬＦをスクロール表示させる際に操作されるＬキー３１、右フレーム部ＲＦをスクロール表示させる際に操作されるＲキー３２、及び合成する際のスタートフレームやエンドフレームを決定する際に操作されるＯＫキー３３が設けられている。
【００３１】
図３は、デジタルカメラ１の電気的構成の概略を示すブロック図である。デジタルカメラ１は、カメラ本体２の図示しない正面側に配置された撮像レンズ１０の光軸後方に配置された撮像素子であるＣＣＤ１１を備えている。ＣＣＤ１１は、タイミング発生器（ＴＧ）１２、垂直ドライバ１３によって走査駆動され、一定周期で１画面分の撮像信号を出力する。
【００３２】
ＣＣＤ１１の出力信号は、アナログ信号の状態でＲＧＢの原色成分毎に適宜ゲイン調整された後に、サンプルホールド回路（Ｓ／Ｈ）１４でサンプルホールドされ、Ａ／Ｄ変換器１５でデジタルデータに変換されカラープロセス回路１６に送られる。カラープロセス回路１６は画像補間処理を含むカラープロセス処理により、デジタル値の輝度信号Ｙ及び色差信号Ｃｂ，Ｃｒを生成し、ＤＭＡ（Ｄｉｒｅｃｔ  Ｍｅｍｏｒｙ Ａｃｃｅｓｓ）ＤＭＡコントローラ１７に出力する。
【００３３】
ＤＭＡコントローラ１７は輝度信号Ｙ及び色差信号Ｃｂ，Ｃｒを、カラープロセス回路１６からの複合同期信号、メモリ書込みイネーブル信号、及びクロック信号を用いて一度ＤＭＡコントローラ１７内部のバッファに書込み、ＤＲＡＭインタフェース（Ｉ／Ｆ）１８を介してＤＲＡＭ１９にＤＭＡ転送する。制御部２０は、上記輝度及び色差信号データ、つまり画像データのＤＲＡＭ１９へのＤＭＡ転送終了後に、その画像データを、ＤＲＡＭインタフェース１８を介してＤＲＡＭ１９から読み出し、ＶＲＡＭコントローラ２１を介してＶＲＡＭ２２に書き込む。
【００３４】
デジタルビデオエンコーダ２３は、上記画像データを、ＶＲＡＭコントローラ２１を介してＶＲＡＭ２２より定期的に読出し、これらのデータを元にビデオ信号を発生して表示部２４に出力する。表示部２４は本発明の表示手段であり、上記液晶モニタ７とその駆動回路等により構成され、デジタルビデオエンコーダ２３からのビデオ信号に基づいた表示を行うことで、その時点でＶＲＡＭコントローラ２１から取り込まれている画像情報に基づくスルー画像を表示する。
【００３５】
キー入力部２５は、前述したシャッターキー４やモード切換スイッチ６等の各キーを含み、スルー画像が表示されている状態でシャッターキー４が操作されると、撮像開始用のトリガ信号を発生する。
【００３６】
記録モードによる静止画撮像モード時には、上記トリガ信号に応じて制御部２０がＣＣＤ１１からのＤＲＡＭ１９への経路を停止し、ＤＲＡＭ１９に書込まれている１フレーム分の画像データを、ＤＲＡＭインタフェース１８を介して読み出し、ＪＰＥＧ回路２６に送る。ＪＰＥＧ回路２６では送られた画像データを圧縮符号化し、圧縮された画像データは制御部２０によって読み出され、静止画ファイルとして不揮発性メモリであるフラッシュメモリ２７に記録される。なお、記録モードによる動画撮像モード及びカップリングムービーモード時には、ＤＲＡＭ１９からの画像データの読込み、及び画像データの圧縮符号化が連続して行われ、圧縮された複数フレーム分の画像データが、動画ファイルとしてフラッシュメモリ２７に記録される。また、カップリングムービーモード時における動画合成は、ＤＲＡＭ１９を用いて行われ、動画合成後の圧縮された複数フレーム分の画像データが、動画ファイルとしてフラッシュメモリ２７に記録される。
【００３７】
フラッシュメモリ２７に記録された画像（静止画、動画又は合成動画（カップリングムービー））ファイルは、再生モードにおいて、前記操作キー９等による選択操作に応じてＪＰＥＧ回路２６に読み込まれ、そこで画像データに復号された後、ＶＲＡＭコントローラ２１を介してＶＲＡＭ２２へ送られ、表示部２４で表示される。
【００３８】
また、制御部２０は、主としてＣＰＵ及びその周辺回路と、ＣＰＵの作業用メモリであるＲＡＭ、及びカレンダ機能を有する内蔵時計から構成されるマイクロコンピュータであり、フラッシュメモリ２７に確保されているプログラム領域に格納されているプログラムに基づき動作し、前述した各部の動作を制御する。
【００３９】
図４は、カップリングムービーモード時におけるＤＲＡＭ１９のメモリ領域を示す模式図である。カップリングムービーモード時においてＤＲＡＭ１９の一部には、作業領域１９１と、左フレーム部ＬＦのみの複数のフレームで構成される左部分動画データを記憶する左部分動画記憶領域１９２、及び右フレーム部ＲＦのみの複数のフレームで構成される右部分動画データを記憶する右部分動画記憶領域１９３とが確保される。
【００４０】
図５は、ユーザーが、液晶モニタ７に表示されたメニュー画面から、「カップリングムービーモード」を選択したときの制御部２０によるカップリングムービーモード処理の内容を示すフローチャートである。
【００４１】
制御部２０は「カップリングムービーモード」が選択されたことに伴い、右半分をマスクしてスルー画像表示する（ステップＳ１０１）。すなわち、撮像レンズ１０により被写体像が結像されたＣＣＤ１１から出力された１画面分の撮像信号から左半分の画像信号のみを取り込み、あるいは、ＣＣＤ１１から左半分の画像信号のみが出力されるように制御することにより、左半分の画像信号のみに基づき、液晶モニタ７を駆動する。したがって、このステップＳ１０１での処理により、図６（ａ）に示すように、液晶モニタ７の左領域７Ｌにスルー画像の左部分画像Ｌが表示されるとともに、右領域７Ｒは黒色表示される。なお、液晶モニタ７の左領域７Ｌ及び右領域７Ｒの双方にスルー画像を表示させ、どちらの領域が撮影対象領域なのかを表示するようにしてもよい。例えば、非撮影対象領域である右領域７Ｒに表示されるスルー画像をモノクロ表示（低階調表示）させたり、文字表示や図形表示によりどちらの領域が撮影対象領域なのかを知らせるといった手法が考えられる。
【００４２】
次に、シャッターキー４が操作されるまで待ち（ステップＳ１０２）、シャッターキー４が操作されたならば、左部分画像を動画撮像処理する（ステップＳ１０３）。つまり、図２（ａ）に示した左フレーム部ＬＦのみに画像が存在するフレームを順次、左部分動画記憶領域１９２に記憶させていく。次に、２回目のシャッターキー４の操作があったか否かを判断し（ステップＳ１０４）、操作があった時点で左部分画像の動画撮像処理を終了する（ステップＳ１０５）。したがって、１回目と２回目のシャッターキー４の操作時間内において、左部分画像の動画撮像処理が継続してなされる。これにより、左部分動画記憶領域１９２には、その間の時間に応じた数からなるフレームであって、左フレーム部ＬＦのみに画像が存在する複数のフレームからなる左部分動画データが記憶されることとなる。
【００４３】
引き続き、左半分をマスクしてスルー画像表示する（ステップＳ１０６）。すなわち、前述とは逆に、撮像レンズ１０により被写体像が結像されたＣＣＤ１１から出力された１画面分の撮像信号から右半分の画像信号のみを取り込み、あるいは、ＣＣＤ１１から左右分の画像信号のみが出力されるように制御することにより、右半分の画像信号のみに基づき、液晶モニタ７を駆動する。したがって、このステップＳ１０６での処理により、図６（ｂ）に示すように、液晶モニタ７の左領域７Ｌにスルー画像の右部分画像Ｒが表示されるとともに、左領域７Ｌは黒色表示される。なお、この場合も前述したように、液晶モニタ７の左領域７Ｌ及び右領域７Ｒの双方にスルー画像を表示させ、どちらの領域が撮影対象領域なのかを表示するようにしてもよい。また、液晶モニタ７の左領域７Ｌに左部分動画記憶領域１９２に記憶されている左部分動画データを表示させるようにしてもよい。
【００４４】
次に、３回目のシャッターキー４が操作されるまで待ち（ステップＳ１０７）、３回目のシャッターキー４が操作されたならば、右部分画像を動画撮像処理する（ステップＳ１０８）。つまり、図２（ｂ）に示した右フレーム部ＲＦのみに画像が存在するフレームを順次、右部分動画記憶領域１９３に記憶させていく。次に、４回目のシャッターキー４の操作があったか否かを判断し（ステップＳ１０９）、４回目の操作があった時点で右部分画像の動画撮像処理を終了する（ステップＳ１１０）。したがって、３回目と４回目のシャッターキー４の操作時間内において、右部分画像の動画撮像処理が継続してなされる。これにより、右部分動画記憶領域１９３には、その間の時間に応じた数からなるフレームであって、右フレーム部ＲＦのみに画像が存在する複数のフレームからなる右部分動画データが記憶されることとなる。
【００４５】
そして、次のステップＳ１１１における合成処理にて、左フレーム部ＬＦのみに画像が存在する複数のフレームからなる左部分動画データと、右フレーム部ＲＦのみに画像が存在する複数のフレームからなる右部分動画データとの合成を行う。
【００４６】
図７は、この合成処理の詳細を示すフローチャートである。まず、左右部分動画の先頭フレームを左右並列表示する（ステップＳ２０１）。つまり、左部分動画記憶領域１９２に記憶されている左部分動画データの先頭フレームと、右部分動画記憶領域１９３に記憶されている右部分動画データの先頭フレームとを読み出して、各画像部分のデータに基づき表示部２４を駆動し、これにより各先頭フレームの画像部分が左右に並ぶように液晶モニタ７に表示させる。このステップＳ２０１での処理により、図８（ａ）に示すように、液晶モニタ７の左領域７Ｌに、左部分動画データの先頭フレームＬ−１の画像である左部分動画が表示され、かつ、右領域７Ｒに、右部分動画データの先頭フレームＲ−１の画像である右部分動画が表示されることとなる。
【００４７】
次に、Ｌキー３１が操作されたか否かを判断し（ステップＳ２０２）、Ｌキー３１が操作された場合には、液晶モニタ７の左領域７Ｌに表示されている、左部分動画データの次フレームの画像を表示する（ステップＳ２０３）。さらにＲキー３２が操作されたか否かを判断し（ステップＳ２０４）、Ｒキー３２が操作された場合には、液晶モニタ７の右領域７Ｒに表示されている、右部分動画データの次フレームの画像を表示する（ステップＳ２０５）。しかる後に、ＯＫキー３３が操作されたか否かを判断し（ステップＳ２０６）、ＯＫキー３３が操作されるまで、ステップＳ２０２〜Ｓ２０６の処理を繰り返す。
【００４８】
この間、ユーザは、カップリングムービーにおいて、スタートフレームとして左右に合成される所望のフレームの画像が表示されるまで、Ｒキー３２のみ、Ｌキー３１のみ、あるいはＲキー３２とＬキー３１の操作を行って、液晶モニタ７の左右領域７Ｌ、７Ｒの画像をスクロール表示させる。そして、例えば図８（ｂ）に示すように、左部分動画データの１５番目のフレームＬ−１５の画像と、右部分動画データの２０番目のフレームＲ−２０とが当該ユーザがスタートフレームとして合致させたいフレームの画像であるとすると、このフレームＬ−１５の画像とフレームＲ−２０とが液晶モニタ７の左右領域７Ｌ、７Ｒに表示された時点でＯＫキー３３を操作する。
【００４９】
すると、ステップＳ２０６からステップＳ２０７に進み、この表示されているフレームＬ−１５とフレームＲ−２０とをカップリングムービーにおけるスタートフレームとして決定する（ステップＳ２０７）。そして、この決定したスタートフレームからカップリングムービーの合成を開始する。すなわち、左フレーム部ＬＦのみの複数のフレームで構成される左部分動画データを記憶する左部分動画記憶領域１９２と、及び右フレーム部ＲＦのみの複数のフレームで構成される右部分動画データを記憶する右部分動画記憶領域１９３より、各々決定したスタートフレームからの動画データを読み出し、作業領域１９１にて、対応するフレームの画像部分を切り出して左右に並列し、フレーム毎に順次合成する。
【００５０】
しかし、このとき決定したスタートフレームから左部分動画データの最終フレームまでのフレーム数と、決定したスタートフレームから右部分動画データの最終フレームまでのフレーム数とが一致するとは限らない。したがって、いずれか一方の部分動画データが最終フレームとなるまで（ステップＳ２０９）、前記合成を継続し、いずれか一方の部分動画データが最終フレームとなった時点で（ステップＳ２０９；ＹＥＳ）、前記合成を終了する（ステップＳ２１０）。これにより、ＤＲＡＭ１９の作業領域１９１には、各々決定したスタートフレームからいずれか一方の最終フレームまでの、左フレーム部ＬＦと右フレーム部ＲＦとを合成したカップリングムービーデータ（合成動画データ）が生成さることとなる。そして、最終ステップＳ２１１においては、このカップリングムービーデータにファイル名を付したカップリングムービーファイルをフラッシュメモリ２７に記憶、保存させる。
【００５１】
したがって、モード切換スイッチ６の操作により再生（ＰＬＡＹ）モードを設定して、このカップリングムービーファイルを再生した際には、液晶モニタ７の左右領域７Ｌ、７Ｒにユーザの所望したタイミングで左部分動画と右部分動画とが再生開始される全体動画が表示されることとなる。これにより、スポーツ、ダンス、芸術系等において左右画像を比較、検討する際に、左右部分動画の各プレイヤの一連動作における開始タイミングが一致し、各プレイヤの動作の比較、検討を的確に行うことが可能となる。
【００５２】
また、カップリングムービーデータを汎用的なムービーファイルの形態でフラッシュメモリ２７に記録するので、フラッシュメモリ２７をカメラ本体２に対して着脱可能なメモリカードとしたり、フラッシュメモリ２７に記録されているムービーファイルを外部に出力するＵＳＢ端子等の出力端子をカメラ本体２に設けることにより、外部機器を用いてカップリングムービーデータを再生して各プレイヤの動作の比較、検討を行うといったことも可能になる。
【００５３】
なお、本実施の形態においては、左部分動画のスタートフレームと右部分動画のスタートフレームとの双方を指定できるようにしたが、左部分動画のスタートフレームと右部分動画のスタートフレームのいずれか一方のみを指定できるようにしてもよい。この場合であっても、ユーザはいずれか一方の部分動画のタイミングに関与することができるので、左右部分動画の各プレイヤの一連動作における開始タイミングが一致させることもできる。
【００５４】
（第２の実施の形態）
図９は、本発明の第２の実施の形態における前記合成処理（ステップＳ１１１）の詳細を示すフローチャートであり、合成を開始させるスタートフレームのみならず、合成を終了するエンドフレームも指定できるようにしたものである。
【００５５】
このフローチャートにおいて、ステップＳ３０１〜Ｓ３０７の処理は、前述した図７のフローチャートにおけるステップＳ２０１〜Ｓ２０７の処理と同一である。したがって、ステップＳ３０７の処理が終了した時点で、左右部分動画のスタートフレームが各々決定されていることとなる。
【００５６】
そして、ステップＳ３０７に続くステップＳ３０８においては、さらにＬキー３１が操作されたか否かを判断し（ステップＳ３０８）、Ｌキー３１が操作された場合には、液晶モニタ７の左領域７Ｌに表示されている、左部分動画データの次フレームの画像を表示する（ステップＳ３０９）。しかし、Ｒキー３２が操作されたか否かの判断はするが（ステップＳ３１０）、Ｒキー３２が操作さてもＮＯＰとする（ステップＳ３１１）。したがって、左右部分動画のスタートフレームが各々決定された後には、Ｌキー３１の操作のみが有効であり、Ｒキー３２の操作は無視される。しかる後に、ＯＫキー３３が操作されたか否かを判断し（ステップＳ３１２）、ＯＫキー３３が操作されるまで、ステップＳ３０８〜Ｓ３１２の処理を繰り返す。
【００５７】
この間、ユーザは、カップリングムービーにおいて合成させる左部分動画の所望する最後のフレームであるエンドフレームの画像が表示されるまで、Ｌキー３１のみの操作を行って、液晶モニタ７の左領域７Ｌの画像をスクロール表示させる。そして、左部分動画の所望する最後のフレームで画像が液晶モニタ７の左領域７Ｌに表示された時点でＯＫキー３３を操作する。すると、ステップＳ３１２からステップＳ３１３に進み、この表示されている左部分動画の所望するフレームをカップリングムービーにおけるエンドフレームとして決定する（ステップＳ３１３）。
【００５８】
しかる後に、前述のステップＳ３０７で決定したスタートフレームからカップリングムービーの合成を開始する。すなわち、左フレーム部ＬＦのみの複数のフレームで構成される左部分動画データを記憶する左部分動画記憶領域１９２と、及び右フレーム部ＲＦのみの複数のフレームで構成される右部分動画データを記憶する右部分動画記憶領域１９３より、各々決定したスタートフレームからの動画データを読み出し、作業領域１９１にて、対応するフレームの画像部分を切り出して左右に並列し、フレーム毎に順次合成する。
【００５９】
そして、前記ステップＳ３１３で決定したエンドフレームとなるまで（ステップＳ３１５）、前記合成を継続し、エンドフレームまでの合成を完了した時点で（ステップＳ３１５；ＹＥＳ）、前記合成を終了する（ステップＳ３１６）。これにより、ＤＲＡＭ１９の作業領域１９１には、各々決定したスタートフレームからエンドフレームまでの、左フレーム部ＬＦと右フレーム部ＲＦとを合成したカップリングムービーデータが生成されることとなる。そして、最終ステップＳ３１７においては、このカップリングムービーデータにファイル名を付したカップリングムービーファイルをフラッシュメモリ２７に記憶、保存させる。
【００６０】
したがって、モード切換スイッチ６の操作により再生（ＰＬＡＹ）モードを設定して、このカップリングムービーファイルを再生した際には、液晶モニタ７の左右領域７Ｌ、７Ｒにユーザの所望した開始タイミングで左部分動画と右部分動画とが再生開始され、かつ終了タイミングで再生が終了する全体動画が表示されることとなる。これにより、スポーツ、ダンス、芸術系等において左右画像を比較、検討する際に、左右部分動画の各プレイヤの一連動作における開始タイミングのみならず終了タイミングにユーザの意思が反映され、各プレイヤの動作の比較、検討を的確に行うことが可能となる。
【００６１】
なお、本実施の形態においては、Ｌキー３１及びＲキー３２を操作して左右領域に所望のフレームを表示させた後、ＯＫキー３３を操作してスタートフレームを決定し、続いて、Ｌキー３１を操作して左領域に所望のフレームを表示させた後、ＯＫキー３３を操作してエンドフレームを決定するようにしたが、先ずＬキー３１を操作して左領域に所望のフレームを表示させ、ＯＫキー３３を操作して左領域のスタートフレームを決定し、引き続き、Ｌキー３１を操作して左領域に所望のフレームを表示させ、ＯＫキー３３を操作して左領域のエンドフレームを決定し、その後、Ｒキー３２を操作して右領域に所望のフレームを表示させ、ＯＫキー３３を操作して右領域のスタートフレームを決定するようにしてもよい。
また、本実施の形態においては、左部分動画のエンドフレームを指定するようにしたが、これとは逆に右部分動画のエンドフレームを指定するようにしてもよい。
【００６２】
（第３の実施の形態）
図１０は、本発明の第３の実施の形態において、ユーザーが、液晶モニタ７に表示されたメニュー画面から、「カップリングムービーモード」を選択したときの制御部２０によるカップリングムービーモード処理の内容を示すフローチャートである。
【００６３】
制御部２０は「カップリングムービーモード」が選択されたことに伴い、右半分をマスクしてスルー画像表示する（ステップＳ４０１）。すなわち、撮像レンズ１０により被写体像が結像されたＣＣＤ１１から出力された１画面分の撮像信号から左半分の画像信号のみを取り込み、あるいは、ＣＣＤ１１から左半分の画像信号のみが出力されるように制御することにより、左半分の画像信号のみに基づき、液晶モニタ７を駆動する。したがって、このステップＳ４０１での処理により、図６（ａ）に示すように、液晶モニタ７の左領域７Ｌにスルー画像の左部分画像Ｌが表示されるとともに、右領域７Ｒは黒色表示される。
【００６４】
次に、シャッターキー４が操作されるまで待ち（ステップＳ４０２）、シャッターキー４が操作されたならば、左部分画像を動画撮像処理する（ステップＳ４０３）。つまり、図２（ａ）に示した左フレーム部ＬＦのみに画像が存在するフレームを順次、左部分動画記憶領域１９２に記憶させていく。次に、２回目のシャッターキー４の操作があったか否かを判断し（ステップＳ４０４）、操作があった時点で左部分画像の動画撮像処理を終了する（ステップＳ４０５）。したがって、１回目と２回目のシャッターキー４の操作時間内において、左部分画像の動画撮像処理が継続してなされる。これにより、左部分動画記憶領域１９２には、その間の時間に応じた数からなるフレームであって、左フレーム部ＬＦのみに画像が存在する複数のフレームからなる左部分動画データが記憶されることとなる。
【００６５】
引き続き、前記左部分動画記憶領域１９２に記憶させた左部分動画データの先頭フレームを読み出して、液晶モニタ７に表示させ（ステップＳ４０６）、Ｌキー３１が操作されたか否かを判断する（ステップＳ４０７）。Ｌキー３１が操作された場合には、液晶モニタ７の左領域７Ｌに表示されている、左部分動画データの次フレームの画像を表示する（ステップＳ４０８）。しかる後に、ＯＫキー３３が操作されたか否かを判断し（ステップＳ４０９）、ＯＫキー３３が操作されるまで、ステップＳ４０７〜Ｓ４０９の処理を繰り返す。
【００６６】
この間、ユーザは、カップリングムービーにおいて合成させる左部分動画の所望する最初のフレームであるスタートフレームの画像が表示されるまで、Ｌキー３１のみの操作を行って、液晶モニタ７の左領域７Ｌの画像をスクロール表示させる。そして、左部分動画の所望する最初のフレームで画像が液晶モニタ７の左領域７Ｌに表示された時点でＯＫキー３３を操作する。すると、ステップＳ４０９からステップＳ４１０に進み、この表示されている左部分動画の所望するフレームをカップリングムービーにおけるスタートフレームとして決定する（ステップＳ４１０）。
【００６７】
次に、この決定した左部分動画のスタートフレームを液晶モニタ７の左領域７Ｌに表示させ、かつ、スルー画像を液晶モニタ７の右領域７Ｒに表示させる（ステップＳ４１１）。すなわち、液晶モニタ７の左領域７Ｌには、左部分動画のスタートフレームの画像を固定的に表示させ、右領域７Ｒには、撮像レンズ１０により被写体像が結像されたＣＣＤ１１から出力された１画面分の撮像信号から右半分の画像信号のみを取り込み、あるいは、ＣＣＤ１１から左右分の画像信号のみが出力されるように制御することにより、右半分の画像信号のみに基づき、液晶モニタ７を駆動する。したがって、このステップＳ４１１での処理により、図１１（ａ）に示すように、液晶モニタ７の左領域７Ｌにスタートフレームの固定画像ＰＬが表示されるとともに、右領域にスルー画像の右部分画像Ｒが表示されることとなる。
【００６８】
次に、３回目のシャッターキー４が操作されたか否かを判断し（ステップＳ４１２）、この間、スルー画像の右部分画像Ｒの動作が固定画像ＰＬの形態と一致するようなタイミングが到来するのを待つ。そして、図１１（ｂ）に示すように、スルー画像の右部分画像Ｒの動作が固定画像ＰＬの形態と一致するようなタイミングが到来した時点で、ユーザが３回目のシャッターキー４の操作を行うと、右部分画像の動画撮像処理を開始する（ステップＳ４１３）。つまり、前述と同様に図２（ｂ）に示した右フレーム部ＲＦのみに画像が存在するフレームを順次、右部分動画記憶領域１９３に記憶させていく。そして、引き続きステップＳ４１４における左右合成処理にて、左フレーム部ＬＦのみに画像が存在する複数のフレームからなる左部分動画データと、右フレーム部ＲＦのみに画像が存在する複数のフレームからなる右部分動画データとの合成を行う。
【００６９】
そして、前記左部分動画記憶領域１９２に記憶されている左部分動画データが最終フレームとなるまで、又は４回目のシャッターキー４の操作があるまで、右部分動画の撮像と合成とを継続し、いずれか一方の状態となった時点で（ステップＳ４１５；ＹＥＳ）、前記右部分動画の撮像と合成とを終了する（ステップＳ４１６）。これにより、ＤＲＡＭ１９の作業領域１９１には、決定した左部分動画のスタートフレームから最終フレームまで、又は決定した左部分動画のスタートフレームから４回目のシャッターキー４の操作があった時点までの左フレーム部ＬＦと右フレーム部ＲＦとを合成したカップリングムービーデータ（合成動画データ）が生成されることとなる。そして、最終ステップＳ４１７においては、このカップリングムービーデータにファイル名を付したカップリングムービーファイルをフラッシュメモリ２７に記憶、保存させる。
【００７０】
したがって、本実施の形態においては、右部分動画の撮像の終了と同時に合成も終了することとなり、カップリングムービーファイルの作成を迅速に完了することができる。しかも、ユーザは、既に決定した右部分画像Ｒのスタートフレームと、実際に動作しているスルー画像の右部分画像Ｒとを見ながら、スルー画像から右部分画像Ｒのスタートフレームを決定できることとなり、左右部分動画の開始タイミングの整合性をより高めることができる。
【００７１】
なお、本実施の形態においては、左部分動画に関してはスタートフレームの静止画状態にしたまま、３回目のシャッターキー４の操作に応じて右部分画像の動画撮像処理を行うようにしたが、３回目のシャッターキー４の操作に応じて、左部分動画を再生表示しつつ、右部分画像の動画撮像処理を行うようにしてもよい。また、本実施の形態では、左部分動画を先に撮像してスタートフレームを決定するようにしたが、これとは逆にしたり、あるいはいずれを先に撮像してスタートフレームを決定するかを選択できるようにしてもよい。
【００７２】
さらに、各実施の形態においては、フレームを左右に２等分して合成を行う場合を示したが、左右に限らず上下あるいは他の分割形態であってもよく、また、分割数も２分割に限らずより多数に分割して合成を行う場合であっても、本発明を適用することができる。さらに、各実施の形態においては、本発明をデジタルカメラに適用した場合をしめしたが、これに限定されず、カメラ付き携帯電話、カメラ付きパソコン、ビデオカメラ等に適用することもできる。
【図面の簡単な説明】
【００７３】
【図１】本発明の各実施の形態に共通するデジタルカメラの背面斜視図である。
【図２】カップリングムービーモードの説明図である。
【図３】デジタルカメラの電気的構成の概略を示すブロック図である。
【図４】カップリングムービーモード時におけるＤＲＡＭのメモリ領域を示す模式図である。
【図５】第１の実施の形態におけるカップリングムービーモード処理の内容を示すフローチャートである。
【図６】第１の実施の形態における撮像時の表示遷移図である。
【図７】第１の実施の形態における合成処理の詳細を示すフローチャートである。
【図８】第１の実施の形態における合成時の表示遷移図である。
【図９】第２の実施の形態における合成処理の詳細を示すフローチャートである。
【図１０】第３の実施の形態におけるカップリングムービーモード処理の内容を示すフローチャートである。
【図１１】第３の実施の形態における撮像時の表示遷移図である。
【符号の説明】
【００７４】
１        デジタルカメラ
２        カメラ本体
４        シャッターキー
７        液晶モニタ
７Ｌ      左領域
７Ｒ      右領域
９        操作キー
１０      撮像レンズ
１１      ＣＣＤ
１７      ＤＭＡコントローラ
１９      ＤＲＡＭ
２０      制御部
２２      ＶＲＡＭ
２３      デジタルビデオエンコーダ
２４      表示部
２５      キー入力部
２７      フラッシュメモリ
３１      Ｌキー
３２      Ｒキー
３３      ＯＫキー
１９１    作業領域
１９２    左部分動画記憶領域
１９３    右部分動画記憶領域
Ｆ        フレーム
ＬＦ      左フレーム部
ＲＦ      右フレーム部
Ｌ        左部分画像
Ｒ        右部分画像
ＰＬ      固定画像
【図１】
2005244799.tif 000003
【図２】
2005244799.tif 000004
【図３】
2005244799.tif 000005
【図４】
2005244799.tif 000006
【図５】
2005244799.tif 000007
【図６】
2005244799.tif 000008
【図７】
2005244799.tif 000009
【図８】
2005244799.tif 000010
【図９】
2005244799.tif 000011
【図１０】
2005244799.tif 000012
【図１１】
2005244799.tif 000013