(57)【要約】  デジタルカメラ（１）は、画像記録部（１２）とマイクロコンピュータ（３）と画像表示制御部（１３）とを有している。画像記録部（１２）は、複数の静止画像から形成される動画像を、デジタルカメラ（１）のパンニング動作に関するパンニングモード信号（６０）にとともに記録している。マイクロコンピュータ（３）は、画像記録部（１２）に記録された動画像から複数の抽出画像を生成し、画像記録部（１２）に記録されているパンニングモード信号（６０）に基づいて複数の抽出画像の配置を決定する。画像表示制御部（１）３は、マイクロコンピュータ（３）での決定結果に基づいて複数の抽出画像のうち少なくとも２枚の抽出画像を表示部（５５）に並べて表示させる。
2009122720.tif 000002
【特許請求の範囲】
【請求項１】
筐体に収容された画像取得部により取得された画像を表示部に表示させる表示制御装置であって、
前記画像取得部により連続的に取得された複数の静止画像により形成される動画像を記録可能な記録部と、
前記動画像における被写体の動きに関する第１動き情報を、前記記録部に記録された前記動画像に基づいて生成する動き情報生成部と、
前記動画像を形成する前記複数の静止画像から複数の抽出画像を生成する抽出画像生成部と、
前記第１動き情報に基づいて前記複数の抽出画像の配置を決定する配置決定部と、
前記配置決定部での決定結果に基づいて、前記複数の抽出画像のうち少なくとも２つの前記抽出画像を前記表示部に並べて表示させる画像表示制御部と、
を備えた表示制御装置。
【請求項２】
前記動き情報生成部は、前記動画像から抽出された前記複数の抽出画像に基づいて前記第１動き情報を生成する、
請求項１に記載の表示制御装置。
【請求項３】
前記配置決定部は、隣り合う２つの前記抽出画像により形成される時間ベクトルの向きが、前記第１動き情報に含まれる動きの方向の一成分と概ね一致するように、前記複数の抽出画像の配置を決定する、
請求項１または２に記載の表示制御装置。
【請求項４】
前記記録部は、前記動画像の取得時の前記筐体の動き方向に関する第２動き情報を前記動画像とともに記録可能であり、
前記動き情報生成部は、前記第２動き情報を利用して前記第１動き情報を生成する、
請求項１から３のいずれかに記載の表示制御装置。
【請求項５】
前記抽出画像と前記第１動き情報とを関連付けて前記記録部に記録するように制御する画像記録制御部をさらに備えた、
請求項１から４のいずれかに記載の表示制御装置。
【請求項６】
筐体と、
前記筐体に支持され被写体の光学的な像を形成する光学系と、
前記光学系により形成された光学的な像を電気的な画像信号に変換し、前記被写体の画像を取得する前記画像取得部と、
前記画像取得部により取得された複数の画像を並べて表示可能な表示部と、
前記筐体の動き方向を検出する動き検出部と、
請求項１から５のいずれかに記載の表示制御装置と、
を備えた撮像装置。
【請求項７】
前記筐体の姿勢に関する姿勢情報を取得する姿勢検出部をさらに備え、
前記記録部には、前記画像とともに前記姿勢情報が記録されており、
前記画像表示制御部は、前記表示部に前記画像が表示された状態で前記画像における天地方向が鉛直方向と概ね一致するように、前記表示部に対する前記画像の表示状態を調整する、
請求項６に記載の撮像装置。
【請求項８】
前記筐体の動きに起因する画像の劣化を抑制する手ブレ補正装置をさらに備え、
前記手ブレ補正装置は、前記光学系に含まれる補正レンズと、前記補正レンズを前記補正レンズの光軸に直交する第１方向と前記光軸および第１方向に直交する第２方向とに移動可能に保持する駆動枠と、前記補正レンズを前記第１方向に駆動する第１アクチュエータと、前記補正レンズを前記第２方向に駆動する第２アクチュエータと、を有しており、
前記姿勢検出部は、前記第１アクチュエータおよび第２アクチュエータの駆動力に基づいて前記筐体の姿勢を検出する、
請求項７に記載の撮像装置。
【請求項９】
前記動画像から選択された前記複数の抽出画像を互いに関連付けして前記記録部に記録させる記録制御部をさらに備えた、
請求項６から８のいずれかに記載の撮像装置。
【請求項１０】
請求項１から５のいずれかに記載の表示制御装置と、
前記表示部に表示された画像を印刷する印刷部と、
を備えた印刷装置。
【発明の詳細な説明】
【技術分野】
【０００１】
技術分野は、複数の画像を並べて表示できる表示制御装置に関する。
【背景技術】
【０００２】
近年、ＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）やＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ−Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）などのイメージセンサおよび信号処理の集積度が向上し、かつ安価に提供できるようになっている。このため、被写体の光学的な像を電気的な画像信号に変換して出力可能な撮像装置が急速に普及している。撮像装置としては、例えばデジタルスチルカメラやデジタルビデオカメラ（以下、単にデジタルカメラという）が考えられる。特に、静止画撮影および動画撮影の両方の機能を備えた撮像装置が主流となりつつある。
このデジタルカメラの主要機能の一つとして、撮影した動画像から複数の静止画像を作成する機能がある。複数の静止画像を作成する方法としては、動画撮影中に静止画撮影を行う際に動画撮影を一時中断して静止画撮影を行う方法と、動画撮影後に撮影された動画像の中から任意の画像フレームを選択して選択された画像フレームから静止画像を生成する方法とがある。【０００３】
従来のデジタルカメラにおいては、撮影した動画像の中から、静止画像を自動的に生成する方法が提案されている（例えば、特許文献１を参照）。
また、多くのデジタルカメラは、小型表示装置を搭載しており、画像を１枚ずつ表示する機能、あるいは複数の画像を一覧表示（以下、サムネイル表示）する機能を有している。より利便性の高い表示方法として、例えば撮影時におけるデジタルカメラの姿勢に応じて画像の表示を行う方法が提案されている（例えば、特許文献２を参照）。
また、複数の画像をつなぎ合わせて１枚のパノラマ画像を作成する装置において、その撮影の進行状態を確認できるようなデジタルカメラも提案されている（例えば、特許文献３を参照）。
【特許文献１】特開２００５−２２９２３６号公報
【特許文献２】特開２００１−４５３５４号公報
【特許文献３】特開平６−３０３５６２号公報
【発明の開示】
【０００４】
車や飛行機などの動いている被写体を撮影する場合、ユーザーは水平方向、垂直方向あるいは斜め方向にデジタルカメラを動かしながら撮影を行う。このようにデジタルカメラの向きを振ることをパンニングという。パンニングにより撮影された動画像から生成された静止画像（以下、パンニング画像）をサムネイル表示する場合、従来は撮影された日時順に並べて表示される。
しかし、動画像から生成した静止画像を表示する際、従来のようなサムネイル表示では、パンニング画像が並んでいる方向がデジタルカメラの動く方向あるいは撮影時の被写体の動く方向と必ずしも一致しないため、これらの静止画像に対してユーザーが違和感を覚える場合がある。
これは、撮像装置に限らず、印刷装置により画像が印刷された場合も同様である。
【０００５】
本発明の課題は、並べて表示された複数の画像に対する違和感を緩和することができる表示制御装置、撮像装置および印刷装置を提供することにある。
第１の特徴に係る表示制御装置は、画像取得部により取得された画像を表示部に表示させる表示制御装置であって、記録部と、動き情報生成部と、抽出画像生成部と、配置決定部と、画像表示制御部と、を備えている。記録部は、画像取得部により連続的に取得された複数の静止画像により形成される動画像を記録可能である。動き情報生成部は、動画像における被写体の動きに関する第１動き情報を、記録部に記録された動画像に基づいて生成する。抽出画像生成部は、動画像を形成する複数の静止画像から複数の抽出画像を生成する。配置決定部は、第１動き情報に基づいて複数の抽出画像の配置を決定する。画像表示制御部は、配置決定部での決定結果に基づいて、複数の抽出画像のうち少なくとも２つの抽出画像を表示部に並べて表示させる。
【０００６】
この表示制御装置では、抽出画像生成部にて動画像から複数の抽出画像が生成され、動画像から生成された第１動き情報に基づいて複数の抽出画像の配置が配置決定部により決定される。このため、動画像における被写体の動きに合わせて、抽出画像の配置を調整することができる。これにより、被写体の動きの方向を抽出画像が配置される方向と概ね一致させることができ、並べて表示された複数の画像に対する違和感を緩和することができる。
ここで、表示制御装置が搭載される装置としては、デジタルビデオカメラ、デジタルスチルカメラ、デジタル一眼レフカメラ、カメラ機能付き携帯電話端末、カメラ機能付きＰＤＡ（Personal Digital Assistant）、カメラ機能付きＰＣ（Personal Computer）、ＤＶＤ（Digital Video Disc）レコーダおよびハードディスクレコーダが考えられる。画像取得部は、例えば、光電変換により画像信号を生成するセンサ（ＣＣＤ、ＣＭＯＳ）を含んでいる。
【０００７】
第２の特徴に係る表示制御装置は、第１の特徴に係る装置において、動き情報生成部は、動画像から抽出された複数の抽出画像に基づいて第１動き情報を生成する。
第３の特徴に係る表示制御装置は、第１または第２の特徴に係る装置において、隣り合う２つの抽出画像により形成される時間ベクトルの向きが、第１動き情報に含まれる動きの方向の一成分と概ね一致するように、配置決定部が複数の抽出画像の配置を決定する。
ここで、「時間ベクトル」とは、異なるタイミングで取得された２つの静止画像を並べた場合に先に取得された静止画像の中心から後に取得された静止画像の中心に向かって延びるベクトルを意味している。「時間ベクトルの向きが動きの方向の一成分と概ね一致する」とは、時間ベクトルの向きが動き方向の一成分と完全に一致している場合の他に、表示された静止画像に対する違和感を緩和できるという効果を確保できる範囲内で、時間ベクトルの向きが動き方向の一成分に対してずれている場合も含まれる。
【０００８】
第４の特徴に係る表示制御装置は、第１から第３のいずれかの特徴に係る表示制御装置において、記録部は、動画像の取得時の筐体の動き方向に関する第２動き情報を動画像とともに記録部に記録可能であり、動き情報生成部は、第２動き情報を利用して第１動き情報を生成する。
第４の特徴に係る撮像装置は、筐体と、光学系と、画像取得部と、表示部と、動き検出部と、第１から第３のいずれかの特徴に係る表示制御装置と、を備えている。光学系は、筐体に支持されており、被写体の光学的な像を形成する。画像取得部は、光学系により形成された光学的な像を電気的な画像信号に変換し、被写体の画像を取得する。表示部は、画像取得部により取得された複数の画像を並べて表示可能である。
ここで、撮像装置は、例えば、動画像の撮影が可能な装置や動画像および静止画像の撮影が可能な装置である。撮像装置の例としては、デジタルビデオカメラ、デジタルスチルカメラおよびデジタル一眼レフカメラが挙げられる。また、撮像装置の他の例としては、カメラ機能付き携帯電話端末、カメラ機能付きＰＤＡ（Personal Digital Assistant）およびカメラ機能付きＰＣ（Personal Computer）が挙げられる。
【０００９】
第５の特徴に係る撮像装置は、第４の特徴に係る装置において、筐体の姿勢に関する姿勢情報を取得する姿勢検出部をさらに備えている。記録部には、画像とともに姿勢情報が記録されている。画像表示制御部は、表示部に画像が表示された状態で画像における天地方向が鉛直方向と概ね一致するように、表示部に対する画像の表示状態を調整する。
第６の特徴に係る撮像装置は、第５の特徴に係る装置において、筐体の動きに起因する画像の劣化を抑制する手ブレ補正装置をさらに備えている。手ブレ補正装置は、光学系に含まれる補正レンズと、補正レンズを補正レンズの光軸に直交する第１方向と光軸および第１方向に直交する第２方向とに移動可能に保持する駆動枠と、補正レンズを第１方向に駆動する第１アクチュエータと、補正レンズを第２方向に駆動する第２アクチュエータと、を有している。姿勢検出部は、第１アクチュエータおよび第２アクチュエータの駆動力に基づいて筐体の姿勢を検出する。
【００１０】
第７の特徴に係る撮像装置は、第４から第６のいずれかの特徴に係る装置において、動画像から選択された複数の抽出画像を互いに関連付けして記録部に記録させる記録制御部をさらに備えている。
第８の特徴に係る印刷装置は、第１から第３のいずれかの特徴に係る表示制御装置と、表示部に表示された画像を印刷する印刷部と、を備えている。
ここで、印刷装置は、例えば用紙に画像を印刷できる装置である。
【図面の簡単な説明】
【００１１】
【図１】デジタルカメラの制御システムを示すブロック図
【図２】（Ａ）は、デジタルカメラの上面図、（Ｂ）はデジタルカメラの背面図
【図３】手ブレ補正装置のハード構成図
【図４】手ブレ補正装置の分解斜視図
【図５】パンニングモード信号を示す図
【図６】（Ａ）および（Ｂ）手ブレ補正装置の姿勢を示す図
【図７】撮影姿勢別のコイル供給電流量を示す図
【図８】姿勢判別信号を示す図
【図９】動画像ファイルと生成画像ファイルの対応を示す図
【図１０】図９をさらに詳細に説明した図
【図１１】撮影した画像ファイルの管理方法を説明する図
【図１２】連写した画像ファイルの管理方法を説明する図
【図１３】時間ベクトルとパンニング方向との関係を示す図
【図１４】パンニング撮影状態を説明する図
【図１５】撮影方法を説明するフローチャート
【図１６】再生方法を説明するフローチャート
【図１７】再生方法を説明するフローチャート
【図１８】再生方法を説明するフローチャート
【図１９】再生方法を説明するフローチャート
【図２０】再生方法を説明するフローチャート
【図２１】連写画像フォルダごとのサムネイル表示の一例
【図２２】連写された画像のサムネイル表示の一例
【図２３】基準画像の表示例
【図２４】基準画像および比較画像の表示例（抽出画像フォルダ（＃１））
【図２５】基準画像および比較画像の表示例（抽出画像フォルダ（＃１））
【図２６】基準画像および比較画像の表示例（抽出画像フォルダ（＃２））
【図２７】基準画像および比較画像の表示例（抽出画像フォルダ（＃３））
【図２８】パンニング撮影状態を説明する図（第２実施形態）
【図２９】動きベクトル検出部のハードウェア構成図（第２実施形態）
【図３０】デジタルカメラおよび表示装置を示す図（第４実施形態）
【図３１】デジタルカメラおよび印刷装置を示す図（第５実施形態）
【図３２】表示制御装置、印刷制御装置、および表示印刷制御装置を示す図（第６実施形態）
【図３３】基準画像および比較画像の表示例（他の実施形態）
【符号の説明】
【００１２】
１  デジタルカメラ（撮像装置）
１ａ  筐体
２  レンズ鏡筒
３  マイクロコンピュータ（配置決定部、動き情報生成部）
３Ａ  信号処理部
４  イメージセンサ（画像取得部）
５  ＣＣＤ駆動制御部
６  アナログ信号処理部
７  Ａ／Ｄ変換部
８  デジタル信号処理部
９  バッファメモリ
１０  画像圧縮部
１１  画像記録制御部
１２  画像記録部
１３  画像表示制御部
１４Ａ  撮影姿勢検出部
１４ｘ  ヨーイング電流値検出部
１４ｙ  ピッチング電流値検出部
１５Ａ  動き補正部
１５ｘ  ヨーイング駆動制御部
１５ｙ  ピッチング駆動制御部
１６  位置検出部
１７Ａ  動き検出部（動き検出部）
１７ｘ、１７ｙ  角速度センサ
１８ｘ、１８ｙ  Ａ／Ｄ変換部
１９ｘ、１９ｙ  Ｄ／Ａ変換部
２０  手ブレ補正装置
２１  ピッチング保持枠
２２  ヨーイング保持枠
２３  ピッチングシャフト
２４  コイル
２５  固定枠
２６  ヨーイングシャフト
２７  マグネット
２８  ヨーク
２９  アクチュエータ
３０  発光素子
３１  受光素子
３５  電源スイッチ
３６  シャッターボタン
３７  モード切換ダイアル
３８  十字操作キー
３９  ＭＥＮＵ設定ボタン
４０  ＳＥＴボタン
４１  シャッター制御部
４２  シャッター駆動モータ
４５  動画撮影操作ボタン
５０  内部メモリ
５１  リムーバブルメモリ
５５  表示部
５７  ズーム操作レバー
６０  パンニングモード信号（第２動き情報）
６１  姿勢判別信号（姿勢情報）
６２  動きベクトル信号（第１動き情報）
７０  表示装置
７１  印刷装置
７５  ケーブル
７６  ケーブル
８１  リムーバブルメモリ挿入部
８２  表示制御装置
８３  印刷制御装置
８４  表示印刷制御装置
１００  動き検出部（動き情報生成部）
Ｌ  光学系
Ｌ１  第１レンズ群
Ｌ２  第２レンズ群
Ｌ３  第３レンズ群
【発明を実施するための最良の形態】
【００１３】
（第１実施形態）
＜デジタルカメラの全体構成＞
図１および図２を用いて第１実施形態に係るデジタルカメラ１について説明する。図１はデジタルカメラ１の概略構成を示すブロック図である。図２（Ａ）図２（Ａ）はデジタルカメラ１の上面図である。図２（Ｂ）はデジタルカメラ１の背面図である。図２に示すように、デジタルカメラ１の光軸ＡＸに沿った方向をＺ軸方向、デジタルカメラ１の左右方向をＸ軸方向、デジタルカメラ１の上下方向をＹ軸方向とする。なお、これらの方向はデジタルカメラ１の使用状態を限定するものではない。
図１に示すように、デジタルカメラ１（撮像装置の一例）は、光学系Ｌと、マイクロコンピュータ３と、イメージセンサ４（画像取得部の一例）と、ＣＣＤ駆動制御部５と、シャッター制御部４１と、シャッター駆動モータ４２と、を有している。【００１４】
光学系Ｌは、被写体の光学的な像を形成するための光学系であり、３つのレンズ群Ｌ１、Ｌ２、Ｌ３を含んでいる。光学系Ｌはレンズ鏡筒２により支持されている。第１レンズ群Ｌ１は、フォーカシングを行うためのレンズ群であり、光軸に沿った方向に移動可能に設けられている。第３レンズ群Ｌ３は、ズーミングを行うためのレンズ群であり、光軸ＡＸに沿った方向に移動可能に設けられている。第２レンズ群Ｌ２は、デジタルカメラ１の動きに起因する画像の振れを補正するためのレンズ群であり、光軸ＡＸに垂直な面内を移動可能なように設けられている。第２レンズ群Ｌ２により光軸を偏心させることで画像の振れを補正することができる。第２レンズ群Ｌ２は、後述する手ブレ補正装置２０に含まれている。
マイクロコンピュータ３は、デジタルカメラ１全体を制御するユニットであり、各ユニットに接続されている。【００１５】
シャッター制御部４１は、シャッターを動作させるために、マイクロコンピュータ３からの制御信号に基づいてシャッター駆動モータ４２を駆動する。シャッターボタン３６を操作することにより得られるタイミング信号に基づいて、この制御信号はマイクロコンピュータ３により生成される。
イメージセンサ４は、例えばＣＣＤであり、光学系Ｌにより形成される光学的な像を電気的な画像信号に変換する。イメージセンサ４の駆動は、ＣＣＤ駆動制御部５により制御される。なお、イメージセンサ４は、ＣＭＯＳセンサでもよい。
図１に示すように、外部から操作情報を入力するために、デジタルカメラ１には操作部３４が設けられている。具体的には、操作部３４は、電源スイッチ３５と、シャッターボタン３６と、モード切換ダイアル３７と、十字操作キー３８と、ＭＥＮＵ設定ボタン３９と、ＳＥＴボタン４０と、を有している。マイクロコンピュータ３は、操作部３４と接続されており、操作部３４からの信号を受信可能である。【００１６】
図２（Ａ）および図２（Ｂ）に示すように、筐体１ａの前面には、光学系Ｌおよびレンズ鏡筒２が配置されており、背面には電源スイッチ３５と、モード切換ダイアル３７と、十字操作キー３８と、ＭＥＮＵ設定ボタン３９と、ＳＥＴボタン４０と、動画撮影操作ボタン４５と、表示部５５と、が配置されている。筐体１ａの上面には、シャッターボタン３６と、ズーム操作レバー５７と、が配置されている。
ズーム操作レバー５７は、シャッターボタン３６と同軸に回転可能となるように、シャッターボタン３６の周囲に設けられている。電源スイッチ３５は、デジタルカメラ１の電源のＯＮ／ＯＦＦを行うためのスイッチである。モード切換ダイアル３７は、静止画撮影モード、動画撮影モードおよび再生モードを切り換えるためのダイアルであり、ユーザーはモード切換ダイアル３７を回転させてモードを切換えることができる。モード切換ダイアル３７により静止画撮影モードが選択されると、撮影モードを静止画撮影モードへ切り換えることができ、モード切換ダイアル３７により動画撮影モードが選択されると、撮影モードを動画撮影モードへ切り換えることができる。動画撮影モードでは、基本的に動画撮影が可能となる。さらに、モード切換ダイアル３７により再生モードが選択されると、モードを再生モードへ切り換えることができ、表示部５５に撮影画像を表示させることができる。また、静止画撮影モード、あるいは動画撮影モードに切換えられた状態で、ズーム操作レバー５７を右方向へ回転させるとレンズ鏡筒２はズームモータ（図示せず）により望遠側へ駆動され、左方向へ回転させるとレンズ鏡筒２はズームモータにより広角側へ駆動される。ズームモータの動作はマイクロコンピュータ３により制御される。
動画撮影操作ボタン４５は、動画撮影の開始および停止を指示するボタンであり、モード切換ダイアル３７において設定された撮影モードが静止画撮影モードまたは再生モードであっても、この動画撮影操作ボタン４５を押すことにより、モード切換ダイアル３７での設定内容に関係なく、強制的に動画撮影モードが開始される。さらに、動画撮影モードにおいて、この動画撮影操作ボタン４５を押すことにより、動画撮影が終了し、静止画撮影モード、あるいは再生モードへと移行する。【００１７】
ＭＥＮＵ設定ボタン３９は、表示部５５に各種メニューを表示させるためのボタンである。十字操作キー３８は、撮影者等が上下左右の部位を押圧して、ＭＥＮＵ設定ボタン３９の操作により表示部５５に表示された各種メニューから所望のメニューまたは項目を選択するためのボタンである。ＳＥＴボタン４０は、各種メニューの実行を確定するためのボタンである。なお、このＳＥＴボタン４０は別機能として、動画撮影中に押すことにより、静止画像も同時に撮影するシャッターボタンの役割も果たす。
図１に示すように、デジタルカメラ１は、アナログ信号処理部６と、Ａ／Ｄ変換部７と、デジタル信号処理部８と、バッファメモリ９と、画像圧縮部１０と、画像記録制御部１１と、画像記録部１２と、画像表示制御部１３と、表示部としての表示部５５と、をさらに有している。【００１８】
イメージセンサ４から出力された画像信号は、アナログ信号処理部６、Ａ／Ｄ変換部７、デジタル信号処理部８、バッファメモリ９および画像圧縮部１０により順次処理される。アナログ信号処理部６は、イメージセンサ４から出力される画像信号にガンマ処理等のアナログ信号処理を施す。Ａ／Ｄ変換部７は、アナログ信号処理部６から出力されたアナログ信号をデジタル信号に変換する。デジタル信号処理部８は、Ａ／Ｄ変換部７によりデジタル信号に変換された画像信号に対してノイズ除去や輪郭強調等のデジタル信号処理を施す。バッファメモリ９は、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）であり、デジタル信号処理部８により処理された画像信号を一時的に記憶する。
さらに、バッファメモリ９に記憶された画像信号は、画像圧縮部１０および画像記録部１２により順次処理される。バッファメモリ９に記憶された画像信号は、画像記録制御部１１の指令により、画像圧縮部１０に送信され、画像信号のデータは圧縮される。この際、画像信号は、この圧縮処理により、元のデータよりも小さなデータサイズになる。例えば、この圧縮方式として、静止画の場合には、例えばＪＰＥＧ（Ｊｏｉｎｔ  Ｐｈｏｔｏｇｒａｐｈｉｃ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）方式が用いられる。また、動画の場合には、例えば、ＭＰＥＧ（ＭｏｖｉｎｇＰｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）方式が用いられる。また同時に、画像圧縮部１０はサムネイル表示等に用いられる画像に対応する縮小画像信号についても生成する。その後、圧縮された画像信号および縮小画像信号は、画像記録部１２へ送信される。なお本実施形態においては、静止画についてはＪＰＥＧ方式、動画についてはＭＰＥＧ方式を用いて説明するが、その方式については限定されるものではない。【００１９】
画像記録部１２は、デジタルカメラ１本体に設けられた図示しない内部メモリ５０や着脱可能なリムーバブルメモリ５１などにより構成されており、画像記録制御部１１の指令に基づいて、画像信号（動画像と静止画像）と、対応する縮小画像信号と、所定の情報と、を関連付けて記録する。これらの画像信号とともに記録される所定の情報としては、例えば、画像を撮影した際の日時、焦点距離情報、シャッタースピード情報、絞り値情報、撮影モード情報などが挙げられる。また、このデジタルカメラ１では、所定の情報としては、後述するデジタルカメラ１の姿勢情報、パンニングモード情報および被写体の動き情報が含まれている。
画像表示制御部１３は、マイクロコンピュータ３からの制御信号により制御される。この画像表示制御部１３の指令により、表示部５５は、画像記録部１２あるいはバッファメモリ９に記録された画像信号を可視画像として表示する。表示部５５の表示形態としては、画像信号のみを表示する形態と、画像信号とともに前述の所定の情報を表示する形態と、がある。所定の情報の表示は、例えばＭＥＮＵ設定ボタン３９の操作により切り替えられる。【００２０】
＜手ブレ補正装置の構成＞
次に、図３および図４を用いて手ブレ補正装置２０の構成について説明する。図３は手ブレ補正装置２０の分解斜視図である。
機械的な振動やユーザーの手の揺れ等がデジタルカメラ１に加わると、被写体からレンズに入射する光の光軸がレンズの光軸とずれ、得られる画像が不鮮明となる。このような画像の振れを防ぐために、デジタルカメラ１には手ブレ補正装置２０が搭載されている。具体的には図３および図４に示すように、手ブレ補正装置２０は、ピッチング保持枠２１と、ヨーイング保持枠２２と、固定枠２５と、ヨーイングアクチュエータ２９ｘと、ピッチングアクチュエータ２９ｙと、発光素子３０と、受光素子３１と、を有している。
ピッチング保持枠２１には、コイル２４ｘ、２４ｙが設けられている。第２レンズ群Ｌ２および発光素子３０は、ピッチング保持枠２１に固定されている。ピッチング保持枠２１は、２本のピッチングシャフト２３ａ、２３ｂを介して、ヨーイング保持枠２２によりＹ方向に相対移動可能に保持されている。【００２１】
ヨーイング保持枠２２は、ヨーイングシャフト２６ａ、２６ｂを介して、固定枠２５によりＸ方向に相対移動可能に保持されている。ヨーイングアクチュエータ２９ｘは、マグネット２７ｘとヨーク２８ｘとを有しており、固定枠２５に保持されている。ピッチングアクチュエータ２９ｙは、マグネット２７ｙとヨーク２８ｙとを有しており、固定枠２５に保持されている。受光素子３１は、固定枠２５に固定されており、発光素子３０からの投射光を受光する。発光素子３０および受光素子３１により、第２レンズ群Ｌ２の２次元の位置座標を検出することが可能となる。
図４に示すように、手ブレ補正装置２０は、動き補正部１５Ａと、姿勢検出部１４Ａと、第１動き検出部としての動き検出部１７Ａと、マイクロコンピュータ３を含む信号処理部３Ａと、をさらに有している。動き補正部１５Ａは、第２レンズ群Ｌ２と、ヨーイング駆動制御部１５ｘと、ピッチング駆動制御部１５ｙと、位置検出部１６と、を含んでいる。第２レンズ群Ｌ２の光軸ＡＸに直交する２方向（Ｘ軸方向およびＹ軸方向）への駆動は、ヨーイング駆動制御部１５ｘおよびピッチング駆動制御部１５ｙにより制御される。以下、Ｘ軸方向をヨーイング方向、Ｙ軸方向をピッチング方向とする。位置検出部１６は、受光素子３１の出力に基づいて第２レンズ群Ｌ２のＸ−Ｙ平面内における位置を検出するためのユニットであり、ヨーイング駆動制御部１５ｘおよびピッチング駆動制御部１５ｙとともに、第２レンズ群Ｌ２の動作を制御するための帰還制御ループを形成している。【００２２】
姿勢検出部１４Ａは、ヨーイング電流値検出部１４ｘと、ピッチング電流値検出部１４ｙと、を含んでいる。ヨーイング電流値検出部１４ｘは、後述するヨーイングアクチュエータ２９ｘが動作する際にコイル２４ｘに流れる電流値を検出する。ピッチング電流値検出部１４ｙは、ピッチングアクチュエータ２９ｙが動作する際にコイル２４ｙに流れる電流値を検出する。これらの電流値を検出することで、デジタルカメラ１の姿勢を検出することができる。
動き検出部１７Ａは、ヨーイング角速度センサ１７ｘと、ピッチング角速度センサ１７ｙと、を含んでいる。角速度センサ１７ｘおよび１７ｙは、ユーザーの手ブレおよびその他の振動などによる光学系Ｌを含むデジタルカメラ１自体の動きを検出するためのセンサであり、それぞれヨーイング方向およびピッチング方向の動きを検出する。より詳細には、ヨーイング角速度センサ１７ｘは、主にＹ軸回りのデジタルカメラ１の角速度を検出するためのセンサである。ピッチング角速度センサ１７ｙは、主にＸ軸回りのデジタルカメラ１の角速度を検出するためのセンサである。角速度センサ１７ｘ、１７ｙは、デジタルカメラ１が静止している状態での出力を基準とし、デジタルカメラ１の動く方向により正負両方の角速度信号を出力する。出力された信号は、信号処理部３Ａにて処理される。【００２３】
信号処理部３Ａは、マイクロコンピュータ３と、Ａ／Ｄ変換部１８ｘ、１８ｙと、Ｄ／Ａ変換部１９ｘ、１９ｙと、を含んでいる。角速度センサ１７ｘ、１７ｙから出力された信号は、フィルタ処理、アンプ処理等が施された後、Ａ／Ｄ変換部１８ｘ、１８ｙでデジタル信号に変換され、マイクロコンピュータ３に出力される。マイクロコンピュータ３は、Ａ／Ｄ変換部１８ｘ、１８ｙを介して取り込んだ角速度センサ１７ｘ、１７ｙの出力信号に対して、フィルタリング、積分処理、位相補償、ゲイン調整、クリップ処理等を施す。これらの各処理を施すことにより、マイクロコンピュータ３は、動き補正に必要な第２レンズ群Ｌ２の駆動制御量を演算し、制御信号を生成する。生成された制御信号は、Ｄ／Ａ変換部１９ｘ、１９ｙを介して、ヨーイング駆動制御部１５ｘおよびピッチング駆動制御部１５ｙに出力される。これにより、ヨーイング駆動制御部１５ｘおよびピッチング駆動制御部１５ｙは、制御信号に基づき、第２レンズ群Ｌ２を駆動し、画像の振れが補正される。【００２４】
＜パンニングモード信号＞
このデジタルカメラ１では、角速度センサ１７ｘ、１７ｙを利用して、パンニングの方向などに関するパンニングモード信号６０（第１動き情報）が取得可能である。具体的には、パンニング時には角速度センサ１７ｘ、１７ｙから出力される角速度の符号が同一であり、かつ、出力される角速度が一定レベル以上である状態が連続する。これを利用して、角速度センサ１７ｘ、１７ｙからの角速度信号が一定時間連続してある閾値以上であるか否かをマイクロコンピュータ３により判定する。この判定結果に基づいて、図５に示すようなパンニングモード信号６０がマイクロコンピュータ３により生成される。
例えば、撮影時において、ユーザーが被写体側を向いて右側にパンニングした場合、ピッチング角速度センサ１７ｙの出力信号から垂直（Ｙ軸）方向のパンニングは「無し」とマイクロコンピュータ３により判断される。一方、ヨーイング角速度センサ１７ｘの出力信号からは、水平（Ｘ軸）方向のパンニングは「右方向」とマイクロコンピュータ３により判断される。このため、パンニングモード信号６０は「２」となる。【００２５】
また、ユーザーが被写体側を向いて左上にパンニングした場合、ピッチング角速度センサ１７ｙの出力信号から垂直方向のパンニングは「上方向」とマイクロコンピュータ３により判断され、ヨーイング角速度センサ１７ｘの出力信号からは、水平方向のパンニングは「左方向」と判断される。このため、パンニングモード信号６０は「４」となる。
このように、ヨーイング角速度センサ１７ｘおよびピッチング角速度センサ１７ｙにより、撮影時におけるデジタルカメラ１の動きを把握することができる。パンニングモード信号６０は表示部５５に表示される画像の配置を決定する際に利用される。
＜姿勢判別信号＞
また、このデジタルカメラ１では、パンニングモード信号６０に加えて、デジタルカメラ１の姿勢を判別するために姿勢判別信号６１がヨーイング電流値検出部１４ｘおよびピッチング電流値検出部１４ｙにより求められる。【００２６】
次に、ヨーイング電流値検出部１４ｘおよびピッチング電流値検出部１４ｙによる電流値検出方法について、図６および図７を用いて説明する。図６（Ａ）は横撮り姿勢の撮影における手ブレ補正装置２０の姿勢を示しており、図６（Ｂ）は、縦撮り姿勢の撮影における手ブレ補正装置２０の姿勢を示している。図７は、撮影姿勢別のコイル供給電流量を示す図である。ここで、横撮り姿勢とは、表示部５５の長手方向（筐体１ａの長手方向）が水平方向とほぼ一致する姿勢を意味しており、縦撮り姿勢とは、表示部５５の長手方向が鉛直方向とほぼ一致する姿勢を意味している。
図６（Ａ）に示すように、横撮り姿勢の場合、ピッチング方向が鉛直方向とほぼ一致するため、第２レンズ群Ｌ２を保持するピッチング保持枠２１は自重によりＹ軸方向下側へ下がろうとする。このとき、適切な像を得るために第２レンズ群Ｌ２を所定の位置（例えば、光軸ＡＸ中心付近）に保持する必要があるため、電流がコイル２４ｙに供給されピッチング保持枠２１を固定枠２５に対して支持するための電磁力がピッチングアクチュエータ２９ｙで発生する。図７に示すように、このときの電流値を例えば電流値Ｉｙ１とする。【００２７】
一方、ヨーイング方向が水平方向とほぼ一致するため、ヨーイングアクチュエータ２９ｘはヨーイング保持枠２２やピッチング保持枠２１の自重を支持するために余分な電磁力を発生させる必要がない。このため、コイル２４ｘへ供給される電流値Ｉｘ１は、コイル２４ｙへ供給される電流の電流値Ｉｙ１に比べて小さい。マイクロコンピュータ３は、ヨーイング電流値検出部１４ｘ、１４ｙにより検出された電流値を比較する機能およびデジタルカメラ１の姿勢を判別する機能を有している。このため、マイクロコンピュータ３により電流値Ｉｘ１、Ｉｙ１が比較され、図８に示すようにデジタルカメラ１の姿勢が横撮り姿勢であると判別される。このとき、姿勢判別信号６１は例えば「０」である。
図６（Ｂ）に示すように、縦撮り姿勢の場合、ヨーイング方向が鉛直方向とほぼ一致するため、第２レンズ群Ｌ２およびピッチング保持枠２１を保持するヨーイング保持枠２２は、自重に加えてこれらの部材の重量によりＹ軸方向下側へ下がろうとする。このとき、適切な像を得るために第２レンズ群Ｌ２を所定の位置（例えば、光軸ＡＸ中心付近）に保持する必要があるため、電流がコイル２４ｘに供給されヨーイング保持枠２２を固定枠２５に対して支持するための電磁力がヨーイングアクチュエータ２９ｘで発生する。図７に示すように、このときの電流値を例えば電流値Ｉｘ２とする。【００２８】
一方、ピッチング方向が水平方向とほぼ一致するため、ピッチングアクチュエータ２９ｙは第２レンズ群Ｌ２やピッチング保持枠２１の自重を支持するために余分な電磁力を発生させる必要がない。このため、コイル２４ｙへ供給される電流値Ｉｙ２は、コイル２４ｘへ供給される電流の電流値Ｉｘ１に比べて小さい。このため、図８に示すように、マイクロコンピュータ３によりデジタルカメラ１の姿勢が縦撮りであると判別される。このとき、姿勢判別信号６１は例えば「１」である。
以上のように、コイル２４ｘ、２４ｙに流れる電流値は、デジタルカメラ１の撮影時の姿勢に応じて変化する。すなわち、デジタルカメラ１の撮影時の姿勢は、コイル２４ｘ、２４ｙに流れる電流値を検出することにより把握することが可能である。したがって、手ブレ補正装置２０は、デジタルカメラ１の動き（いわゆる、手ブレ）に起因する画像の劣化を抑制するための機構であるとともに、デジタルカメラ１の姿勢検出部としても利用することができる。【００２９】
＜動画像の撮影＞
このデジタルカメラ１は、撮影モードとして静止画撮影モードと動画撮影モードとを有している。
デジタルカメラ１では、動画撮影モードにおいてシャッターボタン３６を押すことにより、あるいは動画撮影操作ボタン４５を押すことにより、動画像ファイルの記録が開始される。図９に示すように、シャッターボタン３６あるいは動画撮影操作ボタン４５が再度押されて動画像ファイルの記録が終了するまで、所定の時間間隔（例えば、１／３０秒間隔）のフレームごとに取得された複数の静止画像が動画像ファイル“９５ａ．ｍｐｇ”として画像記録部１２に記録される。例えば、この動画像ファイル“９５ａ．ｍｐｇ”は、第１フレーム画像、第２フレーム画像、…、第１００フレーム画像を有している。この動画撮影中、先ほど説明したパンニングモード信号および姿勢判別信号も、各フレーム画像とともに画像記録部１２に記録される。【００３０】
＜動画像から静止画像の生成＞
図９および図１０は動画像ファイルおよび静止画像ファイルの対応を示す図であり、動画像ファイルから静止画像ファイルを生成する際の説明図である。
このデジタルカメラ１では、後述するように、動画像が画像記録部１２に記録された後、記録されている動画像ファイルから複数の抽出画像ファイルを生成できる。例えば、動画像ファイル“９５ａ．ｍｐｇ”中の任意のフレームである第１フレーム、第３１フレーム、第６１フレーム、第９１フレームから、それぞれ抽出画像ファイル“９８ａ００１．ｊｐｇ”、“９８ａ００２．ｊｐｇ”、“９８ａ００３．ｊｐｇ”および“９８ａ００４．ｊｐｇ”が、抽出画像としてそれぞれ新たに生成される。本実施形態では、同じ時間（フレーム）間隔で静止画像を抽出して抽出画像を生成している。これらの抽出画像は、動画像を形成する複数の静止画像のうち代表的な画像と考えることもできる。【００３１】
また、各フレームの画像とともに前述のパンニングモード信号６０および姿勢判別信号６１が画像記録部１２に記録されているため、生成された抽出画像ファイルに対応するパンニングモード信号６０および姿勢判別信号６１が、各抽出画像ファイルとともに画像記録部１２に記録されている。
なお、動画像から抽出画像が生成される時間（フレーム）間隔および枚数については、ユーザーが自由に設定できる方式であってもよいし、マイクロコンピュータ３により自動的に設定される方式であってもよい。時間間隔や枚数が自動的に決定される場合、例えば、パンニング時のデジタルカメラ１の動きが激しい区間あるいは動画像における被写体の動きが激しい区間での生成間隔を短く、かつ生成枚数を多くすることが考えられる。
＜画像ファイルの管理方法＞
ここで、画像ファイルの管理方法について図１１および図１２を用いて説明する。図１１に示すように、内部メモリ５０またはリムーバブルメモリ５１に、撮影画像フォルダ９０が形成されている。撮影画像フォルダ９０の下の階層に、静止画像フォルダ９１、動画像フォルダ９４および抽出画像フォルダ９６が形成されている。静止画像フォルダ９１の下の階層に、静止画像フォルダ９２ａ、９２ｂなどが形成されている。抽出画像フォルダ９６の下の階層に、抽出画像フォルダ（＃１）９７ａおよび抽出画像フォルダ（＃２）９７ｂなどが形成されている。【００３２】
動画像ファイル９５ａから生成された複数の抽出画像は、パンニングモード信号６０および姿勢判別信号６１と共に抽出画像群９８ａとして抽出画像フォルダ（＃１）９７ａに格納される。これと同様に、動画像ファイル９５ｂから生成された複数の抽出画像ファイルは、パンニングモード信号６０および姿勢判別信号６１と共に複数の抽出画像９８ｂとして抽出画像フォルダ（＃２）９７ｂに格納される。
また図１２に示すように、抽出画像フォルダ９７ａには、動画像ファイルから生成された９枚の抽出画像“９８ａ００１．ｊｐｇ”から“９８ａ００９．ｊｐｇ”が記録されており、動画像としての撮影時刻が早い順に、“９８ａ”の後ろに「００１」、「００２」がファイルネームの一部として付加される。なお、動画像から生成される抽出画像の枚数は９枚に限定されるものではない。【００３３】
このように、動画像から新たに生成された複数の抽出画像は、同一のフォルダに格納されているため、関連性のある画像をユーザーが識別しやすくなる。
＜画像の配置決定＞
このデジタルカメラ１では、表示部５５に表示される連写画像の配置が、前述のパンニングモード信号６０に基づいてマイクロコンピュータ３により決定される。具体的には、マイクロコンピュータ３は、動画像から生成された複数の抽出画像に対応するパンニングモード信号６０の種類に応じて、抽出画像を並べた際の時間ベクトルの向きがパンニング動作の方向の一成分と概ね一致するように、複数の抽出画像の配置を決定する。
ここで、「時間ベクトル」とは、異なるタイミングで取得された２つの静止画像を並べた場合に、先に取得された静止画像の中心から後に取得された静止画像の中心に向かって延びるベクトルを意味している。【００３４】
例えば図１３に示すように、動画像ファイル９５ａにおいて、抽出画像ファイル“９８ａ００１．ｊｐｇ”（以下、第１抽出画像Ｇ）と、抽出画像ファイル“９８ａ００１．ｊｐｇ”よりも後で取得された抽出画像ファイル“９８ａ００２．ｊｐｇ”（以下、第２抽出画像Ｈ）と、を並べた場合、第１抽出画像Ｇの中心ＣＧから第２抽出画像Ｈの中心ＣＨに向かって延びる矢印が時間ベクトルＶを表している。このように、時間ベクトルＶは、動画像撮影時に異なるタイミングで取得された抽出画像群を並べた場合の時間の流れを表している。
そして、図１４に示すように、これらの第１抽出画像Ｇおよび第２抽出画像Ｈは、左方向へ移動する自動車を左方向へパンニングしながら撮影した動画像より生成した静止画像である。このため、パンニング動作の方向の水平成分としてはパンニング方向Ｄとなる。【００３５】
このように、時間ベクトルＶがパンニング方向Ｄと概ね一致するように第１抽出画像Ｇおよび第２抽出画像Ｈを並べることで、パンニング動作の方向と時間ベクトルとが一致していない（例えば、反対方向）場合に比べて、これらの第１抽出画像Ｇおよび第２抽出画像Ｈに対する違和感が緩和される。
ここで、「時間ベクトルＶの向きがパンニング動作のパンニング方向Ｄと概ね一致する」とは、時間ベクトルＶの向きがパンニング方向Ｄと完全に一致している場合の他に、表示された静止画像に対する違和感を緩和できるという効果を確保できる範囲内で、時間ベクトルＶの向きがパンニング方向Ｄに対してずれている場合も含まれる。
＜デジタルカメラの動作＞
次に、図１から図８を用いてデジタルカメラ１の動作について説明する。【００３６】
ユーザーが動画像を撮影する際には、まず電源スイッチ３５をＯＮ側とした後、モード切換ダイアル３７を動画撮影モードに切換える。これにより、デジタルカメラ１は動画撮影状態へ移行する。動画撮影状態へ移行すると、デジタルカメラ１の動きは、角速度センサ１７ｘ、１７ｙにより検知される。マイクロコンピュータ３は、ヨーイング駆動制御部１５ｘおよびピッチング駆動制御部１５ｙに対し、発生した手ブレ等を打ち消すための指令信号を与える。この指令信号に応じた電流は、ピッチング保持枠２１のコイル２４ｘ、２４ｙのそれぞれに供給される。ピッチング保持枠２１は、供給された電流とアクチュエータ２７ｘ、２７ｙにおいて発生する電磁力により、光軸ＡＸと直角なＸ−Ｙ平面内を移動する。すなわち、手ブレ補正装置２０により第２レンズ群Ｌ２は、光軸ＡＸと直交する平面内を移動する。また、ピッチング保持枠２１の位置検出は、受光素子３１を用いることにより行われる。これにより、ユーザーは、光学系Ｌを介してイメージセンサ４に入射する光学的な像の補正を行うことができ、手ブレによる画像の劣化が抑制された良好な動画像を取得することが可能となる。【００３７】
（１）姿勢の判別動作
また、デジタルカメラ１の撮影姿勢の判別は次のようにして行われる。ここで、デジタルカメラ１の基準姿勢を、横撮り姿勢とし、横撮り姿勢における光軸ＡＸ回りの回転角度を０°とする。この場合、縦撮り姿勢は、デジタルカメラ１が横撮り姿勢から光軸ＡＸを中心として９０°回転した状態となる。
ユーザーが横撮り姿勢で、風景など横長の被写体を撮影する場合について説明する。デジタルカメラ１の姿勢は、ヨーイング電流値検出部１４ｘおよびピッチング電流値検出部１４ｙの電流検出値により判断される。図７において、横撮りの姿勢、すなわち０°の姿勢で撮影した場合、ヨーイング電流値検出部１４ｘおよびピッチング電流値検出部１４ｙにより、手ブレ補正装置２０のコイル２４ｘに流れる電流値Ｉｘ１およびコイル２４ｙに流れる電流値Ｉｙ１が検出される。マイクロコンピュータ３が検出された電流値Ｉｘ１およびＩｙ１を比較する。この場合、図７に示すように、電流値Ｉｘ１が電流値Ｉｙ１よりも小さいため、マイクロコンピュータ３によりデジタルカメラ１の姿勢が横撮り姿勢であると判別される。【００３８】
この状態でユーザーがシャッターボタン３６を押すと、横長の動画像を取得できる。撮影された動画像は、逐次、画像記録部１２に記録される。この際、図８に示すように、画像記録制御部１１は、姿勢判別信号６１として、デジタルカメラ１の撮影姿勢が横撮り姿勢（０°）であることを示す「０」を、バッファメモリ９から出力される画像信号に付加する。この姿勢判別信号６１は、例えば画像信号のヘッダーあるいはフッター部分に記録される。なお、姿勢判別信号６１の記録は、バッファメモリ９から画像信号が出力される際に行われてもよく、あるいは画像記録部１２に画像信号が記録された後に画像記録部１２において行われてもよい。
一方、ユーザーが縦撮り姿勢で、人物など縦長の被写体を撮影する場合、横撮り姿勢の場合と同様に、デジタルカメラ１の姿勢は、ヨーイング電流値検出部１４ｘおよびピッチング電流値検出部１４ｙの電流検出値に基づいてマイクロコンピュータ３により判断される。図７において、縦撮り姿勢で撮影した場合、ヨーイング電流値検出部１４ｘおよびピッチング電流値検出部１４ｙにより、手ブレ補正装置２０のコイル２４ｘに流れる電流値Ｉｘ２およびコイル２４ｙに流れる電流値Ｉｙ２が検出される。マイクロコンピュータ３が検出された電流値Ｉｘ２およびＩｙ２を比較する。この場合、図７に示すように、電流値Ｉｙ２が電流値Ｉｘ２よりも小さいため、マイクロコンピュータ３によりデジタルカメラ１の姿勢が縦撮り姿勢であると判別される。【００３９】
この状態でユーザーがシャッターボタン３６を押すと、縦長の動画像を取得できる。そして撮影された動画像は、逐次、画像記録部１２に記録される。この際、画像記録制御部１１は、姿勢判別信号６１として、デジタルカメラ１の撮影姿勢が縦撮り姿勢であることを示す「１」を、バッファメモリ９から出力される画像信号に付加する。
（２）パンニングモードの判別動作
次に、ユーザーがパンニングにより動く被写体を追いかけて連写する場合について説明する。
図１４に示すように、左方向に移動している自動車を撮影する場合、自動車の動きに合わせてユーザーはデジタルカメラ１を左方向にパンニングするとともに、動画像を撮影する。これにより、パンニングにより撮影された動画像が一時的にバッファメモリ９に記録され、逐次、画像記録部１２に記録される。このとき、パンニングモード信号６０が各フレーム画像とともに記録される。【００４０】
ここでは、デジタルカメラ１の向きは左方向へ変化しているため、角速度センサ１７ｙの出力信号からマイクロコンピュータ３により垂直方向パンニングは「無し」と判断され、角速度センサ１７ｘの出力信号からマイクロコンピュータ３により水平方向パンニングは「左方向」と判断される。これにより、パンニングモード信号６０として「１」が各フレーム画像とともに記録される。
また、パンニングモード信号６０とともに、前述の姿勢判別信号６１が記録される。この場合、デジタルカメラ１の姿勢は横撮り姿勢であるため、姿勢判別信号６１として「０」が各フレーム画像とともに記録される。
（３）抽出画像生成モードの動作
デジタルカメラ１では、撮影した動画像から複数の抽出画像を生成できる。図１５は、抽出画像生成モードのフローチャートを示す。【００４１】
まず、ユーザーが抽出画像生成モードに設定するために、ＭＥＮＵ設定ボタン３９を押すと、表示部５５に各種メニューが表示される。表示された各種メニューから抽出画像生成モードが選択されると、デジタルカメラ１の状態は抽出画像生成モードへ移行する。
抽出画像生成モードが選択されている場合、マイクロコンピュータ３は、初期値０の定数Ｎに１を加えて（Ｓ１）、静止画像の記録先ディレクトリが抽出画像フォルダ（＃１）に設定される（Ｓ２）。ユーザーは、抽出画像生成モードにおいて、動画像から生成する抽出画像の時間間隔、あるいはフレーム間隔等、および抽出画像の生成枚数を設定する（Ｓ３）。
次に、抽出画像の生成を開始するために、シャッターボタン３６（この場合、撮影時のシャッター機能とは別機能）が押されるのを待ち（Ｓ４）、シャッターボタン３６が押された場合には、設定された時間（フレーム）間隔ごとに抽出画像が生成され（Ｓ５）、各抽出画像に対応するパンニングモード信号６０、姿勢判別信号６１および撮影日時などの各情報がマイクロコンピュータ３により一時的に記憶される（Ｓ６）。ここでは、例えばシャッターボタン３６を１度押せば、９枚の抽出画像が連続的に生成される。動画像から生成された９枚の抽出画像は、前述の各情報と共に画像記録部１２の抽出画像フォルダ（＃１）９７ａに記録される（Ｓ７）。より具体的には図１１および図１２に示すように、９枚の抽出画像は抽出画像群９８ａとして抽出画像フォルダ（＃１）９７ａに格納される。【００４２】
その後、継続して動画像から抽出画像を生成するか否かがマイクロコンピュータ３により判定され（Ｓ８）、継続して動画像から抽出画像を生成する場合は定数Ｎに１を加え（Ｓ９）、新たに抽出画像の生成が行われる（Ｓ６、Ｓ７）。また、継続しない場合には、抽出画像生成モードを終了する。
なお、抽出画像の生成を継続するか否かの判定（Ｓ８）は、その旨を表示部５５に表示し、ユーザーが継続を選択するか否かを基準にマイクロコンピュータ３により判断される。
（４）抽出画像再生モードの動作
次に、図１６〜図２０を用いて、動画像から生成された複数の抽出画像を表示部５５に表示させる再生モードについて説明する。図１６〜図２０は再生モードのフローチャートである。図２１は抽出画像フォルダに格納されている画像のサムネイル表示の一例である。【００４３】
まず、動画像から生成された抽出画像を画像フォルダごとに表示部５５にサムネイル表示させるために、電源スイッチ３５をＯＮとした後、モード切換ダイアル３７を再生モードに切換える。これにより、再生モードが開始される。
図２１に示すように、表示部５５には、抽出画像フォルダ（＃１）〜（＃９）の９つのサムネイル画像が一覧表示されている（Ｓ１１）。これらの抽出画像フォルダには、抽出画像とともにパンニングモード信号６０および姿勢判別信号６１が格納されている。例えば、抽出画像フォルダ（＃１）９７ａに格納されている複数の抽出画像は、デジタルカメラ１が横撮り姿勢の状態で、左方向に移動している自動車を左方向にパンニングしながら撮影した動画像より生成した複数の抽出画像である。このため、これらの抽出画像とともに、姿勢判別信号６１として「０」、パンニングモード信号６０として「１」が記録されている。表示部５５には、先頭の抽出画像（撮影時刻が最も早い抽出画像）が抽出画像としてサムネイル表示されている。【００４４】
また、抽出画像フォルダ（＃２）９７ｂに格納されている複数の抽出画像は、デジタルカメラ１が横撮り姿勢の状態で、右方向に移動している自動車を右方向にパンニングしながら撮影した動画像より生成した抽出画像である。このため、これらの抽出画像とともに、姿勢判別信号６１として「０」、パンニングモード信号６０として「２」が記録されている。
さらに、抽出画像フォルダ（＃３）９７ｃのサムネイル画像については、デジタルカメラ１を縦撮り姿勢で、右方向に移動している子供を右方向にパンニングしながら撮影した動画像より生成された抽出画像である。このため、姿勢判別信号６１として「１」、パンニングモード信号６０として「２」が記録されている。表示部５５には、先頭の抽出画像が抽出画像としてサムネイル表示されている。【００４５】
ここで、姿勢判別信号６１に基づいて、サムネイル表示されている抽出画像は、撮影時と同じ姿勢に復元した状態で表示部５５に表示される。具体的には、姿勢判別信号６１が「０」である場合（図２１に示す抽出画像フォルダ（＃１）９７ａおよび（＃２）９７ｂのサムネイル画像の場合）、動画像が横撮り姿勢で撮影されている。このため、デジタルカメラ１が横撮り姿勢の状態で表示部５５に横長の画像が表示されるように、マイクロコンピュータ３から画像表示制御部１３へ制御信号が送信され、画像表示制御部１３により表示部５５の動作が制御される。この結果、表示部５５に横長の状態で画像が表示される。また、姿勢判別信号６１が「１」である場合（図２１に示す抽出画像フォルダ（＃３）９７ｃのサムネイル画像の場合）、動画像が縦撮り姿勢で撮影されている。このため、姿勢判別信号６１が「０」である場合と同様に、デジタルカメラ１が横撮り姿勢の状態で表示部５５に縦長の画像（９０°回転された画像）が表示される。なお、図２１では、抽出画像フォルダ（＃４）から（＃９）までのサムネイル画像は省略されている。なお図２１に示すように、パンニングモード信号６０については、その動き方向がわかるように、抽出画像中に、例えば矢印にて表示できるようにしても良い。さらには、パンニングの速度に応じて、矢印の大きさを変えるようにしてもよい。具体的には、速度が大きいほど矢印の長さ又は幅が大きくなるようにしてもよい。【００４６】
次に、サムネイル表示された画像の中から十字操作キー３８を用いて抽出画像フォルダを選択する（Ｓ１２）。このフォルダの選択は、十字操作キー３８およびＳＥＴボタン４０を用いて行われる。図１９に示す抽出画像フォルダ（＃１）９７ａが選択された場合、図２２に示すように、抽出画像フォルダ（＃１）９７ａ内の９枚の抽出画像（抽出画像群９８ａ）が表示部５５に表示される（Ｓ１３）。各抽出画像の右下には、ファイル名に付加されている３桁の番号が表示される。前述のように、この番号は抽出画像の撮影時刻の前後関係を表している。なお図２２に示すように、パンニングモード信号６０については、その動き方向がわかるように、抽出画像群９８ａ中に、例えば矢印にて表示できるようにしても良い。さらには、パンニングの速度に応じて、矢印の大きさを変えるようにしてもよい。具体的には、速度が大きいほど矢印の長さ又は幅が大きくなるようにしてもよい。【００４７】
次に、十字操作キー３８およびＳＥＴボタン４０を用いて、基準となる画像（基準画像）が選択される（Ｓ１４）。このとき、マイクロコンピュータ３では、基準画像の番号を基準番号Ｊに入力し、比較番号Ｋに基準番号Ｊを入力する（Ｓ１５、Ｓ１６）。例えば、基準画像として抽出画像ファイル“９８ａ００３．ｊｐｇ”が選択された場合を想定する。この場合、Ｊ＝「００３」、Ｋ＝「００３」となる。
ここで、撮影時のパンニング動作に応じて画像の表示配置を最適化するため、マイクロコンピュータ３によりパンニングモード信号６０の確認が行われる（Ｓ１７）。具体的には、パンニングモード信号６０が「１」、「４」、「７」であるか否かがマイクロコンピュータ３により判定される（Ｓ１７）。これらのパンニングモード信号６０は、少なくとも左方向にパンニングしていることを意味しているため、この条件を満たしている場合は、並んで配置された画像の時間ベクトルが左方向を向くように、マイクロコンピュータ３により画像表示制御部１３を介して画像の配置が調整される。この条件を満たしていない場合は、並んで配置された画像の時間ベクトルが右方向を向くように、マイクロコンピュータ３により画像表示制御部１３を介して画像の配置が調整される。【００４８】
なお、画像の選択、決定については、十字操作キー３８およびＳＥＴボタン４０を用いて行ったが、表示部５５をタッチパネル方式とし、タッチパネル上を、ユーザーが指で操作できるようにしてもよい。つまり、ユーザーが指で操作することにより、画像のページ送り方向（順送り、逆送り）、あるいはページ送りの速度などを変えるときに、直感的に操作することが可能となる。
また、パンニングモード信号６０の確認の後に、姿勢判別信号６１の確認が行われる（Ｓ１８、Ｓ１９）。具体的には、姿勢判別信号６１が「０」であるか否かがマイクロコンピュータ３により判定される（Ｓ１８、Ｓ１９）。姿勢判別信号６１が「０」である場合は、横撮り姿勢で動画像の撮影が行われているため、撮影時の姿勢に復元させるために横長の画像が表示部５５に表示される。一方、姿勢判別信号６１が「１」である場合、縦撮り姿勢で動画像の撮影が行われているため、撮影時の姿勢に復元させるために９０°回転された状態で縦長の画像が表示部５５に表示される。【００４９】
以下、ステップＳ１７での条件ごとにフローの詳細を説明する。
Ａ）横撮り姿勢の場合
〔パンニング水平方向成分が「左方向」の場合〕
ステップＳ１７においてパンニングモード信号６０が「１」、「４」、「７」のいずれかであるとマイクロコンピュータ３により判定され、かつ、ステップＳ１８において姿勢判別信号６１が「０」であるとマイクロコンピュータ３により判定された場合、図１７に示すフローＡに基づいて画像の表示が行われる。具体的には図１７に示すように、十字操作キー３８を用いて比較画像の選択が行われる。例えば、十字操作キー３８（または十字操作キー３８の外周側に配置されたダイアル）が右側（右回り）に操作された場合、マイクロコンピュータ３は比較番号Ｋに１を加えて新しい比較番号Ｋに設定する（Ｓ２０、Ｓ２１）。一方、十字操作キー３８（またはダイアル）が左側（左回り）に操作された場合、マイクロコンピュータ３は比較番号Ｋから１を引いて新しい比較番号Ｋに設定する（Ｓ２０、Ｓ２２）。【００５０】
次に、基準番号Ｊおよび比較番号Ｋに基づいて画像表示制御部１３により表示部５５に画像が表示される。具体的には図２３に示すように、比較番号Ｋが基準番号Ｊと同じ場合、基準画像のみが画像表示制御部１３により表示部５５に表示される（Ｓ２３、Ｓ２４）。
一方、基準番号Ｊが比較番号Ｋと異なる場合、基準番号Ｊおよび比較番号Ｋの大小が比較される（Ｓ２５）。比較番号Ｋが基準番号Ｊよりも大きい場合、比較画像は基準画像よりも遅い時刻で取得された画像である。一方で、このフローでは、パンニングの水平方向成分が「左方向」の場合に対応している。このため、基準画像と比較画像とを並べた際の時間ベクトルの向きがパンニングの水平方向成分と同じ左方向になるように、表示部５５において基準画像の左側に比較画像が表示される（Ｓ２６）。このとき、撮影姿勢が横撮り姿勢であるため表示される画像は横長の状態である。【００５１】
また、比較番号Ｋが基準番号Ｊよりも小さい場合、比較画像は基準画像よりも早い時刻で取得された画像である。このため、基準画像と比較画像とを並べた際の時間ベクトルの向きがパンニング水平方向と同じ左方向になるように、表示部５５において基準画像の右側に比較画像が表示される（Ｓ２７）。このとき、撮影姿勢が横撮り姿勢であるため表示される画像は横長の状態である。
例えば、抽出画像フォルダ（＃１）９７ａが選択されている場合、前述のようにパンニングモード信号６０が「１」であるため、このフローＡにより処理が行われる。基準番号Ｊ＝「００３」、比較番号Ｋ＝「００６」とすると、Ｋ＞Ｊである。このため、図２４に示すように、表示部５５において基準画像００３（抽出画像ファイル“９８ａ００３．ｊｐｇ”）の左側に比較画像００６（抽出画像ファイル“９８ａ００６．ｊｐｇ”）が表示される。この場合、基準画像の中心Ｃ３から比較画像の中心Ｃ６に延びる時間ベクトルＶは、パンニング動作の方向と概ね一致する。【００５２】
また、比較番号Ｋ＝「００２」である場合、Ｋ＜Ｊであるため、図２５に示すように、表示部５５において基準画像００３（抽出画像ファイル“９８ａ００３．ｊｐｇ”）の右側に比較画像００２（抽出画像ファイル“９８ａ００２．ｊｐｇ”）が表示される。この場合、基準画像の中心Ｃ２から比較画像の中心Ｃ３に延びる時間ベクトルＶは、パンニング動作の方向と概ね一致する。
このように、このデジタルカメラ１では、動画像から生成された複数の抽出画像が表示される際に、パンニング動作の方向（被写体の移動方向）と画像が配置される方向とが概ね一致するように、マイクロコンピュータ３により自動的に画像の配置が調整される。このため、ユーザーにとって複数の静止画像を確認しやすい表示状態を得ることができ、並んだ複数の画像に対する違和感を緩和できる。【００５３】
図１７に示すように、画像の表示動作が完了すると、十字操作キー３８またはＳＥＴボタン４０の操作待ち状態となる（Ｓ２８）。ＳＥＴボタン４０が操作された場合、その時点で表示部５５に基準画像および比較画像が表示されていれば、十字操作キー３８およびＳＥＴボタン４０を用いて、いずれか一方の画像をユーザーが選択画像として選択する（Ｓ２９、Ｓ３０）。例えば、ズーム操作レバー５７を操作することにより、選択画像の拡大表示および縮小表示などの操作を行うことが可能となる。また、基準画像のみが表示されている場合は、基準画像が自動的に選択画像として選択される。
なお、ＳＥＴボタン４０が操作されず十字操作キー３８が操作される場合、再度フローがステップＳ１８に戻り、ステップＳ１８〜Ｓ２８の動作が繰り返される（Ｓ２９）。
〔パンニング水平方向成分が「右方向」または「無し」の場合〕
ステップＳ１７においてパンニングモード信号６０が「１」、「４」、「７」のいずれでもないとマイクロコンピュータ３により判定され、かつ、ステップＳ１９において姿勢判別信号６１が「０」であるとマイクロコンピュータ３に判定された場合、図１８に示すフローＢに基づいて画像の表示が行われる。具体的には図１７に示すように、十字操作キー３８を用いて比較画像の選択が行われる。例えば、十字操作キー３８（または十字操作キー３８の外周側に配置されたダイアル）が右側（右回り）に操作された場合、マイクロコンピュータ３は比較番号Ｋに１を加えて新しい比較番号Ｋに設定する（Ｓ３１、Ｓ３２）。一方、十字操作キー３８（またはダイアル）が左側（左回り）に操作された場合、マイクロコンピュータ３は比較番号Ｋから１を引いて新しい比較番号Ｋに設定する（Ｓ３１、Ｓ３３）。【００５４】
次に、基準番号Ｊおよび比較番号Ｋに基づいて画像表示制御部１３により表示部５５に画像が表示される。具体的には、比較番号Ｋが基準番号Ｊと同じ場合、基準画像のみが画像表示制御部１３により表示部５５に表示される（Ｓ３４、Ｓ３５）。
一方、基準番号Ｊが比較番号Ｋと異なる場合、基準番号Ｊおよび比較番号Ｋの大小が比較される（Ｓ３６）。比較番号Ｋが基準番号Ｊよりも大きい場合、比較画像は基準画像よりも遅い時刻で取得された画像である。一方で、このフローＢでは、パンニングの水平方向成分が「右方向」あるいは「無し」の場合に対応している。このため、基準画像と比較画像とを並べた際の時間ベクトルの向きがパンニングの水平方向成分と同じ右方向になるように、表示部５５において基準画像の右側に比較画像が表示される（Ｓ３７）。このとき、撮影姿勢が横撮り姿勢であるため表示される画像は横長の状態である。【００５５】
また、比較番号Ｋが基準番号Ｊよりも小さい場合、比較画像は基準画像よりも早い時刻で取得された画像である。このため、基準画像と比較画像とを並べた際の時間ベクトルの向きがパンニング水平方向成分と同じ右方向になるように、表示部５５において基準画像の左側に比較画像が表示される（Ｓ３８）。このとき、撮影姿勢が横撮り姿勢であるため表示される画像は横長の状態である。
例えば、抽出画像フォルダ（＃２）９７ｂが選択されている場合、前述のようにパンニングモード信号６０が「１」であるため、このフローＢにより処理が行われる。基準番号Ｊ＝「００３」、比較番号Ｋ＝「００６」とすると、Ｋ＞Ｊである。このため、図２６に示すように、表示部５５において基準画像００３の右側に比較画像００６が表示される。
このように、このデジタルカメラ１では、動画像から生成された複数の抽出画像が表示される際に、被写体の移動方向と画像が配置される方向とが概ね一致するように、マイクロコンピュータ３により自動的に画像の配置が調整される。このため、ユーザーにとって複数の静止画像を確認しやすい表示状態を得ることができる。【００５６】
画像の表示動作が完了すると、十字操作キー３８またはＳＥＴボタン４０の操作待ち状態となる（Ｓ３９）。ＳＥＴボタン４０が操作された場合、その時点で表示部５５に基準画像および比較画像が表示されていれば、十字操作キー３８およびＳＥＴボタン４０を用いて、いずれか一方の画像をユーザーが選択画像として選択する（Ｓ４０、Ｓ４１）。例えば、ズーム操作レバー５７を操作することにより、選択画像の拡大表示および縮小表示などの操作を行うことが可能となる。また、基準画像のみが表示されている場合は、基準画像が自動的に選択画像として選択される。
なお、ＳＥＴボタン４０が操作されず十字操作キー３８が操作される場合、再度フローがステップＳ３１に戻り、ステップＳ３１〜Ｓ３９の動作が繰り返される（Ｓ４０）。
Ｂ）縦撮り姿勢の場合
〔パンニング水平方向成分が「左方向」の場合〕
図１９に示すフローＣは、基本的には前述のフローＡと同じ工程であるが、ステップＳ４６、Ｓ４８およびＳ４９において、画像が９０°回転された状態で表示される点で、フローＡとは異なる。これは、ステップＳ１８において撮影姿勢が縦撮り姿勢と判定されるためである。その他のステップＳ４２〜Ｓ４５、Ｓ４７、Ｓ５０〜Ｓ５２については、前述のフローＡの対応するステップと同じであるため、詳細な説明は省略する。【００５７】
〔パンニング水平方向成分が「右方向」または「無し」の場合〕
図２０に示すフローＤは、基本的には前述のフローＢと同じ工程であるが、ステップＳ５７、Ｓ５９およびＳ６０において、画像が９０°回転された状態で表示される点で、フローＢとは異なる。これは、ステップＳ１９において撮影姿勢が縦撮り姿勢と判定されるためである。その他のステップＳ５３〜Ｓ５６、Ｓ５８、Ｓ６１〜Ｓ６３については、前述のフローＢの対応するステップと同じであるため、詳細な説明は省略する。
例えば、抽出画像フォルダ（＃３）が選択されている場合、前述のようにパンニングモード信号６０が「１」であり、かつ、姿勢判別信号６１が「１」であるため、このフローＤにより処理が行われる。基準番号Ｊ＝「００３」、比較番号Ｋ＝「００６」とすると、Ｋ＞Ｊである。このため、図２７に示すように、表示部５５において基準画像００３の右側に比較画像００６が表示される。このとき、撮影姿勢が縦撮り姿勢であるため、画像が９０°回転された状態で表示される。【００５８】
このように、フローＣおよびＤでは、撮影時の姿勢に復元された状態で表示部５５に画像が表示されるため、ユーザーが画像をさらに確認しやすくなる。
＜特徴＞
デジタルカメラ１の特徴は以下の通りである。
（１）
このデジタルカメラ１では、マイクロコンピュータ３にて動画像から複数の抽出画像が生成され、第１動き情報としてのパンニングモード信号６０に基づいて複数の抽出画像の配置がマイクロコンピュータ３により決定される。このため、デジタルカメラ１の動きや動画像における被写体の動きに合わせて、抽出画像の配置を調整することができる。これにより、これらの動きの方向を抽出画像が配置される方向と概ね一致させることができ、並べて表示される複数の画像に対する違和感を緩和することができる。【００５９】
（２）
このデジタルカメラ１では、隣り合う２つの抽出画像により形成される時間ベクトルの向きが、動き情報に含まれる動きの方向の一成分と概ね一致するように、マイクロコンピュータ３により複数の抽出画像の配置が決定される。これにより、デジタルカメラ１の動く方向の一成分と時間ベクトルの方向とを概ね一致させることができる。
ここで、「時間ベクトル」とは、異なるタイミングで取得された２つの抽出画像を並べた場合に先に取得された抽出画像の中心から後に取得された抽出画像の中心に向かって延びるベクトルを意味している。「時間ベクトルの向きが動きの方向の一成分と概ね一致する」とは、時間ベクトルの向きが動き方向の一成分と完全に一致している場合の他に、表示された静止画像に対する違和感を緩和できるという効果を確保できる範囲内で、時間ベクトルの向きが動き方向の一成分に対してずれている場合も含まれる。したがって、例えば図２４に示す場合に、ユーザーがデジタルカメラ１を左上方向または左下方向にパンニングしていても、時間ベクトルの向きとデジタルカメラ１の動く方向の一成分（水平成分）とが概ね一致していると言える。【００６０】
（３）
このデジタルカメラ１では、角速度センサ１７ｘおよび１７ｙによりパンニング垂直方向成分および水平方向成分が検出される。さらに、これらの検出結果に基づいて、マイクロコンピュータ３によりパンニングモード信号６０が自動的に生成され、動画像あるいは複数の抽出画像とともにパンニングモード信号６０が画像記録部１２に記録される。これにより、手ブレ補正のための角速度センサ１７ｘおよび１７ｙを、パンニングモード信号６０を生成するための検出部の一部として利用できる。
（４）
このデジタルカメラ１では、姿勢情報としての姿勢判別信号６１に基づいて、表示部５５に画像が表示された状態で画像における天地方向が鉛直方向と概ね一致するように、表示部５５に対する画像の表示状態がマイクロコンピュータ３および画像表示制御部１３により調整される。つまり、撮影時の状態と同じ状態で画像が表示部５５に表示される。このため、実際の被写体の天地方向と画像内での被写体の天地方向とが概ね一致し、表示された画像に対する違和感をさらに緩和することができる。【００６１】
（第２実施形態）
前述の実施形態では、デジタルカメラ１をパンニングさせて動画撮影する場合を説明している。しかし、図２８に示すように、デジタルカメラ１をパンニングさせずに移動している被写体を撮影する場合も考えられる。図２９は動き検出部の構成の一例を示すブロック図である。なお、前述の実施形態と実質的に同じ機能を有する構成については、同じ符号を付し、その説明は省略する。
図２８に示すように、第２実施形態のデジタルカメラ１の撮影姿勢の状態は、左方向に移動している自動車を、デジタルカメラ１の撮影画角がほぼ同じ状態にて、広い画角にて撮影している状況を示している。ここでは、第１実施形態のパンニングモード信号６０の代わりに、動画像から検出された被写体の動きベクトルに基づいて画像の配置が決定される。具体的には、図５に示すパンニングモード信号６０と同様に、被写体の動きを示す動きベクトル信号６２（図２９）が動き検出部１００およびマイクロコンピュータ３により生成される。【００６２】
具体的には図２９に示すように、動き検出部１００は、動画像に基づいて画像内での被写体の動きを検出するユニットであり、代表点記憶部１０１と、相関演算部１０２と、動きベクトル検出部１０３と、を有している。
代表点記憶部１０１は、Ａ／Ｄ変換部７およびデジタル信号処理部８を経て入力される現フレームの画像信号を複数の領域に分割し、各領域に含まれる特定の代表点に対応する画像信号を代表点信号として記憶する。代表点記憶部１０１は、既に記憶されている現フレームよりも１フレーム前の代表点信号を読み出して相関演算部１０２に出力する。
相関演算部１０２は、１フレーム前の代表点信号と現フレームの代表点信号間の相関演算を行い、代表点信号間の差を比較する。演算結果は動きベクトル検出部１０３に出力される。【００６３】
動きベクトル検出部１０３は、相関演算部１０２による演算結果から１フレーム前と現フレーム間の画像の動きベクトルを１画素単位で検出する。そして動きベクトルは、マイクロコンピュータ３に出力される。マイクロコンピュータ３は、動きベクトルに対するゲインおよび位相などを調整し、画像信号上の被写体の単位時間あたりの動き速度および方向を算出する。被写体が動く方向は、図５に示すパンニングモード信号６０のように、「０」〜「８」までの信号として動きベクトル信号６２が生成される。
前述の実施形態と同様に、動きベクトル信号６２に基づいてマイクロコンピュータ３により抽出画像の配置が決定される。決定方法については前述の実施形態と同様であるため、詳細な説明は省略する。
被写体の動きを検出する処理は、例えばユーザーが動画像の記録を開始することにより開始される。【００６４】
以上の構成により、デジタルカメラ１では、第２動き情報としての動きベクトル信号６２を記録した動画像より、フレームごとにその第２動き情報を個々に有する複数の静止画像を作成することができる。さらに、その第２動き情報に基づいてマイクロコンピュータ３により画像の配置が決定される。具体的には、動きベクトル信号６２に基づいて、並んで表示された画像により形成される時間ベクトルの向きが被写体の動く方向と概ね一致するように、マイクロコンピュータ３により画像の配置が決定される。これにより、被写体の動きの方向を画像の配置と概ね一致させることができ、並んで表示された複数の画像に対する違和感を緩和することができる。
なお、動きベクトル検出については、デジタルカメラ１に被写体の顔検出部を設け、被写体の顔の動き情報に基づいて判断できるようにしてもよい。その場合には、並んで表示された画像により形成される時間ベクトルの向きが被写体の顔の向き（例えば、左向き、あるいは右向き）と概ね一致するように、マイクロコンピュータ３により画像の配置が決定される。【００６５】
また、動きベクトル信号６２についても、その動き方向がわかるように、表示画像中に、例えば矢印にて表示できるようにしても良い。さらには、動きの速度に応じて、矢印の大きさを変えるようにしてもよい。具体的には、速度が大きいほど矢印の長さ又は幅が大きくなるようにしてもよい。
また、静止画像の抽出については、動画撮影中にＳＥＴボタン４０を押すことにより、動画記録とともに静止画が生成され、生成された静止画像に動きベクトル信号を記録するようにしてもよい。
（第３実施形態）
前述の第２実施形態では、動画像の撮影時に動きベクトルが検出されているが、画像記録部１２に記録されている動画像に基づいて動きベクトル信号６２（動き情報の一例）が生成されてもよい。具体的には、記録されている動画像ファイルから複数の抽出画像ファイルが生成される。例えば、図９および図１０に示すように、動画像ファイル“９５ａ．ｍｐｇ”中の任意のフレームである第１フレーム、第３１フレーム、第６１フレーム、第９１フレームから、それぞれ抽出画像ファイル“９８ａ００１．ｊｐｇ”、“９８ａ００２．ｊｐｇ”、“９８ａ００３．ｊｐｇ”および“９８ａ００４．ｊｐｇ”が、抽出画像としてそれぞれ新たに生成される。【００６６】
次に、デジタルカメラ１の動き方向を示すパンニングモード信号６０がマイクロコンピュータ３により確認される。パンニングモード信号６０が「０」の場合（例えば図２８に示すような状態で撮影された場合）は、動画撮影時にパンニングなどのデジタルカメラ１の動きがないと考えられるため、抽出画像の生成後、隣り合う抽出画像に基づいて動きベクトル信号６２が動き検出部１００（動き情報生成部の一例）により生成される。動き検出部１００により生成された複数の動きベクトル信号６２は、抽出画像ファイルとともに画像記録部１２に記録される。
一方、パンニングモード信号６０が「０」以外の場合は、パンニングなどのデジタルカメラ１の動きが動画撮影時に発生していると考えられるため、動画像に基づいて動きベクトルを生成する際に、パンニングモード信号６０が考慮された上で、動きベクトルが生成される。例えば図１４に示すように、デジタルカメラ１を右から左へパンニングさせながら動画撮影が行われた場合、図２２に示すような複数の抽出画像が生成されるが、各抽出画像内でメインの被写体の自動車はほとんど移動せず、逆に背景（例えば、山）が左から右へ移動している。この場合は、複数の抽出画像に基づいて求められた動きベクトルが右方向となるが、計算上の動きベクトルと逆方向のベクトルをマイクロコンピュータ３が新たな動きベクトル信号として設定する。【００６７】
このように、デジタルカメラ１の動き方向を示すパンニングモード信号６０を利用して、動き検出部１００およびマイクロコンピュータ３により動き信号が生成されるため、動画像に基づいて求められた動きベクトルにパンニングなどのデジタルカメラ１の動きが悪影響を及ぼすのを低減できる。
生成された動きベクトル信号に基づいてマイクロコンピュータ３により画像の配置が決定される。具体的には、前述の第２実施形態と同様に、抽出画像とともに記録された動きベクトル信号に基づいて、並んで表示された画像により形成される時間ベクトルの向きが被写体の動く方向と概ね一致するように、マイクロコンピュータ３により画像の配置が決定される（例えば図１３参照）。これにより、被写体の動きの方向を画像の配置と概ね一致させることができ、並んで表示された複数の画像に対する違和感を緩和することができる。【００６８】
さらに、前述の第２実施形態に比べて、動画像を取得する際のマイクロコンピュータ３の負荷が軽くなるため、動画像取得時の処理速度を高めることができる。
（第４実施形態）
前述の実施形態では、表示部５５に画像が表示されている。しかし、図３０に示すように、デジタルカメラ１または１０１に接続された表示装置７０に画像が表示される場合も考えられる。
この場合、表示部が表示部５５からテレビモニタなどの表示装置７０に変わっただけであり、パンニングモード信号６０、姿勢判別信号６１、動きベクトル信号６２などの情報に基づいて、マイクロコンピュータ３により画像の配置や表示状態が決定されている点は、前述の実施形態と同様である。表示装置７０はケーブル７５を介してデジタルカメラ１に接続されている。ケーブル７５は、例えばＵＳＢ(Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ)ケーブルなどである。【００６９】
以上の構成は、デジタルカメラに表示部が設けられていない場合や、画像の表示サイズを大きくしたい場合に、有効である。これにより、視認性の良い快適な表示が可能となる。
なお、本第４実施形態において、外部の表示装置７０はテレビモニタを例として示しているが、これに限られない。例えば、モニタに接続されたパーソナルコンピュータとケーブル７５を介して接続する構成としてもよい。
なお、本第４実施形態において、ケーブル７５は、ＵＳＢケーブルを用いた例を示したがこれに限られない。例えば、ＩＥＥＥ１３９４シリアルバス用ケーブルや、無線ＬＡＮ等の無線により接続する場合も考えられる。
（第５実施形態）
前述の第４実施形態では、表示装置７０がデジタルカメラ１に接続されているが、表示装置７０の代わりに印刷装置７１がデジタルカメラ１に接続される場合も考えられる。【００７０】
この場合、図３１に示すように、表示装置７０が印刷装置７１に変わっただけであり、パンニングモード信号６０、姿勢判別信号６１、動きベクトル信号６２などの情報に基づいて、マイクロコンピュータ３により画像の配置や表示状態が決定されている点は、前述の実施形態と同様である。
ここでは、印刷装置７１がケーブル７６によりデジタルカメラ１に接続されている。デジタルカメラ１のマイクロコンピュータ３により画像の配置が決定され、表示部５５に画像が表示される。表示部５５に表示された画像が、印刷装置７１により紙面に印刷される。これにより、デジタルカメラ１の動きあるいは被写体の動きの方向を画像の配置と概ね一致させることができ、印刷された画像に対する違和感を緩和することができる。
なお、本第５実施形態において、外部の印刷装置７１は直接プリンタを繋いだ例を示したが、これに限られない。例えば、デジタルカメラ１が接続されたパーソナルコンピュータおよびケーブルを介してプリンタに接続される構成であってもよい。【００７１】
（第６実施形態）
この場合、表示制御装置８２により表示制御が行われる。具体的には図３２に示すようには、表示制御装置８２は、例えば、画像処理ソフトを備えたパーソナルコンピュータ、テレビなどである。デジタルカメラ１により撮影された画像は、サムネイル画像、姿勢判別信号６１、パンニングモード信号６０、動きベクトル信号６２などの情報とともに、メモリーカードなどのリムーバブルメモリ５１に記録されている。なお、リムーバブルメモリ５１はメモリーカードに限られず、ハードディスクや光ディスクなどでもよい。
表示制御装置８２は、リムーバブルメモリ５１に記録された情報の読み出しが可能なリムーバブルメモリ挿入部８１と、画像が表示される表示装置７０と、を有している。表示装置７０に表示される画像の配置は、前述の第１実施形態と同様に、リムーバブルメモリ５１に記録されたパンニングモード信号６０、姿勢判別信号６１、動きベクトル信号６２などの情報に基づいて決定される。【００７２】
これにより、この表示制御装置８２では、デジタルカメラ１の動きあるいは被写体の動きの方向を画像の配置と概ね一致させることができ、表示された画像に対する違和感を緩和することができる。
なお、図３２に示すように、リムーバブルメモリ挿入部８１を備えた印刷制御装置８４で印刷する場合、あるいは、印刷制御装置８４を表示装置７０と接続して表示する、あるいは印刷装置７１と接続して印刷する場合でも同様の効果を得ることができる。
また、リムーバブルメモリ挿入部８１を備えた表示装置、印刷装置および表示印刷制御装置を用いる例を示したが、これに限られない。例えば、リムーバブルメモリ５１の読み出しが可能なメモリーカードリーダ等の読み取り装置と、表示印刷制御装置と、表示装置、印刷装置とが接続される構成であってもよい。【００７３】
（他の実施形態）
本発明の具体的な構成は、前述の実施形態に限られるものではなく、発明の要旨を逸脱しない範囲で種々の変更および修正が可能である。
（１）
前述の実施形態では、デジタルカメラ１を用いて表示制御装置について説明している。しかし、表示制御装置が搭載される装置はデジタルカメラに限られず、撮影された画像を表示できる装置であれば、他の装置（デジタル一眼レフカメラ、デジタルビデオカメラ、カメラ機能付き携帯電話端末、カメラ機能付きＰＤＡ（Personal Digital Assistant）、カメラ機能付きＰＣ（Personal Computer）、ＤＶＤ（Digital Video Disc）レコーダおよびハードディスクレコーダなど）にも、この表示制御装置は搭載可能である。【００７４】
また、撮像装置としては、動画像の撮影が可能な装置や動画像および静止画像の撮影が可能な装置が挙げられる。撮像装置の例としては、前述のデジタルカメラ１以外に、デジタル一眼レフカメラ、デジタルビデオカメラ、カメラ機能付き携帯電話端末、カメラ機能付きＰＤＡ（Personal Digital Assistant）およびカメラ機能付きＰＣ（Personal Computer）が挙げられる。
（２）
前述の第１実施形態では、９種類のパンニングモード信号６０（「０」〜「８」）を実質的に２つのグループ（左方向およびその他）に分けて、画像の配置が決定されている。しかし、表示部５５などの表示部が複数の画像を斜めや上下に配置した状態で表示可能である場合は、さらに細かくグループを分けが行われてもよい。パンニングモード信号６０を細かくグループ分けすることで、パンニングの方向や被写体が動く方向が画像の配置により形成される時間ベクトルと概ね一致し、表示された画像に対する違和感がさらに緩和される。【００７５】
（３）
第１実施形態では、パンニングモードを検出するために角速度センサ１７ｘおよび１７ｙからの角速度信号を利用している。しかし、角速度センサ１７ｘおよび１７ｙの代わりにヨーイング電流値検出部１４ｘおよびピッチング電流値検出部１４ｙからの信号を利用してもよい。
また、第１実施形態では、撮影姿勢は、ピッチング電流値検出部１４ｙおよびヨーイング電流値検出部１４ｘの両方の電流値を検出することにより判断したが、一方の電流値を検出することにより、撮影姿勢の特定が可能である。
また、ピッチング電流値検出部１４ｙもしくはヨーイング電流値検出部１４ｘのどちらか一方の電流検出部に異常が生じた場合は、両方の電流値を検出することにより撮影姿勢を正確に判断することができる。【００７６】
なお、本第１実施形態において、撮影姿勢は、ピッチングおよびヨーイング電流検出部の電流値を検出することにより判断したが、これに限られない。例えば、電圧値を測定しても同様の効果を得ることができる。
（４）
第１および第２実施形態では、パンニングモード検出および姿勢検出として手ブレ補正装置を用いた例に実施形態について説明している。しかし、例えば、デジタルカメラに角速度センサや回転検出装置等が取り付けられており、デジタルカメラにて検出できるようにしてもよい。
また、前述の実施形態では、デジタルカメラ１には１つのシャッターボタンが搭載されている。しかし、例えば、横撮り姿勢で撮影するシャッターボタンと、縦撮り姿勢で撮影するシャッターボタンと、がそれぞれ搭載されていてもよい。この場合、２つのシャッターボタンからの信号に基づいて、撮影姿勢の判別を行うことが可能となる。【００７７】
（５）
第１および第２実施形態では、撮影姿勢は、横撮り姿勢の場合を基準として光軸ＡＸを中心に右側に９０°回転させた姿勢を縦撮り姿勢としている。しかし、縦撮り姿勢を左側に９０°回転させた姿勢とした場合であっても、前述と同様の効果を得ることができる。この場合、左側に９０゜回転させた姿勢の姿勢判別信号６１を「２」とし、横撮り姿勢が１種類、縦撮り姿勢が２種類の合計３種類の姿勢を検出できるようにしてもよい。
（６）
第１および第２実施形態では、姿勢判別信号６１として「０」および「１」の２種類の信号が画像に付加される。しかし、例えば、一方の姿勢（例えば縦撮り姿勢）のみに信号を付加する方法も考えられる。また、姿勢判別信号６１が画像に記録する方法に限らず、姿勢判別信号６１が画像とは別のファイルに記録され、姿勢判別信号６１が記録されたファイルと画像とを対応させる方法を用いてもよい。同様に、パンニングモード信号６０、動きベクトル信号６２も、画像ファイルと別ファイルに記録され、そのファイルと画像とを対応させる方法を用いてもよい。【００７８】
（７）
再生モードにおいてデジタルカメラ１を縦撮り姿勢にした場合、図３３に示すように横長の画像を縦に並べた方が、図２６に示す状態よりも各画像を大きく表示することができる。このため、再生モード時において姿勢検出を行い、デジタルカメラ１が縦撮り姿勢である場合に画像の配置を縦にすることで、表示部５５を効率よく利用することができる。
（８）
前述の各実施形態を組み合わせることも可能である。例えば、第１実施形態と第２実施形態とを組み合わせることもできる。より具体的には、第１実施形態において、パンニング垂直方向および水平方向成分がともに「無し」の場合、すなわち、パンニングモード信号６０が「０」の場合、デジタルカメラ１が動かないように保持されている。このため、この場合に画像から動きベクトル信号６２を生成し、第２実施形態のように動きベクトル信号６２に基づいて画像の配置を決定する場合も考えられる。パンニングモード信号６０が「０」以外の場合は、パンニングモード信号６０を優先することも考えられる。【００７９】
また、以上説明したカメラは、このカメラの撮影制御方法を機能させるためのプログラムでも実現される。このプログラムはコンピュータで読み取り可能な記録媒体に格納されている。
（９）
前述の実施形態では、動画像を形成する複数の静止画像から静止画像よりも少ない枚数の抽出画像が生成されているが、動画像を形成する複数の静止画像が全て抽出画像として生成されてもよい。
（１０）
前述の実施の形態では、動画像における被写体の動きに関する第１動き情報を、一旦記録部に記録された動画像に基づいて生成し、かつ複数の抽出画像を生成しているが、動画撮影中に静止画像も同時に記録できるという別の機能を利用して、例えば、動画撮影中にＳＥＴボタン４０を押すことにより、動画像と共に静止画像を記録し、その際に第１動き情報を生成すると共に、抽出画像を生成する構成としてもよい。
【産業上の利用可能性】
【００８０】
以上に説明した技術によれば、並べて表示された複数の静止画像に対する違和感を緩和することができる表示制御装置、撮像装置および印刷装置を提供することができる。したがって、以上に説明した表示制御装置、撮像装置および印刷装置は、複数の画像を並べて表示できる装置に好適である。
【図１】
2009122720.tif 000003
【図２】
2009122720.tif 000004
【図３】
2009122720.tif 000005
【図４】
2009122720.tif 000006
【図５】
2009122720.tif 000007
【図６】
2009122720.tif 000008
【図７】
2009122720.tif 000009
【図８】
2009122720.tif 000010
【図９】
2009122720.tif 000011
【図１０】
2009122720.tif 000012
【図１１】
2009122720.tif 000013
【図１２】
2009122720.tif 000014
【図１３】
2009122720.tif 000015
【図１４】
2009122720.tif 000016
【図１５】
2009122720.tif 000017
【図１６】
2009122720.tif 000018
【図１７】
2009122720.tif 000019
【図１８】
2009122720.tif 000020
【図１９】
2009122720.tif 000021
【図２０】
2009122720.tif 000022
【図２１】
2009122720.tif 000023
【図２２】
2009122720.tif 000024
【図２３】
2009122720.tif 000025
【図２４】
2009122720.tif 000026
【図２５】
2009122720.tif 000027
【図２６】
2009122720.tif 000028
【図２７】
2009122720.tif 000029
【図２８】
2009122720.tif 000030
【図２９】
2009122720.tif 000031
【図３０】
2009122720.tif 000032
【図３１】
2009122720.tif 000033
【図３２】
2009122720.tif 000034
【図３３】
2009122720.tif 000035
【手続補正書】
【提出日】平成22年8月31日(2010.8.31)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
筐体に収容された画像取得部により取得された画像を表示部に表示させる表示制御装置であって、
前記画像取得部により連続的に取得された複数の静止画像により形成される動画像を記録可能な記録部と、
前記動画像における被写体の動きに関する第１動き情報を、前記記録部に記録された前記動画像に基づいて生成する動き情報生成部と、
前記動画像を形成する前記複数の静止画像から複数の抽出画像を生成する抽出画像生成部と、
前記第１動き情報に基づいて前記複数の抽出画像の配置を決定する配置決定部と、
前記配置決定部での決定結果に基づいて、前記複数の抽出画像のうち少なくとも２つの前記抽出画像を前記表示部に並べて表示させる画像表示制御部と、
を備えた表示制御装置。
【請求項２】
前記動き情報生成部は、前記動画像から抽出された前記複数の抽出画像に基づいて前記第１動き情報を生成する、
請求項１に記載の表示制御装置。
【請求項３】
前記配置決定部は、隣り合う２つの前記抽出画像により形成される時間ベクトルの向きが、前記第１動き情報に含まれる動きの方向の一成分と概ね一致するように、前記複数の抽出画像の配置を決定する、
請求項１または２に記載の表示制御装置。
【請求項４】
前記記録部は、前記動画像の取得時の前記筐体の動き方向に関する第２動き情報を前記動画像とともに記録可能であり、
前記動き情報生成部は、前記第２動き情報を利用して前記第１動き情報を生成する、
請求項１から３のいずれかに記載の表示制御装置。
【請求項５】
前記抽出画像と前記第１動き情報とを関連付けて前記記録部に記録するように制御する画像記録制御部をさらに備えた、
請求項１から４のいずれかに記載の表示制御装置。
【請求項６】
筐体と、
前記筐体に支持され被写体の光学的な像を形成する光学系と、
前記光学系により形成された光学的な像を電気的な画像信号に変換し、前記被写体の画像を取得する前記画像取得部と、
前記画像取得部により取得された複数の画像を並べて表示可能な表示部と、
前記筐体の動き方向を検出する動き検出部と、
請求項１から５のいずれかに記載の表示制御装置と、
を備えた撮像装置。
【請求項７】
前記筐体の姿勢に関する姿勢情報を取得する姿勢検出部をさらに備え、
前記記録部には、前記画像とともに前記姿勢情報が記録されており、
前記画像表示制御部は、前記表示部に前記画像が表示された状態で前記画像における天地方向が鉛直方向と概ね一致するように、前記表示部に対する前記画像の表示状態を調整する、
請求項６に記載の撮像装置。
【請求項８】
前記筐体の動きに起因する画像の劣化を抑制する手ブレ補正装置をさらに備え、
前記手ブレ補正装置は、前記光学系に含まれる補正レンズと、前記補正レンズを前記補正レンズの光軸に直交する第１方向と前記光軸および第１方向に直交する第２方向とに移動可能に保持する駆動枠と、前記補正レンズを前記第１方向に駆動する第１アクチュエータと、前記補正レンズを前記第２方向に駆動する第２アクチュエータと、を有しており、
前記姿勢検出部は、前記第１アクチュエータおよび第２アクチュエータの駆動力に基づいて前記筐体の姿勢を検出する、
請求項７に記載の撮像装置。
【請求項９】
前記動画像から選択された前記複数の抽出画像を互いに関連付けして前記記録部に記録させる記録制御部をさらに備えた、
請求項６から８のいずれかに記載の撮像装置。
【請求項１０】
請求項１から５のいずれかに記載の表示制御装置と、
前記表示部に表示された画像を印刷する印刷部と、
を備えた印刷装置。 
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【発明の詳細な説明】
【技術分野】
【０００１】
技術分野は、複数の画像を並べて表示できる表示制御装置に関する。
【背景技術】
【０００２】
近年、ＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）やＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ−Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）などのイメージセンサおよび信号処理の集積度が向上し、かつ安価に提供できるようになっている。このため、被写体の光学的な像を電気的な画像信号に変換して出力可能な撮像装置が急速に普及している。撮像装置としては、例えばデジタルスチルカメラやデジタルビデオカメラ（以下、単にデジタルカメラという）が考えられる。特に、静止画撮影および動画撮影の両方の機能を備えた撮像装置が主流となりつつある。
【０００３】
このデジタルカメラの主要機能の一つとして、撮影した動画像から複数の静止画像を作成する機能がある。複数の静止画像を作成する方法としては、動画撮影中に静止画撮影を行う際に動画撮影を一時中断して静止画撮影を行う方法と、動画撮影後に撮影された動画像の中から任意の画像フレームを選択して選択された画像フレームから静止画像を生成する方法とがある。
【０００４】
従来のデジタルカメラにおいては、撮影した動画像の中から、静止画像を自動的に生成する方法が提案されている（例えば、特許文献１を参照）。
【０００５】
また、多くのデジタルカメラは、小型表示装置を搭載しており、画像を１枚ずつ表示する機能、あるいは複数の画像を一覧表示（以下、サムネイル表示）する機能を有している。より利便性の高い表示方法として、例えば撮影時におけるデジタルカメラの姿勢に応じて画像の表示を行う方法が提案されている（例えば、特許文献２を参照）。
【０００６】
また、複数の画像をつなぎ合わせて１枚のパノラマ画像を作成する装置において、その撮影の進行状態を確認できるようなデジタルカメラも提案されている（例えば、特許文献３を参照）。
【先行技術文献】
【特許文献】
【０００７】
【特許文献１】特開２００５−２２９２３６号公報
【特許文献２】特開２００１−４５３５４号公報
【特許文献３】特開平６−３０３５６２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００８】
車や飛行機などの動いている被写体を撮影する場合、ユーザーは水平方向、垂直方向あるいは斜め方向にデジタルカメラを動かしながら撮影を行う。このようにデジタルカメラの向きを振ることをパンニングという。パンニングにより撮影された動画像から生成された静止画像（以下、パンニング画像）をサムネイル表示する場合、従来は撮影された日時順に並べて表示される。
【０００９】
しかし、動画像から生成した静止画像を表示する際、従来のようなサムネイル表示では、パンニング画像が並んでいる方向がデジタルカメラの動く方向あるいは撮影時の被写体の動く方向と必ずしも一致しないため、これらの静止画像に対してユーザーが違和感を覚える場合がある。
【００１０】
これは、撮像装置に限らず、印刷装置により画像が印刷された場合も同様である。
【００１１】
本発明の課題は、並べて表示された複数の画像に対する違和感を緩和することができる表示制御装置、撮像装置および印刷装置を提供することにある。
【課題を解決するための手段】
【００１２】
第１の特徴に係る表示制御装置は、画像取得部により取得された画像を表示部に表示させる表示制御装置であって、記録部と、動き情報生成部と、抽出画像生成部と、配置決定部と、画像表示制御部と、を備えている。記録部は、画像取得部により連続的に取得された複数の静止画像により形成される動画像を記録可能である。動き情報生成部は、動画像における被写体の動きに関する第１動き情報を、記録部に記録された動画像に基づいて生成する。抽出画像生成部は、動画像を形成する複数の静止画像から複数の抽出画像を生成する。配置決定部は、第１動き情報に基づいて複数の抽出画像の配置を決定する。画像表示制御部は、配置決定部での決定結果に基づいて、複数の抽出画像のうち少なくとも２つの抽出画像を表示部に並べて表示させる。
【００１３】
この表示制御装置では、抽出画像生成部にて動画像から複数の抽出画像が生成され、動画像から生成された第１動き情報に基づいて複数の抽出画像の配置が配置決定部により決定される。このため、動画像における被写体の動きに合わせて、抽出画像の配置を調整することができる。これにより、被写体の動きの方向を抽出画像が配置される方向と概ね一致させることができ、並べて表示された複数の画像に対する違和感を緩和することができる。
【００１４】
ここで、表示制御装置が搭載される装置としては、デジタルビデオカメラ、デジタルスチルカメラ、デジタル一眼レフカメラ、カメラ機能付き携帯電話端末、カメラ機能付きＰＤＡ（Personal Digital Assistant）、カメラ機能付きＰＣ（Personal Computer）、ＤＶＤ（Digital Video Disc）レコーダおよびハードディスクレコーダが考えられる。画像取得部は、例えば、光電変換により画像信号を生成するセンサ（ＣＣＤ、ＣＭＯＳ）を含んでいる。
【００１５】
第２の特徴に係る表示制御装置は、第１の特徴に係る装置において、動き情報生成部は、動画像から抽出された複数の抽出画像に基づいて第１動き情報を生成する。
【００１６】
第３の特徴に係る表示制御装置は、第１または第２の特徴に係る装置において、隣り合う２つの抽出画像により形成される時間ベクトルの向きが、第１動き情報に含まれる動きの方向の一成分と概ね一致するように、配置決定部が複数の抽出画像の配置を決定する。
【００１７】
ここで、「時間ベクトル」とは、異なるタイミングで取得された２つの静止画像を並べた場合に先に取得された静止画像の中心から後に取得された静止画像の中心に向かって延びるベクトルを意味している。「時間ベクトルの向きが動きの方向の一成分と概ね一致する」とは、時間ベクトルの向きが動き方向の一成分と完全に一致している場合の他に、表示された静止画像に対する違和感を緩和できるという効果を確保できる範囲内で、時間ベクトルの向きが動き方向の一成分に対してずれている場合も含まれる。
【００１８】
第４の特徴に係る表示制御装置は、第１から第３のいずれかの特徴に係る表示制御装置において、記録部は、動画像の取得時の筐体の動き方向に関する第２動き情報を動画像とともに記録部に記録可能であり、動き情報生成部は、第２動き情報を利用して第１動き情報を生成する。
【００１９】
第５の特徴に係る撮像装置は、筐体と、光学系と、画像取得部と、表示部と、動き検出部と、第１から第４のいずれかの特徴に係る表示制御装置と、を備えている。光学系は、筐体に支持されており、被写体の光学的な像を形成する。画像取得部は、光学系により形成された光学的な像を電気的な画像信号に変換し、被写体の画像を取得する。表示部は、画像取得部により取得された複数の画像を並べて表示可能である。
【００２０】
ここで、撮像装置は、例えば、動画像の撮影が可能な装置や動画像および静止画像の撮影が可能な装置である。撮像装置の例としては、デジタルビデオカメラ、デジタルスチルカメラおよびデジタル一眼レフカメラが挙げられる。また、撮像装置の他の例としては、カメラ機能付き携帯電話端末、カメラ機能付きＰＤＡ（Personal Digital Assistant）およびカメラ機能付きＰＣ（Personal Computer）が挙げられる。
【００２１】
第６の特徴に係る撮像装置は、第５の特徴に係る装置において、筐体の姿勢に関する姿勢情報を取得する姿勢検出部をさらに備えている。記録部には、画像とともに姿勢情報が記録されている。画像表示制御部は、表示部に画像が表示された状態で画像における天地方向が鉛直方向と概ね一致するように、表示部に対する画像の表示状態を調整する。
【００２２】
第７の特徴に係る撮像装置は、第６の特徴に係る装置において、筐体の動きに起因する画像の劣化を抑制する手ブレ補正装置をさらに備えている。手ブレ補正装置は、光学系に含まれる補正レンズと、補正レンズを補正レンズの光軸に直交する第１方向と光軸および第１方向に直交する第２方向とに移動可能に保持する駆動枠と、補正レンズを第１方向に駆動する第１アクチュエータと、補正レンズを第２方向に駆動する第２アクチュエータと、を有している。姿勢検出部は、第１アクチュエータおよび第２アクチュエータの駆動力に基づいて筐体の姿勢を検出する。
【００２３】
第８の特徴に係る撮像装置は、第５から第７のいずれかの特徴に係る装置において、動画像から選択された複数の抽出画像を互いに関連付けして記録部に記録させる記録制御部をさらに備えている。
【００２４】
第９の特徴に係る印刷装置は、第１から第４のいずれかの特徴に係る表示制御装置と、表示部に表示された画像を印刷する印刷部と、を備えている。
【００２５】
ここで、印刷装置は、例えば用紙に画像を印刷できる装置である。
【発明の効果】
【００２６】
以上に説明した技術によれば、並べて表示された複数の静止画像に対する違和感を緩和することができる表示制御装置、撮像装置および印刷装置を提供することができる。
【図面の簡単な説明】
【００２７】
【図１】デジタルカメラの制御システムを示すブロック図
【図２】（Ａ）は、デジタルカメラの上面図、（Ｂ）はデジタルカメラの背面図
【図３】手ブレ補正装置のハード構成図
【図４】手ブレ補正装置の分解斜視図
【図５】パンニングモード信号を示す図
【図６】（Ａ）および（Ｂ）手ブレ補正装置の姿勢を示す図
【図７】撮影姿勢別のコイル供給電流量を示す図
【図８】姿勢判別信号を示す図
【図９】動画像ファイルと生成画像ファイルの対応を示す図
【図１０】図９をさらに詳細に説明した図
【図１１】撮影した画像ファイルの管理方法を説明する図
【図１２】連写した画像ファイルの管理方法を説明する図
【図１３】時間ベクトルとパンニング方向との関係を示す図
【図１４】パンニング撮影状態を説明する図
【図１５】撮影方法を説明するフローチャート
【図１６】再生方法を説明するフローチャート
【図１７】再生方法を説明するフローチャート
【図１８】再生方法を説明するフローチャート
【図１９】再生方法を説明するフローチャート
【図２０】再生方法を説明するフローチャート
【図２１】連写画像フォルダごとのサムネイル表示の一例
【図２２】連写された画像のサムネイル表示の一例
【図２３】基準画像の表示例
【図２４】基準画像および比較画像の表示例（抽出画像フォルダ（＃１））
【図２５】基準画像および比較画像の表示例（抽出画像フォルダ（＃１））
【図２６】基準画像および比較画像の表示例（抽出画像フォルダ（＃２））
【図２７】基準画像および比較画像の表示例（抽出画像フォルダ（＃３））
【図２８】パンニング撮影状態を説明する図（第２実施形態）
【図２９】動きベクトル検出部のハードウェア構成図（第２実施形態）
【図３０】デジタルカメラおよび表示装置を示す図（第４実施形態）
【図３１】デジタルカメラおよび印刷装置を示す図（第５実施形態）
【図３２】表示制御装置、印刷制御装置、および表示印刷制御装置を示す図（第６実施形態）
【図３３】基準画像および比較画像の表示例（他の実施形態）
【発明を実施するための最良の形態】
【００２８】
（第１実施形態）
＜デジタルカメラの全体構成＞
図１および図２を用いて第１実施形態に係るデジタルカメラ１について説明する。図１はデジタルカメラ１の概略構成を示すブロック図である。図２（Ａ）図２（Ａ）はデジタルカメラ１の上面図である。図２（Ｂ）はデジタルカメラ１の背面図である。図２に示すように、デジタルカメラ１の光軸ＡＸに沿った方向をＺ軸方向、デジタルカメラ１の左右方向をＸ軸方向、デジタルカメラ１の上下方向をＹ軸方向とする。なお、これらの方向はデジタルカメラ１の使用状態を限定するものではない。
【００２９】
図１に示すように、デジタルカメラ１（撮像装置の一例）は、光学系Ｌと、マイクロコンピュータ３と、イメージセンサ４（画像取得部の一例）と、ＣＣＤ駆動制御部５と、シャッター制御部４１と、シャッター駆動モータ４２と、を有している。
【００３０】
光学系Ｌは、被写体の光学的な像を形成するための光学系であり、３つのレンズ群Ｌ１、Ｌ２、Ｌ３を含んでいる。光学系Ｌはレンズ鏡筒２により支持されている。第１レンズ群Ｌ１は、フォーカシングを行うためのレンズ群であり、光軸に沿った方向に移動可能に設けられている。第３レンズ群Ｌ３は、ズーミングを行うためのレンズ群であり、光軸ＡＸに沿った方向に移動可能に設けられている。第２レンズ群Ｌ２は、デジタルカメラ１の動きに起因する画像の振れを補正するためのレンズ群であり、光軸ＡＸに垂直な面内を移動可能なように設けられている。第２レンズ群Ｌ２により光軸を偏心させることで画像の振れを補正することができる。第２レンズ群Ｌ２は、後述する手ブレ補正装置２０に含まれている。
【００３１】
マイクロコンピュータ３は、デジタルカメラ１全体を制御するユニットであり、各ユニットに接続されている。
【００３２】
シャッター制御部４１は、シャッターを動作させるために、マイクロコンピュータ３からの制御信号に基づいてシャッター駆動モータ４２を駆動する。シャッターボタン３６を操作することにより得られるタイミング信号に基づいて、この制御信号はマイクロコンピュータ３により生成される。
【００３３】
イメージセンサ４は、例えばＣＣＤであり、光学系Ｌにより形成される光学的な像を電気的な画像信号に変換する。イメージセンサ４の駆動は、ＣＣＤ駆動制御部５により制御される。なお、イメージセンサ４は、ＣＭＯＳセンサでもよい。
【００３４】
図１に示すように、外部から操作情報を入力するために、デジタルカメラ１には操作部３４が設けられている。具体的には、操作部３４は、電源スイッチ３５と、シャッターボタン３６と、モード切換ダイアル３７と、十字操作キー３８と、ＭＥＮＵ設定ボタン３９と、ＳＥＴボタン４０と、を有している。マイクロコンピュータ３は、操作部３４と接続されており、操作部３４からの信号を受信可能である。
【００３５】
図２（Ａ）および図２（Ｂ）に示すように、筐体１ａの前面には、光学系Ｌおよびレンズ鏡筒２が配置されており、背面には電源スイッチ３５と、モード切換ダイアル３７と、十字操作キー３８と、ＭＥＮＵ設定ボタン３９と、ＳＥＴボタン４０と、動画撮影操作ボタン４５と、表示部５５と、が配置されている。筐体１ａの上面には、シャッターボタン３６と、ズーム操作レバー５７と、が配置されている。
【００３６】
ズーム操作レバー５７は、シャッターボタン３６と同軸に回転可能となるように、シャッターボタン３６の周囲に設けられている。電源スイッチ３５は、デジタルカメラ１の電源のＯＮ／ＯＦＦを行うためのスイッチである。モード切換ダイアル３７は、静止画撮影モード、動画撮影モードおよび再生モードを切り換えるためのダイアルであり、ユーザーはモード切換ダイアル３７を回転させてモードを切換えることができる。モード切換ダイアル３７により静止画撮影モードが選択されると、撮影モードを静止画撮影モードへ切り換えることができ、モード切換ダイアル３７により動画撮影モードが選択されると、撮影モードを動画撮影モードへ切り換えることができる。動画撮影モードでは、基本的に動画撮影が可能となる。さらに、モード切換ダイアル３７により再生モードが選択されると、モードを再生モードへ切り換えることができ、表示部５５に撮影画像を表示させることができる。また、静止画撮影モード、あるいは動画撮影モードに切換えられた状態で、ズーム操作レバー５７を右方向へ回転させるとレンズ鏡筒２はズームモータ（図示せず）により望遠側へ駆動され、左方向へ回転させるとレンズ鏡筒２はズームモータにより広角側へ駆動される。ズームモータの動作はマイクロコンピュータ３により制御される。
動画撮影操作ボタン４５は、動画撮影の開始および停止を指示するボタンであり、モード切換ダイアル３７において設定された撮影モードが静止画撮影モードまたは再生モードであっても、この動画撮影操作ボタン４５を押すことにより、モード切換ダイアル３７での設定内容に関係なく、強制的に動画撮影モードが開始される。さらに、動画撮影モードにおいて、この動画撮影操作ボタン４５を押すことにより、動画撮影が終了し、静止画撮影モード、あるいは再生モードへと移行する。
【００３７】
ＭＥＮＵ設定ボタン３９は、表示部５５に各種メニューを表示させるためのボタンである。十字操作キー３８は、撮影者等が上下左右の部位を押圧して、ＭＥＮＵ設定ボタン３９の操作により表示部５５に表示された各種メニューから所望のメニューまたは項目を選択するためのボタンである。ＳＥＴボタン４０は、各種メニューの実行を確定するためのボタンである。なお、このＳＥＴボタン４０は別機能として、動画撮影中に押すことにより、静止画像も同時に撮影するシャッターボタンの役割も果たす。
【００３８】
図１に示すように、デジタルカメラ１は、アナログ信号処理部６と、Ａ／Ｄ変換部７と、デジタル信号処理部８と、バッファメモリ９と、画像圧縮部１０と、画像記録制御部１１と、画像記録部１２と、画像表示制御部１３と、表示部としての表示部５５と、をさらに有している。
【００３９】
イメージセンサ４から出力された画像信号は、アナログ信号処理部６、Ａ／Ｄ変換部７、デジタル信号処理部８、バッファメモリ９および画像圧縮部１０により順次処理される。アナログ信号処理部６は、イメージセンサ４から出力される画像信号にガンマ処理等のアナログ信号処理を施す。Ａ／Ｄ変換部７は、アナログ信号処理部６から出力されたアナログ信号をデジタル信号に変換する。デジタル信号処理部８は、Ａ／Ｄ変換部７によりデジタル信号に変換された画像信号に対してノイズ除去や輪郭強調等のデジタル信号処理を施す。バッファメモリ９は、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）であり、デジタル信号処理部８により処理された画像信号を一時的に記憶する。
【００４０】
さらに、バッファメモリ９に記憶された画像信号は、画像圧縮部１０および画像記録部１２により順次処理される。バッファメモリ９に記憶された画像信号は、画像記録制御部１１の指令により、画像圧縮部１０に送信され、画像信号のデータは圧縮される。この際、画像信号は、この圧縮処理により、元のデータよりも小さなデータサイズになる。例えば、この圧縮方式として、静止画の場合には、例えばＪＰＥＧ（Ｊｏｉｎｔ  Ｐｈｏｔｏｇｒａｐｈｉｃ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）方式が用いられる。また、動画の場合には、例えば、ＭＰＥＧ（Ｍｏｖｉｎｇ Ｐｉｃｔｕｒｅ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）方式が用いられる。また同時に、画像圧縮部１０はサムネイル表示等に用いられる画像に対応する縮小画像信号についても生成する。その後、圧縮された画像信号および縮小画像信号は、画像記録部１２へ送信される。なお本実施形態においては、静止画についてはＪＰＥＧ方式、動画についてはＭＰＥＧ方式を用いて説明するが、その方式については限定されるものではない。
【００４１】
画像記録部１２は、デジタルカメラ１本体に設けられた図示しない内部メモリ５０や着脱可能なリムーバブルメモリ５１などにより構成されており、画像記録制御部１１の指令に基づいて、画像信号（動画像と静止画像）と、対応する縮小画像信号と、所定の情報と、を関連付けて記録する。これらの画像信号とともに記録される所定の情報としては、例えば、画像を撮影した際の日時、焦点距離情報、シャッタースピード情報、絞り値情報、撮影モード情報などが挙げられる。また、このデジタルカメラ１では、所定の情報としては、後述するデジタルカメラ１の姿勢情報、パンニングモード情報および被写体の動き情報が含まれている。
【００４２】
画像表示制御部１３は、マイクロコンピュータ３からの制御信号により制御される。この画像表示制御部１３の指令により、表示部５５は、画像記録部１２あるいはバッファメモリ９に記録された画像信号を可視画像として表示する。表示部５５の表示形態としては、画像信号のみを表示する形態と、画像信号とともに前述の所定の情報を表示する形態と、がある。所定の情報の表示は、例えばＭＥＮＵ設定ボタン３９の操作により切り替えられる。
【００４３】
＜手ブレ補正装置の構成＞
次に、図３および図４を用いて手ブレ補正装置２０の構成について説明する。図３は手ブレ補正装置２０の分解斜視図である。
【００４４】
機械的な振動やユーザーの手の揺れ等がデジタルカメラ１に加わると、被写体からレンズに入射する光の光軸がレンズの光軸とずれ、得られる画像が不鮮明となる。このような画像の振れを防ぐために、デジタルカメラ１には手ブレ補正装置２０が搭載されている。具体的には図３および図４に示すように、手ブレ補正装置２０は、ピッチング保持枠２１と、ヨーイング保持枠２２と、固定枠２５と、ヨーイングアクチュエータ２９ｘと、ピッチングアクチュエータ２９ｙと、発光素子３０と、受光素子３１と、を有している。
【００４５】
ピッチング保持枠２１には、コイル２４ｘ、２４ｙが設けられている。第２レンズ群Ｌ２および発光素子３０は、ピッチング保持枠２１に固定されている。ピッチング保持枠２１は、２本のピッチングシャフト２３ａ、２３ｂを介して、ヨーイング保持枠２２によりＹ方向に相対移動可能に保持されている。
【００４６】
ヨーイング保持枠２２は、ヨーイングシャフト２６ａ、２６ｂを介して、固定枠２５によりＸ方向に相対移動可能に保持されている。ヨーイングアクチュエータ２９ｘは、マグネット２７ｘとヨーク２８ｘとを有しており、固定枠２５に保持されている。ピッチングアクチュエータ２９ｙは、マグネット２７ｙとヨーク２８ｙとを有しており、固定枠２５に保持されている。受光素子３１は、固定枠２５に固定されており、発光素子３０からの投射光を受光する。発光素子３０および受光素子３１により、第２レンズ群Ｌ２の２次元の位置座標を検出することが可能となる。
【００４７】
図４に示すように、手ブレ補正装置２０は、動き補正部１５Ａと、姿勢検出部１４Ａと、第１動き検出部としての動き検出部１７Ａと、マイクロコンピュータ３を含む信号処理部３Ａと、をさらに有している。動き補正部１５Ａは、第２レンズ群Ｌ２と、ヨーイング駆動制御部１５ｘと、ピッチング駆動制御部１５ｙと、位置検出部１６と、を含んでいる。第２レンズ群Ｌ２の光軸ＡＸに直交する２方向（Ｘ軸方向およびＹ軸方向）への駆動は、ヨーイング駆動制御部１５ｘおよびピッチング駆動制御部１５ｙにより制御される。以下、Ｘ軸方向をヨーイング方向、Ｙ軸方向をピッチング方向とする。位置検出部１６は、受光素子３１の出力に基づいて第２レンズ群Ｌ２のＸ−Ｙ平面内における位置を検出するためのユニットであり、ヨーイング駆動制御部１５ｘおよびピッチング駆動制御部１５ｙとともに、第２レンズ群Ｌ２の動作を制御するための帰還制御ループを形成している。
【００４８】
姿勢検出部１４Ａは、ヨーイング電流値検出部１４ｘと、ピッチング電流値検出部１４ｙと、を含んでいる。ヨーイング電流値検出部１４ｘは、後述するヨーイングアクチュエータ２９ｘが動作する際にコイル２４ｘに流れる電流値を検出する。ピッチング電流値検出部１４ｙは、ピッチングアクチュエータ２９ｙが動作する際にコイル２４ｙに流れる電流値を検出する。これらの電流値を検出することで、デジタルカメラ１の姿勢を検出することができる。
【００４９】
動き検出部１７Ａは、ヨーイング角速度センサ１７ｘと、ピッチング角速度センサ１７ｙと、を含んでいる。角速度センサ１７ｘおよび１７ｙは、ユーザーの手ブレおよびその他の振動などによる光学系Ｌを含むデジタルカメラ１自体の動きを検出するためのセンサであり、それぞれヨーイング方向およびピッチング方向の動きを検出する。より詳細には、ヨーイング角速度センサ１７ｘは、主にＹ軸回りのデジタルカメラ１の角速度を検出するためのセンサである。ピッチング角速度センサ１７ｙは、主にＸ軸回りのデジタルカメラ１の角速度を検出するためのセンサである。角速度センサ１７ｘ、１７ｙは、デジタルカメラ１が静止している状態での出力を基準とし、デジタルカメラ１の動く方向により正負両方の角速度信号を出力する。出力された信号は、信号処理部３Ａにて処理される。
【００５０】
信号処理部３Ａは、マイクロコンピュータ３と、Ａ／Ｄ変換部１８ｘ、１８ｙと、Ｄ／Ａ変換部１９ｘ、１９ｙと、を含んでいる。角速度センサ１７ｘ、１７ｙから出力された信号は、フィルタ処理、アンプ処理等が施された後、Ａ／Ｄ変換部１８ｘ、１８ｙでデジタル信号に変換され、マイクロコンピュータ３に出力される。マイクロコンピュータ３は、Ａ／Ｄ変換部１８ｘ、１８ｙを介して取り込んだ角速度センサ１７ｘ、１７ｙの出力信号に対して、フィルタリング、積分処理、位相補償、ゲイン調整、クリップ処理等を施す。これらの各処理を施すことにより、マイクロコンピュータ３は、動き補正に必要な第２レンズ群Ｌ２の駆動制御量を演算し、制御信号を生成する。生成された制御信号は、Ｄ／Ａ変換部１９ｘ、１９ｙを介して、ヨーイング駆動制御部１５ｘおよびピッチング駆動制御部１５ｙに出力される。これにより、ヨーイング駆動制御部１５ｘおよびピッチング駆動制御部１５ｙは、制御信号に基づき、第２レンズ群Ｌ２を駆動し、画像の振れが補正される。
【００５１】
＜パンニングモード信号＞
このデジタルカメラ１では、角速度センサ１７ｘ、１７ｙを利用して、パンニングの方向などに関するパンニングモード信号６０（第１動き情報）が取得可能である。具体的には、パンニング時には角速度センサ１７ｘ、１７ｙから出力される角速度の符号が同一であり、かつ、出力される角速度が一定レベル以上である状態が連続する。これを利用して、角速度センサ１７ｘ、１７ｙからの角速度信号が一定時間連続してある閾値以上であるか否かをマイクロコンピュータ３により判定する。この判定結果に基づいて、図５に示すようなパンニングモード信号６０がマイクロコンピュータ３により生成される。
【００５２】
例えば、撮影時において、ユーザーが被写体側を向いて右側にパンニングした場合、ピッチング角速度センサ１７ｙの出力信号から垂直（Ｙ軸）方向のパンニングは「無し」とマイクロコンピュータ３により判断される。一方、ヨーイング角速度センサ１７ｘの出力信号からは、水平（Ｘ軸）方向のパンニングは「右方向」とマイクロコンピュータ３により判断される。このため、パンニングモード信号６０は「２」となる。
【００５３】
また、ユーザーが被写体側を向いて左上にパンニングした場合、ピッチング角速度センサ１７ｙの出力信号から垂直方向のパンニングは「上方向」とマイクロコンピュータ３により判断され、ヨーイング角速度センサ１７ｘの出力信号からは、水平方向のパンニングは「左方向」と判断される。このため、パンニングモード信号６０は「４」となる。
【００５４】
このように、ヨーイング角速度センサ１７ｘおよびピッチング角速度センサ１７ｙにより、撮影時におけるデジタルカメラ１の動きを把握することができる。パンニングモード信号６０は表示部５５に表示される画像の配置を決定する際に利用される。
【００５５】
＜姿勢判別信号＞
また、このデジタルカメラ１では、パンニングモード信号６０に加えて、デジタルカメラ１の姿勢を判別するために姿勢判別信号６１がヨーイング電流値検出部１４ｘおよびピッチング電流値検出部１４ｙにより求められる。
【００５６】
次に、ヨーイング電流値検出部１４ｘおよびピッチング電流値検出部１４ｙによる電流値検出方法について、図６および図７を用いて説明する。図６（Ａ）は横撮り姿勢の撮影における手ブレ補正装置２０の姿勢を示しており、図６（Ｂ）は、縦撮り姿勢の撮影における手ブレ補正装置２０の姿勢を示している。図７は、撮影姿勢別のコイル供給電流量を示す図である。ここで、横撮り姿勢とは、表示部５５の長手方向（筐体１ａの長手方向）が水平方向とほぼ一致する姿勢を意味しており、縦撮り姿勢とは、表示部５５の長手方向が鉛直方向とほぼ一致する姿勢を意味している。
【００５７】
図６（Ａ）に示すように、横撮り姿勢の場合、ピッチング方向が鉛直方向とほぼ一致するため、第２レンズ群Ｌ２を保持するピッチング保持枠２１は自重によりＹ軸方向下側へ下がろうとする。このとき、適切な像を得るために第２レンズ群Ｌ２を所定の位置（例えば、光軸ＡＸ中心付近）に保持する必要があるため、電流がコイル２４ｙに供給されピッチング保持枠２１を固定枠２５に対して支持するための電磁力がピッチングアクチュエータ２９ｙで発生する。図７に示すように、このときの電流値を例えば電流値Ｉｙ１とする。
【００５８】
一方、ヨーイング方向が水平方向とほぼ一致するため、ヨーイングアクチュエータ２９ｘはヨーイング保持枠２２やピッチング保持枠２１の自重を支持するために余分な電磁力を発生させる必要がない。このため、コイル２４ｘへ供給される電流値Ｉｘ１は、コイル２４ｙへ供給される電流の電流値Ｉｙ１に比べて小さい。マイクロコンピュータ３は、ヨーイング電流値検出部１４ｘ、１４ｙにより検出された電流値を比較する機能およびデジタルカメラ１の姿勢を判別する機能を有している。このため、マイクロコンピュータ３により電流値Ｉｘ１、Ｉｙ１が比較され、図８に示すようにデジタルカメラ１の姿勢が横撮り姿勢であると判別される。このとき、姿勢判別信号６１は例えば「０」である。
【００５９】
図６（Ｂ）に示すように、縦撮り姿勢の場合、ヨーイング方向が鉛直方向とほぼ一致するため、第２レンズ群Ｌ２およびピッチング保持枠２１を保持するヨーイング保持枠２２は、自重に加えてこれらの部材の重量によりＹ軸方向下側へ下がろうとする。このとき、適切な像を得るために第２レンズ群Ｌ２を所定の位置（例えば、光軸ＡＸ中心付近）に保持する必要があるため、電流がコイル２４ｘに供給されヨーイング保持枠２２を固定枠２５に対して支持するための電磁力がヨーイングアクチュエータ２９ｘで発生する。図７に示すように、このときの電流値を例えば電流値Ｉｘ２とする。
【００６０】
一方、ピッチング方向が水平方向とほぼ一致するため、ピッチングアクチュエータ２９ｙは第２レンズ群Ｌ２やピッチング保持枠２１の自重を支持するために余分な電磁力を発生させる必要がない。このため、コイル２４ｙへ供給される電流値Ｉｙ２は、コイル２４ｘへ供給される電流の電流値Ｉｘ１に比べて小さい。このため、図８に示すように、マイクロコンピュータ３によりデジタルカメラ１の姿勢が縦撮りであると判別される。このとき、姿勢判別信号６１は例えば「１」である。
【００６１】
以上のように、コイル２４ｘ、２４ｙに流れる電流値は、デジタルカメラ１の撮影時の姿勢に応じて変化する。すなわち、デジタルカメラ１の撮影時の姿勢は、コイル２４ｘ、２４ｙに流れる電流値を検出することにより把握することが可能である。したがって、手ブレ補正装置２０は、デジタルカメラ１の動き（いわゆる、手ブレ）に起因する画像の劣化を抑制するための機構であるとともに、デジタルカメラ１の姿勢検出部としても利用することができる。
【００６２】
＜動画像の撮影＞
このデジタルカメラ１は、撮影モードとして静止画撮影モードと動画撮影モードとを有している。
【００６３】
デジタルカメラ１では、動画撮影モードにおいてシャッターボタン３６を押すことにより、あるいは動画撮影操作ボタン４５を押すことにより、動画像ファイルの記録が開始される。図９に示すように、シャッターボタン３６あるいは動画撮影操作ボタン４５が再度押されて動画像ファイルの記録が終了するまで、所定の時間間隔（例えば、１／３０秒間隔）のフレームごとに取得された複数の静止画像が動画像ファイル“９５ａ．ｍｐｇ”として画像記録部１２に記録される。例えば、この動画像ファイル“９５ａ．ｍｐｇ”は、第１フレーム画像、第２フレーム画像、…、第１００フレーム画像を有している。この動画撮影中、先ほど説明したパンニングモード信号および姿勢判別信号も、各フレーム画像とともに画像記録部１２に記録される。
【００６４】
＜動画像から静止画像の生成＞
図９および図１０は動画像ファイルおよび静止画像ファイルの対応を示す図であり、動画像ファイルから静止画像ファイルを生成する際の説明図である。
【００６５】
このデジタルカメラ１では、後述するように、動画像が画像記録部１２に記録された後、記録されている動画像ファイルから複数の抽出画像ファイルを生成できる。例えば、動画像ファイル“９５ａ．ｍｐｇ”中の任意のフレームである第１フレーム、第３１フレーム、第６１フレーム、第９１フレームから、それぞれ抽出画像ファイル“９８ａ００１．ｊｐｇ”、“９８ａ００２．ｊｐｇ”、“９８ａ００３．ｊｐｇ”および“９８ａ００４．ｊｐｇ”が、抽出画像としてそれぞれ新たに生成される。本実施形態では、同じ時間（フレーム）間隔で静止画像を抽出して抽出画像を生成している。これらの抽出画像は、動画像を形成する複数の静止画像のうち代表的な画像と考えることもできる。
【００６６】
また、各フレームの画像とともに前述のパンニングモード信号６０および姿勢判別信号６１が画像記録部１２に記録されているため、生成された抽出画像ファイルに対応するパンニングモード信号６０および姿勢判別信号６１が、各抽出画像ファイルとともに画像記録部１２に記録されている。
【００６７】
なお、動画像から抽出画像が生成される時間（フレーム）間隔および枚数については、ユーザーが自由に設定できる方式であってもよいし、マイクロコンピュータ３により自動的に設定される方式であってもよい。時間間隔や枚数が自動的に決定される場合、例えば、パンニング時のデジタルカメラ１の動きが激しい区間あるいは動画像における被写体の動きが激しい区間での生成間隔を短く、かつ生成枚数を多くすることが考えられる。
【００６８】
＜画像ファイルの管理方法＞
ここで、画像ファイルの管理方法について図１１および図１２を用いて説明する。図１１に示すように、内部メモリ５０またはリムーバブルメモリ５１に、撮影画像フォルダ９０が形成されている。撮影画像フォルダ９０の下の階層に、静止画像フォルダ９１、動画像フォルダ９４および抽出画像フォルダ９６が形成されている。静止画像フォルダ９１の下の階層に、静止画像フォルダ９２ａ、９２ｂなどが形成されている。抽出画像フォルダ９６の下の階層に、抽出画像フォルダ（＃１）９７ａおよび抽出画像フォルダ（＃２）９７ｂなどが形成されている。
【００６９】
動画像ファイル９５ａから生成された複数の抽出画像は、パンニングモード信号６０および姿勢判別信号６１と共に抽出画像群９８ａとして抽出画像フォルダ（＃１）９７ａに格納される。これと同様に、動画像ファイル９５ｂから生成された複数の抽出画像ファイルは、パンニングモード信号６０および姿勢判別信号６１と共に複数の抽出画像９８ｂとして抽出画像フォルダ（＃２）９７ｂに格納される。
【００７０】
また図１２に示すように、抽出画像フォルダ９７ａには、動画像ファイルから生成された９枚の抽出画像“９８ａ００１．ｊｐｇ”から“９８ａ００９．ｊｐｇ”が記録されており、動画像としての撮影時刻が早い順に、“９８ａ”の後ろに「００１」、「００２」がファイルネームの一部として付加される。なお、動画像から生成される抽出画像の枚数は９枚に限定されるものではない。
【００７１】
このように、動画像から新たに生成された複数の抽出画像は、同一のフォルダに格納されているため、関連性のある画像をユーザーが識別しやすくなる。
【００７２】
＜画像の配置決定＞
このデジタルカメラ１では、表示部５５に表示される連写画像の配置が、前述のパンニングモード信号６０に基づいてマイクロコンピュータ３により決定される。具体的には、マイクロコンピュータ３は、動画像から生成された複数の抽出画像に対応するパンニングモード信号６０の種類に応じて、抽出画像を並べた際の時間ベクトルの向きがパンニング動作の方向の一成分と概ね一致するように、複数の抽出画像の配置を決定する。
【００７３】
ここで、「時間ベクトル」とは、異なるタイミングで取得された２つの静止画像を並べた場合に、先に取得された静止画像の中心から後に取得された静止画像の中心に向かって延びるベクトルを意味している。
【００７４】
例えば図１３に示すように、動画像ファイル９５ａにおいて、抽出画像ファイル“９８ａ００１．ｊｐｇ”（以下、第１抽出画像Ｇ）と、抽出画像ファイル“９８ａ００１．ｊｐｇ”よりも後で取得された抽出画像ファイル“９８ａ００２．ｊｐｇ”（以下、第２抽出画像Ｈ）と、を並べた場合、第１抽出画像Ｇの中心ＣＧから第２抽出画像Ｈの中心ＣＨに向かって延びる矢印が時間ベクトルＶを表している。このように、時間ベクトルＶは、動画像撮影時に異なるタイミングで取得された抽出画像群を並べた場合の時間の流れを表している。
【００７５】
そして、図１４に示すように、これらの第１抽出画像Ｇおよび第２抽出画像Ｈは、左方向へ移動する自動車を左方向へパンニングしながら撮影した動画像より生成した静止画像である。このため、パンニング動作の方向の水平成分としてはパンニング方向Ｄとなる。
【００７６】
このように、時間ベクトルＶがパンニング方向Ｄと概ね一致するように第１抽出画像Ｇおよび第２抽出画像Ｈを並べることで、パンニング動作の方向と時間ベクトルとが一致していない（例えば、反対方向）場合に比べて、これらの第１抽出画像Ｇおよび第２抽出画像Ｈに対する違和感が緩和される。
【００７７】
ここで、「時間ベクトルＶの向きがパンニング動作のパンニング方向Ｄと概ね一致する」とは、時間ベクトルＶの向きがパンニング方向Ｄと完全に一致している場合の他に、表示された静止画像に対する違和感を緩和できるという効果を確保できる範囲内で、時間ベクトルＶの向きがパンニング方向Ｄに対してずれている場合も含まれる。
【００７８】
＜デジタルカメラの動作＞
次に、図１から図８を用いてデジタルカメラ１の動作について説明する。
【００７９】
ユーザーが動画像を撮影する際には、まず電源スイッチ３５をＯＮ側とした後、モード切換ダイアル３７を動画撮影モードに切換える。これにより、デジタルカメラ１は動画撮影状態へ移行する。動画撮影状態へ移行すると、デジタルカメラ１の動きは、角速度センサ１７ｘ、１７ｙにより検知される。マイクロコンピュータ３は、ヨーイング駆動制御部１５ｘおよびピッチング駆動制御部１５ｙに対し、発生した手ブレ等を打ち消すための指令信号を与える。この指令信号に応じた電流は、ピッチング保持枠２１のコイル２４ｘ、２４ｙのそれぞれに供給される。ピッチング保持枠２１は、供給された電流とアクチュエータ２７ｘ、２７ｙにおいて発生する電磁力により、光軸ＡＸと直角なＸ−Ｙ平面内を移動する。すなわち、手ブレ補正装置２０により第２レンズ群Ｌ２は、光軸ＡＸと直交する平面内を移動する。また、ピッチング保持枠２１の位置検出は、受光素子３１を用いることにより行われる。これにより、ユーザーは、光学系Ｌを介してイメージセンサ４に入射する光学的な像の補正を行うことができ、手ブレによる画像の劣化が抑制された良好な動画像を取得することが可能となる。
【００８０】
（１）姿勢の判別動作
また、デジタルカメラ１の撮影姿勢の判別は次のようにして行われる。ここで、デジタルカメラ１の基準姿勢を、横撮り姿勢とし、横撮り姿勢における光軸ＡＸ回りの回転角度を０°とする。この場合、縦撮り姿勢は、デジタルカメラ１が横撮り姿勢から光軸ＡＸを中心として９０°回転した状態となる。
【００８１】
ユーザーが横撮り姿勢で、風景など横長の被写体を撮影する場合について説明する。デジタルカメラ１の姿勢は、ヨーイング電流値検出部１４ｘおよびピッチング電流値検出部１４ｙの電流検出値により判断される。図７において、横撮りの姿勢、すなわち０°の姿勢で撮影した場合、ヨーイング電流値検出部１４ｘおよびピッチング電流値検出部１４ｙにより、手ブレ補正装置２０のコイル２４ｘに流れる電流値Ｉｘ１およびコイル２４ｙに流れる電流値Ｉｙ１が検出される。マイクロコンピュータ３が検出された電流値Ｉｘ１およびＩｙ１を比較する。この場合、図７に示すように、電流値Ｉｘ１が電流値Ｉｙ１よりも小さいため、マイクロコンピュータ３によりデジタルカメラ１の姿勢が横撮り姿勢であると判別される。
【００８２】
この状態でユーザーがシャッターボタン３６を押すと、横長の動画像を取得できる。撮影された動画像は、逐次、画像記録部１２に記録される。この際、図８に示すように、画像記録制御部１１は、姿勢判別信号６１として、デジタルカメラ１の撮影姿勢が横撮り姿勢（０°）であることを示す「０」を、バッファメモリ９から出力される画像信号に付加する。この姿勢判別信号６１は、例えば画像信号のヘッダーあるいはフッター部分に記録される。なお、姿勢判別信号６１の記録は、バッファメモリ９から画像信号が出力される際に行われてもよく、あるいは画像記録部１２に画像信号が記録された後に画像記録部１２において行われてもよい。
【００８３】
一方、ユーザーが縦撮り姿勢で、人物など縦長の被写体を撮影する場合、横撮り姿勢の場合と同様に、デジタルカメラ１の姿勢は、ヨーイング電流値検出部１４ｘおよびピッチング電流値検出部１４ｙの電流検出値に基づいてマイクロコンピュータ３により判断される。図７において、縦撮り姿勢で撮影した場合、ヨーイング電流値検出部１４ｘおよびピッチング電流値検出部１４ｙにより、手ブレ補正装置２０のコイル２４ｘに流れる電流値Ｉｘ２およびコイル２４ｙに流れる電流値Ｉｙ２が検出される。マイクロコンピュータ３が検出された電流値Ｉｘ２およびＩｙ２を比較する。この場合、図７に示すように、電流値Ｉｙ２が電流値Ｉｘ２よりも小さいため、マイクロコンピュータ３によりデジタルカメラ１の姿勢が縦撮り姿勢であると判別される。
【００８４】
この状態でユーザーがシャッターボタン３６を押すと、縦長の動画像を取得できる。そして撮影された動画像は、逐次、画像記録部１２に記録される。この際、画像記録制御部１１は、姿勢判別信号６１として、デジタルカメラ１の撮影姿勢が縦撮り姿勢であることを示す「１」を、バッファメモリ９から出力される画像信号に付加する。
【００８５】
（２）パンニングモードの判別動作
次に、ユーザーがパンニングにより動く被写体を追いかけて連写する場合について説明する。
【００８６】
図１４に示すように、左方向に移動している自動車を撮影する場合、自動車の動きに合わせてユーザーはデジタルカメラ１を左方向にパンニングするとともに、動画像を撮影する。これにより、パンニングにより撮影された動画像が一時的にバッファメモリ９に記録され、逐次、画像記録部１２に記録される。このとき、パンニングモード信号６０が各フレーム画像とともに記録される。
【００８７】
ここでは、デジタルカメラ１の向きは左方向へ変化しているため、角速度センサ１７ｙの出力信号からマイクロコンピュータ３により垂直方向パンニングは「無し」と判断され、角速度センサ１７ｘの出力信号からマイクロコンピュータ３により水平方向パンニングは「左方向」と判断される。これにより、パンニングモード信号６０として「１」が各フレーム画像とともに記録される。
【００８８】
また、パンニングモード信号６０とともに、前述の姿勢判別信号６１が記録される。この場合、デジタルカメラ１の姿勢は横撮り姿勢であるため、姿勢判別信号６１として「０」が各フレーム画像とともに記録される。
【００８９】
（３）抽出画像生成モードの動作
デジタルカメラ１では、撮影した動画像から複数の抽出画像を生成できる。図１５は、抽出画像生成モードのフローチャートを示す。
【００９０】
まず、ユーザーが抽出画像生成モードに設定するために、ＭＥＮＵ設定ボタン３９を押すと、表示部５５に各種メニューが表示される。表示された各種メニューから抽出画像生成モードが選択されると、デジタルカメラ１の状態は抽出画像生成モードへ移行する。
【００９１】
抽出画像生成モードが選択されている場合、マイクロコンピュータ３は、初期値０の定数Ｎに１を加えて（Ｓ１）、静止画像の記録先ディレクトリが抽出画像フォルダ（＃１）に設定される（Ｓ２）。ユーザーは、抽出画像生成モードにおいて、動画像から生成する抽出画像の時間間隔、あるいはフレーム間隔等、および抽出画像の生成枚数を設定する（Ｓ３）。
【００９２】
次に、抽出画像の生成を開始するために、シャッターボタン３６（この場合、撮影時のシャッター機能とは別機能）が押されるのを待ち（Ｓ４）、シャッターボタン３６が押された場合には、設定された時間（フレーム）間隔ごとに抽出画像が生成され（Ｓ５）、各抽出画像に対応するパンニングモード信号６０、姿勢判別信号６１および撮影日時などの各情報がマイクロコンピュータ３により一時的に記憶される（Ｓ６）。ここでは、例えばシャッターボタン３６を１度押せば、９枚の抽出画像が連続的に生成される。動画像から生成された９枚の抽出画像は、前述の各情報と共に画像記録部１２の抽出画像フォルダ（＃１）９７ａに記録される（Ｓ７）。より具体的には図１１および図１２に示すように、９枚の抽出画像は抽出画像群９８ａとして抽出画像フォルダ（＃１）９７ａに格納される。
【００９３】
その後、継続して動画像から抽出画像を生成するか否かがマイクロコンピュータ３により判定され（Ｓ８）、継続して動画像から抽出画像を生成する場合は定数Ｎに１を加え（Ｓ９）、新たに抽出画像の生成が行われる（Ｓ６、Ｓ７）。また、継続しない場合には、抽出画像生成モードを終了する。
【００９４】
なお、抽出画像の生成を継続するか否かの判定（Ｓ８）は、その旨を表示部５５に表示し、ユーザーが継続を選択するか否かを基準にマイクロコンピュータ３により判断される。
【００９５】
（４）抽出画像再生モードの動作
次に、図１６〜図２０を用いて、動画像から生成された複数の抽出画像を表示部５５に表示させる再生モードについて説明する。図１６〜図２０は再生モードのフローチャートである。図２１は抽出画像フォルダに格納されている画像のサムネイル表示の一例である。
【００９６】
まず、動画像から生成された抽出画像を画像フォルダごとに表示部５５にサムネイル表示させるために、電源スイッチ３５をＯＮとした後、モード切換ダイアル３７を再生モードに切換える。これにより、再生モードが開始される。
【００９７】
図２１に示すように、表示部５５には、抽出画像フォルダ（＃１）〜（＃９）の９つのサムネイル画像が一覧表示されている（Ｓ１１）。これらの抽出画像フォルダには、抽出画像とともにパンニングモード信号６０および姿勢判別信号６１が格納されている。例えば、抽出画像フォルダ（＃１）９７ａに格納されている複数の抽出画像は、デジタルカメラ１が横撮り姿勢の状態で、左方向に移動している自動車を左方向にパンニングしながら撮影した動画像より生成した複数の抽出画像である。このため、これらの抽出画像とともに、姿勢判別信号６１として「０」、パンニングモード信号６０として「１」が記録されている。表示部５５には、先頭の抽出画像（撮影時刻が最も早い抽出画像）が抽出画像としてサムネイル表示されている。
【００９８】
また、抽出画像フォルダ（＃２）９７ｂに格納されている複数の抽出画像は、デジタルカメラ１が横撮り姿勢の状態で、右方向に移動している自動車を右方向にパンニングしながら撮影した動画像より生成した抽出画像である。このため、これらの抽出画像とともに、姿勢判別信号６１として「０」、パンニングモード信号６０として「２」が記録されている。
【００９９】
さらに、抽出画像フォルダ（＃３）９７ｃのサムネイル画像については、デジタルカメラ１を縦撮り姿勢で、右方向に移動している子供を右方向にパンニングしながら撮影した動画像より生成された抽出画像である。このため、姿勢判別信号６１として「１」、パンニングモード信号６０として「２」が記録されている。表示部５５には、先頭の抽出画像が抽出画像としてサムネイル表示されている。
【０１００】
ここで、姿勢判別信号６１に基づいて、サムネイル表示されている抽出画像は、撮影時と同じ姿勢に復元した状態で表示部５５に表示される。具体的には、姿勢判別信号６１が「０」である場合（図２１に示す抽出画像フォルダ（＃１）９７ａおよび（＃２）９７ｂのサムネイル画像の場合）、動画像が横撮り姿勢で撮影されている。このため、デジタルカメラ１が横撮り姿勢の状態で表示部５５に横長の画像が表示されるように、マイクロコンピュータ３から画像表示制御部１３へ制御信号が送信され、画像表示制御部１３により表示部５５の動作が制御される。この結果、表示部５５に横長の状態で画像が表示される。また、姿勢判別信号６１が「１」である場合（図２１に示す抽出画像フォルダ（＃３）９７ｃのサムネイル画像の場合）、動画像が縦撮り姿勢で撮影されている。このため、姿勢判別信号６１が「０」である場合と同様に、デジタルカメラ１が横撮り姿勢の状態で表示部５５に縦長の画像（９０°回転された画像）が表示される。なお、図２１では、抽出画像フォルダ（＃４）から（＃９）までのサムネイル画像は省略されている。なお図２１に示すように、パンニングモード信号６０については、その動き方向がわかるように、抽出画像中に、例えば矢印にて表示できるようにしても良い。さらには、パンニングの速度に応じて、矢印の大きさを変えるようにしてもよい。具体的には、速度が大きいほど矢印の長さ又は幅が大きくなるようにしてもよい。
【０１０１】
次に、サムネイル表示された画像の中から十字操作キー３８を用いて抽出画像フォルダを選択する（Ｓ１２）。このフォルダの選択は、十字操作キー３８およびＳＥＴボタン４０を用いて行われる。図１９に示す抽出画像フォルダ（＃１）９７ａが選択された場合、図２２に示すように、抽出画像フォルダ（＃１）９７ａ内の９枚の抽出画像（抽出画像群９８ａ）が表示部５５に表示される（Ｓ１３）。各抽出画像の右下には、ファイル名に付加されている３桁の番号が表示される。前述のように、この番号は抽出画像の撮影時刻の前後関係を表している。なお図２２に示すように、パンニングモード信号６０については、その動き方向がわかるように、抽出画像群９８ａ中に、例えば矢印にて表示できるようにしても良い。さらには、パンニングの速度に応じて、矢印の大きさを変えるようにしてもよい。具体的には、速度が大きいほど矢印の長さ又は幅が大きくなるようにしてもよい。
【０１０２】
次に、十字操作キー３８およびＳＥＴボタン４０を用いて、基準となる画像（基準画像）が選択される（Ｓ１４）。このとき、マイクロコンピュータ３では、基準画像の番号を基準番号Ｊに入力し、比較番号Ｋに基準番号Ｊを入力する（Ｓ１５、Ｓ１６）。例えば、基準画像として抽出画像ファイル“９８ａ００３．ｊｐｇ”が選択された場合を想定する。この場合、Ｊ＝「００３」、Ｋ＝「００３」となる。
【０１０３】
ここで、撮影時のパンニング動作に応じて画像の表示配置を最適化するため、マイクロコンピュータ３によりパンニングモード信号６０の確認が行われる（Ｓ１７）。具体的には、パンニングモード信号６０が「１」、「４」、「７」であるか否かがマイクロコンピュータ３により判定される（Ｓ１７）。これらのパンニングモード信号６０は、少なくとも左方向にパンニングしていることを意味しているため、この条件を満たしている場合は、並んで配置された画像の時間ベクトルが左方向を向くように、マイクロコンピュータ３により画像表示制御部１３を介して画像の配置が調整される。この条件を満たしていない場合は、並んで配置された画像の時間ベクトルが右方向を向くように、マイクロコンピュータ３により画像表示制御部１３を介して画像の配置が調整される。
【０１０４】
なお、画像の選択、決定については、十字操作キー３８およびＳＥＴボタン４０を用いて行ったが、表示部５５をタッチパネル方式とし、タッチパネル上を、ユーザーが指で操作できるようにしてもよい。つまり、ユーザーが指で操作することにより、画像のページ送り方向（順送り、逆送り）、あるいはページ送りの速度などを変えるときに、直感的に操作することが可能となる。
【０１０５】
また、パンニングモード信号６０の確認の後に、姿勢判別信号６１の確認が行われる（Ｓ１８、Ｓ１９）。具体的には、姿勢判別信号６１が「０」であるか否かがマイクロコンピュータ３により判定される（Ｓ１８、Ｓ１９）。姿勢判別信号６１が「０」である場合は、横撮り姿勢で動画像の撮影が行われているため、撮影時の姿勢に復元させるために横長の画像が表示部５５に表示される。一方、姿勢判別信号６１が「１」である場合、縦撮り姿勢で動画像の撮影が行われているため、撮影時の姿勢に復元させるために９０°回転された状態で縦長の画像が表示部５５に表示される。
【０１０６】
以下、ステップＳ１７での条件ごとにフローの詳細を説明する。
【０１０７】
Ａ）横撮り姿勢の場合
〔パンニング水平方向成分が「左方向」の場合〕
ステップＳ１７においてパンニングモード信号６０が「１」、「４」、「７」のいずれかであるとマイクロコンピュータ３により判定され、かつ、ステップＳ１８において姿勢判別信号６１が「０」であるとマイクロコンピュータ３により判定された場合、図１７に示すフローＡに基づいて画像の表示が行われる。具体的には図１７に示すように、十字操作キー３８を用いて比較画像の選択が行われる。例えば、十字操作キー３８（または十字操作キー３８の外周側に配置されたダイアル）が右側（右回り）に操作された場合、マイクロコンピュータ３は比較番号Ｋに１を加えて新しい比較番号Ｋに設定する（Ｓ２０、Ｓ２１）。一方、十字操作キー３８（またはダイアル）が左側（左回り）に操作された場合、マイクロコンピュータ３は比較番号Ｋから１を引いて新しい比較番号Ｋに設定する（Ｓ２０、Ｓ２２）。
【０１０８】
次に、基準番号Ｊおよび比較番号Ｋに基づいて画像表示制御部１３により表示部５５に画像が表示される。具体的には図２３に示すように、比較番号Ｋが基準番号Ｊと同じ場合、基準画像のみが画像表示制御部１３により表示部５５に表示される（Ｓ２３、Ｓ２４）。
【０１０９】
一方、基準番号Ｊが比較番号Ｋと異なる場合、基準番号Ｊおよび比較番号Ｋの大小が比較される（Ｓ２５）。比較番号Ｋが基準番号Ｊよりも大きい場合、比較画像は基準画像よりも遅い時刻で取得された画像である。一方で、このフローでは、パンニングの水平方向成分が「左方向」の場合に対応している。このため、基準画像と比較画像とを並べた際の時間ベクトルの向きがパンニングの水平方向成分と同じ左方向になるように、表示部５５において基準画像の左側に比較画像が表示される（Ｓ２６）。このとき、撮影姿勢が横撮り姿勢であるため表示される画像は横長の状態である。
【０１１０】
また、比較番号Ｋが基準番号Ｊよりも小さい場合、比較画像は基準画像よりも早い時刻で取得された画像である。このため、基準画像と比較画像とを並べた際の時間ベクトルの向きがパンニング水平方向と同じ左方向になるように、表示部５５において基準画像の右側に比較画像が表示される（Ｓ２７）。このとき、撮影姿勢が横撮り姿勢であるため表示される画像は横長の状態である。
【０１１１】
例えば、抽出画像フォルダ（＃１）９７ａが選択されている場合、前述のようにパンニングモード信号６０が「１」であるため、このフローＡにより処理が行われる。基準番号Ｊ＝「００３」、比較番号Ｋ＝「００６」とすると、Ｋ＞Ｊである。このため、図２４に示すように、表示部５５において基準画像００３（抽出画像ファイル“９８ａ００３．ｊｐｇ”）の左側に比較画像００６（抽出画像ファイル“９８ａ００６．ｊｐｇ”）が表示される。この場合、基準画像の中心Ｃ３から比較画像の中心Ｃ６に延びる時間ベクトルＶは、パンニング動作の方向と概ね一致する。
【０１１２】
また、比較番号Ｋ＝「００２」である場合、Ｋ＜Ｊであるため、図２５に示すように、表示部５５において基準画像００３（抽出画像ファイル“９８ａ００３．ｊｐｇ”）の右側に比較画像００２（抽出画像ファイル“９８ａ００２．ｊｐｇ”）が表示される。この場合、比較画像の中心Ｃ２から基準画像の中心Ｃ３に延びる時間ベクトルＶは、パンニング動作の方向と概ね一致する。
【０１１３】
このように、このデジタルカメラ１では、動画像から生成された複数の抽出画像が表示される際に、パンニング動作の方向（被写体の移動方向）と画像が配置される方向とが概ね一致するように、マイクロコンピュータ３により自動的に画像の配置が調整される。このため、ユーザーにとって複数の静止画像を確認しやすい表示状態を得ることができ、並んだ複数の画像に対する違和感を緩和できる。
【０１１４】
図１７に示すように、画像の表示動作が完了すると、十字操作キー３８またはＳＥＴボタン４０の操作待ち状態となる（Ｓ２８）。ＳＥＴボタン４０が操作された場合、その時点で表示部５５に基準画像および比較画像が表示されていれば、十字操作キー３８およびＳＥＴボタン４０を用いて、いずれか一方の画像をユーザーが選択画像として選択する（Ｓ２９、Ｓ３０）。例えば、ズーム操作レバー５７を操作することにより、選択画像の拡大表示および縮小表示などの操作を行うことが可能となる。また、基準画像のみが表示されている場合は、基準画像が自動的に選択画像として選択される。
【０１１５】
なお、ＳＥＴボタン４０が操作されず十字操作キー３８が操作される場合、再度フローがステップＳ１８に戻り、ステップＳ１８〜Ｓ２８の動作が繰り返される（Ｓ２９）。
【０１１６】
〔パンニング水平方向成分が「右方向」または「無し」の場合〕
ステップＳ１７においてパンニングモード信号６０が「１」、「４」、「７」のいずれでもないとマイクロコンピュータ３により判定され、かつ、ステップＳ１９において姿勢判別信号６１が「０」であるとマイクロコンピュータ３に判定された場合、図１８に示すフローＢに基づいて画像の表示が行われる。具体的には図１７に示すように、十字操作キー３８を用いて比較画像の選択が行われる。例えば、十字操作キー３８（または十字操作キー３８の外周側に配置されたダイアル）が右側（右回り）に操作された場合、マイクロコンピュータ３は比較番号Ｋに１を加えて新しい比較番号Ｋに設定する（Ｓ３１、Ｓ３２）。一方、十字操作キー３８（またはダイアル）が左側（左回り）に操作された場合、マイクロコンピュータ３は比較番号Ｋから１を引いて新しい比較番号Ｋに設定する（Ｓ３１、Ｓ３３）。
【０１１７】
次に、基準番号Ｊおよび比較番号Ｋに基づいて画像表示制御部１３により表示部５５に画像が表示される。具体的には、比較番号Ｋが基準番号Ｊと同じ場合、基準画像のみが画像表示制御部１３により表示部５５に表示される（Ｓ３４、Ｓ３５）。
【０１１８】
一方、基準番号Ｊが比較番号Ｋと異なる場合、基準番号Ｊおよび比較番号Ｋの大小が比較される（Ｓ３６）。比較番号Ｋが基準番号Ｊよりも大きい場合、比較画像は基準画像よりも遅い時刻で取得された画像である。一方で、このフローＢでは、パンニングの水平方向成分が「右方向」あるいは「無し」の場合に対応している。このため、基準画像と比較画像とを並べた際の時間ベクトルの向きがパンニングの水平方向成分と同じ右方向になるように、表示部５５において基準画像の右側に比較画像が表示される（Ｓ３７）。このとき、撮影姿勢が横撮り姿勢であるため表示される画像は横長の状態である。
【０１１９】
また、比較番号Ｋが基準番号Ｊよりも小さい場合、比較画像は基準画像よりも早い時刻で取得された画像である。このため、基準画像と比較画像とを並べた際の時間ベクトルの向きがパンニング水平方向成分と同じ右方向になるように、表示部５５において基準画像の左側に比較画像が表示される（Ｓ３８）。このとき、撮影姿勢が横撮り姿勢であるため表示される画像は横長の状態である。
【０１２０】
例えば、抽出画像フォルダ（＃２）９７ｂが選択されている場合、前述のようにパンニングモード信号６０が「１」であるため、このフローＢにより処理が行われる。基準番号Ｊ＝「００３」、比較番号Ｋ＝「００６」とすると、Ｋ＞Ｊである。このため、図２６に示すように、表示部５５において基準画像００３の右側に比較画像００６が表示される。
【０１２１】
このように、このデジタルカメラ１では、動画像から生成された複数の抽出画像が表示される際に、被写体の移動方向と画像が配置される方向とが概ね一致するように、マイクロコンピュータ３により自動的に画像の配置が調整される。このため、ユーザーにとって複数の静止画像を確認しやすい表示状態を得ることができる。
【０１２２】
画像の表示動作が完了すると、十字操作キー３８またはＳＥＴボタン４０の操作待ち状態となる（Ｓ３９）。ＳＥＴボタン４０が操作された場合、その時点で表示部５５に基準画像および比較画像が表示されていれば、十字操作キー３８およびＳＥＴボタン４０を用いて、いずれか一方の画像をユーザーが選択画像として選択する（Ｓ４０、Ｓ４１）。例えば、ズーム操作レバー５７を操作することにより、選択画像の拡大表示および縮小表示などの操作を行うことが可能となる。また、基準画像のみが表示されている場合は、基準画像が自動的に選択画像として選択される。
【０１２３】
なお、ＳＥＴボタン４０が操作されず十字操作キー３８が操作される場合、再度フローがステップＳ３１に戻り、ステップＳ３１〜Ｓ３９の動作が繰り返される（Ｓ４０）。
【０１２４】
Ｂ）縦撮り姿勢の場合
〔パンニング水平方向成分が「左方向」の場合〕
図１９に示すフローＣは、基本的には前述のフローＡと同じ工程であるが、ステップＳ４６、Ｓ４８およびＳ４９において、画像が９０°回転された状態で表示される点で、フローＡとは異なる。これは、ステップＳ１８において撮影姿勢が縦撮り姿勢と判定されるためである。その他のステップＳ４２〜Ｓ４５、Ｓ４７、Ｓ５０〜Ｓ５２については、前述のフローＡの対応するステップと同じであるため、詳細な説明は省略する。
【０１２５】
〔パンニング水平方向成分が「右方向」または「無し」の場合〕
図２０に示すフローＤは、基本的には前述のフローＢと同じ工程であるが、ステップＳ５７、Ｓ５９およびＳ６０において、画像が９０°回転された状態で表示される点で、フローＢとは異なる。これは、ステップＳ１９において撮影姿勢が縦撮り姿勢と判定されるためである。その他のステップＳ５３〜Ｓ５６、Ｓ５８、Ｓ６１〜Ｓ６３については、前述のフローＢの対応するステップと同じであるため、詳細な説明は省略する。
【０１２６】
例えば、抽出画像フォルダ（＃３）が選択されている場合、前述のようにパンニングモード信号６０が「１」であり、かつ、姿勢判別信号６１が「１」であるため、このフローＤにより処理が行われる。基準番号Ｊ＝「００３」、比較番号Ｋ＝「００６」とすると、Ｋ＞Ｊである。このため、図２７に示すように、表示部５５において基準画像００３の右側に比較画像００６が表示される。このとき、撮影姿勢が縦撮り姿勢であるため、画像が９０°回転された状態で表示される。
【０１２７】
このように、フローＣおよびＤでは、撮影時の姿勢に復元された状態で表示部５５に画像が表示されるため、ユーザーが画像をさらに確認しやすくなる。
【０１２８】
＜特徴＞
デジタルカメラ１の特徴は以下の通りである。
【０１２９】
（１）
このデジタルカメラ１では、マイクロコンピュータ３にて動画像から複数の抽出画像が生成され、第１動き情報としてのパンニングモード信号６０に基づいて複数の抽出画像の配置がマイクロコンピュータ３により決定される。このため、デジタルカメラ１の動きや動画像における被写体の動きに合わせて、抽出画像の配置を調整することができる。これにより、これらの動きの方向を抽出画像が配置される方向と概ね一致させることができ、並べて表示される複数の画像に対する違和感を緩和することができる。
【０１３０】
（２）
このデジタルカメラ１では、隣り合う２つの抽出画像により形成される時間ベクトルの向きが、動き情報に含まれる動きの方向の一成分と概ね一致するように、マイクロコンピュータ３により複数の抽出画像の配置が決定される。これにより、デジタルカメラ１の動く方向の一成分と時間ベクトルの方向とを概ね一致させることができる。
【０１３１】
ここで、「時間ベクトル」とは、異なるタイミングで取得された２つの抽出画像を並べた場合に先に取得された抽出画像の中心から後に取得された抽出画像の中心に向かって延びるベクトルを意味している。「時間ベクトルの向きが動きの方向の一成分と概ね一致する」とは、時間ベクトルの向きが動き方向の一成分と完全に一致している場合の他に、表示された静止画像に対する違和感を緩和できるという効果を確保できる範囲内で、時間ベクトルの向きが動き方向の一成分に対してずれている場合も含まれる。したがって、例えば図２４に示す場合に、ユーザーがデジタルカメラ１を左上方向または左下方向にパンニングしていても、時間ベクトルの向きとデジタルカメラ１の動く方向の一成分（水平成分）とが概ね一致していると言える。
【０１３２】
（３）
このデジタルカメラ１では、角速度センサ１７ｘおよび１７ｙによりパンニング垂直方向成分および水平方向成分が検出される。さらに、これらの検出結果に基づいて、マイクロコンピュータ３によりパンニングモード信号６０が自動的に生成され、動画像あるいは複数の抽出画像とともにパンニングモード信号６０が画像記録部１２に記録される。これにより、手ブレ補正のための角速度センサ１７ｘおよび１７ｙを、パンニングモード信号６０を生成するための検出部の一部として利用できる。
【０１３３】
（４）
このデジタルカメラ１では、姿勢情報としての姿勢判別信号６１に基づいて、表示部５５に画像が表示された状態で画像における天地方向が鉛直方向と概ね一致するように、表示部５５に対する画像の表示状態がマイクロコンピュータ３および画像表示制御部１３により調整される。つまり、撮影時の状態と同じ状態で画像が表示部５５に表示される。このため、実際の被写体の天地方向と画像内での被写体の天地方向とが概ね一致し、表示された画像に対する違和感をさらに緩和することができる。
【０１３４】
（第２実施形態）
前述の実施形態では、デジタルカメラ１をパンニングさせて動画撮影する場合を説明している。しかし、図２８に示すように、デジタルカメラ１をパンニングさせずに移動している被写体を撮影する場合も考えられる。図２９は動き検出部の構成の一例を示すブロック図である。なお、前述の実施形態と実質的に同じ機能を有する構成については、同じ符号を付し、その説明は省略する。
【０１３５】
図２８に示すように、第２実施形態のデジタルカメラ１の撮影姿勢の状態は、左方向に移動している自動車を、デジタルカメラ１の撮影画角がほぼ同じ状態にて、広い画角にて撮影している状況を示している。ここでは、第１実施形態のパンニングモード信号６０の代わりに、動画像から検出された被写体の動きベクトルに基づいて画像の配置が決定される。具体的には、図５に示すパンニングモード信号６０と同様に、被写体の動きを示す動きベクトル信号６２（図２９）が動き検出部１００およびマイクロコンピュータ３により生成される。
【０１３６】
具体的には図２９に示すように、動き検出部１００は、動画像に基づいて画像内での被写体の動きを検出するユニットであり、代表点記憶部１０１と、相関演算部１０２と、動きベクトル検出部１０３と、を有している。
【０１３７】
代表点記憶部１０１は、Ａ／Ｄ変換部７およびデジタル信号処理部８を経て入力される現フレームの画像信号を複数の領域に分割し、各領域に含まれる特定の代表点に対応する画像信号を代表点信号として記憶する。代表点記憶部１０１は、既に記憶されている現フレームよりも１フレーム前の代表点信号を読み出して相関演算部１０２に出力する。
【０１３８】
相関演算部１０２は、１フレーム前の代表点信号と現フレームの代表点信号間の相関演算を行い、代表点信号間の差を比較する。演算結果は動きベクトル検出部１０３に出力される。
【０１３９】
動きベクトル検出部１０３は、相関演算部１０２による演算結果から１フレーム前と現フレーム間の画像の動きベクトルを１画素単位で検出する。そして動きベクトルは、マイクロコンピュータ３に出力される。マイクロコンピュータ３は、動きベクトルに対するゲインおよび位相などを調整し、画像信号上の被写体の単位時間あたりの動き速度および方向を算出する。被写体が動く方向は、図５に示すパンニングモード信号６０のように、「０」〜「８」までの信号として動きベクトル信号６２が生成される。
【０１４０】
前述の実施形態と同様に、動きベクトル信号６２に基づいてマイクロコンピュータ３により抽出画像の配置が決定される。決定方法については前述の実施形態と同様であるため、詳細な説明は省略する。
【０１４１】
被写体の動きを検出する処理は、例えばユーザーが動画像の記録を開始することにより開始される。
【０１４２】
以上の構成により、デジタルカメラ１では、第２動き情報としての動きベクトル信号６２を記録した動画像より、フレームごとにその第２動き情報を個々に有する複数の静止画像を作成することができる。さらに、その第２動き情報に基づいてマイクロコンピュータ３により画像の配置が決定される。具体的には、動きベクトル信号６２に基づいて、並んで表示された画像により形成される時間ベクトルの向きが被写体の動く方向と概ね一致するように、マイクロコンピュータ３により画像の配置が決定される。これにより、被写体の動きの方向を画像の配置と概ね一致させることができ、並んで表示された複数の画像に対する違和感を緩和することができる。
【０１４３】
なお、動きベクトル検出については、デジタルカメラ１に被写体の顔検出部を設け、被写体の顔の動き情報に基づいて判断できるようにしてもよい。その場合には、並んで表示された画像により形成される時間ベクトルの向きが被写体の顔の向き（例えば、左向き、あるいは右向き）と概ね一致するように、マイクロコンピュータ３により画像の配置が決定される。
【０１４４】
また、動きベクトル信号６２についても、その動き方向がわかるように、表示画像中に、例えば矢印にて表示できるようにしても良い。さらには、動きの速度に応じて、矢印の大きさを変えるようにしてもよい。具体的には、速度が大きいほど矢印の長さ又は幅が大きくなるようにしてもよい。
【０１４５】
また、静止画像の抽出については、動画撮影中にＳＥＴボタン４０を押すことにより、動画記録とともに静止画が生成され、生成された静止画像に動きベクトル信号を記録するようにしてもよい。
【０１４６】
（第３実施形態）
前述の第２実施形態では、動画像の撮影時に動きベクトルが検出されているが、画像記録部１２に記録されている動画像に基づいて動きベクトル信号６２（動き情報の一例）が生成されてもよい。具体的には、記録されている動画像ファイルから複数の抽出画像ファイルが生成される。例えば、図９および図１０に示すように、動画像ファイル“９５ａ．ｍｐｇ”中の任意のフレームである第１フレーム、第３１フレーム、第６１フレーム、第９１フレームから、それぞれ抽出画像ファイル“９８ａ００１．ｊｐｇ”、“９８ａ００２．ｊｐｇ”、“９８ａ００３．ｊｐｇ”および“９８ａ００４．ｊｐｇ”が、抽出画像としてそれぞれ新たに生成される。
【０１４７】
次に、デジタルカメラ１の動き方向を示すパンニングモード信号６０がマイクロコンピュータ３により確認される。パンニングモード信号６０が「０」の場合（例えば図２８に示すような状態で撮影された場合）は、動画撮影時にパンニングなどのデジタルカメラ１の動きがないと考えられるため、抽出画像の生成後、隣り合う抽出画像に基づいて動きベクトル信号６２が動き検出部１００（動き情報生成部の一例）により生成される。動き検出部１００により生成された複数の動きベクトル信号６２は、抽出画像ファイルとともに画像記録部１２に記録される。
【０１４８】
一方、パンニングモード信号６０が「０」以外の場合は、パンニングなどのデジタルカメラ１の動きが動画撮影時に発生していると考えられるため、動画像に基づいて動きベクトルを生成する際に、パンニングモード信号６０が考慮された上で、動きベクトルが生成される。例えば図１４に示すように、デジタルカメラ１を右から左へパンニングさせながら動画撮影が行われた場合、図２２に示すような複数の抽出画像が生成されるが、各抽出画像内でメインの被写体の自動車はほとんど移動せず、逆に背景（例えば、山）が左から右へ移動している。この場合は、複数の抽出画像に基づいて求められた動きベクトルが右方向となるが、計算上の動きベクトルと逆方向のベクトルをマイクロコンピュータ３が新たな動きベクトル信号として設定する。
【０１４９】
このように、デジタルカメラ１の動き方向を示すパンニングモード信号６０を利用して、動き検出部１００およびマイクロコンピュータ３により動き信号が生成されるため、動画像に基づいて求められた動きベクトルにパンニングなどのデジタルカメラ１の動きが悪影響を及ぼすのを低減できる。
【０１５０】
生成された動きベクトル信号に基づいてマイクロコンピュータ３により画像の配置が決定される。具体的には、前述の第２実施形態と同様に、抽出画像とともに記録された動きベクトル信号に基づいて、並んで表示された画像により形成される時間ベクトルの向きが被写体の動く方向と概ね一致するように、マイクロコンピュータ３により画像の配置が決定される（例えば図１３参照）。これにより、被写体の動きの方向を画像の配置と概ね一致させることができ、並んで表示された複数の画像に対する違和感を緩和することができる。
【０１５１】
さらに、前述の第２実施形態に比べて、動画像を取得する際のマイクロコンピュータ３の負荷が軽くなるため、動画像取得時の処理速度を高めることができる。
【０１５２】
（第４実施形態）
前述の実施形態では、表示部５５に画像が表示されている。しかし、図３０に示すように、デジタルカメラ１または１０１に接続された表示装置７０に画像が表示される場合も考えられる。
【０１５３】
この場合、表示部が表示部５５からテレビモニタなどの表示装置７０に変わっただけであり、パンニングモード信号６０、姿勢判別信号６１、動きベクトル信号６２などの情報に基づいて、マイクロコンピュータ３により画像の配置や表示状態が決定されている点は、前述の実施形態と同様である。表示装置７０はケーブル７５を介してデジタルカメラ１に接続されている。ケーブル７５は、例えばＵＳＢ(Ｕｎｉｖｅｒｓａｌ  Ｓｅｒｉａｌ  Ｂｕｓ)ケーブルなどである。
【０１５４】
以上の構成は、デジタルカメラに表示部が設けられていない場合や、画像の表示サイズを大きくしたい場合に、有効である。これにより、視認性の良い快適な表示が可能となる。
【０１５５】
なお、本第４実施形態において、外部の表示装置７０はテレビモニタを例として示しているが、これに限られない。例えば、モニタに接続されたパーソナルコンピュータとケーブル７５を介して接続する構成としてもよい。
【０１５６】
なお、本第４実施形態において、ケーブル７５は、ＵＳＢケーブルを用いた例を示したがこれに限られない。例えば、ＩＥＥＥ１３９４シリアルバス用ケーブルや、無線ＬＡＮ等の無線により接続する場合も考えられる。
【０１５７】
（第５実施形態）
前述の第４実施形態では、表示装置７０がデジタルカメラ１に接続されているが、表示装置７０の代わりに印刷装置７１がデジタルカメラ１に接続される場合も考えられる。
【０１５８】
この場合、図３１に示すように、表示装置７０が印刷装置７１に変わっただけであり、パンニングモード信号６０、姿勢判別信号６１、動きベクトル信号６２などの情報に基づいて、マイクロコンピュータ３により画像の配置や表示状態が決定されている点は、前述の実施形態と同様である。
【０１５９】
ここでは、印刷装置７１がケーブル７６によりデジタルカメラ１に接続されている。デジタルカメラ１のマイクロコンピュータ３により画像の配置が決定され、表示部５５に画像が表示される。表示部５５に表示された画像が、印刷装置７１により紙面に印刷される。これにより、デジタルカメラ１の動きあるいは被写体の動きの方向を画像の配置と概ね一致させることができ、印刷された画像に対する違和感を緩和することができる。
【０１６０】
なお、本第５実施形態において、外部の印刷装置７１は直接プリンタを繋いだ例を示したが、これに限られない。例えば、デジタルカメラ１が接続されたパーソナルコンピュータおよびケーブルを介してプリンタに接続される構成であってもよい。
【０１６１】
（第６実施形態）
この場合、表示制御装置８２により表示制御が行われる。具体的には図３２に示すようには、表示制御装置８２は、例えば、画像処理ソフトを備えたパーソナルコンピュータ、テレビなどである。デジタルカメラ１により撮影された画像は、サムネイル画像、姿勢判別信号６１、パンニングモード信号６０、動きベクトル信号６２などの情報とともに、メモリーカードなどのリムーバブルメモリ５１に記録されている。なお、リムーバブルメモリ５１はメモリーカードに限られず、ハードディスクや光ディスクなどでもよい。
【０１６２】
表示制御装置８２は、リムーバブルメモリ５１に記録された情報の読み出しが可能なリムーバブルメモリ挿入部８１と、画像が表示される表示装置７０と、を有している。表示装置７０に表示される画像の配置は、前述の第１実施形態と同様に、リムーバブルメモリ５１に記録されたパンニングモード信号６０、姿勢判別信号６１、動きベクトル信号６２などの情報に基づいて決定される。
【０１６３】
これにより、この表示制御装置８２では、デジタルカメラ１の動きあるいは被写体の動きの方向を画像の配置と概ね一致させることができ、表示された画像に対する違和感を緩和することができる。
【０１６４】
なお、図３２に示すように、リムーバブルメモリ挿入部８１を備えた印刷制御装置８４で印刷する場合、あるいは、印刷制御装置８４を表示装置７０と接続して表示する、あるいは印刷装置７１と接続して印刷する場合でも同様の効果を得ることができる。
【０１６５】
また、リムーバブルメモリ挿入部８１を備えた表示装置、印刷装置および表示印刷制御装置を用いる例を示したが、これに限られない。例えば、リムーバブルメモリ５１の読み出しが可能なメモリーカードリーダ等の読み取り装置と、表示印刷制御装置と、表示装置、印刷装置とが接続される構成であってもよい。
【０１６６】
（他の実施形態）
本発明の具体的な構成は、前述の実施形態に限られるものではなく、発明の要旨を逸脱しない範囲で種々の変更および修正が可能である。
【０１６７】
（１）
前述の実施形態では、デジタルカメラ１を用いて表示制御装置について説明している。しかし、表示制御装置が搭載される装置はデジタルカメラに限られず、撮影された画像を表示できる装置であれば、他の装置（デジタル一眼レフカメラ、デジタルビデオカメラ、カメラ機能付き携帯電話端末、カメラ機能付きＰＤＡ（Personal Digital Assistant）、カメラ機能付きＰＣ（Personal Computer）、ＤＶＤ（Digital Video Disc）レコーダおよびハードディスクレコーダなど）にも、この表示制御装置は搭載可能である。
【０１６８】
また、撮像装置としては、動画像の撮影が可能な装置や動画像および静止画像の撮影が可能な装置が挙げられる。撮像装置の例としては、前述のデジタルカメラ１以外に、デジタル一眼レフカメラ、デジタルビデオカメラ、カメラ機能付き携帯電話端末、カメラ機能付きＰＤＡ（Personal Digital Assistant）およびカメラ機能付きＰＣ（Personal Computer）が挙げられる。
【０１６９】
（２）
前述の第１実施形態では、９種類のパンニングモード信号６０（「０」〜「８」）を実質的に２つのグループ（左方向およびその他）に分けて、画像の配置が決定されている。しかし、表示部５５などの表示部が複数の画像を斜めや上下に配置した状態で表示可能である場合は、さらに細かくグループを分けが行われてもよい。パンニングモード信号６０を細かくグループ分けすることで、パンニングの方向や被写体が動く方向が画像の配置により形成される時間ベクトルと概ね一致し、表示された画像に対する違和感がさらに緩和される。
【０１７０】
（３）
第１実施形態では、パンニングモードを検出するために角速度センサ１７ｘおよび１７ｙからの角速度信号を利用している。しかし、角速度センサ１７ｘおよび１７ｙの代わりにヨーイング電流値検出部１４ｘおよびピッチング電流値検出部１４ｙからの信号を利用してもよい。
【０１７１】
また、第１実施形態では、撮影姿勢は、ピッチング電流値検出部１４ｙおよびヨーイング電流値検出部１４ｘの両方の電流値を検出することにより判断したが、一方の電流値を検出することにより、撮影姿勢の特定が可能である。
【０１７２】
また、ピッチング電流値検出部１４ｙもしくはヨーイング電流値検出部１４ｘのどちらか一方の電流検出部に異常が生じた場合は、両方の電流値を検出することにより撮影姿勢を正確に判断することができる。
【０１７３】
なお、本第１実施形態において、撮影姿勢は、ピッチングおよびヨーイング電流検出部の電流値を検出することにより判断したが、これに限られない。例えば、電圧値を測定しても同様の効果を得ることができる。
【０１７４】
（４）
第１および第２実施形態では、パンニングモード検出および姿勢検出として手ブレ補正装置を用いた例に実施形態について説明している。しかし、例えば、デジタルカメラに角速度センサや回転検出装置等が取り付けられており、デジタルカメラにて検出できるようにしてもよい。
【０１７５】
また、前述の実施形態では、デジタルカメラ１には１つのシャッターボタンが搭載されている。しかし、例えば、横撮り姿勢で撮影するシャッターボタンと、縦撮り姿勢で撮影するシャッターボタンと、がそれぞれ搭載されていてもよい。この場合、２つのシャッターボタンからの信号に基づいて、撮影姿勢の判別を行うことが可能となる。
【０１７６】
（５）
第１および第２実施形態では、撮影姿勢は、横撮り姿勢の場合を基準として光軸ＡＸを中心に右側に９０°回転させた姿勢を縦撮り姿勢としている。しかし、縦撮り姿勢を左側に９０°回転させた姿勢とした場合であっても、前述と同様の効果を得ることができる。この場合、左側に９０゜回転させた姿勢の姿勢判別信号６１を「２」とし、横撮り姿勢が１種類、縦撮り姿勢が２種類の合計３種類の姿勢を検出できるようにしてもよい。
【０１７７】
（６）
第１および第２実施形態では、姿勢判別信号６１として「０」および「１」の２種類の信号が画像に付加される。しかし、例えば、一方の姿勢（例えば縦撮り姿勢）のみに信号を付加する方法も考えられる。また、姿勢判別信号６１が画像に記録する方法に限らず、姿勢判別信号６１が画像とは別のファイルに記録され、姿勢判別信号６１が記録されたファイルと画像とを対応させる方法を用いてもよい。同様に、パンニングモード信号６０、動きベクトル信号６２も、画像ファイルと別ファイルに記録され、そのファイルと画像とを対応させる方法を用いてもよい。
【０１７８】
（７）
再生モードにおいてデジタルカメラ１を縦撮り姿勢にした場合、図３３に示すように横長の画像を縦に並べた方が、図２６に示す状態よりも各画像を大きく表示することができる。このため、再生モード時において姿勢検出を行い、デジタルカメラ１が縦撮り姿勢である場合に画像の配置を縦にすることで、表示部５５を効率よく利用することができる。
【０１７９】
（８）
前述の各実施形態を組み合わせることも可能である。例えば、第１実施形態と第２実施形態とを組み合わせることもできる。より具体的には、第１実施形態において、パンニング垂直方向および水平方向成分がともに「無し」の場合、すなわち、パンニングモード信号６０が「０」の場合、デジタルカメラ１が動かないように保持されている。このため、この場合に画像から動きベクトル信号６２を生成し、第２実施形態のように動きベクトル信号６２に基づいて画像の配置を決定する場合も考えられる。パンニングモード信号６０が「０」以外の場合は、パンニングモード信号６０を優先することも考えられる。
【０１８０】
また、以上説明したカメラは、このカメラの撮影制御方法を機能させるためのプログラムでも実現される。このプログラムはコンピュータで読み取り可能な記録媒体に格納されている。
【０１８１】
（９）
前述の実施形態では、動画像を形成する複数の静止画像から静止画像よりも少ない枚数の抽出画像が生成されているが、動画像を形成する複数の静止画像が全て抽出画像として生成されてもよい。
【０１８２】
（１０）
前述の実施の形態では、動画像における被写体の動きに関する第１動き情報を、一旦記録部に記録された動画像に基づいて生成し、かつ複数の抽出画像を生成しているが、動画撮影中に静止画像も同時に記録できるという別の機能を利用して、例えば、動画撮影中にＳＥＴボタン４０を押すことにより、動画像と共に静止画像を記録し、その際に第１動き情報を生成すると共に、抽出画像を生成する構成としてもよい。
【産業上の利用可能性】
【０１８３】
以上に説明した技術によれば、並べて表示された複数の静止画像に対する違和感を緩和することができる表示制御装置、撮像装置および印刷装置を提供することができる。したがって、以上に説明した表示制御装置、撮像装置および印刷装置は、複数の画像を並べて表示できる装置に好適である。
【符号の説明】
【０１８４】
１  デジタルカメラ（撮像装置）
１ａ  筐体
２  レンズ鏡筒
３  マイクロコンピュータ（配置決定部、動き情報生成部）
３Ａ  信号処理部
４  イメージセンサ（画像取得部）
５  ＣＣＤ駆動制御部
６  アナログ信号処理部
７  Ａ／Ｄ変換部
８  デジタル信号処理部
９  バッファメモリ
１０  画像圧縮部
１１  画像記録制御部
１２  画像記録部
１３  画像表示制御部
１４Ａ  撮影姿勢検出部
１４ｘ  ヨーイング電流値検出部
１４ｙ  ピッチング電流値検出部
１５Ａ  動き補正部
１５ｘ  ヨーイング駆動制御部
１５ｙ  ピッチング駆動制御部
１６  位置検出部
１７Ａ  動き検出部（動き検出部）
１７ｘ、１７ｙ  角速度センサ
１８ｘ、１８ｙ  Ａ／Ｄ変換部
１９ｘ、１９ｙ  Ｄ／Ａ変換部
２０  手ブレ補正装置
２１  ピッチング保持枠
２２  ヨーイング保持枠
２３  ピッチングシャフト
２４  コイル
２５  固定枠
２６  ヨーイングシャフト
２７  マグネット
２８  ヨーク
２９  アクチュエータ
３０  発光素子
３１  受光素子
３５  電源スイッチ
３６  シャッターボタン
３７  モード切換ダイアル
３８  十字操作キー
３９  ＭＥＮＵ設定ボタン
４０  ＳＥＴボタン
４１  シャッター制御部
４２  シャッター駆動モータ
４５  動画撮影操作ボタン
５０  内部メモリ
５１  リムーバブルメモリ
５５  表示部
５７  ズーム操作レバー
６０  パンニングモード信号（第２動き情報）
６１  姿勢判別信号（姿勢情報）
６２  動きベクトル信号（第１動き情報）
７０  表示装置
７１  印刷装置
７５  ケーブル
７６  ケーブル
８１  リムーバブルメモリ挿入部
８２  表示制御装置
８３  印刷制御装置
８４  表示印刷制御装置
１００  動き検出部（動き情報生成部）
Ｌ  光学系
Ｌ１  第１レンズ群
Ｌ２  第２レンズ群
Ｌ３  第３レンズ群
【手続補正３】
【補正対象書類名】図面
【補正対象項目名】全図
【補正方法】変更
【補正の内容】
【図１】
2009122720.tif 000036
【図２】
2009122720.tif 000037
【図３】
2009122720.tif 000038
【図４】
2009122720.tif 000039
【図５】
2009122720.tif 000040
【図６】
2009122720.tif 000041
【図７】
2009122720.tif 000042
【図８】
2009122720.tif 000043
【図９】
2009122720.tif 000044
【図１０】
2009122720.tif 000045
【図１１】
2009122720.tif 000046
【図１２】
2009122720.tif 000047
【図１３】
2009122720.tif 000048
【図１４】
2009122720.tif 000049
【図１５】
2009122720.tif 000050
【図１６】
2009122720.tif 000051
【図１７】
2009122720.tif 000052
【図１８】
2009122720.tif 000053
【図１９】
2009122720.tif 000054
【図２０】
2009122720.tif 000055
【図２１】
2009122720.tif 000056
【図２２】
2009122720.tif 000057
【図２３】
2009122720.tif 000058
【図２４】
2009122720.tif 000059
【図２５】
2009122720.tif 000060
【図２６】
2009122720.tif 000061
【図２７】
2009122720.tif 000062
【図２８】
2009122720.tif 000063
【図２９】
2009122720.tif 000064
【図３０】
2009122720.tif 000065
【図３１】
2009122720.tif 000066
【図３２】
2009122720.tif 000067
【図３３】
2009122720.tif 000068
【国際調査報告】
2009122720.tif 000069
2009122720.tif 000070