(57)【要約】【課題】ある静止画像の記録処理中であり、他の静止画像を記録することができない場合であっても、適切な静止画像を記録する。【解決手段】動画像の撮影中に静止画を撮影する画像撮影装置の一例であるビデオカメラ１００であって、動画像を撮影するとともに、動画像の撮影中に静止画を撮影する撮影部１１０と、撮影部１１０によって撮影された静止画を記録媒体１５０に記録する記録部１２０と、動画像をフレーム毎に評価することで、フレームの画像評価値を決定する評価部１３０と、撮影部１１０によって撮影された第１静止画の記録を記録部１２０が開始した時点から予め定められた期間内に撮影部１１０によって撮影された第２静止画に対応する第２フレームの画像評価値が、第１静止画に対応する第１フレームの画像評価値より高い場合に、第１静止画の記録を中止するとともに、第２静止画を記録するように記録部１２０を制御する記録制御部１４０とを備える。【選択図】図３Ａ
2011119934.tif 000002
【特許請求の範囲】
【請求項１】
動画像の撮影中に静止画を撮影する画像撮影装置であって、
前記動画像を撮影するとともに、前記動画像の撮影中に静止画を撮影する撮影部と、
前記撮影部によって撮影された静止画を記録媒体に記録する記録部と、
前記動画像をフレーム毎に評価することで、静止画として記録すべきフレームの優先度を示す画像評価値を決定する評価部と、
前記撮影部によって撮影された第１静止画の記録を前記記録部が開始した時点から予め定められた期間内に前記撮影部によって撮影された第２静止画に対応する第２フレームの画像評価値が、前記第１静止画に対応する第１フレームの画像評価値より高い場合に、前記第１静止画の記録を中止するとともに、前記第２静止画を記録するように前記記録部を制御する記録制御部とを備える
画像撮影装置。
【請求項２】
前記記録制御部は、前記予め定められた期間内に前記撮影部によって前記第２静止画が撮影された場合に、前記第１フレームの画像評価値と前記第２フレームの画像評価値との比較を行い、前記第２フレームの画像評価値が前記第１フレームの画像評価値より高い場合に、前記第１静止画の記録を中止するとともに、前記第２静止画を記録するように前記記録部を制御する
請求項１記載の画像撮影装置。
【請求項３】
前記記録制御部は、前記予め定められた期間として、前記記録部が前記第１静止画の記録を開始した時点から当該記録を完了するまでの期間内に、前記撮影部によって前記第２静止画が撮影された場合に、前記比較を行う
請求項２記載の画像撮影装置。
【請求項４】
前記記録制御部は、前記第１フレームの画像評価値が予め定められた第１閾値以下の場合で、かつ、前記予め定められた期間内に前記撮影部によって前記第２静止画が撮影された場合に、前記比較を行う
請求項２記載の画像撮影装置。
【請求項５】
前記第１フレームは、前記撮影部によって前記第１静止画が撮影された時刻のフレームであり、
前記記録制御部は、さらに、前記動画像に含まれる前記第１フレームより前の第３フレームの画像評価値が予め定められた第２閾値より大きい場合に、前記撮影部に静止画の撮影を指示し、
前記撮影部は、前記記録制御部からの指示に従って前記第１静止画を撮影し、
前記記録部は、前記撮影部によって撮影された第１静止画を前記記録媒体に記録する
請求項１〜４のいずれか１項に記載の画像撮影装置。
【請求項６】
前記評価部は、さらに、前記画像撮影装置のカメラワークに基づいて前記動画像をフレーム毎に評価することで、撮影された時点のカメラワークに基づいた評価値であり、静止画として記録すべきフレームの優先度を示す動作評価値を決定し、
前記記録制御部は、さらに、前記第１フレームの動作評価値が予め定められた第３閾値より大きい場合に、前記第１静止画を記録するように前記記録部を制御する
請求項５記載の画像撮影装置。
【請求項７】
前記画像撮影装置は、さらに、
前記動画像の撮影状況を示す１種類以上の属性情報をフレーム毎に生成する属性情報生成部を備え、
前記評価部は、前記属性情報の種類毎に予め定められた評価値を対応付けた第１評価表に基づいて前記動画像をフレーム毎に評価することで、前記画像評価値を決定するとともに、前記カメラワークを示す属性情報の種類毎に予め定められた評価値を対応付けた、前記第１評価表とは異なる第２評価表に基づいて前記動画像をフレーム毎に評価することで、前記動作評価値を決定する
請求項６記載の画像撮影装置。
【請求項８】
前記画像撮影装置は、さらに、
前記動画像の撮影状況を示す１種類以上の属性情報をフレーム毎に生成する属性情報生成部を備え、
前記評価部は、前記属性情報の種類毎に予め定められた評価値を対応付けた第１評価表に基づいて前記動画像をフレーム毎に評価することで、前記画像評価値を決定する
請求項１〜６のいずれか１項に記載の画像撮影装置。
【請求項９】
動画像の撮影中に静止画を撮影する画像撮影方法であって、
前記動画像を撮影するとともに、前記動画像の撮影中に静止画を撮影する撮影ステップと、
前記撮影ステップにおいて撮影された静止画を記録媒体に記録する記録ステップと、
前記動画像をフレーム毎に評価することで、静止画として記録すべきフレームの優先度を示す画像評価値を決定する評価ステップとを含み、
前記記録ステップでは、
前記撮影ステップにおいて撮影された第１静止画の記録を前記記録部が開始した時点から予め定められた期間内に前記撮影ステップにおいて撮影された第２静止画に対応する第２フレームの画像評価値が、前記第１静止画に対応する第１フレームの画像評価値より高い場合に、前記第１静止画の記録を中止するとともに、前記第２静止画を記録する
画像撮影方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、動画と静止画との両方を撮影する画像撮影装置に関し、特に、動画撮影中に好適な静止画を自動的に撮影する技術に関する。
【背景技術】
【０００２】
従来、ビデオカメラにおいて、動画（動画像）撮影時に利用者が静止画（静止画像）撮影の釦等を押すことで、動画と合わせて静止画も記録できる機種が販売されている。また、最近のビデオカメラでは、撮影時の撮影情報、外部入力情報などの属性情報（メタデータ）を解析して、ダイジェスト（要約）動画を生成することも可能となっている。
【０００３】
例えば、特許文献１においては、通常撮影時には動画像を磁気テープに記録する。そして、静止画の記録については、静止画録画スイッチが操作され、かつ、自動露出（ＡＥ：Ａｕｔｏ  Ｅｘｐｏｓｕｒｅ）及び自動焦点（ＡＦ：Ａｕｔｏ  Ｆｏｃｕｓ）回路からの出力信号が最適露出及び最適焦点状態になっている場合に静止画を記録する。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平１１−１８７３５０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上記従来技術では、短期間の間に複数の静止画を撮影した場合に、撮影した複数の静止画の一部を記録媒体へ記録することができず、適切な静止画を保存することができないという課題がある。
【０００６】
静止画を記録媒体に記録するためには、機器のソフトウェア処理、データの転送、記録媒体への書き込みなど、相応の処理時間が必要である。例えば、解像度が高く高品質な静止画を記録する場合には、ハードディスク（ＨＤＤ：Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）、及びフラッシュメモリーなどの記録媒体に記録を完了するまでに数十ミリ秒オーダーの時間がかかり、ビデオカメラの撮影中に、撮影処理と記録媒体への静止画の記録処理とは並行して実行されている。
【０００７】
また、記録部が同時に記録できる情報量は有限であるため、ある静止画をＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）などの一次記憶メディアに一時的に保持している期間、又は、一次記憶メディアから二次記録媒体への記録中に、別の静止画を同時に記録することができない。この場合、好適と判定された第１静止画を記録中に、当該第１静止画より好適と判定できる第２静止画を撮影した場合でも、記録部が第１静止画の記録処理を完了するまで、新たに第２静止画を記録することができない。
【０００８】
そこで、上記の問題に鑑みて、本発明は、ある静止画の記録処理中であり、他の静止画を記録することができない場合であっても、適切な静止画を記録することができる画像撮影装置及び画像撮影方法を提供することを目的とする。
【課題を解決するための手段】
【０００９】
上記従来の課題を解決するため、本発明に係る画像撮影装置は、動画像の撮影中に静止画を撮影する画像撮影装置であって、前記動画像を撮影するとともに、前記動画像の撮影中に静止画を撮影する撮影部と、前記撮影部によって撮影された静止画を記録媒体に記録する記録部と、前記動画像をフレーム毎に評価することで、静止画として記録すべきフレームの優先度を示す画像評価値を決定する評価部と、前記撮影部によって撮影された第１静止画の記録を前記記録部が開始した時点から予め定められた期間内に前記撮影部によって撮影された第２静止画に対応する第２フレームの画像評価値が、前記第１静止画に対応する第１フレームの画像評価値より高い場合に、前記第１静止画の記録を中止するとともに、前記第２静止画を記録するように前記記録部を制御する記録制御部とを備える。
【００１０】
これにより、ある好適な静止画の記録を開始してから所定の期間内に、より好適なフレームを検出した場合に、先に記録を始めていた静止画の記録プロセスを中止し、より好適なフレームを静止画として記録することができる。
【００１１】
また、前記記録制御部は、前記予め定められた期間内に前記撮影部によって前記第２静止画が撮影された場合に、前記第１フレームの画像評価値と前記第２フレームの画像評価値との比較を行い、前記第２フレームの画像評価値が前記第１フレームの画像評価値より高い場合に、前記第１静止画の記録を中止するとともに、前記第２静止画を記録するように前記記録部を制御してもよい。
【００１２】
これにより、評価値の比較を行うことで、当該比較結果に基づいて静止画の記録プロセスを継続するか中止するかを判定することができる。
【００１３】
また、前記記録制御部は、前記予め定められた期間として、前記記録部が前記第１静止画の記録を開始した時点から当該記録を完了するまでの期間内に、前記撮影部によって前記第２静止画が撮影された場合に、前記比較を行ってもよい。
【００１４】
これにより、ある好適な静止画の記録中により好適なフレームを検出した場合に、記録中の静止画の記録プロセスを中止することで、より好適なフレームを静止画として記録することができる。
【００１５】
また、前記記録制御部は、前記第１フレームの画像評価値が予め定められた第１閾値以下の場合で、かつ、前記予め定められた期間内に前記撮影部によって前記第２静止画が撮影された場合に、前記比較を行ってもよい。
【００１６】
これにより、記録中の静止画に対応するフレームの評価値が所定の閾値より大きい場合には、次に評価値が高いフレームに対応する静止画が撮影されたとしても、記録中の静止画の記録プロセスを継続することができる。つまり、所定の閾値より大きな評価値を有する静止画を確実に記録することができるので、例えば、人物の笑顔を検出した場合など、最初に検出された静止画を確実に記録することができる。
【００１７】
また、前記第１フレームは、前記撮影部によって前記第１静止画が撮影された時刻のフレームであり、前記記録制御部は、さらに、前記動画像に含まれる前記第１フレームより前の第３フレームの画像評価値が予め定められた第２閾値より大きい場合に、前記撮影部に静止画の撮影を指示し、前記撮影部は、前記記録制御部からの指示に従って前記第１静止画を撮影し、前記記録部は、前記撮影部によって撮影された第１静止画を前記記録媒体に記録してもよい。
【００１８】
これにより、第３フレームの評価値に基づいて撮影指示を行ってから、実際に第１静止画が撮影されるまでは所定の遅延時間が生じるが、当該遅延時間に、被写体との間に他のものが横切った、あるいは、撮影者の手振れが発生したとしても、好ましくない静止画を記録してしまう可能性を低減することができる。
【００１９】
また、前記評価部は、さらに、前記画像撮影装置のカメラワークに基づいて前記動画像をフレーム毎に評価することで、撮影された時点のカメラワークに基づいた評価値であり、静止画として記録すべきフレームの優先度を示す動作評価値を決定し、前記記録制御部は、さらに、前記第１フレームの動作評価値が予め定められた第３閾値より大きい場合に、前記第１静止画を記録するように前記記録部を制御してもよい。
【００２０】
これにより、手振れ又は地面方向を向いているなどの画像撮影装置のカメラワークに基づいて評価を行うので、好ましくない静止画を記録してしまう可能性をより低減することができる。
【００２１】
また、前記画像撮影装置は、さらに、前記動画像の撮影状況を示す１種類以上の属性情報をフレーム毎に生成する属性情報生成部を備え、前記評価部は、前記属性情報の種類毎に予め定められた評価値を対応付けた第１評価表に基づいて前記動画像をフレーム毎に評価することで、前記画像評価値を決定するとともに、前記カメラワークを示す属性情報の種類毎に予め定められた評価値を対応付けた、前記第１評価表とは異なる第２評価表に基づいて前記動画像をフレーム毎に評価することで、前記動作評価値を決定してもよい。
【００２２】
これにより、属性情報毎に評価値が予め定められているので、対象フレームに対応付けられている属性情報に基づいて容易に動画像をフレーム毎に評価することができる。さらに、複数の評価表に基づいて評価するので、異なる観点から静止画として記録すべきフレームを決定することができ、より好適な静止画を記録することができる。
【００２３】
また、前記画像撮影装置は、さらに、前記動画像の撮影状況を示す１種類以上の属性情報をフレーム毎に生成する属性情報生成部を備え、前記評価部は、前記属性情報の種類毎に予め定められた評価値を対応付けた第１評価表に基づいて前記動画像をフレーム毎に評価することで、前記画像評価値を決定してもよい。
【００２４】
これにより、属性情報毎に評価値が予め定められているので、対象フレームに対応付けられている属性情報に基づいて容易に動画像をフレーム毎に評価することができる。
【００２５】
また、本発明に係る画像撮影方法は、動画像の撮影中に静止画を撮影する画像撮影方法であって、前記動画像を撮影するとともに、前記動画像の撮影中に静止画を撮影する撮影ステップと、前記撮影ステップにおいて撮影された静止画を記録媒体に記録する記録ステップと、前記動画像をフレーム毎に評価することで、静止画として記録すべきフレームの優先度を示す画像評価値を決定する評価ステップとを含み、前記記録ステップでは、前記撮影ステップにおいて撮影された第１静止画の記録を前記記録部が開始した時点から予め定められた期間内に前記撮影ステップにおいて撮影された第２静止画に対応する第２フレームの画像評価値が、前記第１静止画に対応する第１フレームの画像評価値より高い場合に、前記第１静止画の記録を中止するとともに、前記第２静止画を記録する。
【発明の効果】
【００２６】
本発明に係る画像撮影装置及び画像撮影方法によれば、ある静止画の記録処理中であり、他の静止画を記録することができない場合であっても、適切な静止画を記録することができる。
【図面の簡単な説明】
【００２７】
【図１】実施の形態１に係る動画像及び静止画を撮影する画像撮影装置の一例であるビデオカメラの外観図である。
【図２】実施の形態１に係るビデオカメラ内部のハードウェア構成の概略を示す図である。
【図３Ａ】実施の形態１に係るビデオカメラの機能構成の一例を示すブロック図である。
【図３Ｂ】実施の形態１に係るビデオカメラの詳細な機能構成の一例を示すブロック図である。
【図４】実施の形態１に係るビデオカメラが撮影した動画像の構成を示す図である。
【図５】実施の形態１に係るシーンを識別する情報の一例を示す図である。
【図６】実施の形態１に係る属性情報と評価との関係の一例を示す図である。
【図７】実施の形態１に係るシーン解析部が各シーンに評価を割り当てた結果を示す図である。
【図８】実施の形態１に係る静止画の抽出の観点から動画像をフレーム毎に評価した結果を示す図である。
【図９】実施の形態１に係るカメラワーク評価の観点から属性情報と評価との関係の一例を示す図である。
【図１０】実施の形態１に係る静止画記録制御部が静止画を抽出して記録する処理を示すフローチャートである。
【図１１】実施の形態１に係る静止画記録制御部が第１静止画を記録中に、記録を中止して第２静止画を記録する動作の一例を示す図である。
【図１２】実施の形態２に係る静止画記録制御部が静止画を抽出して記録する処理を示すフローチャートである。
【図１３】実施の形態２に係る静止画記録制御部が第１静止画を記録中に第２静止画が撮影された場合の動作の一例を示す図である。
【発明を実施するための形態】
【００２８】
以下では、本発明に係る画像撮影装置の実施の形態について、図面を用いて詳細に説明する。
【００２９】
（実施の形態１）
実施の形態１に係る画像撮影装置は、第１静止画の記録中に、第２静止画が撮影された場合に、第１静止画に対応する第１フレームの評価値と第２静止画に対応する第２フレームの評価値とを比較し、第２フレームの評価値の方が第１フレームの評価値より高い場合には、第１静止画の記録処理を中止するとともに、第２静止画の記録を開始することを特徴とする。
【００３０】
＜画像撮影装置の構成＞
まず、実施の形態１に係る画像撮影装置の構成について説明する。
【００３１】
図１は、動画像及び静止画を撮影する画像撮影装置の一例であるムービーカメラ又はビデオカメラ１００の外観図である。実施の形態１では、このビデオカメラ１００を例に説明を行う。
【００３２】
図２は、図１のビデオカメラ１００内部のハードウェア構成の概略を示す図である。
【００３３】
ビデオカメラ１００は、レンズ群２００と、撮像素子２０１と、映像ＡＤＣ（Ａｎａｌｏｇ  Ｄｉｇｉｔａｌ  Ｃｏｎｖｅｒｔｅｒ）２０２と、映像信号変換回路２０３と、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）２０４と、レンズ制御モジュール２０６と、姿勢検出センサ２０７と、入力ボタン２０８と、ディスプレイ２０９と、スピーカー２１０と、出力Ｉ／Ｆ（Ｉｎｔｅｒｆａｃｅ）２１１と、圧縮伸張回路２１２と、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）２１３と、ＲＡＭ２１４と、メモリーカード２１５と、音声ＡＤＣ（Ａｎａｌｏｇ  Ｄｉｇｉｔａｌ  Ｃｏｎｖｅｒｔｅｒ）２１６と、マイクロフォン２１７とを構成要素として備える。
【００３４】
レンズ群２００は、撮像素子２０１上で被写体像を形成するために、被写体から入射する光を調整する１つ以上のレンズの集合である。具体的には、レンズ群２００は、焦点距離及びズーム（動画の拡大倍率）を、様々な特性を持つ複数のレンズ間の距離を変化させることで、調整する。この調整は、ビデオカメラ１００の撮影者が手動で調整してもよく、あるいは、後述するレンズ制御モジュール２０６を通じてＣＰＵ２０４等からの制御により自動的に調整してもよい。
【００３５】
撮像素子２０１は、レンズ群２００を通して入射する光を電気信号に変換する光電変換部である。撮像素子２０１には、ＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）、及びＣ−ＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）等のイメージセンサが利用されている。
【００３６】
映像ＡＤＣ２０２は、撮像素子２０１が出力するアナログの電気信号をデジタルの電気信号（デジタル信号）に変換する。デジタル信号は、映像信号変換回路２０３へ出力される。
【００３７】
映像信号変換回路２０３は、映像ＡＤＣ２０２が出力するデジタル信号をＮＴＳＣ（Ｎａｔｉｏｎａｌ  Ｔｅｌｅｖｉｓｉｏｎ  Ｓｙｓｔｅｍ  Ｃｏｍｍｉｔｔｅｅ）又はＰＡＬ（Ｐｈａｓｅ  Ａｌｔｅｒｎａｔｉｎｇ  Ｌｉｎｅ）などの所定の規格の動画信号に変換する。
【００３８】
ＣＰＵ２０４は、ビデオカメラ１００全体を制御する制御部である。制御の種類としては、例えば、レンズ制御モジュール２０６を介して前述のレンズの焦点距離及びズームの制御を行うことで、撮像素子２０１への入射光を制御するレンズ制御がある。また、入力ボタン２０８及び姿勢検出センサ２０７等からの外部入力に対する入力制御、あるいは、圧縮伸張回路２１２の動作制御等がある。ＣＰＵ２０４は、これらの制御アルゴリズムをソフトウェア等で実行する。
【００３９】
レンズ制御モジュール２０６は、レンズ群２００の状態を検出し、ＣＰＵ２０４からの制御に基づいて、レンズ群２００に含まれる１つ以上のレンズを動作させる。レンズ制御モジュール２０６は、レンズ制御用モータ２０６ａとレンズ位置センサ２０６ｂとを備える。
【００４０】
レンズ位置センサ２０６ｂは、レンズ群２００を構成する複数のレンズ間の距離又は位置関係等を検出する。レンズ位置センサ２０６ｂが検出した複数のレンズ間の位置情報等は、ＣＰＵ２０４に送信される。ＣＰＵ２０４は、レンズ位置センサ２０６ｂからの情報、及び撮像素子２０１等の他の構成要素からの情報に基づいて、複数のレンズを適正に配置させるための信号をレンズ制御用モータ２０６ａに送信する。
【００４１】
レンズ制御用モータ２０６ａは、ＣＰＵ２０４から送信された制御信号に基づいてレンズを動作させるモータを駆動する。この結果、レンズ群２００の複数のレンズ間の距離が変更され、レンズの焦点距離、及びズームを調整することができる。これにより、レンズ制御モジュール２０６は、レンズ群２００を通過した入射光を撮像素子２０１上に集光させ、正確に被写体像を結ぶことができる。
【００４２】
なお、ＣＰＵ２０４は、上記以外にも、ビデオカメラ１００で動画撮影時の手振れをレンズ位置センサ２０６ｂ又は後述する姿勢検出センサ２０７等で検出し、レンズ制御用モータ２０６ａを駆動する制御を行ってもよい。これにより、ＣＰＵ２０４は、手振れ防止の動作を、レンズ制御モジュール２０６を介して実行させることも可能である。
【００４３】
姿勢検出センサ２０７は、ビデオカメラ１００の姿勢の状態を検出する。姿勢検出センサ２０７は、加速度センサ２０７ａ、角速度センサ２０７ｂ、及び仰角・俯角センサ２０７ｃ等を備える。これらの各種センサにより、ビデオカメラ１００がどのような状態で撮影を行っているかを、ＣＰＵ２０４は検出する。なお、これらのセンサは、好ましくはビデオカメラ１００の姿勢を詳細に検出するために、３軸方向（垂直方向（ｚ軸）、水平方向（ｘ軸、ｙ軸）等）についてそれぞれ検出できることが望ましい。
【００４４】
入力ボタン２０８は、ビデオカメラ１００の撮影者が使用する入力インタフェースの１つである。これにより、撮影者が撮影の開始及び終了、並びに、ビデオ撮影中の動画にマーキングを挿入する等、各種要求をビデオカメラ１００に伝えることが可能となる。
【００４５】
ディスプレイ２０９は、ビデオカメラ１００が撮影した動画を見るため、及び、撮影ファインダー等として利用するために設けられた表示部である。これにより、撮影者は、撮影した動画をその場で確認することが可能となる。また、上記以外にも、ディスプレイ２０９は、ビデオカメラ１００の各種情報を表示することで、撮影情報等、及び機器情報等のより詳細な情報を撮影者に伝えることが可能となる。
【００４６】
スピーカー２１０は、撮影した動画を再生する際の音声出力に使用される。これ以外にも、スピーカー２１０は、ビデオカメラ１００が出力する警告を音で撮影者へ伝えることも可能である。
【００４７】
出力Ｉ／Ｆ２１１は、ビデオカメラ１００が撮影した動画を外部機器へ出力するために用いられる。具体的には、出力Ｉ／Ｆ２１１は、外部機器とビデオカメラ１００とをケーブルで接続する場合のケーブルインタフェースである。あるいは、出力Ｉ／Ｆ２１１は、撮影した動画をメモリーカードに記録する場合のメモリーカードインタフェース等などである。これにより、撮影した動画をビデオカメラ１００に備え付けのディスプレイ２０９よりも大きな外部のディスプレイを用いて視聴等することが可能となる。
【００４８】
圧縮伸張回路２１２は、撮影した動画又は音声を所定のデジタルデータ形式に変更する符号化処理を行う回路である。具体的には、撮影した動画及び音声データに、ＭＰＥＧ（Ｍｏｖｉｎｇ  Ｐｉｃｔｕｒｅ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）又はＨ．２６４等の規格に従って符号化処理を行い、所定のデジタルデータ方式に変換（圧縮）する。また、圧縮伸張回路２１２は、撮影したデータの再生時には、所定のデジタルデータ形式の動画データを伸張してディスプレイ２０９等に表示する復号処理を行う回路である。
【００４９】
ＲＯＭ２１３は、ＣＰＵ２０４が処理するソフトウェアのプログラム、及びプログラムを動作させるための各種データを記録するメモリーの一例である。
【００５０】
ＲＡＭ２１４は、ＣＰＵ２０４が処理するソフトウェアのプログラム実行時に使用するメモリー領域等として使用されるメモリーの一例である。また、ＣＰＵ２０４は、圧縮伸張回路２１２と共用でＲＡＭ２１４を使用してもよい。
【００５１】
メモリーカード２１５は、圧縮伸張回路２１２が符号化した動画像データ、及びその他撮影された静止画データを蓄積等する目的で利用される、ビデオカメラ１００に着脱可能な記録媒体の一例であり、例えば、ＳＤカードである。なお、メモリーカード２１５は、動画データ及び静止画データ以外のデータを記録することも可能である。また、ビデオカメラ１００は、メモリーカード２１５の代わりに、ＨＤＤを備えていてもよい。
【００５２】
音声ＡＤＣ２１６は、マイクロフォン２１７が外部から取得した音声のアナログの電気信号をデジタルの電気信号に変換する。
【００５３】
マイクロフォン２１７は、ビデオカメラ１００外部の音声をアナログの電気信号に変換して出力するものである。
【００５４】
上記の通り、図２を用いてビデオカメラ１００のハードウェア構成について説明したが、本発明では、上記の構成に限定されるものではない。例えば、映像ＡＤＣ２０２及び映像信号変換回路２０３等を単一の集積回路として実現することも可能である。あるいは、ＣＰＵ２０４が実行するソフトウェアプログラムの一部を別途、ＦＰＧＡ（Ｆｉｅｌｄ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）を用いてハードウェアとして実現することも可能である。
【００５５】
次に、ビデオカメラ１００の機能構成について図３Ａ及び図３Ｂを用いて説明する。図３Ａは、ビデオカメラ１００の機能構成の一例を示すブロック図である。
【００５６】
図３Ａに示すように、ビデオカメラ１００は、撮影部１１０と、記録部１２０と、評価部１３０と、記録制御部１４０とを備える。
【００５７】
撮影部１１０は、動画像を撮影するとともに、当該動画像の撮影中に静止画を撮影する。具体的には、撮影部１１０は、動画像の撮影中に、記録制御部１４０からの指示に従って静止画を撮影する。撮影部１１０は、図２のレンズ群２００と、撮像素子２０１と、映像ＡＤＣ２０２と、映像信号変換回路２０３となどに相当する。
【００５８】
記録部１２０は、撮影部１１０によって撮影された静止画を記録媒体１５０に記録する。記録部１２０は、図２のＣＰＵ２０４でソフトウェア処理されるアルゴリズムに相当する。
【００５９】
なお、記録媒体１５０は、図３Ａに示すように、ビデオカメラ１００が備えていなくてもよい。また、ビデオカメラ１００が記録媒体１５０を備えている場合は、記録媒体１５０は、図２のＲＡＭ２１４及びメモリーカード２１５に相当する。
【００６０】
評価部１３０は、撮影部１１０によって撮影された動画像をフレーム毎に評価することで、静止画として記録すべきフレームの優先度を示す画像評価値を決定する。対象フレームが静止画として記録すべきである場合には、画像評価値は大きな値をとる。
【００６１】
なお、後述するように、動画像には、当該動画像の撮影状況を示す１種類以上の属性情報が対応付けられており、評価部１３０は、当該属性情報の種類毎に予め定められた評価値を対応付けた第１評価表に基づいて動画像をフレーム毎に評価する。評価部１３０は、図２のＣＰＵ２０４でソフトウェア処理されるアルゴリズムに相当する。
【００６２】
なお、評価部１３０は、さらに、ビデオカメラ１００のカメラワークに基づいた評価値であり、静止画として記録すべきフレームの優先度を示す動作評価値を決定してもよい。具体的には、評価部１３０は、ビデオカメラ１００のカメラワークを示す属性情報の種類毎に予め定められた評価値を対応付けた、第１評価表と異なる第２評価表に基づいて動画像をフレーム毎に評価する。
【００６３】
記録制御部１４０は、撮影部１１０によって撮影された第１静止画の記録を記録部１２０が開始した時点から予め定められた期間内に撮影部１１０によって撮影された第２静止画に対応する第２フレームの画像評価値が、第１静止画に対応する第１フレームの画像評価値より高い場合に、第１静止画の記録を中止するとともに、第２静止画を記録するように記録部１２０を制御する。なお、静止画に対応するフレームは、例えば、静止画が撮影された時刻のフレーム、すなわち、撮影部１１０によってシャッターが落ちた瞬間のフレームである。
【００６４】
なお、予め定められた期間は、具体的には、第１静止画の記録を開始した時点から当該記録を完了するまでの期間である。１枚の静止画の記録に必要な期間は、静止画のサイズによって異なるが、当該期間の最大値を推定し、推定した期間を予め設定しておくことができる。記録制御部１４０は、図２のＣＰＵ２０４でソフトウェア処理されるアルゴリズムに相当する。
【００６５】
また、後述するように、記録制御部１４０は、撮影部１１０に静止画の撮影を指示する。撮影部１１０は、当該指示に基づいて静止画の撮影を行うため、記録制御部１４０が撮影を指示してから、実際に撮影部１１０によって静止画が撮影されるまでには、所定の遅延時間が発生する。したがって、例えば、記録制御部１４０は、第１静止画が撮影される時刻のフレームである第１フレームより前の第３フレームの画像評価値が予め定められた閾値より大きい場合に、撮影部に静止画の撮影を指示する。
【００６６】
以下では、ビデオカメラ１００のより詳細な機能構成について図３Ｂを用いて説明する。図３Ｂは、ビデオカメラ１００の詳細な機能構成の一例を示すブロック図である。
【００６７】
ビデオカメラ１００は、機能的な構成要素として、レンズ部３００と、撮像部３０１と、映像ＡＤ変換部３０２と、信号処理部３０３と、映像信号圧縮部３０４と、撮像制御部３０５と、映像解析部３０６と、レンズ制御部３０７と、姿勢検出部３０８と、属性情報生成部３０９と、シーン解析部３１０と、音声解析部３１２と、音声信号圧縮部３１３と、多重化部３１４と、一次記憶部３１５と、二次記憶部３１６と、表示部３１８と、音声ＡＤ変換部３２１と、マイク部３２２と、外部入力部３２３と、静止画記録制御部３２４と、静止画信号伸張部３２５とを備える。
【００６８】
レンズ部３００は、被写体から入射した光の焦点距離、ズーム倍率（動画の拡大倍率）を調整する。この調整は、レンズ制御部３０７からの制御により行われる。レンズ部３００は、図２のレンズ群２００に相当する。
【００６９】
撮像部３０１は、レンズ部３００を透過した光を電気信号に変換する。撮像部３０１は、撮像制御部３０５の制御により、撮像素子上の任意の範囲のデータを動画データとして出力する。また、撮像部３０１は、動画データ以外にも、３原色点の色空間情報、白色の座標、３原色のうち少なくとも２つのゲイン情報、色温度情報、Δｕｖ（デルタｕｖ）、及び、３原色又は輝度信号のガンマ情報等の情報も出力することが可能である。これらの情報は、撮像制御部３０５を介して属性情報生成部３０９へ出力する。撮像部３０１は、図２の撮像素子２０１に相当する。
【００７０】
映像ＡＤ変換部３０２は、撮像部３０１からの動画データを示す電気信号を、所定の処理内容に従ってアナログ・デジタル変換を行う。映像ＡＤ変換部３０２は、図２の映像ＡＤＣ２０２に相当する。
【００７１】
信号処理部３０３は、映像ＡＤ変換部３０２が出力したデジタル信号を所定のフォーマットの動画信号に変換する。例えば、所定のフォーマットの動画信号は、ＮＴＳＣで規定された水平線の数、走査線の数、フレームレートに準拠したフォーマットの動画信号である。信号処理部３０３は、図２の映像信号変換回路２０３に相当する。
【００７２】
映像信号圧縮部３０４は、信号処理部３０３が出力したデジタル動画信号に所定の符号化処理を行い、データ量の圧縮等を実現する。具体例としては、ＭＰＥＧ２、ＭＰＥＧ４、Ｈ．２６４の符号化方式がある。映像信号圧縮部３０４は、図２の圧縮伸張回路２１２の圧縮機能に相当する。
【００７３】
撮像制御部３０５は、撮像部３０１の動作を制御する。具体的には、撮像制御部３０５は、撮像部３０１に対して、撮影時の露出量、撮影速度、及び感度等を制御する。また、これらの制御情報は、属性情報生成部３０９へも併せて出力される。撮像制御部３０５は、図２のＣＰＵ２０４でソフトウェア処理される制御アルゴリズムの１つである。
【００７４】
映像解析部３０６は、撮影された動画信号から動画の特徴を抽出する。本実施の形態では、映像解析部３０６は、色情報（例えば、動画に含まれる色の分布を検出する）、及びホワイトバランス等の情報を検出する。また、映像解析部３０６は、動画に人物の顔が含まれている場合には、顔検出を行う等、動画信号を解析することで、動画の特徴を抽出する。なお、色分布の検出は、動画信号を形成するデータに含まれる色情報を確認することで実現可能である。また、顔検出については、パターンマッチング等を用いることにより実現可能である。映像解析部３０６は、図２のＣＰＵ２０４でソフトウェア処理されるアルゴリズムの１つである。
【００７５】
レンズ制御部３０７は、レンズ部３００の動作を制御する。レンズ制御部３０７は、ズーム制御部３０７ａ、フォーカス制御部３０７ｂ、及び手振れ補正制御部３０７ｃ等を有する。レンズ制御部３０７は、レンズ部３００を制御するとともに、レンズ部３００の制御に関する制御情報を属性情報生成部３０９へ出力する。レンズ制御部３０７は、図２のレンズ制御モジュール２０６に相当する。
【００７６】
姿勢検出部３０８は、加速度センサ３０８ａ、角速度センサ３０８ｂ、及び仰角・俯角センサ３０８ｃを備え、ビデオカメラ１００の加速度、角速度、仰角・俯角等を検出する。検出した情報は、ビデオカメラ１００の姿勢及びその変化状況を検出する目的等に用いられる情報である。なお、加速度及び角速度については、垂直（ｚ軸）及び水平（ｘ軸及びｙ軸の２方向）の３方向について検出できることが望ましい。姿勢検出部３０８は、図２の姿勢検出センサ２０７に相当する。
【００７７】
マイク部３２２は、周囲の音を電気信号に変換して音声信号として出力する。マイク部３２２は、図２のマイクロフォン２１７に相当する。
【００７８】
音声ＡＤ変換部３２１は、マイク部３２２が出力したアナログの音声信号をデジタル形式の音声データに変換する。音声ＡＤ変換部３２１は、図２の音声ＡＤＣ２１６に相当する。
【００７９】
音声解析部３１２は、音声データから特徴のある音を抽出する。ここで、特徴のある音とは、例えば、撮影者の声、特定の単語の発音、歓声、銃声等である。これらの音の識別は、これらの音（音声）が持つ特有の周波数を予め登録しておき、登録しておいた周波数との比較結果で判別するなどの方法等を用いることで行われる。これにより、音声解析部３１２は、特徴のある音を抽出することができる。また、音声解析部３１２は、マイク部３２２が捕捉した音の入力レベル等の特徴も検出する。音声解析部３１２は、図２のＣＰＵ２０４でソフトウェア処理されるアルゴリズムの１つである。
【００８０】
音声信号圧縮部３１３は、音声ＡＤ変換部３２１が出力した音声データを所定の符号化アルゴリズムで変換する。音声の符号化アルゴリズムには、ＭＰ３（ＭＰＥＧ  Ａｕｄｉｏ  Ｌａｙｅｒ−３）及びＡＡＣ（Ａｄｖａｎｃｅｄ  Ａｕｄｉｏ  Ｃｏｄｉｎｇ）等の方法がある。音声信号圧縮部３１３は、図２の圧縮伸張回路２１２での圧縮機能の１つである。
【００８１】
外部入力部３２３は、動画撮影時に外部から受信した各種の情報、例えば、撮影者によるボタン入力、及び、外部から通信経由で受信した撮影インデックス情報等を出力するインタフェースである。なお、撮影インデックス情報とは、例えば、映画撮影時における、撮影場面を識別する番号、及び、撮影回数を示す番号等のそれぞれの撮影を識別するために用いられる識別番号などである。外部入力部３２３は、図２の入力ボタン２０８等に相当する。
【００８２】
属性情報生成部３０９は、動画又は静止画撮影時の撮影情報、外部入力情報及びその他の情報を属性情報（メタデータ）として生成する。属性情報の一例として、以下のような情報が考えられる。
【００８３】
・    ホワイトバランス情報
・    露出情報
・    焦点距離情報
・    撮影速度情報
・    ズーム倍率情報
・    感度情報
・    ３原色点の色空間情報
・    ３原色のうち少なくとも２つのゲイン情報
・    色温度情報
・    色分布情報
・    顔検出情報、顔認識情報
・    カメラ姿勢情報（加速度、角速度、仰角・俯角等）
・    撮影時刻情報（撮影開始時刻、終了時刻）
・    撮影インデックス情報
・    ユーザ入力情報
・    フレームレート情報
・    サンプリング周波数情報
【００８４】
なお、属性情報には、上記の撮影時の各種情報から算出される動画シーンを特徴づける新たな情報（撮影時の各種情報等を組み合わせ、組み合わせた情報を分析等することで算出される情報等）も含まれる。例えば、属性情報生成部３０９は、カメラ姿勢（加速度、角速度、仰角・俯角等）の情報から、ビデオカメラ１００の撮影時におけるパン、ティルト等のカメラワークを算出することが可能となる。また、属性情報生成部３０９は、焦点距離、及びズーム倍率の情報をそのまま、属性情報として出力することが可能である。
【００８５】
属性情報生成部３０９は、撮影時の各種情報からシーン評価に有用な情報を抽出、及び算出等して属性情報を生成する。具体的には、属性情報生成部３０９は、上記に示すような１種類以上の属性情報をフレーム毎に生成する。
【００８６】
シーン解析部３１０は、属性情報生成部３０９が生成した属性情報に基づいて、動画像を構成する複数のシーンのそれぞれを評価する。つまり、シーン解析部３１０は、シーン毎に、該当する１つ以上の属性情報を割り当て、割り当てた１つ以上の属性情報に基づいて対象シーンを評価する。そして、シーン解析部３１０は、評価結果に基づいて再生すべきシーンを選択する。シーンの評価及び選択方法等について後に詳細に説明する。後述するように、本実施の形態では、シーン解析部３１０は、フレーム毎に１つ以上の属性情報を割り当て、割り当てた１つ以上の属性情報に基づいて動画像をフレーム毎に評価する。そして、シーン解析部３１０は、評価結果に基づいて静止画として記録すべきフレームを決定する。
【００８７】
属性情報生成部３０９及びシーン解析部３１０は、図２のＣＰＵ２０４においてソフトウェア処理されるアルゴリズムの１つである。
【００８８】
多重化部３１４は、映像信号圧縮部３０４からの符号化動画データ、及び、音声信号圧縮部３１３からの符号化音声データを多重化して出力する。多重化部３１４は、図２のＣＰＵ２０４で実行されるソフトウェアであってもよく、あるいは、圧縮伸張回路２１２で、処理されてもよい。
【００８９】
一次記憶部３１５は、多重化部３１４から出力された符号化動画データ、及び符号化音声データが多重化されたデータ、並びに、静止画記録制御部３２４からの静止画データを一時的に保持するメモリーである。一次記憶部３１５は、図２のＲＡＭ２１４に相当する。
【００９０】
二次記憶部３１６は、一次記憶部３１５が一次的に保持したデータを、必要に応じて長期的に保持するメモリーである。一次記憶部３１５から二次記憶部３１６にデータを記録する動作については後述する。二次記憶部３１６は、図２のメモリーカード２１５等に相当する。
【００９１】
静止画記録制御部３２４は、属性情報生成部３０９が生成等した情報、又は、シーン解析部３１０が解析した評価結果に基づいて、撮影した動画から好適な画面を静止画として抽出し、一次記憶部３１５及び二次記憶部３１６に記録する制御を行う。具体的な抽出方法等については後述する。抽出した静止画は、必要に応じて画像圧縮等の処理を行い、一次記憶部３１５に記録される。
【００９２】
静止画信号伸張部３２５は、二次記憶部３１６に記録されている静止画のデータを読み出し、読み出した静止画を表示部３１８に表示する。なお、二次記憶部３１６に記録されている静止画は、必ずしも画像圧縮等の処理を施されなくてもよい。二次記憶部３１６に記録されている静止画が圧縮されている場合、静止画信号伸張部３２５は、静止画のデータを読み出し、読み出した静止画のデータを伸張して表示部３１８に出力する。静止画信号伸張部３２５は、図２の圧縮伸張回路２１２の機能の１つである。
【００９３】
表示部３１８は、静止画及び動画を表示する。表示部３１８は、図２のディスプレイ２０９に相当する。
【００９４】
なお、図３Ａに示す撮影部１１０は、例えば、図３Ｂに示すレンズ部３００、撮像部３０１、映像ＡＤ変換部３０２、及び信号処理部３０３に相当する。評価部１３０は、例えば、属性情報生成部３０９及びシーン解析部３１０に相当する。また、記録部１２０及び記録制御部１４０は、例えば、静止画記録制御部３２４に相当する。なお、以上の対応関係は、これに限定するものではない。
【００９５】
なお、図２のハードウェア構成と図３Ａ及び図３Ｂの機能ブロック図は、本発明に係る画像撮影装置を実施するための一態様であり、これに限定されるものではない。
【００９６】
また、図２のハードウェア構成と図３Ａ及び図３Ｂの機能構成との対応関係は、上記記載に限定するものではない。上記の説明は、本発明に係る画像撮影装置を実施するための一形態として示すものであって、機能構成とハードウェア構成とが異なる関係であってもよい。
【００９７】
＜撮影したシーンの解析＞
続いて、撮影した動画像のシーンの解析について説明する。
【００９８】
図４は、ビデオカメラ１００が撮影する動画の構成を示す図である。撮影者が撮影開始を指示し、撮影の終了又は撮影の一時停止を指示するまでに撮影された動画の単位を「クリップ（Ｃｌｉｐ）」とする。撮影者が撮影の開始、撮影の終了又は一時停止を何度も繰り返すと、クリップが複数生成される。この場合、図４に示すように、各クリップには、クリップ番号（Ｃｌｉｐ＃１〜＃ｎ）が付与される。
【００９９】
１つのクリップは１つ又は複数の「シーン（Ｓｃｅｎｅ）」から構成される。シーンは、論理的につながりのある一続きの動画である。シーンは、シーン解析部３１０が任意に設定することが可能である。例えば、１つのクリップを１つのシーンとして、すなわち、「１クリップ」＝「１シーン」と設定してもよい。また、画面が大きく変わることを境として「シーン」を設定してもよい。この場合には、映像解析部３０６がフレーム間の動きベクトルを算出し、「動き」の大きさ（変化）が所定の値より大きい場合を、シーンの切り替え部分としてもよい。
【０１００】
また、シーン解析部３１０は、その他の撮影情報等に基づいてシーンを区切ってもよい。例えば、撮影者からのボタン入力によりシーンを区切ってもよい。この場合に、撮影者の明確な意図でクリップ内のシーンを構成することが可能となる。１つのクリップに複数のシーンが含まれる場合、図４に示すように、各シーンには、シーン番号（Ｓｃｅｎｅ＃１〜＃ｎ）が付与される。
【０１０１】
シーンは、１つ又は複数の「フレーム（Ｆｒａｍｅ）」から構成される。フレームは、動画を構成する個々の静止画である。図４に示すように、各フレームには、フレーム番号（Ｆｒａｍｅ＃１〜＃ｎ）付与される。
【０１０２】
図５は、シーン解析部３１０が、クリップ内を複数のシーンに分割した場合の例を示す図である。シーン解析部３１０は、上述の通り属性情報等に基づいてクリップを分割する。図５では、それぞれのシーンを「開始時刻」と「終了時刻」とで定めているが、フレーム番号等でシーンの開始と終了とを定めてもよい。
【０１０３】
なお、図５に示す「代表時刻」は、各シーンに含まれる複数のフレームのうち、代表的なフレームの時刻を示している。例えば、シーンをサムネイル表示する場合などに、代表時刻のフレームが表示される。
【０１０４】
図６は、シーン解析部３１０が、それぞれのフレームを評価する際に用いる属性情報と評価との関係例を示した図である。図６に示す一覧表は、本発明に係る第１評価表の一例である。例えば、クリップイン（撮影の開始部分）及びクリップアウト（撮影の終了前部分）部分については、動画の導入部分及び重要部分と考えることができ、撮影された動画が持つ論理的な意味が高いと推論される。したがって、図６に示す例では、「クリップイン」“Ａ”及び「クリップアウト」“Ｆ”は、評価値が１００となっている。
【０１０５】
その他にも、撮影時のカメラワークとして「ズームアップ」“Ｄ”及び「ズームダウン」“Ｇ”についても、特定の被写体への注目度を高めるとの観点から評価値が３０として定められている。このように、シーン解析部３１０は、予め属性情報それぞれに対する数値化された評価を記憶している。
【０１０６】
なお、図６の例では、評価値が高いほど高い評価（好ましい）として表現している。シーン解析部３１０は、このような図６の属性情報と評価との関係に基づいて各フレームを評価する。
【０１０７】
なお、１つのフレームに複数の属性情報が与えられている場合は、それぞれの属性情報に割り当てられている評価（評価値）を加算してもよい。また、１つのフレームに複数の属性情報が与えられている場合、その属性情報の中から最も評価の高い属性が持つ評価（評価値）を当該フレームの評価値としてもよい。さらに、フレーム内に含まれる種々の属性を考慮するのであれば、複数の属性の評価値の平均値を評価としてもよい。
【０１０８】
なお、評価は好ましいフレームだけに行う必要はない。例えば、撮影時の手振れは、動画の視聴者に見づらい動画となる可能性があるので、こういった属性を持つフレームには減点（マイナス点）の評価を行ってもよい。図６の例では、「手振れ」“Ｉ”に対する評価は−２０、「地面（垂直下方向）撮影」“Ｊ”に対する評価は−１０として定められている。
【０１０９】
なお、図６の属性情報と評価との関係は、１つに限定するものではない。例えば、複数の属性情報と評価との組み合わせデータを、ビデオカメラ１００の撮影者が撮影するモード（例えば、風景の撮影、人物（ポートレート）撮影、静物撮影等）によって切り換えてもよい。また、予め複数の組み合わせデータを備えておき、撮影モードによって、複数のデータを合成（それぞれの評価の値を一定の比率で加算等）してもよい。この場合には、合成の比率を変えることで、動的に属性情報と評価との組み合わせデータを変更することが可能となる。
【０１１０】
さらには、ユーザが、外部入力部３２３などを利用して、属性情報の項目及び評価値を変更してもよい。これにより、ユーザがより重要と考えている属性に対する評価を高めることができるので、シーン解析部３１０は、よりユーザの意向に沿った評価を行うことができる。
【０１１１】
なお、フレームの評価は、優先度を示している。すなわち、評価値が高いフレームは、ユーザ又はビデオカメラ１００が重要であると判断したフレームであり、評価値が低いフレームより優先してユーザが再生を望むフレームである。
【０１１２】
図７は、シーン解析部３１０が、各フレームに評価（優先度）を割り当てた結果を示す図である。図７は、横軸に時間（フレーム）を、縦軸に各フレームの評価（優先度）を示している。
【０１１３】
図７の時間０付近にある“Ａ”の符号が付けられているフレームは、撮影を開始した直後であるため「クリップイン」の属性を持つ。図６に従えば、「クリップイン」の属性は、評価（優先度）１００を持つ。
【０１１４】
“Ｂ”の符号が付けられているフレームは、「特定音声の抽出」の属性を持つ。「特定音声の抽出」の属性は、上述の音声解析部３１２等により得られた音声情報に基づいてシーン解析部３１０によって、対象フレームに割り当てられる。図６に従えば、「特定音声の抽出」の属性は、評価（優先度）７０を持つ。
【０１１５】
“Ｃ”の符号が付けられているフレームは、「（カメラワーク後に）静止して撮影」の属性を持つ。つまり、“Ｃ”のフレームは、撮影者がカメラをパン、ティルト等のビデオカメラ１００本体を動かして撮影した後に、静止して撮影することを意味する属性を示す。“Ｃ”のフレームは、静止して撮影する際の被写体に動画としての価値が高いと判断できることが考えられる。図６に従えば、「（カメラワーク後に）静止して撮影」の属性は、評価（優先度）４０を持つ。
【０１１６】
“Ｄ”の符号が付けられているフレームは、「ズームアップ」の属性を持つ。つまり、“Ｄ”のフレームは、ビデオカメラ１００をズームアップして撮影しているフレームである。図６では、「ズームアップ」の属性は、評価（優先度）３０を持つ。
【０１１７】
なお、図６に示すように「ズームダウン」の属性も、評価（優先度）３０を持つ。ただし、ズームアップとズームダウンとで評価の値を異ならせることも可能である。例えば、ズームアップ“Ｄ”をズームダウン“Ｇ”よりも評価を高く設定することで、ズームアップで撮影されるフレーム、つまり、動画の拡大倍率が大きくなるフレーム（拡大されて撮影される被写体があるフレーム）について高い評価（優先度）を割り当てることができる。逆に、動画の拡大倍率が小さくなるフレームについては、比較的低い評価（優先度）を割り当てることも可能である。
【０１１８】
“Ｅ”の符号が付けられているフレームは、「パン、ティルト」の属性を持つ。つまり、“Ｅ”のフレームは、ビデオカメラ１００がパン、ティルト等の動きを伴った撮影（カメラワーク）を行ったフレームである。図６では、「パン、ティルト」の属性は、評価（優先度）２５を持つ。
【０１１９】
“Ｉ”の符号が付けられているフレームは、「手振れ」の属性を持つ。つまり、“Ｉ”のシーンは、撮影時に手振れを伴って撮影されているフレームを示している。図６では、「手振れ」の属性は、評価（優先度）−２０を持つ。これは、“Ｉ”のフレームについては、動画を視聴した際に画面が揺れる等、見づらいフレームとなっている可能性があり、減点したためである。
【０１２０】
“Ｊ”の符号が付けられているフレームは、「地面（垂直下方向）撮影」の属性を持つ。つまり、“Ｊ”のフレームは、撮影者が、撮影を停止又は一時中断せずに誤ってビデオカメラ１００を持ったまま移動等している場合に起こりやすい、地面を撮影し続けているようなフレームを示す。図６では、「地面（垂直下方向）撮影」の属性は、評価（優先度）−１０を持つ。
【０１２１】
以上のように、シーン解析部３１０は、各フレームについて評価（優先度）を割り当てる。なお、図７の例では、フレームを単位として評価を割り当てたが、シーン解析部３１０はクリップ単位、又は、シーン単位で上記の評価割り当てを行ってもよい。この場合、フレームは、当該フレームが含まれるクリップ又はシーンに割り当てられた評価と同じ評価が割り当てられる。図８に、フレーム単位で評価割り当てを行った結果の評価値のみの一例を示す。
【０１２２】
また、シーン解析部３１０は、後述する静止画記録制御部３２４における静止画の撮影成功判定を行うために、カメラワーク評価のための評価割り当てを行い、カメラワーク評価値を算出する。カメラワーク評価値は、フレーム毎に静止画記録制御部３２４に通知する。例えば、手振れ又は地面撮影を検出した場合の減点を−１００と設定するなど、記録される静止画として好ましくないフレームでは評価値が低くなるように、属性情報と評価とを設定する。図９は、カメラワーク評価値を算出するための属性情報と評価との関係の一例を示す図である。
【０１２３】
シーン解析部３１０は、さらに、各フレームに割り当てた評価に基づいて、好ましいフレームのみを抽出する。具体的には評価の高いフレームのみを抽出する。図７の例では、（ｉ）〜（ｉｉｉ）の部分のフレームのみを抽出することとなる。
【０１２４】
後述するように、実施の形態１に係るシーン解析部３１０は、図６に示す一覧表を利用してフレーム毎に動画像を評価するとともに、図９に示す一覧表を利用してフレーム毎に動画像を評価する。つまり、シーン解析部３１０は、好適な静止画を取得することを目的として、図６に示す一覧表を利用して動画像をフレーム毎に評価するとともに、実際に静止画を取得する際のカメラワークを確認することを目的として、図９に示す一覧表を利用して動画像をフレーム毎に評価する。なお、図９に示す一覧表は、本発明に係る第２評価表の一例である。
【０１２５】
ビデオカメラ１００内部の処理遅延などのために、好ましくない静止画が記録されてしまうが、上記のようにカメラワークの評価を行うことで、好ましくない静止画が記録されてしまう可能性を低減することができる。
【０１２６】
そもそもビデオカメラ１００は、図６に示す一覧表を利用した動画像の評価結果に基づいて静止画の取得を決定してから、実際に撮像部３０１がシャッターを動作させるまでには、ビデオカメラ１００内部のソフトウェア処理時間、及びマイコン間の通信などの処理遅延が生じる。この処理遅延の間に、撮影装置と被写体との間に突然人が横切る、あるいは、撮影者の手振れが発生するなどによって、好ましくない静止画が記録されてしまうことが起こる。
【０１２７】
以下では、具体的に、静止画の自動抽出及び記録処理について説明する。つまり、実施の形態１に係るビデオカメラ１００の動作のうち、特に、シーン解析部３１０及び静止画記録制御部３２４の動作について説明する。
【０１２８】
＜静止画の自動抽出及び記録＞
静止画記録制御部３２４は、シーン解析部３１０からフレーム毎の評価を取得し、その評価に基づいて静止画を取得するか否かを決定する。図１０は、静止画記録制御部３２４が静止画を抽出して、記録する処理を示すフローチャートである。以下、図１０を用いて、静止画の抽出及び記録処理について説明する。
【０１２９】
なお、上述したように、実施の形態１に係るビデオカメラ１００では、動画像の撮影中に、属性情報生成部３０９及びシーン解析部３１０によって、取得した動画像をフレーム毎に評価している。具体的には、シーン解析部３１０は、静止画取得用に図６に示す評価一覧表に従って動画像を評価することで、図１１に示す動画像のフレーム毎の画像評価値（フレーム評価）を生成する。
【０１３０】
さらに、シーン解析部３１０は、カメラワーク評価用に図９に示す評価一覧表に従って動画像を評価することで、図１１に示す動画像のフレーム毎の動作評価値（カメラワーク評価）を生成する。
【０１３１】
静止画記録制御部３２４は、シーン解析部３１０が図１１に示すフレーム毎に行った評価結果（フレーム評価）のうち、現フレームの評価値（画像評価値）を取得する（ステップＳ１０１）。静止画記録制御部３２４は、シーン解析部３１０が評価するフレーム毎の評価結果に基づいて、評価値が所定の閾値Ａ（本発明に係る第２閾値に相当）より大きいフレームを静止画取得対象のフレームとして決定する（ステップＳ１０２）。図１１の例において、例えば、静止画記録制御部３２４は、所定の閾値Ａ（例えば、５０）を超えた評価値の第３フレーム（又は、第４フレーム）を静止画取得対象のフレームとして決定する。
【０１３２】
静止画記録制御部３２４は、静止画取得対象のフレームを決定すると（ステップＳ１０２でＹｅｓ）、静止画を撮影することを撮像制御部３０５に指示し、撮像部３０１が撮影した静止画を、信号処理部３０３を介して取得し、静止画データとして一次記憶部３１５に記録する（ステップＳ１０３）。図１１に示す例では、静止画記録制御部３２４は、第３フレーム（又は第４フレーム）を静止画取得対象のフレームとして決定し、撮影指示を撮像制御部３０５に出力する。撮像制御部３０５は、撮影指示を受けると、静止画を取得するように撮像部３０１を制御する。撮像部３０１は、撮像制御部３０５による制御に基づいて静止画を撮影する。
【０１３３】
なお、静止画記録制御部３２４及び撮像制御部３０５は、ＣＰＵ２０４で動作するソフトウェアで実現されており、また、ＣＰＵ２０４では、その他の機能も動作している。このため、静止画記録制御部３２４が静止画を撮影する指示から実際に撮像制御部３０５による制御に基づいて撮像部３０１が静止画を取得するまでには相応の処理時間が必要である。
【０１３４】
つまり、静止画記録制御部３２４による撮影指示から撮像部３０１が実際に静止画を撮影するまでに、遅延時間が発生する。より具体的には、図１１に示すように、静止画記録制御部３２４は、第３フレームを静止画取得対象のフレームとして決定したが、実際に撮像部３０１によって撮影された第１静止画に対応する第１フレームは、第３フレームより遅延時間だけ遅いフレームである。言い換えると、第３フレームは、実際に撮影される第１静止画に対応する第１フレームより前のフレームである。
【０１３５】
なお、静止画記録制御部３２４は、抽出対象となる静止画データを信号処理部３０３が出力したデータ又は映像信号圧縮部３０４が出力したデータのいずれからも取得することが可能である。しかし、静止画記録制御部３２４は、映像信号圧縮部３０４が符号化した後の動画データから静止画データを抽出すると、符号化の際に一部のデータ（静止画に関わるデータ）が削除される場合があるため、好ましくは、符号化される前の信号処理部３０３が出力したデータから静止画データを抽出することが望ましい。
【０１３６】
静止画記録制御部３２４は、実際に静止画を撮影した時点、すなわち、シャッターが落ちた瞬間のカメラワーク評価値（動作評価値）をシーン解析部３１０から取得し、カメラワーク評価値が所定の閾値Ｂ（本発明に係る第３閾値に相当）より大きいか否かを判定する（ステップＳ１０４）。カメラワーク評価値が所定の閾値Ｂを超えている場合（ステップＳ１０４でＹｅｓ）、静止画記録制御部３２４は、取得した静止画は撮影に成功した結果得られた画像であると判定する。図１１に示す例では、実際に第１静止画（又は第２静止画）を撮影した時点、すなわち、第１静止画に対応する第１フレーム（又は第２静止画に対応する第２フレーム）のカメラワーク評価値は、所定の閾値Ｂを超えているので、静止画記録制御部３２４は、取得した第１静止画（又は第２静止画）は撮影に成功した結果得られた画像であると判定する。
【０１３７】
手振れなどにより静止画の撮影に失敗した場合、カメラワーク評価値が所定の閾値Ｂを下回り（ステップＳ１０４でＮｏ）、静止画記録制御部３２４は、取得した静止画を一次記憶部３１５から破棄する（ステップＳ１０９）。なお、カメラワーク評価値は、所定の範囲の期間だけ各シーンの時刻情報とともにバッファメモリーに記憶し、撮像部３０１がシャッターを切った瞬間の時刻に対応する評価値を利用するようにすることが好ましい。
【０１３８】
静止画の撮影に成功し、静止画記録プロセスを遂行中の静止画がない場合は（ステップＳ１０５でＮｏ）、静止画記録制御部３２４は、取得した静止画を一次記憶部３１５へ一時的に保持させるとともに、二次記憶部３１６への転送を開始する（ステップＳ１０８）。二次記憶部３１６へ記録する際には、ステップＳ１０１で取得した評価値も合わせて記録する。
【０１３９】
図１１に示す例では、静止画記録制御部３２４は、第１静止画を一次記憶部３１５に記憶し、二次記憶部３１６への記録を開始する。なお、ここで、静止画記録プロセスとは、取得した静止画を一次記憶部３１５に一時的に保持している第１期間、及び、一次記憶部３１５から二次記憶部３１６への記録を行う第２期間における記録処理である。
【０１４０】
別の静止画の静止画記録プロセスを遂行中である場合には（ステップＳ１０５でＹｅｓ）、記録中の静止画に対応するフレームの評価値と、新たに取得した静止画に対応するフレーム、すなわち、現フレームの評価値とを比較する（ステップＳ１０６）。図１１に示す例では、静止画記録制御部３２４が第２静止画を一次記憶部３１５に記憶させようとした場合に、二次記憶部３１６は、第１静止画の記録処理が遂行中である。したがって、静止画記録制御部３２４は、記録中の第１静止画に対応する第１フレームの評価値と、新たに取得した第２静止画に対応する第２フレームの評価値とを比較する。
【０１４１】
記録中の第１静止画に対応する第１フレームの評価値が新たに取得した第２静止画に対応する第２フレームの評価値より高い場合（ステップＳ１０６でＮｏ）、新たに取得した第２静止画を破棄して（ステップＳ１０９）、記録中の第１静止画の静止画記録プロセスを継続する。
【０１４２】
新たに取得した第２静止画に対応する第２フレームの評価値が記録中の第１静止画に対応する第１フレームの評価値より高い場合（ステップＳ１０６でＹｅｓ）、記録中の第１静止画の静止画記録プロセスを中止し（ステップＳ１０７）、新たに取得した第２静止画の静止画記録プロセスを開始する（ステップＳ１０８）。図１１に示す例では、第２フレームの評価値は第１フレームの評価値より高いので、静止画記録制御部３２４は、第１静止画の静止画記録プロセスを中止し、第２静止画記録プロセスを開始する。
【０１４３】
以上により、本実施の形態に示した構成により、ビデオカメラ１００は、動画を撮影しながらフレーム毎に評価を行い、好適なフレームに対応する静止画の撮影を自動的に行うことが可能となる。
【０１４４】
なお、本実施の形態に係るビデオカメラ１００では、フレームの評価結果に基づいて撮影を決定してから、実際にシャッターが落ちるまで（実際に静止画を取得するまで）に遅延時間が生じる。これに対して、本実施の形態に係るビデオカメラ１００は、実際にシャッターが落ちた瞬間の評価値を判断することで、好ましくない静止画が撮影されてしまう可能性を低減することができる。
【０１４５】
また、本実施の形態に係るビデオカメラ１００では、ＲＡＭなどの一次記憶部、及び、メモリーカードなどの二次記憶部に、撮影した静止画を記録するのに所定の期間が必要となる。これに対して、本実施の形態に係るビデオカメラ１００では、記録中の第１静止画の評価値と新たに取得した第２静止画の評価値とを比較し、第２静止画の評価値の方が第１静止画の評価値より大きい場合には、第１静止画の記録を中止し、第２静止画の記録を行う。
【０１４６】
これにより、静止画の記録処理中に、より好ましい次の静止画が撮影された場合は、より好ましい次の静止画を記録することができる。したがって、ある静止画像の記録処理中であり、他の静止画像を記録することができない場合であっても、適切な静止画像を記録する。
【０１４７】
（実施の形態２）
実施の形態２に係る画像撮影装置は、撮影した第２静止画を記録しようとしたときに、他の第１静止画の記録プロセスが遂行中である場合に、記録中の第１静止画の評価値が所定の閾値より大きい場合は、第２静止画の記録を行わずに、第１静止画の記録プロセスを継続することを特徴とする。つまり、記録中の第１静止画の評価値が所定の閾値より小さい場合に、第１静止画に対応する第１フレームの評価値と第２静止画に対応する第２フレームの評価値とを比較する。
【０１４８】
なお、実施の形態２に係る画像撮影装置と実施の形態１に係る画像撮影装置との異なる点は、静止画記録制御部３２４の処理方法である。実施の形態２に係る画像撮影装置の構成など、その他の点については、実施の形態１と共通であるため、説明を省略する。
【０１４９】
静止画記録制御部３２４は、シーン解析部３１０からフレーム毎の評価を取得し、その評価に基づいて静止画を取得するか否かを決定する。図１２は、静止画記録制御部３２４が静止画を抽出して記録する処理を示すフローチャートである。以下、図１２を用いて実施の形態２に係る画像撮影装置の記録処理について説明する。
【０１５０】
実施の形態２に係るビデオカメラでも実施の形態１と同様に、属性情報生成部３０９及びシーン解析部３１０は、図１３に示す動画像のフレーム毎の評価結果（フレーム評価及びカメラワーク評価）を生成する。
【０１５１】
静止画記録制御部３２４は、シーン解析部３１０が図１３に示すフレーム毎に行った評価結果（フレーム評価）のうち、現フレームの評価値（画像評価値）を取得する（ステップＳ１０１）。静止画記録制御部３２４は、シーン解析部３１０が評価するフレーム毎の評価結果に基づいて、評価値が所定の閾値Ａより大きいフレームを静止画取得対象のフレームとして決定する（ステップＳ１０２）。図１３の例において、例えば、静止画記録制御部３２４は、所定の閾値Ａ（例えば、５０）を超えた評価値の第３フレーム（又は、第４フレーム）を静止画取得対象のフレームとして決定する。
【０１５２】
静止画記録制御部３２４は、静止画取得対象のフレームを決定すると（ステップＳ１０２でＹｅｓ）、静止画を撮影することを撮像制御部３０５に指示し、撮像部３０１が撮影した静止画を、信号処理部３０３を介して取得し、静止画データとして一次記憶部３１５に記録する（ステップＳ１０３）。図１３に示す例では、静止画記録制御部３２４は、第３フレーム（又は、第４フレーム）を静止画取得対象のフレームとして決定し、撮影指示を撮像制御部３０５に出力する。撮像制御部３０５は、撮影指示を受けると、静止画を取得するように撮像部３０１を制御する。撮像部３０１は、撮像制御部３０５による制御に基づいて静止画を撮影する。なお、実施の形態１と同様に、撮影指示から実際に撮影されるまでには、所定の遅延時間が発生する。
【０１５３】
なお、静止画記録制御部３２４は、抽出対象となる静止画データを信号処理部３０３が出力したデータ又は映像信号圧縮部３０４が出力したデータのいずれからも取得することが可能である。しかし、静止画記録制御部３２４は、映像信号圧縮部３０４が符号化した後の動画データから静止画データを抽出すると、符号化の際に一部のデータ（静止画に関わるデータ）が削除される場合があるため、好ましくは、符号化される前の信号処理部３０３が出力したデータから静止画データを抽出することが望ましい。
【０１５４】
静止画記録制御部３２４は、実際に静止画を撮影した時点、すなわち、シャッターが落ちた瞬間のカメラワーク評価値（動作評価値）をシーン解析部３１０から取得し、カメラワーク評価値が所定の閾値Ｂより大きいか否かを判定する（ステップＳ１０４）。カメラワーク評価値が所定の閾値Ｂを超えている場合（ステップＳ１０４でＹｅｓ）、静止画記録制御部３２４は、取得した静止画は撮影に成功した結果得られた画像であると判定する。図１３に示す例では、実際に第１静止画（又は第２静止画）を撮影した時点、すなわち、第１静止画に対応する第１フレーム（又は、第２静止画に対応する第２フレーム）のカメラワーク評価値は、所定の閾値Ｂを超えているので、静止画記録制御部３２４は、取得した第１静止画（又は、第２静止画）は撮影に成功した結果得られた画像であると判定する。
【０１５５】
手振れなどにより静止画の撮影に失敗した場合、カメラワーク評価値が所定の閾値Ｂを下回り（ステップＳ１０４でＮｏ）、静止画記録制御部３２４は、取得した静止画を一次記憶部３１５から破棄する（ステップＳ１０９）。なお、カメラワーク評価値は、所定の範囲の期間だけ各シーンの時刻情報とともにバッファメモリーに記憶し、撮像部３０１がシャッターを切った瞬間の時刻に対応する評価値を利用するようにすることが好ましい。
【０１５６】
静止画の撮影に成功し、静止画記録プロセスを遂行中の静止画がない場合は（ステップＳ１０５でＮｏ）、静止画記録制御部３２４は、取得した静止画を一次記憶部３１５に一時的に保持させるとともに、二次記憶部３１６への記録を開始する（ステップＳ１０８）。また、二次記憶部３１６へ記録する際には、ステップＳ１０１で取得した評価値も合わせて記録する。
【０１５７】
別の静止画の静止画記録プロセスを遂行中の場合で（ステップＳ１０５でＹｅｓ）、記録中の静止画に対応するフレームの評価値が所定の閾値Ｃを超える場合には（ステップＳ２１０でＹｅｓ）、後から取得した静止画を一次記憶部３１５から破棄し、記録中の静止画の静止画記録プロセスを継続する。図１３に示す例では、第１静止画に対応する第１フレームの評価値が閾値Ｃを超えているので、撮像部３０１によって第２静止画が撮影されたにもかかわらず、第１静止画の記録プロセスを継続する。なお、図１３に示すように、閾値Ｃ（本発明の第１閾値に相当）は、閾値Ａより大きい。すなわち、第２静止画の記録又は破棄を判定するための閾値Ｃは、第１静止画（又は第２静止画）の撮影を判定するための閾値Ａより大きい。
【０１５８】
これにより、シーン解析部３１０において、人物の笑顔を検出した場合、あるいは、撮影者が特定の対象に着目して撮影していると検出された場合などにおいては、最初に検出したシーンを確実に記録することができる。
【０１５９】
記録中の静止画に対応するフレームの評価値が閾値Ｃより小さい場合（ステップＳ２１０でＮｏ）、静止画記録制御部３２４は、記録中の静止画に対応するフレームの評価値と、新たに取得した静止画に対応するフレームの評価値とを比較する（ステップＳ１０６）。記録中の静止画に対応するフレームの評価値が新たに取得した静止画に対応するフレームの評価値より高い場合（ステップＳ１０６でＮｏ）、新たに取得した静止画を破棄して（ステップＳ１０９）、記録中の静止画の記録プロセスを継続する。
【０１６０】
新たに取得した静止画に対応するフレームの評価値が記録中の静止画に対応するフレームの評価値より高い場合（ステップＳ１０６でＹｅｓ）、記録中の静止画の静止画記録プロセスを中止し（ステップＳ１０７）、新たに取得した静止画の静止画記録プロセスを開始する（ステップＳ１０８）。
【０１６１】
以上により、本実施の形態に示した構成により、本実施の形態に係るビデオカメラ１００は、動画を撮影しながらフレーム毎に評価を行い、好適なフレームに対応する静止画の撮影を自動的に行うことが可能となる。
【０１６２】
実施の形態２に係るビデオカメラ１００では、撮影した第２静止画を記録しようとしたときに、他の第１静止画の記録プロセスが遂行中である場合に、記録中の第１静止画の評価値が所定の閾値Ｃより大きい場合は、第２静止画の記録を行わずに、第１静止画の記録プロセスを継続する。これにより、所定の閾値Ｃより大きな評価値を有する第１静止画を確実に記録することができるので、例えば、人物の笑顔を検出した場合など、最初に検出された静止画を確実に記録することができる。
【０１６３】
なお、実施の形態２に係るビデオカメラ１００では、第２静止画を記録しようとしたときに、第１静止画の記録プロセスが遂行中である場合に、第１静止画の評価値と第２閾値との比較を行ったが、第１静止画の撮影を行った時点で第１静止画の評価値と第２閾値との比較を行ってもよい。そして、第１静止画の評価値が第２閾値より大きい場合は、第１静止画の記録プロセスが終了するまでの期間、あるいは、当該期間に相当する予め定められた一定期間、静止画記録制御部３２４は、新たな静止画の撮影指示の出力を停止してもよい。
【０１６４】
以上、本発明に係る画像撮影装置及び画像撮影方法について、実施の形態に基づいて説明したが、本発明は、これらの実施の形態に限定されるものではない。本発明の趣旨を逸脱しない限り、当業者が思いつく各種変形を当該実施の形態に施したものや、異なる実施の形態における構成要素を組み合わせて構築される形態も、本発明の範囲内に含まれる。
【０１６５】
例えば、各実施の形態では、本発明に係る画像撮影装置としてビデオカメラ１００を用いた場合を例として説明したが、本発明は、この実施の態様に限定されるものではない。例えば、デジタルスチルカメラにおいて、本発明を実施することも可能である。また、ネットワークカメラのような監視カメラ等においても、本発明を実施することができる。
【０１６６】
さらに、本発明は、上記の実施の態様を方法として実現することができる。例えば、上記の実施の形態等で示したビデオカメラ１００等における制御方法として実現することも可能である。
【０１６７】
さらに、上記の実施の形態１及び実施の形態２において、静止画を二次記憶部３１６に記録完了した場合に、表示部３１８において、撮影に成功したことを示すアイコン表示してもよく、あるいは、撮影に成功した静止画を縮小した画像を表示してもよい。これにより、撮影者は、動画を撮影しながら、記録された静止画を確認することができる。
【０１６８】
なお、各実施の形態では、本発明に係る静止画に対応するフレームは、例えば、静止画が撮影された時刻のフレーム、すなわち、撮影部１１０によってシャッターが落ちた瞬間のフレームであるとしたが、これに対して、記録制御部１４０が撮影を行うことを決定した瞬間のフレーム、すなわち、実際に撮影される静止画よりは所定の遅延時間だけ前のフレームでもよい。また、当該遅延時間内の他のフレームであってもよい。
【０１６９】
具体的には、図１０及び図１１に示すように、ステップＳ１０６において静止画記録制御部３２４は、第１フレームの評価値と第２フレームの評価値とを比較したが、第３フレームの評価値と第４フレームの評価値とを比較してもよい。
【０１７０】
また、本発明は、上述したように、画像撮影装置及び画像撮影方法として実現できるだけではなく、本実施の形態の画像撮影方法をコンピュータに実行させるためのプログラムとして実現してもよい。また、当該プログラムを記録するコンピュータ読み取り可能なＣＤ−ＲＯＭなどの記録媒体として実現してもよい。さらに、当該プログラムを示す情報、データ又は信号として実現してもよい。そして、これらプログラム、情報、データ及び信号は、インターネットなどの通信ネットワークを介して配信されてもよい。
【０１７１】
また、本発明は、画像撮影装置を構成する構成要素の一部又は全部を、１個のシステムＬＳＩ（Ｌａｒｇｅ  Ｓｃａｌｅ  Ｉｎｔｅｇｒａｔｉｏｎ）から構成してもよい。システムＬＳＩは、複数の構成部を１個のチップ上に集積して製造された超多機能ＬＳＩであり、具体的には、マイクロプロセッサ、ＲＯＭ及びＲＡＭなどを含んで構成されるコンピュータシステムである。
【産業上の利用可能性】
【０１７２】
本発明に係る画像撮影装置及び画像撮影方法は、ある静止画像の記録処理中であり、他の静止画像を記録することができない場合であっても、適切な静止画像を記録するという効果を奏し、デジタルビデオカメラなどの撮影装置に利用することができる。
【符号の説明】
【０１７３】
１００  ビデオカメラ
１１０  撮影部
１２０  記録部
１３０  評価部
１４０  記録制御部
１５０  記録媒体
２００  レンズ群
２０１  撮像素子
２０２  映像ＡＤＣ
２０３  映像信号変換回路
２０４  ＣＰＵ
２０６  レンズ制御モジュール
２０６ａ  レンズ制御用モータ
２０６ｂ  レンズ位置センサ
２０７  姿勢検出センサ
２０７ａ、３０８ａ  加速度センサ
２０７ｂ、３０８ｂ  角速度センサ
２０７ｃ、３０８ｃ  仰角・俯角センサ
２０８  入力ボタン
２０９  ディスプレイ
２１０  スピーカー
２１１  出力Ｉ／Ｆ
２１２  圧縮伸張回路
２１３  ＲＯＭ
２１４  ＲＡＭ
２１５  メモリーカード
２１６  音声ＡＤＣ
２１７  マイクロフォン
３００  レンズ部
３０１  撮像部
３０２  映像ＡＤ変換部
３０３  信号処理部
３０４  映像信号圧縮部
３０５  撮像制御部
３０６  映像解析部
３０７  レンズ制御部
３０７ａ  ズーム制御部
３０７ｂ  フォーカス制御部
３０７ｃ  手振れ補正制御部
３０８  姿勢検出部
３０９  属性情報生成部
３１０  シーン解析部
３１２  音声解析部
３１３  音声信号圧縮部
３１４  多重化部
３１５  一次記憶部
３１６  二次記憶部
３１８  表示部
３２１  音声ＡＤ変換部
３２２  マイク部
３２３  外部入力部
３２４  静止画記録制御部
３２５  静止画信号伸張部
【図１】
2011119934.tif 000003
【図２】
2011119934.tif 000004
【図３Ａ】
2011119934.tif 000005
【図３Ｂ】
2011119934.tif 000006
【図４】
2011119934.tif 000007
【図５】
2011119934.tif 000008
【図６】
2011119934.tif 000009
【図７】
2011119934.tif 000010
【図８】
2011119934.tif 000011
【図９】
2011119934.tif 000012
【図１０】
2011119934.tif 000013
【図１１】
2011119934.tif 000014
【図１２】
2011119934.tif 000015
【図１３】
2011119934.tif 000016