(57)【要約】【課題】エフェクト処理に関わらず、本画像の特徴を表すサムネイル画像を生成する。【解決手段】カメラ信号処理部１４は、撮像素子１２の出力を標準的なデジタル画像（原動画像）として画像メモリ１６に書き込む。エフェクト画像処理部３６は、画像メモリ１６に記憶される画像を読み込み、画像処理して、再び画像メモリ１６へ書き戻す。操作スイッチ１８の撮影ボタンの操作により、画像目盛り１６の原動画像又はエフェクト処理されたエフェクト効果付き動画像が、動画符号化部２４により圧縮され、ハードディスク２６に記録される。エフェクト処理の有無及び程度により、画像処理部２２は、１フレーム目の画像からサムネイル静止画像を生成するか、サムネイル動画像を生成する。生成されたサムネイル静止画像又はサムネイル動画像が本画像と一体にハードディスク２６に記録される。【選択図】　図１
2004015580.tif 000002
【特許請求の範囲】
【請求項１】
動画像信号を記録媒体に記録する記録手段と、
前記動画像信号に対してエフェクト処理を施すエフェクト手段と、
前記エフェクト手段によるエフェクト処理が施されていない前記動画像信号の一部を用いて前記動画像信号に係る代表画像信号を生成する代表画像生成手段
とを備えることを特徴とする記録装置。
【請求項２】
前記代表画像生成手段は、前記エフェクト手段が前記エフェクト処理を施す前の前記動画像信号を用いて前記代表画像信号を生成することを特徴とする請求項１に記載の記録装置。
【請求項３】
前記代表画像生成手段は、前記動画像信号から１画面の画像信号を抽出し、この１画面の画像信号を前記代表画像信号とすることを特徴とする請求項１に記載の記録装置。
【請求項４】
前記代表画像生成手段は、前記動画像信号の記録開始に応じて前記１画面の画像信号を抽出することを特徴とする請求項３に記載の記録装置。
【請求項５】
前記代表画像生成手段は、前記動画像信号から所定間隔で複数画面の画像信号を抽出し、この複数画面の画像信号を用いて前記代表画像信号を生成することを特徴とする請求項１に記載の記録装置。
【請求項６】
前記記録手段は更に、前記代表画像信号を前記記録媒体に記録することを特徴とする請求項１に記載の記録装置。
【請求項７】
前記記録媒体より前記代表画像信号を再生する再生手段と、
前記再生された代表画像信号に係る代表画像を表示する表示手段とを備え、
前記表示手段は前記代表画像のうち前記エフェクト処理された動画像に係る代表画像に対して所定の画像を付加して表示することを特徴とする請求項６に記載の記録装置。
【請求項８】
前記表示手段は前記エフェクト処理された動画像に係る代表画像である旨を示す付加情報に応じて前記所定の画像を付加することを特徴とする請求項７に記載の記録装置。
【請求項９】
動画像信号を記録媒体に記録する記録手段と、
前記動画像信号に対してエフェクト処理を施すエフェクト手段と、
前記動画像信号を用いて前記動画像信号に係る代表画像信号を生成する代表画像生成手段と、
前記エフェクト手段によるエフェクト処理に応じて前記代表画像生成手段の処理を制御する制御手段
とを備えることを特徴とする記録装置。
【請求項１０】
前記エフェクト手段は複数種類のエフェクト処理を行い、前記制御手段は前記エフェクト手段によるエフェクト処理の種類に応じて前記代表画像生成手段の処理を変更することを特徴とする請求項９に記載の記録装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、動画像データを記録媒体（例えば、光ディスク、磁気テープ等）に記録するビデオカメラ等の記録装置に関する。
【０００２】
【従来の技術】
動画像を記録し、その記録された画像を再生する画像記録再生装置としては、アナログ画像信号を磁気テープに記録するビデオテープレコーダがある。このようなアナログ画像の記録再生装置に対して、画像信号をデジタル信号に変換した後、磁気テープに記録するデジタルＶＴＲ、固体ディスク及び光磁気ディスク等のディスク状記録媒体に画像信号をデジタル記録するデジタル記録装置、並びに、フラッシュメモリ及びＳＲＡＭ等の固体メモリに画像信号をデジタル記録するデジタル記録装置等が提案されている。
【０００３】
これらのビデオ記録システムでは、情報量の削減のため入力デジタル信号に圧縮処理を施しており、少ない記憶容量で多くの動画像情報や静止画情報の記録を可能にしている。さまざまな圧縮技術を組み合わせて動画像の圧縮を行い、データ量を削減した上で固体磁気ディスクメモリや光ディスクメモリ等に記録する動画像記録システムが各種提案されている。
【０００４】
動画像のデジタルデータを圧縮して記録する方式は、記録媒体によって大きく２つに分けられる。１つ目は、磁気テープなどにシーケンシャルに記録する記録方式で、希望のシーンを探しだしたり、順番を入れ替えたりするのが難しい欠点がある。これに対して、固体磁気ディスクメモリ、光磁気ディスクメモリ、光ディスクメモリ及び固体メモリ等の、ランダムアクセスが可能なメディアに、動画のシーンごとに記録する方式がある。この方式では、メディアの性質上、どの場所からも読み出しや書き込みが可能になるので、好きな動画のシーンをダイレクトに探し出して再生したり、複数のシーンの順番を入れ替えたりすることが容易に行える。
【０００５】
好きなシーンをダイレクトに探し出すために、静止画を記録するデジタルスチルカメラ等では、図８（ａ）に示すように、本画像を縮小した静止画サムネイル画像（代表画像）を予め作成しておいて、このサムネイル画像を画面に並べて一覧表示することで、望みの画像を選択するような方式を採用するのが一般的である。デジタルスチルカメラでは、本画像が静止画なので、縮小した１枚のサムネイル画像で本画像の特徴を表すことが可能になる。
【０００６】
これに対して、動画を扱うデジタル動画像カメラでは、本画像が動画像になるので、本画像である動画像の１フレーム目等を静止画のサムネイル画像とし、図８（ｂ）に示すような静止画のサムネイル画像にする。又は、図８（ｃ）に示すように、インデックスの働きをするサムネイル画像までも動画で表現しようという試みが提案されている。
【０００７】
【発明が解決しようとする課題】
本画像である動画像にエフェクト処理（特に、フェード・イン等のエフェクト）が施され記録された場合、１フレーム目はエフェクト処理が施され、本画像の特徴を表す静止画サムネイルを生成する事は不可能である。
【０００８】
また、動画像サムネイルを生成する場合、エフェクト処理が施された部分が多く存在する様な画像に対しては、本画像の特徴を表す様な動画サムネイルを生成する事が出来ないという欠点がある。
【０００９】
本発明は、このような問題点を解決するためになされたものであって、本画像にエフェクト処理が施されている場合、そのエフェクトの種類により、サムネイル画像の生成方法を変更し、どの様なエフェクトが施されていても、本画像の特徴を表すサムネイル画像を生成する記録装置を提示することを目的とする。
【００１０】
【課題を解決するための手段】
本発明に係る記録装置は、動画像信号を記録媒体に記録する記録手段と、前記動画像信号に対してエフェクト処理を施すエフェクト手段と、前記エフェクト手段によるエフェクト処理が施されていない前記動画像信号の一部を用いて前記動画像信号に係る代表画像信号を生成する代表画像生成手段とを備えることを特徴とする。
【００１１】
本発明に係る記録装置は、動画像信号を記録媒体に記録する記録手段と、前記動画像信号に対してエフェクト処理を施すエフェクト手段と、前記動画像信号を用いて前記動画像信号に係る代表画像信号を生成する代表画像生成手段と、前記エフェクト手段によるエフェクト処理に応じて前記代表画像生成手段の処理を制御する制御手段とを備えることを特徴とする。
【００１２】
【実施例】
以下、図面を参照して、本発明の実施例を詳細に説明する。なお、動画撮影したときの、撮影ボタンを押して撮影を開始してから、撮影ボタンを再び押して撮影を終了するまでの一連の動画のシーンを、１カットと呼び、その中の１コマの静止画像を１フレームと呼ぶこととする。また、本実施例で説明するカメラからの動画は、１秒間に３０フレームの動画であるが、１秒間のフレーム数はこれより多くても、少なくても構わない。１秒間に６０フィールドのインターレースの動画でも構わないし、この場合も、フィールド数は、これより多くても少なくても構わない。
【００１３】
（第１実施例）
図１は、第１実施例のデジタル動画像カメラの構成を表す図である。カメラの起動時に、プログラムフラッシュメモリ３４内に記憶される圧縮されたプログラムが解凍されてプログラムメモリ３２に展開され、ＣＰＵ３０は、プログラムメモリ３２内のプログラムに従って動作することで、以後、説明する各種の制御動作を行う。被写体からの光は、レンズ１０を通して撮像素子１２に結像される。撮像素子１２は、結像された被写体像を電気信号に変換する。撮像素子１２からの光電変換画像は、所定の周期で読み出され、カメラ信号処理部１４にて、標準的な画像信号になるように信号処理され、所定周期で標準的なデジタル画像（原動画像）として、画像メモリ１６に一時的に蓄積される。
【００１４】
画像メモリ１６に一時的に蓄積されたデジタル画像は、順次、ディスプレイ２０へと送られ、現在撮影中の動画像が表示される。
【００１５】
フェード・イン等の特殊効果を施す場合、画像メモリ１６に一時的に蓄積された画像をエフェクト画像処理部３６へ送り、そこで画像処理し、再び、画像メモリ１６へ書き戻し、画像メモリ１６より、順次、ディスプレイ２０へと送る事により、エフェクト効果付き動画像として表示される。
【００１６】
操作スイッチ１８に含まれる撮影ボタン（図示せず）を押すことで、撮影が開始される。撮影が開始されると、画像メモリ１６に一時的に蓄積された原動画像、又は、エフェクト画像処理部３６によりエフェクト処理されたエフェクト効果付き動画像は、動画符号化部２４にて動画像の圧縮符号化がなされ（圧縮本動画像）、画像メモリ１６をバッファとして一旦蓄積された後に、インターフェース２８をとおしてハードディスク２６に記録される。
【００１７】
次に、サムネイル画像生成を説明する。図３は、そのイメージ図である。本動画像の記録作業と並行して、エフェクト処理が施されない場合、又は、エフェクト処理により１フレーム目の画像が撮影画像の特徴を著しく損なう場合、例えば、フェード・イン等のエフェクト処理により１フレーム目の画像が白画像になってしまう様な場合、サムネイル画像として必要な１フレーム目の原動画像を画像メモリ１６より画像処理部２２に送り、縮小処理し、画像メモリ１６の別領域に蓄積する。このとき、このサムネイル画像がエフェクト処理された動画像のものである旨を示す付加情報も、サムネイル画像信号に付加して記録する。
【００１８】
また、エフェクト処理により１フレーム目の画像がその撮影画像の特徴をそれ程、損なわれない様な場合、エフェクト画像処理部３６によりエフェクト処理されたエフェクト効果付き動画像を、画像処理部２２へ送り、縮小処理し、画像メモリ１６の別領域に蓄積する。
【００１９】
操作スイッチ１８に含まれる撮影ボタンが再度押されると、記録が終了になる。記録終了で１カットの画像記録が終了するが、それと同時に、画像メモリ１６に蓄積されたサムネイル原画像が動画符号化部２４により圧縮符号化され、圧縮サムネイル画像としてハードディスク２６に記録される。図２は、動画ファイルの構造を示す。１カットの動画記録終了時には、各種情報が記録されたヘッダ情報４０、圧縮サムネイル画像４２及び圧縮本動画像４４を合わせて、一つの画像ファイルとなる。
【００２０】
図１において、動画符号化部２４の動画符号化方式は、モーションＪＰＥＧのような、１枚１枚のコマを独立して圧縮符号化する動画符号化方式でも構わないし、ＭＰＥＧのような、コマによって独立して圧縮符号化したり、前後のコマの差分をとって圧縮符号化したり、また、複数のコマから予測して圧縮符号化したりする動画符号化方式でも構わない。ハードディスク２６は、光ディスク及び光磁気ディスク等のディスクメディアでも構わないし、フラッシュメモリ、ＳＲＡＭ及びＤＲＡＭ等の固体半導体メモリで構成されるランダムアクセス可能なメモリでも構わないのは言うまでも無い。
【００２１】
次に、再生時の処理を説明する。操作スイッチ１８により再生モードに切り換えると、ＣＰＵ３０は、ハードディスク２６から各サムネイル画像を再生し、図４に示すようなインデックス画面を生成してディスプレイ２０に表示する。この際、エフェクト処理された動画像信号に関するサムネイルに対し、図４に示すように、その旨を示すアイコンを、対応するサムネイル画像に付加して表示する。ユーザは、この様に表示されたサムネイルから所望の動画像データに対応したサムネイルを選択し、再生を指示する。ＣＰＵ３０は指定されたサムネイルに対応した動画像ファイルをハードディスク２６より再生し、符号化部２４に復号させてディスプレイ２０に表示する。
【００２２】
以上、説明したように、エフェクト処理の種類により、サムネイルを生成する画像を切り替える事により、撮影画像の特徴を損なう事無いサムネイルを生成出来る。また、インデックス表示において、エフェクト処理アイコンを表示する事により、本画像にエフェクト処理が施されているかどうかがわかり良くなる。
【００２３】
（第２実施例）
第２実施例は、第１実施例のサムネイル生成を動画サムネイルに応用したものである。尚、本実施例の構成は、第１実施例と同じであるので、説明を省略する。
【００２４】
本実施例のサムネイル画像生成を説明する。図５は、そのイメージ図である。本動画像の記録作業と平行して、エフェクト処理が施されない場合、又は、エフェクト処理により撮影画像の特徴を著しく損なう場合、例えば、フェード・イン等のエフェクト処理により、先頭の数フレームの画像が白画像になってしまう様な場合、サムネイル画像として必要な原動画像を画像メモリ１６から画像処理部２２に順次送り、縮小処理及び時間方向の間引き処理を行い、画像メモリ１６の別領域に蓄積する。これにより、動画サムネイルを生成する。
【００２５】
また、エフェクト処理によりその撮影画像の特徴をそれ程、損なわない様な場合は、エフェクト画像処理部３６によりエフェクト処理されたエフェクト効果付き動画像を画像処理部２２へ送り、縮小処理及び、間引き処理を行い、画像メモリ１６の別領域に蓄積して、動画サムネイルを生成する。
【００２６】
間引き処理に関しては、予めサムネイル動画として決められた長さに間引き処理を行ったり、本画像の記録時間によりサムネイル動画の長さを変更する等の処理が考えられる。
【００２７】
また、図４（ｂ）は、本実施例のインデックス表示画面のイメージ図である。
【００２８】
以上、説明したように、撮影開始からエフェクト処理（特殊効果）を施し撮影された画像に対し、エフェクト処理が終了した直後の１フレームから記録終了までの画像を動画サムネイル画像とする事により、撮影シーンのインデックスとして、わかり易いサムネイル画像を生成出来る。
【００２９】
【発明の効果】
以上の説明から容易に理解できるように、本発明によれば、ハードディスク、光磁気ディスク及び固体メモリ等のランダムアクセスメディアに動画像を記録再生する動画像記録再生装置において、本画像にエフェクト処理を施し記録する場合でも、わかりやすいサムネイル画像を生成できる。
【図面の簡単な説明】
【図１】本発明の第１実施例の概略構成図である。
【図２】動画カットのファイル構造を表す図である。
【図３】第１実施例の動作説明図である。
【図４】第１実施例のインデックス表示のイメージ図である。
【図５】第２実施例の動作説明図である。
【図６】従来例を説明する図である。
【符号の説明】
１０：レンズ
１２：撮像素子
１４：カメラ信号処理部
１６：画像メモリ
１８：操作スイッチ
２０：ディスプレイ
２２：画像処理部
２４：動画符号化部
２６：ハードディスク
２８：インターフェース
３０：ＣＰＵ
３２：プログラムメモリ
３４：プログラムフラッシュメモリ
３６：エフェクト画像処理部
４０：ヘッダ情報
４２：圧縮サムネイル画像
４４：圧縮本動画像
【図１】
2004015580.tif 000003
【図２】
2004015580.tif 000004
【図３】
2004015580.tif 000005
【図４】
2004015580.tif 000006
【図５】
2004015580.tif 000007
【図６】
2004015580.tif 000008