(57)【要約】【課題】動画コンテンツのストリーミング再生に先立って、内容の概略を閲覧者に通知することが可能な動画コンテンツとしてサービスプロバイダ等にアップロードすることが可能な撮像装置を提供する。【解決手段】撮像素子１０１により得られた動画像データを符号化し、第１の符号化動画像データと該動画像データよりも単位時間あたりの情報量が少ない第２の符号化動画像データとを生成し、前記動画像データの複数のシーンを代表する代表静止画像データを生成し、第１の符号化動画像データを第１の記録媒体に対し、第２の符号化動画像データと前記代表静止画像データとを第２の記録媒体に対し、それぞれ記録再生し、第２の記録媒体から再生されたデータを用いて任意のシーンを選択し、前記選択されたシーンのデータを用いて伝送用画像データ列を生成するように制御部１１６により制御する。【選択図】      図１
2004186905.tif 000002
【特許請求の範囲】
【請求項１】
撮像手段と、
前記撮像手段により得られた動画像データを符号化し且つ第１の符号化動画像データと前記第１の符号化動画像データよりも単位時間あたりの情報量が少ない第２の符号化動画像データとを生成すると共に前記動画像データの複数のシーンをそれぞれ代表する代表静止画像データを生成する符号化手段と、
前記第１の符号化動画像データを第１の記録媒体に対して記録再生する第１の記録再生手段と、
前記第２の符号化動画像データと前記代表静止画像データとを第２の記録媒体に対して記録再生する第２の記録再生手段と、
前記第２の記録媒体から再生された前記代表静止画像データを用いて前記複数のシーンの内の任意のシーンを選択する選択手段と、
前記第２の記録媒体に記録された第２の符号化動画像データの内の前記選択手段により選択されたシーンの第２の符号化動画像データを用いて伝送用画像データ列を生成する生成手段とを備えたことを特徴とする撮像装置。
【請求項２】
撮像手段と、
前記撮像手段により得られた動画像データを符号化し且つ第１の符号化動画像データと前記第１の符号化動画像データよりも単位時間あたりの情報量が少ない第２の符号化動画像データとを生成すると共に前記動画像データのダイジェストを生成する符号化手段と、
前記第１の符号化動画像データを第１の記録媒体に対して記録再生する第１の記録再生手段と、
前記第２の符号化動画像データと前記ダイジェストとを第２の記録媒体に対して記録再生する第２の記録再生手段と、
前記第２の記録媒体から再生された前記ダイジェストを用いて前記複数のシーンの内の任意のシーンを選択する選択手段と、
前記第２の記録媒体に記録された第２の符号化動画像データの内の前記選択手段により選択されたシーンの第２の符号化動画像データを用いて伝送用画像データ列を生成する生成手段とを備えたことを特徴とする撮像装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、特にインターネットを介して動画伝送を行うための機能を有するデジタルビデオカムコーダ等の撮像装置に関する。
【０００２】
【従来の技術】
近年、静止画を撮像してＩＣメモリカードに記録するデジタルカメラや、動画像を撮像して磁気テープカセットに記録するデジタルビデオカムコーダが普及している。
【０００３】
また、インターネットにおけるブロードバンドインフラの整備・普及に伴い、動画を、インターネットを介して遠隔地へ伝送したり、サービスプロバイダにアップロードしたいという消費者のニーズに対応して伝送時間を短縮したり、伝送された動画を効率的に再生したり、或いはＰＣ（パーソナルコンピュータ）のモニタ上に小画面サイズで短時間の低ビットレート動画を、高画質の動画記録を行うため、磁気テープカセットとは別のＩＣメモリーカード等に記録可能としたデジタルビデオカムコーダも提案されている。
【０００４】
更に、高画質の静止画と低ビットレートの動画を同一のＩＣメモリカードに非同時で記録可能としたデジタルカメラも存在している。
【０００５】
これらのデジタルカメラやデジタルビデオカムコーダからインターネットを介して動画伝送を行う場合には、低ビットレートの動画が記録されたＩＣメモリカードを一旦ＰＣのカードスロットに挿入し、ＰＣ上の画像伝送を行うアプリケーションプログラムを用いてアップロードが行われる。
【０００６】
アップロードされた動画は、ストリーミングサーバに蓄積され、閲覧者の要求に応じて所謂ストリーミング再生が行われる。即ち、動画コンテンツは、一般に静止画に比べて格段に情報量が多く、ファイル全体をダウンロードすると長時間を要するため、部分的にダウンロードしながら再生する方法が採られている（例えば、特許文献１，２参照）。
【０００７】
【特許文献１】
特開２００２−８４３３９
【特許文献２】
特開２００１−６１１３６
【０００８】
【発明が解決しようとする課題】
ところで、上述した従来のデジタルカメラやデジタルビデオカムコーダにおいては、高画質動画記録モードと低ビットレート動画記録モードのいずれか一方のモードを用いて、選択的にそれぞれの動画を記録媒体に記録するものであり、高画質動画を磁気テープに記録した場合には、伝送を行う前にＰＣ上の編集ソフトウェアで編集した後、ソフトウェアエンコーダを用いて画像圧縮を行い、更に、メモリカードに記録を行うものである。
【０００９】
他方、低ビットレート動画をメモリカードに記録した場合は、カット毎に動画ファイルが形成されるため、複数のカット（以下、一回の撮影記録動作の画像を１カットと記述する。）から成る作品としてアップロードするためには、やはりＰＣ上の編集ソフトウェアを用いて編集した後、再度メモリカードに記録するものである。
【００１０】
上記のいずれの場合においても、アップロードされた動画コンテンツをストリーミング再生する場合、画像内容の概略を示す情報が付加されていないため、画像を再生してみるまで、その内容が分らず、閲覧者が期待する内容でなかった場合、動画は極めて情報量が多いため、多大な時間の浪費を強いられるという問題があった。
【００１１】
本発明は、このような従来技術の問題点を解消するためになされたもので、その目的は、動画コンテンツのストリーミング再生に先立って、内容の概略を閲覧者に通知することが可能な動画コンテンツとしてサービスプロバイダ等にアップロードすることを可能とした撮像装置を提供することである。
【００１２】
【課題を解決するための手段】
上記目的を達成するために本発明の請求項１記載の撮像装置は、撮像手段と、前記撮像手段により得られた動画像データを符号化し且つ第１の符号化動画像データと前記第１の符号化動画像データよりも単位時間あたりの情報量が少ない第２の符号化動画像データとを生成すると共に前記動画像データの複数のシーンをそれぞれ代表する代表静止画像データを生成する符号化手段と、前記第１の符号化動画像データを第１の記録媒体に対して記録再生する第１の記録再生手段と、前記第２の符号化動画像データと前記代表静止画像データとを第２の記録媒体に対して記録再生する第２の記録再生手段と、前記第２の記録媒体から再生された前記代表静止画像データを用いて前記複数のシーンの内の任意のシーンを選択する選択手段と、前記第２の記録媒体に記録された第２の符号化動画像データの内の前記選択手段により選択されたシーンの第２の符号化動画像データを用いて伝送用画像データ列を生成する生成手段とを備えたことを特徴とする。
【００１３】
また、上記目的を達成するために本発明の請求項２記載の撮像装置は、撮像手段と、前記撮像手段により得られた動画像データを符号化し且つ第１の符号化動画像データと前記第１の符号化動画像データよりも単位時間あたりの情報量が少ない第２の符号化動画像データとを生成すると共に前記動画像データのダイジェストを生成する符号化手段と、前記第１の符号化動画像データを第１の記録媒体に対して記録再生する第１の記録再生手段と、前記第２の符号化動画像データと前記ダイジェストとを第２の記録媒体に対して記録再生する第２の記録再生手段と、前記第２の記録媒体から再生された前記ダイジェストを用いて前記複数のシーンの内の任意のシーンを選択する選択手段と、前記第２の記録媒体に記録された第２の符号化動画像データの内の前記選択手段により選択されたシーンの第２の符号化動画像データを用いて伝送用画像データ列を生成する生成手段とを備えたことを特徴とする。
【００１４】
【発明の実施の形態】
以下、本発明の各実施の形態を、図面を参照して説明する。
【００１５】
（第一の実施の形態）
まず、本発明の第一の実施の形態を図１〜図６に基づき説明する。
【００１６】
図１は、本実施の形態に係る撮像装置であるデジタルビデオカムコーダの記録系の構成を示すブロック図、図２は、本実施の形態に係る撮像装置であるデジタルビデオカムコーダにおける撮像処理回路の構成を示すブロック図、図３は、本実施の形態に係る撮像装置であるデジタルビデオカムコーダにおける輝度信号の説明図、図４は、本実施の形態に係る撮像装置であるデジタルビデオカムコーダにおける再生系の構成を示すブロック図、図５は、本実施の形態に係る撮像装置であるデジタルビデオカムコーダにおけるメモリカードの記録領域の説明図、図６は、本実施の形態に係る撮像装置であるデジタルビデオカムコーダにおけるサムネイルの説明図である。
【００１７】
図１において、１０１は撮像素子、１０２は撮像処理回路、１０３，１０４は二次元ローパスフィルタ、１０５，１０６はマルチプレクサ、１０７，１０８はバッファメモリ、１０９，１１０は圧縮回路、１１１はフォーマット変換回路、１１２は記録処理回路、１１３はメモリカード、１１４は磁気テープ、１１５は静止画圧縮回路、１１６は制御部、１１７は操作スイッチ（ＳＷ）である。
【００１８】
撮像素子１０１は、標準ＴＶ信号の解像度に対する画素数（水平７２０，垂直４８０）を有するものとする。この撮像素子１０１からは、ＴＶ信号の１フレーム期間の全ての画素が順次走査で読み出され、撮像処理回路１０２にてデジタル化された輝度信号と色差信号が生成される。
【００１９】
図２は、撮像処理回路１０２の内部構成を示すブロック図であり、同図において、２０１はＣＤＳ（相関二重サンプル）回路、２０２はＡＧＣ（自動利得）回路、２０３はＡ／Ｄ変換器、２０４はＹ−Ｃ分離回路、２０５はカメラ信号処理回路である。
【００２０】
図１の撮像素子１０１から読み出された撮像信号は、図２のＣＤＳ回路２０１にてノイズを除去され、ＡＧＣ回路２０２にて自動的にゲイン調整された後、Ａ／Ｄ変換器２０３にてデジタル映像信号となる。続いて、Ｙ−Ｃ分離回路２０４により輝度信号と色差信号とに分離され、その後、カメラ信号処理回路２０５にて輪郭強調、ホワイトバランス、ガンマ補正等の処理を施されて、デジタル化された輝度信号（Ｙ）と色差信号（Ｐｒ，Ｐｂ）とが生成される。
【００２１】
再び図１に戻り、低ビットレート動画信号の記録プロセスを説明する。
【００２２】
輝度信号（Ｙ）と色差信号（Ｐｒ，Ｐｂ）は、図１のローパスフィルタ１０３により図３に示す如く帯域制限される。即ち、アップロード用に低ビットレート動画を図１のメモリカード１０３に記録する場合、折り返しノイズを考慮して輝度信号は水平１．６８ＭＨｚ、垂直６０本に（図３の斜線部）、色差信号はＰｒとＰｂとが点順次化されているため、水平は更に０．８４ＭＨｚに帯域制限される（色差信号は省略）。
【００２３】
帯域制限された輝度信号と点順次化された色差信号は、図２のマルチプレクサ２０５にて多重化され、４：２：２フォーマットの狭帯域Ｙ／Ｐｒ／Ｐｂデータが生成される。この狭帯域Ｙ／Ｐｒ／Ｐｂデータは、図２のバッファメモリ２０７に蓄積された後、図２の圧縮回路２０９にてＤＣＴを用いた圧縮アルゴリズムによって、例えば、ＭＰＥＧ−４方式で低ビットレートに圧縮される。
【００２４】
また、図１の制御部１１６は、操作スイッチ１１７により記録開始の指示があると、バッファメモリ１０７を制御して先頭の１フレームの画像データを保持し、静止画圧縮回路１１５へ出力する。静止画圧縮回路１１５は、この１フレームの画像データを、例えば、ＪＰＥＧ方式で圧縮符号化し、フォーマット変換回路１１１へ出力する。
【００２５】
そして、前記圧縮された動画と各カットの先頭の静止画とに対して、フォーマット変換回路１１１にてメモリカード１１３のファイルシステムに適合したフォーマット変換が行われ、メモリカード１１３の所定の領域に記録される（音声信号の記録については、本発明とは無関係であるので、その説明は省略する）。
【００２６】
本実施の形態では、記録開始の指示から記録停止の指示までの一連の動画像データを一つのファイルとして記録する。即ち、図５に示したように、各カットの動画Ｍ−１，Ｍ−２，Ｍ−３と、それに対応した先頭の静止画Ｓ−１，Ｓ−２，Ｓ−３が記録される。
【００２７】
尚、図１のメモリカード１１３としては、コンパクトフラッシュ（登録商標）等、何でも良く、それぞれのファイルシステムに適合したフォーマット変換を行えば良いので、ここでは、その詳細については言及しない。
【００２８】
次に、標準ＴＶ信号に対応した高画質動画信号記録モードのプロセスについて説明する。
【００２９】
輝度信号（Ｙ）と色差信号（Ｐｒ，Ｐｂ）は、ローパスフィルタ１０４により図３に示す如く帯域制限される。即ち、輝度信号は、水平６．７５ＭＨｚ、垂直２４０本に帯域制限される（図３参照。以下、標準輝度信号と記述する。）。また、色差信号は、ＰｒとＰｂとが点順次化されているため、水平は３．３７５ＭＨｚの帯域を持っている（以下、標準色差信号と記述する。）。
【００３０】
これらの標準帯域成分がマルチプレクサ１０６にて多重化され、４：２：２フォーマットの標準Ｙ／Ｐｒ／Ｐｂデータが生成される。この標準Ｙ／Ｐｒ／Ｐｂデータは、バッファメモリ１０８に蓄積された後、圧縮回路１１０にてＤＣＴ等の圧縮アルゴリズムによって、例えば、ｍｏｔｉｏｎＪＰＥＧ方式で圧縮され、最後に記録処理回路１１２にて同期符号やエラー訂正符号の付加、シャフリング、変調等の処理が行われて、磁気テープ１１４上の映像記録領域に記録される。
【００３１】
尚、磁気テープ１１４上の映像記録領域とは別のサブコード領域に、タイムコード、その他の情報が記録されるのは、通常のデジタルビデオカムコーダと同様である。
【００３２】
また、制御部１１６は、操作スイッチ１１７の操作に応じてバッファメモリ１０８を制御し、各カットの先頭の１フレームの静止画データを静止画圧縮回路１１５へ出力する。静止画圧縮回路１１５は、この先頭の１フレームの静止画像データをＪＰＥＧ方式で圧縮符号化し、記録処理回路１１２へ出力する。記録処理回路１１２は、この先頭の１フレームの静止画像データを磁気テープ１１４における不図示のサブコードエリアに記録する。
【００３３】
次に、本実施の形態に係る撮像装置であるデジタルビデオカムコーダの再生プロセスについて、図４を参照して説明する。
【００３４】
図４は、本実施の形態に係る撮像装置であるデジタルビデオカムコーダの再生系の構成を示すブロック図であり、同図において、図１と同一部分には同一符号が付してある。
【００３５】
図４において、１０７，１０８はバッファメモリ、１１１はフォーマット変換回路、１１３はメモリカード、１１４は磁気テープ、１１６は制御部、１１７は操作スイッチ（ＳＷ）、４０１は再生処理回路、４０２はフォーマット逆変換回路、４０３はセレクタ、４０４，４０５は伸長回路、４０６は静止画伸長回路、４０７はサムネイル処理回路、４０８はＹ−Ｃ分離回路、４０９はブランキング（Ｂｌａｎｋｉｎｇ）処理回路、４１０はＤ／Ａ変換器、４１１は外部ＴＶ（テレビジョン）モニタである。
【００３６】
図４において、まず、メモリカード１１３に記録された狭帯域信号を再生する場合は、操作スイッチ１１７の操作に応じて制御部１１６がセレクタ４０３の入力端子４０３−Ａを選択する。そして、メモリカード１１３から読み出された動画ファイルは、フォーマット逆変換回路４０２にて記録とは逆の処理が行われ、バッファメモリ１０７（記録用と併用できる）によって、記録時の圧縮後の狭帯域Ｙ／Ｐｒ／Ｐｂ信号が再生される。この狭帯域Ｙ／Ｐｒ／Ｐｂ信号は、伸長回路４０４にて圧縮前の狭帯域Ｙ／Ｐｒ／Ｐｂ信号に復号され、Ｙ−Ｃ分離回路４０８にて同時化された狭帯域Ｙ，Ｐｒ，Ｐｂ信号が生成され、それぞれブランキング処理回路４０９−１、４０９−２、４０９−３にて帰線消去期間の処理がなされた後、それぞれＤ／Ａ変換器４１０−１，４１０−２，４１０−３によりアナログ信号に変換され、外部ＴＶモニタ４１１にて低ビットレートの動画として表示される。
【００３７】
次に、磁気テープ１１４に記録されている高画質動画に対応した標準ＴＶ信号を再生する場合は、制御部１１６は、セレクタ４０３の入力端子４０３−Ｂを選択する。そして、再生処理回路４０１にて磁気テープ１１４に記録されている信号を再生し、記録時とは逆の処理、即ち、復調、同期再生、エラー訂正、デシャフリング処理が行われ、バッファメモリ１０８（記録用と併用できる）によって、記録時の圧縮後の標準Ｙ／Ｐｒ／Ｐｂ信号が再生される。この圧縮後の標準Ｙ／Ｐｒ／Ｐｂ信号は、伸長回路４０５にて多重化されたベースバンドの標準Ｙ／Ｐｒ／Ｐｂ信号に復号され、Ｙ−Ｃ分離回路４０８にて同時化された標準Ｙ，Ｐｒ，Ｐｂ信号が生成され、それぞれブランキング処理回路４０９−１，４０９−２，４０９−３にて帰線消去期間の処理がなされた後、それぞれＤ／Ａ変換器４１０−１，４１０−２，４１０−３によりアナログ信号に変換され、外部ＴＶモニタ４１１にて標準ＴＶ信号の動画として表示される。
【００３８】
次に、メモリカード１１３に記録された各カットの先頭の静止画を用いてアップロードする動画を編集するプロセスについて説明する。
【００３９】
操作スイッチ１１７によりアップロードデータの選択モードの指示があると、制御部１１６は、セレクタ４０３の入力端子４０３−Ｃを選択する。そして、フォーマット逆変換回路４０２は、メモリカード１１３に記録されている各ファイルのデータの内静止画データのみを静止画伸長回路４０６へ出力する。静止画伸長回路４０６は、この静止画データを伸長してサムネイル処理回路４０７へ出力する。サムネイル処理回路４０７は、静止画伸長回路４０６から出力される複数のファイルの静止画データのサイズを縮小し、図６に示すようなサムネイル画面を生成してセレクタ４０３へ出力する。
【００４０】
図６は、本実施の形態に係る撮像装置におけるサムネイルの説明図であり、同図において、６００は表示画面で、この表示画面６００には、図５に示す三つの静止画Ｓ−１，Ｓ−２，Ｓ−３に対応したサムネイル画像６０１，６０２，６０３が表示される。
【００４１】
そして、ユーザが操作スイッチ１１７を操作し、図６に示すサムネイル画像の内、アップロードしたいカットの先頭の静止画を選択すると、制御部１１６は、その旨を示す信号をフォーマット変換回路１１１へ出力し、このフォーマット変換回路１１１により選択されたカットに対応した狭帯域動画信号のみからなるアップロードデータを生成する。
【００４２】
即ち、図５に示す静止画Ｓ−１，Ｓ−３に対応した表示画面６０１，６０３が選択されたとすると、図５に示すように、Ｍ−１のコピーｍ−１とＭ−３のコピーｍ−３の連続的に結合されたファイル及びＳ−１のコピーｓ−１とＳ−３のコピーｓ−３とがアップロードファイルとして、連続して別の領域に記録される。
【００４３】
メモリカード１１３は、不図示のＰＣ（パーソナルコンピュータ）のカードスロットに挿入され、アップロードファイルの連結された、即ち、編集された動画と各静止画は、公知のＯｕｔｌｏｏｋ  Ｅｘｐｒｅｓｓ等のメールソフトにより添付され、所望のサービスプロバイダにアップロードされ、閲覧者の要求に応じてストリーミング配信される。閲覧者は、必要に応じて各カットの先頭の静止画と編集された動画とを見ることができる。
【００４４】
これによって、閲覧者は、ストリーミング再生に先立って内容の概略を知ることが可能となる。
【００４５】
（第二の実施の形態）
次に、本発明の第二の実施の形態を、図７乃至図９に基づき説明する。
【００４６】
尚、本実施の形態に係る撮像装置であるデジタルビデオカムコーダにおける撮像処理回路の構成は、上述した第一の実施の形態の図２と同一であり、また、本実施の形態に係る撮像装置であるデジタルビデオカムコーダにおける輝度信号の帯域制限状態は、上述した第一の実施の形態の図３と同一であるから、それらの説明は省略すると共に、必要に応じて、これら各図を流用して説明する。
【００４７】
図７は、本実施の形態に係る撮像装置であるデジタルビデオカムコーダにおける記録系の構成を示すブロック図、図８は、本実施の形態に係る撮像装置であるデジタルビデオカムコーダにおける再生系の構成を示すブロック図、図９は、本実施の形態に係る撮像装置であるデジタルビデオカムコーダにおけるメモリカードの記録領域の説明図である。
【００４８】
尚、図７において、上述した第一実施の形態における図１と同一部分には、同一符号が付してある。
【００４９】
図７において、図１と異なる点は、図１の構成から静止画静止画圧縮回路１１５を削除し、図１の構成に、タイムコード発生器７０１を付加したことである。
【００５０】
以下、本実施の形態に係る撮像装置であるデジタルビデオカムコーダにおける低ビットレート動画信号の記録プロセスについて説明するが、上述した第１の実施の形態と同一部分についての説明は省略し、本実施の形態特有の動作についてのみ説明する。
【００５１】
撮像処理回路１０２の基準クロック信号がタイムコード発生器７０１に入力され、このタイムコード発生器７０１により、動画像の１フレームを単位とするタイムコードが生成される。圧縮回路１０９により圧縮された動画とタイムコード発生器７０１により生成されたタイムコードとが、フォーマット変換回路１１１により、メモリカード１１３のファイルシステムに適合したフォーマット変換が行われた後、メモリカード１１３の所定の領域に記録される（音声信号の記録は、本発明とは無関係であるので、その説明は省略する。）。即ち、図９に示したように、先頭のファイル属性とそれに続く領域に各カットの動画Ｍ−１，Ｍ−２，Ｍ−３，…Ｍ−３０が、それぞれフレーム単位（ｆ１，ｆ２，ｆ３，…）にタイムコードＴＣが付加されてメモリカード１１３の所定の領域に記録される。
【００５２】
尚、図９におけるファイル属性記述部は、アップロードして配信される動画の属性、即ち、通常のストリーミング再生が行われる動画ファイルのファイルサイズとメモリカード１１３上の再生開始位置アドレス、後述するダイジェスト再生ファイルのファイルサイズとメモリカード１１３上の再生開始位置アドレス等が記述される領域である。
【００５３】
ストリーミングデータの書き込みが終了すると、書き込んだファイルサイズに応じてファイル属性記述部が書き換えられる。
【００５４】
但し、この段階では、ダイジェスト再生ファイルに関する情報は、まだ記録されていない。
【００５５】
尚、本実施の形態に係る撮像装置であるデジタルビデオカムコーダにおける標準ＴＶ信号に対応した高画質動画信号記録モードのプロセスは、上述した第一実施の形態と同一であるから、その説明は省略する。
【００５６】
次に、本実施の形態に係る撮像装置であるデジタルビデオカムコーダにおける再生プロセスについて、図８を参照して説明する。
【００５７】
図８は、本実施の形態に係る撮像装置であるデジタルビデオカムコーダにおける再生系の構成を示すブロック図であり、同図において、上述した第一実施の形態における図４と同一部分には、同一符号が付してある。
【００５８】
図８において図４と異なる点は、図４の構成から静止画伸長回路４０６及びサムネイル処理回路４０７を削除し、図４の構成に、タイムコーダ再生回路８０１、ダイジェストメモリ８０２及び再生コントローラ８０３を付加したことと、セレクタ４０３の入力端子が４０３−Ａと４０３−Ｂの２つになっていることである。
【００５９】
以下、本実施の形態に係る撮像装置であるデジタルビデオカムコーダにおける再生プロセスについて説明するが、上述した第一実施の形態と同一部分についての説明は省略し、本実施の形態特有の動作についてのみ説明する。
【００６０】
メモリカード１１３に記録されたタイムコードを用いてダイジェスト再生する動画を生成し、アップロードするプロセスについて説明する。
【００６１】
操作スイッチ１１７の操作に応じて制御部１１６は、セレクタ４０３の入力端子４０３−Ａを選択する。また、ユーザは、メモリカード１１３に記録された狭帯域信号を再生プロセスに従って外部ＴＶモニタ４１１に表示される再生画像を見ている。ユーザは、この再生画像を見ながら、アップロードした後で他のアクセス者にダイジェスト再生させたい動画のストーリを想定して、再生コントローラ８０３の不図示のＩＮボタンとＯＵＴボタンとを用いて、動画の再生と停止を指示する。このプロセスにおいて、再生の指示が行われたフレームと停止の指示が行われたフレームとのタイムコードが逐次、タイムコード再生回路８０１を経てダイジェストメモリ８０２に記憶される。
【００６２】
以上の操作が終了してユーザが再生コントローラ８０３のダイジェスト記録ボタン（不図示）を押下すると、ダイジェストメモリ８０２に記憶されたタイムコードに従って、フォーマット変換回路１１１によりメモリカード１１３の所定の領域にダイジェストデータが記録される。即ち、図９に示すように、カットＭ−２のｆ２フレームで再生開始、ｆ３フレームで停止、カットＭ−１１のｆ５フレームで再生開始、ｆ６フレームで停止、カットＭ−３０のｆ５０フレームで再生開始、ｆ５１フレームで停止…というように指示されたとすると、ダイジェスト領域にはカットＭ−２のｆ２，ｆ３フレーム、カットＭ−１１のｆ５，ｆ６フレーム、カットＭ−３０のｆ５０，ｆ５１フレーム…が記録され、最後にエンドマークを示すＥＯＦ（Ｅｎｄ  ｏｆ  Ｆｉｌｅ）が記録される。
【００６３】
また、追記されたダイジェストデータに対応して図９のファイル属性記述部が書き換えられる。即ち、ダイジェストデータ有無ビットとその再生開始位置アドレス、ダイジェストデータのファイルサイズが書き換えられる。
【００６４】
このメモリカード１１３は、不図示のＰＣカードスロットに挿入され、ストリーミング再生用の動画ファイルとダイジェスト版の動画ファイルは、公知のＯｕｔｌｏｏｋ  Ｅｘｐｒｅｓｓ等のメールソフトにより添付され、所望のサービスプロバイダにアップロードされ、閲覧者の要求に応じていずれかの、または両方のファイルがストリーミング再生される。
【００６５】
これにより、閲覧者は、巣とリーミング再生に先立って内容の概略を知ることが可能となる。
【００６６】
（その他の実施の形態）
尚、メモリカード１１３に記録せずに、ＰＣ上のアプリケーションソフトにて選択されたカットを結合してアップロードするようにしても良い。
【００６７】
また、本発明は、メモリカードをＰＣのカードスロットに挿入し、このＰＣからサーバにアップロードするだけではなく、撮像装置にインターネット接続機能を持たせ、この撮像装置から直接アップロード用のデータを送信するようにしても良い。
【００６８】
また、上述した実施の形態の機能を実現するソフトウェアのプログラムコードを記憶した記憶媒体を、システム或いは装置に供給し、そのシステム或いは装置のコンピュータ（またはＣＰＵやＭＰＵ等）が記憶媒体に格納されたプログラムコードを読み出して実行することによっても、本発明が達成されることは言うまでもない。
【００６９】
この場合、記憶媒体から読み出されたプログラムコード自体が上述した実施の形態の機能を実現することになり、そのプログラムコードを記憶した記憶媒体は本発明を構成することになる。
【００７０】
また、プログラムコードを供給するための記憶媒体としては、例えば、ＲＡＭ、ＮＶ−ＲＡＭ、フロッピー（登録商標）ディスク、ハードディスク、光ディスク、光磁気ディスク、ＭＯ、ＣＤ−ＲＯＭ、ＣＤ−Ｒ、ＣＤ−ＲＷ、ＤＶＤ（ＤＶＤ−ＲＯＭ、ＤＶＤ−Ｒ、ＤＶＤ−ＲＷ等）、磁気テープ、不揮発性のメモリカード、他のＲＯＭ等の上記プログラムコードを記憶できるものであれば良く、或いはネットワークを介したダウンロード等を用いることができる。
【００７１】
また、コンピュータが読み出したプログラムコードを実行することにより、上述した実施の形態の機能が実現されるだけでなく、そのプログラムコードの指示に基づき、コンピュータ上で稼動しているＯＳ（オペレーティングシステム）等が実際の処理の一部または全部を行い、その処理によって上述した実施の形態の機能が実現される場合も含まれることは言うまでもない。
【００７２】
更に、記憶媒体から読み出されたプログラムコードが、コンピュータに挿入された機能拡張ボードやコンピュータに接続された機能拡張ユニットに備わるメモリに書き込まれた後、そのプログラムコードの指示に基づき、その機能拡張ボードや機能拡張ユニットに備わるＣＰＵ等が実際の処理の一部または全部を行い、その処理によって上述した実施の形態の機能が実現される場合も含まれることは言うまでもない。
【００７３】
以上では、本発明の様々な例と実施形態を説明したが、当業者であれば、本発明の趣旨と範囲は本明細書内の特定の説明と図に限定されるものではなく、本願特許請求の範囲に全て述べられた様々な修正と変更に及ぶことが可能であることは言うまでもない。
【００７４】
本発明の実施態様の例を以下に列挙する。
【００７５】
［実施態様１］  撮像手段と、前記撮像手段により得られた動画像データを符号化し且つ第１の符号化動画像データと前記第１の符号化動画像データよりも単位時間あたりの情報量が少ない第２の符号化動画像データとを生成すると共に前記動画像データの複数のシーンをそれぞれ代表する代表静止画像データを生成する符号化手段と、前記第１の符号化動画像データを第１の記録媒体に対して記録／再生する第１の記録／再生手段と、前記第２の符号化動画像データと前記代表静止画像データとを第２の記録媒体に対して記録／再生する第２の記録／再生手段と、前記第２の記録媒体から再生された前記代表静止画像データを用いて前記複数のシーンの内の任意のシーンを選択する選択手段と、前記第２の記録媒体に記録された第２の符号化動画像データの内の前記選択手段により選択されたシーンの第２の符号化動画像データを用いて伝送用画像データ列を生成する生成手段とを備えたことを特徴とする撮像装置。
【００７６】
［実施態様２］  撮像手段と、前記撮像手段により得られた動画像データを符号化し且つ第１の符号化動画像データと前記第１の符号化動画像データよりも単位時間あたりの情報量が少ない第２の符号化動画像データとを生成すると共に前記動画像データのダイジェストを生成する符号化手段と、前記第１の符号化動画像データを第１の記録媒体に対して記録／再生する第１の記録／再生手段と、前記第２の符号化動画像データと前記ダイジェストとを第２の記録媒体に対して記録／再生する第２の記録／再生手段と、前記第２の記録媒体から再生された前記ダイジェストを用いて前記複数のシーンの内の任意のシーンを選択する選択手段と、
前記第２の記録媒体に記録された第２の符号化動画像データの内の前記選択手段により選択されたシーンの第２の符号化動画像データを用いて伝送用画像データ列を生成する生成手段とを備えたことを特徴とする撮像装置。
【００７７】
［実施態様３］  前記第２の記録／再生手段は、前記生成手段により生成された伝送用画像データ列を前記第２の記録媒体に対して記録することを特徴とする実施態様１または２記載の撮像装置。
【００７８】
［実施態様４］  前記符号化手段は、第１の符号化動画像データと前記第１の符号化動画像データよりも単位時間あたりの情報量が少ない第２の符号化動画像データとを同時に生成することを特徴とする請求項１または２に記載の撮像装置。
【００７９】
［実施態様５］  前記符号化手段は、前記動画像データの複数のシーンの先頭の１フレームの画像データを用いて前記代表静止画像データを生成することを特徴とする実施態様１または２記載の撮像装置。
【００８０】
［実施態様６］  複数の記録媒体を備え、画像圧縮符号化を用いた動画像圧縮記録再生可能な撮像装置において、
撮像処理回路で変換されたデジタル映像信号に第１のフィルタリング処理を施して狭帯域に制限された動画像信号を生成する第１の生成手段と、
第１の画像圧縮符号化処理を施して低ビットレート動画信号を生成する第１の符号化手段と、
第２のフィルタリング処理を施して標準帯域成分を有する動画像信号を生成する第２の生成手段と、
第２の画像圧縮符号化処理を施して高ビットレート動画信号を生成する第２の符号化手段と、
各カットの先頭画像を検出する先頭画像検出手段と、
前記第１及び第２の符号化手段からの出力をそれぞれ異なる前記複数の記録媒体に対して記録／再生する出力記録／再生手段と、
前記先頭画像検出手段により検出された先頭画像を前記複数の記録媒体に対して記録／再生する先頭画像記録／再生手段と、
前記先頭画像記録／再生手段により再生された先頭画像を表示する先頭画像表示手段と、
前記先頭画像表示手段により表示された先頭画像を選択する先頭画像選択手段と、
前記先頭画像選択手段により選択された先頭画像と該選択された先頭画像に対応した動画カットとを結合して記録する記録手段とを有することを特徴とする撮像装置。
【００８１】
［実施態様７］  複数の記録媒体を備え、画像圧縮符号化を用いた動画像圧縮記録再生可能な撮像装置において、撮像処理回路で変換されたデジタル映像信号に第１のフィルタリング処理を施して狭帯域に制限された動画像信号を生成する第１の生成手段と、第１の画像圧縮符号化処理を施して低ビットレート動画信号を生成する第１の符号化手段と、第２のフィルタリング処理を施して標準帯域成分を有する動画像信号を生成する第２の生成手段と、第２の画像圧縮符号化処理を施して高ビットレート動画信号を生成する第２の符号化手段と、
前記第１及び第２の符号化手段からの出力をそれぞれ異なる前記複数の記録媒体に対して記録／再生する出力記録／再生手段と、
タイムコードを記録／再生するタイムコード記録／再生手段と、
動画像データのダイジェスト再生を行うポイントを指示するためのポイント指示手段と、
前記ポイント指示手段による指示に対応した前記タイムコードを記憶する記憶手段と、
前記記憶手段に記憶されたタイムコード情報に対応した動画カットデータを結合して記録する記録手段とを有することを特徴とする撮像装置。
【００８２】
［実施態様８］  前記撮像装置は、デジタルビデオカムコーダであることを特徴とする実施態様１乃至７のいずれかに記載の撮像装置。
【００８３】
［実施態様９］  撮像工程と、前記撮像工程により得られた動画像データを符号化し且つ第１の符号化動画像データと前記第１の符号化動画像データよりも単位時間あたりの情報量が少ない第２の符号化動画像データとを生成すると共に前記動画像データの複数のシーンをそれぞれ代表する代表静止画像データを生成する符号化工程と、前記第１の符号化動画像データを第１の記録媒体に対して記録／再生する第１の記録／再生工程と、前記第２の符号化動画像データと前記代表静止画像データとを第２の記録媒体に対して記録／再生する第２の記録／再生工程と、前記第２の記録媒体から再生された前記代表静止画像データを用いて前記複数のシーンの内の任意のシーンを選択する選択工程と、前記第２の記録媒体に記録された第２の符号化動画像データの内の前記選択手段により選択されたシーンの第２の符号化動画像データを用いて伝送用画像データ列を生成する生成工程とを備えたことを特徴とする撮像方法。
【００８４】
［実施態様１０］  撮像工程と、前記撮像工程により得られた動画像データを符号化し且つ第１の符号化動画像データと前記第１の符号化動画像データよりも単位時間あたりの情報量が少ない第２の符号化動画像データとを生成すると共に前記動画像データのダイジェストを生成する符号化工程と、前記第１の符号化動画像データを第１の記録媒体に対して記録／再生する第１の記録／再生工程と、前記第２の符号化動画像データと前記ダイジェストとを第２の記録媒体に対して記録／再生する第２の記録／再生工程と、前記第２の記録媒体から再生された前記ダイジェストを用いて前記複数のシーンの内の任意のシーンを選択する選択工程と、前記第２の記録媒体に記録された第２の符号化動画像データの内の前記選択工程により選択されたシーンの第２の符号化動画像データを用いて伝送用画像データ列を生成する生成工程とを備えたことを特徴とする撮像方法。
【００８５】
［実施態様１１］  前記第２の記録／再生工程は、前記生成工程により生成された伝送用画像データ列を前記第２の記録媒体に対して記録することを特徴とする実施態様９または１０に記載の撮像方法。
【００８６】
［実施態様１２］  前記符号化工程は、前記動画像データの複数のシーンの先頭の１フレームの画像データを用いて前記代表静止画像データを生成することを特徴とする実施態様９または１０に記載の撮像方法。
【００８７】
［実施態様１３］  前記符号化工程は、第１の符号化動画像データと前記第１の符号化動画像データよりも単位時間あたりの情報量が少ない第２の符号化動画像データとを同時に生成することを特徴とする請求項９または１０に記載の撮像方法。
【００８８】
［実施態様１４］  複数の記録媒体を備え、画像圧縮符号化を用いた動画像圧縮記録再生可能な撮像装置により撮像する撮像方法において、撮像処理回路で変換されたデジタル映像信号に第１のフィルタリング処理を施して狭帯域に制限された動画像信号を生成する第１の生成工程と、第１の画像圧縮符号化処理を施して低ビットレート動画信号を生成する第１の符号化工程と、第２のフィルタリング処理を施して標準帯域成分を有する動画像信号を生成する第２の生成工程と、第２の画像圧縮符号化処理を施して高ビットレート動画信号を生成する第２の符号化工程と、各カットの先頭画像を検出する先頭画像検出工程と、前記第１及び第２の符号化工程からの出力をそれぞれ異なる前記複数の記録媒体に対して記録／再生する出力記録／再生工程と、前記先頭画像検出工程により検出された先頭画像を前記複数の記録媒体に対して記録／再生する先頭画像記録／再生工程と、前記先頭画像記録／再生工程により再生された先頭画像を表示する先頭画像表示工程と、前記先頭画像表示工程により表示された先頭画像を選択する先頭画像選択工程と、前記先頭画像選択工程により選択された先頭画像と該選択された先頭画像に対応した動画カットとを結合して記録する記録工程とを有することを特徴とする撮像方法。
【００８９】
［実施態様１５］  前記撮像装置は、デジタルビデオカムコーダであることを特徴とする実施態様１４に記載の撮像方法。
【００９０】
［実施態様１６］  撮像装置を制御するコンピュータ読み取り可能な制御プログラムであって、
撮像工程と、前記撮像工程により得られた動画像データを符号化し且つ第１の符号化動画像データと前記第１の符号化動画像データよりも単位時間あたりの情報量が少ない第２の符号化動画像データとを生成すると共に前記動画像データの複数のシーンをそれぞれ代表する代表静止画像データを生成する符号化工程と、前記第１の符号化動画像データを第１の記録媒体に対して記録／再生する第１の記録／再生工程と、前記第２の符号化動画像データと前記代表静止画像データとを第２の記録媒体に対して記録／再生する第２の記録／再生工程と、前記第２の記録媒体から再生された前記代表静止画像データを用いて前記複数のシーンの内の任意のシーンを選択する選択工程と、前記第２の記録媒体に記録された第２の符号化動画像データの内の前記選択手段により選択されたシーンの第２の符号化動画像データを用いて伝送用画像データ列を生成する生成工程とをコンピュータに実行させるためのプログラムコードから成ることを特徴とする撮像装置の制御プログラム。
【００９１】
［実施態様１７］  撮像装置を制御するコンピュータ読み取り可能な制御プログラムであって、
撮像工程と、前記撮像工程により得られた動画像データを符号化し且つ第１の符号化動画像データと前記第１の符号化動画像データよりも単位時間あたりの情報量が少ない第２の符号化動画像データとを生成すると共に前記動画像データのダイジェストを生成する符号化工程と、前記第１の符号化動画像データを第１の記録媒体に対して記録／再生する第１の記録／再生工程と、前記第２の符号化動画像データと前記ダイジェストとを第２の記録媒体に対して記録／再生する第２の記録／再生工程と、前記第２の記録媒体から再生された前記ダイジェストを用いて前記複数のシーンの内の任意のシーンを選択する選択工程と、前記第２の記録媒体に記録された第２の符号化動画像データの内の前記選択工程により選択されたシーンの第２の符号化動画像データを用いて伝送用画像データ列を生成する生成工程とをコンピュータに実行させるためのプログラムコードから成ることを特徴とする撮像装置の制御プログラム。
【００９２】
［実施態様１８］  複数の記録媒体を備え、画像圧縮符号化を用いた動画像圧縮記録再生可能な撮像装置を制御するコンピュータ読み取り可能な制御プログラムであって、
撮像処理回路で変換されたデジタル映像信号に第１のフィルタリング処理を施して狭帯域に制限された動画像信号を生成する第１の生成工程と、第１の画像圧縮符号化処理を施して低ビットレート動画信号を生成する第１の符号化工程と、第２のフィルタリング処理を施して標準帯域成分を有する動画像信号を生成する第２の生成工程と、第２の画像圧縮符号化処理を施して高ビットレート動画信号を生成する第２の符号化工程と、各カットの先頭画像を検出する先頭画像検出工程と、前記第１及び第２の符号化工程からの出力をそれぞれ異なる前記複数の記録媒体に対して記録／再生する出力記録／再生工程と、前記先頭画像検出工程により検出された先頭画像を前記複数の記録媒体に対して記録／再生する先頭画像記録／再生工程と、前記先頭画像記録／再生工程により再生された先頭画像を表示する先頭画像表示工程と、前記先頭画像表示工程により表示された先頭画像を選択する先頭画像選択工程と、前記先頭画像選択工程により選択された先頭画像と該選択された先頭画像に対応した動画カットとを結合して記録する記録工程とをコンピュータに実行させるためのプログラムコードから成ることを特徴とする撮像装置の制御プログラム。
【００９３】
［実施態様１９］
実施態様１６乃至１８に記載の制御プログラムを格納したことを特徴とする記憶媒体。
【００９４】
【発明の効果】
以上詳述したように、本発明によれば、動画コンテンツのストリーミング再生に先立って、内容の概略を閲覧者に通知することが可能な動画コンテンツとしてサービスプロバイダ等にアップロードすることができる。
【図面の簡単な説明】
【図１】本発明の第一の実施の形態に係る撮像装置における記録系の構成を示すブロック図である。
【図２】本発明の第一の実施の形態に係る撮像装置における撮像処理回路の構成を示すブロック図である。
【図３】本発明の第一の実施の形態に係る撮像装置における輝度信号の帯域の説明図である。
【図４】本発明の第一の実施の形態に係る撮像装置における再生系の構成を示すブロック図である。
【図５】本発明の第一の実施の形態に係る撮像装置におけるメモリカードの記録領域の説明図である。
【図６】本発明の第一の実施の形態に係る撮像装置におけるサムネイルの説明図である。
【図７】本発明の第二の実施の形態に係る撮像装置であるデジタルビデオカムコーダにおける記録系の構成を示すブロック図である。
【図８】本発明の第二の実施の形態に係る撮像装置であるデジタルビデオカムコーダにおける再生系の構成を示すブロック図である。
【図９】本発明の第二の実施の形態に係る撮像装置であるデジタルビデオカムコーダにおけるメモリカードの記録領域の説明図である。
【符号の説明】
１０１      撮像素子
１０２      撮像処理回路
１０３      二次元ローパスフィルタ
１０４      二次元ローパスフィルタ
１０５      マルチプレクサ
１０６      マルチプレクサ
１０７      バッファメモリ
１０８      バッファメモリ
１０９      圧縮回路
１１０      圧縮回路
１１１      フォーマット変換回路
１１２      記録処理回路
１１３      メモリカード
１１４      磁気テープ
１１５      静止画圧縮回路
１１６      制御部
１１７      操作スイッチ（ＳＷ）
２０１      ＣＤＳ（相関二重サンプル）回路
２０２      ＡＧＣ（自動利得）回路
２０３      Ａ／Ｄ変換器
２０４      Ｙ−Ｃ分離回路
２０５      カメラ信号処理回路
４０１      再生処理回路
４０２      フォーマット逆変換回路
４０３      セレクタ
４０３−Ａ  入力端子
４０３−Ｂ  入力端子
４０３−Ｃ  入力端子
４０４      伸長回路
４０５      伸長回路
４０６      静止画伸長回路
４０７      サムネイル処理回路
４０８      Ｙ−Ｃ分離回路
４０９−１  ブランキング（Ｂｌａｎｋｉｎｇ）処理回路
４０９−２  ブランキング（Ｂｌａｎｋｉｎｇ）処理回路
４０９−３  ブランキング（Ｂｌａｎｋｉｎｇ）処理回路
４１０−１  Ｄ／Ａ変換器
４１０−２  Ｄ／Ａ変換器
４１０−３  Ｄ／Ａ変換器
４１１      外部ＴＶ（テレビジョン）モニタ
７０１      タイムコード発生器
８０１      タイムコーダ再生回路
８０２      ダイジェストメモリ
８０３      再生コントローラ
【図１】
2004186905.tif 000003
【図２】
2004186905.tif 000004
【図３】
2004186905.tif 000005
【図４】
2004186905.tif 000006
【図５】
2004186905.tif 000007
【図６】
2004186905.tif 000008
【図７】
2004186905.tif 000009
【図８】
2004186905.tif 000010
【図９】
2004186905.tif 000011