(57)【要約】【課題】動画記録と静止画記録を行う新規な構成の画像記録装置を実現する。【解決手段】画像圧縮部１０２により動画の各フレーム画像をＪＰＥＧ２０００準拠の画像圧縮アルゴリズムにより圧縮する。動画記録時には、符号量調整部１０４でポスト量子化処理によって符号データの符号量を動画用目標範囲内に調整する。静止画記録指示ボタン１５０が押されると、信号Ｂが所定数フレーム期間だけオンし、符号量調整部１０４は符号量を静止画用目標範囲内に調整するようにポスト量子化を行い、また、撮像装置はフレーム周期を動画記録時より遅くする。符号量調整後の符号データは媒体記録装置１１０によって例えば磁気テープに記録される。【選択図】　　　　図１
2004023748.tif 000002
【特許請求の範囲】
【請求項１】
動画のフレーム画像を入力する画像入力手段と、
前記画像入力手段により入力される各フレーム画像を個別に圧縮して符号データを出力する画像圧縮手段と、
前記画像圧縮手段より出力される符号データを加工することにより該符号データの符号量を目標範囲内に調整する符号量調整手段と、
前記目標範囲として動画用目標範囲と静止画用目標範囲のいずれかを選択する制御手段と、
前記符号量調整手段により符号量調整後の符号データを情報記録媒体に記録する媒体記録手段とを有することを特徴とする画像記録装置。
【請求項２】
静止画記録指示を入力する指示入力手段を有し、
前記制御手段は、前記指示入力手段からの静止画記録指示の入力に応答して一時的に静止画用目標範囲を選択し、それ以外の期間は動画用目標範囲を選択することを特徴とする請求項１記載の画像記録装置。
【請求項３】
フレーム画像又はその符号データから静止画記録の必要な状況を認識するための情報を取得する情報取得手段を有し、前記制御手段は前記情報取得手段により取得された情報に基づいて静止画記録が必要な状況と判断した時に一時的に静止画用目標範囲を選択することを特徴とする請求項１記載の画像記録装置。
【請求項４】
相前後するフレーム画像間の差分を検出するフレーム間差分検出手段を有し、
前記制御手段は、前記フレーム間差分検出手段による検出結果に基づいて目標範囲を選択することを特徴とする請求項１記載の画像記録装置。
【請求項５】
フレーム画像中の特定の色成分を検出する色成分検出手段を有し、
前記制御手段は、前記色成分検出手段による検出結果に基づいて目標範囲を選択することを特徴とする請求項１記載の画像記録装置。
【請求項６】
シーン種類を指定するシーン指定手段と、
相前後するフレーム画像間の差分を検出するフレーム間差分検出手段と、
フレーム画像中の特定の色成分を検出する色成分検出手段を有し、
前記制御手段は、前記シーン指定手段により指定されたシーン種類に応じて、前記フレーム間差分検出手段又は前記色成分検出手段の検出結果に基づき目標範囲を選択することを特徴とする請求項１記載の画像記録装置。
【請求項７】
請求項１記載の画像記録装置において、静止画用目標範囲が選択される期間に前記画像入力手段のフレーム周期が一時的に増大することを特徴とする画像記録装置。
【請求項８】
請求項１記載の画像記録装置において、静止画用目標範囲が選択される期間に、符号データにマーキング情報が付加されることを特徴とする画像記録装置。
【請求項９】
請求項６記載の画像記録装置において、静止画用目標範囲が選択される期間に、符号データに前記シーン指定手段によって指定されたシーン種類に対応したマーキング情報が付加されることを特徴とする画像記録装置。
【請求項１０】
動画のフレーム画像を入力する画像入力手段と、
前記画像入力手段により入力される各フレーム画像を個別に圧縮して符号データを出力する画像圧縮手段と、
前記画像圧縮手段より出力される符号データを加工することにより該符号データの符号量を動画用目標範囲内に調整する第１の符号量調整手段と、
前記画像圧縮手段より出力される符号データを加工することにより該符号データの符号量を静止画用目標範囲内に調整する第２の符号量調整手段と、
前記第１の符号量調整手段により符号量調整後の符号データを第１の情報記録媒体に記録する第１の媒体記録手段と、
前記第２の符号量調整手段により符号調量整後の符号データを第２の情報記録媒体に記録する第２の媒体記録手段と、
前記第２の媒体記録手段による符号データの記録を制御する制御手段とを有することを特徴とする画像記録装置。
【請求項１１】
静止画記録指示を入力する指示入力手段を有し、
前記制御手段は、前記指示入力手段からの静止画記録指示の入力に応答して、所定数フレームの符号データを前記第２の媒体記録手段により記録させることを特徴とする請求項１０記載の画像記録装置。
【請求項１２】
請求項１１記載の画像記録装置において、前記制御手段は、前記指示入力手段から静止画記録指示が入力された時点の前後のフレームの符号データを前記第２の媒体記録手段に記録させることを特徴とする画像記録装置。
【請求項１３】
フレーム画像又はその符号データから静止画記録の必要な状況を認識するための情報を取得する情報取得手段を有し、前記制御手段は前記情報取得手段により取得された情報に基づいて静止画記録が必要な状況と判断した時に所定数フレームの符号データを前記第２の媒体記録手段により記録させることを特徴とする請求項１０記載の画像記録装置。
【請求項１４】
相前後するフレーム画像間の差分を検出するフレーム間差分検出手段を有し、
前記制御手段は、前記フレーム間差分検出手段による検出結果に基づいて前記第２の媒体記録手段による符号データの記録を制御することを特徴とする請求項１０記載の画像記録装置。
【請求項１５】
フレーム画像中の特定の色成分を検出する色成分検出手段を有し、
前記制御手段は、前記色成分検出手段による検出結果に基づいて前記第２の媒体記録手段による符号データの記録を制御することを特徴とする請求項１０記載の画像記録装置。
【請求項１６】
シーン種類を指定するシーン指定手段と、
相前後するフレーム画像間の差分を検出するフレーム間差分検出手段と、
フレーム画像中の特定の色成分を検出する色成分検出手段を有し、
前記制御手段は、前記シーン指定手段により指定されたシーン種類に応じて、前記フレーム間差分検出手段又は前記色成分検出手段の検出結果に基づき前記第２の媒体記録手段による符号データの記録を制御することを特徴とする請求項１０記載の画像記録装置。
【請求項１７】
請求項１乃至１６のいずれか１項記載の画像記録装置において、前記画像入力手段は被写体をフレーム周期で連続的に撮像する撮像装置であることを特徴とする画像記録装置。
【請求項１８】
請求項１乃至１７のいずれか１項記載の画像記録装置において、前記画像圧縮手段はＪＰＥＧ２０００準拠の画像圧縮アルゴリズムによりフレーム画像の圧縮処理を行い、前記符号量調整手段は符号データの一部の廃棄によって符号量を調整することを特徴とする画像記録装置。
【請求項１９】
請求項１８記載の画像記録装置において、前記画像圧縮手段による圧縮処理に選択的領域画質向上処理が含まれることを特徴とする画像記録装置。
【請求項２０】
入力される動画のフレーム画像をＪＰＥＧ２０００準拠の画像圧縮アルゴリズムにより圧縮して符号データを生成する画像圧縮処理と、
前記画像圧縮処理により生成された符号データの一部を廃棄することにより該符号データの符号量を目標範囲内に調整する符号量調整処理と、
前記符号量調整処理により符号量調整後の符号データを情報記録媒体に記録する媒体記録処理とを有し、
前記符号量調整処理における符号量の目標範囲として動画用目標範囲と静止画用目標範囲とが選択的に適用されることを特徴とする画像記録方法。
【請求項２１】
静止画記録指示の入力に応答して一時的に前記静止画用目標範囲が適用され、それ以外の期間は前記動画用目標範囲が適用されることを特徴とする請求項２０記載の画像記録方法。
【請求項２２】
フレーム画像又はその符号データから静止画記録の必要な状況を認識するための情報を取得する情報取得処理を有し、取得された情報に基づいて静止画記録が必要な状況と判断される時に一時的に前記静止画用目標範囲が適用されることを特徴とする請求項２０記載の画像記録方法。
【請求項２３】
相前後するフレーム画像間の差分を検出するフレーム間差分検出処理を有し、その検出結果に基づいて適用される目標範囲が選択されることを特徴とする請求項２０記載の画像記録方法。
【請求項２４】
フレーム画像中の特定の色成分を検出する色成分検出処理を有し、その検出結果に基づいて適用される目標範囲が選択されることを特徴とする請求項２０記載の画像記録方法。
【請求項２５】
相前後するフレーム画像間の差分を検出するフレーム間差分検出処理と、
フレーム画像中の特定の色成分を検出する色成分検出処理を有し、
指定されたシーン種類に応じて前記フレーム間差分検出処理又は前記色成分検出処理の検出結果に基づき、適用される目標範囲が選択されることを特徴とする請求項２０記載の画像記録方法。
【請求項２６】
請求項２０記載の画像記録方法において、前記静止画用目標範囲が適用される期間に動画のフレーム周期が増大させられることを特徴とする画像記録方法。
【請求項２７】
請求項２０記載の画像記録方法において、前記静止画用目標範囲が適用される期間に符号データにマーキング情報が付加されることを特徴とする画像記録方法。
【請求項２８】
請求項２５記載の画像記録方法において、前記静止画用目標範囲が適用された期間に、指定されたシーン種類に対応したマーキング情報が符号データに付加されることを特徴とする画像記録方法。
【請求項２９】
入力される動画のフレーム画像をＪＰＥＧ２０００準拠の画像圧縮アルゴリズムにより圧縮して符号データを生成する画像圧縮処理と、
前記画像圧縮処理より生成された符号データの一部を廃棄することにより該符号データの符号量を動画用目標範囲内に調整する第１の符号量調処理と、
前記画像圧縮処理より出力される符号データの一部を廃棄することにより該符号データの符号量を静止画用目標範囲内に調整する第２の符号量調整処理と、
前記第１の符号量調整処理により符号量調整後の符号データを第１の情報記録媒体に記録する第１の媒体記録処理と、
前記第２の符号量調整処理により符号調量整後の符号データを第２の情報記録媒体に記録する第２の媒体記録処理とを有することを特徴とする画像記録方法。
【請求項３０】
静止画記録指示の入力に応答して、所定数フレームについて前記第２の媒体記録処理が実行されることを特徴とする請求項２９記載の画像記録方法。
【請求項３１】
請求項３０記載の画像記録方法において、静止画記録指示が入力された時点の前後のフレームについて前記第２の媒体記録処理が実行されることを特徴とする画像記録方法。
【請求項３２】
フレーム画像又はその符号データから静止画記録の必要な状況を認識するための情報を取得する情報取得処理を有し、取得された情報に基づいて静止画記録が必要な状況と判断される時に所定数フレームについて前記第２の媒体記録処理が実行されることを特徴とする請求項２９記載の画像記録方法。
【請求項３３】
相前後するフレーム画像間の差分を検出するフレーム間差分検出処理を有し、その検出結果に基づいて前記第２の媒体記録処理の実行を制御することを特徴とする請求項２９記載の画像記録方法。
【請求項３４】
フレーム画像中の特定の色成分を検出する色成分検出処理を有し、その検出結果に基づいて前記第２の媒体記録処理の実行を制御することを特徴とする請求項２９記載の画像記録方法。
【請求項３５】
相前後するフレーム画像間の差分を検出するフレーム間差分検出処理と、
フレーム画像中の特定の色成分を検出する色成分検出処理を有し、
指定されたシーン種類に応じて前記フレーム間差分検出処理又は前記色成分検出処理の検出結果に基づき前記第２の媒体記録処理の実行を制御することを特徴とする請求項２９記載の画像記録方法。
【請求項３６】
請求項２０乃至３５のいずれか１項記載の画像記録方法において、前記画像圧縮処理に選択的領域画質向上処理が含まれることを特徴とする画像記録方法。
【請求項３７】
請求項２０乃至３６のいずれか１項記載の画像記録方法をプロセッサに実行させるためのプログラム。
【請求項３８】
請求項３７記載のプログラムが記録されたことを特徴とするプロセッサが読み取り可能な情報記録媒体。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、画像を圧縮して情報記録媒体に記録する画像記録装置に係り、特に、動画を静止画の系列として記録する画像記録装置に関する。
【０００２】
【従来の技術】
動画のほか静止画も記録可能なデジタルカムコーダは、動画用の画像圧縮手段とは別に静止画用の画像圧縮手段を備えている。一般的に、動画用の画像圧縮手段としてＭＰＥＧエンコーダが、静止画用の画像圧縮手段としてＪＰＥＧエンコーダがそれぞれ用いられている。例えば、特開２０００−２３０９４号公報には、そのような２種類のエンコーダを用いる構成の装置が記載されている。
【０００３】
また、動画記録機能を有するデジタルスチルカメラは、静止画をＪＰＥＧにより記録し、動画を解像度及びコマ数を落としたモーション（Ｍｏｔｉｏｎ）ＪＰＥＧにより記録する構成が一般的である。モーションＪＰＥＧは動画を静止画の系列として記録する方式であり、個々の静止画はＪＰＥＧにより圧縮される。
【０００４】
また、ＷＯ９８／０９４３６号公報には、動画記録時と静止画記録時とでＭＰＥＧ２エンコーダの画像圧縮動作条件を規定するための画像圧縮パラメータを切り替えることにより、動画記録時と静止画記録時とで圧縮方式を切り替える構成の装置が記載されている。
【０００５】
【発明が解決しようとする課題】
動画用と静止画用に別々の画像圧縮手段を用いる構成は、装置の複雑化、コスト増加の問題があり、さらに、記録された動画の再生と静止画の再生に別々の画像伸長手段を必要とするという問題もある。
【０００６】
情報記録媒体として例えば磁気テープを利用する場合、動画の記録画質を高めるためには、磁気テープに書き込み可能な最大のデータレートに近づけるように圧縮率を適応的に調整するのが好ましい。しかし、ＪＰＥＧを基本とした画像圧縮アルゴリズムでは、動画記録中に圧縮率を適応的に変えることが難しいという問題がある。その主たる要因として、圧縮率を適応的に変更するには、圧縮処理を行って符号量をチェックし、それが目標の範囲内に入っていないときには量子化テーブルを変更して改めて圧縮処理を実行するというような手順を繰り返す必要があり、速度的に対応が困難であること、圧縮前の画像を一時的に保存するためのメモリ領域が増大すること等が挙げられる。
【０００７】
本発明の主たる目的は、上に述べたような問題点に関して改良した新規な構成の画像記録装置及び画像記録方法を提供することにある。本発明の上記目的及びその他の目的について、実施の形態に関連して具体的に説明する。
【０００８】
【課題を解決するための手段】
前記目的を達成するための本発明の画像記録装置の特徴は、請求項１に記載のように、動画のフレーム画像を入力する画像入力手段と、前記画像入力手段により入力される各フレーム画像を個別に圧縮して符号データを出力する画像圧縮手段と、前記画像圧縮手段より出力される符号データを加工することにより該符号データの符号量を目標範囲内に調整する符号量調整手段と、前記目標範囲として動画用目標範囲と静止画用目標範囲のいずれかを選択する制御手段と、前記符号量調整手段により符号量調整後の符号データを情報記録媒体に記録する媒体記録手段とを有することにある。
【０００９】
本発明の画像記録装置のもう１つの特徴は、請求項２に記載のように、請求項１記載の構成において、静止画記録指示を入力する指示入力手段をさらに有し、前記制御手段は、前記指示入力手段からの静止画記録指示の入力に応答して一時的に静止画用目標範囲を選択し、それ以外の期間は動画用目標範囲を選択することにある。
【００１０】
本発明の画像記録装置のもう１つの特徴は、請求項３に記載のように、請求項１記載の構成において、フレーム画像又はその符号データから静止画記録の必要な状況を認識するための情報を取得する情報取得手段をさらに有し、前記制御手段は前記情報取得手段により取得された情報に基づいて静止画記録が必要な状況と判断した時に一時的に静止画用目標範囲を選択することにある。
【００１１】
本発明の画像記録装置のもう１つの特徴は、請求項４に記載のように、請求項１記載の構成において、相前後するフレーム画像間の差分を検出するフレーム間差分検出手段をさらに有し、前記制御手段は、前記フレーム間差分検出手段による検出結果に基づいて目標範囲を選択することにある。
【００１２】
本発明の画像記録装置のもう１つの特徴は、請求項５に記載のように、請求項１記載の構成において、フレーム画像中の特定の色成分を検出する色成分検出手段をさらに有し、前記制御手段は、前記色成分検出手段による検出結果に基づいて目標範囲を選択することにある。
【００１３】
本発明の画像記録装置のもう１つの特徴は、請求項６に記載のように、請求項１記載の構成において、シーン種類を指定するシーン指定手段と、相前後するフレーム画像間の差分を検出するフレーム間差分検出手段と、フレーム画像中の特定の色成分を検出する色成分検出手段をさらに有し、前記制御手段は、前記シーン指定手段により指定されたシーン種類に応じて前記フレーム間差分検出手段又は前記色成分検出手段の検出結果に基づき目標範囲を選択することにある。
【００１４】
本発明の画像記録装置のもう１つの特徴は、請求項７に記載のように、請求項１記載の構成において、静止画用目標範囲が選択される期間に前記画像入力手段のフレーム周期が一時的に増大することにある。
【００１５】
本発明の画像記録装置のもう１つの特徴は、請求項８に記載のように、請求項１記載の構成において、静止画用目標範囲が選択される期間に、符号データにマーキング情報が付加されることにある。
【００１６】
本発明の画像記録装置のもう１つの特徴は、請求項９に記載のように、請求項６記載の構成において、静止画用目標範囲が選択される期間に、符号データに前記シーン指定手段によって指定されたシーン種類に対応したマーキング情報が付加されることにある。
【００１７】
本発明の画像記録装置のもう１つの特徴は、請求項１０に記載のように、動画のフレーム画像を入力する画像入力手段と、前記画像入力手段により入力される各フレーム画像を個別に圧縮して符号データを出力する画像圧縮手段と、前記画像圧縮手段より出力される符号データを加工することにより該符号データの符号量を動画用目標範囲内に調整する第１の符号量調整手段と、前記画像圧縮手段より出力される符号データを加工することにより該符号データの符号量を静止画用目標範囲内に調整する第２の符号量調整手段と、前記第１の符号量調整手段により符号量調整後の符号データを第１の情報記録媒体に記録する第１の媒体記録手段と、前記第２の符号量調整手段により符号調量整後の符号データを第２の情報記録媒体に記録する第２の媒体記録手段と、前記第２の媒体記録手段による符号データの記録を制御する制御手段とを有することにある。
【００１８】
本発明の画像記録装置のもう１つの特徴は、請求項１１に記載のように、請求項１０記載の構成において、静止画記録指示を入力する指示入力手段をさらに有し、前記制御手段は、前記指示入力手段からの静止画記録指示の入力に応答して、所定数フレームの符号データを前記第２の媒体記録手段により記録させることにある。
【００１９】
本発明の画像記録装置のもう１つの特徴は、請求項１２に記載のように、請求項１１記載の構成において、前記制御手段は、前記指示入力手段から静止画記録指示が入力された時点の前後のフレームの符号データを前記第２の媒体記録手段に記録させることにある。
【００２０】
本発明の画像記録装置のもう１つの特徴は、請求項１３に記載のように、請求項１０に記載の構成において、フレーム画像又はその符号データから静止画記録の必要な状況を認識するための情報を取得する情報取得手段をさらに有し、前記制御手段は前記情報取得手段により取得された情報に基づいて静止画記録が必要な状況と判断した時に所定数フレームの符号データを前記第２の媒体記録手段により記録させることにある。
【００２１】
本発明の画像記録装置のもう１つの特徴は、請求項１４に記載のように、請求項１０記載の構成において、相前後するフレーム画像間の差分を検出するフレーム間差分検出手段をさらに有し、前記制御手段は、前記フレーム間差分検出手段による検出結果に基づいて前記第２の媒体記録手段による符号データの記録を制御することにある。
【００２２】
本発明の画像記録装置のもう１つの特徴は、請求項１５に記載のように、請求項１０記載の構成において、フレーム画像中の特定の色成分を検出する色成分検出手段をさらに有し、前記制御手段は、前記色成分検出手段による検出結果に基づいて前記第２の媒体記録手段による符号データの記録を制御することにある。
【００２３】
本発明の画像記録装置のもう１つの特徴は、請求項１６に記載のように、請求項１０記載の構成において、シーン種類を指定するシーン指定手段と、相前後するフレーム画像間の差分を検出するフレーム間差分検出手段と、フレーム画像中の特定の色成分を検出する色成分検出手段をさらに有し、前記制御手段は、前記シーン指定手段により指定されたシーン種類に応じて前記フレーム間差分検出手段又は前記色成分検出手段の検出結果に基づき前記第２の媒体記録手段による符号データの記録を制御することにある。
【００２４】
本発明の画像記録装置のもう１つの特徴は、請求項１７に記載のように、請求項１乃至１６のいずれか１項記載の構成において、前記画像入力手段は被写体をフレーム周期で連続的に撮像する撮像装置であることにある。
【００２５】
本発明の画像記録装置のもう１つの特徴は、請求項１８に記載のように、請求項１乃至１７のいずれか１項記載の構成において、前記画像圧縮手段はＪＰＥＧ２０００準拠の画像圧縮アルゴリズムによりフレーム画像の圧縮処理を行い、前記符号量調整手段は符号データの一部の廃棄によって符号量を調整することにある。
【００２６】
本発明の画像記録装置のもう１つの特徴は、請求項１９に記載のように、請求項１８記載の構成において、前記画像圧縮手段による圧縮処理に選択的領域画質向上処理が含まれることにある。
【００２７】
本発明の画像記録方法の特徴は、請求項２０に記載のように、入力される動画のフレーム画像をＪＰＥＧ２０００準拠の画像圧縮アルゴリズムにより圧縮して符号データを生成する画像圧縮処理と、前記画像圧縮処理により生成された符号データの一部を廃棄することにより該符号データの符号量を目標範囲内に調整する符号量調整処理と、前記符号量調整処理により符号量調整後の符号データを情報記録媒体に記録する媒体記録処理とを有し、前記符号量調整処理における符号量の目標範囲として動画用目標範囲と静止画用目標範囲とが選択的に適用されることにある。
【００２８】
本発明の画像記録方法のもう１つの特徴は、請求項２１に記載のように、請求項２０記載の構成において、静止画記録指示の入力に応答して一時的に前記静止画用目標範囲が適用され、それ以外の期間は前記動画用目標範囲が適用されることにある。
【００２９】
本発明の画像記録方法のもう１つの特徴は、請求項２２に記載のように、請求項２０記載の構成において、フレーム画像又はその符号データから静止画記録の必要な状況を認識するための情報を取得する情報取得処理をさらに有し、取得された情報に基づいて静止画記録が必要な状況と判断される時に一時的に前記静止画用目標範囲が適用されることにある。
【００３０】
本発明の画像記録方法のもう１つの特徴は、請求項２３に記載のように、請求項２０記載の構成において、相前後するフレーム画像間の差分を検出するフレーム間差分検出処理をさらに有し、その検出結果に基づいて適用される目標範囲が選択されることにある。
【００３１】
本発明の画像記録方法のもう１つの特徴は、請求項２４に記載のように、請求項２０記載の構成において、フレーム画像中の特定の色成分を検出する色成分検出処理をさらに有し、その検出結果に基づいて適用される目標範囲が選択されることにある。
【００３２】
本発明の画像記録方法のもう１つの特徴は、請求項２５に記載のように、請求項２０記載の構成において、相前後するフレーム画像間の差分を検出するフレーム間差分検出処理と、フレーム画像中の特定の色成分を検出する色成分検出処理をさらに有し、指定されたシーン種類に応じて前記フレーム間差分検出処理又は前記色成分検出処理の検出結果に基づき適用される目標範囲が選択されることにある。
【００３３】
本発明の画像記録方法のもう１つの特徴は、請求項２６に記載のように、請求項２０記載の構成において、前記静止画用目標範囲が適用される期間に動画のフレーム周期が増大させられることにある。
【００３４】
本発明の画像記録方法のもう１つの特徴は、請求項２７に記載のように、請求項２０記載の構成において、前記静止画用目標範囲が適用される期間に符号データにマーキング情報が付加されることにある。
【００３５】
本発明の画像記録方法のもう１つの特徴は、請求項２８に記載のように、請求項２５記載の構成において、前記静止画用目標範囲が適用された期間に、指定されたシーン種類に対応したマーキング情報が符号データに付加されることにある。
【００３６】
本発明の画像記録方法のもう１つの特徴は、請求項２９に記載のように、入力される動画のフレーム画像をＪＰＥＧ２０００準拠の画像圧縮アルゴリズムにより圧縮して符号データを生成する画像圧縮処理と、前記画像圧縮処理より生成された符号データの一部を廃棄することにより該符号データの符号量を動画用目標範囲内に調整する第１の符号量調処理と、前記画像圧縮処理より出力される符号データの一部を廃棄することにより該符号データの符号量を静止画用目標範囲内に調整する第２の符号量調整処理と、前記第１の符号量調整処理により符号量調整後の符号データを第１の情報記録媒体に記録する第１の媒体記録処理と、前記第２の符号量調整処理により符号調量整後の符号データを第２の情報記録媒体に記録する第２の媒体記録処理とを有することにある。
【００３７】
本発明の画像記録方法のもう１つの特徴は、請求項３０に記載のように、請求項２９記載の構成において、静止画記録指示の入力に応答して、所定数フレームについて前記第２の媒体記録処理が実行されることにある。
【００３８】
本発明の画像記録方法のもう１つの特徴は、請求項３１に記載のように、請求項３０記載の構成において、静止画記録指示が入力された時点の前後のフレームについて前記第２の媒体記録処理が実行されることにある。
【００３９】
本発明の画像記録方法のもう１つの特徴は、請求項３２に記載のように、請求項２９記載の構成において、フレーム画像又はその符号データから静止画記録の必要な状況を認識するための情報を取得する情報取得処理を有し、取得された情報に基づいて静止画記録が必要な状況と判断される時に所定数フレームについて前記第２の媒体記録処理が実行されることにある。
【００４０】
本発明の画像記録方法のもう１つの特徴は、請求項３３に記載のように、請求項２９記載の構成において、相前後するフレーム画像間の差分を検出するフレーム間差分検出処理をさらに有し、その検出結果に基づいて前記第２の媒体記録処理の実行を制御することにある。
【００４１】
本発明の画像記録方法のもう１つの特徴は、請求項３４に記載のように、請求項２９記載の構成において、フレーム画像中の特定の色成分を検出する色成分検出処理をさらに有し、その検出結果に基づいて前記第２の媒体記録処理の実行を制御することにある。
【００４２】
本発明の画像記録方法のもう１つの特徴は、請求項３５に記載のように、請求項２９記載の構成において、相前後するフレーム画像間の差分を検出するフレーム間差分検出処理と、フレーム画像中の特定の色成分を検出する色成分検出処理をさらに有し、指定されたシーン種類に応じて前記フレーム間差分検出処理又は前記色成分検出処理の検出結果に基づき前記第２の媒体記録処理の実行を制御することにある。
【００４３】
本発明の画像記録方法のもう１つの特徴は、請求項３６に記載のように、請求項２０乃至３５のいずれか１項記載の構成において、前記画像圧縮処理に選択的領域画質向上処理が含まれることにある。
【００４４】
【発明の実施の形態】
本発明においは、画像を圧縮した後に符号データの加工によって符号量の調整、つまり圧縮率の調整が可能な画像圧縮アルゴリズムが利用される。以下に例示する実施の形態においては、ＪＰＥＧの後継アルゴリズムであるＪＰＥＧ２０００に準拠した画像圧縮アルゴリズムが採用される。ＪＰＥＧ２０００は、その基本方式（ＪＰＥＧ２０００　Ｐａｒｔ１）の標準化作業を終了し２００１年１月に勧告されている。その拡張方式であるモーション（Ｍｏｔｉｏｎ）ＪＰＥＧ２０００（ＪＰＥＧ　Ｐａｒｔ３）の勧告化も目前である。このモーションＪＰＥＧ２０００は、動画を静止画の系列として扱うが、各フレーム画像に対する圧縮アルゴリズムは基本方式そのものであり、基本方式との違いは圧縮データのファイル形式が一部異なるのみである。
【００４５】
ＪＰＥＧ２０００の画像圧縮アルゴリズムについては、例えば、書籍「次世代画像符号化方式　ＪＰＥＧ２０００」（野水泰之著、株式会社トリケップス）などに詳しいが、その概略を以下に説明する。
【００４６】
図１３はＪＰＥＧ２０００の画像圧縮アルゴリズムを説明するための簡略化されたブロック図である。処理対象の画像データ（動画を扱う場合には各フレーム画像データ）は、タイルと呼ばれる重複しない矩形領域に分割されてＤＣレベル変換・色空間変換部２００に入力される。
【００４７】
ＤＣレベル変換・色空間変換部２００においては、圧縮率の向上を目的として、入力画像データに対しレベルシフト操作と色空間変換処理を施す。レベルシフトは、ＲＧＢ値のような符号無し整数値からダイナミックレンジの半分を減算する操作である。入力画像データが例えばＹＣｒＣｂデータの場合、Ｃｒ，Ｃｂコンポーネントのような符号付き整数値に対してレベルシフトは行われない。色空間変換処理は、入力画像データがＲＧＢデータやＣＭＹデータの場合に、ＹＣｒＣｂデータに変換する処理である。
【００４８】
ＤＣレベル変換・色空間変換部２００により処理後の各コンポーネントの各タイルの画像データは、２次元ウェーブレット変換部２０２により２次元のウェーブレット変換（離散ウェーブレット変換：ＤＷＴ）を施される。
【００４９】
図１４はデコンポジション・レベル数が３の場合のウェーブレット変換の説明図である。図１４（ａ）に示すタイル画像に対する２次元ウェーブレット変換により、図１４（ｂ）に示すような１ＬＬ，１ＨＬ，１ＬＨ，１ＨＨの各サブバンドに分割される。１ＬＬサブバンドの係数に対し２次元ウェーブレット変換が適用されることにより、図１４（ｃ）に示すように２ＬＬ，２ＨＬ，２ＬＨ，２ＨＨのサブバンドに分割される。２ＬＬサブバンドの係数に対し２次元ウェーブレット変換が適用されることにより、図１４（ｄ）に示すように３ＬＬ，３ＨＬ，３ＬＨ，３ＨＨのサブバンドに分割される。
【００５０】
このような低周波成分（ＬＬサブバンド係数）が再帰的に分割された各サブバンド係数は、量子化部２０４によって量子化された後にエントロピー符号化部２０６により符号化されるが、最も階層の深いＬＬサブバンド係数（図１４の例では３ＬＬサブバンド係数）は符号化されない。ＪＰＥＧ２０００では可逆圧縮と非可逆圧縮のいずれも可能であり、可逆圧縮の場合には量子化ステップ幅は常に１であり、この段階では実質的に量子化されない。
【００５１】
エントロピー符号化部２０６はウェーブレット係数のエントロピー符号化を行う。このエントロピー符号化には、ブロック分割、係数モデリング及び２値算術符号化からなるＥＢＣＯＴ（Ｅｍｂｅｄｄｅｄ　Ｂｌｏｃｋ　Ｃｏｄｉｎｇ　ｗｉｔｈ　Ｏｐｔｉｍｉｚｅｄ　ｔｒｕｎｃａｔｉｏｎ）と呼ばれるブロックベースのビットプレーン符号化方式が用いられる。符号化対象となるウェーブレット係数は正負の符号を持つ整数（あるいは実数表現された整数）であり、それらを決められた順序で走査しながら、係数を絶対値表現したものに対し上位ビットから下位ビットへとビットプレーン単位で符号化処理が実行される。
【００５２】
エントロピー符号化部２０６で生成された符号はタグ処理部２０８に送られ、１本の符号ストリームにまとめられるとともにタグ情報を付加され、図１５に示すようなフォーマットの符号データが作成される。図１５に見られるように、符号データの始まりを示すＳＯＣマーカの後に符号化のパラメータや量子化のパラメータ等を記述したメインヘッダが続き、その後に各タイル毎の実際の符号データが続く。実際の符号データは、ＳＯＴマーカで始まり、タイルヘッダ、ＳＯＤマーカ、タイルデータ（符号）で構成される。最後のタイルデータの後に、終了を示すＥＯＣマーカが置かれる。
【００５３】
このＪＰＥＧ２０００画像圧縮アルゴリズムは高圧縮率（低ビットレート）での画質が良好であるほか、多くの特徴を有する。
【００５４】
その１つは、符号化後に、下位ビットプレーンの符号の廃棄（切り捨て：トランケーション）による量子化（ポスト量子化）によって、再圧縮を行うことなく符号量を調整できることである。ＪＰＥＧ２０００では、画素毎又はコードブロック毎に係数のビットプレーンに順序付けを行い、１つ又は２つのビットプレーンからなるレイヤを構成することができるが、複数レイヤ構成をとる場合には下位のレイヤからレイヤ単位で符号のトランケーションを行うことにより、よりきめ細かな符号量調整を行うことも可能である。
【００５５】
もう１つは、画像の選択した領域の画質をそれ以外の領域より上げる選択的領域画質向上（ＲＯＩ：Ｒｅｇｉｏｎ　ｏｆ　Ｉｎｔｅｒｅｓｔ）と呼ばれる機能である。基本方式では、ウェーブレット係数の符号化前に、選択した領域のウェーブレット係数値を上位ビット側へシフトし、その領域外のウェーブレット係数値を下位ビット側へシフトするＲＯＩ方式が採用されている。このＲＯＩ機能により、画像の注目したい部分の画質を落とすことなく、全体の符号量を減らすことが可能となる。
【００５６】
以下、添付図面を参照して本発明の実施の形態について詳細に説明する。なお、各実施の形態において、動画は静止画の系列として記録される。「動画記録」と「静止画記録」という用語が用いられるが、動画記録と静止画記録のいずれにおいても動画の各フレーム画像はそれぞれ独立の静止画として扱われる。動画記録と静止画記録の違いは、静止画記録では動画記録に比べ画像の圧縮率が低いことにある。
【００５７】
図１は本発明の第１の実施の形態を説明するためのブロック図である。ここに示す画像記録装置は、撮像装置（カメラ部）１００、画像圧縮部１０２、符号量調整部１０４、媒体記録装置１１０、システム制御部１１２から構成される。
【００５８】
撮像装置１００は、動画の各フレーム画像を入力するための手段であって、一般的なデジタルカムコーダなどの撮像部と同様に、被写体像を光学レンズ系を通してイメージセンサなどに結像させ、フレーム周期で被写体を撮像してフレーム画像データを出力するとともに、フレーム画像データの間引き画像（いわゆるスルー画像）を液晶ディスプレイなどに表示させる構成のものである。撮像装置１００は、撮像操作のための各種の操作ボタン類を備えるが、その中に静止画記録指示ボタン１５０も含まれる。この静止画記録指示ボタン１５０は、単独の静止画として十分な画質で画像記録を行いたい時に静止画記録指示を入力するための手段である。
【００５９】
画像圧縮部１０２は、入力された動画の各フレーム画像を個別に圧縮するための手段であって、図１３の如き内部構成を有し、ＪＰＥＧ２０００に準拠した画像圧縮アルゴリズムにより可逆圧縮処理又は低圧縮率の非可逆圧縮処理を行う。
【００６０】
符号量調整部１０４は、画像圧縮部１０２より出力される各フレーム画像の符号データを加工することにより、その符号量を目標範囲内に調整する手段である。本実施の形態においては、符号量調整部１０４は、符号データの一部廃棄処理（トランケーション処理）を行うポスト量子化部１０６と、そのトランケーション処理後の符号量を監視し、符号量が目標範囲内にはいった段階でポスト量子化部１０６のトランケーション処理を終了させる符号量モニタ部１０８とから構成される。
【００６１】
媒体記録装置１１０は、符号量調整後の符号データを情報記録媒体に記録する手段である。本実施の形態においては、情報記録媒体として磁気テープのような書き込み可能なデータレート幅が狭い媒体が用いられる。
【００６２】
システム制御部１１２は、前記各要素の動作タイミングなどの制御を行うほか、符号量の目標範囲の切り替え制御とフレーム周期の切り替え制御を行う。
【００６３】
次に、この画像記録装置の動作について説明する。静止画記録指示ボタン１５０が押されない状態では、撮像装置１００において所定のフレーム周期で撮像され、各フレーム画像が例えばＲＧＢデータとして画像圧縮部１０２に順次入力される。画像圧縮部１０２において、各フレーム画像データ毎に可逆圧縮処理又は低圧縮率の非可逆圧縮処理を実行し、生成した符号データを符号量調整部１０４に入力する。符号量調整部１０４においては、ポスト量子化部１０６で各フレームの符号データに対し最も下位のビットプレーン又はレイヤから上位へと順にトランケーション処理を実行する。符号量モニタ部１０８は符号量を監視し、符号量が動画用目標範囲内に入った段階でポスト量子化部１０６のトランケーション処理を終了させる。そして、動画用目標範囲内まで符号量が削減された符号データが媒体記録装置１１０へ転送され、情報記録媒体に記録される。
【００６４】
以上のような動画記録中に静止画記録指示ボタン１５０が押下されると、撮像装置１００は信号Ａを発生して静止画記録指示をシステム制御部１１２に入力する。これに応答して、システム制御部１１２は所定数フレーム期間のみ信号Ｂをオンする。信号Ｂのオン期間では、符号量モニタ部１０８は符号量の目標範囲として、より符号量の多い静止画用目標範囲を選択し、また、撮像装置１００は所定のフレーム周期より遅い静止画用フレーム周期で撮像動作を行う。符号量モニタ部１０８は、符号量が静止画用目標範囲内まで減少した段階でポスト量子化部１０６のトランケーション処理を終了させる。また、信号Ｂのオン期間において、ポスト量子化部１０６は、システム制御部１１２より信号Ｄによってマーキング情報の付加を指示されるため、符号データの例えばメインヘッダに特定のマーキング情報を付加する。このようにして、動画記録時に比べ符号量の多い、つまり圧縮率が低く高画質の符号データが情報記録装置１１０へ転送され情報記録媒体に記録される。
【００６５】
以上のように、本実施の形態では情報記録媒体上に高圧縮率の符号データと低圧縮率の符号データが混在することになる。それら２種類の符号データの識別を容易にするため、本実施の形態では静止画記録時の符号データに特定のマーキング情報が付加される。
【００６６】
図２は、静止画記録指示ボタン１５０の押下前後の模式的なタイミング図である。図２（ａ）は符号データを表し、数字はフレーム番号を示す。図２（ｂ）は信号Ｂを表す。１番から４番、９番、１０番の各フレームの画像は高圧縮率で圧縮されて記録され、５番から８番までの４フレームの画像は低圧縮率で圧縮されて記録される。
【００６７】
磁気テープのような書き込み可能なデータレートの幅が限定される情報記録媒体を用いる場合、その上限に近い符号量に調整して動画記録を行うのが画質の面で好ましい。しかし、そのような条件で動画記録を行うと、静止画記録時にはデータレートが上限を超えてしまう。そこで、本実施の形態においては、静止画記録時にはフレーム周期を遅くすることにより、圧縮率を十分に下げてもデータレートが上限を超えないようにしている。なお、静止画記録時にフレーム周期が増大するが、毎秒２０フレーム程度までフレーム周期を増大させても、記録された符号データによる動画再生には格別の支障はない。
【００６８】
書き込み可能なデータレート幅の大きな各種メモリカードなどを情報記録媒体として用いる場合には、上に述べたようなフレーム周期の切り替え制御を行う必要はない。そのような実施の形態も本発明に包含される。
【００６９】
また、画像圧縮部１０２において、画像の中央部分など、高画質が期待される一部領域について選択的領域画質向上（ＲＯＩ）処理を実行させることも可能であり、そのような実施の形態も本発明に包含される。ＲＯＩ処理を行うことにより、高画質が期待される領域の画質の低下を抑えつつ全体の符号量を減らすことが可能である。このことは後記各実施の形態においても同様である。
【００７０】
また、本実施の形態においては、動画のフレーム画像は撮像装置１００により入力されるが、例えばパソコンなどの外部装置から動画のフレーム画像を入力する形態も本発明に包含される。このことは後記各実施の形態においても同様である。
【００７１】
なお、本実施の形態における画像記録動作の内容は、本発明の画像記録方法の１つの実施の形態でもあることは明らかであろう。
【００７２】
図３は本発明の第２の実施の形態を説明するためのブロック図であり、図中の図１と同一の符号は同等手段又は同等信号を示す。本実施の形態においては、フレーム画像又はその符号データから静止画記録の必要な状況を認識するための情報を取得する手段として、色成分検出部１２０とフレーム間差分検出部１２２が追加されている。また、シーン種類指定手段として、撮像装置１００にシーンセレクタ１５２が設けられている。
【００７３】
シーンセレクタ１５２は、複数のシーン種類の一つを選択して指定する手段であり、本実施の形態では「動体」「風景」「人物」の３種類を指定可能である。指定されたシーン種類は信号Ｃによりシステム制御部１１２に伝えられる。システム制御部１１２は、指定されたシーン種類に応じて、色成分検出部１２０又はフレーム間差分検出部１２２の検出結果に基づき静止画記録が必要な状況を判断し、自動的に静止画記録のための制御を行う。
【００７４】
色成分検出部１２０は、入力される動画の被写体が人物であることを認識するために、フレーム画像中の肌色相当の色成分を検出する手段である。この色成分検出は、画像の全域で行うことも例えば中央部分など１つ以上の領域で行うこともできる。
【００７５】
フレーム間差分検出部１２２は、入力される動画の被写体又は背景の動き又は静止を認識するために、相前後するフレーム画像間の差分を検出する手段である。このフレーム画像の差分検出は、画像圧縮部１０２に入力されるフレーム画像データから検出することも画像圧縮部１０２より出力される符号データから検出することも可能であり、いずれの態様も本発明に包含される。
【００７６】
本実施の形態においては、入力されるフレーム画像データからフレーム間差分を検出する。より具体的には、フレーム画像がＲＧＢデータとして入力される場合には、例えば画像中の１つ以上の特定領域に関して、前後２フレームのＧコンポーネントの画素値の差の総和などをフレーム間差分として検出する。フレーム画像がＹＣｂＣｒデータとして入力される場合には、Ｙコンポーネントについて同様の画素値の差の総和などをフレーム間差分として検出する。ただし、これ以外の検出方法を用いてもよく、それも本発明に包含される。
【００７７】
符号データからフレーム間差分を検出する場合には、例えば画像の中央部分などの特定の１つ以上の領域に関して、前後２フレームのＹコンポーネントの符号量の差分を検出する。この符号量としては該当領域の総符号量、特定のサブバンドの符号量、特定階層の符号量、特定階層の特定サブバンドの符号量などを用いることが可能である。これ以外の差分量を検出することも勿論可能である。
【００７８】
なお、色成分検出及びフレーム間差分検出について以上に述べた内容は、後記第４の実施の形態においても同様である。
【００７９】
動画記録と静止画記録の切り替え制御について、図４乃至図６に示すフローチャートを参照してさらに説明する。
【００８０】
シーンセレクタ１５２によりシーン種類として「動体」が指定された場合、システム制御部１１２は、フレーム間差分検出部１２２により検出された差分値と、所定の閾値ＴＨｍとの大小比較を行う（図４、ステップＳ１００）。差分値が閾値ＴＨｍより大きいと判定したときには、静止画記録が必要な状況であると判断し、所定数フレームの期間だけ信号Ｂをオンすることにより、符号量モニタ部１０８に静止画用目標範囲を選択させるとともに撮像装置１００のフレーム周期を遅いフレーム周期に切り替えさせ、また、信号Ｄにより、ポスト量子化部１０６にマーキング情報Ｍの付加を指示する（図４、ステップＳ１０２）。
【００８１】
シーンセレクタ１５２によりシーン種類として「風景」が指定された場合、システム制御部１１２は、フレーム間差分検出部１２２により検出された差分値と所定の閾値ＴＨｓとの大小比較を行う（図５、ステップＳ１１０）。差分値が閾値ＴＨｓより小さいと判定したときには、静止画記録が必要な状況であると判断し、所定数フレームの期間だけ信号Ｂをオンすることにより、符号量モニタ部１０８に静止画用目標範囲を選択させるとともに撮像装置１００のフレーム周期を遅いフレーム周期に切り替えさせ、また、信号Ｄによりポスト量子化部１０６にマーキング情報Ｓの付加を指示する（図５、ステップＳ１１２）。
【００８２】
シーンセレクタ１５２によりシーン種類として「人物」が指定された場合、システム制御部１１２は、色成分検出部１２２により検出された肌色成分値と所定の閾値ＴＨｐとの大小比較を行う（ステップＳ１２０）。肌色成分値が閾値ＴＨｐより大きいと判定したときには、静止画記録が必要な状況であると判断し、所定数フレームの期間だけ信号Ｂをオンすることにより、符号量モニタ部１０８に静止画用目標範囲を選択させるとともに撮像装置１００のフレーム周期を遅いフレーム周期に切り替えさせ、また、信号Ｄによりポスト量子化部１０６にマーキング情報Ｐの付加を指示する（ステップＳ１２２）。
【００８３】
このように、本実施の形態においては、シーン種類の選択と連動して自動的に静止画記録を制御することができる。本実施の形態では、静止画記録時に符号データに付加されるマーキング情報を、その時に選択されたシーン種類に応じて異ならせている。このようにすると、静止画記録された符号データをシーン種類別に容易に探し出すことができる利点がある。ただし、シーン種類にかかわらず共通のマーキング情報を付加することも可能であり、そのような実施の形態も本発明に包含される。
【００８４】
なお、本実施の形態における画像記録動作の内容は、本発明の画像記録方法の１つの実施の形態でもあることは明らかであろう。
【００８５】
図７は本発明の第３の実施の形態を説明するためのブロック図であり、図中の図１と同一又は同様の符号は同等手段又は同等信号を示す。ここに示す画像記録装置は、動画記録用と静止画記録用に別々の符号量調整部１０４Ａ，１０４Ｂを有すること、動画記録用と静止画記録用に別々の媒体記録装置１１０Ａ，１１０Ｂを有すること、媒体記録装置１１０Ｂによる符号データの記録を制御するためのＦＩＦＯバッファ１３０とゲート１３２が設けられたことが、前記第１の実施の形態との構成上の相違である。
【００８６】
媒体記録装置１１０Ａは、例えば磁気テープのような書き込み可能なデータレートの幅が小さい情報記録媒体に符号データを記録するものである。静止画記録用の媒体記録装置１１０Ｂは、各種メモリカードのような書き込み可能なデータレートの幅が大きな情報記録媒体に符号データを記録するものである。
【００８７】
動画記録用の符号量調整部１０４Ａは常に動画用目標範囲内に符号量を調整するように動作し、静止画記録用の符号量調整部１０４Ｂは常に静止画用目標範囲内に符号量を調整するように動作する。
【００８８】
本実施の形態においては、画像圧縮部１０２より出力される符号データに対し、２つの符号量調整部１０４Ａ，１０４Ｂが同時に符号量調整を行う。符号量調整部１０４Ａにより符号量調整後の符号データは、媒体記録装置１１０により磁気テープなどの情報記録媒体に記録される。符号量調整部１０４Ｂにより符号量調整後の符号データは、ＦＩＦＯバッファ１３０によって所定数フレームだけ遅延されてからゲート１３２に入力される。
【００８９】
静止画記録指示ボタン１５０が押され信号Ａにより静止画記録指示が入力されると、システム制御部１１２は所定数フレーム期間だけ信号Ｂをオンする。信号Ｂのオン期間にゲート１３２が開き、ＦＩＦＯバッファ１３０で遅延された所定数フレームの符号データが媒体記録装置１１０Ｂへ転送され、メモリカードなどの情報記録媒体に記録される。
【００９０】
本実施の形態では、動画記録と静止画記録を別々の情報記録媒体に対して行うため、前記第１及び第２の実施の形態のようなフレーム周期の切り替え制御とマーキング情報の付加は行われない。
【００９１】
図８は、静止画記録指示ボタン１５０の押下前後の模式的なタイミング図である。図８（ａ）は符号量調整部１０４Ｂから出力される符号データを表す。図８（ｂ）はＦＩＦＯバッファ１３０から出力される符号データを表し、この例では入力より２フレーム周期だけ遅延している。図８（ｃ）は信号Ａを表し、図８（ｄ）は信号Ｂを表す。図８（ｅ）はゲート１３２を介して媒体記録装置１１０Ｂへ転送され情報記録媒体に記録される符号データを表す。符号データに付された数字はフレーム番号を示す。ここに示す例にあっては、静止画記録指示ボタン１５０が押され信号Ａが発生した時点より前の２番と３番の２フレーム、その時点より後の４番と５番の２フレームの合計４フレームの符号データが媒体記録装置１１０Ｂに転送され記録される。
【００９２】
このように静止画記録指示ボタン１５０の押下直前のフレームの符号データも記録される構成によれば、欲しいシーンの静止画記録を静止画記録指示ボタン１５０の押し遅れにより失敗することが少なくなる。
【００９３】
なお、ＦＩＦＯバッファ１３０は、符号量調整部１０４Ｂの入力側に設けることも可能であるが、ＦＩＦＯバッファ１０４Ｂの必要容量が増加するため出力側に設けるほうが有利である。また、撮像装置１００の各フレーム画像の撮像から、その符号量調整後の符号データの生成までに１フレーム周期以上の遅延がある場合には、ＦＩＦＯバッファ１３０を設けず、符号量調整部１０４Ｂより出力される符号データを直接的にゲート１３２に入力する構成としても、静止画記録指示入力時点の前後のフレームについて静止画記録が可能である。
【００９４】
なお、本実施の形態における画像記録動作の内容は、本発明の画像記録方法の１つの実施の形態でもあることは明らかであろう。
【００９５】
図９は本発明の第４の実施の形態を説明するためのブロック図であり、図中の図２又は図７と同一又は同様の符号は同等手段又は同等信号を示す。本実施の形態においても、前記第２の実施の形態と同様に、シーン種類の選択に連動した自動的な静止画記録を可能にするため、色成分検出部１２０とフレーム間差分検出部１２２が設けられ、また、シーンセレクタ１５２が撮像装置１００に設けられる。これ以外の構成は前記第３の実施の形態と同様である。
【００９６】
動画記録の動作は前記第３の実施の形態と同じである。指定されたシーン種類に応じて、色成分検出部１２０又はフレーム間差分検出部１２２の検出結果に基づいて静止画記録が制御される点が前記第３の実施の形態と相違する。この点について図１０乃至図１２のフローチャートを参照して説明する。
【００９７】
シーンセレクタ１５２によりシーン種類として「動体」が指定された場合、システム制御部１１２は、フレーム間差分検出部１２２により検出された差分値と、所定の閾値ＴＨｍとの大小比較を行う（図１０、ステップＳ２００）。差分値が閾値ＴＨｍより大きいと判定したときには、静止画記録が必要な状況であると判断し、所定数フレームの期間だけ信号Ｂをオンすることにより、ゲート１３２を介して符号データを媒体記録装置１１０Ｂへ転送し記録させる（図１０、ステップＳ２０２）。
【００９８】
シーンセレクタ１５２によりシーン種類として「風景」が指定された場合、システム制御部１１２は、フレーム間差分検出部１２２により検出された差分値と所定の閾値ＴＨｓとの大小比較を行う（図１１、ステップＳ２１０）。差分値が閾値ＴＨｓより小さいと判定したときには、静止画記録が必要な状況であると判断し、所定数フレーム期間だけ信号Ｂをオンすることにより、符号データを記録させる（図１１、ステップＳ２１２）。
【００９９】
シーンセレクタ１５２によりシーン種類として「人物」が指定された場合、システム制御部１１２は、色成分検出部１２２により検出された肌色成分値と所定の閾値ＴＨｐとの大小比較を行う（図１２、ステップＳ２２０）。肌色成分値が閾値ＴＨｐより大きいと判定したときには、静止画記録が必要な状況であると判断し、所定数フレームの期間だけ信号Ｂをオンすることにより符号データを記録させる（図１２、ステップＳ２２２）。
【０１００】
本実施の形態では、静止画記録時に符号データにマーキング情報を付加しないが、シーン種類に対応したマーキング情報を符号データに付加することも可能であり、そのような実施の形態も本発明に包含される。
【０１０１】
なお、本実施の形態における画像記録動作の内容は、本発明の画像記録方法の１つの実施の形態でもあることは明らかである。
【０１０２】
以上説明した本発明の画像記録装置の各手段又は本発明の画像記録方法の各処理は、ハードウェアのみ、ソフトウェアのみ、あるいは、両者の組み合わせを利用して実現し得る。例えば、画像圧縮手段又は処理、色成分検出手段又は処理、フレーム間差分検出手段又は処理をハードウェアで実現し、符号量調整手段又は処理とシステム制御手段又を処理をソフトウェアで実現することができる。処理速度に支障がないならば、画像圧縮手段又は処理、色成分検出手段又は処理、フレーム間差分検出手段又は処理もソフトウェアで実現可能である。画像入力手段をアプリケーションソフトウェアとして実現することも可能である。そのためのプログラ、及び、同プログラムが記録された、プロセッサが読み取り可能な各種情報記録媒体も本発明に包含される。
【０１０３】
【発明の効果】
以上の説明から明らかなように、本発明は、（１）動画記録と静止画記録に共通の画像圧縮アルゴリズムを利用するため、別々の画像圧縮アルゴリズムを利用する構成に比べ、画像記録装置の構成の単純化、低コスト化に有利である。また、動画記録された符号データと静止画記録された符号データを同じ伸長処理アルゴリズムによって伸長できる利点もある。（２）画像圧縮処理後に符号データの加工によって符号量を動画用目標範囲内又は静止画用目標範囲内に調整するため、符号量調整のために画像圧縮処理を繰り返す方式のように画像データ保存用の大きなメモリ領域を用意する必要がなく、画像記録装置の低コスト化に有利である。また、ソフトウェアによる画像圧縮処理は一般に処理速度の制約が厳しいが、画像圧縮処理を各フレームにつき１回実行するだけであるから、符号量調整のため圧縮処理を繰り返す方式に比べ、ソフトウェアによる画像圧縮処理の実行が容易である。（３）静止画記録時にフレーム周期を動画記録時より増大させることにより、動画記録と静止画記録に共通の磁気テープなどを用いる場合においても、動画記録の画質を犠牲にすることなく、十分に高画質の静止画記録が可能である。（４）静止画記録用の媒体記録手段と動画記録用の媒体記録手段を独立させることにより、動画記録のための情報記録媒体の種類及び符号量の目標範囲と静止画記録のための情報記録媒体の種類及び符号量の目標範囲をそれぞれ自由に選ぶことができる。（５）静止画記録指示の入力時点の前後のフレームの符号データを記録するため、必要なシーンの静止画記録を静止画記録指示の遅れにより失敗することが少なくなる。（６）特定色成分やフレーム間差分など、フレーム画像又はその符号データから検出した情報に基づいて静止画記録の必要な状況を判断することにより、必要なシーンの静止画記録を自動的に行うことができる。
（７）静止画記録される符号データにマーキング情報を付加することにより、同じ情報記録媒体上に動画記録と静止画記録の符号データが混在する場合においても、静止画記録の符号データを容易に探し出すことができる。静止画記録の符号データにシーン種類別のマーキング情報を付加することにより、静止画記録の符号データをシーン種類別に容易に探し出すことができる。（８）ＪＰＥＧ２０００準拠の画像圧縮アルゴリズムを用いることにより、高い圧縮率でも良好な画質の画像記録が可能である。特に、画像圧縮処理において選択的領域画質向上（ＲＯＩ）処理を実行することにより、高画質が期待される領域の画質の低下を抑えつつ全体の符号量を減らすことが可能である、等々の効果を得られる。
【図面の簡単な説明】
【図１】本発明の第１の実施の形態を説明するためのブロック図である。
【図２】静止画記録指示の入力前後の模式的なタイミング図である。
【図３】本発明の第２の実施の形態を説明するためのブロック図である。
【図４】シーンセレクタにより「動体」が指定された時の制御を説明するためのフローチャートである。
【図５】シーンセレクタにより「風景」が指定された時の制御を説明するためのフローチャートである。
【図６】シーンセレクタにより「人物」が指定された時の制御を説明するためのフローチャートである。
【図７】本発明の第３の実施の形態を説明するためのブロック図である。
【図８】静止画記録指示の入力前後の模式的なタイミング図である。
【図９】本発明の第４の実施の形態を説明するためのブロック図である。
【図１０】シーンセレクタにより「動体」が指定された時の制御を説明するためのフローチャートである。
【図１１】シーンセレクタにより「風景」が指定された時の制御を説明するためのフローチャートである。
【図１２】シーンセレクタにより「人物」が指定された時の制御を説明するためのフローチャートである。
【図１３】ＪＰＥＧ２０００の画像圧縮アルゴリズムを説明するための簡略化されたブロック図である。
【図１４】
ウェーブレット変換の説明図である。
【図１５】
符号データの構造の説明図である。
【符号の説明】
１００　撮像装置
１０２　画像圧縮部
１０４　符号量調整部
１０６　ポスト量子化部
１０８　符号量モニタ部
１１０　媒体記録装置
１１２　システム制御部
１２０　色成分検出部
１２２　フレーム間差分検出部
１０４Ａ，１０４Ｂ　符号量調整部
１１０Ａ，１１０Ｂ　媒体記録装置
【図１】
2004023748.tif 000003
【図２】
2004023748.tif 000004
【図３】
2004023748.tif 000005
【図４】
2004023748.tif 000006
【図５】
2004023748.tif 000007
【図６】
2004023748.tif 000008
【図７】
2004023748.tif 000009
【図８】
2004023748.tif 000010
【図９】
2004023748.tif 000011
【図１０】
2004023748.tif 000012
【図１１】
2004023748.tif 000013
【図１２】
2004023748.tif 000014
【図１３】
2004023748.tif 000015
【図１４】
2004023748.tif 000016
【図１５】
2004023748.tif 000017