(57)【要約】      （修正有）【課題】  撮影したシーンを静止画像及び動画像として十分な画質で出力できる画像撮影記録装置を得る。【解決手段】撮影対象のシーンを所定の解像度の静止画像として所定のフレームレートで繰り返し撮影し、撮影データは静止画像処理部24によって各種の補正処理及び静止画像用の画像処理が行われ、圧縮／伸長処理部26によってフレーム間の相関を利用しない圧縮方法により圧縮されて、記録メディア34に順次記録される。静止画像の表示が指示された場合には、記録メディア34から特定の静止画像のデータが読み出され圧縮／伸長処理部26よる伸長処理を経て表示装置28に表示される。動画像の表示が指定された場合には、表示対象の動画像に対応する静止画像データ群が記録メディア34から順次読み出され、圧縮／伸長処理部26よる伸長処理を経た静止画像データ群に対し、動画像処理部22によって動画像用の画像処理が行われた後に表示装置28に動画像として表示される。【選択図】        図１
2006157143.tif 000002
【特許請求の範囲】
【請求項１】
撮影対象のシーンを所定の解像度の静止画像として所定のフレームレートで繰り返し撮影する撮影手段と、
前記撮影手段による撮影によって順次出力される静止画像データを、非圧縮又はフレーム間の相関を利用しない圧縮方法により圧縮して記録媒体に順次記録する記録手段と、
出力対象の静止画像又は動画像を指定するための指定手段と、
前記指定手段を介して出力対象の静止画像が指定されると、前記出力対象の静止画像に対応する静止画像データを前記記録媒体から読み出して出力する静止画像出力手段と、
前記指定手段を介して出力対象の動画像が指定されると、前記出力対象の動画像に対応する静止画像データ群を前記記録媒体から読み出し、読み出した静止画像データ群に動画像用の画像処理を施し、動画像データとして出力する動画像出力手段と、
を含む画像撮影記録装置。
【請求項２】
前記記録手段によって前記記録媒体に順次記録される静止画像データに、静止画像用の画像処理を施す画像処理手段を更に備えたことを特徴とする請求項１記載の画像撮影記録装置。
【請求項３】
前記撮影手段による撮影におけるフレームレートを設定する設定手段を更に備え、
前記撮影手段は前記設定手段によって設定されたフレームレートで撮影を行い、
前記記録手段は前記記録媒体に順次記録する静止画像データに、撮影手段による撮影におけるフレームレートを表すフレームレート情報を付加し、
前記動画像出力手段は前記出力対象の動画像に対応する静止画像データ群を前記記録媒体から読み出した後に、読み出した静止画像データ群に付加されているフレームレート情報が表すフレームレートに応じて、前記動画像用画像処理の処理内容を切替える
ことを特徴とする請求項１記載の画像撮影記録装置。
【請求項４】
動画像データの出力先としての出力先装置に適した動画像データの出力フォーマットを検出するフォーマット検出手段を更に備え、
前記動画像出力手段は、前記出力対象の動画像に対応する静止画像データ群を前記記録媒体から読み出した後に、前記フォーマット検出手段によって検出された出力データフォーマットに応じて前記動画像用画像処理の処理内容を切替えることを特徴とする請求項１記載の画像撮影記録装置。
【請求項５】
出力対象の動画像に対応する静止画像データ群に対して解析処理を行う第１画像解析手段を更に備え、
前記動画像出力手段は前記出力対象の動画像に対応する静止画像データ群を前記記録媒体から読み出した後に、前記第１画像解析手段による前記静止画像データ群に対する解析処理の結果に応じて前記動画像用画像処理の処理内容を切替えることを特徴とする請求項１記載の画像撮影記録装置。
【請求項６】
前記撮影手段による撮影によって順次出力される静止画像データに対して解析処理を行う第２画像解析手段を更に備え、
前記記録手段は前記記録媒体に順次記録する静止画像データに、前記第２画像解析手段による解析処理の結果を表す解析結果情報を付加し、
前記動画像出力手段は前記出力対象の動画像に対応する静止画像データ群を前記記録媒体から読み出した後に、読み出した静止画像データ群の個々の静止画像データに付加されている解析結果情報が表す解析処理の結果に応じて前記動画像用画像処理の処理内容を切替えることを特徴とする請求項１記載の画像撮影記録装置。
【請求項７】
前記撮影手段による撮影時の撮影条件を検出する撮影条件検出手段を更に備え、
前記記録手段は前記記録媒体に順次記録する静止画像データに、前記撮影条件検出手段によって検出された撮影条件を表す撮影条件情報を付加し、
前記動画像出力手段は前記出力対象の動画像に対応する静止画像データ群を前記記録媒体から読み出した後に、読み出した静止画像データ群の個々の静止画像データに付加されている撮影条件情報が表す撮影条件に応じて前記動画像用画像処理の処理内容を切替えることを特徴とする請求項１記載の画像撮影記録装置。
【請求項８】
撮影対象のシーンを撮影手段により所定の解像度の静止画像として所定のフレームレートで繰り返し撮影し、
前記撮影手段による撮影によって順次出力される静止画像データを、非圧縮又はフレーム間の相関を利用しない圧縮方法により圧縮して記録媒体に順次記録し、
出力対象の静止画像又は動画像を指定するための指定手段を介して出力対象の静止画像が指定されると、前記出力対象の静止画像に対応する静止画像データを前記記録媒体から読み出して出力し、
前記指定手段を介して出力対象の動画像が指定されると、前記出力対象の動画像に対応する静止画像データ群を前記記録媒体から読み出し、読み出した静止画像データ群に動画像用の画像処理を施し、動画像データとして出力する画像撮影記録方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は画像撮影記録装置及び方法に係り、特に、画像を撮影記録可能な画像撮影記録装置、及び、該画像撮影記録装置に適用可能な画像撮影記録方法に関する。
【背景技術】
【０００２】
静止画像は写真プリントとして保管しておけば手軽に閲覧・鑑賞できる等のメリットがあり、動画像は動きのあるシーンの記録に適している等、静止画像と動画像にはそれぞれ異なる特長がある。このため近年、本来は被写体を静止画像として撮影記録するためのデジタルスチルカメラ（ＤＳＣ）に、被写体を動画像として撮影記録する機能を設けることが一般的となってきている（例えば特許文献１を参照）。また、本来は被写体を動画像として撮影記録するためのデジタルビデオカメラに、被写体を静止画像として撮影記録する機能を追加することも一般的となってきており、静止画像を撮影記録する機能と動画像を撮影記録する機能を各々備えた撮影記録装置が広範に普及してきている。
【０００３】
また、上記に関連して特許文献２には、動画像撮影用のＣＣＤ、撮像レンズ及びシャッタと静止画像撮影用のＣＣＤ、撮像レンズ及びシャッタが各々設けられ、動画像表示時又は記録時にレリーズ操作が行われると、静止画像撮影用のＣＣＤによって静止画像を撮影してメモリカードに記録する構成の撮像装置が開示されている。
【特許文献１】特開平９−８３８７３号公報
【特許文献２】特開２００４−１７２９７８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
上記のように静止画像を撮影記録する機能及び動画像を撮影記録する機能を備えた撮影記録装置は、例えば特許文献１にも記載されているように、静止画像及び動画像の何れか一方を選択的に撮影記録可能な構成であることが一般的であるが、前述のように静止画像と動画像にはそれぞれ異なる特長があるため、同一のシーンを静止画像としても動画像としても記録しておきたい、というニーズが存在している。しかしながら、静止画像を撮影記録する機能及び動画像を撮影記録する機能を備えた撮影記録装置であっても、例えば被写体を動画像として撮影記録しながら所望のタイミングで静止画像も撮影記録する等の場合の撮影操作は非常に煩雑である。これを解決するために、被写体の撮影時には撮影結果を動画像データとして記録しておき、撮影後に動画像データから静止画像データを切り出すことが考えられる。
【０００５】
しかしながら、静止画像は画質についての要求水準が比較的高いのに対し、この種の撮影記録装置で撮影記録される動画像データの１フレームの画素数はＶＧＡサイズ（640×480画素）程度であることが一般的であり、撮影記録された動画像データから静止画像データを切り出しても高精細な静止画像データは得られない。また、ハイビジョン（ＨＤＴＶ）サイズ（例えば1280×720画素やそれ以上）相当の高精細な動画像を記録可能な画像撮影記録装置も出回り始めているが、この種の撮影記録装置では記録媒体への動画像データの記録フォーマットとして、例えばMPEG等のようにフレーム相関を利用して圧縮するフォーマットが採用されており、このような動画像データから静止画像データを切り出そうとすると、動画像データに含まれる基準静止画像データと差分データから切り出し対象の静止画像を再現する等の画像再現処理が必要となり、装置に大きな負荷がかかると共に切り出した静止画像データの画質も不十分なものとなる。
【０００６】
更に、静止画像データの撮影記録においては、鑑賞に堪えうる高画質の静止画像を得るために、撮像素子から出力された画像信号に対して画質向上を目的とする輪郭強調処理等の画像処理を行った後に静止画像データとして記録媒体に記録することが一般的であるのに対し、動画像の撮影記録においては、見た目に違和感の無い動画像を得るために、撮像素子から出力された画像信号に対してフレーム間の差異を小さくするスムージングや高周波成分の除去等の画像処理を行った後に動画像データとして記録媒体に記録することが一般的である。このように、静止画像と動画像は好適な画像処理も相違しており、動画像データに対して施されたスムージング等の画像処理が、動画像データから切り出す静止画像データに対しては画質低下の要因となる。従って、撮影時には撮像素子から出力された画像信号を動画像データとして記録媒体に記録しておき、撮影後に動画像データから静止画像データを切り出そうとしても、高精細かつ十分な画質の静止画像データが得られないという問題があった。
【０００７】
また、特許文献２に記載の技術では、ＣＣＤ、撮像レンズ及びシャッタが動画像撮影用と静止画像撮影用に各々設けられており、動画像の撮影記録と並行して静止画像の撮影記録を行うことも可能であるが、装置構成が複雑化しコストが嵩むという問題がある。
【０００８】
本発明は上記事実を考慮して成されたもので、撮影したシーンを静止画像としても動画像としても十分な画質で出力できる画像撮影記録装置及び画像撮影記録方法を得ることが目的である。
【課題を解決するための手段】
【０００９】
上記目的を達成するために請求項１記載の発明に係る画像撮影記録装置は、撮影対象のシーンを所定の解像度の静止画像として所定のフレームレートで繰り返し撮影する撮影手段と、前記撮影手段による撮影によって順次出力される静止画像データを、非圧縮又はフレーム間の相関を利用しない圧縮方法により圧縮して記録媒体に順次記録する記録手段と、出力対象の静止画像又は動画像を指定するための指定手段と、前記指定手段を介して出力対象の静止画像が指定されると、前記出力対象の静止画像に対応する静止画像データを前記記録媒体から読み出して出力する静止画像出力手段と、前記指定手段を介して出力対象の動画像が指定されると、前記出力対象の動画像に対応する静止画像データ群を前記記録媒体から読み出し、読み出した静止画像データ群に動画像用の画像処理を施し、動画像データとして出力する動画像出力手段と、を含んで構成されている。
【００１０】
請求項１記載の発明では、撮影手段により、撮影対象のシーン（被写体）が所定の解像度（望ましくはＨＤＴＶ相当の解像度）の静止画像として所定のフレームレート（例えば動画像データとして利用可能な程度のフレームレート）で繰り返し撮影され、記録手段は、撮影手段による撮影によって順次出力される静止画像データを、非圧縮又はフレーム間の相関を利用しない圧縮方法により圧縮して記録媒体に順次記録する。また請求項１記載の発明では、出力対象の静止画像又は動画像を指定するための指定手段が設けられており、指定手段を介して出力対象の静止画像が指定されると、静止画像出力手段は、出力対象の静止画像に対応する静止画像データを記録媒体から読み出して出力する。また、指定手段を介して出力対象の動画像が指定されると、動画像出力手段は、出力対象の動画像に対応する静止画像データ群を記録媒体から読み出し、読み出した静止画像データ群に動画像用の画像処理（例えば見た目の違和感軽減を目的としたスムージングや高周波成分の除去等の画像処理や、出力する動画像データを所定の動画像データフォーマットに準拠した動画像データへ加工する画像処理）を施し、動画像データとして出力する。
【００１１】
このように、請求項１記載の発明では、撮影手段による撮影によって順次出力される静止画像データを、非圧縮又はフレーム間の相関を利用しない圧縮方法により圧縮して記録媒体に順次記録するので、記録媒体に一旦記録した静止画像データ群から任意の静止画像データを取り出す際に画像再現処理を行う必要はない。また、請求項１記載の発明では、撮影手段による撮影によって順次出力される静止画像データに対する動画像用の画像処理を、指定手段を介して出力対象の動画像が指定されることで、記録媒体に一旦記録した静止画像データ群を記録媒体から読み出した後に行うので、出力する静止画像の画質を損なう動画像用の画像処理を記録媒体への静止画像データの記録時に行う必要も無くなる。従って、請求項１記載の発明によれば、撮影したシーンを静止画像としても動画像としても十分な画質で出力することができる。
【００１２】
また、ＤＳＣでは静止画像を撮影記録するためにシャッターボタンを押下すると、シャッターボタンが押下されたタイミングに対して若干遅いタイミングで撮像された静止画像が記録媒体に記録されるという問題があるが、請求項１記載の発明では、撮影手段による撮影によって順次出力される静止画像データを記録媒体に順次記録しておき、指定手段を介して出力対象の静止画像が指定されると、出力対象の静止画像に対応する静止画像データを記録媒体から読み出して出力するので、上記のタイミングのずれの影響を受けることなく、記録媒体に記録されている静止画像データ群の中から所望のタイミングで撮影された静止画像のデータを切り出すことができる、という副次的な効果も有している。
【００１３】
なお、請求項１記載の発明において、静止画像用の画像処理は出力する動画像の画質には殆ど悪影響を及ぼさない（出力対象の動画像が指定されると、記録媒体から読み出した出力対象の動画像に対応する静止画像データ群に動画像用の画像処理を施すことも一因である）ので、請求項１記載の発明において、静止画像用の画像処理は、例えば請求項２に記載したように、記録手段によって記録媒体に順次記録される静止画像データに施すようにしてもよいし、出力対象の静止画像が指定されることで記録媒体から読出した出力対象の静止画像に対応する静止画像データに対して施すようにしてもよい。なお、静止画像用の画像処理としては静止画像の画質向上を目的とする画像処理、例えばノイズ低減処理や輪郭強調処理、フィルタリング処理、色補正処理等が挙げられる。これにより、出力する静止画像の画質を更に向上させることができる。
【００１４】
なお、請求項１記載の発明において、例えば請求項３に記載したように、撮影手段による撮影におけるフレームレートを設定する設定手段を更に備え、撮影手段は設定手段によって設定されたフレームレートで撮影を行い、記録手段は記録媒体に順次記録する静止画像データに、撮影手段による撮影におけるフレームレートを表すフレームレート情報を付加し、動画像出力手段は出力対象の動画像に対応する静止画像データ群を前記記録媒体から読み出した後に、読み出した静止画像データ群に付加されているフレームレート情報が表すフレームレートに応じて、動画像用画像処理の処理内容を切替えることが好ましい。
【００１５】
請求項３記載の発明において、設定手段によるフレームレートの設定は、例えば撮影手段によって撮影される静止画像の解像度が切替可能である場合に、実際に撮影される静止画像の解像度に応じて定めることができ、具体的には、例えば静止画像の解像度が高くなるに従ってデータ処理に要する時間が長くなるので、静止画像の解像度が高くなるに従ってフレームレートが低くなるようにフレームレートを設定することができるが、逆に解像度が高くなるに従ってフレームレートが高くなるように設定してもよい。また、動画像出力手段によるフレームレートに応じた動画像用画像処理の処理内容の切替えは、例えば出力する動画像データのフォーマットにおけるフレームレートに比して、フレームレート情報が表すフレームレートが低い場合には、不足フレームの静止画像データを撮影日時順で前後のフレームの静止画像データから補間により生成する処理を行い、出力する動画像データのフォーマットにおけるフレームレートに比して、フレームレート情報が表すフレームレートが高い場合には、余剰フレームの静止画像データを削除する（間引く）処理を行うように、処理内容を切替えることができる。
【００１６】
このように、請求項３記載の発明では、撮影手段による撮影におけるフレームレートに応じて動画像用画像処理の処理内容を切替えるので、出力する動画像データが表す動画像の画質を向上させることができると共に、本発明に係る画像撮影記録装置の汎用性を向上させることができる。
【００１７】
また、請求項１記載の発明において、動画像出力手段が出力する動画像データは、表示装置等の任意の動画像処理装置へ出力可能であるが、この種の動画像処理装置には、入力可能な動画像データのフォーマットが異なる装置が混在している。これを考慮すると、例えば請求項４に記載したように、動画像データの出力先としての出力先装置に適した動画像データの出力フォーマットを検出するフォーマット検出手段を設け、動画像出力手段は出力対象の動画像に対応する静止画像データ群を記録媒体から読み出した後に、フォーマット検出手段によって検出された出力フォーマットに応じて動画像用画像処理の処理内容を切替えることが好ましい。
【００１８】
請求項４記載の発明において、動画像出力手段による出力フォーマットに応じた動画像用画像処理の処理内容を切替える処理としては、例えば撮影手段によって撮影される静止画像の解像度がフォーマット検出手段によって検出された出力フォーマットにおける解像度と相違している場合に、出力する動画像データの解像度が前記動画像データフォーマットにおける解像度に一致するように、動画像用画像処理の１つである解像度変換処理の処理パラメータを切替える処理が挙げられる。また、解像度変換処理に伴って発生するモワレを抑制するために高周波成分又は特定帯域成分をカットするフィルタリング処理における処理パラメータを、フォーマット検出手段によって検出された出力フォーマットに応じて切替える処理も挙げられる。
【００１９】
このように、請求項４記載の発明では、出力先装置に適した出力フォーマットに応じて動画像用画像処理の処理内容を切替えるので、請求項３記載の発明と同様に、出力する動画像データが表す動画像の画質を向上させることができると共に、本発明に係る画像撮影記録装置の汎用性を向上させることができる。
【００２０】
また、請求項１記載の発明において、例えば請求項５に記載したように、出力対象の動画像に対応する静止画像データ群に対して解析処理を行う第１画像解析手段を設け、動画像出力手段は出力対象の動画像に対応する静止画像データ群を記録媒体から読み出した後に、第１画像解析手段による静止画像データ群に対する解析処理の結果に応じて動画像用画像処理の処理内容を切替えるようにしてもよい。これにより、例えば第１画像解析手段が、出力対象の動画像に対応する静止画像データ群に対して解析処理を行うことで、前記静止画像データ群の個々の静止画像データにおける被写体の動きの方向を検出し、動画像出力手段が、第１画像解析手段による解析処理の結果としての被写体の動きの方向に応じて、動画像用画像処理の１つであるフィルタリング処理におけるフィルタの特性を切替える等のように、出力対象の動画像に対応する静止画像データ群の画像内容等に応じて、出力する動画像データの画質等を最適化することができる。
【００２１】
更に、請求項１記載の発明において、例えば請求項６に記載したように、撮影手段による撮影によって順次出力される静止画像データに対して解析処理を行う第２画像解析手段を設け、記録手段は記録媒体に順次記録する静止画像データに、第２画像解析手段による解析処理の結果を表す解析結果情報を付加し、動画像出力手段は、前記出力対象の動画像に対応する静止画像データ群を前記記録媒体から読み出した後に、読み出した静止画像データ群の個々の静止画像データに付加されている解析結果情報が表す解析処理の結果に応じて動画像用画像処理の処理内容を切替えるようにしてもよい。請求項６記載の発明も請求項５記載の発明と同様に、出力対象の動画像に対応する静止画像データ群の画像内容等に応じて、出力する動画像データの画質等を最適化することができる。
【００２２】
また、請求項１記載の発明において、例えば請求項７に記載したように、撮影手段による撮影時の撮影条件を検出する撮影条件検出手段を設け、記録手段は記録媒体に順次記録する静止画像データに、撮影条件検出手段によって検出された撮影条件を表す撮影条件情報を付加し、動画像出力手段は出力対象の動画像に対応する静止画像データ群を記録媒体から読み出した後に、読み出した静止画像データ群の個々の静止画像データに付加されている撮影条件情報が表す撮影条件に応じて動画像用画像処理の処理内容を切替えるようにしてもよい。これにより、例えば撮影条件検出手段が、撮影時の撮影条件として撮影時の手振れの量や方向を検出し、動画像出力手段が、撮影条件情報が表す撮影条件の１つである撮影時の手振れの量や方向に応じて、動画像用画像処理の１つである手振れ補正処理のパラメータを切替える等のように、出力対象の動画像に対応する静止画像データ群の撮影条件に応じて、出力する動画像データの画質等を最適化することができる。
【００２３】
請求項８記載の発明に係る画像撮影記録方法は、撮影対象のシーンを撮影手段により所定の解像度の静止画像として所定のフレームレートで繰り返し撮影し、前記撮影手段による撮影によって順次出力される静止画像データを、非圧縮又はフレーム間の相関を利用しない圧縮方法により圧縮して記録媒体に順次記録し、出力対象の静止画像又は動画像を指定するための指定手段を介して出力対象の静止画像が指定されると、前記出力対象の静止画像に対応する静止画像データを前記記録媒体から読み出して出力し、前記指定手段を介して出力対象の動画像が指定されると、前記出力対象の動画像に対応する静止画像データ群を前記記録媒体から読み出し、読み出した静止画像データ群に動画像用の画像処理を施し、動画像データとして出力するので、請求項１記載の発明と同様に、撮影したシーンを静止画像としても動画像としても十分な画質で出力することができる。
【発明の効果】
【００２４】
以上説明したように本発明は、撮影対象のシーンを撮影手段が所定の解像度の静止画像として所定のフレームレートで繰り返し撮影することで順次出力される静止画像データを、非圧縮又はフレーム間の相関を利用しない圧縮方法により圧縮して記録媒体に順次記録し、出力対象の静止画像が指定されると、対応する静止画像データを記録媒体から読み出して出力し、出力対象の動画像が指定されると、対応する静止画像データ群を記録媒体から読み出し動画像用の画像処理を施して動画像データとして出力するようにしたので、撮影したシーンを静止画像としても動画像としても十分な画質で出力できる、という優れた効果を有する。
【発明を実施するための最良の形態】
【００２５】
以下、図面を参照して本発明の実施形態の一例を詳細に説明する。
【００２６】
〔第１実施形態〕
図１には、撮影したシーンを静止画像及び動画像として出力可能な撮影記録装置１０が示されている。撮影記録装置１０はエリアＣＣＤセンサ等から成る撮像素子１２を備えている。撮像素子１２は図示しないレンズの焦点位置に配置されており、被写体で反射されてレンズに入射された光は撮像素子１２の受光面に結像される。撮像素子１２には駆動制御部１４が接続されており、駆動制御部１４はＣＰＵ３８に接続されている。撮影対象のシーンの撮影時、ＣＰＵ３８は駆動制御部１４に対して撮像素子１２による撮像におけるフレームレートを指示し、駆動制御部１４は撮像素子１２による撮像をＣＰＵ３８から指示されたフレームレートで行わせるためのタイミング信号を生成し、撮像素子１２へ出力する。撮像素子１２は駆動制御部１４から入力されたタイミング信号に同期したタイミングで駆動され、ＣＰＵ３８が指示したフレームレートに相当する周期で撮像信号（受光面上にマトリクス状に配列された多数個の光電変換セルの各々における受光量を表す信号）を繰り返し出力する。なお本実施形態では、撮像素子１２として、撮影対象のシーンをＨＤＴＶに相当する高解像度（例えば1280×720画素、或いは1920×1080画素等）かつ高フレームレート（例えば30フレーム／秒以上）で高精細に撮影可能なように、上記解像度に対応する多数個の光電変換セルが設けられた高速の撮像素子を用いている。
【００２７】
撮像素子１２の信号出力端には、Ａ／Ｄ変換部１６、画像入力制御部１８が順に接続されている。撮像素子１２から出力された画像信号は、Ａ／Ｄ変換部１６によって増幅されると共にデジタルの撮像データに変換されて画像入力制御部１８へ入力される。画像入力制御部１８はデータバス２０に接続されており、入力された撮像データをデータバス２０へ送出する。データバス２０には、画像データに対して動画像用の画像処理を行う動画像処理部２２、画像データ（撮像データ）に対して静止画像用の画像処理を行う静止画像処理部２４、画像データの圧縮及び伸長（解凍）を行う圧縮／伸長処理部２６、撮影記録装置１０の本体に設けられたＬＣＤ等から成る表示装置２８が接続され表示装置２８への静止画像及び動画像の表示を制御する表示制御部３０、情報記録／読出装置３２が接続され情報記録／読出装置３２による記録メディア（例えばリムーバブルメディア）３４に対する情報の記録及び読み出しを制御する記録／読出制御部３６及びＣＰＵ３８が各々接続されている。なお、表示装置２８として別体の任意の表示装置を接続することも可能とされている。
【００２８】
データバス２０に接続された画像入力制御部１８、静止画像処理部２４、圧縮／伸長処理部２６、表示制御部３０、記録／読出制御部３６及びＣＰＵ３８はデータ制御部４０に各々接続されており、これらの制御部・処理部の間のデータバス２０経由でのデータ転送はデータ制御部４０によって制御される。このデータ制御部４０にはメモリ４２が接続されている。また、図示は省略するが、画像入力制御部１８、静止画像処理部２４、圧縮／伸長処理部２６、表示制御部３０、記録／読出制御部３６はＣＰＵ３８にも接続されており、これらの制御部・処理部における処理はＣＰＵ３８によって制御される。ＣＰＵ３８には、撮影記録装置１０の本体に設けられた電源スイッチ、各種の設定スイッチ、図示しない撮影指示ボタンの操作に応じて接点が切り替わる撮影指示スイッチ（何れも図示省略）等を含んで構成された操作部４４が接続されている。
【００２９】
なお、操作部４４は本発明に係る指定手段に対応しており、撮像素子１２、Ａ／Ｄ変換部１６、画像入力制御部１８及び静止画像処理部２４のうち後述する各種の補正処理を行う部分は本発明に係る撮影手段に対応している。また、静止画像処理部２４のうち後述する静止画像用の画像処理を行う部分は記録／読出制御部３６及び情報記録／読出装置３２、表示制御部３０と共に本発明に係る静止画像出力手段に対応しており、動画像処理部２２は記録／読出制御部３６及び情報記録／読出装置３２、表示制御部３０と共に本発明に係る動画像出力手段に対応している。
【００３０】
また、図示は省略するが、撮影記録装置１０にはマイクロフォンとスピーカも設けられており、マイクロフォンはＡ／Ｄ変換器等を介してデータバス２０に接続され、スピーカは増幅器及びＤ／Ａ変換器を介してデータバス２０に接続されている。
【００３１】
次に本第１実施形態の作用として、ユーザによって撮影指示ボタンが操作されたことに伴い、撮影が指示されたことを表す信号が操作部４４から入力されることで、ＣＰＵ３８で実行される撮影処理について、図２のフローチャートを参照して説明する。ＣＰＵ３８ではステップ１００において、駆動制御部１４に対して撮像素子１２による撮像におけるフレームレートを指示し、撮像素子１２による撮影対象シーンの撮像を開始させる。これにより、駆動制御部１４がＣＰＵ３８から指示されたフレームレートに対応するタイミング信号を生成して撮像素子１２へ出力することで撮像素子１２が駆動され、撮像素子１２は、撮影対象シーンを撮影した結果に相当する撮像信号を、ＣＰＵ３８が指示したフレームレートに相当する周期で順次出力する。撮像素子１２から順次出力された撮像信号は、Ａ／Ｄ変換部１６によってデジタルの撮像データに変換されて画像入力制御部１８へ順次入力される。
【００３２】
またＣＰＵ３８は、次のステップ１１０において、画像入力制御部１８に対し、順次入力される撮像データを静止画像処理部２４へ転送するようデータ制御部４０経由で指示すると共に、静止画像処理部２４に対して各種の補正処理及び静止画像用の画像処理を実行するよう指示する。これにより、画像入力制御部１８に順次入力された撮像データはデータバス２０を介して静止画像処理部２４へ順次転送される。また静止画像処理部２４は、画像入力制御部１８から順次転送された撮像データに対し、まず各種の補正処理を各々行う。この補正処理には、撮像素子１２の暗出力を補正する暗補正、撮像素子１２の各光電変換セル毎の光電変換特性のばらつきを補正するゲイン補正、γ補正、ホワイトバランス補正、レンズの収差に起因する画像の歪を補正する収差補正、画素補間（撮像素子１２の受光面上で隣接する単一の画素に対応するＲ,Ｇ,Ｂの各光電変換セルから出力されたデータから、受光面上の同一の画素位置におけるＲ,Ｇ,Ｂの受光量（濃度）を表すデータを補間によって求める処理）、Ｙ／Ｃ変換処理等が含まれている。これらの補正処理により、入力された個々の撮像データから、撮像素子１２によって撮影されたシーンを輝度及び色差の画像データで表す静止画像データが得られる。
【００３３】
また静止画像処理部２４は、各種の補正処理を経た静止画像データに対し、当該静止画像データが表す静止画像の画質向上のために静止画像用の画像処理を行う。なお、静止画像用の画像処理としては、静止画像データ中のノイズ成分を低減させるノイズ低減処理、静止画像中の輪郭成分を抽出し抽出した輪郭成分を強調する輪郭強調処理、特定の空間周波数成分を減衰又は強調させるフィルタリング処理、静止画像の色バランスを補正する色補正処理等が挙げられる。また、撮影対象シーンの種類に応じて複数の撮影モードを設けておくと共に、複数の撮影モードの中から所望の撮影モードを選択するためのスイッチを操作部４４に設けておき、前記スイッチが操作されることで選択された撮影モードに応じて、上記の静止画像用の画像処理におけるパラメータを切替えるようにしてもよい。静止画像処理部２４に順次入力される撮像データに対して上記の補正処理及び静止画像用の画像処理が各々行われることで、順次入力される撮像データから、各々静止画像としての鑑賞に堪えうる高画質の静止画像データ群が得られることになる。
【００３４】
またＣＰＵ３８は、次のステップ１２０において、静止画像処理部２４に対して補正処理及び静止画像用の画像処理を経た静止画像データを圧縮／伸長処理部２６へ順次転送するようデータ制御部４０経由で指示し、圧縮／伸長処理部２６に対してフレーム間の相関を利用しない所定の圧縮方式での静止画像データの圧縮を指示すると共に、圧縮した静止画像データを記録／読出制御部３６へ転送するようデータ制御部４０経由で指示し、更に記録／読出制御部３６に対して記録メディア３４への情報記録を指示する。これにより、補正処理及び静止画像用の画像処理を経た静止画像データは静止画像処理部２４からデータバス２０を介して圧縮／伸長処理部２６へ順次転送され、圧縮／伸長処理部２６によってフレーム間の相関を利用しない所定の圧縮方式（例えばjpegや他の方式）で圧縮された後に、圧縮静止画像データとしてデータバス２０を介して記録／読出制御部３６へ順次転送される。また、記録／読出制御部３６は順次転送される圧縮静止画像データを情報記録／読出装置３２を介して記録メディア３４へ順次記録させる。
【００３５】
なお、圧縮静止画像データの生成・記録と並行して、マイクロフォンからＡ／Ｄ変換器等を介して出力された音声データもデータバス２０を介して記録／読出制御部３６へ順次転送され、情報記録／読出装置３２を介して記録メディア３４へ圧縮静止画像データと共に順次記録される。
【００３６】
ステップ１３０では、ユーザによって撮影指示ボタンが操作されることで、撮影終了が指示されたことを表す信号が操作部４４から入力されたか否か判定する。判定が否定された場合はステップ１００に戻り、ステップ１００の判定が肯定される迄ステップ１００〜ステップ１３０を繰り返す。これにより、ユーザによって撮影が指示されている間、撮像素子１２からＡ／Ｄ変換部１６を介して出力される撮像データが、補正処理、静止画像用の画像処理及び圧縮処理を経た圧縮静止画像データとして、記録メディア３４に順次記録されることになる。そして、ユーザによって撮影終了が指示されると、ステップ１３０の判定が肯定されて撮影処理を終了する。
【００３７】
次に、ユーザによって操作部４４が操作されることで、記録メディア３４に記録されている静止画像データ群を静止画像又は動画像として表示装置２８へ表示するよう指示された場合に実行される画像表示処理について、図３を参照して説明する。
【００３８】
ステップ１５０では、ユーザによって表示対象の画像及び表示形態（静止画像として表示させるか動画像として表示させるか）が指定されたか否か判定し、判定が肯定される迄ステップ１５０の判定を繰り返す。ユーザによる表示対象画像の指定は、例えば記録メディアに記録されている圧縮静止画像データに基づき撮影日時順に複数の圧縮静止画像データのサムネイル画像を生成して一覧表示させると共に、ユーザからの指示に応じてサムネイル画像として一覧表示させる圧縮静止画像データを切替えることで、全ての圧縮静止画像データのサムネイル画像を表示可能とし（これに代えて撮影日時が一定時間間隔の圧縮静止画像データのサムネイル画像のみを表示可能としてもよい）、静止画像又は動画像として表示させる圧縮静止画像データのサムネイル画像をユーザに選択させる（表示形態が動画像の場合は、例えば表示対象の動画像の少なくとも先頭に相当する圧縮静止画像データのサムネイル画像をユーザに選択させる等）と共に、表示形態が静止画像か動画像かをユーザに選択させることで行うことができる。また、撮影日時等の他の情報をユーザに指定させることで表示対象の画像を指定させるようにしてもよい。
【００３９】
ユーザによって表示対象の画像及び表示形態が指定されると、ステップ１５０の判定が肯定されてステップ１６０へ移行し、指定された表示形態が静止画像か動画像かを判定する。指定された表示形態が静止画像の場合、ＣＰＵ３８は記録／読出制御部３６に対し、表示対象として指定された圧縮静止画像データを記録メディア３４から読み出すよう指示すると共に、記録メディア３４から読み出された圧縮静止画像データを圧縮／伸長処理部２６へ転送するようデータ制御部４０経由で指示する（ステップ１７０）。またＣＰＵ３８は圧縮／伸長処理部２６に対し、転送された圧縮静止画像データを伸長（解凍）するよう指示する。これにより、表示対象として指定された圧縮静止画像データが、情報記録／読出制御部３６の制御下で情報記録／読出装置３２によって記録メディア３４から読み出され、次に情報記録／読出制御部３６からデータバス２０を介して圧縮／伸長処理部２６へ転送されて伸長処理が行われることで元の静止画像データが再現されることになる。
【００４０】
また、次のステップ１８０において、ＣＰＵ３８は圧縮／伸長処理部２６に対し、伸長処理によって再現された静止画像データを表示制御部３０へ転送するようデータ制御部４０経由で指示すると共に、表示制御部３０に対し、転送された静止画像データを表示装置２８に静止画像として表示するよう指示する。これにより、伸長処理によって再現された静止画像データが圧縮／伸長処理部２６からデータバス２０を介して表示制御部３０へ転送され、静止画像として表示装置２８に表示されることになる。本実施形態では、静止画像用の画像処理を行った画像データ（圧縮静止画像データ）を記録メディア３４に記録しているので、上記のように圧縮静止画像データを単に伸長して表示装置２８に表示させるのみで、表示装置２８に高画質の静止画像を表示させることができる。表示装置２８に静止画像を表示させた場合、ユーザから表示終了が指示されると画像表示処理を終了する。
【００４１】
一方、指定された表示形態が動画像の場合にはステップ１６０からステップ１９０へ移行し、記録／読出制御部３６に対し、表示対象として指定された圧縮静止画像データ群（例えば指定された圧縮静止画像データを先頭として撮影日時順に所定数の静止画像データ群）を記録メディア３４から読み出すよう指示すると共に、記録メディア３４から読み出された圧縮静止画像データ群を圧縮／伸長処理部２６へ順次転送するようデータ制御部４０経由で指示する。またＣＰＵ３８は圧縮／伸長処理部２６に対し、順次転送される圧縮静止画像データを伸長（解凍）するよう指示する。これにより、表示対象として指定された圧縮静止画像データ群が、情報記録／読出制御部３６の制御下で情報記録／読出装置３２によって記録メディア３４から順次読み出され、次に情報記録／読出制御部３６からデータバス２０を介して圧縮／伸長処理部２６へ順次転送されて伸長処理が行われることで元の静止画像データ群が再現されることになる。
【００４２】
また、次のステップ２００において、ＣＰＵ３８は圧縮／伸長処理部２６に対し、伸長処理によって再現された静止画像データ群を動画像処理部２２へ順次転送するようデータ制御部４０経由で指示すると共に、動画像処理部２２に対し、順次転送される静止画像データ群に対して動画像用の画像処理を実行するよう指示する。これにより、伸長処理によって再現された静止画像データが圧縮／伸長処理部２６からデータバス２０を介して動画像処理部２２へ順次転送される。また動画像処理部２２は、圧縮／伸長処理部２６から順次転送される静止画像データ群に対し、動画像用の画像処理を行う。動画像用の画像処理としては、静止画像データの解像度を表示装置２８の表示画面の画素数に対応する解像度へ変換する解像度変換処理、見た目の違和感軽減のためのスムージング処理、空間周波数の高周波成分を除去するフィルタリング処理、色バランスを調整する色補正処理が挙げられる。動画像処理部２２に順次入力される静止画像データ群に対して上記の動画像用の画像処理が各々行われることで、見た目に違和感のない動画像として表示できる動画像表示用の静止画像データ群（動画像データ）が得られる。
【００４３】
そしてステップ２１０において、ＣＰＵ３８は動画像処理部２２に対し、動画像用の画像処理を経た静止画像データ群（動画像データ）を表示制御部３０へ順次転送するようデータ制御部４０経由で指示すると共に、表示制御部３０に対し、順次転送される動画像データを表示装置２８に動画像として表示するよう指示する。これにより、動画像用の処理を経た動画像データが動画像処理部２２からデータバス２０を介して表示制御部３０へ順次転送され、動画像として表示装置２８に表示されることになる。このように、本実施形態では、記録メディア３４から読出した静止画像データ群に対して動画像用の画像処理を行うので、表示装置２８に静止画像を表示させる際の画質を損なうことなく、表示装置２８に十分な画質の動画像を表示させることができる。なお、動画像の表示時には対応する音声データも記録メディア３４から読み出され、データバス２０に接続されたＤ／Ａ変換器でアナログの音声信号へ変換され、増幅器で増幅された後にスピーカへ供給されることで、スピーカから音声として出力される。
【００４４】
次のステップ２２０では、動画像の表示終了が指示されたか、或いは動画像として表示すべき静止画像データ（圧縮静止画像データ）が無くなったか否か判定する（なお、表示対象の動画像の末尾もユーザによって指定された場合には、表示している動画像が指定された末尾に到達したか否かも判定する）。この判定が否定された場合はステップ１９０に戻り、ステップ２２０の判定が肯定される迄、ステップ１９０〜ステップ２２０を繰り返す。これにより、動画像の表示終了が指示されるか、動画像として表示すべき静止画像データ（圧縮静止画像データ）が無くなるか、或いは表示している動画像が指定された末尾に到達する迄の間は、記録メディア３４から圧縮静止画像データを撮影日時順に読み出し、読み出した圧縮静止画像データに対して伸長処理・動画像用の画像処理を行い、表示装置２８に動画像として表示する処理が継続される。そして、ステップ２２０の判定が肯定されると処理を終了する。
【００４５】
〔第２実施形態〕
次に本発明の第２実施形態について説明する。なお、第１実施形態と同一の部分には同一の符号を付して説明を省略し、第１実施形態と異なる部分についてのみ説明する。
【００４６】
本第２実施形態に係る撮影記録装置４６（図４参照）では、撮像素子１２による撮影における解像度（撮像素子から出力される撮像データの画素数）を切替え可能とされており、ＣＰＵ３８は、例えば操作部４４を介してユーザから指示された画素数に応じて撮像素子１２による撮影における解像度が切り替わるように駆動制御部１４等を制御する。また、撮像素子１２による撮影における解像度が比較的高い場合（例えばＨＤＴＶに相当する解像度の場合）、ＣＰＵ３８は、撮像データのデータ量が増大することに伴って静止画像データのデータ量（画素数）が増大し、静止画像処理部２４における静止画像用の画像処理等が追いつかなくなる可能性を考慮し、撮像素子１２による撮影におけるフレームレートが低く(例えば15フレーム／秒）なるように駆動制御部１４等を制御する。
【００４７】
図４に示すように、第２実施形態に係る撮影記録装置４６にはフレームレートを検出するフレームレート検出部４８が設けられており、フレームレート検出部４８はＣＰＵ３８及びデータ制御部４０に接続されている。また、データバス２０にはフレーム補間処理を行うフレーム補間処理部５０が接続されており、このフレーム補間制御部５０にはフレーム補間処理に用いるフレームメモリ５２が接続されている。また、フレーム補間制御部５０はデータ制御部４０に接続されており、フレームレート検出部４８からデータ制御部４０経由で入力される指示によりフレーム補間処理を行う。
【００４８】
次に本第２実施形態の作用として、まず図５を参照し、本第２実施形態に係る撮影処理を説明する。本第２実施形態に係る撮影処理では、撮影終了が指示されることでステップ１３０の判定が肯定されると、次のステップ１３２において、撮影時のフレームレートを表すフレームレート情報を、記録メディア３４に既に記録した静止画像データ群と対応付けて記録メディア３４へ静止画像データ群の属性情報として記録するよう記録／読出制御部３６を制御する。記録メディア３４に記録するデータのフォーマットの一例を図７に示す。
【００４９】
図７において、画像データ記録領域には静止画像データ群（圧縮静止画像データ群）の個々の静止画像データ（圧縮静止画像データ）が順次記録される。また、属性情報記録領域には、１回の撮影操作で途切れることなく撮影された静止画像データ群全体（図７では静止画像データ群Ａと表記）の属性情報を記録するための第１の領域と、個々の静止画像データの属性情報を記録するための第２の領域が各々設けられている。上述したステップ１３２の処理により、フレームレート情報は１回の撮影操作で撮影された静止画像データ群全体の属性情報の１つとして属性情報記録領域の第１の領域に記録される。また、属性情報記録領域の第２の領域には個々の静止画像データの撮影日時等の情報が各々記録される。
【００５０】
続いて図６を参照し、本第２実施形態に係る画像表示処理を説明する。本第２実施形態に係る画像表示処理では、ユーザによって表示対象の画像及び表示形態が指定され、指定された表示形態が動画像の場合に、ステップ１６０からステップ１８２へ移行し、記録／読出制御部３６に対し、表示対象として指定された圧縮静止画像データ群に加えてフレームレート情報も記録メディア３４から読み出すよう指示する。これにより、表示対象として指定された圧縮静止画像データ群が、情報記録／読出制御部３６の制御下で情報記録／読出装置３２によって記録メディア３４の画像データ記録領域から順次読み出されると共に、情報記録／読出制御部３６の制御下で情報記録／読出装置３２によって記録メディア３４の属性情報記録領域の第１の領域からフレームレート情報が読み出される。
【００５１】
記録メディア３４から読み出された圧縮静止画像データ群は、第１実施形態と同様に圧縮／伸長処理部２６へ順次転送されて伸長されることで元の静止画像データ群が再現され、その後、再現された静止画像データが圧縮／伸長処理部２６からデータバス２０を介して動画像処理部２２へ順次転送され、動画像処理部２２によって動画像用の画像処理が行われる（ステップ２００）。一方、記録メディア３４から読み出されたフレームレート情報はＣＰＵ３８からフレームレート検出部４８へ出力され、フレームレート検出部４８では、入力されたフレームレート情報が表すフレームレートが、予め設定されたフレームレートの閾値よりも低いか否かを判断することで、フレーム補間処理が必要か否か判定する（ステップ２０１）。
【００５２】
この判定が否定された場合は、フレーム補間処理が行われることなく、動画像用の画像処理を経た静止画像データ群（動画像データ）が動画像処理部２２から表示制御部３０へ順次転送され、動画像データが動画像として表示装置２８に表示される（ステップ２１０）が、フレーム補間処理が必要と判定された場合には、この判定結果がフレームレート検出部４８からデータ制御部４０を経由してフレーム補間処理部５０に入力されると共にＣＰＵ３８にも入力される。
【００５３】
これにより、ＣＰＵ３８は動画像用の画像処理を経た静止画像データ群が動画像処理部２２からデータバス２０を介して表示制御部３０へ順次転送されるようにデータ制御部４０経由で指示し、フレーム補間処理部５０は動画像処理部２２から順次転送される静止画像データ群に基づき、当該静止画像データ群を所定のフレームレートの動画像として出力した場合の不足フレームに相当する静止画像データを、不足フレームに対して撮影日時順で前後のフレームの静止画像データからフレームメモリ５２上で補間により生成するフレーム補間処理を行う（ステップ２０２）。そして、転送された静止画像データ及びフレーム補間処理によって生成した静止画像データを所定の順序（表示装置２８への表示順）で表示制御部３０へ動画像データとして順次転送する。これにより、撮像素子１２による撮影によって得られた静止画像データ群が、撮像素子１２による撮影におけるフレームレートよりも高いフレームレートの動画像として表示装置２８に表示されることになる（ステップ２１０）。
【００５４】
このように、本第２実施形態では表示装置２８に動画像を表示する際に、撮像素子１２による撮影におけるフレームレートに基づき必要に応じてフレーム補間処理を行うので、撮像素子１２による撮影におけるフレームレートに比して表示装置２８に表示する動画像の画質を向上させることができる。また、表示装置２８に高解像度かつ高フレームレートで動画像を表示させる必要がある場合にも、撮影及び静止画像データの生成・記録メディア３４への記録に係る部分（撮像素子１２やその周辺回路、静止画像処理部２４等）を、それに合わせて高解像度かつ高フレームレートで処理可能に構成する必要がなくなり、撮影記録装置４６の低コスト化、汎用性の向上を実現することができる。
【００５５】
なお、上記ではフレームレート情報が表す撮影時のフレームレートが閾値よりも低い場合にフレーム補間処理を行う態様を説明したが、これに限定されるものではなく、動画像用の画像処理を経た静止画像データ群を撮影時と同一のフレームレートで表示装置２８に表示させると共に、見た目の違和感が軽減されるようにスムージング処理をより強くかけたり、フィルタリング処理による空間周波数の高周波成分の除去量を増大させて鮮鋭度をより低下させる等、動画像用の画像処理のパラメータを切替えるようにしてもよい。フレーム補間処理により不足フレームの静止画像データを新たに生成するためにはフレームメモリ５２等の大容量のメモリが必要となるが、フレーム補間処理に代えて上記のスムージング処理やフィルタリング処理を行う場合はフレームメモリ等は不要であり、撮影記録装置のコストを削減することができる。また、撮影時のフレームレートが表示装置２８に動画像を表示させる際のフレームレートよりも高い場合には、余剰フレームの静止画像データを削除する（間引く）処理を行うようにしてもよいことは言うまでもない。
【００５６】
〔第３実施形態〕
次に本発明の第３実施形態について説明する。なお、第１実施形態と同一の部分には同一の符号を付して説明を省略し、第１実施形態と異なる部分についてのみ説明する。
【００５７】
本第３実施形態に係る撮影記録装置５４（図８参照）では、表示装置２８として撮影記録装置５４とは別体の任意の表示装置（例えば動画像や静止画像を表示させるための表示フォーマットが互いに異なる表示装置）を接続可能とされ、ＣＰＵ３８には、撮影記録装置５４に接続されている表示装置２８の表示フォーマット（例えばVGA,HDTV-D1〜D5）を設定する表示フォーマット設定部５６が接続されている。表示フォーマット設定部５６は、ユーザが操作することで表示フォーマットを設定する構成であってもよいし、表示装置２８からの信号を検知したり表示装置２８と通信を行うことで表示フォーマットを自動的に検知する構成を採用することも可能である。
【００５８】
次に図９を参照し、本第３実施形態に係る画像表示処理について説明する。本第３実施形態に係る画像表示処理では、ユーザによって表示対象の画像及び表示形態が指定され、指定された表示形態が静止画像の場合、表示対象として指定された圧縮静止画像データを記録メディア３４から読み出させ、情報記録／読出制御部３６から圧縮／伸長処理部２６へ転送させて伸長処理を行わせ（ステップ１７０）た後に、ステップ１７２において、ＣＰＵ３８は圧縮／伸長処理部２６に対し、伸長処理によって再現された静止画像データを静止画像処理部２４へ転送するようデータ制御部４０経由で指示すると共に、静止画像処理部２４に対して表示フォーマット設定部５６によって設定された表示フォーマットを通知し、転送された静止画像データを通知した表示フォーマットに対応する静止画像データへ変換する処理を行うよう指示する。
【００５９】
これにより、伸長処理によって再現された静止画像データが圧縮／伸長処理部２６から静止画像処理部２４へ転送され、静止画像処理部２４は、転送された静止画像データに対して通知された表示フォーマットに応じた静止画像用の画像処理を行う。この表示フォーマットに応じた静止画像用の画像処理としては、例えば転送された静止画像データの解像度（画素数）が通知された表示フォーマットに対応する解像度（画素数）に一致するようにパラメータを切替えて行われる解像度変換処理等が挙げられる。これにより、表示装置２８の表示フォーマットに合致した静止画像データが得られる。そして次のステップ１８０において、静止画像処理部２４に対し、静止画像用の画像処理を経た静止画像データを表示制御部３０へ転送するようデータ制御部４０経由で指示すると共に、表示制御部３０に対し、転送された静止画像データを表示装置２８に静止画像として表示するよう指示する。これにより、表示フォーマットに応じた静止画像用の画像処理を経た静止画像データがデータバス２０を介して表示制御部３０へ転送され、静止画像として表示装置２８に表示される。
【００６０】
一方、ユーザによって表示対象の画像及び表示形態が指定され、指定された表示形態が動画像の場合、表示対象として指定された圧縮静止画像データ群を記録メディア３４から読み出させ、圧縮／伸長処理部２６へ順次転送させて伸長処理を行わせ（ステップ１９０）た後に、次のステップ２０３において、伸長処理によって再現された静止画像データ群を圧縮／伸長処理部２６から動画像処理部２２へ順次転送させると共に、動画像処理部２２に対して表示フォーマット設定部５６によって設定された表示フォーマットを通知し、順次転送される静止画像データ群に対して通知した表示フォーマットに応じた動画像用の画像処理を実行するよう指示する。
【００６１】
これにより、伸長処理によって再現された静止画像データが圧縮／伸長処理部２６から動画像処理部２２へ順次転送される。また動画像処理部２２は、圧縮／伸長処理部２６から順次転送される静止画像データ群に対して行う動画像用の画像処理のうちの一部の画像処理のパラメータを通知された表示フォーマットに応じて切替えた後に、静止画像データ群に対して動画像用の画像処理を順次行う。表示フォーマットに応じた動画像用の画像処理としては、例えば転送された静止画像データの解像度（画素数）が通知された表示フォーマットに対応する解像度（画素数）に一致するようにパラメータを切替えて行われる解像度変換処理、表示フォーマットに対応する解像度に応じてパラメータを切替えて行われるフィルタリング処理等が挙げられる。表示装置２８の表示フォーマットに合致した静止画像データ群が得られ、この静止画像データ群を動画像データとして表示制御部３０へ転送して動画像の表示を指示することで、表示装置２８の表示フォーマットに合致した動画像を表示装置２８に表示させることができる。
【００６２】
このように、本第３実施形態では表示装置２８に静止画像や動画像を表示する際に、表示装置２８の表示フォーマットに応じた静止画像用又は動画像用の画像処理が行われることで、表示装置２８の表示フォーマットに拘らず、表示対象として指示された静止画像又は動画像を表示装置２８に表示させることができる。従って、撮影記録装置４６の汎用性を向上させることができる。
【００６３】
〔第４実施形態〕
次に本発明の第４実施形態について説明する。なお、第１実施形態と同一の部分には同一の符号を付して説明を省略し、第１実施形態と異なる部分についてのみ説明する。本第４実施形態に係る撮影記録装置６０（図１０参照）では、記録メディア３４から読み出した静止画像データに対して画像解析処理を行う画像解析処理部６２がデータバス２０に接続されており、この画像解析処理部６２には画像解析処理に用いるフレームメモリ６４が接続されており、ＣＰＵ３８にも接続されている。
【００６４】
次に図１１を参照し、本第４実施形態に係る画像表示処理について説明する。本第４実施形態に係る画像表示処理では、ユーザによって表示対象の画像及び表示形態が指定され、指定された表示形態が動画像の場合、表示対象として指定された圧縮静止画像データ群を記録メディア３４から読み出させ、圧縮／伸長処理部２６へ順次転送させて伸長処理を行わせ（ステップ１９０）た後に、次のステップ１９１において、伸長処理によって再現された静止画像データ群を圧縮／伸長処理部２６から画像解析処理部６２へ順次転送させると共に、画像解析処理部６２に対して順次転送される静止画像データに対して画像解析処理を行うよう指示する。これにより、伸長処理によって再現された静止画像データが圧縮／伸長処理部２６から画像解析処理部６２へ順次転送され、画像解析処理部６２は、圧縮／伸長処理部２６から順次転送される静止画像データ群に対しフレームメモリ６４を用いて画像解析処理を行う。なお、画像解析処理部６２における画像解析処理としては、例えば順次転送される静止画像データ群の個々の静止画像データにおける被写体の動きの方向を検出する処理が挙げられるが、他の特徴量を検出する処理であってもよい。
【００６５】
また、次のステップ１９３において、ＣＰＵ３８は画像解析処理部６２に対し、画像解析処理を経た静止画像データ群を画像解析処理部６２から動画像処理部２２へ順次転送させると共に、動画像処理部２２に対して画像解析処理部６２における画像解析処理の結果を通知し、順次転送される静止画像データ群に対して通知した画像解析処理の結果に応じた動画像用の画像処理を実行するよう指示する。
【００６６】
これにより、画像解析処理を経た静止画像データが画像解析処理部６２から動画像処理部２２へ順次転送される。また動画像処理部２２は、画像解析処理部６２から順次転送される静止画像データ群に対して行う動画像用の画像処理のうちの一部の画像処理のパラメータを通知された画像解析処理の結果に応じて切替えた後に、静止画像データ群に対して動画像用の画像処理を順次行う。画像解析処理の結果に応じた動画像用の画像処理としては、例えば画像解析処理部６２による画像解析処理によって検出された被写体の動きの方向に応じて、フィルタの特性を切替えて行われるフィルタリング処理等が挙げられる。これにより、表示対象として指定された静止画像データ群の画像内容等に応じて、表示装置２８に表示する動画像の画質等を最適化することができる。
【００６７】
〔第５実施形態〕
次に本発明の第５実施形態について説明する。なお、第４実施形態及び第２実施形態と同一の部分には同一の符号を付して説明を省略し、第４実施形態と異なる部分についてのみ説明する。本第５実施形態に係る撮影記録装置６６（図１２参照）では、画像解析処理部６２にファイル情報制御部６８が接続されており、ファイル情報制御部６８はＣＰＵ３８に接続されている。ファイル情報制御部６８は、画像解析処理部６２における画像解析処理の結果が画像解析処理部６２から入力され、入力された画像解析処理の結果を、記録メディア３４の属性情報記録領域の第２の領域（図７参照）に記録する属性情報へ加工編集してＣＰＵ３８へ出力する。
【００６８】
次に図１３を参照し、本第５実施形態に係る撮影処理を説明する。本第５実施形態に係る撮影処理では、撮像素子１２を駆動して撮影対象シーンの撮像を開始させ（ステップ１００）、画像入力制御部１８に順次入力される撮像データを静止画像処理部２４へ転送させると共に、静止画像処理部２４に対して補正処理及び静止画像用の画像処理を実行させ（ステップ１１０）た後に、次のステップ１１２において、補正処理及び静止画像用の画像処理を経て得られた静止画像データ群を静止画像処理部２４から画像解析処理部６２へ順次転送させると共に、画像解析処理部６２に対して順次転送される静止画像データに対して画像解析処理を行うよう指示する。これにより、画像解析処理部６２は、静止画像処理部２４から順次転送される静止画像データ群に対しフレームメモリ６４を用いて画像解析処理を行う。また、画像解析処理部６２による画像解析処理の結果はファイル情報制御部６８に順次入力され、ファイル情報制御部６８は、順次入力される画像解析処理の結果を記録メディア３４の属性情報記録領域の第２の領域に記録する属性情報へ加工編集し、ＣＰＵ３８へ順次出力する。
【００６９】
そして次のステップ１２２では、画像解析処理部６２に対して画像解析処理を経た静止画像データを圧縮／伸長処理部２６へ順次転送するようデータ制御部４０経由で指示し、圧縮／伸長処理部２６に対して所定の圧縮方式での静止画像データの圧縮を指示すると共に、圧縮静止画像データを記録／読出制御部３６へ転送するよう指示する。また、ファイル情報制御部６８から入力された属性情報（画像解析処理の結果を表す情報）を記録／読出制御部３６へ転送し、記録／読出制御部３６に対して記録メディア３４への圧縮静止画像データ及び転送した属性情報の記録を指示する。これにより、画像解析処理を経た静止画像データは、画像解析処理部６２から圧縮／伸長処理部２６へ順次転送されて所定の圧縮方式で圧縮された後に、圧縮静止画像データとして記録／読出制御部３６へ順次転送され、この圧縮静止画像データは、画像解析処理の結果を表す属性情報と共に情報記録／読出装置３２を介して記録メディア３４へ順次記録される。
【００７０】
次に図１４を参照し、本第５実施形態に係る画像表示処理を説明する。本第５実施形態に係る画像表示処理では、ユーザによって表示対象の画像及び表示形態が指定され、指定された表示形態が動画像の場合、表示対象として指定された圧縮静止画像データ群を記録メディア３４から読み出させ、圧縮／伸長処理部２６へ順次転送させて伸長処理を行わせ（ステップ１９０）た後に、次のステップ１９２において、記録メディア３４から読み出させた圧縮静止画像データ群に対応する属性情報を記録メディア３４の属性情報記録領域の第２の領域から読み出させることで、先に説明した撮影処理で実行された画像解析処理の結果を取得する。そして、次のステップ１９３において、伸長処理によって再現された静止画像データ群を圧縮／伸長処理部２６から動画像処理部２２へ順次転送させると共に、ステップ１９２で取得した画像解析処理の結果を動画像処理部２２へ通知し、順次転送される静止画像データ群に対して通知した画像解析処理の結果に応じた動画像用の画像処理を実行するよう指示する。
【００７１】
これにより、伸長処理によって再現された静止画像データが圧縮／伸長処理部２６から動画像処理部２２へ順次転送され、動画像処理部２２は、圧縮／伸長処理部２６から順次転送される静止画像データ群に対して行う動画像用の画像処理のうちの一部の画像処理のパラメータを通知された画像解析処理の結果に応じて切替えた後に、静止画像データ群に対して動画像用の画像処理を順次行う。これにより、第４実施形態と同様に、表示対象として指定された静止画像データ群の画像内容等に応じて、表示装置２８に表示する動画像の画質等を最適化することができる。
【００７２】
〔第６実施形態〕
次に本発明の第６実施形態について説明する。なお、第５実施形態と同一の部分には同一の符号を付して説明を省略し、第５実施形態と異なる部分についてのみ説明する。本第６実施形態に係る撮影記録装置７０（図１５参照）では、第５実施形態で説明した撮影記録装置６６（図１２）に対して画像解析処理部６２及びフレームメモリ６４が省略されており、これに代えて撮影時の手振れの量及び方向を検出可能なジャイロセンサ７２が設けられている。ジャイロセンサ７２はファイル情報制御部６８に接続されており、ファイル情報制御部６８はジャイロセンサ７２から入力される撮影時の手振れの量及び方向の検出結果を、記録メディア３４の属性情報記録領域の第２の領域（図７参照）に記録する属性情報へ加工編集してＣＰＵ３８へ出力する。
【００７３】
次に図１６を参照し、本第６実施形態に係る撮影処理を説明する。本第６実施形態に係る撮影処理では、撮像素子１２を駆動して撮影対象シーンの撮像を開始させ（ステップ１００）、画像入力制御部１８に順次入力される撮像データを静止画像処理部２４へ転送させると共に、静止画像処理部２４に対して補正処理及び静止画像用の画像処理を実行させる（ステップ１１０）。この間、ジャイロセンサ７２は撮影時の手振れの量及び方向を検出する処理を繰り返し、ファイル情報制御部６８はジャイロセンサ７２から入力された撮影時の手振れの量及び方向の検出結果を属性情報へ加工編集する処理を繰り返しており、次のステップ１１４では、ジャイロセンサ７２による撮影時の手振れの量及び方向の検出結果を表す属性情報をファイル情報制御部６８から取得する。
【００７４】
そして次のステップ１２４では、静止画像処理部２４に対して補正処理及び静止画像用の画像処理を経た静止画像データを圧縮／伸長処理部２６へ順次転送するよう指示し、圧縮／伸長処理部２６に対して所定の圧縮方式での静止画像データの圧縮を指示すると共に、圧縮静止画像データを記録／読出制御部３６へ転送するよう指示する。また、ファイル情報制御部６８から入力された属性情報（ジャイロセンサ７２による撮影時の手振れの量及び方向の検出結果を表す情報）を記録／読出制御部３６へ転送し、記録／読出制御部３６に対して記録メディア３４への圧縮静止画像データ及び転送した属性情報の記録を指示する。これにより、静止画像データは静止画像処理部２４から圧縮／伸長処理部２６へ順次転送されて所定の圧縮方式で圧縮された後に、圧縮静止画像データとして記録／読出制御部３６へ順次転送され、この圧縮静止画像データは、ジャイロセンサ７２による撮影時の手振れの量及び方向の検出結果を表す属性情報と共に情報記録／読出装置３２を介して記録メディア３４へ順次記録される。
【００７５】
次に図１７を参照し、本第６実施形態に係る画像表示処理を説明する。本第６実施形態に係る画像表示処理では、ユーザによって表示対象の画像及び表示形態が指定され、指定された表示形態が動画像の場合、表示対象として指定された圧縮静止画像データ群を記録メディア３４から読み出させ、圧縮／伸長処理部２６へ順次転送させて伸長処理を行わせ（ステップ１９０）た後に、次のステップ１９４において、記録メディア３４から読み出させた圧縮静止画像データ群に対応する属性情報を記録メディア３４の属性情報記録領域の第２の領域から読み出させることで、先に説明した撮影処理でのジャイロセンサ７２による撮影時の手振れの量及び方向の検出結果を取得する。そして、次のステップ１９５において、伸長処理によって再現された静止画像データ群を圧縮／伸長処理部２６から動画像処理部２２へ順次転送させると共に、ステップ１９４で取得した撮影時の手振れの量及び方向の検出結果を動画像処理部２２へ通知し、順次転送される静止画像データ群に対して通知した画像解析処理の結果に応じた動画像用の画像処理を実行するよう指示する。
【００７６】
これにより、伸長処理によって再現された静止画像データが圧縮／伸長処理部２６から動画像処理部２２へ順次転送され、動画像処理部２２は、圧縮／伸長処理部２６から順次転送される静止画像データ群に対して行う動画像用の画像処理のうちの一部の画像処理のパラメータを通知された画像解析処理の結果に応じて切替えた後に、静止画像データ群に対して動画像用の画像処理を順次行う。なお、撮影時の手振れの量及び方向の検出結果に応じた動画像用の画像処理としては、例えば撮影時の手振れの量及び方向の検出結果に応じて、元の静止画像データからの切り出し位置を変更することで行われる手振れ補正処理等が挙げられる。これにより、表示対象として指定された静止画像データ群が撮影された際の撮影条件（この場合は撮影時の手振れの量及び方向）に応じて、表示装置２８に表示する動画像の画質等を最適化することができる。
【００７７】
なお、上記では記録メディア３４に記録する静止画像データに対して静止画像用の画像処理を行う例を説明したが、これに限定されるものではなく、記録メディア３４に記録する静止画像データに対しては静止画像用の画像処理（及び動画像用の画像処理）を行わずに、表示装置２８への静止画像の表示が指示された際に、表示対象の静止画像データに対して静止画像用の画像処理を行うようにしてもよい。
【００７８】
また、上記ではフレーム間の相関を利用しない圧縮方式で圧縮した静止画像データを記録媒体（記録メディア３４）に記録する例を説明したが、これに限定されるものではなく、静止画像データを圧縮せずにそのまま記録媒体に記録するようにしてもよいし、圧縮して記録するか圧縮せずに記録するかをユーザが選択可能としてもよい。
【００７９】
また、上記では静止画像データ又は動画像データの出力の一例として、表示装置２８への静止画像又は動画像の表示を説明したが、これに限定されるものではなく、例えばパーソナル・コンピュータ（ＰＣ）等の情報処理装置への静止画像データ又は動画像データの送信等を行うことも可能である。この場合も、出力先の情報処理装置で取扱可能なデータフォーマットに応じて、静止画像用の画像処理又は動画像用の画像処理の処理内容を切替えることが望ましい。
【００８０】
また、上記では本発明に係る静止画像出力手段及び動画像出力手段に相当する機能が本発明に係る画像撮影記録に搭載されている態様を説明したが、上記機能は記録媒体（記録メディア３４）に記録された静止画像データを読み出す機能を備えた画像撮影記録装置以外の他の装置（例えばＰＣ等）にも搭載可能であることは言うまでもない。
【図面の簡単な説明】
【００８１】
【図１】第１実施形態に係る画像撮影記録装置の概略構成を示すブロック図である。
【図２】第１実施形態に係る撮影処理の内容を示すフローチャートである。
【図３】第１実施形態に係る画像表示処理の内容を示すフローチャートである。
【図４】第２実施形態に係る画像撮影記録装置の概略構成を示すブロック図である。
【図５】第２実施形態に係る撮影処理の内容を示すフローチャートである。
【図６】第２実施形態に係る画像表示処理の内容を示すフローチャートである。
【図７】記録メディア内のデータフォーマットの一例を示すイメージ図である。
【図８】第３実施形態に係る画像撮影記録装置の概略構成を示すブロック図である。
【図９】第３実施形態に係る画像表示処理の内容を示すフローチャートである。
【図１０】第４実施形態に係る画像撮影記録装置の概略構成を示すブロック図である。
【図１１】第４実施形態に係る画像表示処理の内容を示すフローチャートである。
【図１２】第５実施形態に係る画像撮影記録装置の概略構成を示すブロック図である。
【図１３】第５実施形態に係る撮影処理の内容を示すフローチャートである。
【図１４】第５実施形態に係る画像表示処理の内容を示すフローチャートである。
【図１５】第６実施形態に係る画像撮影記録装置の概略構成を示すブロック図である。
【図１６】第６実施形態に係る撮影処理の内容を示すフローチャートである。
【図１７】第６実施形態に係る画像表示処理の内容を示すフローチャートである。
【符号の説明】
【００８２】
１０，４６，５４，６０，６６，７０  撮影記録装置
１２  撮像素子
２２  動画像処理部
２４  静止画像処理部
２６  圧縮／伸長処理部
２８  表示装置
３４  記録メディア
４４  操作部
４８  フレームレート検出部
５０  フレーム補間処理部
５６  表示フォーマット設定部
６２  画像解析処理部
６８  ファイル情報制御部
７２  ジャイロセンサ
【図１】
2006157143.tif 000003
【図２】
2006157143.tif 000004
【図３】
2006157143.tif 000005
【図４】
2006157143.tif 000006
【図５】
2006157143.tif 000007
【図６】
2006157143.tif 000008
【図７】
2006157143.tif 000009
【図８】
2006157143.tif 000010
【図９】
2006157143.tif 000011
【図１０】
2006157143.tif 000012
【図１１】
2006157143.tif 000013
【図１２】
2006157143.tif 000014
【図１３】
2006157143.tif 000015
【図１４】
2006157143.tif 000016
【図１５】
2006157143.tif 000017
【図１６】
2006157143.tif 000018
【図１７】
2006157143.tif 000019