(57)【要約】【課題】動画像データおよび静止画像データを、それぞれの撮像画角を維持した状態で同時に表示させる。【解決手段】水平手振れ補正回路２４１および水平解像度変換回路２４２において所定の処理を施された画像データは、メモリコントローラ２４３によってラインメモリ５１に書き込まれる。次に、メモリコントローラ２４３によって１ライン分の画像データがラインメモリ５１より読み出され、動画像表示データ生成回路２４４および静止画像表示データ生成回路２４５において表示用の動画像表示データおよび静止画像表示データが生成される。そして、動画像表示データおよび静止画像表示データはフィールドメモリ５２に書き込まれて、両者を重ね合わせた一体画像データが表示部６０に表示される。【選択図】図３
2007104352.tif 000002
【特許請求の範囲】
【請求項１】
動画像を撮像するための動画像撮像モードと静止画像を撮像するための静止画像撮像モードとを備えた撮像装置であって、
被写体を撮像して画像データを生成する撮像手段と、
前記撮像手段において生成された画像データに基づいた表示を行う表示手段と、
前記画像データを保持する第１のメモリと、
前記動画像撮像モードにおける撮像画角を維持したまま前記第１のメモリに保持された画像データの解像度を変換することによって前記表示手段に表示させるための動画像表示データを生成する動画像表示データ生成手段と、
前記静止画像撮像モードにおける撮像画角を維持したまま前記第１のメモリに保持された画像データの解像度を変換することによって前記表示手段に表示させるための静止画像表示データを生成する静止画像表示データ生成手段と、
前記動画像表示データと前記静止画像表示データとを重ね合わせた一体画像データを保持する第２のメモリと
を具備し、
前記表示手段は前記一体画像データを表示することを特徴とする撮像装置。
【請求項２】
前記撮像手段において生成された画像データの水平方向の解像度を変換する水平解像度変換手段をさらに具備し、
前記第１のメモリは、前記水平解像度変換手段によって水平方向の解像度が変換された画像データを保持することを特徴とする請求項１記載の撮像装置。
【請求項３】
前記表示手段は、前記一体画像データとして前記動画像表示データおよび前記静止画像表示データの何れか一方を当該表示手段における表示領域全体に表示させ、他方を前記表示領域のうちの一部に表示させることを特徴とする請求項１記載の撮像装置。
【請求項４】
前記表示手段は、前記一体画像データとして前記動画像表示データおよび前記静止画像表示データの何れか一方を当該表示手段における表示領域全体に表示させ、他方を前記表示領域の中心より上側に表示させることを特徴とする請求項３記載の撮像装置。
【請求項５】
前記動画像または静止画像の何れを記録すべきかの入力を受け付けてそれに応じた指示をする記録指示手段と、
前記指示に基づいて前記撮像手段において生成された画像データより静止画像データまたは動画像データを生成する記録画像データ生成手段と、
前記指示に基づいて前記静止画像データまたは動画像データの何れか一方を記録媒体に記録する記録手段と
をさらに具備することを特徴とする請求項１記載の撮像装置。
【請求項６】
動画像を撮像するための動画像撮像モードと静止画像を撮像するための静止画像撮像モードとを備えた撮像装置であって、
被写体を撮像して画像データを生成する撮像手段と、
前記撮像手段において生成された画像データに基づいた表示を行う表示手段と、
前記画像データを保持するメモリと、
前記動画像撮像モードにおける撮像画角を維持したまま前記メモリに保持された画像データの解像度を変換することによって前記表示手段に表示させるための動画像表示データを生成する動画像表示データ生成手段と、
前記静止画像撮像モードにおける撮像画角を維持したまま前記メモリに保持された画像データの解像度を変換することによって前記表示手段に表示させるための静止画像表示データを生成する静止画像表示データ生成手段と、
前記動画像表示データと前記静止画像表示データとを重ね合わせた一体画像データを生成する一体画像データ生成手段と
を具備し、
前記表示手段は前記一体画像データを表示することを特徴とする撮像装置。
【請求項７】
動画像を撮像するための動画像撮像モードと静止画像を撮像するための静止画像撮像モードとを有し、撮像した画像データに基づいた表示を行う表示手段と、前記画像データを保持する第１のメモリと、前記動画像撮像モードにおける撮像画角を維持した前記表示手段に表示させるための動画像表示データと前記静止画像撮像モードにおける撮像画角を維持した前記表示手段に表示させるための静止画像表示データとを重ね合わせた一体画像データを保持する第２のメモリとを備えた撮像装置における処理方法であって、
被写体を撮像して前記画像データを生成する撮像手順と、
前記第１のメモリに保持された画像データの解像度を変換することによって前記動画像表示データを生成する動画像表示データ生成手順と、
前記第１のメモリに保持された画像データの解像度を変換することによって前記静止画像表示データを生成する静止画像表示データ生成手順と、
前記動画像表示データと前記静止画像表示データとを重ね合わせて前記第２のメモリに書込み前記第２のメモリに前記一体画像データを保持させるメモリ書込み手順と、
前記第２のメモリに保持された前記一体画像データを表示手段に表示させる表示手順と
を具備することを特徴とする処理方法。
【請求項８】
動画像を撮像するための動画像撮像モードと静止画像を撮像するための静止画像撮像モードとを有し、撮像した画像データに基づいた表示を行う表示手段と、前記画像データを保持する第１のメモリと、前記動画像撮像モードにおける撮像画角を維持した前記表示手段に表示させるための動画像表示データと前記静止画像撮像モードにおける撮像画角を維持した前記表示手段に表示させるための静止画像表示データとを重ね合わせた一体画像データを保持する第２のメモリとを備えた撮像装置に、
被写体を撮像して前記画像データを生成する撮像手順と、
前記第１のメモリに保持された画像データの解像度を変換することによって前記動画像表示データを生成する動画像表示データ生成手順と、
前記第１のメモリに保持された画像データの解像度を変換することによって前記静止画像表示データを生成する静止画像表示データ生成手順と、
前記動画像表示データと前記静止画像表示データとを重ね合わせて前記第２のメモリに書込み前記第２のメモリに前記一体画像データを保持させるメモリ書込み手順と、
前記第２のメモリに保持された前記一体画像データを表示手段に表示させる表示手順と
を実行させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、静止画像と動画像を撮像できる撮像装置に関し、特に異なる画角の静止画像と動画像とを一画面に同時に表示する撮像装置、および、これらにおける処理方法ならびに当該方法をコンピュータに実行させるプログラムに関する。
【背景技術】
【０００２】
近年、デジタルスチルカメラ、ビデオカメラ等の撮像装置においては、動画像を撮像する動画像撮像モードと静止画像を撮像する静止画像撮像モードとを備え、動画像および静止画像の両方を撮像して記録することが可能になってきている。動画像記録時と静止画像記録時とにおいて撮像された画像は、異なった画角で撮像装置の表示画面に表示され得る。
【０００３】
図８は、従来の撮像装置において動画像撮像モードまたは静止画像撮像モードにおける表示画像データを生成する構成を示す図である。なお、以下において、動画像撮像モードにおける撮像画角を維持したまま表示画面に表示させる画像データを動画像表示データと呼び、静止画像撮像モードにおける撮像画角を維持したまま表示画面に表示させる画像データを静止画像表示データと呼ぶこととする。
【０００４】
まず、撮像して生成された画像データの水平方向の手振れを水平手振れ補正回路８１０によって補正させる。次に、水平方向の手振れが補正された画像データの水平方向の解像度を水平解像度変換回路８２０によって変換させる。これにより水平方向における動画像表示データまたは静止画像表示データのサイズが調整される。なお、ここでは、水平手振れ補正回路８１０および水平解像度変換回路８２０によって別々に手振れ補正および解像度変換が行われることを想定したが、これらは同時におこなわれる場合もある。
【０００５】
そして、水平方向におけるサイズが調整された動画像表示データまたは静止画像表示データはメモリコントローラ８４０によってメモリ８３０に供給されて保持される。動画像表示データまたは静止画像表示データの垂直方向のサイズについても上記説明した水平方向の場合と同様に垂直手振れ補正回路８５０および垂直解像度変換回路８６０によって調整される。
【０００６】
以上の処理によってサイズを調整され、生成された上記動画像表示データまたは静止画像表示データは、メモリコントローラ８４０によって一旦メモリ８３０に保持させた後に出力してもよく、また、直接出力してもよい。直接出力させるか否かはセレクタ８７０により選択される。
【０００７】
以上の従来の構成においては、表示画面に表示させることができるのは、動画像表示データまたは静止画像表示データのどちらか一方であり、動画像表示データまたは静止画像表示データをスイッチ等により切り換えて表示させていた。動画像表示データおよび静止画像表示データの両方を同時に一画面で表示できれば、ユーザーに画角の違いについて明示できるため便利である。
【０００８】
異なる画角で表示させた画像を同時に表示させる技術として、表示画面を中央、左上、左下、右上、右下と５分割してその選択された領域に表示された画像部分を拡大して表示させる装置が提案されている。（例えば、特許文献１参照。）。この装置によれば、表示画面の表示領域全体には画像全体が表示され、選択された領域においてはその部分の画像が拡大されて表示され、結果として異なる画角の画像が同時に一画面で表示される。
【特許文献１】特開２００４−１７２８８９号公報（図１）
【発明の開示】
【発明が解決しようとする課題】
【０００９】
しかしながら、上述の従来技術では、選択された所定の分割領域の画像を拡大させるのみであって、動画像表示データおよび静止画像表示データを同時に表示させることはできない。
【００１０】
そこで、本発明は、動画像表示データおよび静止画像表示データを同時に表示させる撮像装置を提供することを目的とする。
【課題を解決するための手段】
【００１１】
本発明は、上記課題を解決するためになされたものであり、その第１の側面は、動画像を撮像するための動画像撮像モードと静止画像を撮像するための静止画像撮像モードとを備えた撮像装置であって、被写体を撮像して画像データを生成する撮像手段と、上記撮像手段において生成された画像データに基づいた表示を行う表示手段と、上記画像データを保持する第１のメモリと、上記動画像撮像モードにおける撮像画角を維持したまま上記第１のメモリに保持された画像データの解像度を変換することによって上記表示手段に表示させるための動画像表示データを生成する動画像表示データ生成手段と、上記静止画像撮像モードにおける撮像画角を維持したまま上記第１のメモリに保持された画像データの解像度を変換することによって上記表示手段に表示させるための静止画像表示データを生成する静止画像表示データ生成手段と、上記動画像表示データと上記静止画像表示データとを重ね合わせた一体画像データを保持する第２のメモリとを具備し、上記表示手段は上記一体画像データを表示することを特徴とする撮像装置である。これにより、動画像表示データおよび静止画像表示データを同時に表示させるという作用をもたらす。
【００１２】
また、この第１の側面において、上記撮像手段において生成された画像データの水平方向の解像度を変換する水平解像度変換手段をさらに具備し、上記第１のメモリは、上記水平解像度変換手段によって水平方向の解像度が変換された画像データを保持することを特徴とするものである。これにより、第１のメモリに保持させる画像データの容量を低減させるという作用をもたらす。
【００１３】
また、この第１の側面において、上記表示手段は、上記一体画像データとして上記動画像表示データおよび上記静止画像表示データの何れか一方を当該表示手段における表示領域全体に表示させ、他方を上記表示領域のうちの一部に表示させることを特徴とするものである。これにより、動画像表示データおよび静止画像表示データを表示させる大きさを変えてユーザーに見やすい態様で一画面に同時に表示させるという作用をもたらす。
【００１４】
また、上記表示手段は、上記一体画像データとして上記動画像表示データおよび上記静止画像表示データの何れか一方を当該表示手段における表示領域全体に表示させ、他方を上記表示領域の中心より上側に表示させることを特徴とするものである。これにより、ラインメモリの容量が少なくても、動画像表示データおよび静止画像表示データを一画面に同時に表示させるという作用をもたらす。
【００１５】
また、この第１の側面において、上記動画像または上記静止画像の何れを記録すべきかの入力を受け付けてそれに応じた指示をする記録指示手段と、上記指示に基づいて上記撮像手段において生成された画像データより静止画像データまたは動画像データを生成する記録画像データ生成手段と、上記指示に基づいて上記静止画像データまたは動画像データの何れか一方を記録媒体に記録する記録手段とをさらに具備することを特徴とするものである。これにより、表示画面には動画像表示データおよび静止画像表示データを同時に表示させながら、動画像データまたは静止画像データの何れかを記録させるという作用をもたらす。
【００１６】
また、本発明の第２の側面は、動画像を撮像するための動画像撮像モードと静止画像を撮像するための静止画像撮像モードとを備えた撮像装置であって、被写体を撮像して画像データを生成する撮像手段と、上記撮像手段において生成された画像データに基づいた表示を行う表示手段と、上記画像データを保持するメモリと、上記動画像撮像モードにおける撮像画角を維持したまま上記メモリに保持された画像データの解像度を変換することによって上記表示手段に表示させるための動画像表示データを生成する動画像表示データ生成手段と、上記静止画像撮像モードにおける撮像画角を維持したまま上記メモリに保持された画像データの解像度を変換することによって上記表示手段に表示させるための静止画像表示データを生成する静止画像表示データ生成手段と、上記動画像表示データと上記静止画像表示データとを重ね合わせた一体画像データを生成する一体画像データ生成手段と
を具備し、上記表示手段は上記一体画像データを表示することを特徴とする撮像装置である。これにより、フィールドメモリ等の特別なメモリを用いなくても動画像表示データおよび静止画像表示データを同時に表示させるという作用をもたらす。
【００１７】
また、本発明の第３の側面は、動画像を撮像するための動画像撮像モードと静止画像を撮像するための静止画像撮像モードとを有し、撮像した画像データに基づいた表示を行う表示手段と、上記画像データを保持する第１のメモリと、上記動画像撮像モードにおける撮像画角を維持した上記表示手段に表示させるための動画像表示データと上記静止画像撮像モードにおける撮像画角を維持した上記表示手段に表示させるための静止画像表示データとを重ね合わせた一体画像データを保持する第２のメモリとを備えた撮像装置において以下の手順を実行する処理方法または以下の手順をコンピュータに実行させるプログラムであって、被写体を撮像して上記画像データを生成する撮像手順と、上記第１のメモリに保持された画像データの解像度を変換することによって上記動画像表示データを生成する動画像表示データ生成手順と、上記第１のメモリに保持された画像データの解像度を変換することによって上記静止画像表示データを生成する静止画像表示データ生成手順と、  上記動画像表示データと上記静止画像表示データとを重ね合わせて上記第２のメモリに書込み上記第２のメモリに上記一体画像データを保持させるメモリ書込み手順と、上記第２のメモリに保持された上記一体画像データを表示手段に表示させる表示手順とを具備することを特徴とする処理方法またはこれらの手順をコンピュータに実行させるプログラムである。これにより、動画像表示データおよび静止画像表示データを同時に表示させるという作用をもたらす。
【発明の効果】
【００１８】
本発明によれば、動画像表示データおよび静止画像表示データを同時に表示させるという優れた効果を奏し得る。
【発明を実施するための最良の形態】
【００１９】
次に本発明の実施の形態について図面を参照して詳細に説明する。
【００２０】
図１は、本発明の実施の形態における撮像装置の構成の一例を示す図である。本発明の実施の形態における撮像装置１００は、撮像部１０と、画像信号処理部２０と、入出力処理部３０と、制御部４０と、メモリ５０と、表示部６０と、操作部７０とを備える。
【００２１】
撮像部１０は、レンズ群１１と、撮像素子１２と、Ａ／Ｄ変換部１３とを備える。レンズ群１１は、撮像しようとする被写体を撮像素子１２に結像させるなどの役割を果たすものである。撮像素子１２は、例えばＣＣＤ（Charge Coupled Device）により構成され、その結像面に、レンズ群１１を通じた像が結像される。この撮像素子１２は、シャッター操作に応じて制御部４０から供給される画像取り込みタイミング信号を受けて、結像面に結像されている被写体像を撮像信号に変換し、Ａ／Ｄ変換部１３に供給する。Ａ／Ｄ変換部１３は、撮像素子１２より供給された撮像信号をデジタル信号としての画像データに変換する処理を行う。
【００２２】
画像信号処理部２０は、撮像部１０より供給された画像データに対してノイズ除去、デモザイク処理、ガンマ補正、解像度変換などの処理を行うものである。本発明の実施の形態において画像信号処理部２０では、撮像部１０より供給された画像データに対して解像度変換等の所定の処理を施して、動画像表示データおよび静止画像表示データを生成する。そして、この生成された動画像表示データおよび静止画像表示データを重ね合わせた一体画像データ（以下、一体画像データと呼ぶ。）が画像信号処理部２０において生成される。また、画像信号処理部２０は、撮像部１０から供給された画像データに基づいて記録媒体８０に記録するための動画像データおよび静止画像データ（以下、それぞれ動画像記録データおよび静止画像記録データと呼ぶ。）を生成する。
【００２３】
入出力処理部３０は、画像信号処理部２０から供給された一体画像データを含む画像データおよび記録媒体８０から読み出した画像データを表示部６０に出力するものである。また、入出力処理部３０は、画像信号処理部２０より供給される動画像記録データおよび静止画像記録データを記録媒体８０に記録する。なお、記録媒体としては、ＤＶＤ等の光ディスクやフラッシュメモリ（flash memory）をカード型にパッケージしたメモリカード等が想定されるが、これに限るものではない。
【００２４】
制御部４０は、撮像装置１００全体の処理を司るものである。メモリ５０は、画像データを保持するものである。メモリ５０として、例えばＳＤＲＡＭ（Synchronous Dynamic Random Access Memory）が想定されるが、これに限るものではない。また、本発明の実施の形態においては、メモリ５０において、（図示しない）少なくとも１ライン分の画像データを保持するラインメモリと、少なくとも１フィールド分の画像データを保持するフィールドメモリとを備えることを想定しているが、これについては後述する。
【００２５】
表示部６０は、例えばＬＣＤ（Liquid Crystal Display）などにより構成され、制御部４０の制御の下に、入出力処理部３０より供給された撮像した画像信号や、記録媒体８０から読み出された画像信号を表示する。
【００２６】
操作部７０には、撮影モードと再生モードなどの他のモードとを切り換えるモード切り換えキー、ズーム調整キー、露出調整のためのキー、シャッターキー、動画撮影用キー、表示部６０における表示調整キーなどの複数のキーが設けられており、ユーザーからの操作の入力を上記各キーより受け付けて制御部４０に伝えるものである。制御部４０は、操作部７０においていずれのキーが操作されたかを判別し、その判別結果に応じた制御処理を行う。
【００２７】
図２は、本発明の実施の形態における画像信号処理部２０の構成の一例を示す図である。本発明の実施の形態における画像信号処理部２０は、信号補正回路２１と、デモザイク回路２２と、画像調整回路２３と、一体画像データ生成回路２４と、記録画像データ生成回路２５とを備える。
【００２８】
信号補正回路２１は、クランプ処理やノイズ除去処理等を行うものである。なお、クランプ処理とは、画像データ中における黒色のレベルを固定する処理をいう。デモザイク回路２２は、画像データに対してデモザイク処理を行うものである。なお、デモザイク処理とは、ベイヤー配列の撮像素子においては各画素に１色のデータしかないが、補完によってベイヤー配列の撮像素子における各画素のＲＧＢ値を求める処理をいう。
【００２９】
画像調整回路２３は、ホワイトバランスやガンマ補正等を行うものである。なお、ホワイトバランスとは、各色の発色具合を調整して白色が正しく表示できるようにする処理をいう。また、ガンマ補正とは、画像データにおける色のデータとそれが実際に出力される際の信号の相対関係を調節して、より自然に近い表示を得るための補正をいう。
【００３０】
一体画像データ生成回路２４は、図１において説明した一体画像データを生成するものである。また、記録画像データ生成回路２５は、図１において説明した動画像記録データおよび静止画像記録データを生成するものである。なお、この図２の構成例においては、一体画像データ生成回路２４および記録画像データ生成回路２５をそれぞれ別個の回路として設けているが、これに限らず、一体画像データ生成回路２４が記録画像データ生成回路２５の機能を含むように構成してもよい。
【００３１】
図３は、本発明の実施の形態における一体画像データ生成回路２４およびメモリ５０の構成の一例を示す図である。一体画像データ生成回路２４は、水平手振れ補正回路２４１と、水平解像度変換回路２４２と、メモリコントローラ２４３と、動画像表示データ生成回路２４４と、静止画像表示データ生成回路２４５と、ミックス回路２４６と、セレクタ２４７とを備える。また、メモリ５０は、少なくとも１ライン分の画像データを保持するラインメモリ５１と、少なくとも１フィールド分の画像データを保持するフィールドメモリ５２とを含む。
【００３２】
水平手振れ補正回路２４１は、画像データにおける水平方向の手振れを補正するものである。また、水平解像度変換回路２４２は、一体画像生成のために、画像データの水平方向の解像度を低く変換するものである。なお、上述のように一体画像データ生成回路２４が記録画像データ生成回路２５の機能を含むように構成する場合、この水平解像度変換回路２４２は、画像データの水平方向の解像度を高低いずれにも変換することになる。
【００３３】
メモリコントローラ２４３は、水平解像度変換回路２４２から供給された画像データをラインメモリ５１に書き込む。ラインメモリ５１に書き込まれる画像データは、上記のように水平解像度変換回路２４２によって画像データの水平方向の解像度が低く変換されているため、変換前と比べて画像データの容量が低減でき、結果としてラインメモリ５１の容量を低減できる。
【００３４】
また、メモリコントローラ２４３は、ラインメモリ５１に保持された画像データを読み出して動画像表示データ生成回路２４４および静止画像表示データ生成回路２４５に供給する。また、メモリコントローラ２４３は、動画像表示データ生成回路２４４および静止画像表示データ生成回路２４５のそれぞれにおいて生成された動画像表示データおよび静止画像表示データをフィールドメモリ５２に書き込む。フィールドメモリ５２における１フィールド分の書き込み領域に動画像表示データおよび静止画像表示データを重ねて書き込むことによって、動画像表示データおよび静止画像表示データが一体になった一体画像データが生成される。
【００３５】
動画像表示データ生成回路２４４は、ラインメモリ５１から読み出された画像データに基づいて上記説明した動画像表示データを生成するものであり、動画像垂直手振れ補正回路２４４１と、動画像水平垂直解像度変換回路２４４２とを備える。
【００３６】
動画像垂直手振れ補正回路２４４１は、メモリコントローラ２４３によってラインメモリ５１から読み出された画像データの垂直方向の手振れを補正するものである。また、動画像水平垂直解像度変換回路２４４２は、一体画像生成のために、動画像垂直手振れ補正回路２４４１によって手振れを補正された画像データの解像度を低く変換して、動画像表示データを生成するものである。なお、上述のように一体画像データ生成回路２４が記録画像データ生成回路２５の機能を含むように構成する場合、この動画像水平垂直解像度変換回路２４４２は、画像データの水平方向の解像度を高低いずれにも変換することになる。
【００３７】
静止画像表示データ生成回路２４５は、ラインメモリ５１から読み出された画像データに基づいて上記説明した静止画像表示データを生成するものであり、静止画像垂直手振れ補正回路２４５１と、静止画像水平垂直解像度変換回路２４５２とを備える。
【００３８】
静止画像垂直手振れ補正回路２４５１は、メモリコントローラ２４３によってラインメモリ５１から読み出された画像データの垂直方向の手振れを補正するものである。また、静止画像水平垂直解像度変換回路２４５２は、静止画像垂直手振れ補正回路２４５１によって手振れを補正された画像データの解像度を低く変換して、静止画像表示データを生成するものである。
【００３９】
ミックス回路２４６は、動画像表示データ生成回路２４４および静止画像表示データ生成回路２４５によってそれぞれ生成された動画像表示データおよび静止画像表示データを重ね合わせた一体画像データを生成するものである。但し、フィールドメモリ５２の容量が十分確保されていれば、このミックス回路２４６は不要である。すなわち、本発明の実施の形態における撮像装置１００は、ＨＤ（High Definition）方式およびＳＤ（Standard Definition）方式の両方に対応するものであるが、ＨＤ方式の場合はＳＤ方式に比べて大容量の画像データを処理することになるため、ＳＤ方式に比べて大容量のフィールドメモリ５２を用いる必要がある。ＨＤ方式の画像データも処理可能な程度の大容量のフィールドメモリ５２を用いれば、ＨＤ方式およびＳＤ方式の何れの方式であっても、撮像装置１００は一体画像データを生成することができる。しかしながら、ＨＤ方式の画像データも処理可能な程度の大容量のフィールドメモリ５２を用いない場合は、上記説明したミックス回路２４６により動画像表示データおよび静止画像表示データを重ね合わせて一体画像データを生成する。
【００４０】
セレクタ２４７は、制御部４０からの選択信号に応じてミックス回路２４６およびフィールドメモリ５２の何れかにおいて生成した一体画像データを入出力処理部３０に出力するものである。入出力処理部３０は、一体画像データの供給を受けると表示部６０にその一体画像データを出力する。なお、ＨＤ方式の画像データを扱う場合、制御部４０は、例えばミックス回路２４６からの一体画像データを選択する旨の選択信号を出力する。また、ＳＤ方式の画像データを扱う場合、制御部４０は、例えばフィールドメモリ５２において生成された一体画像データを選択する旨の選択信号を出力することになる。
【００４１】
図４は、本発明の実施の形態における記録画像データ生成回路２５およびメモリ５０の構成の一例を示す図である。記録画像データ生成回路２５は、水平手振れ補正回路２５１と、水平解像度変換回路２５２と、メモリコントローラ２５３と、垂直手振れ補正回路２５４と、垂直解像度変換回路２５５と、セレクタ２５６とを備える。メモリ５０は、図３の場合と同様にラインメモリ５１と、フィールドメモリ５２とを備える。
【００４２】
水平手振れ補正回路２５１は、画像データにおける水平方向の手振れを補正するものである。また、水平解像度変換回路２５２は、画像データの水平方向の解像度を低く変換するものである。
【００４３】
メモリコントローラ２５３は、水平解像度変換回路２５２から供給された画像データをラインメモリ５１に書き込む。また、メモリコントローラ２５３は、ラインメモリ５１に保持された画像データを読み出して垂直手振れ補正回路２５４に供給する。
【００４４】
垂直手振れ補正回路２５４は、メモリコントローラ２５３によってラインメモリ５１から読み出された画像データの垂直方向の手振れを補正するものである。また、垂直解像度変換回路２５５は、垂直手振れ補正回路２５４によって手振れを補正された画像データの解像度を変換して、画像データの水垂直方向の解像度が変換された画像データを生成するものである。以上の処理を経て、画像データは水平方向および垂直方向の解像度が変換され、動画像記録データまたは静止画像記録データとして扱われる。なお、解像度の変換の程度は、動画像記録データまたは静止画像記録データの何れを生成するかによって変わってくる。
【００４５】
さらに、メモリコントローラ２５３は、垂直解像度変換回路２５５において解像度を変換されて生成された動画像記録データまたは静止画像記録データをフィールドメモリ５２に書き込む。フィールドメモリ５２に動画像記録データまたは静止画像記録データを書き込み、１フィールド分の動画像記録データまたは静止画像記録データが生成されると、メモリコントローラ２５３はその１フィールド分の動画像記録データまたは静止画像記録データをセレクタ２５６に供給する。なお、生成された動画像記録データまたは静止画像記録データをメモリコントローラ２５３に供給せず、直接セレクタ２５６に供給するようにしてもよい。
【００４６】
セレクタ２５６は、メモリコントローラ２５３および垂直解像度変換回路２５５の何れか一方から供給された動画像記録データまたは静止画像記録データを、制御部４０より供給される選択信号に従って記録部３０１に供給するものである。
【００４７】
記録部３０１は、記録指示部４０１の指示に従ってセレクタ２５６より供給された動画像記録データまたは静止画像記録データを記録媒体８０に記録するものである。なお、記録部３０１は、図１における入出力処理部３０によって実現される。
【００４８】
記録指示部４０１は、動画像記録データおよび静止画像記録データの何れを記録すべきかの入力を受け付けて、それに応じた指示を水平解像度変換回路２５２、垂直解像度変換回路２５５および記録部３０１に対して行う。なお、記録指示部４０１は、図１における操作部７０と制御部４０によって実現されるものである。水平解像度変換回路２５２および垂直解像度変換回路２５５は、その指示に従って画像調整回路２３より供給された画像データに対して動画像記録データまたは静止画像記録データに合わせた解像度変換を行う。
【００４９】
図５は、本発明の実施の形態における一体画像データを生成する様子を示す図である。まず、撮像部１０において撮像した画像データに所定の処理を施した後、画像調整回路２３から一体画像データ生成回路２４に図５（ａ）に示す横幅Ｈ１、縦幅Ｖ１の画像データ３１０が供給される。
【００５０】
一体画像データ生成回路２４を構成する水平手振れ補正回路２４１において画像データ３１０について水平方向の手振れが補正される。次に、水平解像度変換回路２４２において画像データ３１０の水平方向の解像度が低く変換されて、図５（ｂ）に示す横幅Ｈ２（＜Ｈ１）、縦幅Ｖ１の画像データ３２０が生成される。
【００５１】
なお、画像データ３１０を構成する画像データは、順次、一体画像データ生成回路２４に供給されて、水平解像度変換回路２４２において水平方向の解像度が変換された画像データは、順次、メモリコントローラ２４３によってラインメモリ５１に書き込まれる。
【００５２】
水平解像度変換回路２４２によって画像データ３１０の水平方向の解像度が変換されることによって、ラインメモリ５１に書き込むべき画像データの容量を低減できるため、ラインメモリ５１の容量を小さくすることができる。
【００５３】
ラインメモリ５１に書き込まれた画像データ３２０は、メモリコントローラ２４３により１ライン毎に読み出され、動画像表示データ生成回路２４４および静止画像表示データ生成回路２４５に供給される。
【００５４】
動画像表示データ生成回路２４４においては、画像データ３２０の垂直方向における手振れ補正処理が行われた後、画像データ３２０の水平方向および垂直方向の解像度が変換され、動画像表示データが生成される。以上の処理を経て生成された動画像表示データは、例えば図５（ｃ）に示す横幅Ｈ３、縦幅Ｖ３の画像データ３３０になる。
【００５５】
一方、静止画像表示データ生成回路２４５においては、画像データ３２０の垂直方向における手振れ補正処理が行われた後、画像データ３２０の水平方向および垂直方向の解像度が変換されて、静止画像表示データが生成される。以上の処理を経て生成された静止画像表示データは、例えば図５（ｃ）に示す横幅Ｈ２、縦幅Ｖ２の画像データ３４０になる。なお、本発明の実施の形態においては、画像データ３２０と画像データ３４０の横幅は同じであるが、これに限らず、両者は異なっていてもよい。
【００５６】
なお、生成された動画像表示データおよび静止画像表示データは、メモリコントローラ２４３によって、順次、フィールドメモリ５２に書き込まれる。動画像表示データおよび静止画像表示データが同じフィールドに書き込まれることによって動画像表示データおよび静止画像表示データが一体化されて、図５（ｄ）に示す１フィールド分の一体画像データ３５０が生成される。なお、動画像表示データ生成回路２４４および静止画像表示データ生成回路２４５によって生成された動画像表示データおよび静止画像表示データをフィールドメモリ５２に書き込まず、ミックス回路２４６によって一体画像データを生成するようにしてもよい。
【００５７】
なお、上記においてラインメモリ５１における画像データの書込みおよび読出しにおいて、例えばラインメモリ５１が１ライン分の画像データしか保持できない場合、ラインメモリ５１に保持された画像データが読み出される前に、次の画像データが書き込まれないよう制御する必要がある。これは、ラインメモリ５１に保持された画像データが読み出される前に、次の画像データが書き込まれると、ラインメモリ５１に保持された前の画像データは上書きされてしまうからである。ラインメモリ５１が１ライン分以上の画像データを保持できる場合も、ラインメモリ５１に保持された画像データが順次供給される画像データによって上書きされないように制御する必要がある。なお、上記のことは、フィールドメモリ５２における画像データの書込みおよび読出しにおいても同様である。
【００５８】
上記のようなラインメモリ５１およびフィールドメモリ５２における画像データの書込みおよび読出しにおいて、読み出されていない画像データの上書きを避けるために、一体画像データとしては、図５（ｄ）に示すように画像データ３４０に対する画像データ３３０の位置は、画像データ３４０の垂直方向において中心よりも上側にあることが望ましい。画像データ３４０に対する画像データ３３０の位置が画像データ３４０の垂直方向の中心よりも下側にあると、画像データ３３０が生成される前に、画像データ３３０を生成する元になるラインメモリ５１に保持された画像データが次に供給される画像データに上書きされてしまうからである。
【００５９】
図６は、本発明の実施の形態における一体画像データを表示させる様子を示す図である。図６（ａ）に示す被写体３６０を本発明の実施の形態における撮像装置１００により撮像すると、図６（ｂ）に示す画像データ３７０が生成される。
【００６０】
次に、図６（ｃ）に示すように、画像データ３７０に基づいて撮像装置１００において静止画像表示データ３８０および動画像表示データ３９０が生成される。図６（ｃ）において静止画像表示データ３８０は、画像データ３７０のサイズを縮小させたものである。また、動画像表示データ３９０は、画像データ３７０の一部を切り出して拡大させたものである。これらの処理は解像度変換によって実現される。
【００６１】
そして、生成された静止画像表示データ３８０および動画像表示データ３９０が重ね合わせられ、一体画像データが生成される。本発明の実施の形態においては、図６（ｄ）に示すように、動画像表示データ３９０または静止画像表示データ３８０のどちらか一方を表示画面６００の表示領域全体に表示させ、他方を表示画面６００の表示領域の一部に表示させることを想定している。他方を表示画面６００の表示領域のどの位置に表示させるかは、図５において説明したように画面の中心より上側に表示させることが望ましい。
【００６２】
次に本発明の実施の形態における撮像装置１００の動作について図面を参照して説明する。
【００６３】
図７は、本発明の実施の形態における一体画像データを生成する手順を示すものである。まず、撮像部１０において画像データを生成する（ステップＳ９１１）。次に、画像データに対してホワイトバランス、ガンマ補正等の所定の処理が施された後に、水平解像度変換回路２４２において画像データの水平方向における解像度が変換される（ステップＳ９１２）。
【００６４】
画像データの水平方向における解像度が変換されると、メモリコントローラ２４３によってその画像データはラインメモリ５１に書き込まれる（ステップＳ９１３）。次に、ラインメモリ５１に書き込まれた画像データは、メモリコントローラ２４３によって１ライン毎に読み出され、動画像表示データ生成回路２４４に供給される。動画像表示データ生成回路２４４は、供給された画像データに基づいて動画像表示データを生成する（ステップＳ９１４）。
【００６５】
また、メモリコントローラ２４３によって１ライン毎に読み出された画像データは、静止画像表示データ生成回路２４５にも供給される。静止画像表示データ生成回路２４５は、供給された画像データに基づいて静止画像表示データを生成する（ステップＳ９１５）。
【００６６】
次に、ステップＳ９１４および９１５においてそれぞれ生成された動画像表示データおよび静止画像表示データを重ね合わせた一体画像データがフィールドメモリ５２において保持される（ステップＳ９１６）。なお、一体画像データは、フィールドメモリ５２における１フィールド分の領域に動画像表示データおよび静止画像表示データを書き込むことによって生成される。また、フィールドメモリ５２を用いない場合は、ミックス回路２４６によって動画像表示データおよび静止画像表示データを重ね合わせて一体画像データは生成される。
【００６７】
ステップＳ９１６において生成された一体画像データは、入出力処理部３０によって表示部６０に出力され、表示部６０に表示される（ステップＳ９１７）。
【００６８】
このように、本発明の実施の形態によれば、動画像表示データ生成回路２４４および静止画像表示データ生成回路２４５により動画像表示データおよび静止画像表示データを別々に生成して、フィールドメモリ５２において動画像表示データと静止画像表示データとを重ね合わせた一体画像データを生成することによって、異なる画角の動画像表示データおよび静止画像表示データを同時に表示させることができる。これにより、ユーザーは、動画像データおよび静止画像データの画角を確認しながら被写体を撮像することができる。また、本発明の実施の形態によれば、ＨＤ方式およびＳＤ方式の両方の画像データより一体画像データを生成して、異なる画角の動画像表示データおよび静止画像表示データを同時に表示させることができる。
【００６９】
なお、本発明の実施の形態は本発明を具現化するための一例を示したものであり、以下に示すように特許請求の範囲における発明特定事項とそれぞれ対応関係を有するが、これに限定されるものではなく本発明の要旨を逸脱しない範囲において種々の変形を施すことができる。
【００７０】
すなわち、請求項１において、撮像手段は、例えば撮像部１０に対応する。また、表示手段は、例えば表示部６０に対応する。また、第１のメモリは、例えばラインメモリ５１に対応する。また、動画像表示データ生成手段は、例えば動画像表示データ生成回路２４４に対応する。また、静止画像表示データ生成手段は、例えば静止画像表示データ生成回路２４５に対応する。また、第２のメモリは、例えばフィールドメモリ５２に対応する。
【００７１】
また、請求項２において、水平解像度変換手段は、例えば水平解像度変換回路２４２に対応する。
【００７２】
また、請求項５において、記録指示手段は、例えば記録指示部４０１に対応する。また、記録画像データ生成手段は、例えば記録画像データ生成回路２５に対応する。また、記録手段は、例えば記録部３０１に対応する。
【００７３】
請求項６において、撮像手段は、例えば撮像部１０に対応する。また、表示手段は、例えば表示部６０に対応する。また、メモリは、例えばメモリ５０に対応する。また、動画像表示データ生成手段は、例えば動画像表示データ生成回路２４４に対応する。また、静止画像表示データ生成手段は、例えば静止画像表示データ生成回路２４５に対応する。また、一体画像データ生成手段は、例えばミックス回路２４６に対応する。
【００７４】
また、請求項７および８において、表示手段は、例えば表示部６０に対応する。また、第１のメモリは、例えばラインメモリ５１に対応する。また、第２のメモリは、例えばフィールドメモリ５２に対応する。また、撮像手順は、例えばステップＳ９１１に対応する。また、動画像表示データ生成手順は、例えばステップＳ９１４に対応する。また、静止画像表示データ生成手順は、例えばステップＳ９１５に対応する。また、メモリ書込み手順は、例えばステップＳ９１６に対応する。また、表示手順は、例えばステップＳ９１７に対応する。
【００７５】
なお、本発明の実施の形態において説明した処理手順は、これら一連の手順を有する方法として捉えてもよく、また、これら一連の手順をコンピュータに実行させるためのプログラム乃至そのプログラムを記憶する記録媒体として捉えてもよい。
【図面の簡単な説明】
【００７６】
【図１】本発明の実施の形態における撮像装置の構成の一例を示す図である。
【図２】本発明の実施の形態における画像信号処理部２０の構成の一例を示す図である。
【図３】本発明の実施の形態における一体画像データ生成回路２４およびメモリ５０の構成に一例を示す図である。
【図４】本発明の実施の形態における記録画像データ生成回路２５およびメモリ５０の構成に一例を示す図である。
【図５】本発明の実施の形態における一体画像データを生成する様子を示す図である。
【図６】本発明の実施の形態における一体画像データを表示させる様子を示す図である。
【図７】本発明の実施の形態における一体画像データを生成する手順を示すものである。
【図８】従来の撮像装置において動画像撮像モードまたは静止画像撮像モードにおける表示画像データを生成する構成を示す図である。
【符号の説明】
【００７７】
１０  撮像部
１１  レンズ群
１２  撮像素子
１３  Ａ／Ｄ変換部
２０  画像信号処理部
２１  信号補正回路
２２  デモザイク回路
２３  画像調整回路
２４  一体画像データ生成回路
２５  記録画像データ生成回路
３０  入出力処理部
４０  制御部
５０  メモリ
５１  ラインメモリ
５２  フィールドメモリ
６０  表示部
７０  操作部
８０  記録媒体
１００  撮像装置
２４１、２５１  水平手振れ補正回路
２４２、２５２  水平解像度変換回路
２４３、２５３  メモリコントローラ
２４４  動画像表示データ生成回路
２４５  静止画像表示データ生成回路
２４６  ミックス回路
２４７、２５６  セレクタ
２５４  垂直手振れ補正回路
２５５  垂直解像度変換回路
３０１  記録部
４０１  記録指示部
２４４１  動画像垂直手振れ補正回路
２４４２  動画像水平垂直解像度変換回路
２４５１  静止画像垂直手振れ補正回路
２４５２  静止画像水平垂直解像度変換回路
【図１】
2007104352.tif 000003
【図２】
2007104352.tif 000004
【図３】
2007104352.tif 000005
【図４】
2007104352.tif 000006
【図５】
2007104352.tif 000007
【図６】
2007104352.tif 000008
【図７】
2007104352.tif 000009
【図８】
2007104352.tif 000010