(57)【要約】【課題】  １回の画像取得で、様々な構図の組替えを行えるようにする。【解決手段】  被写体を撮像して画像信号を生成した後、画像信号を処理してデジタルの画像データを生成する。次に、画像データを、撮影した画像を主領域Ｘとその周囲の副領域Ｙとに分割した時の主領域Ｘに相当する主領域画像データと副領域Ｙに相当する副領域画像データとに分割し、分割された主領域画像データと副領域画像データとをそれぞれ外部記録手段１５に格納する。画像再生時には、外部記録手段１５に格納した画像データのうち、主領域画像データで主領域Ｘの画像を表示すると共に、その後の指令信号で主領域画像データと副領域画像データとを結合し、結合した画像データで主領域と副領域の合成画像を表示する。【選択図】図１
2005354211.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮像して画像信号を生成する撮像手段１１と、画像信号を処理して画像データを生成する信号処理手段１２と、画像データを、撮影した画像を主領域Ｘとその周囲の副領域Ｙとに分割した時の主領域Ｘに相当する主領域画像データと副領域Ｙに相当する副領域画像データとに分割する第一データ処理手段１３と、分割された主領域画像データと副領域画像データとをそれぞれ格納する外部記録手段１５と、外部記録手段１５に格納された画像データのうち、主領域画像データのみを出力すると共に、その後の指令信号で主領域画像データと副領域画像データとを結合し、結合した画像データを出力する第二データ処理手段１６と、第二データ処理手段から出力された画像データに基いて画像を表示する表示手段１７とを具備することを特徴とする撮像装置。
【請求項２】
被写体を撮像して画像信号を生成する撮像手段１１と、画像信号を処理して画像データを生成する信号処理手段１２と、画像データを、撮影した画像を主領域Ｘとその周囲の副領域Ｙとに分割した時の主領域Ｘに相当する主領域画像データと副領域Ｙに相当する副領域画像データとに分割する第一データ処理手段１３とを備えた撮像装置１と、
分割された主領域画像データと副領域画像データとを格納する外部記録手段１５と、
外部記録手段１５に格納された画像データのうち、主領域画像データのみを出力すると共に、その後の指令信号で主領域画像データと副領域画像データとを結合し、結合した画像データを出力する第二データ処理手段２６と、第二データ処理手段２６から出力された画像データに基いて画像を表示する表示手段２７とを備えた電子機器２と
を備えた画像処理システム。
【請求項３】
被写体を撮像して画像信号を生成し、
画像信号を処理して画像データを生成し、
画像データを、撮影した画像を主領域Ｘとその周囲の副領域Ｙとに分割した時の主領域Ｘに相当する主領域画像データと副領域Ｙに相当する副領域画像データとに分割し、
分割された主領域画像データと副領域画像データとをそれぞれ外部記録手段１５に格納し、
画像再生時には、外部記録手段１５に格納した画像データのうち、主領域画像データで主領域Ｘの画像を表示すると共に、その後の指令信号で主領域画像データと副領域画像データとを結合し、結合した画像データで主領域と副領域の合成画像を表示することを特徴とする画像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、被写体を撮影すると共に、撮影した画像（静止画もしくは動画）をデジタルデータとして記録する撮像装置、これを用いた画像処理システム、および画像処理方法に関するものである。
【背景技術】
【０００２】
上記撮像装置の一種であるデジタルカメラでは、近年、高画素化、高画質化が進んでおり、画像一枚あたりのメモリサイズが著しく増大する傾向にある。かかる実状に鑑み、特開２０００−６９４１７号公報（特許文献１）では、データサイズの大きい画像データをメモリ容量の少ない外部記録手段に記録可能とするため、画像データを分割して外部記録手段に記録すると共に、この記録された分割画像データを結合し、元の画像データを復元して表示する技術思想が開示されてる。
【特許文献１】特開２０００−６９４１７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
ところで、一般的なデジタルカメラには液晶パネルが装備され、撮影した画像をその場で確認できるようになっている。しかしながら、従来のデジタルカメラでは、手ぶれ等の要因により、液晶パネルに表示された画像が意図した構図からずれ、その周縁一部を欠くものとなった場合、この欠落領域を補って意図した構図に復元することは不可能であった。表示画像に不要部分が写り込んでいる場合は、市販の画像ソフトを利用することにより、コンピュータ上で必要部分のみを切り出す処理（トリミング）を行うことができるが、これとは逆に画像に写っていない不足部分を補って復元する処理は現状では不可能である。かかる処理は、上記特開２０００−６９４１７号公報に記載された発明においても実現不可能である。
【課題を解決するための手段】
【０００４】
以上の課題を解決するため、本発明にかかるは撮像装置は、被写体を撮像して画像信号を生成する撮像手段１１と、画像信号を処理して画像データを生成する信号処理手段１２と、画像データを、撮影した画像を主領域Ｘとその周囲の副領域Ｙとに分割した時の主領域Ｘに相当する主領域画像データと副領域Ｙに相当する副領域画像データとに分割する第一データ処理手段１３と、分割された主領域画像データと副領域画像データとをそれぞれ格納する外部記録手段１５と、外部記録手段１５に格納された画像データのうち、主領域画像データのみを出力すると共に、その後の指令信号で主領域画像データと副領域画像データとを結合し、結合した画像データを出力する第二データ処理手段１６と、第二データ処理手段から出力された画像データに基いて画像を表示する表示手段１７とを具備するものである。
【０００５】
この発明によれば、撮影した画像データを、主領域に対応する主領域画像データと主領域の周囲の副領域に対応する副領域画像データとに分割しているので、両者を分けて（別ファイルで）外部記録手段に記録することができる。この場合、画像の再生時には、表示手段に常時は主領域画像データのみから作成した主領域を表示する一方、必要な場合には、表示手段に主領域画像データと副領域画像データとを結合して合成画像を表示することができる。従って、撮影後に再生した画像に、画像に含めたい領域が欠落している場合でも、この欠落領域が副領域画像データに含まれていれば、表示部に上記合成画像を表示することにより、欠落領域を復元して表示することができる。従って、この結合画像データを活用することにより、１回の画像取得で様々な構図組換えを行うことが可能となる。
【０００６】
この発明における画像処理システムは、被写体を撮像して画像信号を生成する撮像手段１１と、画像信号を処理して画像データを生成する信号処理手段１２と、画像データを、撮影した画像を主領域Ｘとその周囲の副領域Ｙとに分割した時の主領域Ｘに相当する主領域画像データと副領域Ｙに相当する副領域画像データとに分割する第一データ処理手段１３とを備えた撮像装置１と、
【０００７】
分割された主領域画像データと副領域画像データとを格納する外部記録手段１５と、
【０００８】
外部記録手段１５に格納された画像データのうち、主領域画像データのみを出力すると共に、その後の指令信号で主領域画像データと副領域画像データとを結合し、結合した画像データを出力する第二データ処理手段２６と、第二データ処理手段２６から出力された画像データに基いて画像を表示する表示手段２７とを備えた電子機器２とを備えるものである。
【０００９】
さらに、本発明にかかる画像処理方法は、被写体を撮像して画像信号を生成し、画像信号を処理して画像データを生成し、画像データを、撮影した画像を主領域Ｘとその周囲の副領域Ｙとに分割した時の主領域Ｘに相当する主領域画像データと副領域Ｙに相当する副領域画像データとに分割し、分割された主領域画像データと副領域画像データとをそれぞれ外部記録手段１５に格納し、画像再生時には、外部記録手段１５に格納した画像データのうち、主領域画像データで主領域Ｘの画像を表示すると共に、その後の指令信号で主領域画像データと副領域画像データとを結合し、結合した画像データで主領域と副領域の合成画像を表示するものである。
【発明の効果】
【００１０】
本発明によれば、撮影後に主領域の画像を表示手段で表示する際、実際には表示画像よりも広い範囲の画像データが外部記録手段に記憶されている。従って、表示された画像中に欠落領域が存在する場合でも、この欠落領域を復元し、これを含めた形で画像を再生することができる。そのため、この画像データを基に適宜トリミング等の構図の組替え処理を行うことにより、１回の画像取得で様々に構図の組替えを行うことができ、構図の組替え自由度が高まる。
【発明を実施するための最良の形態】
【００１１】
以下、本発明を撮像装置の一種であるデジタルカメラに適用し、その場合の実施形態の一例を添付図面に基いて説明する。
【００１２】
図１は、本発明にかかるデジタルカメラ１の概略構成を示すブロック図である。このデジタルカメラ１は、撮像手段１１、信号処理手段１２、第一データ処理手段１３、ＤＲＡＭ等の内部メモリからなる内部記録手段１４、液晶モニタ１７等からなる表示手段、第２データ処理手段１６、およびフラッシュメモリ等の外部記録媒体からなる外部記録手段１５、これら各要素の動作を制御する図示しないＣＰＵを主要な構成要素とする。
【００１３】
撮像手段１１は、被写体を撮影して画像信号を生成するものであり、レンズを含む光学系とＣＣＤ、ＣＭＯＳ等の撮像素子とで構成される（何れも図示省略）。光学系には、必要に応じて自動露出機構やオートフォーカス機構等が組み込まれる。ＣＣＤから出力されたアナログの画像信号は信号処理手段１２に伝送されて画像データに変換される。信号処理手段１２では、図示しないＡ／Ｄ変換器でＣＣＤからの画像信号をデジタル変換した後、ゲイン調整やホワイトバランス補正等の既知の補正処理を行って画像データを作成する。
【００１４】
この画像データは、次いで第一データ処理手段１３に転送される。第一データ処理手段１３は、画像データの分割を行う回路で、具体的には画像データを主領域画像データと副領域画像データとに分割する。主領域画像データは、図２に示すように、撮影した画像をその中央に位置する主領域Ｘ（Ａ枠の内側の領域）と、主領域Ｘの周辺領域である副領域Ｙ（Ａ枠とＢ枠の間の領域で、ハッチングを付した領域）とに分割した時の主領域Ｘを表示する画像データであり、副領域画像データは副領域Ｙを表示する画像データである。主領域Ｘを区画するＡ枠の大きさは任意に定めることができ、あるいは、カメラを操作するユーザーがその大きさを任意に調整できるよう構成することもできる。図面では、主領域Ｘを区画するＡ枠の四辺をＢ枠の対応する四辺よりも小さくしているが、Ａ枠の対向二辺をＢ枠よりも小さくする一方、他方の対向二辺をＢ枠に一致させてもよい。
【００１５】
第一データ処理手段１３で分割された画像データは、内部記録手段１４に一時的に保存される。内部記録手段１４では、主領域画像データと副領域画像データとがそれぞれ別領域Ｍ１、Ｍ２に書き込まれる。シャッターが押し下げられていない状態では、内部記録手段１４に格納された画像データのうち、領域Ｍ１の主領域画像データのみが読み出されて逐次液晶モニタ１７に転送され、これにより、いわゆる電子ビューファインダとしての機能が得られる。この時、表示手段１７では、図２における主領域Ｘのみが表示される。
【００１６】
シャッターが押し下げられると、その時点で内部記録手段１４の領域Ｍ１、Ｍ２に保存された主領域画像データおよび副領域画像データが読み出され、それぞれ圧縮処理を経て外部記録手段１５に書き込まれる。この際、内部記録手段１４と同様に、主領域画像データが外部記録媒手段１５の領域Ｎ１に書き込まれ、これと別の領域Ｎ２に副領域画像データが書き込まれる。
【００１７】
画像再生時には、第二データ処理手段１６が外部記録手段１５の領域Ｎ１に書き込まれた主領域画像データを読み込み、これに伸張処理を施して表示手段１７に転送する。これにより、表示手段１７には、図２に示す主領域Ｘの画像が表示される。この画像にユーザーが満足したのであれば、ユーザーの操作による指令信号で、外部記録手段１５の領域Ｎ２に書き込まれた副領域画像データが消去される。この消去作業は、例えば主領域Ｘが表示された表示手段１７の画面中に、副領域Ｙの画像データを消去するか否かの回答を求める表示を出し、これに対してユーザーがキースイッチやタッチパネルの操作で「消去する」旨を回答した時に行うことができる。
【００１８】
その一方、表示された主領域Ｘの画像に、本来画像に含めたい部分５が含まれていない場合（欠落領域が存在する場合）、これを認識したユーザーの操作で指令信号を送信することにより、第二データ処理手段１６が外部記録手段１５の領域Ｎ２に書き込まれた副領域画像データを読み込み、これを先に読み込んだ主領域画像データと結合して結合画像データを生成する。この結合作業は、例えば主領域Ｘを表示する表示手段１７の画面中に、副領域Ｙの画像データを結合するか否かの指示を求める表示を出し、これに対してユーザーがキースイッチやタッチパネルの操作で「結合する」旨を回答した時に行うことができる。結合画像データは伸張処理を施した上で表示手段１７に転送され、これにより、表示手段１７の画面に主領域Ｘと副領域Ｙとを合成した合成画像（図２中のＢ枠よりも内側の画像）が表示され、欠落領域５が復元される。
【００１９】
このように、新たに結合画像データを作成した場合、この結合画像データは、外部記録媒体１５中に保存するのが望ましい（この際、外部記録手段１５に保存した主領域画像データや副領域画像データを削除してもよい）。これにより、デジタルカメラ１から取り出した外部記録手段１５から結合画像データを読み出し、これをＰＣ（パーソナルコンピュータ）に取り込むことにより、市販の画像ソフト等を用いて画像処理を行うことが可能となる。具体的には、例えば図２において、合成画像からＣ枠の内側部分を切り出す処理（トリミング）を行うこともできる。
【００２０】
以上の点から、本発明によれば、画像中から必要個所のみを切り出す処理（トリミング）だけでなく、その逆に必要個所を画像に補充する、逆トリミングともいうべき処理も行うことができ、これにより多種多様の構図組換えが一度の画像取得で行えるようになる。
【００２１】
また、ユーザーが主領域Ｘのみの画像で満足できる場合、副領域Ｙの画像データは結果的に不要となるので、これを再生時に逐次にあるいは一括して削除することもできる。これにより、外部記録手段１５の記憶領域を有効活用することができ、一つの外部記録手段１５により多くの画像を保存することが可能となる。
【００２２】
図３は、上記デジタルカメラ１を利用した画像処理システムの一実施形態を示すもので、デジタルカメラ１と、ＰＣ等の電子機器２と、外部記録手段１５とで構成したシステムのブロック図を表す。この画像処理システムは、画像撮影時に内部記録手段１４および外部記録手段１５の双方に主領域画像データおよび副領域画像データが分割して保存される点で図１に示す実施形態と共通する。相違点は、外部記録手段１５に格納された主領域画像データのみを出力すると共に、その後の指令信号で主領域画像データと副領域画像データとから結合画像データを作成する第二データ処理手段２６を電子機器２側に設置した点にある。これにより、上記実施形態で述べた画像再生および加工を電子機器２に装備されたモニタ等の表示手段２７上で行うことが可能となる。第二データ処理手段２６はその機能を実現するプログラムを電子機器側にインストールしたり、あるいはその機能を有するユニットを電子機器２に後付けすることによって構成することができる。
【００２３】
なお、図３の構成は、外部記録手段１５をデジタルカメラ１から取り出し、これをカードリーダー等に装填して電子機器側に画像データを転送する場合をイメージしたものであるが、この他にも外部記録手段１５をデジタルカメラ１に装填した状態で、デジタルカメラ１と電子機器２とを通信ケーブルで接続することにより、外部記録手段１５の画像データを電子機器２側に転送することもできる。また、図３では、デジタカメラ１側の第二データ処理手段を省略した状態が描かれているが、デジタルカメラとしては、図１に示すデジタルカメラ１、すなわち第二データ処理手段１６を内蔵したデジタルカメラ１を使用することもできる。
【００２４】
以上の説明では、撮像装置としてデジタルカメラ１で静止画を撮影する場合を説明しているが、本発明はデジタルカメラ、その他のカメラを使用して動画を撮影する場合にも同様に適用することができる。
【図面の簡単な説明】
【００２５】
【図１】本発明にかかる撮像装置の概略構成を示すブロック図である。
【図２】上記撮像装置で撮影した画像の一例を示す図である。
【図３】本発明にかかる画像処理システムの概略構成を示すブロック図である。
【符号の説明】
【００２６】
１    撮像装置（デジタルカメラ）
２    電子機器（パーソナルコンピュータ）
５    欠落領域
１１    撮像手段
１２    信号処理手段
１３    第一データ処理手段
１４    内部記録手段
１５    外部記録手段
１６    第二データ処理手段
１７    表示手段
２６    第二データ処理手段
２７    表示手段
Ｘ    主領域
Ｙ    副領域
【図１】
2005354211.tif 000003
【図２】
2005354211.tif 000004
【図３】
2005354211.tif 000005