(57)【要約】【課題】  複数の被写体を含む画像から特定の被写体のみを分離して保存や出力する処理を、容易且つ確実に行うことが可能な撮像装置を提供することにある。【解決手段】  第１及び第２の被写体を同時に撮像可能なＣＣＤ４１と、撮像された画像情報を取得する画像情報取得手段５１と、第１の焦点距離情報と第２の焦点距離情報とをそれぞれ取得する焦点距離情報取得手段５２と、前記画像情報に前記第１及び第２の焦点距離情報を埋め込む情報合成手段５３と、を有することを特徴とする。これにより、ＣＣＤ４１により同時に撮像された第１及び第２の被写体の画像情報に、第１の焦点距離情報と第２の焦点距離情報とを埋め込むことができるので、第１の焦点距離情報と第２の焦点距離情報とに基づく画像処理、例えば、第１の被写体又は第２の被写体を切り出すトリミング処理等を、容易且つ確実に行うことが可能である。【選択図】  図４
2006270488.tif 000002
【特許請求の範囲】
【請求項１】
第１の被写体と第２の被写体とを同時に撮像可能な撮像手段と、
前記撮像手段により撮像された前記第１の被写体と第２の被写体との画像情報を取得する画像情報取得手段と、
前記第１の被写体の焦点距離に関する第１の焦点距離情報と前記第２の被写体の焦点距離に関する第２の焦点距離情報とをそれぞれ取得する焦点距離情報取得手段と、
前記画像情報に前記第１及び第２の焦点距離情報を埋め込む情報処理手段と、を有することを特徴とする撮像装置。
【請求項２】
前記第１及び第２の焦点距離情報の相違に基づいて、前記第１の被写体の画像又は第２の被写体の画像を分離する分離手段を、更に、有することを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記分離手段は、更に、近似色による認識機能、又は、直線若しくは曲線認識機能の少なくとも一つを補完的に用いて、前記第１の被写体の画像又は第２の被写体の画像を分離することを特徴とする請求項２に記載の撮像装置。
【請求項４】
前記第１及び第２の焦点距離情報が埋め込まれた前記画像情報を保存する保存手段、又は、出力する出力手段の少なくとも一つを有することを特徴とする請求項１乃至３に記載の撮像装置。
【請求項５】
第１の被写体と第２の被写体とを含む画像における画像処理方法において、
前記第１の被写体の焦点距離と前記第２の被写体の焦点距離との相違に基づいて、前記第１の被写体と前記第２の被写体とをそれぞれ認識する認識工程と、
前記認識工程において認識された一方の被写体を分離し、選択的に別個の画像情報として保存する保存処理工程、又は、選択的に別個の画像情報として出力する出力処理工程のいずれか一方の工程と、を含むことを特徴とする画像処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、被写体を撮像（又は「撮影」という）するデジタル式の撮像装置に関し、特に、撮像された画像のトリミング（切り出し処理）機能を有する撮像装置に関する。また、撮像された画像の画像処理方法に関し、特に、撮像された画像のトリミングを行う画像処理方法に関する。
【背景技術】
【０００２】
被写体を撮像するデジタル式の撮像装置には、例えば、デジタルスチルカメラ（以下、「デジタルカメラ」という）や、撮像機能を備えた携帯用電話機（以下、「携帯電話」という）等があり、近年、このようなデジタル式の撮像装置が急速に普及しつつある。
【０００３】
デジタルカメラ（デジタル式撮像装置）では、撮像された画像は画像データ（デジタルデータ）に変換されてカメラ内部のメモリ、或いは着脱可能なＩＣカード等の記録媒体（リムーバブルメディア）に記録される。こうして記録された画像（画像データ）は、カメラ付属の液晶モニタに表示させることができると共に、家庭用のパーソナルプリンタ等で印刷して鑑賞することができる。また、記録された画像データをパソコンに取り込み、インターネットを介して、取り込んだ画像データを電子メールで送信したり、プリントサービスサイトを経由して写真プリントの注文をしたりすることが可能である。
【０００４】
また、コンピュータ上で編集・出版作業を行うＤＴＰ（ＤｅｓｋＴｏｐ Ｐｕｂｌｉｓｈｉｎｇ）では、デジタルカメラで撮影された画像（画像データ）を使用するのが便利である。従来の銀塩カメラで撮影された写真画像を用いる場合、写真画像を電子化（デジタル化）する必要があった。すなわち、スキャナ装置を用いてリバーサルフィルム等の原稿から写真画像を読み取って、読み取った画像をデジタルの画像データに変換し、コンピュータに入力していた。しかし、デジタルカメラで撮影された画像（画像データ）は既にデジタル化されているので、スキャナ装置を用いる面倒な作業が不要である。
【０００５】
また、ＤＴＰ作業において、必要とされる画像は、画像全体ではなくてその一部分であることが多い。このため、画像全体から必要な部分の画像のみを切り出すトリミングが実施される。このトリミングの技術としては、矩形領域の位置やサイズの指定により、原稿上の必要な画像部分を予め設定してから、スキャナ装置により設定した部分の画像のみを原稿から読み取る技術が、従来からある。また、コンピュータにおいて、画像データに基づいてディスプレイに画像を表示させ、表示画面上に切り出しを行う矩形領域を描画させ、切り出しに必要な画像の位置とサイズとを設定し、画像データに対してトリミング処理を行うものもある。このような、コンピュータ等の画像処理装置を用いたトリミング処理に関する技術が、例えば、特許文献１に記載されている。
【０００６】
また、デジタルカメラの高性能・高機能化に伴い、画像処理・編集機能を有するデジタルカメラも登場しており、当該機能を有するデジタルカメラでは、トリミング処理を行うことも可能である。このようなトリミング機能を有するデジタルカメラは、例えば、特許文献２に記載されている。  
【特許文献１】特開２００４−１５３５１３号公報
【特許文献２】特開２００４−１７２６５５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
上記特許文献１に記載された画像処理装置は、表示手段に画像データに基づく画像を表示すると共に当該画像上に切り出し領域を表す枠を重ね合わせて表示し、前記画像上の予め定められた所定位置に前記切り出し領域を所定の縦横比の矩形となるように初期設定し、前記表示手段に表示された前記枠が表す前記切り出し領域の位置及びサイズの少なくとも一方の変更指示を受け付けると共に前記変更指示を受け付けた場合に当該変更指示に従って前記切り出し領域を変更し、前記画像データから前記切り出し領域内の画像部分を切り出した切り出し画像データを作成することを特徴としている。
【０００８】
これにより、表示手段の画像上に、所定の縦横比の矩形となるように切り出し領域を表す枠が重ね合わされて表示され、この切り出し領域は、必要に応じて、切り出し領域の位置やサイズが変更され、画像データから当該切り出し領域内の画像部分を切り出した切り出し画像データが作成される。ここで、切り出し領域は、画像上の予め定められた所定位置、例えば画像の中央部などに初期設定されるので、初期状態では、表示手段には、画像データに基づく画像上の所定位置に切り出し領域を表す枠が表示される。したがって、前記所定位置を画像上の必要な部分があることが多い位置に予め定めておけば、切り出し領域の位置及びサイズのうち、少なくとも位置の変更（設定）を不要にすることができ、また、必要であっても微調整するだけで済むため、従来よりも切り出し領域を設定する際のユーザの作業負担を軽減することが可能である。
【０００９】
また、上記特許文献２に記載されたデジタルカメラは、撮影された画像又は読み出された画像を画像表示手段に表示し、表示された画像中からトリミングする一部領域を指定する領域指定手段と、指定されたトリミング範囲を前記画像表示手段の画面上に提示させるトリミング範囲提示手段と、指定された前記トリミング範囲内の画像データの容量を算出する容量算出手段とを有し、算出された前記トリミング範囲内の画像データの容量を指定された前記トリミング範囲と共に前記画像表示手段に表示することを特徴としている。
【００１０】
これにより、ユーザは、画像全体の中からトリミングによって切り出される画像範囲を容易に把握することができると共に、トリミングによって生成される画像の画像データの大きさ（容量）を事前に知ることができる。この結果、簡単な操作でトリミングを行うことが可能となり、また、トリミング範囲と画像データの容量をリアルタイムで比較検討することができるので、トリミング範囲の決定に有効である。
【００１１】
しかし、上記特許文献１に記載された画像処理装置、及び、上記特許文献２に記載されたデジタルカメラのいずれも、矩形に形成された領域を画像全体から切り出すトリミングであって、画像上に示される特定の被写体をトリミングするものではない。すなわち、複数の被写体を含む画像から特定の被写体のみを切り出す場合、この特定の被写体を含む矩形領域を切り出すことはできるが、切り出された領域はあくまでも矩形をしており、特定の被写体の形状に基づいた切り出しはできない。また、特定の被写体の形状に基づいた切り出し処理を実施しようとすれば、大変面倒な作業を繰り返し行う必要がある。
【００１２】
本発明は、上記のような種々の課題に鑑みなされたものであり、その目的は、複数の被写体を含む画像から特定の被写体のみを分離して保存や出力する処理を、容易且つ確実に行うことが可能な撮像装置を提供することにある。また、複数の被写体を含む画像から特定の被写体のみを分離して保存や出力する処理を、容易且つ確実に実施することが可能な画像処理方法を提供することにある。
【課題を解決するための手段】
【００１３】
上記目的達成のため、本発明の撮像装置では、第１の被写体と第２の被写体とを同時に撮像可能な撮像手段と、前記撮像手段により撮像された前記第１の被写体と第２の被写体との画像情報を取得する画像情報取得手段と、前記第１の被写体の焦点距離に関する第１の焦点距離情報と前記第２の被写体の焦点距離に関する第２の焦点距離情報とをそれぞれ取得する焦点距離情報取得手段と、前記画像情報に前記第１及び第２の焦点距離情報を埋め込む情報処理手段と、を有することを特徴としている。これにより、撮像手段により同時に撮像された第１の被写体と第２の被写体との画像情報に、第１の焦点距離情報と第２の焦点距離情報とを埋め込むことができるので、当該第１及び第２の焦点距離情報に基づく画像処理、例えば、第１の被写体又は第２の被写体を切り出すトリミング処理等を、容易且つ確実に行うことが可能である。
【００１４】
また、本発明の撮像装置では、前記第１及び第２の焦点距離情報の相違に基づいて、前記第１の被写体の画像又は第２の被写体の画像を分離する分離手段を、更に、有することを特徴としている。これにより、前記撮像手段により同時に撮像された第１の被写体と第２の被写体との画像から、第１の被写体又は第２の被写体の画像のみを分離する処理を、容易に且つ確実に行うことが可能である。
【００１５】
また、本発明の撮像装置では、前記分離手段は、更に、近似色による認識機能、又は、直線若しくは曲線認識機能の少なくとも一つを補完的に用いて、前記第１の被写体の画像又は第２の被写体の画像を分離することを特徴としている。これにより、前記分離手段は、より正確に、前記第１の被写体又は第２の被写体の画像を分離することが可能である。
【００１６】
更に、本発明の撮像装置では、前記第１及び第２の焦点距離情報が埋め込まれた前記画像情報を保存する保存手段、又は、出力する出力手段の少なくとも一つを有することを特徴としている。これにより、前記第１の被写体の画像情報と第２の被写体の画像情報とを一体若しくは分離された状態で、保存及び／又は出力することが可能である。
【００１７】
また、本発明の画像処理方法では、第１の被写体と第２の被写体とを含む画像における画像処理方法において、前記第１の被写体の焦点距離と前記第２の被写体の焦点距離との相違に基づいて、前記第１の被写体と前記第２の被写体とをそれぞれ認識する認識工程と、前記認識工程において認識された一方の被写体を分離し、選択的に別個の画像情報として保存する保存処理工程、又は、選択的に別個の画像情報として出力する出力処理工程のいずれか一方の工程と、を含むことを特徴としている。
【００１８】
これにより、第１の被写体と第２の被写体とを含む画像から、前記第１の被写体の焦点距離と前記第２の被写体の焦点距離との相違に基づいて、前記第１及び第２の被写体をそれぞれ別々に認識でき、認識された一方の被写体を分離し、選択的に別個の画像情報として保存や出力できるので、複数の被写体を含む画像から特定の被写体のみを切り出して保存や出力するトリミング処理を、容易且つ確実に実施することが可能である。
【発明を実施するための最良の形態】
【００１９】
以下、本発明に係る撮像装置及び画像処理方法の一実施形態として、撮像装置の１つであるデジタルカメラについて、図１乃至図６を参照しながら説明する。なお、以下に説明する実施形態は特許請求の範囲にかかる発明を限定するものではなく、また実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
【００２０】
図１は、本発明に係る撮像装置としてのデジタルカメラ１０の外観を示す正面図である。図２は同平面図、図３は同背面図である。図１〜３を参照して、先ず、デジタルカメラ１０の概略について説明する。
【００２１】
デジタルカメラ１０の正面には、図１に示すように、撮影レンズ１２、ファインダ窓１４、焦点距離検出センサ１５、ストロボ１６、ストロボ調光センサ１８等が配設されている。また、デジタルカメラ１０の内部で、撮影レンズ１２の結像位置には、図１には図示しない撮像素子（以下、「ＣＣＤ」という）４１（図４参照）が配設されている。焦点距離検出センサ１５は、赤外線等を照射し、被写体に反射して戻ってきた赤外線等を検出し、被写体の焦点距離を検出する。
【００２２】
次に、デジタルカメラ１０の上面には、図２に示すように、シャッタボタン２２、電源スイッチ２４、ズーム拡大ボタン２６、ズーム縮小ボタン２８が配設されている。シャッタボタン２２は２段階式に構成され、シャッタボタン２２を軽く押して止める「半押し」の状態で自動ピント合わせ（ＡＦ）及び自動露出制御（ＡＥ）が作動してＡＦとＡＥをロックし、「半押し」から更に押し込む「全押し」することで後述する撮影（撮像）が行われる。
【００２３】
ズーム拡大ボタン２６、ズーム縮小ボタン２８は、後述するように、操作基板４７と絞り制御部４５とを介して撮影レンズ１２に接続され（図４参照）、ズーム拡大ボタン２６、ズーム縮小ボタン２８を押圧操作することによって、所定範囲内の任意の撮影倍率に調節することが可能である。
【００２４】
次に、デジタルカメラ１０の背面には、図３に示すように、文字表示部３５、液晶表示部（以下、「ＬＣＤ」という）３８、モードスイッチ３０、十字カーソルボタン３２、ファインダ３４等が配設されている。
【００２５】
文字表示部３５は、カメラの状態や撮影モード等に関する情報（いわば撮影ステータス）を表示するものであり、例えば、内蔵されている図示しないバッテリの残量チェック表示、撮影可能コマ数の表示、ストロボ発光有無の表示等が行われる。また、文字表示部３５の横には、ストロボ発光の有無を設定するストロボボタン３６や、マクロ撮影を設定するマクロボタン３７が配設されている。
【００２６】
ＬＣＤ３８は、主として画像を表示するもので、撮影時に撮影したい画像の確認ができるように、撮影レンズ１２にて撮影された画像（スルー動画）を表示し、また、デジタルカメラ１０に装填された後述するメモリカード７４から記録済みの画像を読み出して再生表示する。
【００２７】
モードスイッチ３０は、十字カーソルボタン３２の外周に配置されたリング部材からなり、時計回転方向及び反時計回転方向の両方向に回動自在となっている。このモードスイッチ３０は、カメラの機能（モード）を変更等するもので、このモードスイッチ３０を回動操作することにより、例えば、撮影を行う撮影モード、撮影した画像の再生を行う再生モード、デジタルカメラ１０の各種設定の登録・変更等をする設定モードの選択を行うことができる。
【００２８】
十字カーソルボタン３２は、中央のボタンと、上下左右のいずれかの縁部に配設されたキー（上／下／左／右キー）とを備える。十字カーソルボタン３２は、上／下／左／右キーを押圧することによって十字カーソルボタン３２が傾き、対応する４方向（上、下、右、左）の指示を入力でき、また、中央のボタンを押圧することによっても入力ができる。この十字カーソルボタン３２は、前述した設定モードの各種設定項目の選択や、設定内容の変更、再生コマの送り／戻しを指示する操作ボタンとして使用される。また、これに加えて十字カーソルボタン３２は、後述するトリミング処理部６０（図４参照）の操作部としても用いられ、トリミングしたい被写体を指し示すカーソルを、上／下／左／右キーの押圧された４方向（上、下、右、左）に応じて移動させて、被写体の選択を行うことができる。
【００２９】
また、デジタルカメラ１０の側面には、記録媒体としてのメモリカード７４（図４参照）が挿入されるメモリスロット１９（図１、図３参照）が配設されている。本実施形態におけるデジタルカメラ１０では、内蔵されたカードリーダ／ライタ装置７３（図４参照）によって、撮影された画像（画像情報）がメモリカード７４に記録されて保存されるほか、メモリカード７４に記録保存されている画像（画像情報）を、デジタルカメラ１０に読み出すことも可能である。
【００３０】
次に、上記デジタルカメラ１０の内部構成（制御部）とその機能について、図４を参照して説明する。図４は、デジタルカメラ１０の内部構成（制御部）とその機能とを示したブロック図である。
【００３１】
デジタルカメラ１０の制御部は、主として、操作基板４７、ＣＰＵ４０、画像情報処理部５０、トリミング処理部６０、メモリ（ＤＲＡＭ）７０等から構成されている。
【００３２】
操作基板４７は、図１〜３に示した各種操作部のそれぞれと回路接続されており、撮影者によるこれら操作部の操作（例えば、シャッタボタン２２の押圧操作やモードスイッチ３０の回転操作等）に基づいて、操作基板４７からＣＰＵ４０に信号が出力される。すなわち、操作基板４７は、図４に示すように、シャッタボタン２２、ズーム拡大ボタン２６、ズーム縮小ボタン２８、十字カーソルボタン３２にそれぞれ接続され、また、絞り制御部４５を介して撮影レンズ１２に接続されている。前述したように、ズーム拡大ボタン２６、ズーム縮小ボタン２８を押圧操作することにより、絞り制御部４５が撮影レンズ１２を構成する図示しないフォーカスレンズとズームレンズとを制御することにより所望の撮影倍率に調節が可能である。このように、シャッタボタン２２、ズーム拡大ボタン２６、ズーム縮小ボタン２８、十字カーソルボタン３２の押圧操作によって、各ボタンに対応した指示信号が操作基板４７からＣＰＵ４０に出力される。
【００３３】
ＣＰＵ４０は、操作基板４７からの指示信号の入力に基づいて、画像情報処理部５０に制御信号を出力すると共に、デジタルカメラ１０における各種データの処理を集中的に行っている。すなわち、ＣＰＵ４０は、焦点距離演算部４６、画像情報処理部５０、トリミング処理部６０等と一体となって後述する各処理を行い、更に、各回路を総括的に制御している。
【００３４】
撮像素子としてのＣＣＤ４１は、撮影レンズ１２から取り込まれて結像された被写体光を、入射光量に応じた量の信号電荷に変換する。この信号電荷は電圧信号（画像信号）として順次ＣＣＤ４１から読み出されて、アナログ信号処理部４２に送信される。なお、撮像素子としてはこのようなＣＣＤに限らず、ＣＭＯＳイメージセンサー等を用いてもよい。
【００３５】
アナログ信号処理部４２は、ＣＣＤ４１から送信された画像信号にサンプリングやホワイトバランス調整等の所要のアナログ処理を施す。そして、アナログ処理された画像信号は、Ａ／Ｄ変換部４３によって画像データ（デジタルデータ）に変換され、画像情報処理部５０に出力される。なお、上記ＣＣＤ４１、アナログ信号処理部４２、及び、Ａ／Ｄ変換部４３は、タイミングジェネレータ（Ｔ／Ｇ）４８からのタイミング信号に同期して動作している。
【００３６】
焦点距離演算部４６は、ＣＣＤ４１及び絞り制御部４５からの信号に基づいて焦点距離データ（デジタルデータ）を生成する。すなわち、絞り制御部４５は、図４に示すように、焦点距離検出センサ１５に接続されており、焦点距離検出センサ１５によって検出された焦点距離に関する信号を焦点距離演算部４６に送信する。本実施形態では、ＣＣＤ４１における所定の画素（例えば、１００画素の間隔を有して配置された画素）に対応した焦点距離が焦点距離検出センサ１５により検出され、焦点距離演算部４６がこの所定の画素に対応した焦点距離データを生成し、この焦点距離データを画像情報処理部５０に出力する。
【００３７】
画像情報処理部５０は、Ａ／Ｄ変換部４３から出力された画像データと、焦点距離演算部４６から出力された焦点距離データとを合成して、焦点距離情報が埋め込まれた画像情報を生成する。すなわち、画像情報処理部５０は、図４（右中央部）に示すように、画像情報取得手段５１と、焦点距離情報取得手段５２と、情報合成手段５３とを備えている。画像情報取得手段５１は、Ａ／Ｄ変換部４３から出力された画像データに、必要に応じてガンマ補正等のデジタル処理を施した後、合成可能な画像情報を取得する。焦点距離情報取得手段５２は、焦点距離演算部４６から出力された焦点距離データを補正等するデジタル処理を施した後、合成可能な焦点距離情報を取得する。情報合成手段５３は、画像情報取得手段５１により取得された画像情報に、焦点距離情報取得手段５２により取得された焦点距離情報を埋め込んで、合成画像情報を生成する。
【００３８】
メモリカード７４は、合成画像情報を記録保存する着脱可能な記録媒体である。モードスイッチ３０（図３参照）を撮影モードとし、シャッタボタン２２（図２参照）の押圧操作による記録指示入力があると、ＣＰＵ４０から画像情報処理部５０に制御信号が出力され、ＣＣＤ４１から１コマ分の画像データが画像情報処理部５０に読み込まれ、画像情報処理部５０にて前述した各処理が施された後、合成画像情報がメモリ（ＲＡＭ）７０に書き込まれる。メモリ（ＲＡＭ）７０に書き込まれた合成画像情報は圧縮伸張回路７２によって圧縮処理され、カードリーダ／ライタ装置７３によってメモリカード７４に記録保存される。
【００３９】
ＬＣＤ３８は、前述したように、撮影レンズ１２にて撮影されている画像（スルー動画）を表示する。すなわち、モードスイッチ３０を撮影モードにすると、画像情報処理部５０にはＣＣＤ４１から画像データが連続して読み込まれ、画像情報取得手段５１によりデジタル処理を施された画像情報が、表示メモリ８０に書き込まれる。表示メモリ８０の画像情報は順次新しく読み込まれた画像情報によって書き換えられ、これによりＬＣＤ３８にてスルー動画が表示される。なお、ＬＣＤ３８に表示される画像は撮影者に把握できればよいので、一般にパソコン等で用いられる液晶モニタと比較して、画素数の少ないもの（解像度の低いもの）が用いられる。これに伴い、表示メモリ８０に書き込まれる画像情報も同様に解像度の低いものが用いられている。
【００４０】
また、ＬＣＤ３８は、前述したように、メモリカード７４に記録保存されている画像（画像情報）も表示することができる。すなわち、モードスイッチ３０を再生モードとし、所定の操作によってメモリカード７４に記録されたいずれかの画像情報の再生を指定すると、その画像情報がメモリカード７４からカードリーダ／ライタ装置７３によって読み出され、圧縮伸張回路７２によって伸張処理された後、画像情報処理部５０にてデジタル処理が行われ、表示メモリ８０を介してＬＣＤ３８に表示される。  
次に、本発明の特徴部分の一部を構成するトリミング処理について説明する。なお、本明細書中、トリミングとは、複数の被写体を含む全体画像から、特定の被写体のみを分離することを主に意味し、更に、分離された被写体の画像情報を記録保存又は出力することを含む場合もある。
【００４１】
トリミング処理部６０は、画像情報処理部５０で生成された合成画像情報から、特定の被写体の画像情報を切り出す処理（トリミング処理）を行う。また、メモリカード７４に記録保存された合成画像情報を読み出して、この合成画像情報についても、同様のトリミング処理を行うことが可能である。
【００４２】
トリミング処理部６０は、図４に示すように、被写体認識手段６１と、画像分離手段６２とを備える。被写体認識手段６１は、距離情報認識手段６１ａと、近似色認識手段６１ｂと、直線／曲線認識手段６１ｃとを備え、合成画像情報全体からトリミング可能な複数の被写体を認識する。距離情報認識手段６１ａは、合成画像情報に埋め込まれている距離情報に基づいて、トリミング可能な複数の被写体を認識する。近似色認識手段６１ｂは、近似色（又は同系色）に基づいて複数の被写体を認識する。直線／曲線認識手段６１ｃは、直線又は曲線を予測して複数の被写体を認識する。
【００４３】
画像分離手段６２は、被写体認識手段６１により認識された複数の被写体のうち特定の被写体を分離して、分離された被写体の画像情報（合成画像情報であっても当然よい。以下、同様）を生成する。この分離された被写体の画像情報は、表示メモリ８０に送出されてＬＣＤ３８に表示されるので、分離された被写体の確認を容易に行うことができる。また、分離された被写体の画像情報は、メモリ（ＲＡＭ）７０に送出され、圧縮伸張回路７２及びカードリーダ／ライタ装置７３を介してメモリカード７４に記録保存することができる。
【００４４】
続いて、被写体認識手段６１による複数の被写体の認識について、図５を参照して、詳細に説明する。図５は、被写体Ｘと被写体Ｙとを同時に撮影した第１の撮影画像１００と、第２の撮影画像２００とを示す。図５（Ａ）に示す第１の撮影画像１００では、被写体Ｘと被写体Ｙとは離間している。これに対し、図５（Ｂ）に示す第２の撮影画像２００では、被写体Ｘと被写体Ｙとは一部重なっていて、被写体Ｙの左下端近傍は被写体Ｘの後ろに隠れてしまい見えない（説明の都合上、被写体Ｙの輪郭を一点鎖線で示す）。なお、図５（Ａ）、（Ｂ）共に、被写体Ｘの焦点距離と被写体Ｙの焦点距離とは異なり、被写体Ｘの焦点距離は被写体Ｙの焦点距離より短いものとする。
【００４５】
前述したように、画像情報処理部５０（情報合成手段５３）は画像情報に焦点距離情報を埋め込んだ合成画像情報を生成するので、第１、第２の撮影画像１００、２００の合成画像情報には、被写体Ｘの焦点距離情報と被写体Ｙの焦点距離情報とがそれぞれ含まれている。
【００４６】
先ず、図５（Ａ）に示す第１の撮影画像１００における、被写体の認識について説明する。距離情報認識手段６１ａは、第１の撮影画像１００の合成画像情報に埋め込まれた焦点距離情報の相違に基づいて、被写体Ｘと被写体Ｙとが含まれることを認識することができる。第１の撮影画像１００では、前述したように、被写体Ｘと被写体Ｙとは離間しているので、画像分離手段６２は、選択された被写体Ｘ又は被写体Ｙの画像を分離し、分離した被写体Ｘ又は被写体Ｙの画像情報を生成する。
【００４７】
次に、図５（Ｂ）に示す第２の撮影画像２００における、被写体の認識について説明する。第２の撮影画像２００のように、被写体Ｘと被写体Ｙとが一部重なっている場合等には、距離情報認識手段６１ａによる認識に加え、近似色認識手段６１ｂ及び直線／曲線認識手段６１ｃによる認識も重畳的に実施される。すなわち、第２の撮影画像２００では、被写体Ｘの画像はすべて示されているが、被写体Ｙの一部（左下端近傍）画像は隠れて示されていない。
【００４８】
ここで、被写体Ｘのトリミング処理が選択されている場合、第１の撮影画像１００と同様に、焦点距離情報の相違に基づいて、被写体Ｘと被写体Ｙとが含まれることが距離情報認識手段６１ａにより認識され、画像分離手段６２により、被写体Ｘが分離され、分離された被写体Ｘの画像情報が生成される。一方、被写体Ｙのトリミング処理が選択されている場合、焦点距離情報の相違に基づいて、被写体Ｘと被写体Ｙとが含まれることが認識され、更に、被写体Ｘの輪郭と被写体Ｙの輪郭とが交わっているので、焦点距離の長い被写体Ｙの画像には被写体Ｘの後ろに隠れている部分が存在することが予測される。そして、直線／曲線認識手段６１ｃが被写体Ｙの輪郭の形状を予測し、例えば、輪郭が直線又は曲線で示されている場合には、隠れている部分の輪郭を予測し（直線又は曲線を延長する）、被写体Ｙの画像を補完する。このようにして、予測補完された被写体Ｙが、画像分離手段６２により分離され、予測補完後の被写体Ｙの画像情報が生成される。
【００４９】
また、図５（Ｂ）に示す第２の撮影画像２００において、例えば、被写体Ｘと被写体Ｙとが、同一の壁面に貼られた絵や写真である場合、被写体Ｘと被写体Ｙとが略同一の焦点距離を有する。このような場合、距離情報認識手段６１ａは、被写体Ｘと被写体Ｙとが含まれることを認識することが困難である。しかし、近似色認識手段６１ｂ、直線／曲線認識手段６１ｃは、被写体Ｘと被写体Ｙとが第２の撮影画像２００に含まれることを認識することができる。特に、被写体Ｘと被写体Ｙとが異なる色彩を示す場合、近似色認識手段６１ｂが被写体Ｘと被写体Ｙとをそれぞれ認識し、また、直線／曲線認識手段６１ｃが、前述したように、被写体Ｘの輪郭と被写体Ｙの輪郭とを認識し、更に、被写体Ｙの隠れている部分の輪郭を予測補完する。
【００５０】
このように、本実施形態では、距離情報認識手段６１ａによる認識と、近似色認識手段６１ｂによる認識と、直線／曲線認識手段６１ｃによる認識とがそれぞれ実施されるので、被写体Ｘ及び被写体Ｙを確実に認識することが可能で、更に、直線／曲線認識手段６１ｃによる予測補完処理により、正確な被写体Ｙの画像情報を生成することが可能である。
【００５１】
次に、本発明に係るデジタルカメラ１０における、複数の被写体の同時撮影（撮像）から、特定の被写体をトリミングするまでの流れについて、図６を参照して説明する。図６は、被写体の撮影（撮像）からトリミングまでの処理の流れを示すフローチャートである。
【００５２】
先ず、デジタルカメラ１０で撮影をする際には、モードスイッチ３０を操作して撮影モードを選択する（ステップＳ１０）。撮影したい被写体に焦点を合わせると共に、ズーム拡大ボタン２６、ズーム縮小ボタン２８を押圧操作して、所定範囲内の任意の撮影倍率に調節する。この際、ＬＣＤ３８にはスルー動画が表示されるので、ＬＣＤ３８の表示画像を確認しながら、撮影したい被写体のポーズを決定することができる。
【００５３】
続いて、シャッタボタン２２を押圧操作（記録指示入力）することで被写体の撮影が実行される（ステップＳ１１）。この押圧操作により、前述したように、画像情報処理部５０にて各処理が施された後、合成画像情報がメモリ（ＲＡＭ）７０に書き込まれると共に、圧縮処理された当該合成画像情報がメモリカード７４に記録保存される（ステップＳ１２）。
【００５４】
次に、撮影した被写体のトリミング処理を行うために、デジタルカメラ１０のモード切り替えを行う（ステップＳ１３）。本実施形態におけるデジタルカメラ１０では、トリミング機能は再生モードに含まれる一つの機能となっているので、十字カーソルボタン３２を操作して、トリミング機能を選択する（ステップＳ２０）。
【００５５】
次に、十字カーソルボタン３２等を更に操作して、トリミング処理を行う画像（合成画像情報）を選択し、そして、トリミングしたい被写体を選択する。続いて、距離情報認識手段６１ａによる焦点距離情報の相違に基づく被写体の認識（ステップＳ２２）、近似色認識手段６１ｂによる被写体の認識（ステップＳ２３）、及び、直線／曲線認識手段６１ｃによる被写体の認識（ステップＳ２４）が順次実施される。被写体認識手段６１（距離情報認識手段６１ａ、近似色認識手段６１ｂ、直線／曲線認識手段６１ｃ）により、画像中に含まれる複数の被写体が認識されると（ステップＳ２５）、選択された被写体のトリミング処理（ステップＳ３０）が実行される。
【００５６】
一方、ステップＳ２５において、画像中に複数の被写体が認識されなかった場合には、閾値範囲を拡大した上でステップＳ２２〜Ｓ２４を再度実施するか否かの選択が可能である。例えば、距離情報認識手段６１ａによる認識（ステップＳ２２）では、略同一の焦点距離を有する画素の集合を一つの被写体と認識するが、立体的な被写体の場合、各焦点距離は被写体の構造によって異なる。そこで、一つの被写体と認識可能な焦点距離の範囲（閾値）を拡大する。同様に、近似色認識手段６１ｂによる認識（ステップＳ２３）では、近似色の範囲（閾値）を拡大し、直線／曲線認識手段６１ｃによる認識（ステップＳ２４）では、直線／曲線の認識可能な範囲（閾値）を拡大する。
【００５７】
次に、ステップＳ３０のトリミング処理では、前述したように、画像分離手段６２によって、選択された被写体が分離され、分離された被写体の画像情報が生成され、そして、当該画像情報は、メモリ（ＲＡＭ）７０に送出され、更に、圧縮伸張回路７２及びカードリーダ／ライタ装置７３を介してメモリカード７４に記録保存される。また、分離された被写体の画像情報は、前述したように、表示メモリ８０にも送出され、分離された被写体の画像のみがＬＣＤ３８に表示される。
【００５８】
以上、本発明の実施形態について説明したが、本発明に係るデジタルカメラ１０によれば、第１の被写体と第２の被写体とを同時に撮像可能なＣＣＤ４１と、ＣＣＤ４１により撮像された第１の被写体と第２の被写体との画像情報を取得する画像情報取得手段５１と、第１の被写体の焦点距離に関する第１の焦点距離情報と第２の被写体の焦点距離に関する第２の焦点距離情報とをそれぞれ取得する焦点距離情報取得手段５２と、前記画像情報に前記第１及び第２の焦点距離情報を埋め込む情報合成手段５３（情報処理手段）と、を有することを特徴としている。
【００５９】
これにより、ＣＣＤ４１により同時に撮像された第１の被写体と第２の被写体との画像情報に、第１の焦点距離情報と第２の焦点距離情報とを埋め込むことができるので、当該第１及び第２の焦点距離情報に基づく画像処理、例えば、第１の被写体又は第２の被写体を切り出すトリミング処理等を、容易且つ確実に行うことが可能である。
【００６０】
また、本発明に係るデジタルカメラ１０によれば、前記第１及び第２の焦点距離情報の相違に基づいて、前記第１の被写体の画像又は第２の被写体の画像を分離する画像分離手段６２（分離手段）を、更に、有することを特徴としている。これにより、ＣＣＤ４１により同時に撮像された第１の被写体と第２の被写体との画像から、第１の被写体又は第２の被写体の画像のみを分離する処理を、容易に且つ確実に行うことが可能である。
【００６１】
また、本発明に係るデジタルカメラ１０によれば、画像分離手段６２は、更に、近似色による認識機能（近似色認識手段６１ｂによる認識）、又は、直線若しくは曲線認識機能（直線／曲線認識手段６１ｃによる認識）の少なくとも一つを補完的に用いて、前記第１の被写体の画像又は第２の被写体の画像を分離することを特徴としている。これにより、画像分離手段６２は、より正確に、前記第１の被写体又は第２の被写体の画像を分離することが可能である。
【００６２】
また、本発明に係るデジタルカメラ１０によれば、前記第１及び第２の焦点距離情報が埋め込まれた合成画像情報を記録保存する保存手段（カードリーダ／ライタ装置７３、メモリカード７４）、又は、出力表示するＬＣＤ３８（出力手段）の少なくとも一つを有することを特徴としている。これにより、前記第１の被写体の画像情報と第２の被写体の画像情報とを一体若しくは分離された状態で、保存及び／又は出力することが可能である。
【００６３】
また、本発明に係る画像処理方法によれば、被写体Ｘ（第１の被写体）と被写体Ｙ（第２の被写体）とを含む撮影画像１００、２００における画像処理方法において、被写体Ｘの焦点距離と被写体Ｙの焦点距離との相違に基づいて、被写体Ｘと被写体Ｙとをそれぞれ認識する認識工程（ステップＳ２２、Ｓ２５）と、前記認識工程において認識された一方の被写体を分離し、選択的に別個の画像情報としてメモリカード７４に記録保存する保存処理工程、又は、選択的に別個の画像情報としてＬＣＤ３８に出力表示する出力処理工程のいずれか一方の工程（ステップＳ３０）と、を含むことを特徴としている。
【００６４】
これにより、被写体Ｘと被写体Ｙとを含む撮影画像１００、２００から、被写体Ｘの焦点距離と被写体Ｙの焦点距離との相違に基づいて、被写体Ｘと被写体Ｙとをそれぞれ認識でき、認識された一方の被写体を分離し、選択的に別個の画像情報として記録保存や出力表示ができるので、複数の被写体を含む画像から特定の被写体のみを切り出して保存や出力するトリミング処理を、容易且つ確実に実施することが可能である。
【００６５】
なお、本発明の範囲は上述した実施形態に限られず、特許請求の範囲の記載に反しない限り、他の様々な実施形態に適用可能である。例えば、本発明の実施形態では、デジタルカメラ１０について説明したが、複数の被写体を同時に撮像することができる撮像装置であれば、特にデジタルカメラに限定されるものではなく、例えば、撮像機能を備えた携帯用電話機等であってもよい。
【００６６】
また、本発明に係る画像処理方法は、デジタルカメラにおける画像処理に限定されるものではなく、コンピュータ等の画像処理装置における画像処理であってもよい。
【産業上の利用可能性】
【００６７】
第１及び第２の被写体を同時に撮像可能な撮像手段と、画像情報を取得する画像情報取得手段と、焦点距離情報を取得する焦点距離情報取得手段と、画像情報に焦点距離情報を埋め込む情報処理手段と、を有していれば、デジタルカメラに制限されることなく、その他の電子機器であっても適用可能である。
【００６８】
また、第１の被写体と第２の被写体とを含む画像における画像処理方法において、焦点距離の相違に基づいて、第１の被写体と第２の被写体とをそれぞれ認識する認識工程と、認識された一方の被写体を分離し、選択的に別個の画像情報として保存する保存処理工程、又は、出力する出力処理工程のいずれか一方の工程と、を含む画像処理方法であれば、デジタルカメラにおける画像処理に制限されることなく、コンピュータに代表される画像処理装置全般における画像処理に広く利用可能である。
【図面の簡単な説明】
【００６９】
【図１】本発明に係る撮像装置としてのデジタルカメラ１０の外観を示す正面図である。
【図２】本発明に係る撮像装置としてのデジタルカメラ１０の外観を示す平面図である。
【図３】本発明に係る撮像装置としてのデジタルカメラ１０の外観を示す背面図である。
【図４】デジタルカメラ１０の内部構成（制御部）とその機能とを示したブロック図である。
【図５】被写体Ｘと被写体Ｙとを同時に撮影した第１の撮影画像１００と、第２の撮影画像２００とを示す。
【図６】被写体の撮影（撮像）からトリミングまでの処理の流れを示すフローチャートである。
【符号の説明】
【００７０】
１０  デジタルカメラ、１２  撮影レンズ、１４  ファインダ窓、１５  焦点距離検出センサ、１６  ストロボ、１８  ストロボ調光センサ、１９  メモリスロット、２２  シャッタボタン、２４  電源スイッチ、２６  ズーム拡大ボタン、２８  ズーム縮小ボタン、３０  モードスイッチ、３２  十字カーソルボタン、３４  ファインダ、３５  文字表示部、３６  ストロボボタン、３７  マクロボタン、３８  液晶表示部（ＬＣＤ）、４０  ＣＰＵ、４１  撮像素子（ＣＣＤ）、４２  アナログ信号処理部、４３  Ａ／Ｄ変換部、４５  絞り制御部、４６  焦点距離演算部、４７  操作基板、４８  タイミングジェネレータ（Ｔ／Ｇ）、５０  画像情報処理部、５１  画像情報取得手段、５２  焦点距離情報取得手段、５３  情報合成手段、６０  トリミング処理部、６１  被写体認識手段、６１ａ  距離情報認識手段、６１ｂ  近似色認識手段、６１ｃ  直線／曲線認識手段、６２  画像分離手段、７０  メモリ（ＲＡＭ）、７２  圧縮伸張回路、７３  カードリーダ／ライタ装置、７４  メモリカード、１００  第１の撮影画像、２００  第２の撮影画像
【図１】
2006270488.tif 000003
【図２】
2006270488.tif 000004
【図３】
2006270488.tif 000005
【図４】
2006270488.tif 000006
【図５】
2006270488.tif 000007
【図６】
2006270488.tif 000008