(57)【特許請求の範囲】
【請求項１】
被写体を相互に異なる視点から撮像して複数の撮像画像を取得する撮像部と、
同一の注目被写体に対して上記撮像部の視点が異なるように当該撮像部を注目被写体に対して移動させながら複数回の撮影による複数の撮像画像を取得する取得部と、
上記取得部によって取得された複数の画像を合成することにより上記注目被写体が複数含まれる第１の領域を設定するとともに、上記注目被写体の画像位置が一致するように上記取得部によって取得された複数の画像を合成して合成画像を作成し、当該合成画像から上記注目被写体の画像を含む第２の領域を設定し、当該合成画像において上記第１の領域のうちの上記第２の領域を含まない領域を、加工処理する領域に設定する画像比較部と、
上記合成画像において、上記画像比較部によって設定された領域を加工処理した画像を生成する画像生成部と
を具備したことを特徴とする撮影機器。
【請求項２】
上記加工処理する領域は、上記第２の領域に含まれる上記注目被写体の周辺のローコントラスト領域であることを特徴する請求項１に記載の撮影機器。
【請求項３】
上記画像生成部は、上記撮像部の動きを検出して上記画像の生成を開始することを特徴する請求項１又は２に記載の撮影機器。
【請求項４】
上記撮像部は上記注目被写体に対して回転移動させられ、
上記第１の領域の設定に際して上記撮像部によって撮像された各撮像画像を合成する場合には、上記視点の異なる注目被写体が円形に配置されるように合成することを特徴とする請求項１に記載の撮影機器。
【請求項５】
上記画像生成部は、上記注目被写体が人物である場合、当該人物の背景に後光が差すような加工処理を施すことを特徴とする請求項１に記載の撮影機器。
【請求項６】
同一の注目被写体に対して撮像部の視点が異なるように被写体を相互に異なる視点から撮像するステップと、
複数回の撮影による複数の撮像画像を取得するステップと、
取得された複数の画像を合成することにより上記注目被写体が複数含まれる第１の領域を設定するステップと、
上記注目被写体の画像位置が一致するように取得された複数の画像を合成して合成画像を作成し、当該合成画像から上記注目被写体の画像を含む第２の領域を設定するステップと、
上記合成画像において上記第１の領域のうちの上記第２の領域を含まない領域を、加工処理する領域に設定するステップと、
上記合成画像において、上記加工処理する領域に設定された領域を加工処理した画像を生成するステップとを具備したことを特徴とする撮影方法。
【請求項７】
コンピュータに、
同一の注目被写体に対して撮像部の視点が異なるように被写体を相互に異なる視点から撮像するステップと、
複数回の撮影による複数の撮像画像を取得するステップと、
取得された複数の画像を合成することにより上記注目被写体が複数含まれる第１の領域を設定するステップと、
上記注目被写体の画像位置が一致するように取得された複数の画像を合成して合成画像を作成し、当該合成画像から上記注目被写体の画像を含む第２の領域を設定するステップと、
上記合成画像において上記第１の領域のうちの上記第２の領域を含まない領域を、加工処理する領域に設定するステップと、
上記合成画像において、上記加工処理する領域に設定された領域を加工処理した画像を生成するステップとを実行させるための撮影制御プログラム。
【請求項８】
撮像部を有する撮影機器であって、
撮像された画像内の注目被写体を際立たせるための強調処理を行う強調モードに設定するモード設定部と、
上記強調モードに設定された状態で、同一の注目被写体に対して上記撮像部の視点が異なるように当該撮像部を注目被写体に対して移動させながら複数回撮影された際に、当該視点が異なるように撮像された注目被写体を含む撮像画像を複数取得する取得部と、
上記取得部によって取得された視点の異なる注目被写体が撮像された複数の画像を合成して第１の合成画像を生成する第１の合成部と、
上記第１の合成部によって合成された第１の合成画像に基づいて、複数の上記注目被写体を含む領域を設定する領域設定部と、
上記取得部によって取得された視点の異なる注目被写体が撮像された複数の画像を上記注目被写体の画像位置が一致するように合成して、第２の合成画像を生成する第２の合成部と、
上記第２の合成画像において、上記一致するように合成された注目被写体とローコントラスト部との境界を求め、当該境界と上記領域設定部によって設定された領域とによって囲まれた領域を、加工処理する領域として検出する検出部と、
上記第２の合成画像のうち上記検出部で検出した領域を加工処理した画像を生成する画像生成部と
を具備したことを特徴とする撮影機器。
【請求項９】
上記撮像部は上記注目被写体に対して回転移動させられ、
上記第１の合成部は、上記撮像部によって撮像された各撮像画像を合成する際、上記視点の異なる注目被写体が円形に配置されるように合成する
ことを特徴とする請求項８に記載の撮影機器。
【請求項１０】
上記画像生成部は、注目被写体が人物である場合、当該人物の背景に後光が差すような加工処理を施す
ことを特徴とする請求項８に記載の撮影機器。
【請求項１１】
被写体を撮像して撮像画像を出力する撮像部と、
上記撮像画像を表示部に表示するための表示制御部と、
上記表示部に配設されるタッチパネルと、
上記表示部に表示された撮像画像の画像部分を上記タッチパネルによって指定する操作に応じて上記撮像画像中に含まれる被写体のうち１つの被写体を注目被写体として検出して強調領域候補に設定する設定部と、
上記撮像部の異なる視点からの複数回の撮像によって上記注目被写体が各撮像画像中の異なる位置に撮影された場合には、これらの撮像画像の合成によって得た第１の合成画像中に含まれる上記注目被写体の複数の画像部分の全てを含む１つの範囲を設定する範囲設定部と、
上記第１の合成画像の画像合成に用いた複数の撮像画像を上記注目被写体の画像部分の画像位置が一致するように合成して第２の合成画像を得る合成部と、
上記第２の合成画像中の各部のコントラストに基づいて上記注目被写体の画像部分と他の画像部分との境界を求めて上記強調領域候補として検出した上記注目被写体の画像部分を強調領域に設定すると共に、上記範囲設定部が設定した範囲内の上記強調領域以外の領域を加工領域に設定する領域設定部と、
上記第２の合成画像のうち上記加工領域に画像処理を施した画像を生成する画像生成部と、
を具備したことを特徴とする撮影機器。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、連写での撮影が可能な撮影機器に関する。
【背景技術】
【０００２】
近年、デジタルカメラなどの撮影機能付き携帯機器（撮影機器）が普及している。この種の撮影機器においては表示部を有して、撮影画像を表示する機能を有するものもある。更に、表示部にメニュー画面を表示して、撮影機器の操作を容易にしたものもある。
【０００３】
更に、撮像画像に対して、所定のフイルタ効果処理を適用する撮影モードを備えた撮影機器も開発されている。所定のフィルタ効果処理を撮像画像に施すことで、例えば被写体を明瞭に表示する等の各種画像処理が可能である。
【０００４】
例えば、特許文献１においては、輪郭の表現力をより高めることが可能な画像処理技術を提供する提案が開示されている。また、特許文献２においては、撮像した画像から不要な像を自動的に除去して画像を生成する画像生成方法、画像生成装置を提供する技術が開示されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００９−６４０８６号公報
【特許文献２】特開２００５−１２６６０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、特許文献１においては、オブジェクトが配置された仮想三次元空間を透視投影して基礎画像データを生成しており、極めて複雑な演算処理が必要である。
【０００７】
また、特許文献２の提案は、所定の時間間隔で３枚の画像を連続して撮像するものであり、３枚の画像のうち、２枚の画像以上で一致する部分を抽出して画像を合成する。これにより、被写界にたまたま通りがかりの第三者が入ったとしても、動きのある第三者の像は除去され、利用者と所望の風景のみが撮影された画像を得ることができる。しかしながら、特許文献２の提案においては、動きのある第三者を除去することしかできず、必ずしも注目対象物を際立たせる画像が得られるとは限らない。
【０００８】
本発明は、直感的な操作と簡単な画像処理によって、注目対象物を際だたせた撮影を可能にすることができる撮影機器、撮影方法及び撮影制御プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００９】
本発明に係る撮影機器は、被写体を相互に異なる視点から撮像して複数の撮像画像を取得する撮像部と、同一の注目被写体に対して上記撮像部の視点が異なるように当該撮像部を注目被写体に対して移動させながら複数回の撮影による複数の撮像画像を取得する取得部と、上記取得部によって取得された複数の画像を合成することにより上記注目被写体が複数含まれる第１の領域を設定するとともに、上記注目被写体の画像位置が一致するように上記取得部によって取得された複数の画像を合成して合成画像を作成し、当該合成画像から上記注目被写体の画像を含む第２の領域を設定し、当該合成画像において上記第１の領域のうちの上記第２の領域を含まない領域を、加工処理する領域に設定する画像比較部と、上記合成画像において、上記画像比較部によって設定された領域を加工処理した画像を生成する画像生成部とを具備する。
【００１０】
また、本発明に係る撮影方法は、同一の注目被写体に対して撮像部の視点が異なるように被写体を相互に異なる視点から撮像するステップと、複数回の撮影による複数の撮像画像を取得するステップと、取得された複数の画像を合成することにより上記注目被写体が複数含まれる第１の領域を設定するステップと、上記注目被写体の画像位置が一致するように取得された複数の画像を合成して合成画像を作成し、当該合成画像から上記注目被写体の画像を含む第２の領域を設定するステップと、上記合成画像において上記第１の領域のうちの上記第２の領域を含まない領域を、加工処理する領域に設定するステップと、上記合成画像において、上記加工処理する領域に設定された領域を加工処理した画像を生成するステップとを具備する。
【００１１】
また、本発明にかかる撮影制御プログラムは、コンピュータに、同一の注目被写体に対して撮像部の視点が異なるように被写体を相互に異なる視点から撮像するステップと、複数回の撮影による複数の撮像画像を取得するステップと、取得された複数の画像を合成することにより上記注目被写体が複数含まれる第１の領域を設定するステップと、上記注目被写体の画像位置が一致するように取得された複数の画像を合成して合成画像を作成し、当該合成画像から上記注目被写体の画像を含む第２の領域を設定するステップと、上記合成画像において上記第１の領域のうちの上記第２の領域を含まない領域を、加工処理する領域に設定するステップと、上記合成画像において、上記加工処理する領域に設定された領域を加工処理した画像を生成するステップとを実行させる。
また、本発明に係る撮影機器は、撮像部を有する撮影機器であって、撮像された画像内の注目被写体を際立たせるための強調処理を行う強調モードに設定するモード設定部と、上記強調モードに設定された状態で、同一の注目被写体に対して上記撮像部の視点が異なるように当該撮像部を注目被写体に対して移動させながら複数回撮影された際に、当該視点が異なるように撮像された注目被写体を含む撮像画像を複数取得する取得部と、上記取得部によって取得された視点の異なる注目被写体が撮像された複数の画像を合成して第１の合成画像を生成する第１の合成部と、上記第１の合成部によって合成された第１の合成画像に基づいて、複数の上記注目被写体を含む領域を設定する領域設定部と、上記取得部によって取得された視点の異なる注目被写体が撮像された複数の画像を上記注目被写体の画像位置が一致するように合成して、第２の合成画像を生成する第２の合成部と、上記第２の合成画像において、上記一致するように合成された注目被写体とローコントラスト部との境界を求め、当該境界と上記領域設定部によって設定された領域とによって囲まれた領域を、加工処理する領域として検出する検出部と、上記第２の合成画像のうち上記検出部で検出した領域を加工処理した画像を生成する画像生成部とを具備する。
また、本発明に係る撮影機器は、被写体を撮像して撮像画像を出力する撮像部と、上記撮像画像を表示部に表示するための表示制御部と、上記表示部に配設されるタッチパネルと、上記表示部に表示された撮像画像の画像部分を上記タッチパネルによって指定する操作に応じて上記撮像画像中に含まれる被写体のうち１つの被写体を注目被写体として検出して強調領域候補に設定する設定部と、上記撮像部の異なる視点からの複数回の撮像によって上記注目被写体が各撮像画像中の異なる位置に撮影された場合には、これらの撮像画像の合成によって得た第１の合成画像中に含まれる上記注目被写体の複数の画像部分の全てを含む１つの範囲を設定する範囲設定部と、上記第１の合成画像の画像合成に用いた複数の撮像画像を上記注目被写体の画像部分の画像位置が一致するように合成して第２の合成画像を得る合成部と、上記第２の合成画像中の各部のコントラストに基づいて上記注目被写体の画像部分と他の画像部分との境界を求めて上記強調領域候補として検出した上記注目被写体の画像部分を強調領域に設定すると共に、上記範囲設定部が設定した範囲内の上記強調領域以外の領域を加工領域に設定する領域設定部と、上記第２の合成画像のうち上記加工領域に画像処理を施した画像を生成する画像生成部と、を具備する。
【発明の効果】
【００１２】
本発明によれば、直感的な操作と簡単な画像処理によって、注目対象物を際立たせた撮影を可能にすることができるという効果を有する。
【図面の簡単な説明】
【００１３】
【図１】本発明の第１の実施の形態に係る撮影機器の回路構成を示すブロック図。
【図２】第１の実施の形態において生成される撮像画像を示す説明図。
【図３】本発明の第２の実施の形態を示すブロック図。
【図４】別視点連写部２からの２つの撮像画像３１ａ，３１ｂを示す説明図。
【図５】第２の実施の形態を説明するための説明図。
【図６】注目被写体の指定方法の一例を説明するための説明図。
【図７】加工部検出部１３ｄによる加工部の決定方法を示すフローチャート。
【図８】加工部決定方法を説明するための説明図。
【図９】第１の実施の形態の動作を説明するためのフローチャート。
【図１０】第２の実施の形態によって得られる撮像画像を示す説明図。
【図１１】本発明の第３の実施の形態において採用される動作フローを示すフローチャート。
【図１２】注目被写体と背景との分離方法を説明するための説明図。
【図１３】注目被写体と背景との分離方法を説明するための説明図。
【図１４】第３の実施の形態において生成される合成画像を示す説明図。
【図１５】加工の一例を示す説明図。
【図１６】本発明の第４の実施の形態において採用される動作フローを示すフローチャート。
【図１７】第４の実施の形態における表示を説明するための説明図。
【図１８】露出制御を説明するための説明図である。
【発明を実施するための形態】
【００１４】
以下、図面を参照して本発明の実施の形態について詳細に説明する。
【００１５】
（第１の実施の形態）
図１は本発明の第１の実施の形態に係る撮影機器の回路構成を示すブロック図である。本実施の形態は撮像画像中の注目対象物（注目被写体）を際立たせる画像加工を可能にする。例えば、本実施の形態においては、注目被写体の周囲に後光が差すような画像加工が可能であり、ユーザの簡単な操作によって、画像加工を制御することを可能にする。
【００１６】
本実施の形態の撮影機器１は、別視点連写部２、画像比較部３及び画像生成部４によって構成されている。別視点連写部２は、図示しない注目被写体に対して、異なる複数の視点から撮影を行うことができるようになっている。例えば、別視点連写部２は、撮像素子を有する撮像部によって構成することができ、ユーザが撮像部を注目被写体に対して移動させる期間において、複数回の連写を行うことで、注目被写体を異なる視点から複数回撮影することが可能である。
【００１７】
なお、本実施の形態における別視点による連写は、後述する強調部決定、加工部決定、強調部生成及び加工部生成のうちの少なくとも１つの処理を行うために実施される。
【００１８】
別視点連写部２からの撮像画像は画像比較部３及び画像生成部４に与えられる。画像比較部３は、強調部決定部３ａ及び加工部決定部３ｂによって構成される。強調部決定部３ａは、入力された撮像画像から際立たせる部分である注目被写体の画像部分（以下、強調部又は特定部という）を検出する。強調部決定部３ａは、撮像画像の各部の画像特徴から注目被写体を検出するようにしてもよく、また、ユーザ操作に基づいて注目被写体を検出してもよい。更に、強調部決定部３ａは、別視点連写部２において、注目被写体に対する別視点での撮影を可能にする視点移動のためのユーザ操作を利用して、注目被写体を検出するようにしてもよい。
【００１９】
加工部決定部３ｂは、注目被写体を際立たせるために、注目被写体の周囲に画像加工を施す画像部分（以下、加工部という）を決定する。加工部決定部３ｂは、強調部決定部３ａから強調部の情報が与えられて、強調部の周囲に加工部を設定する。加工部決定部３ｂは、強調部の周囲に、予め決められたサイズ及び形状の加工部を決定してもよい。また、加工部決定部３ｂは、ユーザ操作に基づいて加工部を決定してもよい。更に、加工部決定部３ｂは、別視点連写部２において、注目被写体に対する別視点での撮影を可能にする視点移動のためのユーザ操作を利用して、加工部を決定するようにしてもよい。
【００２０】
画像比較部３は、強調部及び加工部に関する情報を画像生成部４に出力する。画像生成部４は、強調部生成部４ａ及び加工部生成部４ｂによって構成される。画像生成部４には、別視点連写部２から連写された複数の撮像画像が入力される。
【００２１】
強調部生成部４ａは、入力された撮像画像のうちの１つ又は複数の撮像画像中の注目被写体の画像部分に基づいて強調部の画像を生成する。例えば、強調部生成部４ａは、いずれか１枚の撮像画像から強調部の画像を生成してもよく、全ての撮像画像を強調部の画像位置が一致するように合成することで、強調部の画像を生成してもよい。
【００２２】
加工部生成部４ｂは、加工部の画像を生成する。例えば、加工部生成部４ｂは、予め用意された画像を加工部の画像としてもよい。また、加工部生成部４ｂは、注目被写体の周囲の背景画像を加工部の画像としてもよい。例えば、いずれか１枚の撮像画像について注目被写体の周囲の画像部分を画像加工することで加工部の画像を生成してもよく、また、全ての撮像画像を強調部の画像位置が一致するように合成することで、加工部の画像を生成してもよい。
【００２３】
次に、このように構成された実施の形態の動作について図２を参照して説明する。図２は本実施の形態において生成される撮像画像を示す説明図である。
【００２４】
別視点連写部２は、例えば人物等の注目被写体を撮影範囲に捉えた状態で、異なる複数の視点から撮影を行う。例えば、ユーザが別視点連写部２を構成する撮像部を注目被写体に対して移動させながら連写操作を行うことによって、注目被写体を異なる視点から複数回撮影する。別視点連写部２からの撮像画像は画像比較部３及び画像生成部４に与えられる。
【００２５】
画像比較部３の強調部決定部３ａは、注目被写体の画像部分である強調部を検出する。また、加工部決定部３ｂは、注目被写体の周囲に画像加工を施す画像部分である加工部を決定する。
【００２６】
画像生成部４の強調部生成部４ａは、入力された撮像画像のうちの１つ又は複数の撮像画像中の注目被写体の画像部分に基づいて強調部の画像を生成する。例えば、強調部生成部４ａは、連写によって得られた複数の撮像画像を強調部の画像位置が一致するように合成することで、強調部の画像を生成する。また、加工部生成部４ｂは、加工部の画像を生成する。例えば、加工部生成部４ｂは、予め用意された画像を加工部の画像とする。
【００２７】
図２は画像生成部４によって生成された撮像画像５を示しており、注目被写体である人物の画像６が強調部に設定された例である。画像６の周囲、例えば顔の周囲には、加工部７が設定されており、加工部生成部４ｂによって、加工部７の領域内には加工部の画像８が生成されている。
【００２８】
例えば、加工部７の画像８は、人物の画像６の顔部に後光が差した様子を示したものであり、人物の画像６、即ち、強調部を際立たせた表示となっている。
【００２９】
このように本実施の形態においては、ユーザが直感的な操作と簡単な画像処理によって、注目対象物を際立たせた撮影を可能にすることができる。
【００３０】
（第２の実施の形態）
図３は本発明の第２の実施の形態を示すブロック図である。本実施の形態は図１の撮影機器を具体的に示すものである。本実施の形態は、別視点による連写によって、加工部決定処理を行う例を示している。
【００３１】
撮影機器１０には、前面に撮影光学系１１が設けられている。撮影光学系１１は、撮像部１２に被写体像を導く。撮影光学系１１は、ズームやフォーカシングのための図示しないレンズ等を備えており、これらのレンズは信号処理及び制御部１３によって駆動制御されるようになっている。撮影光学系１１は、信号処理及び制御部１３によって、ピント位置、ズーム位置及び絞り等が制御される。
【００３２】
撮影機器１０は、ＣＣＤやＣＭＯＳセンサ等の撮像素子によって構成された撮像部１２を有している。撮像部１２は、撮影光学系１１からの被写体像を光電変換して撮影画像を得る。撮像部１２は、信号処理及び制御部１３によって駆動制御されて撮像画像を出力する。
【００３３】
信号処理及び制御部１３は、例えば、図示しないＣＰＵ等によって構成されており、メモリに記憶されたプログラムに従ってカメラ制御を行う。信号処理及び制御部１３は、撮像部１２に撮像素子の駆動信号を出力してシャッタースピード、露光時間等を制御すると共に、撮像部１２からの撮影画像を読み出す。信号処理及び制御部１３は、読み出した撮影画像に対して、所定の信号処理、例えば、色調整処理、マトリックス変換処理、ノイズ除去処理、その他各種の信号処理を行う。
【００３４】
撮影機器１０には、操作判定部１４も配設されている。操作判定部１４は、撮影機器１０に設けられた図示しないシャッターボタン、ファンクションボタン、撮影モード設定等の各種スイッチ等を含む操作部に対するユーザ操作に基づく操作信号を発生して、信号処理及び制御部１３に出力するようになっている。信号処理及び制御部１３は、操作信号に基づいて、各部を制御する。
【００３５】
信号処理及び制御部１３は、撮像画像の記録及び再生に関する処理を行うことができる。例えば、信号処理及び制御部１３は、信号処理後の撮影画像を圧縮処理し、圧縮後の画像を記録部１５に与えて記録させることができる。記録部１５としては、例えばカードインターフェースを採用することができ、記録部１５はメモリカード等の記録媒体に画像情報及び音声情報等を記録可能である。
【００３６】
信号処理及び制御部１３の表示制御部１３ａは表示に関する各種処理を実行する。表示制御部１３ａは、信号処理後の撮影画像を表示部１６に与えることができる。表示部１６は、ＬＣＤ等の表示画面を有しており、表示制御部１３ａから与えられた画像を表示する。また、表示制御部１３ａは、各種メニュー表示等を表示部１６の表示画面に表示させることもできるようになっている。
【００３７】
信号処理及び制御部１３は、記録部１５に記録されている撮像画像を読み出して伸張処理することができる。表示制御部１３ａは伸張処理された撮像画像を表示部１６に与えることで、記録画像の再生が可能である。
【００３８】
表示部１６は、後述するように、撮像画像を表示する表示画面１６ｂを有している。また、表示画面１６ｂ上には、タッチパネル１６ａが設けられている。タッチパネル１６ａは、ユーザが指で指し示した表示画面１６ｂ上の位置に応じた操作信号を発生することができる。この操作信号は、信号処理及び制御部１３に供給される。これにより、信号処理及び制御部１３は、ユーザが表示画面１６ｂ上をタッチしたりスライドさせたりした場合には、ユーザのタッチ位置、指を閉じ離間させる操作（ピンチ操作）、スライド操作やスライド操作によって到達した位置、スライド方向、タッチしている期間等の各種操作を検出することができ、ユーザ操作に対応した処理を実行することができるようになっている。
【００３９】
なお、表示部１６は、撮影機器１０の例えば背面の略全域を占めるように配設されており、撮影者は、撮影時に表示部１６の表示画面１６ｂ上に表示されたスルー画を確認することができ、スルー画を確認しながら撮影操作を行うこともできる。
【００４０】
撮影機器１０には、加速度判定部１７が設けられている。加速度判定部１７は、ジャイロセンサ、加速度センサ等によって構成されており、撮影機器１０を収納する筐体の動きを検出することができるようになっている。加速度判定部１７の判定結果は信号処理及び制御部１３に与えられる。
【００４１】
信号処理及び制御部１３には、連写制御部１３ｂが設けられている。連写制御部１３ｂは、撮像部１２における連写期間及び連写間隔等を制御する。例えば、連写制御部１３ｂは、ユーザが指定した期間を連写撮像期間に設定してもよい。また、連写制御部１３ｂは、ユーザが撮影機器１０の筐体を移動させたことを示す加速度判定部１７の判定結果が与えられると、連写開始を撮像部に指示することもできるようになっている。
【００４２】
本実施の形態においては、信号処理及び制御部１３は、注目被写体等の強調部及び強調部の周囲に設定される加工部のうちの少なくとも一方の画像を画像処理することで、強調部を際立たせた撮像画像を得る強調モードでの動作が可能となっている。強調モードを実現するために、信号処理及び制御部１３は、連写制御部１３ｂによる連写制御によって得られた複数の撮像画像を記録部１５の仮記録部１５ａに与えて仮記録させるようになっている。
【００４３】
信号処理及び制御部１３は、第１の実施の形態における画像比較部３及び画像生成部４と同様の機能を実現可能である。強調部検出部１３ｃは、撮像部１２からの撮像画像中の強調部を検出し、加工部検出部１３ｄは、撮像部１２からの撮像画像中の加工部を検出する。
【００４４】
次に、図４乃至図６の説明図を参照して、本実施の形態における強調部及び加工部の検出方法を説明する。図４は別視点連写部２からの２つの撮像画像３１ａ，３１ｂを示している。撮像画像３１ａ，３１ｂは、相互に別視点から同一被写体に向けた撮像により得られたものである。撮像画像３１ａ，３１ｂは、同一の人物の撮影によって得られた画像３２ａ，３２ｂを夫々含む。画像３２ａは撮像画像３１ａの中央の右側に位置し、画像３２ｂは撮像画像３２ｂの中央の左側に位置する。また、撮像画像３１ａ，３１ｂの背景部分は、例えば１色で塗られた壁等であるものとする。撮像画像３１ａ，３１ｂ中の背景画像３３は、いずれもコントラスト変化が小さい。
【００４５】
図５は図４（ａ），（ｂ）の画像３２ａ，３２ｂの画像位置が一致するように、画像３１ａ，３１ｂを合成して得た合成画像３４を示すと共に、横軸に画面水平位置をとり縦軸に像信号のレベルをとって、合成画像３４中の人物の画像３２の顔部の水平位置における像信号の変化を示している。図５に示すように、人物の画像３２の顔部の水平位置（破線）における像信号は、顔部の位置においてのみ変化を有し、他の部分（背景部分）は殆ど変化がない。
【００４６】
このように、背景が壁等のように色の変化がない場合には、像信号のコントラストが比較的高い部分を注目被写体である強調部であると判定し、コントラストが十分に低い部分を背景であるものと判定することができる。画像３２の顔部の位置から矢印にて示す周辺方向の各画像部分において、コントラストが十分に低い部分（以下、ローコントラスト部という）を判定し、コントラストが比較的高い部分とローコントラスト部との境界を、注目被写体と背景との境界であるものとする。
【００４７】
なお、比較的コントラストが大きい顔部の周辺近傍の色が、画面周辺まで続いているか否かによってローコントラスト部を判定してもよい。また、画面周辺部（図５の破線で囲った部分等）において比較的コントラストが高い部分がある場合でも、この部分を含みコントラストが十分に低い部分をローコントラスト部と判定してもよい。
【００４８】
図６は注目被写体の指定方法の一例を説明するものである。図６に示すように、撮影機器１０の筐体１０ａの背面には、表示画面１６ｂにタッチパネル１６ａが配設された表示部１６が設けられている。ユーザは表示画面１６ｂに表示された撮像画像３１ａ中の人物の画像３２ａの位置のタッチパネル１６ａを指３５でタッチすることで、画像３２ａの画像位置を指定することができる。強調部検出部１３ｃは、ユーザがタッチ指定した部分を注目被写体に設定する。
【００４９】
また、強調部検出部１３ｃは、ユーザ操作によらずに、公知の顔検出手法によって検出された顔部分を注目被写体（強調部候補）に設定してもよく、また、画面中央部の画像を注目被写体に設定してもよい。強調部検出部１３ｃ及び加工部検出部１３ｄは、合成画像３４中の注目被写体である人物の画像３２及びその周辺のコントラストの変化によって、強調部と背景との境界を求める。強調部検出部１３ｃは、コントラストの変化によって求めた強調部に関する情報を画像合成及び補正部１３ｅに出力する。
【００５０】
強調部と加工部との境界は、コントラストの変化によって検出される。本実施の形態においては、加工部検出部１３ｄは、加工部の外側の範囲を、ユーザによる別視点連写操作によって決定する。
【００５１】
図７は加工部検出部１３ｄによる加工部の決定方法を示すフローチャートであり、図８は加工部決定方法を説明するための説明図である。加工部検出部１３ｄは、図７のステップＳ１において、連写制御部１３ｂによる別視点連写制御によって得られた複数の画像を取得する。加工部決定部３ｂは、取得した複数の画像を合成する。
【００５２】
図８（１ａ），（１ｂ）はユーザが図４と同一の注目被写体である人物を撮影範囲に捉えた状態で、撮影機器１０を回転させながら注目被写体を撮像した場合の合成画像４１ａ，４１ｂを示している。図８（１ａ）はユーザが撮影機器１０を比較的小さい円を描くように回転させながら撮像を行った例を示し、図８（１ｂ）はユーザが撮影機器１０を比較的大きな円を描くように回転させながら撮像を行った例を示している。
【００５３】
加工部検出部１３ｄは、合成画像４１ａ，４１ｂ内の各注目被写体を含む領域を囲む枠線（破線部）４２ａ，４２ｂを設定する。そして、加工部検出部１３ｄは、枠線４２ａ，４２ｂを加工部の外側境界とする（ステップＳ２）。即ち、外側境界の大きさは、ユーザが別視点連写に際して例えば円を描くように撮影機器１０を移動させた場合の円の大きさに対応したものとなる。
【００５４】
次に、加工部検出部１３ｄは、強調部候補の画像位置が一致するように別視点連写によって得られた画像を合成し、強調部候補とその周辺のコントラストの変化によって、強調部とローコントラスト部との境界を求める（ステップＳ３）。加工部検出部１３ｄは、強調部とローコントラスト部との境界を、加工部の内側境界に設定する（ステップＳ４）。
【００５５】
こうして、図８（３ａ）の例では、注目被写体である強調部４３とローコントラスト部との境界と、枠線４２ａとによって囲まれた領域が加工部４４ａに設定される。また、図８（３ｂ）の例では、強調部４３とローコントラスト部との境界と、枠線４２ｂとによって囲まれた領域が加工部４４ｂに設定される。
【００５６】
画像合成及び補正部１３ｅは、加工部の画像を生成する。画像合成及び補正部１３ｅは、加工部の画像として強調部４３を際立たせるような画像、例えば、強調部４３に後光が差したような印象を与える画像を採用して、強調部４３を際立たせる。なお、加工部検出部１３ｄは、強調部４３及び図７のフローによって求めた加工部４４ａ，４４ｂ以外の領域を加工部に設定してもよい。
【００５７】
次に、このように構成された実施の形態の動作について図９及び図１０を参照して説明する。図９は第１の実施の形態の動作を説明するためのフローチャートであり、カメラ制御を示している。また、図１０は第２の実施の形態によって得られる撮像画像を示す説明図である。
【００５８】
撮影機器１の電源が投入されると、信号処理及び制御部１３は、図９のステップＳ１において撮影モードが指示されたか否かを判定する。撮影モードが指示されていない場合には、信号処理及び制御部１３は、ステップＳ１２において、再生画像が指定されているか否かを判定する。再生画像が指定されると、信号処理及び制御部１３は、ステップＳ１３において指定された画像の再生を行う。
【００５９】
撮影モードが指示されると、信号処理及び制御部１３は、ステップＳ２１において、撮像部１２に撮像を開始させると共に、被写体の判定を開始する。信号処理及び制御部１３は、撮像部１２からの撮像画像に所定の画像処理を施す。表示制御部１３ａは、画像処理後の撮像画像を表示部１６に与えてスルー画表示させる。
【００６０】
次に、信号処理及び制御部１３は強調モードが指定されているか否かを判定する（ステップＳ２２）。強調モードが指定されていない場合には、通常モードでの撮影が行われる。即ち、信号処理及び制御部１３は、ステップＳ２３において、撮影を行うためのレリーズ操作やタッチ操作等が行われたか否かを判定する（ステップＳ２３）。レリーズ操作等があった場合は、信号処理及び制御部１３は撮影を行い、撮像画像を記録部１５に与えて記録する（ステップＳ２４）。
【００６１】
強調モードが指示されている場合には、ステップＳ２５において、強調部を指定するためのタッチ操作があったか否かを判定する。強調部を指定するためのタッチ操作があった場合には、強調部検出部１３ｃは、タッチ操作よって指定された部分を強調部候補に設定する（ステップＳ２６）。また、強調部を指定するためのタッチ操作がない場合には、強調部検出部１３ｃは、予め定められた所定の領域を強調部候補に設定する。例えば、強調部検出部１３ｃは、画面の中央の顔部や、画面中心部等を強調部候補に設定する。なお、強調部検出部１３ｃは、撮影機器の移動によって希望しない被写体が強調部候補になることを防止するために、ユーザが被写体に向けて撮影機器１０を構えたことを加速度判定部１７の判定結果によって検出した後に、１回だけ強調部候補を設定するようにしてもよい。
【００６２】
次に、連写制御部１３ｂは、ステップＳ２８において、撮像部１２に連写を開始させるためのユーザの指示操作が発生したか否かを判定する。例えば、連写制御部１３ｂは、ユーザが構えの姿勢をとった後に撮影機器を移動させる操作をしたことを、加速度判定部１７の判定結果や画像解析によって検出すると、撮像部に対する連写の開始指示が発生したものと判定してもよい。例えば、連写制御部１３ｂは、手ぶれが所定期間生じることなく、被写体を撮像している状態が所定期間継続することで、ユーザが被写体に向かって撮影機器を構えている状態を判定することができる。
【００６３】
また、連写制御部１３ｂは、構え及び動き判定によって自動的に連写を開始させるだけでなく、ユーザが手動でレリーズ操作を行ったことを検出することで、撮像部に対する連写の開始指示があったものと判定してもよい。なお、ステップＳ２８の連写開始指示の判定を省略して、強調モード後にいきなり連写を開始するようにしてもよい。
【００６４】
連写制御部１３ｂは、ユーザによる連写指示があったものと判定すると、ステップＳ２９において、撮像部１２に連写指示を与える。これにより、撮像部１２は、所定の時間間隔で連写を行う。連写期間においては、ユーザは撮影機器１０を移動させており、注目被写体に対して別視点での連写が行われる。信号処理及び制御部１３は、連写によって順次得られる撮像画像に対して所定の信号処理を施した後、仮記録部１５ａに与えて記録させる。
【００６５】
次に、連写制御部１３ｂは、ステップＳ３０において、ユーザによる連写終了の指示が発生したか否かを判定する。例えば、連写制御部１３ｂは、ユーザが撮影機器の振動（移動）を停止させた操作を加速度判定部１７等の判定結果によって検出すると、連写終了の指示が発生したものと判定してもよい。連写制御部１３ｂは、ユーザによるレリーズ操作を検出することによって、連写終了の指示が発生したものと判定してもよい。
【００６６】
連写終了の指示が発生するまでは、ステップＳ３１〜Ｓ３５の処理が繰り返される。即ち、ステップ３１においては、強調部及び加工部が設定される。信号処理及び制御部１３は、強調部候補及びその周囲のコントラストを判定して、ローコントラスト部を求め、ローコントラスト部を加工部の内側境界とする。また、ユーザによる撮影機器の移動の範囲によって、加工部の外側境界を求める。加工部検出部１３ｄは、内側境界と外側境界とによって囲まれた範囲を加工部に設定する。また、強調部検出部１３ｃは、強調部候補とローコントラスト部との境界を強調部の範囲として、強調部を設定する。
【００６７】
画像合成及び補正部１３ｅは、連写によって撮像画像が入力される毎に、注目被写体の画面位置を一致させながら撮像画像を合成する（ステップＳ３３）。また、画像合成及び補正部１３ｅは、加工部に強調部を際立たせるための画像処理を施す（ステップＳ３４）。画像合成及び補正部１３ｅは、合成画像を表示制御部１３ａに与えて表示部１６に表示させる（ステップＳ３５）。
【００６８】
連写終了の指示が発生するまで、ステップＳ３１〜Ｓ３５の処理が繰り返されて、強調部の画像及び加工部の画像が生成される。連写終了の指示が発生すると、連写制御部１３ｂは、撮像部１２に連写の終了を指示する。これにより、画像合成及び補正部１３ｅは、それまでに合成した画像を記録部１５に与えて記録する（ステップＳ３６）。
【００６９】
図１０はこうして得られた撮像画像の一例を示している。強調部検出部１３ｃによって設定された強調部は、画像合成されることで強調され、加工部検出部１３ｄによって設定された加工部には、強調部を際立たせるための画像処理が施されている。
【００７０】
図１０（ａ）は、ユーザが比較的小さい円を描きながら連写を行った場合の撮像画像５１ａを示しており、図１０（ｂ）は、ユーザが比較的大きい円を描きながら連写を行った場合の撮像画像５１ｂを示している。撮像画像５１ａは、注目被写体である強調部４３の周囲に、ユーザ操作に基づくサイズ及び形状の加工部５２ａが形成され、加工部５２ａに画像処理が施されていることを示している。また、撮像画像５１ｂは、注目被写体である強調部４３の周囲に、ユーザ操作に基づくサイズ及び形状の加工部５２ｂが形成され、加工部５２ｂに画像処理が施されていることを示している。また、
すなわち、ユーザは注目被写体を撮影範囲に収めた状態で、注目被写体に対して例えば円を描くように撮影機器を回転させるという簡単な操作によって、連写の開始及び加工部の範囲を設定することができる。この連写期間においては、注目被写体である強調部（特定部）が強調され、加工部において強調部を際立たせる画像処理が施される。連写期間における画像合成及び補正部からの合成画像は表示制御部によって表示部１６の表示画面上に表示されており、ユーザは自分の操作によって、どのような合成画像が得られるかを確認しながら、連写操作を行うことができる。
【００７１】
このように本実施の形態においては、ユーザが例えば撮影機器を回転させるという簡単な操作によって、注目被写体を強調するとともに、注目被写体の周囲にユーザの撮影機器の回転操作に応じた位置、サイズ及び形状の加工部を設定して、この加工部に注目被写体を際立たせる画像処理を施すことが可能である。このように、直感的な操作と簡単な画像処理によって、注目対象物を際立たせた撮影が可能である。
【００７２】
なお、図９の例では、連写により撮像画像が得られる毎に、加工部に画像処理を施す例を示したが、連写の最初で得られた撮像画像のみに加工部の画像処理を施すようにしてもよい。
【００７３】
（第３の実施の形態）
図１１は本発明の第３の実施の形態において採用される動作フローを示すフローチャートである。図１１において図９と同一の手順には同一符号を付して説明を省略する。本実施の形態のハードウェア構成は第２の実施の形態と同様である。
【００７４】
第２の実施の形態においては、背景が壁等の一様な画像であるものとして、強調部候補及びその周辺の部分について比較的コントラストが高い部分とローコントラスト部との境界を求めることで、注目被写体である強調部と背景とを分離可能にした。しかしながら、注目被写体の背景のコントラストが比較的高い場合には、コントラストの比較によっては注目被写体と背景とを分離することはできない。
【００７５】
そこで、本実施の形態においては、別視点連写のためのユーザの撮影機器の移動操作（別視点連写操作）を利用して、注目被写体である強調部と背景との分離を行うようになっている。
【００７６】
図１２及び図１３は注目被写体と背景との分離方法を説明するための説明図である。図１２はユーザが別視点連写操作を行っている様子を示している。図１２に示すように、ユーザ６１は手６２で撮影機器の筐体１０ａを把持し、人物である注目被写体６５を撮影範囲に収めた状態で、撮影機器１０を矢印に示すように左右に移動させながら連写による撮影を行っている。図１２の例では、注目被写体６５の背景には、１本の樹木６６が立っている。
【００７７】
図１３（ａ），（ｂ）は図１２の例において、撮影機器１０のレンズ１０ｂ、注目被写体６５及び背景である樹木６６との光学的な位置関係を示しており、図１３（ｃ），（ｄ）はそれぞれ図１３（ａ），（ｂ）の状態での撮像画像を示している。図１３（ａ），（ｂ）は、破線直線は光軸を示し、実線矢印によって、注目被写体６５及び樹木６６からの光線がレンズ１０ｂを介して撮像素子の撮像面１２ａに入射する様子を示している。
【００７８】
図１３（ａ）は撮影機器１０を被写体に向かって左側に構えた場合を示し、樹木６６からの光は注目被写体６５からの光よりも左側からレンズ１０ｂに入射することを示している。また、図１３（ｂ）は撮影機器１０を被写体に向かって右側に構えた場合を示し、樹木６６からの光は注目被写体６５からの光よりも右側からレンズ１０ｂに入射することを示している。ユーザが撮影機器１０を左右に移動させて撮影を行うことにより、別視点での撮影が行われ、これらの撮影の視差により、注目被写体６５と背景の樹木６６との距離に応じて、注目被写体６５及び背景である樹木６６の画像の撮像画像中における位置に変化が生じる。
【００７９】
図１３（ｃ）は図１３（ａ）に対応した撮像画像６８ａを示しており、注目被写体６５の画像６５ａの左側に背景である樹木６６の画像６６ａが表示されている。また、図１３（ｄ）は図１３（ｂ）に対応した撮像画像６８ｂを示しており、注目被写体６５の画像６５ｂの右側に背景である樹木６６の画像６６ｂが表示されている。
【００８０】
このように、注目被写体を基準にすると、別視点連写した各画像は、背景の画像位置が変化する。従って、別視点で連写された複数の撮像画像について、注目被写体の画像位置を一致させながら合成画像を生成すると、注目被写体は同一画像であるので強調されるのに対し、背景は画像位置が変化することから異なる画像として合成されて、背景部分は輪郭がぼけた画像や、形状を有しない画像等になる。これにより、注目被写体部分と背景部分とを分離することができると共に、注目被写体を強調し背景を不明瞭にして、背景部分によって注目被写体を際立たせる表示にすることができる。
【００８１】
本実施の形態においては、このような背景の合成画像を、注目被写体部分である強調部の周囲に表示する加工部として利用するようになっている。別視点連写のためのユーザの撮影機器の移動範囲に応じて、背景の模様が変化することになり、ユーザは撮影機器を動かしながら、生成される模様の変化を確認しながら加工部を形成することができる。加工部は、合成によって形状が失われて背景がかすんでしまったような画像となり、強調部を際立たせることに役立つ。
【００８２】
図１４は本実施の形態において生成される合成画像を示す説明図である。図１１のフローは、連写開始から連写終了までの処理が図９のフローと異なるのみである。連写の開始から終了までの期間において、ステップＳ４１〜Ｓ４５の処理が繰り返される。即ち、ステップＳ４１においては、仮記録部１５ａに記録されている１又は複数の撮像画像の読み出しが行われる。次に、画像合成及び補正部１３ｅは、注目被写体である強調部の候補の画像の画像位置を一致させた状態で、読出した画像を合成する（ステップＳ４２）。なお、２回目移行の画像合成においては、前回の合成処理によって得た合成画像と新たに読出した撮像画像との合成が行われる。
【００８３】
図１４（ａ）乃至（ｃ）は連写による３つの撮像画像７１ａ〜７１ｃを示している。これらの撮像画像７１ａ〜７１ｃは、別視点で撮像されていることから、人物である注目被写体の画像７２を基準にすると、背景である樹木の画像７３ａ〜７３ｃは、夫々撮像画像中の位置が異なる。なお、撮像画像７１ａ〜７１ｃは、左右方向だけでなく上下方向に撮影機器を移動させて得たものである。
【００８４】
合成処理においては、同一画像である注目被写体の部分は強調部（指定部画像、または特定部画像）として、同一画像位置に重ねて合成される。これにより、注目被写体と背景とが分離され、強調部と加工部とが決定されると共に、強調部（指定部画像、または特定部画像）は強調処理される（ステップＳ４３）。この強調という表現は、像を重ねてブレがないようにしたり、像を重ねて露出量を適正にしたり、特定の値にしたりしているが、コントラストや彩度を上げたり、補助的な画像効果を付与しても良い。もちろん、像を重ねるのは必須ではない。この場合、適正な像を取得しておき、後で重ねるような処理を用いても良い。
【００８５】
図１４（ｄ）はこれらの撮像画像７１ａ〜７１ｃを合成して得た撮像画像７１ｄを示している。撮像画像７１ｄは、注目被写体の画像７２の画像位置を一致させた状態で合成が行われており、合成された樹木の画像７３ａ’〜７３ｃ’は相互に異なる位置に表示されている。注目被写体の画像７２は画像位置が一致しており、強調されている。
【００８６】
一方、背景部分である加工部は、撮影機器の移動範囲に応じて、樹木の画像７３ａ'〜７３ｃ'の位置は相互に異なり、注目被写体の画像７２の周囲に配置されて、注目被写体に後光が差したような印象の画像に変化する（ステップＳ４４）。視差の影響で、一致する画像部を重ねれば、画面上の背景部分の相対位置は変化するので、重ねて合成することは出来ないという原理を利用している。重なる部分は露出もブレもなくなるが、重ならない部分は、露出も不適切、かつブレた画像となる。このような特徴を持つ領域を動きベクトルや画像比較などで検出しても良い。このように判定された部分を、特定部以外の画像と呼んでも良い。つまり、ここでの画像処理は、相互に異なる視点からの撮影による画像変化の傾向に従って、上記特定部以外の画像を加工するものとなっている。異なる視点での撮影で、背景は自然に分離されることとなる。ただし、背景にコントラストがない場合は、この背景判定が困難なので、カメラの動き情報などや、別の部位の動きの傾向を利用して補助しても良い。
【００８７】
ステップＳ４５では、合成画像が表示部１６に与えられて表示される。以後、連写の終了指示が行われるまで、ステップＳ４１〜Ｓ４５が繰り返される。ユーザは、撮影機器１０を移動させて別視点連写を行いながら、その結果として得られる合成画像を表示部１６の表示画面１６ｂ上において確認することができる。図１４（ｅ）は、別視点連写の結果最終的に得られる合成画像７１ｅを示している。合成画像７１ｅには、注目被写体の画像７２の周囲に、樹木の画像が集まって、後光の印象を与える画像７４が生成されている。
【００８８】
なお、ステップＳ４４においては、単に背景の画像を合成して加工部を得るものと説明したが、加工部の画像部分に所定の画像処理（これは、強調部や特定部と異なる処理である方が目立つ処理となる）を施すことにより、注目被写体を一層際立たせた画像にすることも可能である。
【００８９】
図１５はこの場合の加工の一例を示す説明図である。図１５（ａ）に示す撮像画像７５ａは単なる合成のみを行った画像であり、注目被写体である強調部（特定部）７６は画像合成により強調され、背景は画像位置が変化した状態で合成された加工部を構成する。加工部中の樹木の画像７７ａは、元の撮像画像を合成して得られたものである。一方、図１５（ｂ）に示す撮像画像７５ｂは加工部中の樹木の画像７７ｂは、画像合成及び補正部１３ｅによって画像処理が施されている。なお、図１５の斜線はハッチング間隔の相違によって異なる画像であることを示しており、例えば樹木の画像７７ｂは、画像の輝度や彩度を高くしたりして生成されており、加工部において後光の印象を一層高めることを可能にしている。
【００９０】
また、注目被写体である強調部のみに加工を行ってもよく、強調部と加工部との両方に異なる処理を施してもよい。また、第２の実施の形態と同様に、強調部の周囲に、予め所定の位置、形状及びサイズの加工部を設定し、設定した加工部に元の撮像画像とは無関係の任意の画像を貼り付けるようにしてもよい。
【００９１】
このように本実施の形態においては、ユーザが例えば撮影機器を回転させるという簡単な操作によって、注目被写体を強調するとともに、注目被写体の周囲にユーザの撮影機器の回転操作に応じた模様の加工部を生成することができ、加工部によって注目被写体を際立たせることが可能である。このように、直感的な操作と簡単な画像処理によって、注目対象物（指定部画像、または特定部画像）を際立たせた撮影が可能である。回転は、画像の変化から検出しても良いし、加速度センサなど、カメラの動きそのものを検出するセンサを利用して、その出力から判定しても良い。
【００９２】
（第４の実施の形態）
図１６は本発明の第４の実施の形態において採用される動作フローを示すフローチャートである。図１４において図９と同一の手順には同一符号を付して説明を省略する。本実施の形態のハードウェア構成は第２の実施の形態と同様である。
【００９３】
第２及び第３の実施の形態においては、画像合成及び補正部１３ｅによって生成した合成画像を表示部１６に与えて表示させることができる。更に、本実施の形態においては、合成画像の生成時だけでなく、スルー画表示時においても、合成画像の表示を可能にするものである。
【００９４】
図１７は本実施の形態における表示を説明するための説明図であり、図１８は露出制御を説明するための説明図である。
【００９５】
図１７は図１２の撮影時におけるスルー画表示を示している。表示部１６の表示画面１６ｂ上には、撮像画像８１が表示されている。撮像画像８１は、中央に人物である注目被写体６５の画像８２が表示され、画像８２の近傍には樹木６６の画像８３が表示されている。ここで、撮影者が、表示画面１６ｂに配設されたタッチパネル１６ａをタッチすることで、強調部検出部１３ｃは、人物の画像８２を強調部候補に設定することができる。
【００９６】
本実施の形態においては、スルー画表示の状態で、後述する強制流し撮りモードが指定されると、以後のスルー画は、強調部を例えばタッチ時点における画面位置又は画面中央部に配置した状態で、背景の位置がずらされた表示が行われる。更に、スルー画表示のために連続撮影されている撮像画像を所定期間仮記録部１５ａに記録して、強調部の位置を固定しながら画像合成を行った後表示させることで、画像合成及び補正部１３ｅ及び表示制御部１３ａによって、図１７（ｂ）に示す撮像画像を表示することができる。図１７（ｂ）の撮像画像８５は、強調部である画像８２の位置を固定した状態で撮像画像を合成して得たものであり、背景には樹木６６の複数の画像による合成樹木画像８６が表示されている。
【００９７】
このような撮影方法は、所謂「流し撮り」と同様に、注目被写体を固定して背景を動かすような撮影方法となるが、「流し撮り」の場合注目被写体の動きを追うのに対し、このモードにおける撮影方法は、視差を利用して注目被写体（強調部）像を撮影者が背景に対し動かすところに特徴がある。いわば、「強制流し撮り」とも言える。「流し撮り」が、移動する特定の被写体を追うことで、背景（特定の被写体以外）と異なる画像表現になるのと同じように、この発明も、特定の被写体をそれ以外と異なる表現にでき、流し撮りが、被写体の移動方向で効果が変わるように、上記画像処理は、上記相互に異なる視点からの撮影による画像変化の傾向に従って、上記特定部以外の画像を加工することが可能となる。
【００９８】
この場合において、合成する撮像画像が最初の一枚から次第に増加したとしても、同様の露光量となるように制御して、表示を均等に見せる必要がある。そこで、本実施の形態においては、画像合成及び補正部１３ｅは、仮記録部１５ａに順次記録される連写画像の記録時又は合成時に、図１８に示す露出制御を行う。
【００９９】
図１８は横軸に画面水平方向の位置をとり縦軸に像信号をとって、スルー画時に撮影された３つの撮像画像とその合成画像を示している。図１８（ａ）乃至（ｃ）は夫々画像Ａ〜Ｃの像信号を示し、図１３（ｄ）は合成画像の像信号を示している。なお、上記各実施の形態においても、図１８と同様の露光制御は行われている。
【０１００】
図１８（ａ）乃至（ｃ）に示す顔部の位置における波形は、共通の人物の顔部の撮像結果を示している。図１８（ａ）乃至（ｃ）に示すように、撮像画像Ａ〜Ｃにおける各顔部の水平方向の位置は相互に異なる。本実施の形態においては、強調部である顔部の位置を一致させた状態で合成を行う。この場合において図１８（ａ）乃至（ｃ）に示す適正レベルの像信号を加算すると、図１８（ｄ）に示すように、レベルが適正レベルよりも高い合成画像Ｄａが得られる。この合成画像Ｄａのレベルを１／３倍することで、適正レベルの像信号Ｄｂが得られる。
【０１０１】
また、合成する撮像画像の数（合成数）が既知である場合には、事前に各撮像画像のレベルを１／合成数だけ増幅（減衰）させた後、減衰させた各撮像画像を合成してもよい。この場合には、各撮像画像の像信号レベルを低くすることができ、露光時間を短縮することができるという利点がある。なお、露光時間が短すぎる場合には、強調部を検出するだけの十分の露光量が得られないことが考えられるので、合成数に応じて合成後に減衰させるか合成前の各画像を減衰させるかを決定する。
【０１０２】
図１６はこのような露光制御を行う場合のフローを示している。図１６のステップＳ５１において、強制流し撮りモードが指定されたか否かが判定される。強制流し撮りモードが指定された場合には、次に合成回数が選択されたか否かが判定される（ステップＳ５２）。合成回数が選択されている場合には、ステップＳ５３においてその回数（合成回数）ｎが取得される。次に、ステップＳ５４において撮影開始操作が検出されると、連写が開始されて、連写による撮像画像が仮記録部１５ａに与えられて記録される（ステップＳ５５）。
【０１０３】
次のステップＳ５６では、合成回数の指定が有るか否かが判定される。合成回数の指定がない場合には、ステップＳ５７においてユーザによる撮影停止動作が発生したか否かが判定される。ユーザによる撮影停止動作が発生するまでは、ステップＳ５８の処理が繰り返される。即ち、適正露出連写で撮像が行われ、画像合成及び補正部１３ｅは、強調部を重ねて合成し、合成画像を合成数分の１で増幅した後合成画像を表示制御部１３ａに与えて表示させる。
【０１０４】
また、ステップＳ５６において合成回数の指定があるものと判定された場合には、ステップＳ５９において撮影回数が合成回数（ｎ回）に到達したか否かが判定される。撮影回数がｎ回に到達するまでは、ステップＳ６０の処理が繰り返される。即ち、適正露出の１／ｎの露出となるように露出制御が行われて連写による撮像が行われ、画像合成及び補正部１３ｅは、強調部を重ねて合成し、合成画像を仮記録部１５ａに与えて記録させると共に、表示制御部１３ａに与えて表示させる。連写が停止すると、ステップＳ３６において合成画像が記録部１５に記録される。
【０１０５】
このように本実施の形態においても、上記各実施の形態と同様の効果が得られる。更に、撮影者が、目立たせたい被写体（強調部）を指定し、その後連続撮影しながら機器を揺するように動かすことにより、強調部として指定された部分は撮影のたびに重ねられて固定されるので、基本的には画面上で位置が変化することはなく、撮影者は、背景の変化確認に専念することができる。
なお、上記「強調部」は、強調されるかどうかは感覚的な表現であり、むしろ具体的には、指定によって強調されるので、「指定部」、「特定部」と呼んでも良く、その方が客観的表現となる。
【０１０６】
さらに、本発明の各実施形態においては、撮影のための機器として、デジタルカメラを用いて説明したが、カメラとしては、デジタル一眼レフカメラでもコンパクトデジタルカメラでもよく、ビデオカメラ、ムービーカメラのような動画用のカメラでもよく、さらに、携帯電話やスマートフォンなど携帯情報端末（ＰＤＡ：Personal Digital Assist）等に内蔵されるカメラでも勿論構わない。また、内視鏡、顕微鏡のような産業用、医療用の光学機器でもよい。撮影機器でなくとも、このような工夫によって、ユーザが希望する画像を正確に観察できる観察装置、表示装置を提供することが可能となる。特に特定部位の画像を強調してユーザに見せることは、こうした観察装置においては、正しい対象認識のためには重要な手法、技術となる。
【０１０７】
本発明は、上記各実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記各実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
【０１０８】
なお、特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。また、これらの動作フローを構成する各ステップは、発明の本質に影響しない部分については、適宜省略も可能であることは言うまでもない。
【０１０９】
また、ここで説明した技術のうち、主にフローチャートで説明した制御や機能は、多くがプログラムにより設定可能であり、そのプログラムをコンピュータが読み取り実行することで上述した制御や機能を実現することができる。そのプログラムは、コンピュータプログラム製品として、フレキシブルディスク、ＣＤ−ＲＯＭ等、不揮発性メモリ等の可搬媒体や、ハードディスク、揮発性メモリ等の記憶媒体に、その全体あるいは一部を記録又は記憶することができ、製品出荷時又は可搬媒体或いは通信回線を介して流通又は提供可能である。利用者は、通信ネットワークを介してそのプログラムをダウンロードしてコンピュータにインストールしたり、あるいは記録媒体からコンピュータにインストールすることで、容易に本実施の形態の撮影機器を実現することができる。
【符号の説明】
【０１１０】
１…撮影機器、２…別視点連写部、３…画像比較部、３ａ…強調部決定部、３ｂ…加工部決定部、４…画像生成部、４ａ…強調部生成部、４ｂ…加工部生成部。
【要約】
【課題】  直感的な操作と簡単な画像処理によって、注目対象物を際立たせた撮影を可能にする。
【解決手段】  撮影機器は、被写体を相互に異なる視点から撮像して複数の撮像画像を取得する撮像部と、上記複数の撮像画像に基づいて上記撮像画像中の特定部分である特定部及び上記特定部以外の部分を決定する画像比較部と、上記特定部と上記特定部以外の部分とで異なる画像処理を行って特殊画像を生成する画像生成部とを具備する。
【選択図】図１【図１】
0005608803.tif 000002
【図２】
0005608803.tif 000003
【図３】
0005608803.tif 000004
【図４】
0005608803.tif 000005
【図５】
0005608803.tif 000006
【図７】
0005608803.tif 000007
【図８】
0005608803.tif 000008
【図９】
0005608803.tif 000009
【図１０】
0005608803.tif 000010
【図１１】
0005608803.tif 000011
【図１４】
0005608803.tif 000012
【図１５】
0005608803.tif 000013
【図１６】
0005608803.tif 000014
【図１７】
0005608803.tif 000015
【図６】
0005608803.tif 000016
【図１２】
0005608803.tif 000017
【図１３】
0005608803.tif 000018
【図１８】
0005608803.tif 000019