(57)【要約】【課題】撮影者の意図した構図を維持しつつ、撮影者自身の画像も付加することもできる撮像装置、表示方法およびプログラムを提供する。【解決手段】第１の画像データに対応する第１の画像および第２の画像データに対応する第２の画像を表示可能な表示部６と、表示部６の表示画面上に設けられ、表示部６が表示する画像の変更を指示する指示信号の入力を受け付けるタッチパネル７と、表示部６が第１の画像を表示している場合において、タッチパネルから画像の変更を指示する指示信号の入力を受け付けたとき、撮像装置１を中心にして見たときの第１の画像および第２の画像にそれぞれ写る被写体の位置関係を反映させた状態で第２の画像の少なくとも一部を表示部６に表示させる表示制御部９５と、を備える。【選択図】図３
2015228683.tif 000002
【特許請求の範囲】
【請求項１】
複数の画像を表示可能な表示部を備えた表示装置において、
第１の画像および第２の画像を記録する記録部と、
前記表示部の表示画面上に設けられ、外部からの物体の接触した位置を検出し、この接触位置に応じた指示信号の入力を受け付けるタッチパネルと、
前記表示部が前記第１の画像を表示している場合において、前記第１の画像および該第１の画像と異なる視野領域の第２の画像それぞれに写る被写体の天地方向および左右の位置関係を反映させた状態で前記第２の画像の少なくとも一部を前記表示部に表示させる表示制御部を備え
前記表示制御部は、前記第２の画像が前記記録部に記録されていることを示す情報を前記表示部に表示させるとともに、前記情報に対して、前記タッチパネルを介して行われたスライド操作の移動量に応じて、前記第２の画像の表示面積を変更することを特徴とする表示装置。
【請求項２】
前記表示制御部は、前記スライド操作に応じて、前記第２の画像の表示面積を徐々に変更することを特徴とする請求項１に記載の表示装置。
【請求項３】
前記第１の画像および前記第２の画像は、同時に撮影された画像であることを特徴とする請求項１または２に記載の表示装置。
【請求項４】
複数の画像を表示可能な表示部と、第１の画像および第２の画像を記録する記録部と、前記表示部の表示画面上に設けられ、外部からの物体の接触した位置を検出し、この接触位置に応じた指示信号の入力を受け付けるタッチパネルと、を備えた表示装置が実行する表示方法であって、
前記表示部が前記第１の画像を表示している場合において、前記第１の画像および該第１の画像と異なる視野領域の第２の画像それぞれに写る被写体の天地方向および左右の位置関係を反映させた状態で前記第２の画像の少なくとも一部を前記表示部に表示させる表示制御ステップを含み、
前記表示制御ステップは、前記第２の画像が前記記録部に記録されていることを示す情報を前記表示部に表示させるとともに、前記情報に対して、前記タッチパネルを介して行われたスライド操作の移動量に応じて、前記第２の画像の表示面積を変更することを特徴とする表示方法。
【請求項５】
複数の画像を表示可能な表示部と、第１の画像および第２の画像を記録する記録部と、前記表示部の表示画面上に設けられ、外部からの物体の接触した位置を検出し、この接触位置に応じた指示信号の入力を受け付けるタッチパネルと、を備えた表示装置に、
前記表示部が前記第１の画像を表示している場合において、前記第１の画像および該第１の画像と異なる視野領域の第２の画像それぞれに写る被写体の天地方向および左右の位置関係を反映させた状態で前記第２の画像の少なくとも一部を前記表示部に表示させる表示制御ステップを実行させ、
前記表示制御ステップは、前記第２の画像が前記記録部に記録されていることを示す情報を前記表示部に表示させるとともに、前記情報に対して、前記タッチパネルを介して行われたスライド操作の移動量に応じて、前記第２の画像の表示面積を変更することを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、互いに視野が異なる領域を撮像して画像データを生成する複数の撮像部を備えた表示装置、表示方法およびプログラムに関する。
【背景技術】
【０００２】
近年、デジタルカメラ等の撮像装置として、２つの撮像手段を備えたものが知られている。たとえば、第１の撮像手段で被写体に面する正面側を撮像する一方、第２の撮像手段で撮影者に面する背面側を撮像することができる技術が知られている（特許文献１参照）。この技術では、第１の撮像手段で撮像した正面側の前方画像に、第２の撮像手段で撮像した背面側の背面画像を合成して一つの表示モニタで表示させることで、前方画像と背面画像とを確認することができるようにしている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−１４７０４６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、上述した技術では、正面画像と背面画像とを合成した合成画像を表示モニタに表示させているため、撮影者が常に合成画像内に写っていた。しかしながら、撮影者は、撮影の構図に自分を入れたくない場合もある。一方で、撮影者は、自分もいたことを画像として記憶しておきたい場合もある。
【０００５】
本発明は、上記に鑑みてなされたものであって、撮影者の意図した構図を維持しつつ、撮影者自身の画像も付加することもできる撮像装置、表示方法およびプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上述した課題を解決し、目的を達成するために、本発明にかかる撮像装置は、所定の視野領域を撮像して第１の画像データを生成する第１の撮像部と、前記第１の撮像部と異なる視野領域を撮像して第２の画像データを生成する第２の撮像部と、を備えた撮像装置であって、前記第１の画像データに対応する第１の画像および前記第２の画像データに対応する第２の画像を表示可能な表示部と、前記表示部の表示画面上に設けられ、前記表示部が表示する画像の変更を指示する指示信号の入力を受け付ける入力部と、前記表示部が前記第１の画像を表示している場合において、前記入力部から前記指示信号の入力を受け付けたとき、当該撮像装置を中心にして見たときの前記第１の画像および前記第２の画像にそれぞれ写る被写体の位置関係を反映させた状態で前記第２の画像の少なくとも一部を前記表示部に表示させる表示制御部と、を備えたことを特徴とする。
【０００７】
また、本発明にかかる撮像装置は、上記発明において、前記表示制御部は、前記第２の画像の少なくとも一部を前記表示部に表示させる際に、前記第２の画像の表示領域を徐々に増やしながら表示させることを特徴とする。
【０００８】
また、本発明にかかる撮像装置は、上記発明において、前記表示制御部は、前記第２の画像の少なくとも一部を所定時間だけ表示させた後に、前記第１の画像に切換えることを特徴とする。
【０００９】
また、本発明にかかる撮像装置は、上記発明において、前記表示制御部は、前記第２の画像を前記被写体の位置関係を反映させた状態で前記表示部に表示させる際に、前記第１の画像における縦横比率を変化させ、この変化によって生じる画面内の空き領域に前記第２の画像を表示させることを特徴とする。
【００１０】
また、本発明にかかる撮像装置は、上記発明において、前記表示制御部は、前記第１の画像に対して前記第２の画像に関する画像情報を重畳して表示させ、前記入力部は、前記画像情報の一部がタッチされた場合、前記指示信号の入力を受け付けることを特徴とする。
【００１１】
また、本発明にかかる撮像装置は、上記発明において、前記第２の画像に含まれる被写体の顔を検出する顔検出部と、前記顔検出部が検出した被写体の顔を含む顔領域を、前記第２の画像から切出して前記画像情報としての顔画像を生成するトリミング部と、前記トリミング部が生成した前記顔画像を、前記第１の画像に写る被写体との位置関係を反映させた前記第１の画像の表示領域に合成する画像合成部と、をさらに備えたことを特徴とする。
【００１２】
また、本発明にかかる撮像装置は、上記発明において、前記表示制御部は、前記画像情報として前記第１の画像における端部を仮想的に折り返した折れ部を表示させることを特徴とする。
【００１３】
また、本発明にかかる撮像装置は、上記発明において、前記第２の撮像部は、撮影者が面する当該撮像装置の背面部に設けられていることを特徴とする。
【００１４】
また、本発明にかかる撮像装置は、上記発明において、前記第２の撮像部は、前記第１の撮像部の光軸と直交する軸の周りの全周にわたる視野領域を撮影して前記第２の画像データを生成することを特徴とする。
【００１５】
また、本発明にかかる撮像装置は、上記発明において、前記第２の画像は、円環状をなし、前記第２の画像を、帯状の表示領域を有する画像に変換する画像変換部をさらに備えたことを特徴とする。
【００１６】
また、本発明にかかる表示方法は、互いに異なる視野領域を撮像することによって第１および第２の画像データを生成することが可能な撮像装置が実行する表示方法であって、前記第１の画像データに対応する第１の画像および前記第２の画像データに対応する第２の画像を表示可能な表示ステップと、前記表示ステップで表示する画像の変更を指示する指示信号の入力を受け付ける入力ステップと、前記表示ステップで前記第１の画像を表示している場合において、前記入力ステップから前記指示信号の入力を受け付けたとき、当該撮像装置を中心にして見たときの前記第１の画像および前記第２の画像にそれぞれ写る被写体の位置関係を反映させた状態で前記第２の画像の少なくとも一部を前記表示部に表示させる表示制御ステップと、を含むことを特徴とする。
【００１７】
また、本発明にかかるプログラムは、互いに異なる視野領域を撮像することによって第１および第２の画像データを生成することが可能な撮像装置に実行させるプログラムであって、前記第１の画像データに対応する第１の画像および前記第２の画像データに対応する第２の画像を表示可能な表示ステップと、前記表示ステップで表示する画像の変更を指示する指示信号の入力を受け付ける入力ステップと、前記表示ステップで前記第１の画像を表示している場合において、前記入力ステップから前記指示信号の入力を受け付けたとき、当該撮像装置を中心にして見たときの前記第１の画像および前記第２の画像にそれぞれ写る被写体の位置関係を反映させた状態で前記第２の画像の少なくとも一部を前記表示部に表示させる表示制御ステップと、を実行させることを特徴とする。
【発明の効果】
【００１８】
本発明によれば、表示制御部が、表示部によって前記第１の画像が表示されている場合において、入力部から指示信号の入力を受け付けたとき、撮像装置を中心にして見たときの第１の画像と第２の画像にそれぞれ写る被写体の位置関係を反映させた状態で第２の画像の少なくとも一部を表示部に表示させる。撮影者の意図した構図を維持しつつ、撮影者自身の画像も付加することもできるという効果を奏する。
【図面の簡単な説明】
【００１９】
【図１】図１は、本発明の実施の形態１にかかる撮像装置の被写体に面する側の構成を示す図である。
【図２】図２は、本発明の実施の形態１にかかる撮像装置の撮影者に面する側の構成を示す図である。
【図３】図３は、本発明の実施の形態１にかかる撮像装置の構成を示すブロック図である。
【図４】図４は、本発明の実施の形態１にかかる撮像装置が行う処理の概要を示すフローチャートである。
【図５】図５は、撮影者が撮像装置を用いて撮影する際の状況を示す図である。
【図６】図６は、図５に示す状況下で表示部が時系列に沿って順次表示するライブビュー画像のうち代表的な一枚の画像を示す図である。
【図７】図７は、本発明の実施の形態１にかかる撮像装置の背面撮影部が生成する画像の一例を示す図である。
【図８】図８は、本発明の実施の形態１にかかる撮像装置の画像合成部が顔画像を正面画像に合成する際に参照する撮像装置を中心にした見たときの正面画像および副画像に写る被写体の位置関係を模式的に説明する図である。
【図９】図９は、図８の矢視Ａ方向の平面図である。
【図１０】図１０は、本発明の実施の形態１にかかる撮像装置の画像合成部が生成する合成画像の一例を示す図である。
【図１１】図１１は、本発明の実施の形態１にかかる撮像装置の表示制御部が合成画像から副画像への切換えを模式的に説明する図である。
【図１２】図１２は、本発明の実施の形態１の変形例１にかかる撮像装置の表示部が表示する合成画像の一例を示す図である。
【図１３】図１３は、本発明の実施の形態１の変形例１にかかる撮像装置の表示制御部が合成画像から副画像への切換えを模式的に説明する図である。
【図１４】図１４は、本発明の実施の形態１の変形例２にかかる撮像装置の被写体に面する側の構成を示す図である。
【図１５】図１５は、本発明の実施の形態１の変形例２にかかる撮像装置を用いて撮影する場合において、撮像装置を中心にして見たときの正面画像および副画像に写る被写体の位置関係を模式的に説明する図である。
【図１６】図１６は、画像合成部が生成する合成画像の一例を示す図である。
【図１７】図１７は、表示制御部が合成画像から副画像への切換えを模式的に説明する図である。
【図１８】図１８は、本発明の実施の形態２にかかる撮像装置の被写体に面する側の構成を示す図である。
【図１９】図１９は、本発明の実施の形態２にかかる撮像装置の撮影者に面する側の構成を示す図である。
【図２０】図２０は、本発明の実施の形態２にかかる撮像装置の構成を示すブロック図である。
【図２１】図２１は、全方位撮像部の光学系の構成を説明する模式図である。
【図２２】図２２は、本発明の実施の形態２にかかる撮像装置が行う処理の概要を示すフローチャートである。
【図２３】図２３は、全方位撮像部が生成する全方位画像の一例を示す図である。
【図２４】図２４は、画像合成部が生成する合成画像の一例を示す図である。
【図２５】図２５は、表示制御部が合成画像を表示する際に参照する撮像装置を中心にして見たときの正面画像および副画像として全方位画像に写る被写体の位置関係を模式的に説明する図である。
【図２６】図２６は、表示制御部が表示部に表示させる合成画像の一例を示す図である。
【図２７】図２７は、表示制御部が合成画像から全方位画像への切換えを模式的に説明する図である。
【発明を実施するための形態】
【００２０】
以下、図面を参照して、本発明を実施するための形態（以下、「実施の形態」という）について説明する。なお、以下に説明する実施の形態によって本発明が限定されるものではない。また、図面の記載において、同一の部分には同一の符号を付している。
【００２１】
（実施の形態１）
図１は、本発明の実施の形態１にかかる撮像装置１の被写体に面する側（前面側）の構成を示す図である。図２は、本発明の実施の形態１にかかる撮像装置１の撮影者に面する側（背面側）の構成を示す図である。図３は、本発明の実施の形態１にかかる撮像装置１の構成を示すブロック図である。
【００２２】
図１〜図３に示すように、撮像装置１は、撮像部２と、タイマー３と、操作入力部４と、背面撮像部５と、表示部６と、タッチパネル７と、記憶部８と、制御部９と、を備える。
【００２３】
撮像部２は、所定の視野領域を撮像して画像データ（以下、「正面画像データ」という）を生成する。撮像部２は、レンズ部２１と、レンズ駆動部２２と、絞り２３と、絞り駆動部２４と、シャッタ２５と、シャッタ駆動部２６と、撮像素子２７と、撮像駆動部２８と、信号処理部２９と、を有する。なお、本実施の形態１では、撮像部２が第１の撮像部として機能する。
【００２４】
レンズ部２１は、フォーカスおよびズーム可能な複数のレンズ群によって構成され、所定の視野領域から光を集光する。レンズ駆動部２２は、ステッピングモータまたはＤＣモータを用いて構成され、レンズ部２１のレンズ群を光軸Ｌ１上に沿って移動させることにより、レンズ部２１のピント位置や焦点距離等の変更を行う。
【００２５】
絞り２３は、レンズ部２１が集光した光の入射量を制限することにより露出の調整を行う。絞り駆動部２４は、ステッピングモータ等によって構成され、絞り２３を駆動する。
【００２６】
シャッタ２５は、撮像素子２７の状態を露光状態または遮光状態に設定する。シャッタ駆動部２６は、ステッピングモータ等によって構成され、レリーズ信号に応じてシャッタ２５を駆動する。
【００２７】
撮像素子２７は、ＣＣＤ（Charge  Coupled  Device）またはＣＭＯＳ（Complementary  Metal  Oxide  Semiconductor）等によって構成される。撮像素子２７は、レンズ部２１が集光した光を受光して光電変換を行うことによって、光を電気信号（アナログ信号）に変換する。撮像駆動部２８は、撮像素子２７を駆動するタイミングパルスを生成し、撮像素子２７が光電変換した電気信号を信号処理部２９に出力させる。
【００２８】
信号処理部２９は、アナログアンプやＡ／Ｄ変換器等によって構成される。信号処理部２９は、撮像素子２７から出力される電気信号に増幅（ゲイン調整）等の信号処理を施した後、Ａ／Ｄ変換を行うことによってデジタルの正面画像データに変換して制御部９に出力する。
【００２９】
タイマー３は、計時機能および撮影日時の判定機能を有する。タイマー３は、撮像された画像データに日時データを付加させるため、制御部９に日時データを出力する。
【００３０】
操作入力部４は、撮像装置１の電源状態をオン状態またはオフ状態に切換える電源スイッチ４１と、撮影の指示を与えるレリーズ信号の入力を受け付けるレリーズスイッチ４２と、撮像装置１に設定された各種撮影モードを切換える撮影モード切換スイッチ４３と、を有する。
【００３１】
背面撮像部５は、撮像部２と異なる視野領域を撮像して背面画像データ（以下、「副画像データ」という）を生成する。背面撮像部５は、撮像部２と同一の構成によって実現され、レンズ部２１と、レンズ駆動部２２と、絞り２３と、絞り駆動部２４、シャッタ２５と、シャッタ駆動部２６と、撮像素子２７と、撮像駆動部２８と、信号処理部２９と、を有する。なお、本実施の形態１では、背面撮像部５が第２の撮像部として機能する。
【００３２】
表示部６は、撮像部２が生成する正面画像データに対応する正面画像および背面撮像部５が生成する副画像データに対応する副画像を表示する。表示部６は、撮像装置１の操作情報および撮影に関する情報を適宜表示する。
【００３３】
タッチパネル７は、表示部６の表示画面上に重ねて設けられる。タッチパネル７は、ユーザが表示部６に表示される情報に基づいて接触（タッチ）した位置を検出し、この接触位置に応じた指示信号の入力を受け付ける。一般に、タッチパネルとしては、抵抗膜方式、静電容量方式、光学式等がある。本実施の形態１では、いずれの方式のタッチパネルであっても適用可能である。なお、本実施の形態１では、タッチパネル７が入力部として機能する。
【００３４】
記憶部８は、撮像装置１の内部に固定的に設けられるフラッシュメモリおよびＲＡＭ（Random  Access  Memory）等の半導体メモリを用いて実現される。記憶部８は、制御部９が実行中のデータを記憶する。記憶部８は、撮像部２や背面撮像部５が撮像した画像データを記憶する画像データ記憶部８１と、撮像装置１が実行する各種プログラムを記憶するプログラム記憶部８２と、被写体の顔の検出を行う際に参照する顔画像情報およびユーザによって予め登録された被写体の顔の特徴を記憶する特徴情報を記憶する顔情報記憶部８３と、を有する。なお、記憶部８は、外部から装着されるメモリカード等のコンピュータで読取可能な記憶媒体を含むものであってもよい。
【００３５】
制御部９は、ＣＰＵ（Central  Processing  Unit）等を用いて構成される。制御部９は、操作入力部４やタッチパネル７からの指示信号や切換信号等に応じて撮像装置１を構成する各部に対応する指示やデータの転送等を行って撮像装置１の動作を統括的に制御する。
【００３６】
制御部９の詳細な構成について説明する。制御部９は、画像処理部９１と、顔検出部９２と、トリミング部９３と、画像合成部９４と、表示制御部９５と、画像関連付け部９６と、を有する。
【００３７】
画像処理部９１は、撮像部２および背面撮像部５それぞれから入力される正面画像データおよび副画像データに対して各種の画像処理を施す。具体的には、画像処理部９１は、正面画像データおよび副画像データそれぞれに対して、エッジ強調処理、ホワイトバランス処理およびγ補正処理を含む画像処理を行う。画像処理部９１は、ＪＰＥＧ（Joint  Photographic  Experts  Group）方式等に基づいて、正面画像データおよび副画像データそれぞれの圧縮処理や伸長処理を行う。
【００３８】
顔検出部９２は、正面画像および副画像それぞれに含まれる被写体の顔を検出する。具体的には、顔検出部９２は、正面画像および背面側画像それぞれに含まれる人物の顔をパターンマッチングによって検出する。なお、顔検出部９２は、人物の顔だけでなく、犬や猫等の顔を検出してもよい。さらに、顔検出部９２は、パターンマッチング以外の周知技術を用いて人物の顔を検出してもよい。
【００３９】
トリミング部９３は、顔検出部９２が検出した被写体の顔を一部に含む顔領域を副画像から切出して顔画像を生成する。トリミング部９３は、顔検出部９２が副画像から被写体の顔を複数検出した場合、副画像から各顔領域をそれぞれ切出して顔画像を生成してもよい。
【００４０】
画像合成部９４は、トリミング部９３が生成した顔画像を、正面画像の指定位置に合成した合成画像を生成する。
【００４１】
表示制御部９５は、表示部６が正面画像を表示している場合において、タッチパネル７から表示部６が表示する画像の変更を指示する指示信号の入力を受け付けたとき、撮像装置１を中心にして見たときの正面画像および副画像にそれぞれ写る被写体の位置関係を反映させた状態で副画像の少なくとも一部を表示部６に表示させる。具体的には、表示制御部９５は、表示部６の表示画面において、撮像装置１を中心にして見たときの正面画像および副画像にそれぞれ写る被写体の位置関係を反映させた方向から副画像の少なくとも一部を表示部６に表示させる。
【００４２】
画像関連付け部９６は、正面画像データに、副画像データを関連付けた画像ファイルを生成し、この生成した画像ファイルを画像データ記憶部８１に記憶する。具体的には、画像関連付け部９６は、Ｅｘｔｅｎｄｅｄ  ＭＰファイルフォーマートに基づいて、正面画像データに副画像データを関連付けた画像ファイルを生成し、この生成した画像ファイルを画像データ記憶部８１に記憶する。
【００４３】
以上の構成を有する撮像装置１に、音声入出力機能、フラッシュ機能、着脱自在な電子ビューファインダ（ＥＶＦ）およびインターネットを介してパーソナルコンピュータ等の外部処理装置（図示せず）と双方向に通信可能な通信部等を具備させてもよい。
【００４４】
つぎに、本実施の形態１にかかる撮像装置１が行う処理について説明する。図４は、撮像装置１が行う処理の概要を示すフローチャートである。
【００４５】
図４において、撮像装置１が撮影モードに設定されている場合（ステップＳ１０１：Ｙｅｓ）について説明する。この場合、表示制御部９５は、撮像部２が微小な時間間隔で連続的に生成する正面画像データに対応するライブビュー画像を表示部６に表示させる（ステップＳ１０２）。
【００４６】
図５は、撮影者が撮像装置１を用いて撮影する際の状況を示す図である。図６は、図５に示す状況下で表示部６が時系列に沿って順次表示するライブビュー画像のうち代表的な一枚の画像Ｗ１を示す図である。図５および図６に示すように家族写真を撮影する場合において、撮影者Ｋ１（お父さん）は、たとえば図６のライブビュー画像Ｗ１を見ながら被写体Ｋ２（お母さん）および被写体Ｋ３（子供）を撮影するときの構図を決定する。
【００４７】
続いて、レリーズスイッチ４２が操作されることにより、レリーズ信号が入力された場合（ステップＳ１０３：Ｙｅｓ）、撮像装置１は、制御部９の制御のもと、撮像部２が生成した正面画像データを取得する（ステップＳ１０４）。
【００４８】
その後、制御部９は、撮像装置１に背面撮像部５を起動させて副画像データを取得する副画像同時記憶モードが設定されているか否かを判断する（ステップＳ１０５）。撮像装置１に副画像同時記憶モードが設定されていると制御部９が判断した場合（ステップＳ１０５：Ｙｅｓ）、撮像装置１は、後述するステップＳ１０６へ移行する。一方、撮像装置１に副画像同時記憶モードが設定されていないと制御部９が判断した場合（ステップＳ１０５：Ｎｏ）、撮像装置１は、後述するステップＳ１１１へ移行する。
【００４９】
ステップＳ１０６において、撮像装置１は、制御部９の制御のもと、背面撮像部５が生成した副画像データを取得する。たとえば、図７に示すように、撮像装置１は、背面撮像部５が生成した副画像データに対応する副画像として撮影者Ｋ１が写る副画像Ｗ２を取得する。
【００５０】
続いて、画像関連付け部９６は、正面画像データに、副画像データを対応付けた画像ファイルを作成し、この作成した画像ファイルを画像データ記憶部８１に記憶させる（ステップＳ１０７）。
【００５１】
その後、表示制御部９５は、取得した正面画像データに対応する正面画像を所定時間（たとえば３秒）だけ表示部６にレックビュー表示させる（ステップＳ１０８）。なお、表示制御部９５は、副画像データに対応する副画像を所定時間（たとえば３秒）だけ表示部６にレックビュー表示させてもよい。
【００５２】
続いて、制御部９は、電源スイッチ４１が操作されることにより、撮像装置１の電源がオフ状態であるか否かを判断する（ステップＳ１０９）。撮像装置１の電源がオフ状態であると制御部９が判断した場合（ステップＳ１０９：Ｙｅｓ）、撮像装置１は、本処理を終了する。一方、撮像装置１の電源がオフ状態でないと制御部９が判断した場合（ステップＳ１０９：Ｎｏ）、撮像装置１は、ステップＳ１１０へ移行する。
【００５３】
ステップＳ１１０において、制御部９は、撮影モード切換スイッチ４３からモード切換信号が入力された場合、モード切換信号に応じて撮影・再生モードの切換操作を受け付ける一方、撮影モード切換スイッチ４３を介してモード切換信号が入力されていない場合、現在のモードを維持する。ステップＳ１１０の後、撮像装置１は、ステップＳ１０１へ戻る。
【００５４】
ステップＳ１０３において、所定時間（たとえば２秒）内にレリーズスイッチ４２を介してレリーズ信号が入力されていない場合（ステップＳ１０３：Ｎｏ）、撮像装置１は、ステップＳ１０９へ移行する。
【００５５】
ステップＳ１０５において、撮像装置１に副画像同時記憶モードが設定されていないと制御部９が判断した場合（ステップＳ１０５：Ｎｏ）について説明する。この場合、制御部９は、撮像部２から取得した正面画像データを画像データ記憶部８１に記憶させる（ステップＳ１１１）。その後、撮像装置１は、ステップＳ１０８へ移行する。
【００５６】
つぎに、撮像装置１が撮影モードに設定されておらず（ステップＳ１０１：Ｎｏ）、再生モードに設定されている場合（ステップＳ１１２：Ｙｅｓ）について説明する。この場合、表示制御部９５は、画像データ記憶部８１が記憶する各画像ファイルの画像データに対応する画像を縮小した縮小画像（サムネイル画像）の一覧を表示部６に表示させる（ステップＳ１１３）。
【００５７】
続いて、操作入力部４またはタッチパネル７を介して拡大して表示する画像ファイルの縮小画像が選択された場合（ステップＳ１１４：Ｙｅｓ）、制御部９は、選択された画像ファイル内に正面画像データと副画像データとが記憶されているか否かを判断する（ステップＳ１１５）。選択された画像ファイル内に正面画像データと副画像データとが記憶されていると制御部９が判断した場合（ステップＳ１１５：Ｙｅｓ）、撮像装置１は、後述するステップＳ１１６へ移行する。一方、選択された画像ファイル内に正面画像データと副画像データとが記憶されていないと制御部９が判断した場合（ステップＳ１１５：Ｎｏ）、撮像装置１は、後述するステップＳ１２５へ移行する。
【００５８】
ステップＳ１１６において、トリミング部９３は、顔検出部９２が副画像から検出した被写体の顔を一部に含む顔領域を副画像から切出して顔画像を生成する。具体的には、図７に示すように、トリミング部９３は、顔検出部９２が副画像Ｗ２から検出した被写体Ｋ１の顔を一部に含む顔領域を副画像Ｗ２から切出して顔画像を生成する。
【００５９】
続いて、画像合成部９４は、トリミング部９３が生成した被写体Ｋ１の顔画像を、撮影時において撮像装置１を中心にして見たときの正面画像および副画像にそれぞれ写る被写体の位置関係を反映させた正面画像の表示領域に合成して合成画像を生成する（ステップＳ１１７）。
【００６０】
図８は、画像合成部９４が顔画像を正面画像に合成する際に参照する撮像装置１を中心にして見たときの正面画像および副画像にそれぞれ写る被写体の位置関係を模式的に説明する図である。図９は、図８の矢視Ａ方向の平面図である。なお、図８において、点線で表す領域Ｗ１が撮像部２の撮影領域を示し、点線で表す領域Ｗ２が背面撮像部５の撮影領域を示す。
【００６１】
図８および図９に示すように、画像合成部９４は、顔画像を正面画像Ｗ１に合成する際に、撮影時において撮像装置１を中心にして見たときの正面画像および副画像にそれぞれ写る被写体の位置関係を反映させた正面画像の表示領域に顔画像を合成する。たとえば、画像合成部９４は、図７に示す状況のように被写体Ｋ１の顔が副画像Ｗ２の左側に写っている場合において、撮像装置１を中心にして撮像部２を仮想的に回転（矢印（ａ））させたとき、被写体Ｋ１が正面画像Ｗ１内において仮想的に写る正面画像Ｗ１の表示領域に顔画像Ａ１を合成する（図８および図９を参照）。具体的には、図１０に示すように、画像合成部９４は、正面画像Ｗ１における右端部の近傍に顔画像Ａ１を合成して合成画像Ｗ３を生成する。
【００６２】
ステップＳ１１７の後、表示制御部９５は、画像合成部９４が合成した合成画像Ｗ３を表示部６に表示させる（ステップＳ１１８）。
【００６３】
続いて、制御部９は、表示部６が表示する合成画像Ｗ３内における顔画像Ａ１に対してスライド操作が行われたか否かを判断する（ステップＳ１１９）。顔画像Ａ１に対してスライド操作が行われたと制御部９が判断した場合（ステップＳ１１９：Ｙｅｓ）、表示制御部９５は、ユーザによるスライド操作の軌跡に応じて、撮影時において撮像装置１を中心にして見たときの正面画像Ｗ１と副画像Ｗ２に写る被写体の位置関係を反映させた状態で合成画像Ｗ３から副画像Ｗ２に切換えて表示部６に表示させる（ステップＳ１２０）。
【００６４】
図１１は、表示制御部９５が合成画像Ｗ４から副画像Ｗ２への切換えを模式的に説明する図である。図１１に示すように、表示制御部９５は、顔画像Ａ１に対するスライド操作の軌跡に応じて、副画像Ｗ２の表示領域を左端部から徐々に増やしながら副画像Ｗ２の少なくとも一部を表示させながら、合成画像Ｗ３の表示領域を左端部から徐々に減少させながら表示させる（図１１（ａ）→図１１（ｂ））。これにより、表示制御部９５は、撮影時において撮像装置１を中心にした見たときの正面画像および副画像に写る被写体の位置関係を反映させた方向から滑らかに画面遷移を行うことができる。
【００６５】
ステップＳ１２０の後、制御部９は、ユーザが顔画像Ａ１から指を離したか否かを判断する（ステップＳ１２１）。ユーザが顔画像Ａ１から指を離したと制御部９が判断した場合（ステップＳ１２１：Ｙｅｓ）、表示制御部９５は、撮像装置１を中心にして見たときの正面画像および副画像に写る被写体の位置関係を反映させた状態で副画像Ｗ２から合成画像Ｗ３に切換える（ステップＳ１２２）。具体的には、表示制御部９５は、表示部６の表示画面における右端部から瞬時に移動したように副画像Ｗ２の表示領域を減少させながら表示させる。その後、撮像装置１は、ステップＳ１２３へ移行する。一方、ユーザが顔画像Ａ１に対してタッチを維持しながら表示画面上を移動させていると制御部９が判断した場合（ステップＳ１２１：Ｎｏ）、撮像装置１は、この判断を続ける。
【００６６】
ステップＳ１２３において、制御部９は、画像の切換操作が行われたか否かを判断する。具体的には、制御部９は、操作入力部４から他の画像を切換える切換信号が入力されたか否かを判断する。画像の切換操作が行われたと制御部９が判断した場合（ステップＳ１２３：Ｙｅｓ）、撮像装置１は、ステップＳ１２４へ移行する。一方、操作入力部４を介して画像の切換操作が行われていないと制御部９が判断した場合（ステップＳ１２３：Ｎｏ）、撮像装置１は、ステップＳ１１９へ戻る。
【００６７】
ステップＳ１２４において、制御部９は、撮像装置１が再生モードに設定されているか否かを判断する。撮像装置１が再生モードに設定されていると制御部９が判断した場合（ステップＳ１２４：Ｙｅｓ）、撮像装置１は、ステップＳ１１３へ戻る。一方、撮像装置１が再生モードに設定されていないと制御部９が判断した場合（ステップＳ１２４：Ｎｏ）、撮像装置１は、ステップＳ１０９へ移行する。
【００６８】
ステップＳ１１９において、顔画像Ａ１に対してスライド操作が行われていないと制御部９が判断した場合（ステップＳ１１９：Ｎｏ）、撮像装置１は、ステップＳ１２３へ移行する。
【００６９】
ステップＳ１１５において、選択された画像ファイル内に副画像データが記憶されていないと制御部９が判断した場合（ステップＳ１１５：Ｎｏ）、表示制御部９５は、正面画像データに対応する正面画像を全画面に拡大して表示部６に表示させる（ステップＳ１２５）。その後、撮像装置１は、ステップＳ１２４へ移行する。
【００７０】
ステップＳ１１４において、画像ファイルが選択されない場合（ステップＳ１１４：Ｎｏ）について説明する。この場合、制御部９は、所定時間（たとえば５秒）経過したか否かを判断する（ステップＳ１２６）。所定時間経過したと制御部９が判断した場合（ステップＳ１２６：Ｙｅｓ）、撮像装置１は、ステップＳ１０９へ移行する。一方、所定時間経過していないと制御部９が判断した場合（ステップＳ１２６：Ｎｏ）、撮像装置１は、ステップＳ１１４へ戻る。
【００７１】
以上説明した本発明の実施の形態１によれば、表示制御部９５が、表示部６によって正面画像が表示されている場合において、タッチパネル７から副画像の切換えを指示する指示信号の入力を受け付けたとき、撮像装置１を中心にして見たときの正面画像および副画像にそれぞれ写る被写体の位置関係を反映させた状態で副画像の少なくとも一部を表示部６に表示させる。これにより、撮影者の意図した構図を維持しつつ、撮影者自身の画像も付加することもでき、家族写真のように撮影時における思い出を共用することができる再生を行うことができる。
【００７２】
さらに、本発明の実施の形態１によれば、ユーザが正面画像を鑑賞している場合において、他方の副画像を見たくなったときに、顔画像Ａ１に対してスライド操作を行うことで、すぐに副画像を確認することができる。
【００７３】
また、本発明の実施の形態１によれば、表示制御部９５が、表示部６によって表示されている正面画像に副画像が関連付けられていることを示す情報を重畳して表示する。これにより、撮影者は、実際に撮影した正面画像を確認することができるとともに、副画像を表示可能であることを直感的に把握することができる。
【００７４】
なお、上述した実施の形態１では、ユーザが顔画像Ａ１に対してスライド操作の軌跡に応じて、表示制御部９５が副画像Ｗ２を徐々に表示部６に表示させていたが、たとえばユーザが顔画像Ａ１の領域内をタッチした場合、表示制御部９５は、表示部６が表示している合成画像Ｗ３に変えて、撮像装置１を中心にして見たときの正面画像および副画像にそれぞれ写る被写体の位置関係を反映させた方向から副画像Ｗ２を瞬時（たとえば０．５〜１秒以内）に表示させてもよい。
【００７５】
また、上述した実施の形態１では、ユーザが顔画像Ａ１に対してスライド操作の軌跡に応じて、表示制御部９５が副画像Ｗ２を徐々に表示部６に表示させていたが、単に顔画像Ａ１のみを移動させてもよい。この場合、ユーザが顔画像Ａ１から指を離した場合、表示制御部９５は、顔画像Ａ１を画像合成部９４が正面画像Ｗ１に合成した合成位置に戻るように表示部６に表示させてもよい。
【００７６】
（実施の形態１の変形例１）
上述した実施の形態１において、表示部６によって表示されている正面画像に副画像を対応付けて記憶されていることを示す情報を顔画像に変えて他の画像に変更することも可能である。
【００７７】
図１２は、本発明の実施の形態１の変形例１にかかる撮像装置１の表示部６が表示する合成画像の一例を示す図である。
【００７８】
図１２に示すように、表示制御部９５は、表示部６によって表示されている合成画像Ｗ１０に副画像Ｗ１１を対応付けて記憶されていることを示す情報として折れ部Ｒ１を表示させる。表示制御部９５は、ユーザが折れ部Ｒ１にタッチしながら表示画面の左方向に向けてスライド操作させた場合、タッチパネル７から入力される指示信号に応じて、折れ部Ｒ１が左方向に向けてめくられるように折れ部Ｒ１の表示面積を拡大しながら、副画像Ｗ１１を表示部６に表示させる。具体的には、図１３に示すように、ユーザが折れ部Ｒ１にタッチしながら表示画面の左方向（矢印（ａ））に向けてスライド操作した場合、表示制御部９５は、タッチパネル７から入力される指示信号に応じて、折れ部Ｒ１が左方向に向けてめくられるように折れ部Ｒ１の表示面積を拡大する。この際、表示制御部９５は、表示部６が表示している主画像Ｗ１０に対応付けて記憶された副画像Ｗ１１の表示面積を拡大して表示させる。これにより、ユーザは、ページをめくるように折れ部Ｒ１を移動させることで、副画像Ｗ１１を確認することができる。
【００７９】
（実施の形態１の変形例２）
上述した実施の形態１において、撮像装置１における背面撮像部５の位置を変更することも可能である。
【００８０】
図１４は、本発明の実施の形態１の変形例２にかかる撮像装置１００の被写体に面する側の構成を示す図である。本発明の実施の形態１の変形例２にかかる撮像装置１００は、上述した実施の形態１と同様の構成を有する。なお、図面の記載において、同一の部分には同一の符号を付している。
【００８１】
図１４に示すように、撮像装置１００は、背面撮像部５を側面に設けている。具体的には、背面撮像部５は、撮像部２の光軸Ｌ１と直交する撮像装置１００の側面に設けられる。このように構成された撮像装置１００を用いて撮影する際の撮影状況について説明する。
【００８２】
図１５は、撮像装置１００を用いて撮影する場合において、撮像装置１００を中心に見たときの正面画像と副画像との位置関係を模式的に説明する図である。なお、図１５において、点線で示す領域Ｗ２０が撮像部２の撮影領域を示し、点線で示す領域Ｗ２１が背面撮像部５の撮影領域を示す。
【００８３】
図１５に示すように、撮影者Ｋ１が撮像装置１００で被写体Ｋ３を撮影するような場合において、被写体Ｋ３を横で見ていた被写体Ｋ２を背面撮像部５で撮影することも可能である。このような状況下で撮像装置１００が撮像した正面画像データおよび副画像データを用いて、表示制御部９５が表示部６に表示させる画像について説明する。
【００８４】
図１５に示すように、表示制御部９５は、撮像時において撮像装置１００を中心に見たとき、正面に被写体Ｋ３がおり、左側に被写体Ｋ２がいるので、表示部６が表示する主画像の左側に折れ部Ｒ２を表示させる。具体的には、図１６に示すように、表示制御部９５は、撮影時において撮像装置１００を中心にして見たときの主画像Ｗ２０および副画像Ｗ２１に写る被写体の位置関係を反映させた方向に折れ部Ｒ２を主画像Ｗ２０上に表示させる。
【００８５】
さらに、図１７に示すように、表示制御部９５は、折れ部Ｒ２に対するスライド操作（矢印（ａ））に応じて、正面画像Ｗ２０の縦横比率を変化させながら正面画像Ｗ２０を表示させるとともに、正面画像Ｗ２０の縦横比率の変換によって生じる画面内の空き領域に副画像Ｗ２１を表示部６に表示させる。ここで、縦横比率とは、正面画像Ｗ４０の縦に対する横の比率である。これにより、ユーザに対して、撮影時における正面画像Ｗ２０および副画像Ｗ２１にそれぞれ写る被写体の位置関係を直感的に把握させることができるとともに、正面画像Ｗ２０および副画像Ｗ２１を同時に確認させることができる。
【００８６】
（実施の形態２）
つぎに、本発明の実施の形態２について説明する。本発明の実施の形態２にかかる撮像装置は、上述した背面撮像部に変えて全方位撮像部を備える。さらに、本発明の実施の形態２にかかる撮像装置は、制御部の構成が上述した撮像装置と異なる。このため、以下においては、上述した実施の形態１と異なる構成を説明後、本発明の実施の形態にかかる撮像装置による動作について説明する。なお、図面の記載において、同一の部分には同一の符号を付している。
【００８７】
図１８は、本発明の実施の形態２にかかる撮像装置２００の被写体に面する側（前面側）の構成を示す図である。図１９は、本発明の実施の形態２にかかる撮像装置２００の撮影者に面する側（背面側）の構成を示す図である。図２０は、本発明の実施の形態２にかかる撮像装置の構成を示すブロック図である。
【００８８】
図１８〜図２０に示すように、撮像装置２００は、撮像部２と、タイマー３と、操作入力部４と、表示部６と、タッチパネル７と、記憶部８と、全方位撮像部３００と、通信部４００と、制御部５００と、を備える。
【００８９】
全方位撮像部３００は、撮像部２の光軸Ｌ１と直交する光軸Ｌ３の周りの全周にわたる視野領域を撮像して第２の画像データとしての全方位画像データを生成する。全方位撮影部３００は、撮像部２と同様に、光学系と、絞りと、シャッタと、撮像素子と、信号処理部と、を有する。図２１は、全方位撮像部３００の光学系３１０の構成を説明する模式図である。
【００９０】
図２１に示す光学系３１０は、光軸Ｌ３を中心軸として回転対称な形状をなしており、光軸Ｌ３の周りの全方位（水平画角３６０度）を視野領域として光を集光する軸対称自由曲面レンズ３１１と、軸対称自由曲面レンズ３１１に凹面を向けた正メニスカスレンズ３１２と、両凸正レンズ３１３および軸対称自由曲面レンズ３１１に凹面を向けた負メニスカスレンズ３１４からなる接合レンズ３１５と、両凸正レンズ３１６および両凹負レンズ３１７からなる接合レンズ３１８と、を有する。
【００９１】
軸対称自由曲面レンズ３１１は、屈折率が１より大きい樹脂等の透明媒体によって形成され、遠方からの光束が入射する第１透過面３１１ａと、第１透過面３１１ａから入射した光束が入射して反射する第１反射面３１１ｂと、第１反射面３１１ｂで反射された光束が入射する第２反射面３１１ｃと、第２反射面３１１ｃで反射された光束が入射する第２透過面３１１ｄと、を有する。
【００９２】
以上の構成を有する全方位撮像部３００は、光軸Ｌ３の周りの全周にわたる視野領域から光を集光し、この集光した光を撮像素子（図示せず）が光電変換した後、所定の信号処理を施してＡ／Ｄ変換することにより、円環状をなす全方位画像データを生成する。全方位撮像部３００は、通信部４００を介して制御部５００に全方位画像データを出力する。なお、全方位撮像部３００の詳細な構成は、たとえば特開２００６−２４３６８９号公報に開示されている。また、全方位撮像部３００は、通信部４００を介して撮像装置２００と接続される。さらに、本実施の形態２では、全方位撮像部３００が第２の撮像部として機能する。
【００９３】
通信部４００は、撮像装置２００に装着される全方位撮像部３００との通信を行うための通信インターフェースである。
【００９４】
制御部５００は、画像処理部９１と、顔検出部９２と、トリミング部９３と、画像合成部９４と、表示制御部９５と、画像関連付け部９６と、画像変換部５０１と、を有する。
【００９５】
画像変換部５０１は、全方位撮像部３００が生成した全方位画像データに対応する全方位画像を帯状に変換した変換画像を生成する。具体的には、画像変換部５０１は、円環状の全方位画像を帯状に変換した変換画像を生成する。
【００９６】
以上の構成を有する撮像装置が行う処理について説明する。図２２は、撮像装置２００が行う処理の概要を示すフローチャートである。
【００９７】
図２２において、撮像装置２００が撮影モードに設定されている場合（ステップＳ２０１：Ｙｅｓ）について説明する。この場合、制御部５００は、撮像装置２００が正面画像に副画像として全方位画像を対応付けて記憶する副画像同時記憶モードに設定されているか否かを判断する（ステップＳ２０２）。撮像装置２００が副画像同時記憶モードに設定されていると制御部５００が判断した場合（ステップＳ２０２：Ｙｅｓ）、撮像装置２００は、後述するステップＳ２０３へ移行する。一方、撮像装置２００が副画像同時記憶モードに設定されていないと制御部５００が判断した場合（ステップＳ２０２：Ｎｏ）、撮像装置２００は、後述するステップＳ２１５へ移行する。
【００９８】
ステップＳ２０３において、撮像装置２００は、制御部５００の制御のもと、撮像部２が生成する正面画像データと全方位撮像部３００が生成した全方位画像データとを取得する。たとえば、図２３に示すように、撮像装置２００は、全方位撮像部３００が生成した全方位画像データに対応する全方位画像Ｗ２１を取得する。全方位画像Ｗ２１は、円環状をなす撮影領域に被写体Ｋ１〜Ｋ３が写っている。
【００９９】
続いて、画像変換部５０１は、全方位画像Ｗ２１の形状を円環状から帯状に変換して変換画像を生成する（ステップＳ２０４）。具体的には、図２３に示すように、画像変換部５０１は、全方位画像Ｗ２１の所定位置、たとえば切出し線Ｃから切断して帯状をなす画像に変換することによって変換画像を生成する。なお、画像変換部５０１が全方位画像Ｗ２１から切断する位置は、適宜設定することが可能である。さらに、画像変換部５０１は、顔検出部９２の検出結果、たとえば被写体Ｋ３を正面画像Ｗ３０および全方位画像Ｗ２１それぞれから検出した場合、被写体Ｋ３が変換画像の中央に表示されるように切出してもよい。
【０１００】
その後、画像合成部９４は、撮像部２が生成した正面画像に画像変換部５０１が変換した変換画像を合成して合成画像を生成する（ステップＳ２０５）。具体的には、図２４に示すように、画像合成部９４は、正面画像Ｗ３０における上部の外縁領域に変換画像Ｗ３１を合成して合成画像Ｗ３２を生成する。なお、画像合成部９４は、変換画像Ｗ３１を正面画像Ｗ３０における下部の外縁領域に合成して合成画像を生成してもよい。
【０１０１】
続いて、表示制御部９５は、画像合成部９４が生成した合成画像Ｗ３２を表示部６に表示させる（ステップＳ２０６）。これにより、ユーザは、表示部６が表示する合成画像Ｗ３２を確認することで、正面画像Ｗ３０と全方位画像Ｗ３１とを直感的に把握することができる。
【０１０２】
その後、レリーズスイッチ４２が操作されることにより、レリーズ信号が入力された場合（ステップＳ２０７：Ｙｅｓ）、撮像装置２００は、制御部５００の制御のもと、撮像部２が生成した正面画像データを取得する（ステップＳ２０８）。
【０１０３】
続いて、制御部５００は、撮像装置２００が副画像同時記憶モードに設定されているか否かを判断する（ステップＳ２０９）。撮像装置２００が副画像同時記憶モードに設定されている場合（ステップＳ２０９：Ｙｅｓ）、撮像装置２００は、後述するステップＳ２１０へ移行する。一方、撮像装置２００が副画像同時記憶モードに設定されていないと制御部５００が判断した場合（ステップＳ２０９：Ｎｏ）、撮像装置２００は、後述するステップＳ２１６へ移行する。
【０１０４】
ステップＳ２１０において、撮像装置２００は、制御部５００の制御のもと、全方位撮像部３００が生成した全方位画像データを取得する。
【０１０５】
続いて、画像関連付け部９６は、撮像部２から取得した正面画像データに、全方位撮像部３００から取得した全方位画像データを対応付けた画像ファイルを生成し、この画像ファイルを画像データ記憶部８１に記憶する（ステップＳ２１１）。
【０１０６】
その後、表示制御部９５は、取得した正面画像データに対応する正面画像を所定時間（たとえば３秒）だけ表示部６にレックビュー表示させる（ステップＳ２１２）。なお、表示制御部９５は、画像変換部５０１が全方位画像Ｗ２０を変換した帯状の変換画像Ｗ３１を所定時間（たとえば３秒）だけ表示部６にレックビュー表示させてもよい。
【０１０７】
続いて、制御部５００は、電源スイッチ４１が操作されることにより、撮像装置２００の電源がオフ状態であるか否かを判断する（ステップＳ２１３）。撮像装置２００の電源がオフ状態であると制御部５００が判断した場合（ステップＳ２１３：Ｙｅｓ）、撮像装置２００は、本処理を終了する。一方、撮像装置２００の電源がオフ状態でないと制御部５００が判断した場合（ステップＳ２１３：Ｎｏ）、撮像装置２００は、ステップＳ２１４へ移行する。
【０１０８】
ステップＳ２１４において、制御部５００は、撮影モード切換スイッチ４３からモード切換信号が入力された場合、モード切換信号に応じて撮影・再生モードの切換操作を受け付ける一方、撮影モード切換スイッチ４３を介してモード切換信号が入力されていない場合、現在のモードを維持する。ステップＳ２１４の後、撮像装置２００は、ステップＳ２０１へ戻る。
【０１０９】
ステップＳ２０２において、撮像装置２００に副画像同時記憶モードが設定されていないと制御部５００が判断した場合（ステップＳ２０２：Ｎｏ）について説明する。この場合、表示制御部９５は、撮像部２が微小な時間間隔で連続的に生成する正面画像データに対応するライブビュー画像を表示部６に表示させる（ステップＳ２１５）。その後、撮像装置２００は、ステップＳ２０７へ移行する。
【０１１０】
ステップＳ２０９において、撮像装置２００に副画像同時記憶モードが設定されていないと制御部５００が判断した場合（ステップＳ２０９：Ｎｏ）について説明する。この場合、制御部５００は、撮像部２から取得した正面画像データを記憶させた画像ファイルを作成して画像データ記憶部８１に記憶する（ステップＳ２１６）。その後、撮像装置２００は、ステップＳ２１２へ移行する。
【０１１１】
つぎに、撮像装置１が撮影モードに設定されておらず（ステップＳ２０１：Ｎｏ）、再生モードに設定されている場合（ステップＳ２１７：Ｙｅｓ）について説明する。この場合、表示制御部９５は、画像データ記憶部８１が記憶する各画像ファイルの画像データに対応する画像を縮小した縮小画像の一覧を表示部６に表示させる（ステップＳ２１８）。
【０１１２】
続いて、操作入力部４またはタッチパネル７を介して拡大して表示する画像ファイルの縮小画像が選択された場合（ステップＳ２１９：Ｙｅｓ）、制御部５００は、選択された画像ファイル内に正面画像データと副画像データとしての全方位画像データとが記憶されているか否かを判断する（ステップＳ２２０）。選択された画像ファイル内に正面画像データと副画像データとしての全方位画像データとが記憶されていると制御部５００が判断した場合（ステップＳ２２０：Ｙｅｓ）、撮像装置２００は、後述するステップＳ２２１へ移行する。一方、選択された画像ファイル内に正面画像データのみ記憶されていると制御部５００が判断した場合（ステップＳ２２０：Ｎｏ）、撮像装置２００は、後述するステップＳ２２９へ移行する。
【０１１３】
ステップＳ２２１において、画像合成部９４は、正面画像に全方位画像を合成した合成画像を生成し、表示制御部９５は、画像合成部９４が生成した合成画像を表示部６に表示させる（ステップＳ２２２）。
【０１１４】
図２５は、表示制御部９５が合成画像を表示する際に参照する撮影時における撮像装置２００を中心にして見たときの正面画像および副画像としての全方位画像にそれぞれ写る被写体の位置関係を模式的に説明する図である。図２６は、表示制御部９５が表示部６に表示させる合成画像Ｗ４０の一例を示す図である。なお、図２５において、点線で表す領域Ｗ３０が撮像部２による撮影領域を示し、一点鎖線で表す領域Ｗ２０が全方位撮像部３００の撮影領域を示す。
【０１１５】
図２５に示すように、表示制御部９５は、表示部６に合成画像Ｗ４０を表示させる際に、撮影時において撮像装置２００を中心にして見たときの正面画像Ｗ２０および全方位画像Ｗ３０にそれぞれ写る被写体Ｋ１〜Ｋ３の位置関係を反映させた状態で合成画像Ｗ４０の少なくとも一部を表示部６に表示させる。この際、図２６に示すように、表示制御部９５は、全方位画像Ｗ２０が全方位撮像部３００によって撮像装置２００を中心に全方位（３６０度）撮影されているので、合成画像Ｗ４０の両端部それぞれに副画像としての全方位画像Ｗ２０があることを示す情報として折れ部Ｒ１１，Ｒ１２を表示する。
【０１１６】
ステップＳ２２２の後、制御部５００は、表示部６が表示する合成画像Ｗ４０内における折れ部Ｒ１１または折れ部Ｒ１２に対してスライド操作が行われたか否かを判断する（ステップＳ２２３）。たとえば、折れ部Ｒ１１に対してスライド操作が行われたと制御部５００が判断した場合（ステップＳ２２３：Ｙｅｓ）、表示制御部９５は、ユーザによるスライド操作に応じて、撮影時において撮像装置２００を中心にして見たときの正面画像Ｗ３０および副画像としての全方位画像Ｗ２０に写る被写体Ｋ１〜Ｋ３の位置関係を反映させながら全方位画像Ｗ４１の少なくとも一部を表示部６に表示させる（ステップＳ２２４）。
【０１１７】
図２７は、表示制御部９５が合成画像Ｗ４０から全方位画像Ｗ４１への切換えを模式的に説明する図である。図２７に示すように、表示制御部９５は、折れ部Ｒ１１に対するスライド操作に応じて、表示部６の表示画面における左端部から全方位画像Ｗ４１を徐々に表示させつつ、正面画像Ｗ４０の縦横比率を縮小しながら表示部６に表示させる（図２７（ａ）→図２７（ｂ））。さらに、表示制御部９５は、折れ部Ｒ１１に対するスライド操作の移動量に応じて、全方位画像Ｗ４１の領域を所定間隔毎に縦横比率を変化させながら表示部６に表示させる。これにより、撮影時において撮像装置２００を中心に見たときの正面画像Ｗ３０および副画像として全方位画像Ｗ２０にそれぞれ写る被写体Ｋ１〜Ｋ３の位置関係を反映させた状態で滑らかに画面遷移を行うことができる。
【０１１８】
続いて、制御部５００は、ユーザが折れ部Ｒ１１または折れ部Ｒ１２から指を離したか否かを判断する（ステップＳ２２５）。ユーザが折れ部Ｒ１１または折れ部Ｒ１２から指を離したと制御部５００が判断した場合（ステップＳ２２５：Ｙｅｓ）、表示制御部９５は、撮像装置２００を中心にして見たときの正面画像および全方位画像に写る被写体の位置関係を反映させた状態で全方位画像Ｗ４１から合成画像Ｗ４０に切換える（ステップＳ２２６）。その後、撮像装置２００は、ステップＳ２２７へ移行する。一方、ユーザが折れ部Ｒ１１または折れ部Ｒ１２に対してタッチを維持しながら表示画面上を移動させていると制御部５００が判断した場合（ステップＳ２２５：Ｎｏ）、撮像装置２００は、ステップＳ２２４へ戻る。
【０１１９】
ステップＳ２２７〜ステップＳ２３０は、上述したステップＳ１２３〜Ｓ１２６それぞれに対応するため、説明を省略する。
【０１２０】
ステップＳ２１７において、撮像装置１が再生モードに設定されていない場合（ステップＳ２１７：Ｎｏ）、撮像装置１はステップＳ２１３に移行する。
【０１２１】
以上説明した本発明の実施の形態２では、表示制御部９５が、表示部６によって正面画像が表示されている場合において、タッチパネル７から副画像の切換えを指示する指示信号の入力を受け付けたとき、撮像装置１を中心にして見たときの正面画像および副画像に写る被写体の位置関係を反映させた状態で副画像としての全方位画像の少なくとも一部を表示部６に表示させる。これにより、撮影者の意図した構図を維持しつつ、撮影者自身の画像も付加することもでき、家族写真のように撮影時における思い出を共用することができる再生を行うことができる。
【０１２２】
また、上述した実施の形態２では、全方位撮像部３００で全周囲（３６０度）を撮像していたが、たとえば視野領域が少なくとも略９０度を超える４つの撮像部を設けることにより、撮影部２の光軸Ｌ１と直交する軸の周りの全周にわたる第２の視野領域を撮影してもよい。
【０１２３】
（その他の実施の形態）
なお、上述した実施の形態では、撮像した画像データを再生する再生モードで行っていたが、たとえば撮影モードで表示部６が表示するライブビュー画像上で上述した処理を行ってもよい。これにより、リアルタイムで正面画像と副画像とを確認しながら撮影を行うことができる。
【０１２４】
また、上述した実施の形態では、表示部６が表示する静止画像の切換えで上述した処理を行っていたが、たとえば動画の切換えで上述した処理を行ってもよい。この場合、表示制御部９５は、表示部６が第１の動画（正面側）を表示している場合において、タッチパネル７から動画の切換えの指示信号の入力を受け付けたとき、表示部６に第２の動画（背面側または全方位画像）を表示部６に所定時間、たとえば第２の動画の再生が終了するまで表示部６に表示させてもよい。
【０１２５】
また、上述した実施の形態では、表示部６が表示する静止画像のみの切換えであったが、静止画像および動画をそれぞれ組み合わせて上述した処理を行ってもよい。
【０１２６】
また、上述した実施の形態では、表示部６が表示する画像の切換えに対して説明したが、たとえば電子ビューファインダにおいても同様の画像の切換えを行ってもよい。
【０１２７】
また、上述した実施の形態では、フローチャートの説明において、「まず、」や「つぎに、」等の表現を用いて説明している場合もあるが、これは便宜的なものにすぎず、この順序を変えて行ってもよい。
【０１２８】
また、上述した実施の形態では、撮像装置としてデジタルカメラとして説明していたが、たとえばデジタル一眼レフカメラ、デジタルビデオカメラおよび２つの撮影機能を有する携帯電話やタブレット型携帯機器等の電子機器にも適用することができる。
【符号の説明】
【０１２９】
１，１００，２００    撮像装置
２                    撮像部
３                    タイマー
４                    操作入力部
５                    背面撮像部
６                    表示部
７                    タッチパネル
８                    記憶部
９，５００            制御部
２１                  レンズ部
２２                  レンズ駆動部
２３                  絞り
２４                  絞り駆動部
２５                  シャッタ
２６                  シャッタ駆動部
２７                  撮像素子
２８                  撮像駆動部
２９                  信号処理部
４１                  電源スイッチ
４２                  レリーズスイッチ
４３                  撮影モード切換スイッチ
８１                  画像データ記憶部
８２                  プログラム記憶部
８３                  顔情報記憶部
９１                  画像処理部
９２                  顔検出部
９３                  トリミング部
９４                  画像合成部
９５                  表示制御部
９６                  画像関連付け部
３００                全方位撮像部
４００                通信部
５０１                画像変換部
【図１】
2015228683.tif 000003
【図２】
2015228683.tif 000004
【図３】
2015228683.tif 000005
【図４】
2015228683.tif 000006
【図５】
2015228683.tif 000007
【図６】
2015228683.tif 000008
【図７】
2015228683.tif 000009
【図８】
2015228683.tif 000010
【図９】
2015228683.tif 000011
【図１０】
2015228683.tif 000012
【図１１】
2015228683.tif 000013
【図１２】
2015228683.tif 000014
【図１３】
2015228683.tif 000015
【図１４】
2015228683.tif 000016
【図１５】
2015228683.tif 000017
【図１６】
2015228683.tif 000018
【図１７】
2015228683.tif 000019
【図１８】
2015228683.tif 000020
【図１９】
2015228683.tif 000021
【図２０】
2015228683.tif 000022
【図２１】
2015228683.tif 000023
【図２２】
2015228683.tif 000024
【図２３】
2015228683.tif 000025
【図２４】
2015228683.tif 000026
【図２５】
2015228683.tif 000027
【図２６】
2015228683.tif 000028
【図２７】
2015228683.tif 000029