(57)【要約】【課題】困難な動画撮影を容易にし、単調になりがちな動画撮影に変化をつけやすくして、鑑賞に堪えられるようにした動画を撮影することのできる撮影装置、画像処理装置、およびプログラムを提供する。【解決手段】前方撮影部１ａから前面の被写体を撮像して記録し（Ｓ１１）、背面撮影釦４ｂによって背面撮影操作がなされたか否かを判定し（Ｓ１５）、背面撮影操作がなされた場合には、後方撮影部１ｂから背面にいる撮影者を撮像し、この撮影者の顔の部分をトリミングして記録する（Ｓ１６）。【選択図】  図１０
2011087183.tif 000002
【特許請求の範囲】
【請求項１】
撮影者以外の第１の被写体を撮像し、第１の画像データを出力する第１の撮像部と、
上記撮影者を第２の被写体として撮像し、第２の画像データを出力する第２の撮像部と、
上記第１の画像データは撮像した画角のまま記録し、上記第２の画像データは顔画像部分をトリミングして記録する記録制御部と、
を有することを特徴とする撮影装置。
【請求項２】
上記記録制御部は、上記第１の画像データと上記トリミングした第２の画像データのいずれか一方を選択して記録することを特徴とする請求項１に記載の撮影装置。
【請求項３】
上記記録制御部は、上記第１の画像データおよび上記トリミングした第２の画像データを、同時に記録することを特徴とする請求項１に記載の撮影装置。
【請求項４】
当該撮影装置の動きを検出する動き検出部と、
上記第２の画像データに基づいて顔の移動方向と、上記動き検出部によって検出された当該撮影装置の動きの方向を比較し、上記顔画像分が画面外にはみ出すか否かを予測するはみ出し予測部と、
を有することを特徴とする請求項１に記載の撮影装置。
【請求項５】
上記顔画像部分の位置を設定する顔位置設定部を有し、
上記記録制御部は、上記顔位置設定部によって設定された位置に上記顔画像部分を位置させることを特徴とする請求項１に記載の撮影装置。
【請求項６】
上記記録制御部は、上記第２の画像データに基づいて、顔の近くに画面外から動きがあることを判定した場合には、上記第２の画像データに基づく全画像を記録することを特徴とする請求項１に記載の撮影装置。
【請求項７】
撮影者以外の第１の被写体を撮像した第１の画像データと、上記撮影者を第２の被写体を撮像し、第２の被写体の顔部分をトリミングした第２の画像データを記憶する記憶部と、
上記第１の画像データに基づいて、画像の変化が不規則か否かを判定する判定部と、
上記第１の画像データに基づく動画像の再生中に、上記判定部によって上記画像の変化が不規則と判定された場合には、上記第２の画像データを再生する再生制御部と、
を有することを特徴とする画像処理装置。
【請求項８】
撮影者以外の第１の被写体を撮像した第１の画像データと、上記撮影者を第２の被写体を撮像し、第２の被写体の顔部分をトリミングした第２の画像データを記憶するステップと、
上記第１の画像データに基づいて、画像の変化が不規則か否かを判定するステップと、
上記第１の画像データに基づく動画像の再生中に、上記判定部によって上記画像の変化が不規則と判定された場合には、上記第２の画像データを再生するステップと、
をコンピュータに実行させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影装置、再生表示装置、およびプログラムに関し、詳しくは、前方と後方に撮像部を設け、それぞれで得られた動画を処理する撮影装置、画像処理装置、およびプログラムに関する。
【背景技術】
【０００２】
従来、カメラは、静止画を撮影するための装置であったが、近年、画像信号がデジタル化されたことにより、連続して取得した画像に対して、コマ間圧縮を行うことにより、動画撮影の装置としても利用することが可能になってきた。このため、最近のデジタルカメラは、静止画と同様に動画も撮影できるようになってきている。
【０００３】
このように、デジタルカメラは静止画と動画の両方を撮影できるようになったが、静止画しか撮影したことのないユーザーにとって、動画をどのような場面で撮影してよいか分からず、また、撮影を開始したとしても、どの時点で撮影を止めればよいかが分からず、見苦しく、だらだらとした作品になってしまうことが多かった。
【０００４】
これを解決するものとして、例えば、特許文献１には、撮影者の方に向けて撮影を行う自分撮りの画像と、相手の方に向けて撮影を行う相手撮りの画像を表示切替のできるカメラ付き携帯画像表示装置が提案されている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００５−９２６５７号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
このように、静止画になれたユーザーでも動画に親しめるようにした撮影装置が提案されているが、鑑賞に堪えられるような動画を撮影するには充分ではなかった。すなわち、特許文献１に開示のカメラ付き携帯画像表示装置は、単に静止画と動画を切り替えるだけであり、動画に変化をつけ、鑑賞に堪えられるようにした動画を撮影するものではない。
【０００７】
本発明は、このような事情を鑑みてなされたものであり、困難な動画撮影を容易にし、単調になりがちな動画撮影に変化をつけやすくして、鑑賞に堪えられるようにした動画を撮影することのできる撮影装置、画像処理装置、およびプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するため第１の発明に係わる撮影装置は、撮影者以外の第１の被写体を撮像し、第１の画像データを出力する第１の撮像部と、上記撮影者を第２の被写体として撮像し、第２の画像データを出力する第２の撮像部と、上記第１の画像データは撮像した画角のまま記録し、上記第２の画像データは顔画像部分をトリミングして記録する記録制御部と、  を有する。
【０００９】
第２の発明に係わる撮影装置は、上記第１の発明において、上記記録制御部は、上記第１の画像データと上記トリミングした第２の画像データのいずれか一方を選択して記録する。
第３の発明に係わる撮影装置は、上記第１の発明において、上記記録制御部は、上記第１の画像データおよび上記トリミングした第２の画像データを、同時に記録する。
【００１０】
第４の発明に係わる撮影装置は、上記第１の発明において、当該撮影機器の動きを検出する動き検出部と、上記第２の画像データに基づいて顔の移動方向と、上記動き検出部によって検出された当該撮影機器の動きの方向を比較し、上記顔画像分が画面外にはみ出すか否かを予測するはみ出し予測部と、を有する。
【００１１】
第５の発明に係わる撮影装置は、上記第１の発明において、上記顔画像部分の位置を設定する顔位置設定部を有し、上記記録制御部は、上記顔位置設定部によって設定された位置に上記顔画像部分を位置させる。
第６の発明に係わる撮影装置は、上記第１の発明において、上記記録制御部は、上記第２の画像データに基づいて、顔の近くに画面外から動きがあることを判定した場合には、上記第２の画像データに基づく全画像を記録する。
【００１２】
第７の発明に係わる画像処理装置は、撮影者以外の第１の被写体を撮像した第１の画像データと、上記撮影者を第２の被写体を撮像し、第２の被写体の顔部分をトリミングした第２の画像データを記憶する記憶部と、上記第１の画像データに基づいて、画像の変化が不規則か否かを判定する判定部と、上記第１の画像データに基づく動画像の再生中に、上記判定部によって上記画像の変化が不規則と判定された場合には、上記第２の画像データを再生する再生制御部と、を有する。
【００１３】
第８の発明に係わるプログラムは、撮影者以外の第１の被写体を撮像した第１の画像データと、上記撮影者を第２の被写体を撮像し、第２の被写体の顔部分をトリミングした第２の画像データを記憶するステップと、上記第１の画像データに基づいて、画像の変化が不規則か否かを判定するステップと、上記第１の画像データに基づく動画像の再生中に、上記判定部によって上記画像の変化が不規則と判定された場合には、上記第２の画像データを再生するステップと、をコンピュータに実行させる。
【発明の効果】
【００１４】
本発明によれば、困難な動画撮影を容易にし、単調になりがちな動画撮影に変化をつけやすくして、鑑賞に堪えられるようにした動画を撮影することのできる撮影装置、画像処理装置、およびプログラムを提供することができる。
【図面の簡単な説明】
【００１５】
【図１】本発明の第１実施形態に係わるカメラの主として電気系の構成を示すブロック図である。
【図２】本発明の第１実施形態に係わるカメラを背面側から見た外観斜視図である。
【図３】本発明の第１実施形態において、被写体である建物等を撮影する場合の様子を示す図であり、（ａ）は被写体の全体を示す図であり、（ｂ）は被写体に近づいた図であり、（ｃ）は撮影者を示す図である。
【図４】本発明の第１実施形態において、被写体である建物を撮影する様子を示す図であり、（ａ）は被写体の前で撮影する様子を示す図であり、（ｂ）は被写体に近づきパンニングしながら撮影する様子を示す図である。
【図５】本発明の第１実施形態において、被写体である建物の細部の様子を示す図である。
【図６】本発明の第１実施形態において、パンニングで撮影する様子を示す図であり、（ａ）は規則的に動かし鑑賞しやすいパンニングであり、（ｂ）は不規則な動きであり鑑賞しにくいパンニングの様子を示す図である。
【図７】本発明の第１実施形態において、被写体である建物を撮影する様子を示す図である。
【図８】本発明の第１実施形態において、背面画像を撮影する様子を示す図であり、（ａ）はカメラと撮影者の位置関係が変化しないために安定した画像となる場合であり、（ｂ）はカメラと撮影者の位置関係が変化するために背面画像がぶれて不安定になる場合を示す図である。
【図９】本発明の第１実施形態に係わるカメラで撮影した背面画像を示し、（ａ）〜（ｄ）は背面画像の全体画像であり、（ｅ）〜（ｈ）は顔部分をトリミングした画像を示す。
【図１０】本発明の第１実施形態に係わるカメラ制御の動作を示すフローチャートである。
【図１１】本発明の第２実施形態に係わるカメラ制御の動作を示すフローチャートである。
【図１２】本発明の第２実施形態に係わるカメラのはみ出し予測の動作を示すフローチャートである。
【図１３】本発明の第２実施形態において、パンニング開始時、パンニング中、パンニング終了時おける前方カメラ、後方カメラ、および表示画像を示す図である。
【図１４】本発明の第２実施形態において、カメラを移動した場合を示し、（ａ）は後方カメラによって撮影者の顔の一部がはみ出してしまう場合を示し、（ｂ）は撮影者の顔の全部を撮影できる場合を示す図である。
【図１５】本発明の第３実施形態に係わるカメラ制御の動作を示すフローチャートである。
【図１６】本発明の第３実施形態において、後方カメラによって撮影される撮影者の顔の位置を固定したときの背面画像を示す図である。
【図１７】本発明の第４実施形態において、後方カメラによって撮影される撮影者の動きの表示方法を説明する図であって、（ａ）（ｃ）は撮影者の動きがない場合、（ｂ）は撮影者の動きがある場合を示す図である。
【図１８】本発明の第４実施形態において、後方カメラによって撮影される撮影者の動きを示す図であって、（ａ）は動きが無い場合、（ｂ）は手が挙がっていく場合、（ｃ）は後方カメラの画面で撮影者の顔の一部が欠けている場合を示す。
【図１９】本発明の第４実施形態において、見上げて撮影する様子を示す図である。
【図２０】本発明の第４実施形態において、図１８に示すように見上げて撮影した場合の画像を示し（ａ）は後方カメラで撮影者がバランスよく撮影された場合を示し、（ｂ）は無駄なスペースが多くなった場合を示し、（ｄ）撮影者の顔の部分のみをトリミングした画像を示す。
【図２１】本発明の第４実施形態に係わるカメラ制御の動作を示すフローチャートである。
【発明を実施するための形態】
【００１６】
以下、図面に従って本発明を適用したカメラを用いて好ましい実施形態について説明する。本発明の第１実施形態におけるカメラは、動画の取得のために、カメラ前方を撮像するための撮像部と、カメラ後方を撮像するための撮像部と、２つの撮像部を有している。レリーズ釦の操作に応じて動画の画像データの取得を開始し、これを記録媒体に記録する。また、第１実施形態におけるカメラは、カメラ後方を撮像する撮像部によって取得した画像から撮影者の顔の部分をトリミングして記録する。
【００１７】
図１は本発明の第１実施形態に係わるカメラの構成を示すブロック図であり、カメラ１０は被写体を撮影し、画像を取得するデジタルカメラである。カメラ１０は、前方撮影部１ａ、後方撮影部１ｂ、画像記録制御部２、ブレ及びパンニング判定部３、操作部４、画像合成部７、表示部８を有している。
【００１８】
前方撮影部１ａは、カメラ１０の本体の前方に配置され、主として相手撮り用の撮影部である。後方撮影部１ｂは、図２に示すように、カメラ１０の本体の背面に配置され、主として自分撮り用の撮影部である。前方撮影部１ａおよび後方撮影部１ｂは、それぞれ、被写体像を結像するための光学系、被写体像を光電変換する撮像素子を有し、それぞれの撮像素子から出力される画像信号を処理する画像処理部等が設けられており、それぞれ画像データを出力する。
【００１９】
画像記録制御部２は、カメラ１０の全体制御を行うと共に、前方撮影部１ａおよび後方撮影部１ｂから出力される画像信号に基づいて動画の画像データを記録する。また、前方撮影部１ａから出力される画像データを仮記憶する補助記録部２ａと、後方撮影部１ｂから出力される画像データを仮記憶する補助記録部２ｂとを有する。本実施形態においては、前方の動画データと、後方の動画データは動画像として記録されるほか、補助記録部２ａ、２ｂにそれぞれ仮記憶される。
【００２０】
また、画像記録制御部２は、顔検出及び補正部２ｃを有する。この顔検出及び補正部２ｃは、前方撮影部１ａや後方撮影部１ｂから画像データを用いて、画像の中に顔の部分が含まれているか、また含まれていた場合には、その位置と大きさ等を検出する。また、検出した顔の情報を用いて、顔の部分をトリミングする。なお、顔検出及び補正部２ｃにおける顔検出の結果を利用して、画像合成部７においてトリミングを行うようにしても良い。
【００２１】
ブレ及びパンニング判定部３は、カメラ１０に加えられた手振れや、撮影者によるパンニング操作等を判定する。すなわち、このブレ及びパンニング判定部３は、前方撮影部１ａから画像データを入力し、画像データの変化から画像が不規則に変化しているか、または画像の変化が大である等、動きパターンが不安定であるか否かを判定する。なお、画像データを分析する以外にも、加速度センサ、角加速度センサ、ジャイロ等のセンサを設け、このセンサ出力に基づいてブレ判定を行っても良い。またブレ及びパンニング判定部３の出力に基づいて、公知のブレ軽減処理を行う。
【００２２】
操作部４は、図２に示すように、カメラ１０の上部に設けられたレリーズ釦４ａ、背面に設けられた背面撮影釦４ｂ、電源釦、再生釦等の操作部材である。レリーズ釦が操作されると、カメラ１０は動画撮影を開始し、再度レリーズ釦が操作されると、動画撮影を停止する。操作部４の操作状態は、画像記録制御部２に伝達される。また、背面撮影釦４ｂは、撮影者が後方撮影部１ｂを用いて、撮影者自身の撮影を行うことを指示するための操作釦である。この背面撮影釦４ｂを操作すると背面撮影を行い、再度、操作すると背面撮影を終了する。
【００２３】
表示部８は、図２に示すように、カメラ１０の背面に配置された液晶モニタや有機ＥＬ等の表示装置を含み、画像記録制御部２に記録された動画の再生表示を行う。また、前方撮影部１ａまたは後方撮影部１ｂによって取得された動画を、被写体像の観察用に、所謂ライブビュー表示する。
【００２４】
画像合成部７は、前方撮影部１ａによって取得された画像と、後方撮影部１ｂによって取得された画像から顔部分のみをトリミングした顔画像を合成する。この画像合成部７によって生成された合成画像は、表示部８に表示される。なお、前述の補助記録部２ａ、２ｂは、各撮影部によって取得された画像データを用いて画像合成するための仮記憶部である。
【００２５】
画像合成部７における画像合成は、前方撮影部１ａからの画像と後方撮影部１ｂからの画像の切り換えを行い、また両画像の合成も可能である。この画像の切り換えは、初期状態においては、前方撮影部１ａからの画像を選択するが、背面撮影釦４ｂが操作された場合には、後方撮影部１ｂからの画像に切り換える。また、後方撮影部１ｂからの画像に切り換えるにあたって、撮影者の顔の部分をトリミングし、顔の部分のみを表示または記録を行う。
【００２６】
なお、図２は背面側からみた外観斜視図であり、図示されないが、カメラ１０の前側には撮影光学系を含む前方撮影部１ａが配置されており、常時、カメラ前方とカメラ後方の動画像を取得することが可能となっている。また、カメラ上面には操作部４の一つであるレリーズ釦４ａが配置されている。前方撮影部１ａの撮影光学系としては、ズームレンズを採用してもよく、その場合には、操作部４にズーム操作用のズームスイッチを設ける。
【００２７】
また、カメラ１０の背面には、表示部８の表示パネルが配置されている。この表示部８の右脇には、背面撮影釦４ｂが設けられており、前述したように、この背面撮影釦４ｂを操作すると、後方撮影部１ｂによる背面撮影を開始し、再度、操作すると背面撮影を終了する。
【００２８】
次に、図３を用いて、これまで、静止画で撮影できなかったシーンを説明する。図３は、名所旧跡でよく見られる風景の一例である。このような被写体例において、全体を撮影しようとすると、図３（ａ）に示すように、細部の描写ができない。一方、細部を写そうと一部を撮影すると、全体が写せなくなってしまう。このような被写体の場合には、全体の迫力と、細部の描写を両方記録するために、図３（ａ）に示すような全体と、図３（ｂ）に示すような細部の両方の静止画を撮影し、さらに撮影者が来たことを示すために、図３（ｃ）に示すような写真を撮影するのが一般的である。
【００２９】
しかし、このような静止画だけでは、各写真のつながりが分かりにくく、全体の迫力、細部へのこだわり、訪れたことの記録が、ばらばらに描写されるだけである。また、図３（ａ）→図３（ｂ）の過程を、動画で撮影してもよいが、これでは単調なものとなり、だらだらとした動画となって、起承転結のような物語性のある画像にならない。そこで、本実施形態においては、動画で全体や細部や撮影者が訪れたことを簡単に表現できるようにしている。
【００３０】
カメラ１０の撮影者１１は、大きな建物１２の近くに来ると、一般的には、細部を撮影するために、カメラ１０を大きく動かす。すなわち、今、撮影者１１が図４（ａ）に示すような大きな建物１２の前で撮影を開始したとする。この場合、図５（ａ）（ｂ）に示す神社仏閣のように細部まで凝った建物のときには、撮影者１１は、図４（ｂ）に示すように、カメラ１０を大きく動かし、パンニング動作を行いながら細部の隅から隅まで撮影しようとする。
【００３１】
このパンニングによる撮影の場合、図６（ａ）に示す、矢印の方向に沿って、規則的でゆっくりした動きであれば、記録画像を再生する際に、鑑賞者は落ち着いて動画を見ることができる。しかし、往々にして旅先では、計画的な撮影はできず、図６（ｂ）に示す矢印のように、不規則で不安定な動きの撮影となってしまう。このような不規則で不安定な動きで撮影すると、鑑賞者は乗り物酔いのような気分の悪さを覚えてしまう。
【００３２】
すなわち、図７（ａ）から図７（ｃ）に示すように、撮影者１１が建物１２に段々近づきながら動画で撮影すると、建物１２が大きくても、全体の大きさを表現することができる。建物１２に近づくと、ズーム操作により望遠レンズにすれば、図７（ｄ）に示すように、細部の描写を行うことができる。
【００３３】
ただし、カメラ１０を振りカメラ目線を移すと、図７（ｅ）に示すように、ぶれた画像が目障りになる。特に、望遠レンズ側では、少しの方向変化でも視野が狭いので、画面が大きく変化してしまう。そこで、本実施形態においては、このような状況で、撮影者が背面撮影釦４ｂを操作すると、図７（ｇ）に示すように、カメラ１０の撮影者側に向けた撮影部で撮影を行い、表示するようにしている。このとき、ライブビュー表示と記録にあたっては、図７（ｈ）に示すように、背面撮影によって取得した撮影者の顔の部分をトリミングした画像にしている。撮影者の顔が大きく表示されるので、撮影者の表情がどうであったかを見ることができる。ブレが収まり、背面撮影を終了すると、図７（ｆ）に示すように、再度、建物１２の側の撮影を行う。
【００３４】
このような撮影によって、建物１２の全体から細部、さらに、そこに行った撮影者１２までが、一連の動画の中に写しこまれる。つまり、これまで、静止画では表現しきれなかった迫力や臨場感を得ながら、さらに動画としては、起承転結に沿って、起＝建物の全体、承＝近づく、転＝撮影者、結＝細部といった、変化のある撮影が可能となり、鑑賞時の単調さが克服される。
【００３５】
次に、パンニング時において、背面撮影によって撮影された画像について、図８および図９を用いて説明する。撮影者１１が、建物１２の全体を撮影しようとして、カメラ１０を左側から右側に回しながら撮影するパンニングを行う。このパンニング時に、図８（ａ）に示すように、カメラ１０と撮影者１１との間の距離が一定であれば、撮影者１１の顔の位置や大きさは一定となる。
【００３６】
しかし、カメラ１０と撮影者１１との関係が一定とならない場合がある。図８（ｂ）に示すように、パンニングを行う場合には、体を動かさず、手のみを動かす場合もある。この時、右手でカメラ１０を持っていると、左に振った場合には、顔とカメラ１０の距離Ｌ１は身体の幅によって近づき、身に振った場合には、体の幅を考慮しなくても距離Ｌ２に遠ざかる。このため、背面撮影の際にパンニングを行うと、背面画像もまた画面内を移動することになる。
【００３７】
すなわち、パンニングの際にカメラ１０と撮影者１１との間の距離が変化してしまうと、図９（ａ）〜（ｄ）に示すように、撮影者１１の顔の位置や大きさも変化し、見苦しい画像となってしまう。そこで、本実施形態においては、顔の位置を検出し、顔の部分をトリミングすることによって、図９（ｅ）〜（ｈ）に示すように、撮影者１１の顔の部分が一定の位置および大きさとなるように、顔検出及び補正部２ｃによって画像処理を行っている。このような画像処理を行うことにより、撮影者１１の表情の変化を集中して楽しむことができる。なお、図９（ａ）〜（ｄ）に示すように撮影者１１の顔の位置や大きさが変化するのは、パンニング時に限らず、図１４に示すように、カメラ１０を上下に振る場合にも発生するので、このような場合にも、同様な画像処理を行うと良い。
【００３８】
次に、本実施形態におけるカメラ制御の動作について、図１０に示すフローチャートを用いて説明する。操作部４の電源釦が操作され、パワーオンとなると、カメラ制御のフローがスタートする。スタートすると、まず、撮影モードか否かの判定を行う（Ｓ１）。このカメラ１０は、撮影モードおよび再生モードを有する。
【００３９】
ステップＳ１における判定の結果、撮影モードであった場合には、次に、撮影を行うか否かの判定を行う（Ｓ２）。この撮影を行うか否かの判定は、レリーズ釦が全押し操作されたか否かを検出することによって行う。この判定の結果、レリーズ釦が全押しされていなかった場合には、ステップＳ１に戻る。
【００４０】
一方、ステップＳ１における判定の結果、撮影であった場合には、前面撮影および記録を開始する（Ｓ１１）。このカメラ１０はレリーズ釦が全押し操作されると、動画撮影を開始し、再度、レリーズ釦が全押し操作されると、動画撮影を終了する。前面の動画撮影は、前方撮影部１ａから出力される画像データを画像記録制御部２によって画像処理し、一旦補助記録部２ａに仮記録を行い、背面撮影を行っていなければ、そのまま前面撮影によって取得した動画像データの記録を行う。
【００４１】
前撮影及び記録を開始すると、次に、背面カメラによって取得した画像中の顔位置および顔の大きさを検出する（Ｓ１２）。ここでは、後方撮影部１ｂからの画像データに基づいて、顔検出及び補正部２ｃによって、撮影者１１の顔の在否を検出し、顔の部分が存在した場合には、顔の位置と大きさを検出する。
【００４２】
続いて、顔トリミングが可能か否かの判定を行う（Ｓ１３）。ここでは、ステップＳ１２における検出結果に基づいて判定を行う。顔を検出できなかった場合や、顔の一部しかない場合には、顔トリミング不可と判定する。すなわち、顔検出及び補正部２ｃによって顔の位置や大きさを判定し、その情報を利用して顔の大きさや顔の中心位置と画面端部の関係からトリミングが可能か否かの判定を行う。後述する図７（ｈ）に示すように、顔の輪郭から余裕を持って切りだせることが好ましい。このステップＳ１３における判定の結果、顔トリミングが可能であれば、次にＯＫ表示を行う（Ｓ１４）。ここでは、表示部８に顔トリミング可能なことを表示する。この表示によって、撮影者１１は背面撮影を行った際に、撮影者１１の顔の部分が画面内に入ることを認知する。
【００４３】
ステップＳ１４においてＯＫ表示を行うと、またはステップＳ１３における判定の結果、顔トリミングが可能でなかった場合には、次に、背面撮影操作がなされたか否かの判定を行う（Ｓ１５）。背面撮影は、背面撮影釦４ｂを操作することによって開始するので、このステップでは、操作部４によって背面撮影釦４ｂが操作されたか否かの判定を行う。
【００４４】
ステップＳ１５における判定の結果、背面撮影操作がなされていなかった場合には、ステップＳ１１に戻り、前面撮影および記録を続行する。一方、背面撮影操作がなされた場合には、次に、背面画像から顔位置、大きさを揃えて切出し記録を行う（Ｓ１６）。ここでは、顔検出及び補正部２ｃによって検出された撮影者１１の顔の位置及び大きさの情報を用いて、後方撮影部１ｂからの画像データから、顔の部分をトリミングする。そして、顔の大きさを揃えた画像を生成し、画像記録制御部２によって動画像データを記録媒体に記録する。なお、この画像処理にあたっては、補助記録部２ｂを用いて行う。
【００４５】
次に、操作終了か否かの判定を行う（Ｓ１７）。前述したように、レリーズ釦を再度操作すると、動画撮影を終了することから、このステップでは、レリーズ釦の操作状態に基づいて判定する。この判定の結果、操作終了でなかった場合には、次に背面撮影中であるか否かの判定を行う（Ｓ１９）。この判定の結果、背面撮影中でなければ、ステップＳ１１に戻り、前面撮影及び記録を続行する。一方、判定の結果、背面撮影中であった場合には、ステップＳ１２に戻り、背面撮影を続行する。
【００４６】
ステップＳ１７における判定の結果、操作終了であった場合には、撮影終了処理を行う（Ｓ１８）。撮影終了処理を行うと、撮影動作を終了する。
【００４７】
ステップＳ１における判定の結果、撮影モードでなかった場合には、次に、再生画像を選択する（Ｓ３）。ここでは、直近の記録画像、または十字釦等によって選択された画像である。画像を選択すると、次に再生を行うか否かの判定を行う（Ｓ４）。この判定の結果、再生でなかった場合には、ステップＳ３に戻る。
【００４８】
一方、ステップＳ４における判定の結果、再生であった場合には、画像再生を行う（Ｓ５）。ここでは、ステップＳ１１やステップＳ１６において記録された前面撮影または背面画像を再生する。再生にあたっては、画像記録制御部２によって記録媒体に記録された画像データを読み出し、そのまま動画像を再生する。再生にあたっては、撮影者１１がパンニング時等に背面撮影を行った場合には、撮影者１１の顔の部分がトリミングされた画像が再生表示される。画像再生を行うと、元のフローに戻る。
【００４９】
以上説明したように、本発明の第１実施形態においては、後方撮影部１ｂを設け、パンニング撮影時等に背面撮影の指示を行うと、撮影者の顔の部分をトリミングして記録するようにしている。このため、単調になりがちな動画撮影に変化をつけやすくして、鑑賞に堪えられるようにした動画を撮影することができる。また、本実施形態においては、撮影者の顔の部分をトリミングしているので、撮影者の表情変化を鑑賞することができる。
【００５０】
なお、本実施形態においては、撮影者１１が背面撮影釦４ｂを操作する等、手動操作がなされた際に、背面撮影を実行するようにしていたが、これに限らず、例えば、前面撮影で得られた画像が不規則や不安定であることを検知した場合（図６（ｂ）のような場合）に、自動的に背面撮影を行うようにしても勿論かまわない。
【００５１】
次に、本発明の第２実施形態について、図１１ないし図１４を用いて説明する。第１実施形態においては、撮影時に前面撮影を行った場合には、この前面撮影の画像データを記録し、背面撮影をした場合には、顔の部分をトリミングした画像の画像データを前面撮影の画像データの代わりに記録していた。これに対して、第２実施形態においては、撮影時には、前面撮影の画像と背面撮影の画像の両方を可能なら記録しておき、再生時に前面撮影の画像が不規則に変化している場合には、背面撮影の画像を再生するようにしている。第２実施形態の構成は図１に示した第１実施形態の場合と同様であるので、詳しい説明は省略する。
【００５２】
図１１に示すカメラ制御のフローに入ると、まず、ステップＳ１と同様に、撮影モードか否かの判定を行う（Ｓ３１）。この判定の結果、撮影モードであった場合には、次に、ステップＳ２と同様に、撮影を行うか否かの判定を行う（Ｓ３２）。この判定の結果、撮影でなかった場合には、ステップＳ３１に戻る。一方、この判定の結果、撮影であった場合には、次に、ステップＳ１１と同様に、前面撮影および記録を行う（Ｓ３３）。
【００５３】
ステップＳ３３において前面撮影及び記録を開始すると、次に、背面画像顔位置検出を行う（Ｓ３４）。ここでは、顔検出及び補正部２ｃによって、後方撮影部１ｂからの画像データに基づいて、画像の中に顔の部分が含まれているかを判定し、顔の部分が含まれていた場合には、顔の位置を検出する。
【００５４】
背面画像顔位置検出を行うと、次に、はみ出し予測を行う（Ｓ３５）。背面撮影の際に、図１４（ａ）に示すように、カメラ１０を撮影者１１と並行に上方に動かすと、顔が画面から外れやすく、図１４（ｂ）に示すように、カメラ１０を撮影者１１の顔の方向に向けながら回転保持すると、この場合には、顔が画面から外れにくい。そこで、このステップでは、カメラ１０の動きと画像中の顔の動きを分析することによって、顔がはみ出すか否かの予測を行う。このはみ出し予測の詳しい動作については、図１２を用いて後述する。
【００５５】
はみ出し予測を行うと、次に、このはみ出し予測の結果に基づいて、顔位置がはみ出すか否かの判定を行う（Ｓ３６）。この判定の結果、はみ出すと予測される場合には、警告表示を行う（Ｓ３７）。このステップでは、表示部８に、背面撮影を行う際に、顔の部分がはみ出す旨の警告表示を行う。
【００５６】
ステップＳ３７において警告表示を行うと、またはステップＳ３６における判定の結果、顔位置がはみ出さないと予測される場合には、次に、はみ出しが無いか否かの判定を行う（Ｓ３８）。ここでは、後方撮影部１ｂからの画像データに基づいて、顔検出及び補正部２ｃによって、実際に顔の部分がはみ出しているか否かの判定を行う。
【００５７】
ステップＳ３８における判定の結果、はみ出しが無かった場合には、トリミング画像の記録を行う（Ｓ３９）。このステップでは、前面撮影と並行して背面撮影を行い、前方撮影部１ａからの動画の画像データを記録媒体に記録すると共に、後方撮影部１ｂからの画像データの内、顔部分をトリミングした動画の画像データ（図９（ｅ）〜（ｈ）参照）を記録媒体に記録する。
【００５８】
ステップＳ３９におけるトリミング画像の記録を行うと、またはステップＳ３８における判定の結果、はみ出しがあった場合には、次に、ステップＳ１７と同様に、操作終了か否かの判定を行う（Ｓ４０）。この判定の結果、操作終了でなかった場合には、ステップＳ３３に戻り、撮影を続行する。一方、撮影終了であった場合には、ステップＳ１８と同様に、撮影終了動作を行った後、元のフローに戻る。
【００５９】
ステップＳ３１における判定の結果、撮影モードでなかった場合には、ステップＳ３と同様に再生画像の選択を行う（Ｓ５１）。再生画像の選択を行うと、ステップＳ４と同様に、再生を行うか否かの判定を行う（Ｓ５２）。この判定の結果、再生を行わない場合には、ステップＳ５１に戻る。一方、この判定の結果、再生を行う場合には、前面画像の再生を行う（Ｓ５３）。このステップでは、画像記録制御部２内の記録媒体から前面画像の動画の画像データを読み出し、この読み出された画像データを表示部８に再生表示する。
【００６０】
ステップＳ５３において前面画像の再生を開始すると、次に、前面画像の変化不規則でかつ背面画像が有るか否かの判定を行う（Ｓ５４）。このステップでは、記録媒体から読み出した前面画像の画像データを分析し、動画を構成する各フレームの画像の変化に規則性が無いか否かを判定する。前面画像の変化が規則的でない場合には、記録媒体に背面画像が記録されているか否かを判定する。
【００６１】
ステップＳ５４における判定の結果、前面画像の変化が不規則であり、かつ背面画像が有る場合には、背面カメラ画像の再生を行う（Ｓ５５）。このステップでは、図９（ｅ）〜（ｈ）に示したようなトリミング画像の動画が再生表示される。背面画像再生を行うと、ステップＳ５４に戻り、判定の結果、前面画像の変化が不規則であり、かつ背面画像が有る限り、背面画像の再生を続行する。
【００６２】
ステップＳ５４における判定の結果、前面画像の変化が不規則ではなく、背面画像が無い場合には、再生終了か否かの判定を行う（Ｓ５６）。ステップＳ５４の判定の結果、背面画像の再生を行わず、前面画像の再生を続行する。再生終了は、再生釦を再度、操作することにより終了するので、このステップでは、再生釦の操作状態を判定する。
【００６３】
ステップＳ５６における判定の結果、再生終了でなかった場合には、ステップＳ５３に戻り、再生動作を続行する。一方、判定の結果、再生終了であった場合には、次に、再生終了処理を行う（Ｓ５７）。この再生終了処理を行うと、元のフローに戻る。
【００６４】
次に、ステップＳ３５におけるはみ出し予測の詳しい動作について、図１２に示すフローチャートを用いて説明する。はみ出し予測のフローに入ると、まず、顔位置の変化が大であるか否かを判定する（Ｓ６１）。このステップでは、顔検出及び補正部２ｃが、後方撮影部１ｂからの画像データを用いて、顔の位置の変化を検出し、閾値より変化が大きかった場合には、顔位置変化大と判定する。
【００６５】
ステップＳ６１における判定の結果、顔位置の変化が大であった場合には、顔位置変化方向の判定を行う（Ｓ６２）。このステップでは、後方撮影部１ｂからの画像データを用いて、顔検出及び補正部２ｃは顔の位置の変化の方向を判定する。続いて、カメラの動きの方向を判定する（Ｓ６３）。このステップでは、ブレ及びパンニング部３がカメラ１０の動きの方向を判定する。
【００６６】
次に、ステップＳ６２において判定した顔位置の変化方向と、ステップＳ６３において判定したカメラの動き方向を比較し、両方向が逆か否かの判定を行う（Ｓ６４）。この判定の結果、逆の場合には、背面画像の顔の部分が画面からはみ出してしまうことから、はみ出し予測を行う（Ｓ６５）。一方、判定の結果、両方向が同じの場合には、背面画像の顔の部分が画面からはみ出すおそれがないことから、非はみ出し予測を行う（Ｓ６６）。すなわち、図１４（ａ）のように、カメラ１０が撮影者１１とは並行に上方に移動している場合には、カメラ１０は上方に移動しているにもかかわらず、背面画像中の撮影者１１は下方に移動していくことになり、２つの移動方向が逆方向となる。このような場合には、撮影者１１の顔が画面からはみ出すおそれがあるので、はみ出し予測とする。
【００６７】
ステップＳ６５においてはみ出し予測がなされると、前述のステップＳ３６における判定では、Ｙｅｓと判定され、警告表示を行うが、ステップＳ６６において非はみ出し予測がなされると、ステップＳ３６における判定ではＮｏと判定され、警告表示はなされない。ステップＳ６５またはＳ６６において予測がなされると、元のフローに戻る。
【００６８】
以上、説明したように、本発明の第２実施形態においては、撮影時には前面撮影と背面撮影を両方記録しておき、再生時に、前面撮影の画像が不規則の場合に、背面撮影の画像を再生表示している。このため、困難な動画撮影を容易にし、単調になりがちな動画撮影に変化をつけやすくして、鑑賞に堪えられるようにした動画を撮影することができる。また、本実施形態においても、背面撮影の際には、撮影者の顔の部分をトリミングし、この画像を記録するようにしている。このため、再生時に撮影者の表情変化を鑑賞することができる。
【００６９】
なお、本実施形態においては、前面画像の変化が不規則の場合に、前面画像に代えて背面画像を表示していた。しかし、この場合の表示方法としては、これ以外にも、例えば、背面画像を画面全体に表示し、前面画像をサブ画像として表示しても良く、また前面画像を画面全体に表示したままで、背面画像をサブ画像として表示するようにしても良い。
【００７０】
さらに、図１３の下段（図１３（ｇ）〜（ｉ））に示すように、撮影者の顔の部分をサブ画像として表示部８に表示するようにしても良い。すなわち、撮影者１１がパンニングを開始したことをブレ及びパンニング判定部３によって検知すると、後方撮影部１ｂからの画像中、顔の部分をトリミングし、前面画像にトリミング画像を合成し、表示部８に表示するようにすれば、撮影者１１は前面画像も簡単に確認することができる。また、この合成した画像を記録媒体に記録するようにしても良い。なお、前面画像とトリミング画像の合成は、顔検出および補正部２ｃによって行う。
【００７１】
次に、本発明の第３実施形態について、図１５および図１６を用いて説明する。本発明の第１及び第２実施形態においては、ライブビュー表示中には背面の画像を表示することがなかったが、第３実施形態においては、背面ライブビュー表示を可能とすると共に、撮影中に背面撮影と前面撮影を自在に切り換え可能にしている。第３実施形態の構成は図１に示した第１実施形態の場合と同様であるので、詳しい説明は省略する。但し、背面撮影釦４ｂは、最初操作すると、背面撮影に切り換わり、再度、操作すると前面撮影に切り換わる。すなわち、背面撮影釦４ｂは、操作するたびに、背面撮影と前面撮影を交互に切り換えることができる。
【００７２】
本実施形態におけるカメラ制御のフローに入ると、まず、ステップＳ１と同様に、撮影モードか否かの判定を行う（Ｓ７１）。この判定の結果、撮影モードでなかった場合には、ステップＳ３（図１０参照）の再生画像選択に進み、以下、第１実施形態と同様に、再生モードを実行する。この再生モードは、図１０のステップＳ３〜Ｓ５と同様であるので、詳しい説明は省略する。
【００７３】
ステップＳ７１における判定の結果、撮影モードであった場合には、次に、ライブビュー表示を行う（Ｓ７２）。このステップでは、前方撮影部１ａからの画像データに基づいて表示部８にライブビュー表示を行う。続いて、ステップＳ１５と同様に、背面撮影操作がなされたか否かの判定を行う（Ｓ７３）。このステップでは、背面撮影釦４ｂの操作状態に基づいて判定する。
【００７４】
ステップＳ７３における判定の結果、背面撮影操作がなされた場合には、次に、背面ライブビュー表示を行う（Ｓ７４）。このステップでは、後方撮影部１ｂからの画像データに基づいて、表示部８にライブビュー表示を行う。これによって、撮影者１１の自分撮りの画像を確認することができる。
【００７５】
ステップＳ７４における背面ライブビュー表示を開始すると、またはステップＳ７３における判定の結果、背面撮影操作がなされていなかった場合には、次に、ステップＳ２と同様に、撮影を行うか否かの判定を行う（Ｓ７２）。この判定の結果、撮影でなかった場合には、ステップＳ７１に戻る。一方、この判定の結果、撮影であった場合には、次に、背面表示中であって、かつ所定時間変化がないか否かの判定を行う（Ｓ７６）。
【００７６】
本実施形態においては、背面画像の中で、撮影者１１の顔の位置を、撮影者１１の意図に応じて変更することができる。すなわち、第１および第２実施形態においては、図９（ｅ）〜（ｈ）に示すように、トリミングした顔画像の位置は、画面の略真ん中に設定してあった。しかし、本実施形態においては、顔画像の位置を略真ん中に限らず、図１６（ａ）（ｂ）に示すように画面の中央寄りやや右側等、撮影者１１の意図に応じて設定することができる。この顔画像の位置の設定は、背面画像を見ながら、撮影者１１が気に入った位置があれば、その位置で所定時間、保持するようにすれば良い。ステップＳ７６は、この顔画像の位置設定を行っているか否かを判定している。
【００７７】
ステップＳ７６における判定の結果、背面表示中でなかった場合、または所定時間の間に変化があった場合には、ステップＳ１１と同様に、前面撮影及び記録を行う（Ｓ８１）。ここでは、前方撮影部１ａからの動画の画像データを記録媒体に記録する。続いて、ステップＳ７３と同様に、背面撮影操作がなされたか否かの判定を行う（Ｓ８２）。この判定の結果、背面撮影操作がなされた場合には、ステップＳ７４と同様に、背面ライブビュー表示を行う（Ｓ８３）。ここでは、後方撮影部１ｂからの画像データに基づいて、表示部８に背面ライブビュー表示を行う。
【００７８】
ステップＳ７６における判定の結果、背面表示中であり、かつ所定時間の間、変化が無い場合には、顔位置の記録を行う（Ｓ７７）。ここでは、後方撮影部１ｂからの画像データに基づいて顔検出及び補正部２ｃによって検出された顔の位置を記録する。これによって、顔の部分の位置を撮影者が設定することができる。なお、本実施形態においては、ステップＳ７６における判定によって、顔位置の設定がなされているか否かを判定し、この判定結果に基づいて自動的に顔位置の記録を行うようにしているが、これに限らず、手動操作部材を設け、撮影者によってこの手動操作部材が操作された際に顔位置の記録を行うようにしても構わない。
【００７９】
ステップＳ７７において顔位置の記録を行うと、またはステップＳ８３において背面ライブビュー表示を行うと、次に、背面画像から顔位置、大きさを揃えて切出し、この画像データを記録媒体に記録する（Ｓ７８）。ステップＳ７７において顔位置が記録されている場合には、その記録位置が顔の位置となるようにトリミング処理を行い、またステップＳ８３において背面ライブビュー表示を行っている場合には、予め決められた位置、本実施形態においては、略真ん中に顔の位置となるようにトリミング処理を行う。前述したように、背面表示中の顔位置が画面中央にない場合は、撮影者は、画面中央に顔がある構図を好まないと考え、トリミング時に、その時の顔位置に応じて、顔が配置されるような構図でトリミングを行う。なお、ステップＳ７４のライブビュー表示中に、ステップＳ７６およびＳ７７と同等の処理を行い、顔の位置を記録しておくようにしても良い。
【００８０】
ステップＳ７８における記録を行うと、次に、前面撮影操作がなされたか否かの判定を行う（Ｓ７９）。前述したように、背面撮影釦４ｂを背面撮影中に、再度、操作すると、前面撮影に切り換わるので、ここでは、背面撮影釦４ｂの操作状態に基づいて判定する。この判定の結果、前面撮影操作がなされた場合には、ライブビュー表示を行う（Ｓ８４）。このステップでは、前方撮影部１ａからの画像データに基づいて、表示部８にライブビュー表示を行う。ライブビュー表示を行うと、ステップＳ８１に戻り、背面撮影操作がなされるまで、前面画像に基づいてライブビュー表示を続行する。
【００８１】
ステップＳ７９における判定の結果、前面撮影操作がなされていなかった場合、またはステップＳ８２における判定の結果、背面撮影操作がなされていなかった場合には、次に、ステップＳ１７と同様に、操作終了か否かの判定を行う（Ｓ９１）。
【００８２】
ステップＳ９１における判定の結果、操作終了でなかった場合には、次に、記録位置から変化が大か否かの判定を行う（Ｓ９３）。ここでは、ステップＳ７７において記録した顔の位置から、現在の顔の位置が閾値よりもずれているか否かの判定を行う。この判定の結果、変化が大きかった場合には、警告を行う（Ｓ９４）。撮影者１１に知らせるためである。ステップＳ９４における警告を行うと、またはステップＳ９３における判定の結果、変化が大でなかった場合には、ステップＳ７６に戻り、背面撮影または前面撮影を続行する。
【００８３】
ステップＳ９１における判定の結果、操作終了であった場合には、撮影終了処理を行う（Ｓ９２）。この撮影終了処理が終わると、元のフローに戻る。
【００８４】
以上、説明したように、本発明の第３実施形態においては、ライブビュー表示時に前面撮影と背面撮影の画像のうち、撮影者が意図する画像をライブビュー表示で観察することができる。そして、背面撮影の際には、顔画像をトリミングして記録している。このため、困難な動画撮影を容易にし、単調になりがちな動画撮影に変化をつけやすくして、鑑賞に堪えられるようにした動画を撮影することができる。また、本実施形態においては、背面撮影の際には、撮影者の顔の位置を撮影者が指定することができる。このため、撮影者の意図に沿った顔画像の記録を行うことができる。前述の図７（ｈ）に示した例では、顔の部分は中央にあり、しかも左右に余裕のないトリミングであったが、本実施形態においては図１６に示すように、顔の位置をずらしてトリミングすることも可能である。
【００８５】
なお、本実施形態においては、撮影者１１が背面撮影釦４ｂを操作する等、手動操作がなされた際に、背面撮影を実行するようにしていたが、これに限らず、例えば、前面撮影で得られた画像が不規則や不安定であることを検知した場合に、自動的に背面撮影を行うようにしても勿論かまわない。
【００８６】
次に、本発明の第４実施形態について、図１７ないし図２１を用いて説明する。前述の図１３の下段（図１３（ｇ）〜（ｉ））に示した表示例では、撮影者１１の顔の占める部分が多すぎて、肝心の前面の画像が良く見えない。そこで、図１７（ａ）（ｃ）に示すように、顔の部分の画像を必要最小限として表示するようしても良い。ただし、この場合、一人レポートのように、前面画像を説明する場合には、物足らない状況となる。例えば、「こちらは、陽明門です」というようなコメントを入れたい場合、「こちらは」という際、撮影者が手で指し示す動作も分かるように記録したい。このような場合には、撮影者１１の動作が重要になるので、広い画角で表示を行いたいのが一般的である。そこで、撮影者にジェスチャーが有った場合には、図１７（ｂ）に示すように、そのジェスチャーを大きく表示でしたり表示を行えるようにする方が、臨場感のある画像撮影となる。
【００８７】
この場合の背面撮影においては、画面を見ている顔の部分はかなりの確率で撮影されるはずである。この状態で、ジェスチャーを行うとすれば、カメラ１０を構えている手以外の手の動きと考えられる。この手は、普段、上に挙げていると疲れるので、ジェスチャーのときのみ、顔の近くまで挙げられることになる。図１８はその時の様子を示した図であり、図１８（ａ）はジェスチャーを行う前の撮影者の様子を示し、図１８（ｂ）はカメラ１０を構えている以外の手を挙げている様子を示す。この場合には、顔の部分よりも下側から手が画面内に入ってくる。また、このときはジェスチャーによる表現力が大きいので、図１８（ｃ）のように、顔の一部分が多少欠けたとしても特に問題ない。
【００８８】
また、図１９に示すように、撮影者１１がカメラ１０を上に向けながら撮影する場合であって、図２０（ａ）に示すように、撮影者１１の顔の部分が画面の上部にある場合には、撮影者１１の姿勢まで含めて、撮影者１１の体を自然に表現することができる。しかし、カメラ１０の角度によっては、図２０（ｂ）に示すように、無駄なスペースが多い画面となる場合がある。この画面では、首が切れた画像であり、不自然である。このような場合には、図２０（ｃ）に示すように、頭部のみを切り出した画像の方が自然となる。
【００８９】
このような前面画像と背面画像を記録・再生表示する本実施形態に係わるカメラの構成は、図１に示した第１実施形態と同様であるので、詳しい説明は省略する。
【００９０】
次に、本実施形態におけるカメラ制御の動作を図２１に示すフローチャートを用いて説明する。このフローは、上述したような種々の状況に勘案して、最適になるように画面表示と撮影を行うようにしている。本実施形態におけるカメラ制御のフローに入ると、まず、ステップＳ１と同様に、撮影モードか否かの判定を行う（Ｓ１０１）。
【００９１】
ステップＳ１０１における判定の結果、撮影モードであった場合には、次に、ステップＳ２と同様に撮影を行うか否かの判定を行う（Ｓ１０２）。この判定の結果、撮影を行わない場合には、ステップＳ１０１に戻る。一方、撮影を行う場合には、ステップＳ１１と同様に、前面撮影及び記録を行う（Ｓ１０３）。ここでは、前方撮影部１ａからの画像データに基づいて動画の画像データの記録を行う。
【００９２】
次に、背面画像の顔の位置を検出する（Ｓ１０４）。このステップでは、後方撮影部１ｂからの画像データに基づいて、顔検出及び補正部２ｃが撮影者１１の顔の位置を検出する。続いて、顔の近くに画面の外の下側から動きがあるか否かの判定を行う（Ｓ１０５）。このステップでは、顔検出及び補正部２ｃが、後方撮影部１ｂからの画像データを解析し、顔の近くであって、画面外の下側から動きがあるか否かの判定を行う。
【００９３】
ステップＳ１０５における判定の結果、Ｎｏだった場合には、次に、顔が画面上半分か否かの判定を行う（Ｓ１０６）。ここでは、図２０（ａ）に示すように、画面の上半分に、撮影者１１の顔が有るか否かを、顔検出及び補正部２ｃによって判定する。
【００９４】
ステップＳ１０５またはステップＳ１０６における判定の結果が、Ｙｅｓであった場合には、全画像記録を行う（Ｓ１０７）。この場合は、図１８（ｂ）に示すように撮影者１１がジェスチャーを行っている場合、および又は、図２０（ａ）に示すたように、画面の上半分に撮影者１１の顔が有る場合であり、これらの場合には、顔の部分を切り出すよりも、全画像を表示するために記録を行う。
【００９５】
ステップＳ１０６における判定の結果、顔が画面上半分になかった場合には、次に、顔がはみ出していないか否かの判定を行う（Ｓ１０８）。この場合は、図２０（ｂ）に示すように、画面の上部に空白が生じている状況である。この場合には顔の部分をトリミングすることとし、この前提として顔の部分が画面外にはみ出していいないことを確認する。この判定は、顔検出及び補正部２ｃの検出結果に基づいて行う。
【００９６】
ステップＳ１０８における判定の結果、顔がはみ出していなかった場合には、トリミング画像を記録する（Ｓ１０９）。図２０（ｃ）を用いて説明したように、顔の部分のみをトリミングする。
【００９７】
ステップＳ１０９においてトリミング画像の記録を行うと、または、ステップＳ１０７において全画像の記録を行うと、次に、ステップＳ１７と同様に、操作終了か否かの判定を行う（Ｓ１１０）。このステップでは、レリーズ釦が、再度、操作されたか否かの判定を行う。この判定の結果、操作終了でなかった場合には、ステップＳ１０３に戻り、撮影動作を続行する。一方、判定の結果、操作終了であった場合には、撮影終了処理を行う（Ｓ１１１）。終了処理が終わると、元のフローに戻る。
【００９８】
ステップＳ１０１における判定の結果、撮影モードでなかった場合には、次に、ステップＳ３と同様に、再生画像の選択を行い（Ｓ１２１）、続いて、ステップＳ４と同様に、再生を行うか否かの判定を行う（Ｓ１２２）。この判定の結果、再生を行わない場合には、ステップＳ１２１に戻る。
【００９９】
一方、ステップＳ１２２における判定の結果、再生を行う場合には、前面画像の再生を行う（Ｓ１２３）。ここでは、記録媒体に記録されている前面画像の再生を表示部８において行う。前面画像の再生を行うと、次に、前面画像の変化が不規則であり、かつ背面画像が有るか否かの判定を行う（Ｓ１２４）。ここでは、再生画像の画像データをブレ及びパンニング判定部３によって解析し、被写体像の変化が不規則であり有るか否か、および記録媒体に背面画像が記録されている否かの判定を行う。
【０１００】
ステップＳ１２４における判定の結果が、Ｙｅｓであった場合には、次に背面カメラ画像の再生を行う（Ｓ１２５）。ステップＳ１２３における判定の結果、前面画像の変化が不規則であることから、このままで見苦しい画像であり、比較的に安定している背面画像を記録媒体から読み出し、背面の動画を再生する。なお、この背面画像は、ステップＳ１０７またはステップＳ１０９において記録された画像である。背面画像を再生すると、ステップＳ１２４に戻り、このステップの条件を満たしている限り、背面画像の再生を続行する。
【０１０１】
ステップＳ１２４における判定の結果が、Ｎｏであった場合には、次に、ステップＳ５６と同様に、再生終了か否かの判定を行う（Ｓ１２６）。この判定の結果、再生終了でなかった場合には、ステップＳ１２３に戻り、再生動作を続行する。一方、ステップＳ１２６における判定の結果、再生終了であった場合には、ステップＳ５７と同様に、再生終了処理を行う（Ｓ１２７）。再生終了処理を行うと、元のフローに戻る。
【０１０２】
以上説明したように、本発明の第４実施形態においては、撮影者１１の動きを検出し、撮影者が一人レポーターのように、ジェスチャーを行った場合、または、撮影者の顔の部分が画面上部にある場合には、背面画像の全体を表示・記録している。また、この条件を満たさない場合には、撮影者の顔の部分のみをトリミングして表示・記録を行っている。このため、困難な動画撮影を容易にし、単調になりがちな動画撮影に変化をつけやすくして、鑑賞に堪えられるようにした動画を撮影することができる。
【０１０３】
また、本実施形態においては、図１７（ｂ）に示すように、撮影者がジェスチャーを行う場合には、背景画像を大きくして表示するようにしている。このため、動きの有る場合には、鑑賞者が興味を持って見ることができる。
【０１０４】
なお、本実施形態においては、前面撮影と背面撮影を並行して行っているが、第１実施形態のように、撮影者１１が背面撮影釦４ｂを操作する等、手動操作がなされた際に、背面撮影を実行するようにしても良い。また、前面撮影で得られた画像が不規則や不安定であることを検知した場合等に、自動的に背面撮影を行うようにしても勿論かまわない。
【０１０５】
以上説明したように、本発明の各実施形態においては、撮影者以外の被写体を撮像し、第１の画像データを出力する前方撮影部１ａと、撮影者を第２の被写体として撮像し、第２の画像データを出力する後方撮影部１ｂと、第１の画像データは撮像した画角のまま記録し、第２の画像データは顔画像部分をトリミングして記録する画像記録制御部２を有している。このため、困難な動画撮影を容易にし、単調になりがちな動画撮影に変化をつけやすくして、鑑賞に堪えられるようにした動画を撮影することができる。すなわち、建物１２のような遠景から近寄ってまでの撮影の際に、撮影者を後方撮影部１ｂによって撮影するようにしているので、変化に富んだ画像になる。しかも、撮影者はトリミング処理を行うようにしたので、建物１２等を撮影している際の表情を、再生時に楽しむこともできる。
【０１０６】
なお、本発明の各実施形態においては、撮影装置としてのカメラが、再生装置を兼用していたが、再生にあたっては、パーソナルコンピュータやテレビ等、他の再生装置を利用するようにしても勿論かまわない。この場合、カメラの記録媒体に記録された画像データをパーソナルコンピュータ等の再生装置の記憶部に格納し、再生すれば良い。
【０１０７】
また、本実施形態においては、撮影のための機器として、デジタルカメラを用いて説明したが、カメラとしては、デジタル一眼レフカメラでもコンパクトデジタルカメラでもよく、ビデオカメラ、ムービーカメラでもよく、さらに、携帯電話や携帯情報端末（ＰＤＡ：Personal Digital Assist）、ゲーム機器等に内蔵されるカメラでも構わない。いずれにしても、動画を撮影することが可能な撮影装置であれば、本発明を適用することができる。
【０１０８】
本発明は、上記実施形態にそのまま限定されるものではなく、実施段階ではその要旨を逸脱しない範囲で構成要素を変形して具体化できる。また、上記実施形態に開示されている複数の構成要素の適宜な組み合わせにより、種々の発明を形成できる。例えば、実施形態に示される全構成要素の幾つかの構成要素を削除してもよい。さらに、異なる実施形態にわたる構成要素を適宜組み合わせてもよい。
【符号の説明】
【０１０９】
１ａ・・・前方撮影部、１ｂ・・・後方撮影部、２・・・画像記録制御部、２ａ・・・補助記録部、２ｂ・・・補助記録部、２ｃ・・・顔検出及び補正部、３・・・ブレ及びパンニング判定部、４・・・操作部、４ｂ・・・背面撮影釦、７・・・画像合成部、８・・・表示部、１１・・・撮影者、１２・・・建物
【図１】
2011087183.tif 000003
【図２】
2011087183.tif 000004
【図３】
2011087183.tif 000005
【図４】
2011087183.tif 000006
【図５】
2011087183.tif 000007
【図６】
2011087183.tif 000008
【図７】
2011087183.tif 000009
【図８】
2011087183.tif 000010
【図９】
2011087183.tif 000011
【図１０】
2011087183.tif 000012
【図１１】
2011087183.tif 000013
【図１２】
2011087183.tif 000014
【図１３】
2011087183.tif 000015
【図１４】
2011087183.tif 000016
【図１５】
2011087183.tif 000017
【図１６】
2011087183.tif 000018
【図１７】
2011087183.tif 000019
【図１８】
2011087183.tif 000020
【図１９】
2011087183.tif 000021
【図２０】
2011087183.tif 000022
【図２１】
2011087183.tif 000023