(57)【特許請求の範囲】
【請求項１】
被写体が位置する方向の光を集光する光学系、センサ、および信号処理部からなる第１のカメラブロックと、
撮影者が位置する方向の光を集光する光学系、センサ、および信号処理部からなる第２のカメラブロックと、
前記第１のカメラブロックまたは前記第２のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域、または第２のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて、検出信号を出力する状態検出手段と、
第１のモードで撮像する場合、前記第１のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される検出信号に基づいて、前記第１のカメラブロックから出力される画像信号に対応する画像の記録を制御する第１の記録制御手段と、
第２のモードで撮像する場合、前記第２のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される検出信号に基づいて、前記第１のカメラブロックから出力される画像信号に対応する画像とともに前記第２のカメラブロックから出力される画像信号に対応する画像の記録を制御する第２の記録制御手段と、
第３のモードで撮像する場合、前記第１のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される検出信号、および前記第２のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される検出信号に基づいて、前記第１のカメラブロックから出力される画像信号に対応する画像とともに前記第２のカメラブロックから出力される画像信号に対応する画像の記録を制御する第３の記録制御手段と、
前記記録された画像を表示する表示手段と
を備え、
前記状態検出手段は、
前記特徴的領域として、前記第１のカメラブロックより出力される画像信号、および前記第２のカメラブロックより出力される画像信号のそれぞれより、人物の顔の領域を検出し、
前記第１のモードの場合、前記第１のカメラブロックより出力される画像信号より検出される前記顔より笑顔が検出されるとき、前記検出信号を出力し、
前記第２のモードの場合、前記第２のカメラブロックより出力される画像信号より検出される前記顔より笑顔が検出されるとき、前記検出信号を出力し、
前記第３のモードの場合、前記第１のカメラブロックより出力される画像信号より検出される前記顔、および前記第２のカメラブロックより出力される画像信号より検出される前記顔より同時に笑顔が検出されるとき、前記検出信号を出力し、
前記表示手段は、
前記第２の記録手段により記録が制御された前記第２のカメラブロックから出力される画像信号に対応する画像を、前記第１のカメラブロックから出力される画像信号に対応する画像にＰｉｎＰ表示する
撮像装置。
【請求項２】
携帯電話機として構成され、
前記第２のカメラブロックは、ビデオフォン通話時に利用されるカメラブロックとされる
請求項１に記載の撮像装置。
【請求項３】
状態検出手段が、被写体が位置する方向の光を集光する光学系、センサ、および信号処理部からなる第１のカメラブロック、または、撮影者が位置する方向の光を集光する光学系、センサ、および信号処理部からなる第２のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域、または第２のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて、検出信号を出力し、
第１の記録制御手段が、第１のモードで撮像する場合、第１のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される前記検出信号に基づいて、前記第１のカメラブロックから出力される画像信号に対応する画像の記録を制御し、
第２の記録制御手段が、第２のモードで撮像する場合、第２のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される前記検出信号に基づいて、前記第１のカメラブロックから出力される画像信号に対応する画像とともに前記第２のカメラブロックから出力される画像信号に対応する画像の記録を制御し、
第３の記録制御手段が、第３のモードで撮像する場合、前記第１のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される検出信号、および前記第２のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される検出信号に基づいて、前記第１のカメラブロックから出力される画像信号に対応する画像とともに前記第２のカメラブロックから出力される画像信号に対応する画像の記録を制御し、
表示手段が、前記記録された画像を表示するステップを含み、
前記特徴的領域として、前記第１のカメラブロックより出力される画像信号、および前記第２のカメラブロックより出力される画像信号のそれぞれより、人物の顔の領域を検出し、
前記第１のモードの場合、前記第１のカメラブロックより出力される画像信号より検出される前記顔より笑顔が検出されるとき、前記検出信号が出力され、
前記第２のモードの場合、前記第２のカメラブロックより出力される画像信号より検出される前記顔より笑顔が検出されるとき、前記検出信号が出力され、
前記第３のモードの場合、前記第１のカメラブロックより出力される画像信号より検出される前記顔、および前記第２のカメラブロックより出力される画像信号より検出される前記顔より同時に笑顔が検出されるとき、前記検出信号が出力され、
前記第２の記録手段により記録が制御された前記第２のカメラブロックから出力される画像信号に対応する画像が、前記第１のカメラブロックから出力される画像信号に対応する画像にＰｉｎＰ表示される
撮像方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像制御装置および方法に関し、特に、簡単な構成で確実にシャッターチャンスを捉えることができるようにする撮像制御装置および方法に関する。
【背景技術】
【０００２】
例えば、デジタルカメラなどにおいて、被写体である人物の顔の認識および、笑顔などの表情認識、動作などを判断して被写体画像を記録する工夫は様々な方式が提案されている。
【０００３】
このようなデジタルカメラでは、被写体が認識され、また被写体の表情や動作が認識されることが必要であり、認識された被写体の表情や動作が撮影のトリガとなっている。
【０００４】
一方、撮影者が、自分の意思でカメラのシャッタボタンを押すことで被写体を撮影する場合、被写体の決定的な瞬間を記録するには常にシャッターチャンスに気を配る必要があり、時としてそれを逃すこともある。このため、シャッターレリーズのタイミングから数フレーム過去にさかのぼって記録を開始する仕組み（リングメモリなどを利用）などが提案されている
【０００５】
また、撮影者のウインク状態を非接触で検出することによって、レリーズを行うカメラも提案されている（例えば、特許文献１参照）。
【０００６】
【特許文献１】特開平７−１９１４０５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００７】
しかしながら、被写体の表情や動作のみを撮影のトリガとすることは、例えば、充分な撮影準備時間がある前提での、人物の撮影などにおいては有効に機能するが、行動する被写体を撮影する場合などには適さないことがある。
【０００８】
また、特許文献１の技術などを用いることにより、例えば、より高速のシャッタスピードでの撮影時における操作性を向上させることはできるが、撮影者が被写体を凝視していなければシャッターチャンスを逃してしまう可能性がある。
【０００９】
さらに、シャッターレリーズのタイミングから数フレーム過去にさかのぼって記録を開始する仕組みでは、リングメモリなどを利用する必要があったり、高速のＣＭＯＳイメージセンサが必要であったりする。
【００１０】
このため、画像データを多数記録するための大容量のメモリが必要であり、また、撮影後に画像を確認して選び出すなど、非常にわずらわしい操作が必要であった。
【００１１】
本発明はこのような状況に鑑みてなされたものであり、簡単な構成で確実にシャッターチャンスを捉えることができるようにするものである。
【課題を解決するための手段】
【００１２】
本発明の一側面は、被写体が位置する方向の光を集光する光学系、センサ、および信号処理部からなる第１のカメラブロックと、撮影者が位置する方向の光を集光する光学系、センサ、および信号処理部からなる第２のカメラブロックと、前記第１のカメラブロックまたは前記第２のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域、または第２のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて、検出信号を出力する状態検出手段と、第１のモードで撮像する場合、前記第１のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される検出信号に基づいて、前記第１のカメラブロックから出力される画像信号に対応する画像の記録を制御する第１の記録制御手段と、第２のモードで撮像する場合、前記第２のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される検出信号に基づいて、前記第１のカメラブロックから出力される画像信号に対応する画像とともに前記第２のカメラブロックから出力される画像信号に対応する画像の記録を制御する第２の記録制御手段と、第３のモードで撮像する場合、前記第１のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される検出信号、および前記第２のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される検出信号に基づいて、前記第１のカメラブロックから出力される画像信号に対応する画像とともに前記第２のカメラブロックから出力される画像信号に対応する画像の記録を制御する第３の記録制御手段と、
前記記録された画像を表示する表示手段とを備え、前記状態検出手段は、前記特徴的領域として、前記第１のカメラブロックより出力される画像信号、および前記第２のカメラブロックより出力される画像信号のそれぞれより、人物の顔の領域を検出し、前記第１のモードの場合、前記第１のカメラブロックより出力される画像信号より検出される前記顔より笑顔が検出されるとき、前記検出信号を出力し、前記第２のモードの場合、前記第２のカメラブロックより出力される画像信号より検出される前記顔より笑顔が検出されるとき、前記検出信号を出力し、前記第３のモードの場合、前記第１のカメラブロックより出力される画像信号より検出される前記顔、および前記第２のカメラブロックより出力される画像信号より検出される前記顔より同時に笑顔が検出されるとき、前記検出信号を出力し、前記表示手段は、前記第２の記録手段により記録が制御された前記第２のカメラブロックから出力される画像信号に対応する画像を、前記第１のカメラブロックから出力される画像信号に対応する画像にＰｉｎＰ表示する撮像装置である。
【００１７】
携帯電話機の一部として構成され、前記第２のカメラブロックは、ビデオフォン通話時に利用されるカメラブロックとされるようにすることができる。
【００１８】
本発明の一側面は、状態検出手段が、被写体が位置する方向の光を集光する光学系、センサ、および信号処理部からなる第１のカメラブロック、または、撮影者が位置する方向の光を集光する光学系、センサ、および信号処理部からなる第２のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域、または第２のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて、検出信号を出力し、第１の記録制御手段が、第１のモードで撮像する場合、第１のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される前記検出信号に基づいて、前記第１のカメラブロックから出力される画像信号に対応する画像の記録を制御し、第２の記録制御手段が、第２のモードで撮像する場合、第２のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される前記検出信号に基づいて、前記第１のカメラブロックから出力される画像信号に対応する画像とともに前記第２のカメラブロックから出力される画像信号に対応する画像の記録を制御し、第３の記録制御手段が、第３のモードで撮像する場合、前記第１のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される検出信号、および前記第２のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される検出信号に基づいて、前記第１のカメラブロックから出力される画像信号に対応する画像とともに前記第２のカメラブロックから出力される画像信号に対応する画像の記録を制御し、表示手段が、前記記録された画像を表示するステップを含み、前記特徴的領域として、前記第１のカメラブロックより出力される画像信号、および前記第２のカメラブロックより出力される画像信号のそれぞれより、人物の顔の領域を検出し、前記第１のモードの場合、前記第１のカメラブロックより出力される画像信号より検出される前記顔より笑顔が検出されるとき、前記検出信号が出力され、前記第２のモードの場合、前記第２のカメラブロックより出力される画像信号より検出される前記顔より笑顔が検出されるとき、前記検出信号が出力され、前記第３のモードの場合、前記第１のカメラブロックより出力される画像信号より検出される前記顔、および前記第２のカメラブロックより出力される画像信号より検出される前記顔より同時に笑顔が検出されるとき、前記検出信号が出力され、前記第２の記録手段により記録が制御された前記第２のカメラブロックから出力される画像信号に対応する画像が、前記第１のカメラブロックから出力される画像信号に対応する画像にＰｉｎＰ表示される撮像方法である。
【００１９】
本発明の一側面においては、第１のモードで撮像する場合、光を集光する光学系、センサ、および信号処理部からなる第１のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される検出信号に基づいて、前記第１のカメラブロックから出力される画像信号に対応する画像の記録が制御され、第２のモードで撮像する場合、前記第１のカメラブロックとは異なる位置の光を集光する光学系、センサ、および信号処理部からなる第２のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される検出信号に基づいて、前記第１のカメラブロックから出力される画像信号に対応する画像とともに前記第２のカメラブロックから出力される画像信号に対応する画像の記録が制御され、第３のモードで撮像する場合、前記第１のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される検出信号、および前記第２のカメラブロックから出力される画像信号に対応する画像の中の特徴的領域の状態に応じて出力される検出信号に基づいて、前記第１のカメラブロックから出力される画像信号に対応する画像とともに前記第２のカメラブロックから出力される画像信号に対応する画像の記録が制御され、前記記録された画像が表示される。また、前記特徴的領域として、前記第１のカメラブロックより出力される画像信号、および前記第２のカメラブロックより出力される画像信号のそれぞれより、人物の顔の領域を検出し、前記第１のモードの場合、前記第１のカメラブロックより出力される画像信号より検出される前記顔より笑顔が検出されるとき、前記検出信号が出力され、前記第２のモードの場合、前記第２のカメラブロックより出力される画像信号より検出される前記顔より笑顔が検出されるとき、前記検出信号が出力され、前記第３のモードの場合、前記第１のカメラブロックより出力される画像信号より検出される前記顔、および前記第２のカメラブロックより出力される画像信号より検出される前記顔より同時に笑顔が検出されるとき、前記検出信号が出力され、前記第２のカメラブロックから出力される画像信号に対応する画像が、前記第１のカメラブロックから出力される画像信号に対応する画像にＰｉｎＰ表示される。
【発明の効果】
【００２０】
本発明によれば、簡単な構成で確実にシャッターチャンスを捉えることができる。
【図面の簡単な説明】
【００２１】
【図１】従来のデジタルカメラの構成例を示すブロック図である。
【図２】本発明の一実施の形態に係るデジタルカメラの外観の例を示す図である。
【図３】本発明の一実施の形態に係るデジタルカメラの外観の例を示す図である。
【図４】本発明の一実施の形態に係るデジタルカメラの内部構成例を示すブロック図である。
【図５】画像取得処理の例を説明するフローチャートである。
【図６】撮影者モードでの画像の取得を説明する図である。
【図７】撮影者モードでの画像の取得を説明する図である。
【図８】ＰｉｎＰ表示される場合の例を示す図である。
【図９】本発明の一実施の形態に係るデジタルカメラの別の内部構成例を示すブロック図である。
【図１０】画像取得処理の別の例を説明するフローチャートである。
【図１１】画像取得処理の別の例を説明するフローチャートである。
【図１２】本発明の一実施の形態に係る携帯電話機の外観の例を示す図である。
【図１３】本発明の一実施の形態に係る携帯電話機の外観の例を示す図である。
【図１４】本発明の一実施の形態に係る携帯電話機の外観の例を示す図である。
【図１５】本発明の携帯電話機のサブカメラブロックの構成例を示すブロック図である。
【図１６】パーソナルコンピュータの構成例を示すブロック図である。
【発明を実施するための形態】
【００２２】
以下、図面を参照して、本発明の実施の形態について説明する。
【００２３】
最初に従来のデジタルカメラの構成について説明する。
【００２４】
図１は、従来のデジタルカメラの構成例を示すブロック図である。
【００２５】
同図において、デジタルカメラ１０には、メインカメラブロック２０が設けられている。メインカメラブロック２０は、レンズ・メカシャッタ２１、レンズ駆動部２２、センサ２３、および信号処理部２４により構成されている。
【００２６】
レンズ・メカシャッタ２１は、例えば、光学系などとして構成され、レンズ駆動部２２により駆動されるようになされている。
【００２７】
レンズ・メカシャッタ２１を介して集光された光は、センサ２３に供給される。センサ２３は、例えば、ＣＭＯＳ撮像センサ、ＣＣＤ撮像センサなどの光電変換センサにより構成され、レンズ・メカシャッタ２１を介して集光された光を光電変換する。そして、センサ２３は、光電変換により得られたアナログ電気信号をデジタル信号に変換して信号処理部２４に出力する。
【００２８】
信号処理部２４は、センサ２３から供給された信号を処理するようになされている。例えば、信号処理部２４は、センサ２３から供給されたデジタル信号を色差信号に変換して画像処理部５１に出力するようになされている。
【００２９】
画像処理部５１は、例えば、信号処理部２４から供給された画像信号に対して、ＪＰＥＧエンコード・デコードの処理、画像のスケーリング・リサイズの処理などを施すようになされている。
【００３０】
画像処理部５１は、例えば、画像の取得前に被写体の画像を液晶パネル５３に表示して確認するビューファインダーモードにおいては、信号処理部２４から供給される画像信号をリサイズして液晶パネルコントローラ５２に出力するようになされている。画像処理部５１は、被写体の画像を取得する場合には、制御部３０の制御に基づいて、画像のＪＰＥＧエンコード処理などを行い、エンコードされた画像データをメモリマネージャ６１に出力するようになされている。
【００３１】
液晶パネルコントローラ５２は、画像処理部５１から出力された画像データを、液晶パネル５３に表示できるサイズ、フォーマットに変換し、液晶パネル５３に画像を表示させるようになされている。
【００３２】
メモリマネージャ６１は、必要に応じて、画像データを記録メディア６２に書き込み、または、画像データを記録メディア６２から読み出すようになされている。また、メモリマネージャ６１は、画像データへのサムネイルの付加、Ｅｘｉｆ情報の付加なども行うようになされている。
【００３３】
メインカメラブロック２０および画像処理部５１は、制御部３０によって制御されるようになされている。
【００３４】
制御部３０は、実際には、例えば、マイクロコンピュータなどにより構成されるが、ここでは、制御部３０のうち、デジタルカメラ１０の画像の取得（撮像）に関するブロックのみを説明する。
【００３５】
デジタルカメラ１０の画像の取得は、キャプチャマネージャ３１から出力される制御信号に基づいて、キャプチャコントローラ３３により行なわれるようになされている。
【００３６】
キャプチャマネージャ３１は、レリーズボタン４１が押下された場合、レリーズ指示信号を受け付け、キャプチャコントローラ３３に画像取得のための制御信号を出力するようになされている。
【００３７】
キャプチャコントローラ３３は、キャプチャマネージャ３１から制御信号を受け付けたタイミングで、レンズ駆動部２２、センサ２３、信号処理部２４、画像処理部５１、およびメモリマネージャ６１のそれぞれについて画像の取得を行うように制御するようになされている。取得された画像のデータは、最終的には記録メディア６２に書き込まれるようになされている。
【００３８】
また、制御部３０には、状態検出部３２が設けられている。状態検出部３２は、例えば、信号処理部２４から出力されるデジタル信号に対応する画像の中の被写体を検出する。ここで、被写体は、例えば、人物の顔とされる。
【００３９】
そして、状態検出部３２は、検出された被写体の状態を検出するようになされている。ここで、検出された被写体の状態は、例えば、人物の顔が笑顔となった状態などを意味するものである。すなわち、状態検出部３２は、いわゆるスマイル検出と称される機能を実現するための機能ブロックとされる。
【００４０】
なお、顔検出、スマイル検出などの技術については諸々の発明や文献が公知となっており、状態検出部３２は、それらの技術により実現されるものとされる。
【００４１】
状態検出部３２は、例えば、人物の顔が笑顔となったことを検出し、笑顔となったことを表す検出信号をキャプチャマネージャ３１に出力するようになされている。また、笑顔となったこと（スマイル状態）は、それを度合いとして出力することも可能である。
【００４２】
キャプチャマネージャ３１は、状態検出部３２から検出信号が出力されたタイミングで、キャプチャコントローラ３３に、制御信号を出力するようになされている。
【００４３】
このようにすることで、デジタルカメラ１０により、被写体である人物が笑顔となった瞬間の画像を取得することが可能となるのである。
【００４４】
しかしながら、デジタルカメラ１０のように、被写体の表情のみを撮影のトリガとすることは、例えば、充分な撮影準備時間がある前提での、人物の撮影などにおいては有効に機能するが、行動する被写体を撮影する場合などには適さないことがある。
【００４５】
このため、本発明においては、被写体の表情のみでなく、撮影者の表情も撮影のトリガとすることができるようにする。
【００４６】
図２と図３は、本発明の一実施の形態に係るデジタルカメラの外観の例を示す図である。
【００４７】
図２に示されるように、デジタルカメラ１００には、被写体撮影用レンズ１０２、レリーズボタン（シャッタ）１０３、フラッシュ１０４が設けられている。図２に示される部分は、撮影時に被写体に向けられる面とされる。
【００４８】
図３に示される部分は、デジタルカメラ１００における図２に示される面の裏面に対応し、撮影時に撮影者側に向けられる面とされる。図３に示されるように、デジタルカメラ１００には、撮影者撮影用レンズ１０５、液晶パネル１０６、ズームレバー１０７、記録画像再生ボタン１０８、および操作スイッチ１０９が設けられている。
【００４９】
撮影者撮影用レンズ１０５は、液晶パネル１０６の上部に配置され、液晶パネル１０６を観察するユーザ（撮影者）の画像に対応する光を集光できる位置に配置されている。すなわち、撮影者撮影用レンズ１０５により、デジタルカメラ１００により被写体を撮影するユーザの上半身の画像を撮影することができるようになされている。撮影者撮影用レンズ１０５の画角は、例えば、水平５０度以上であることが望ましい。
【００５０】
図４は、本発明の一実施の形態に係るデジタルカメラ１００の構成例を示すブロック図である。
【００５１】
同図において、デジタルカメラ１００には、メインカメラブロック１２０が設けられている。メインカメラブロック１２０は、レンズ・メカシャッタ１２１、レンズ駆動部１２２、センサ１２３、および信号処理部１２４により構成されている。
【００５２】
レンズ・メカシャッタ１２１は、例えば、光学系などとして構成され、レンズ駆動部１２２により駆動されるようになされている。なお、レンズ・メカシャッタ１２１の一部が、図２において被写体撮影用レンズ１０２として示されている。
【００５３】
レンズ・メカシャッタ１２１を介して集光された光は、センサ１２３に供給される。センサ１２３は、例えば、ＣＭＯＳ撮像センサ、ＣＣＤ撮像センサなどの光電変換センサにより構成され、レンズ・メカシャッタ１２１を介して集光された光を光電変換する。そして、センサ１２３は、光電変換により得られたアナログ電気信号をデジタル信号に変換して信号処理部１２４に出力する。
【００５４】
信号処理部１２４は、センサ１２３から供給された信号を処理するようになされている。例えば、信号処理部１２４は、センサ１２３から供給されたデジタル信号を色差信号に変換して画像処理部１５１に出力するようになされている。
【００５５】
また、同図に示されるように、デジタルカメラ１００には、サブカメラブロック１８０が設けられている。サブカメラブロック１８０は、レンズ１８１、センサ１８２、および信号処理部１８３により構成されている。
【００５６】
レンズ１８１は、例えば、光学系などとして構成される。なお、レンズ１８１の一部が、図３において撮影者撮影用レンズ１０５として示されている。
【００５７】
レンズ１８１を介して集光された光は、センサ１８２に供給される。センサ１８２は、例えば、ＣＭＯＳ撮像センサ、ＣＣＤ撮像センサなどの光電変換センサにより構成され、レンズ１８１を介して集光された光を光電変換する。そして、センサ１８２は、光電変換により得られたアナログ電気信号をデジタル信号に変換して信号処理部１８３に出力する。
【００５８】
信号処理部１８３は、センサ１８２から供給された信号を処理するようになされている。例えば、信号処理部１８３は、センサ１８２から供給されたデジタル信号を色差信号に変換して画像処理部１５１に出力するようになされている。
【００５９】
画像処理部１５１は、例えば、信号処理部１２４または信号処理部１８３から供給された画像信号に対して、ＪＰＥＧエンコード・デコードの処理、画像のスケーリング・リサイズの処理などを施すようになされている。
【００６０】
画像処理部１５１は、例えば、画像の取得前に被写体の画像を液晶パネル１５３に表示して確認するビューファインダーモードにおいては、信号処理部１２４から供給される画像信号をリサイズして液晶パネルコントローラ１５２に出力するようになされている。画像処理部１５１は、被写体の画像または撮影者の画像を取得する場合には、制御部１３０の制御に基づいて、画像のＪＰＥＧエンコード処理などを行い、エンコードされた画像データをメモリマネージャ１６１に出力するようになされている。
【００６１】
液晶パネルコントローラ１５２は、画像処理部１５１から出力された画像データを、液晶パネル１５３に表示できるサイズ、フォーマットに変換し、液晶パネル１５３に画像を表示させるようになされている。なお、液晶パネル１５３は、図３の液晶パネル１０６に対応する。
【００６２】
メモリマネージャ１６１は、必要に応じて、画像データを記録メディア１６２に書き込み、または、画像データを記録メディア１６２から読み出すようになされている。また、メモリマネージャ１６１は、画像データへのサムネイルの付加、Ｅｘｉｆ情報の付加なども行うようになされている。
【００６３】
メインカメラブロック１２０、サブカメラブロック１８０および画像処理部１５１は、制御部１３０によって制御されるようになされている。
【００６４】
制御部１３０は、実際には、例えば、マイクロコンピュータなどにより構成されるが、ここでは、制御部１３０のうち、デジタルカメラ１００の画像の取得（撮像）に関するブロックのみを説明する。
【００６５】
デジタルカメラ１００の画像の取得は、キャプチャマネージャ１３１から出力される制御信号に基づいて、キャプチャコントローラ１３３により行なわれるようになされている。
【００６６】
キャプチャマネージャ１３１は、レリーズボタン１４１が押下された場合、レリーズ指示信号を受け付け、キャプチャコントローラ１３３に画像取得のための制御信号を出力するようになされている。
【００６７】
キャプチャコントローラ１３３は、キャプチャマネージャ１３１から制御信号を受け付けたタイミングで、レンズ駆動部１２２、センサ１２３、信号処理部１２４、画像処理部１５１、およびメモリマネージャ１６１のそれぞれについて画像の取得を行うように制御するようになされている。取得された画像のデータは、最終的には記録メディア１６２に書き込まれるようになされている。
【００６８】
また、制御部１３０には、状態検出部１３２が設けられている。状態検出部１３２は、例えば、信号処理部１２４から出力されるデジタル信号に対応する画像、および信号処理部１８３から出力されるデジタル信号に対応する画像の中の被写体を検出する。ここで、被写体は、例えば、人物の顔とされる。
【００６９】
そして、状態検出部１３２は、検出された被写体の状態を検出するようになされている。ここで、検出された被写体の状態は、例えば、人物の顔が笑顔となった状態などを意味するものである。すなわち、状態検出部１３２は、いわゆるスマイル検出と称される機能を実現するための機能ブロックとされる。
【００７０】
なお、顔検出、スマイル検出などの技術については諸々の発明や文献が公知となっており、状態検出部１３２は、それらの技術により実現されるものとされる。
【００７１】
状態検出部１３２は、例えば、人物の顔が笑顔となったことを検出し、笑顔となったことを表す検出信号をキャプチャマネージャ１３１に出力するようになされている。本発明においては、メインカメラブロック１２０から出力される信号に対応する画像における人物の顔が笑顔となったことが検出される。また、本発明においては、サブカメラブロック１８０から出力される信号に対応する画像における撮影者の顔が笑顔となったことが検出される。また、笑顔となったこと（スマイル状態）は、それを度合いとして出力することも可能である。
【００７２】
キャプチャマネージャ１３１は、状態検出部１３２から検出信号が出力されたタイミングで、キャプチャコントローラ１３３に、制御信号を出力するようになされている。
【００７３】
このようにすることで、デジタルカメラ１００により、被写体である人物が笑顔となった瞬間、または撮影者が笑顔となった瞬間の画像を取得することが可能となるのである。
【００７４】
デジタルカメラ１００においては、例えば、操作スイッチ１０９を操作することにより撮影モードを設定することができるようになされている。例えば、撮影モードを被写体モードに設定した場合、被写体である人物が笑顔となった瞬間の画像を取得するようになされている。また、例えば、撮影モードを撮影者モードに設定した場合、撮影者が笑顔となった瞬間の画像を取得するようになされている。
【００７５】
なお、例えば、撮影モードを被写体モードに設定した場合、メインカメラブロック１２０を介して取得された被写体である人物の画像のデータのみが記録メディア１６２に書き込まれるようになされている。また、例えば、撮影モードを撮影者モードに設定した場合、メインカメラブロック１２０を介して取得された被写体である人物の画像のデータと、サブカメラブロック１８０を介して取得された撮影者の画像のデータが記録メディア１６２に書き込まれるようになされている。撮影モードを撮影者モードに設定した場合、被写体である人物の画像のデータと、撮影者の画像のデータとが対応付けられて記録される。
【００７６】
デジタルカメラ１００において設定された撮影モードは、キャプチャマネージャ１３１と状態検出部１３２に記憶されるようになされている。
【００７７】
撮影モードを被写体モードに設定した場合、状態検出部１３２は、メインカメラブロック１２０から出力される信号に対応する画像における人物の顔が笑顔となったことを検出する。また、撮影者モードに設定した場合、状態検出部１３２は、サブカメラブロック１８０から出力される信号に対応する画像における撮影者の顔が笑顔となったことを検出する。なお、状態検出部１３２が、例えば、笑顔となった度合いに応じて信号を出力する場合、その信号を閾値判定するなどして検出信号が生成されるようにする。
【００７８】
次に、図５のフローチャートを参照して、デジタルカメラ１００による画像取得処理の例について説明する。
【００７９】
ステップＳ２１において、キャプチャマネージャ１３１は、レリーズボタン１４１が押下されたか否かを判定する。ステップＳ２１において、レリーズボタン１４１が押下されていないと判定された場合、処理は、ステップＳ２２に進む。
【００８０】
ステップＳ２２において、キャプチャマネージャ１３１は、撮影モードが撮影者モードであるか否かを判定する。ステップＳ２２において、撮影モードが撮影者モードであると判定された場合、処理は、ステップＳ２３に進む。
【００８１】
ステップＳ２３において、キャプチャマネージャ１３１は、状態検出部１３２から検出信号が出力されたか否かを判定する。すなわち、撮影者の笑顔（スマイル）を検出したか否かが判定される。
【００８２】
ステップＳ２３において、撮影者のスマイルを検出したと判定された場合、処理は、ステップＳ２４に進み、キャプチャマネージャ１３１は、キャプチャコントローラ１３３に画像取得のための制御信号を出力することで、撮影者の画像を取得させる。このとき、画像処理部１５１は、信号処理部１８３から供給された画像信号に対して、ＪＰＥＧエンコード処理などを行い、エンコードされた画像データをメモリマネージャ１６１に出力する。メモリマネージャ１６１は、その画像データを記録メディア１６２に書き込む。
【００８３】
ステップＳ２４の処理の後、処理は、ステップＳ２７に進み、キャプチャマネージャ１３１は、キャプチャコントローラ１３３に画像取得のための制御信号を出力することで、被写体の画像を取得させる。このとき、画像処理部１５１は、信号処理部１２４から供給された画像信号に対して、ＪＰＥＧエンコード処理などを行い、エンコードされた画像データをメモリマネージャ１６１に出力する。メモリマネージャ１６１は、その画像データを記録メディア１６２に書き込む。なお、いまの場合、メモリマネージャ１６１は、例えば、画像データにＥｘｉｆ情報を付加するなどして、ステップＳ２７の処理で取得された被写体の画像データを、ステップＳ２４の処理で取得された撮影者の画像データと対応付けて記録するようになされている。
【００８４】
一方、ステップＳ２２において、撮影モードは撮影者モードではないと判定された場合、処理は、ステップＳ２５に進む。
【００８５】
ステップＳ２５において、キャプチャマネージャ１３１は、撮影モードが被写体モードであるか否かを判定する。ステップＳ２５において、撮影モードが被写体モードであると判定された場合、処理は、ステップＳ２６に進む。
【００８６】
ステップＳ２６において、キャプチャマネージャ１３１は、状態検出部１３２から検出信号が出力されたか否かを判定する。すなわち、被写体の笑顔（スマイル）を検出したか否かが判定される。
【００８７】
ステップＳ２６において、被写体のスマイルを検出したと判定された場合、処理は、ステップＳ２７に進み、キャプチャマネージャ１３１は、キャプチャコントローラ１３３に画像取得のための制御信号を出力することで、被写体の画像を取得させる。このとき、画像処理部１５１は、信号処理部１２４から供給された画像信号に対して、ＪＰＥＧエンコード処理などを行い、エンコードされた画像データをメモリマネージャ１６１に出力する。メモリマネージャ１６１は、その画像データを記録メディア１６２に書き込む。
【００８８】
また、一方、ステップＳ２１において、レリーズボタン１４１が押下されていると判定された場合、処理は、ステップＳ２７に進む。ステップＳ２７において、キャプチャマネージャ１３１は、キャプチャコントローラ１３３に画像取得のための制御信号を出力することで、被写体の画像を取得させる。このとき、画像処理部１５１は、信号処理部１２４から供給された画像信号に対して、ＪＰＥＧエンコード処理などを行い、エンコードされた画像データをメモリマネージャ１６１に出力する。メモリマネージャ１６１は、その画像データを記録メディア１６２に書き込む。
【００８９】
ステップＳ２３において、撮影者のスマイルを検出しなかったと判定された場合、または、ステップＳ２６において、被写体のスマイルを検出しなかったと判定された場合、処理は、終了する。
【００９０】
なお、撮影モードが撮影者モードの場合、例えば、撮影者のスマイルの検出が優先的に行われ、撮影者のスマイルが検出されなかった場合、被写体のスマイルの検出をトリガとして撮影が行われるようにしてもよい。すなわち、ステップＳ２３において、撮影者のスマイルを検出しなかったと判定された場合、処理がステップＳ２６に進むようにしてもよい。
【００９１】
このようにして、画像取得処理が実行される。このように本発明では、被写体のスマイルの検出を撮影のトリガとするだけでなく、撮影者のスマイルの検出を撮影のトリガとすることができる。
【００９２】
図６と図７は、撮影者モードでの画像の取得を説明する図である。例えば、図６に示されるように、撮影者であるユーザ２１１が、被写体２１２の画像を取得する場合の例を説明する。図６に示される被写体２１２は、ペンギンとされている。すなわち、いまの場合、撮影者であるユーザ２１１は、人物を被写体とした画像を取得しようとしていないのである。
【００９３】
上述したように、撮影者モードでは、撮影者のスマイルが検出されて画像が取得される。すなわち、ユーザ２１１は、デジタルカメラ１００の液晶パネル１０６に表示される画像を観察しながら、被写体２１２の画像を取得する。このとき、撮影者撮影用レンズ１０５を介してユーザ２１１の上半身の画像が撮影され続けることになる。そして、ユーザ２１１のスマイルが検出されたとき、被写体２１２の画像とユーザ２１１の画像とが取得されて記録されることになる。
【００９４】
図７ａは、撮影者モードで取得された撮影者の画像の例を示す図である。同図の画像２２１には、笑顔のユーザ２１１が写っている。図７ｂは、撮影者モードで取得された被写体の画像の例を示す図である。同図の画像２２２には、ユーザ２１１のスマイルが検出されたときの被写体２１２が写っている。なお、画像２２１と画像２２２とは、対応付けられて記録される。従って、例えば、撮影者の表情を確認しながら、被写体の画像を再生するようにすることもできる。
【００９５】
あるいはまた、例えば、画像２２２の左上端に、画像２２１が合成されて１枚の画像として記録されるようにしてもよい。
【００９６】
このように本発明によれば、例えば、動物など、表情を検出することができない被写体を撮影するときでも、シャッターチャンスを逃さず撮影できる。特に、撮影者が笑顔となった瞬間の画像を取得するようにすることで、より自然なタイミングで、撮影者が欲する被写体の画像を取得させることができる。
【００９７】
また、撮影者が笑顔となった瞬間の画像を取得するようにすることで、例えば、より高速のシャッタスピードでの撮影時における操作性を向上させることもできる。この場合において、撮影者が被写体を凝視していなくともシャッターチャンスを逃がすことがないようにすることができる。さらに、シャッターレリーズのタイミングから数フレーム過去にさかのぼって記録を開始する仕組みなども必要ないので、カメラの構造を簡単なものとすることができる。
【００９８】
また、撮影者モードで取得された被写体の画像と、その画像の撮影のトリガになった瞬間の撮影者の画像が対応づけられて記録されるので、例えば、取得した画像を再生するときにユーザに更なる楽しみを与えることができる。
【００９９】
例えば、取得した画像を再生するときに、液晶パネル１０６に表示される画像において、ＰｉｎＰ（ピクチャ・イン・ピクチャ）表示が行われるようにしてもよい。
【０１００】
図８は、ＰｉｎＰ表示が行われる場合の例を示す図である。図８においては、液晶パネル１０６に被写体２１２の画像（図７ｂの画像２２２）が大きく表示されている。そして、同図に示されるように、液晶パネル１０６の左上の領域１０６ａに撮影者（ユーザ２１１）の画像（図７ａの画像２２１）が小さく表示されている。
【０１０１】
このようにすることで、取得した画像を再生するときにユーザに更なる楽しみを与えることができる。
【０１０２】
あるいはまた、撮影者の画像をサムネイル画像とし、ユーザにサムネイル画像を選択させることで、被写体の画像が再生されるようにしてもよい。
【０１０３】
なお、ここでは、被写体または撮影者のスマイルを検出するようにしたが、他の表情が検出されるようにしてもよい。例えば、撮影者モードでは、驚きの表情などが検出されるようにし、撮影者が驚いた瞬間の画像が取得されるようにしてもよい。あるいはまた、表情に変えて動作などが検出されるようにしてもよい。
【０１０４】
ところで、図４を参照して上述した例においては、状態検出部１３２は、被写体モードの場合、被写体の顔が笑顔（スマイル）となったことを検出し、撮影者モードの場合、撮影者の顔が笑顔（スマイル）となったことを検出すると説明した。しかし、被写体の顔が笑顔となり、かつ撮影者の顔が笑顔となったことが検出されるようにすれば、ユーザにとってさらに楽しい画像を取得することができると考えられる。
【０１０５】
図９は、被写体の顔が笑顔となり、かつ撮影者の顔が笑顔となったことを検出する場合のデジタルカメラ１００の構成例を示すブロック図である。同図は、図４に対応する図であり、図４と同じ機能ブロックには、同一の符号が付されているので、これらの機能ブロックについての詳細な説明は省略する。
【０１０６】
図９の構成の場合、図４の例とは異なり、サブカメラブロック１８０に、状態検出部１８４が設けられている。状態検出部１８４は、状態検出部１３２と同様に、例えば、信号処理部１８３から出力されるデジタル信号に対応する画像の中の被写体を検出する。いまの場合、被写体は、撮影者の画像とされる。そして、状態検出部１８４は、検出された被写体の状態を検出するようになされている。ここで、検出された被写体の状態は、例えば、撮影者の顔が笑顔となった状態などを意味するものである。すなわち、状態検出部１８４は、いわゆるスマイル検出と称される機能を実現するための機能ブロックとされる。また、笑顔となったこと（スマイル状態）は、それを度合いとして出力することも可能である。
【０１０７】
状態検出部１８４は、例えば、撮影者の顔が笑顔となったことを検出し、笑顔となったことを表す検出信号をキャプチャマネージャ１３１に出力するようになされている。
【０１０８】
図９の例の場合、キャプチャマネージャ１３１は、状態検出部１３２と状態検出部１８４から同時に検出信号が出力されたタイミングで、キャプチャコントローラ１３３に、制御信号を出力するようになされている。
【０１０９】
すなわち、図９の例の場合、デジタルカメラ１００は、被写体のスマイルと撮影者のスマイルの両方を検出して画像を取得するのである。このように、被写体のスマイルと撮影者のスマイルの両方を検出して画像を取得する撮影モードをダブルスマイルモードと称することにする。
【０１１０】
次に、デジタルカメラ１００が図９に示されるように構成される場合の画像取得処理の例について、図１０と図１１のフローチャートを参照して説明する。
【０１１１】
ステップＳ５１において、キャプチャマネージャ１３１は、レリーズボタン１４１が押下されたか否かを判定する。ステップＳ５１において、レリーズボタン１４１が押下されていないと判定された場合、処理は、ステップＳ５２に進む。
【０１１２】
ステップＳ５２において、キャプチャマネージャ１３１は、撮影モードがダブルスマイルモードであるか否かを判定する。ステップＳ５２において、撮影モードがダブルスマイルモードであると判定された場合、処理は、ステップＳ５３に進む。
【０１１３】
ステップＳ５３において、キャプチャマネージャ１３１は、状態検出部１８４から検出信号が出力されたか否かを判定し、状態検出部１８４から検出信号が出力されたと判定されるまで待機する。すなわち、ステップＳ５３では、撮影者の笑顔（スマイル）を検出したか否かが判定される。
【０１１４】
ステップＳ５３において、撮影者のスマイルを検出したと判定された場合、処理は、ステップＳ５４に進む。
【０１１５】
ステップＳ５４において、キャプチャマネージャ１３１は、状態検出部１３２から検出信号が出力されたか否かを判定する。すなわち、ステップＳ５４では、被写体の笑顔（スマイル）を検出したか否かが判定される。
【０１１６】
ステップＳ５４において、被写体のスマイルを検出したと判定された場合、処理は、ステップＳ５５に進み、キャプチャマネージャ１３１は、キャプチャコントローラ１３３に画像取得のための制御信号を出力することで、撮影者の画像を取得させる。このとき、画像処理部１５１は、信号処理部１８３から供給された画像信号に対して、ＪＰＥＧエンコード処理などを行い、エンコードされた画像データをメモリマネージャ１６１に出力する。メモリマネージャ１６１は、その画像データを記録メディア１６２に書き込む。
【０１１７】
ステップＳ５５の処理の後、処理は、ステップＳ５６に進み、キャプチャマネージャ１３１は、キャプチャコントローラ１３３に画像取得のための制御信号を出力することで、被写体の画像を取得させる。このとき、画像処理部１５１は、信号処理部１２４から供給された画像信号に対して、ＪＰＥＧエンコード処理などを行い、エンコードされた画像データをメモリマネージャ１６１に出力する。メモリマネージャ１６１は、その画像データを記録メディア１６２に書き込む。なお、いまの場合、メモリマネージャ１６１は、例えば、画像データにＥｘｉｆ情報を付加するなどして、ステップＳ５６の処理で取得された被写体の画像データを、ステップＳ５５の処理で取得された撮影者の画像データと対応付けて記録するようになされている。
【０１１８】
また、一方、ステップＳ５１において、レリーズボタン１４１が押下されていると判定された場合、処理は、ステップＳ５６に進む。ステップＳ５６において、キャプチャマネージャ１３１は、キャプチャコントローラ１３３に画像取得のための制御信号を出力することで、被写体の画像を取得させる。このとき、画像処理部１５１は、信号処理部１２４から供給された画像信号に対して、ＪＰＥＧエンコード処理などを行い、エンコードされた画像データをメモリマネージャ１６１に出力する。メモリマネージャ１６１は、その画像データを記録メディア１６２に書き込む。
【０１１９】
ステップＳ５４において、被写体のスマイルを検出しなかったと判定された場合、処理は、終了する。
【０１２０】
一方、ステップＳ５２において、ダブルスマイルモードではないと判定された場合、処理は、図１１のステップＳ６２に進む。図１１のステップＳ６２乃至ステップＳ６７の処理は、それぞれ図５のステップＳ２２乃至ステップＳ２７の処理と同様のものなので詳細な説明は省略する。
【０１２１】
このようにして画像取得処理が実行される。このように、被写体のスマイルと撮影者のスマイルの両方を検出して画像を取得するダブルスマイルモードを設けるようにしたので、ユーザにとってさらに楽しい画像を取得することができる。
【０１２２】
なお、図９の例の場合、ダブルスマイルモード時には、キャプチャマネージャ１３１が、状態検出部１３２と状態検出部１８４から同時に検出信号が出力されたタイミングで、キャプチャコントローラ１３３に、制御信号を出力すると説明した。しかし、例えば、キャプチャマネージャ１３１が、状態検出部１３２、または状態検出部１８４のいずれか１つから検出信号が出力されたタイミングで、キャプチャコントローラ１３３に、制御信号を出力するようにすることも、勿論可能である。
【０１２３】
このようにした場合、ダブルスマイルモード時の撮影では、被写体のスマイルと撮影者のスマイルのいずれか一方を撮影のトリガとして被写体の画像と撮影者の画像とが取得されることになる。
【０１２４】
以上においては、本発明をデジタルカメラに適用する場合の例について説明したが、例えば、本発明を携帯電話機に適用することも可能である。
【０１２５】
図１２乃至図１４は、本発明の一実施の形態に係る携帯電話機の外観の例を示す図である。この携帯電話機２００は、他の携帯電話機との通話機能などを有するとともに、画像を取得するデジタルカメラとしても機能するようになされている。
【０１２６】
図１２に示されるように携帯電話機２００のテンキーなどが配置される面には、撮影者撮影用レンズ２０２、液晶パネル２０３が設けられている。また、携帯電話機２００の側面には、レリーズ（シャッタ）ボタン２０４が設けられている。
【０１２７】
例えば、ユーザが、携帯電話機２００を用いて他の携帯電話機と通話をする場合、図１２に示される面をユーザ側に向けて、携帯電話機２００の上下方向を図中と同様にして保持する。
【０１２８】
携帯電話機２００により画像を取得する場合、図１３に示されるように、携帯電話機２００を９０度回転させた状態で保持するようになされている。例えば、図１２に示される状態が携帯電話機２００の縦向きとした場合、図１３に示される状態では、携帯電話機２００は、横向きとされる。
【０１２９】
図１４に示される部分は、携帯電話機２００における図１３に示される面の裏面に対応し、撮影時に被写体側に向けられる面とされる。同図に示されるように、携帯電話機２００には、被写体撮影用レンズ２０６、ＬＥＤライト２０５が設けられている。
【０１３０】
携帯電話機２００の内部構成は、図４または図９を参照して上述した構成と同様とされる。ただし、例えば、図４のサブカメラブロック１８０が、図１５に示されるように構成される。
【０１３１】
図１５は、携帯電話機２００のサブカメラブロックの構成例を示すブロック図である。同図の例の場合、図４を参照して上述した場合とは異なり、画像回転部１８５が設けられている。
【０１３２】
図１３を参照して上述したように、携帯電話機２００により画像を取得する場合、図１３に示されるように、携帯電話機２００を９０度回転させた状態で保持するようになされている。その一方で、携帯電話機２００においては、サブカメラブロック１８０を介して撮影される画像は、例えば、ビデオフォンの通話時の画像としても利用されるようになされている。従って、本発明を携帯電話機に適用する構成の場合、メインカメラブロック１２０のセンサ１２３における画素の配置と、サブカメラブロック１８０のセンサ１８２における画素の配置において縦横比が逆になる。例えば、センサ１８２は、図１２の液晶パネル２０３を縦配置とした場合、水平４：垂直３の撮像面となるように画素が配置されている。
【０１３３】
このため、画像回転部１８５が、信号処理部１８３から出力される画像信号に対応する画像であって、撮影者の画像を９０度回転させるようになされている。
【０１３４】
その他の構成については、図４または図９を参照して上述した構成と同様である。なお、いまの場合、レンズ・メカシャッタ１２１の一部が、図１４において被写体撮影用レンズ２０６として示されている。また、レンズ１８１の一部が、図１２、図１３において撮影者撮影用レンズ２０２として示されている。
【０１３５】
このように本発明を携帯電話機に適用することも可能である。携帯電話機では、例えば、ビデオフォン用の自分撮りカメラ（すなわち、サブカメラブロック）が取り付けられている場合が多い。また、携帯電話機では、ビデオフォン用の自分撮りカメラで撮影された画像についての、ソフトウェア処理による顔検出、およびスマイル検出機能が実装されている場合が多い。従って、本発明を携帯電話機に適用した場合、例えば、既存の携帯電話機の設計をほとんど変更する必要がなく、その結果、本発明の構成を低コストで実現することができる。
【０１３６】
あるいはまた、本発明を、ビデオカメラなど、カムコーダに適用するようにすることも可能である。
【０１３７】
なお、上述した一連の処理は、ハードウェアにより実行させることもできるし、ソフトウェアにより実行させることもできる。上述した一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、専用のハードウェアに組み込まれているコンピュータにネットワークや記録媒体からインストールされる。また、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば図１６に示されるような汎用のパーソナルコンピュータ７００などに、ネットワークや記録媒体からインストールされる。
【０１３８】
図１６において、CPU（Central Processing Unit）７０１は、ROM（Read Only Memory）７０２に記憶されているプログラム、または記憶部７０８からＲＡＭ（Random Access Memory）７０３にロードされたプログラムに従って各種の処理を実行する。ＲＡＭ７０３にはまた、CPU７０１が各種の処理を実行する上において必要なデータなども適宜記憶される。
【０１３９】
CPU７０１、ROM７０２、およびＲＡＭ７０３は、バス７０４を介して相互に接続されている。このバス７０４にはまた、入出力インタフェース７０５も接続されている。
【０１４０】
入出力インタフェース７０５には、キーボード、マウスなどよりなる入力部７０６、ＬＣＤ(Liquid Crystal display)などよりなるディスプレイ、並びにスピーカなどよりなる出力部７０７が接続されている。また、入出力インタフェース７０５には、ハードディスクなどより構成される記憶部７０８、モデム、LANカードなどのネットワークインタフェースカードなどより構成される通信部７０９が接続されている。通信部７０９は、インターネットを含むネットワークを介しての通信処理を行う。
【０１４１】
入出力インタフェース７０５にはまた、必要に応じてドライブ７１０が接続され、磁気ディスク、光ディスク、光磁気ディスク、或いは半導体メモリなどのリムーバブルメディア７１１が適宜装着されている。そして、それらのリムーバブルメディアから読み出されたコンピュータプログラムが、必要に応じて記憶部７０８にインストールされる。
【０１４２】
上述した一連の処理をソフトウェアにより実行させる場合には、そのソフトウェアを構成するプログラムが、インターネットなどのネットワークや、リムーバブルメディア７１１などからなる記録媒体からインストールされる。
【０１４３】
なお、この記録媒体は、図１６に示される、装置本体とは別に、ユーザにプログラムを配信するために配布される、プログラムが記録されている磁気ディスク（フロッピディスク（登録商標）を含む）、光ディスク（CD-ROM(Compact Disk-Read Only Memory),DVD(Digital Versatile Disk)を含む）、光磁気ディスク（MD（Mini-Disk）（登録商標）を含む）、もしくは半導体メモリなどよりなるリムーバブルメディア７１１により構成されるものだけでなく、装置本体に予め組み込まれた状態でユーザに配信される、プログラムが記録されているROM７０２や、記憶部７０８に含まれるハードディスクなどで構成されるものも含む。
【０１４４】
なお、本明細書において上述した一連の処理は、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【０１４５】
また、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【符号の説明】
【０１４６】
１００  デジタルカメラ，  １０２  被写体撮影用レンズ，  １０３  レリーズボタン，  １０５  撮影者撮影用レンズ，  １２０  メインカメラブロック，  １２１レンズ・メカシャッタ，  １２２  レンズ駆動部，  １２３  センサ，  １２４  信号処理部，  １３０  制御部，  １３１  キャプチャマネージャ，  １３２  状態検出部，  １３３  キャプチャコントローラ，  １４１  レリーズボタン，  １８０  サブカメラブロック，  １８１  レンズ  １８２  センサ，  １８３  信号処理部，  １８４  状態検出部，  １８５  画像回転部，  ２００  携帯電話機，  ２０２  撮影者撮影用レンズ，  ２０４  レリーズボタン，  ２０６  被写体撮影用レンズ
【図１】
0005609045.tif 000002
【図２】
0005609045.tif 000003
【図３】
0005609045.tif 000004
【図４】
0005609045.tif 000005
【図５】
0005609045.tif 000006
【図６】
0005609045.tif 000007
【図７】
0005609045.tif 000008
【図８】
0005609045.tif 000009
【図９】
0005609045.tif 000010
【図１０】
0005609045.tif 000011
【図１１】
0005609045.tif 000012
【図１２】
0005609045.tif 000013
【図１３】
0005609045.tif 000014
【図１４】
0005609045.tif 000015
【図１５】
0005609045.tif 000016
【図１６】
0005609045.tif 000017