(57)【要約】 【課題】  より確実な周囲の光源情報を得ることができる、撮像装置、デジタルカメラ及びプログラム、及び、処理速度を遅くすることなく、ブレ状態の確認画像を表示することができるデジタルカメラ及びプログラムの提供【解決手段】  正面に前方の被写体像を取り込んで光電変換信号を出力する被写体撮像部２０−１を配置し、背面に、後方の被写体像を取り込んで光電変換信号を出力するモニタ側撮像部２０−２と画像表示可能な表示部１３とを配置し、被写体撮像部２０−１で被写体を撮影するとき、モニタ側撮像部２０−２で取り込んだ情報を基にホワイトバランスなどの画像情報の調整を行う。また、モニタ側撮像部２０−２で取り込んだ画像を拡大したスルー画像をウインドウ表示する。【選択図】  図１
2006238085.tif 000002
【特許請求の範囲】
【請求項１】
被写体像を取り込んで光電変換信号を出力する２つの撮像部と、一方の撮像部で撮影を行う際に、他の一方の撮像部で取り込んだ情報を基にホワイトバランスを含む撮影時の画像情報の調整を行う画像情報調整手段と、を備えたことを特徴とするデジタルカメラ。
【請求項２】
正面に前方の被写体像を取り込んで光電変換信号を出力する第１の撮像部を配置し、背面に、後方の被写体像を取り込んで光電変換信号を出力する第２の撮像部と画像表示可能な表示部とを配置したデジタルカメラであって、
前記第１の撮像部で被写体を撮影するとき、前記第２の撮像部で取り込んだ情報を基にホワイトバランスを含む撮影時の画像情報の調整を行う画像情報調整手段を備えたことを特徴とするデジタルカメラ。
【請求項３】
前記２つの撮像部で略同時に撮像を行う同時撮影モードを備えていることを特徴とする請求項１または２に記載のデジタルカメラ。
【請求項４】
前記第１の撮像部と前記第２の撮像部で略同時に撮像を行う同時撮影モードを備え、
前記第１の撮像部及び前記第２の撮像部からの被写体像の取り込み動作及び光電変換信号出力動作を略同時に行うように制御する同時撮影制御手段と、
前記第１の撮像部及び第２の撮像部から取り込んだ画像データをそれぞれ信号変換して処理する信号変換処理手段と、
前記信号変換処理手段によって変換された第１の撮像部からの画像データと第２の撮像部からの画像データを所定時間毎にそれぞれ１フレーム分ずつ画像記憶メモリに記憶する画像記憶制御手段と、
前記画像記憶メモリに記憶された第１の撮像部と第２の撮像部から取り込んだ画像データとを合成して前記表示部に表示する合成画像表示手段と、
撮像指示を行う撮像指示手段と、
前記撮像指示手段による撮像指示があると、その時点で前記表示部に表示されている画像を保存メモリに記録する画像記録モードに遷移するモード遷移手段と、
を具備したことを特徴とする請求項１または２に記載のデジタルカメラ。
【請求項５】
正面に前方の被写体像を取り込んで光電変換信号を出力する第１の撮像部を配置し、背面に、後方の被写体像を取り込んで光電変換信号を出力する第２の撮像部と画像表示可能な表示部とを配置したデジタルカメラにおいて、
前方の被写体を撮影するとき、背面の撮像素子で背面の被写体を拡大して撮影し、背面に配置されたモニタに前方の被写体をスルー表示するとともに、該モニタのウインドウに拡大された背面被写体画像のスルー画像を表示することにより、手振れ状況を強調して表示することができるようにしたことを特徴とするデジタルカメラ。
【請求項６】
正面に前方の被写体像を取り込んで光電変換信号を出力する第１および第２の撮像部を配置し、背面に、画像表示可能な表示部を配置したデジタルカメラにおいて、
第１の撮像部で前方の被写体を撮影するときは、第２の撮像部で前方の被写体を拡大して撮影し、背面に配置されたモニタに前方の被写体をスルー表示するとともに、ウインドウに拡大された被写体画像のスルー画像を表示することにより、手振れ状況を強調して表示することができるようにしたことを特徴とするデジタルカメラ。
【請求項７】
前記第１の撮像部と前記第２の撮像部で略同時に撮像を行う同時撮影モードを備えていることを特徴とする請求項５または６に記載のデジタルカメラ。
【請求項８】
被写体像を取り込んで光電変換信号を出力する２つの撮像部を備えたデジタルカメラのコンピュータに、一方の撮像部で撮影を行う際に、他の一方の撮像部で取り込んだ情報を基にホワイトバランスを含む撮影時の画像情報の調整を行う機能を実行させるプログラム。
【請求項９】
正面に前方の被写体像を取り込んで光電変換信号を出力する第１の撮像部を配置し、背面に、後方の被写体像を取り込んで光電変換信号を出力する第２の撮像部と画像表示可能な表示部とを配置したデジタルカメラのコンピュータに、
前記第１の撮像部で被写体を撮影するとき、前記第２の撮像部で取り込んだ情報を基にホワイトバランスを含む撮影時の画像情報の調整を行う機能を実行させるプログラム。
【請求項１０】
正面に前方の被写体像を取り込んで光電変換信号を出力する第１の撮像部を配置し、背面に、後方の被写体像を取り込んで光電変換信号を出力する第２の撮像部と画像表示可能な表示部とを配置したデジタルカメラのコンピュータに、
前方の被写体を撮影するとき、背面の撮像素子で背面の被写体を拡大して撮影する機能と、背面に配置されたモニタに前方の被写体をスルー表示する機能と、ウインドウに拡大された背面被写体画像のスルー画像を表示する機能と、を実行させるプログラム。
【請求項１１】
正面に前方の被写体像を取り込んで光電変換信号を出力する第１および第２の撮像部を配置し、背面に、画像表示可能な表示部を配置したデジタルカメラのコンピュータに、
第１の撮像部で前方の被写体を撮影するときは、第２の撮像部で前方の被写体を拡大して撮影する機能と、背面に配置されたモニタに前方の被写体をスルー表示する機能と、ウインドウに拡大された被写体画像のスルー画像を表示する機能と、を実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は撮像素子を複数備えたデジタルカメラ及びプログラムに関する。
【背景技術】
【０００２】
撮像素子を２つ備えているデジタルカメラがある（例えば特許文献１参照）。この特許文献１の技術は、デジタルカメラの前面と後面にそれぞれ撮像素子を備え、前面の撮像素子で撮った画像と後面の撮像素子で撮った画像を合成するというものである。  
他方、デジタルカメラでは液晶などのモニタをファインダとして使用するため手振れを確認しにくい。そこで、モニタの一部に被写体の画像を拡大表示することによって手振れ状態を確認しやすくしたデジタルカメラがある（例えば特許文献２、３参照）。  
更に、複数の撮像素子を備え、１つの撮像素子で被写体像を撮像するとともに他の撮像素子で入射光の状態を検出するものがある（例えば特許文献４参照）。
【０００３】
【特許文献１】特開２００４−３６３９９４
【特許文献２】特開平１１−３３１６４９
【特許文献３】特開２００１−２８６９９
【特許文献４】特開平８−７９５９７
【発明の開示】
【発明が解決しようとする課題】
【０００４】
特許文献１記載の技術では、カメラの前面に第１の撮像素子、後面に第２の撮像素子を設け、両方の画像を合成することができるが、合成写真を撮る機会はそう頻繁にあるものではなく、普段は他方の撮像素子が活用されていないという課題があった。
【０００５】
また、特許文献２記載の技術では、ＬＣＤモニタをファインダとして用いる場合、ＬＣＤモニタの全部あるいは一部に拡大処理を施して表示することによって、撮影者が確実にフォーカス状態を確認し得る撮像装置を提供するものであるが、撮像素子が１つしかないので、撮影する画像と拡大表示用の画像を電子処理により並列的に行わなくてはならず、処理速度が低下するという課題があった。
【０００６】
特許文献３記載の技術では、特定領域に対する表示装置の表示領域を拡大することによって、撮影前には、被写体のピントの確認を行い、撮影後であったならば更に撮影時にブレてしまったか否かも含めて容易に確認することができる撮像装置を提供するものであるが、特許文献２と同様、撮像素子が１つしかないので、撮影する画像と拡大表示用の画像を電子処理により並列的に行わなくてはならず、処理速度が低下するという課題があった。
【０００７】
特許文献４記載の技術では、複数の撮像素子を設け、少なくとも１つの撮像素子から出力される信号を基にして被写体像を生成するとともに、上記被写体像を生成するための撮像素子と略同一の撮影領域を持つ他の撮像素子の信号を基に入射光の状態を検出するようにすることにより、被写体像の撮像と入射光の状態の検出とを同時に行うことができるようにしているが、複数の撮像素子が同一の撮影領域の光を入射しているので、被写体の光状態は分かるが撮影者の背後に光源があるなどの周囲の光源情報はわからないという課題があった。
【０００８】
本発明は上記従来技術の課題を解決するためになされたものであり、複数の撮像素子を備え、より確実な周囲の光源情報を得ることができる、撮像装置、デジタルカメラ及びプログラム、及び、処理速度を遅くすることなく、ブレ状態の確認画像を表示することができるデジタルカメラ及びプログラムの提供を目的とする。
【課題を解決するための手段】
【０００９】
上記課題を解決するために、請求項１に記載の発明では、被写体像を取り込んで光電変換信号を出力する２つの撮像部と、一方の撮像部で撮影を行う際に、他の一方の撮像部で取り込んだ情報を基にホワイトバランスを含む撮影時の画像情報の調整を行う画像情報調整手段と、を備えたことを特徴とするデジタルカメラを提供する。  
これにより、デジタルカメラは、より確実に周辺の明るさや光源情報等を得て撮影時の画像情報を調整することができる。
【００１０】
また、請求項２に記載の発明では、正面に前方の被写体像を取り込んで光電変換信号を出力する第１の撮像部を配置し、背面に、後方の被写体像を取り込んで光電変換信号を出力する第２の撮像部と画像表示可能な表示部とを配置したデジタルカメラであって、第１の撮像部で被写体を撮影するとき、第２の撮像部で取り込んだ情報を基にホワイトバランスを含む撮影時の画像情報の調整を行う手段を備えたことを特徴とするデジタルカメラを提供する。  
これにより、正面で前方の被写体の撮影を行う際に背面の撮像素子で取り込んだ光源情報などを撮影時の画像情報の調整に用いるので、より確実に周囲の明るさや光源情報を得て撮影時の画像情報を調整することができる。
【００１１】
また、請求項３に記載の発明では、２つの撮像部で略同時に撮像を行う同時撮影モードを備えていることを特徴とする請求項１または２に記載のデジタルカメラを提供する。  
これにより、同時撮影の際にも、一方の撮像部での撮影の際には他の一方の撮像部で取り込んだ情報を基にホワイトバランスを含む撮影時の画像情報の調整を２つの撮像部で互いに行うことができるので、デジタルカメラは、より確実にカメラ周辺の明るさや光源情報等を得て画像情報が調整された画像を得ることができる。
【００１２】
また、請求項４に記載の発明では、第１の撮像部と第２の撮像部で略同時に撮像を行う同時撮影モードを備え、第１の撮像部及び第２の撮像部からの被写体像の取り込み動作及び光電変換信号出力動作を略同時に行うように制御する同時撮影制御手段と、第１の撮像部及び第２の撮像部から取り込んだ画像データをそれぞれ信号変換して処理する信号変換処理手段と、信号変換処理手段によって変換された第１の撮像部からの画像データと第２の撮像部からの画像データを所定時間毎にそれぞれ１フレーム分ずつ画像記憶メモリに記憶する画像記憶制御手段と、画像記憶メモリに記憶された第１の撮像部と第２の撮像部から取り込んだ画像データとを合成して表示部に表示する合成画像表示手段と、撮像指示を行う撮像指示手段と、撮像指示手段による撮像指示があると、その時点で表示部に表示されている画像を保存メモリに記録する画像記録モードに遷移するモード遷移手段と、を具備したことを特徴とする請求項１または２記載のデジタルカメラを提供する。  
これにより、同時撮影の際に、第１の撮像部と第２の撮像部で光源情報等を取り込むタイミングを同時撮影制御手段によって制御し、取り込んだ情報を基にホワイトバランスを含む撮影時の画像情報の調整を２つの撮像部で互いに行うことができるので、デジタルカメラは、より確実にカメラ周辺の明るさや光源等の情報を得て同時撮影を行ない、合成画像をスルー表示することができる。
【００１３】
また、請求項５に記載の発明では、正面に前方の被写体像を取り込んで光電変換信号を出力する第１の撮像部を配置し、背面に、後方の被写体像を取り込んで光電変換信号を出力する第２の撮像部と画像表示可能な表示部とを配置したデジタルカメラにおいて、一方の被写体を撮影するとき、背面の撮像素子で背面の被写体を拡大して撮影し、背面に配置されたモニタに前方の被写体をスルー表示するとともに、ウインドウに拡大された背面被写体画像のスルー画像を表示することにより、手振れ状況を強調して表示することができるようにしたことを特徴とするデジタルカメラを提供する。  
これにより、正面の撮像部で被写体の撮影を行う際に背面の撮像部で背面被写体の拡大画像を撮影してウインドウにスルー表示するので、１つの撮像部で撮影を行って並列処理により拡大画像を画面の一部に表示する場合に比べ速い処理速度で表示できる。また、画像を拡大表示することにより、手ブレがある場合は手ブレ状態が増幅されることから、ブレを検出するセンサなしでブレ状態の確認を行うことができる。
【００１４】
また、請求項６に記載の発明では、正面に前方の被写体像を取り込んで光電変換信号を出力する第１および第２の撮像部を配置し、背面に、画像表示可能な表示部を配置したデジタルカメラにおいて、第１の撮像部で前方の被写体を撮影するときは、第２の撮像部で前方の被写体を拡大して撮影し、背面に配置されたモニタに前方の被写体をスルー表示するとともに、ウインドウに拡大された被写体画像のスルー画像を表示することにより、手振れ状況を強調して表示することができるようにしたことを特徴とするデジタルカメラを提供する。  
これにより、第１の撮像部で被写体の撮影を行う際には第２の撮像部で被写体の拡大画像を撮影してウインドウにスルー表示するので、１つの撮像部で撮影を行って並列処理により拡大画像を画面の一部に表示する場合に比べ速い処理速度で表示できる。また、被写体を拡大表示することにより、手ブレがある場合は手ブレ状態が増幅されることから、ブレを検出するセンサなしでブレ状態の確認を行うことができる。
【００１５】
また、請求項７に記載の発明では、第１の撮像部と第２の撮像部で略同時に撮像を行う同時撮影モードを備えていることを特徴とする請求項４または５記載のデジタルカメラを提供する。  
これにより、同時撮影の際に、第２の撮像部で被写体の拡大画像を撮影してウインドウにスルー表示するようにして画像のブレを増幅させるのでブレ状態の確認を容易に行うことができる。
【００１６】
また、請求項８に記載の発明では、被写体像を取り込んで光電変換信号を出力する２つの撮像部を備えたデジタルカメラのコンピュータに、一方の撮像部で撮影を行う際に、他の一方の撮像部で取り込んだ情報を基にホワイトバランスを含む撮影時の画像情報の調整を行う機能を実行させるプログラムを提供する。  
これにより、デジタルカメラは、一方の撮像部で撮影を行う際に、他の一方の撮像部でカメラ周辺の明るさや光源等の情報を得て撮影時の画像情報を調整することができる。
【００１７】
また、請求項９に記載の発明では、正面に前方の被写体像を取り込んで光電変換信号を出力する第１の撮像部を配置し、背面に、後方の被写体像を取り込んで光電変換信号を出力する第２の撮像部と画像表示可能な表示部とを配置したデジタルカメラのコンピュータに、第１の撮像部で被写体を撮影するとき、第２の撮像部で取り込んだ情報を基にホワイトバランスを含む撮影時の画像情報の調整を行う機能を実行させるプログラムを提供する。  
これにより、デジタルカメラは、一方の撮像部で撮影を行う際に、他の一方の撮像部でカメラ周辺のあかるさや光源情報等を得て撮影時の画像情報を調整することができる。
【００１８】
また、請求項１０に記載の発明では、正面に前方の被写体像を取り込んで光電変換信号を出力する第１の撮像部を配置し、背面に、後方の被写体像を取り込んで光電変換信号を出力する第２の撮像部と画像表示可能な表示部とを配置したデジタルカメラのコンピュータに、の被写体を撮影するとき、背面の撮像素子で背面の被写体を拡大して撮影する機能と、背面に配置されたモニタに前方の被写体をスルー表示する機能と、略同時にウインドウに拡大された背面被写体画像のスルー画像を表示する機能と、を実行させるプログラムを提供する。  
これにより、デジタルカメラは、正面の撮像部で被写体の撮影を行う際に背面の撮像部で背面被写体の拡大画像を撮影してウインドウにスルー表示でき、ユーザは手ブレの有無をウインドウに拡大表示される背面被写体のスルー画像から確認できる。
【００１９】
また、請求項１１に記載の発明では、正面に前方の被写体像を取り込んで光電変換信号を出力する第１および第２の撮像部を配置し、背面に、画像表示可能な表示部を配置したデジタルカメラのコンピュータに、第１の撮像部で前方の被写体を撮影するときは、第２の撮像部で前方の被写体を拡大して撮影する機能と、背面に配置されたモニタに前方の被写体をスルー表示する機能と、略同時にウインドウに拡大された被写体画像のスルー画像を表示する機能と、を実行させるプログラムを提供する。  
これにより、デジタルカメラは、正面の撮像部で被写体の撮影を行う際に背面の撮像部で背面被写体の拡大画像を撮影してウインドウにスルー表示でき、ユーザは手ブレの有無をウインドウに拡大表示される背面被写体のスルー画像から確認できる。
【発明の効果】
【００２０】
請求項１ないし４、８または９記載の発明によれば、デジタルカメラに備えられた２つの撮像素子のうちの一方で被写体の撮影を行う際に他の一方の撮像素子で取り込んだ情報を撮影時の画像情報の調整に用いるので、より確実に周辺情報を得て撮影時の画像情報を周辺情報にあうように調整することができる。
また、請求項５ないし７、１０ないし１２記載の発明によれば、デジタルカメラに備えられた２つの撮像素子のうちの一方で被写体の撮影を行う際に他の一方の撮像素子で被写体の拡大画像を撮影してウインドウにスルー表示することができるので、１つの撮像素子で撮影を行って並列処理により拡大画像を画面の一部に表示する場合に比べ速い処理速度で表示できる。また、画像を拡大表示することにより、手ブレがある場合は手ブレ状態が増幅されることから、ブレを検出するセンサなしでブレ状態の確認を行うことができる。
【発明を実施するための最良の形態】
【００２１】
（実施の形態１）  
以下、本発明をデジタルカメラに適用した場合の第１の実施の形態について図面を参照して説明する。
【００２２】
図１は、本発明を適用したデジタルカメラの外観構成の一実施例を示す図であり、図１（ａ）は前面からの斜視図、図１（ｂ）は背面からの斜視図である。
デジタルカメラ１は略矩形の薄板状ボディの前面に正面側撮像部（以下、被写体撮像部）２０−１、セルフタイマランプ３、光学ファインダ窓４、及びストロボ発光部５を配設し、上面には電源キー６およびシャッターキー７を配してなる。
【００２３】
被写体撮像部２０−１の撮影レンズ２−１は、薄型のボディに搭載するために例えば、単焦点レンズで且つ固定焦点であるものとし、ズーム動作や合焦動作は行わないものとする。
【００２４】
電源キー６は、１回押圧する毎に電源をオン／オフするキーであり、シャッターキー７は撮影モード時にレリーズを指示する一方で、メニュー選択等では設定／実行を指示するキーとしても機能する。  
【００２５】
また、デジタルカメラ１の背面には、撮影レンズ２−２を含むモニタ側撮像部２０−２、モードスイッチ（ＳＷ）８、メニューキー９、十字キー１０、光学ファインダ１１、ストロボチャージランプ１２、及び表示部１３が配設されている。
【００２６】
背面側撮像部（以下、モニタ側撮像部）２０−２は自分撮り用であり、５０〜１００ｃｍにピントが合い、なお撮影される画角も５０〜１００ｃｍ先にいるユーザ（つまり、撮影者）を撮像するのに適した画角に構成されている。また、モニタ側撮像部２０−２は撮像方向が変えられるように構成されており、所定の範囲で撮像方向を変えられるので、ユーザは必ずしもカメラの真後ろに位置しなくてもよい。
【００２７】
ユーザは、被写体撮像部２０−１とモニタ側撮像部２０−２のいずれか一方を撮像に一方をセンサとして用いるセンサ撮影モードを選択することができる。また、被写体撮像部２０−１とモニタ側撮像部２０−２で被写体と撮影者を略同時に撮影し、同時に撮影した画像を合成表示する同時撮影モードや、同時撮影した撮影者側の画像を拡大して被写体画像がスルー表示されているモニタ画面にウインドウ表示し、被写体画像のブレからカメラの手ブレ状態を認識可能とする手ブレ判別モードを選択することもできる。また、被写体撮像部２０−１とモニタ側撮像部２０−２のいずれか一方でのみを選択し、選択された撮像部でのみ撮影することもできる。
【００２８】
モードスイッチ８は、例えばスライドスイッチにより構成され、撮影モード「Ｒ」と再生モード「Ｐ」とを切換える。
【００２９】
表示部１３は、バックライト付きのカラー液晶パネルで構成され、撮影モード時には電子ファインダとしてモニタ表示を行う一方で、再生モード時には選択された再生画像を表示する。また、同時撮影モードが選択された場合には被写体撮像部２０−１とモニタ側撮像部２０−２による撮影画像が合成されて表示されたり、一方の画像がウインドウ表示される。  
なお、図示はしないがこのボディ下面には蓋付きのメモリカードスロットが設けられ、デジタルカメラ１の記録媒体であるメモリカードが着脱自在に装着されるものとする。
【００３０】
図２は、デジタルカメラ１の電子回路構成の一実施例を示す図であり、デジタルカメラ１は、駆動モータ２１−１、撮影レンズ２−１を含む光学系レンズ２２−１及び撮像素子としてのＣＣＤ２３−１、タイミング発生器（ＴＧ）２４−１、及び垂直ドライバ２５−１、サンプルホールド回路（Ｓ／Ｈ）２６−１、Ａ／Ｄ変換器２７−１、駆動モータ２１−２、撮影レンズ２−２を含む光学系レンズ２２−２及び撮像素子としてのＣＣＤ２３−２、タイミング発生器（ＴＧ）２４−２、及び垂直ドライバ２５−２、サンプルホールド回路（Ｓ／Ｈ）２６−１Ａ／Ｄ変換器２７−２、カラープロセス回路２８、ＤＭＡ（Ｄｉｒｅｃｔ Ｍｅｍｏｒｙ Ａｃｃｅｓｓ）コントローラ２９、ＤＲＡＭインターフェイス（Ｉ／Ｆ）３０、ＤＲＡＭ３１、制御部３２、ＶＲＡＭコントローラ３３、ＶＲＡＭ３４−１、３４−２、デジタルビデオエンコーダ３５、キー入力部３６、ＪＰＥＧ回路３７、保存メモリ３８、信号合成回路３９、及び表示部１３を備えている。
【００３１】
上記ＤＲＡＭ３１にはＣＣＤ２３−１からの１フレーム分の被写体画像データを記憶する領域と、ＣＣＤ２３−２からの１フレーム分のモニタ側画像データを記憶する領域が確保されているものとする。なお、ＤＲＡＭ３１の代わりに、ＣＣＤ２３−１からの被写体画像データ等を記憶するＤＲＡＭと、ＣＣＤ２３−２からのモニタ側画像データ等を記憶するＤＲＡＭを設けるようにしてもよい。また、信号合成回路３９は必要に応じて設ければよい。
【００３２】
駆動モータ２１−１、撮影レンズ２を含む光学系レンズ２２−１及びＣＣＤ２３−１、タイミング発生器２４−１、及び垂直ドライバ２５−１は図１（ａ）に示した被写体撮像部２０（第１の撮像部）の回路を構成し、駆動モータ２１−２、撮影レンズ２−２を含む光学系レンズ２２−２及びＣＣＤ２３−２、タイミング発生器２４−、及び垂直ドライバ２５−２は図１（ｂ）に示したモニタ側撮像部２０−２（第２の撮像部）の回路を構成している。
【００３３】
上記２つの撮像部はキー入力部３６からのユーザの指示に基づく制御部３２の制御により、一方のみの撮影か同時撮影モードによる同時撮影が可能である。なお、同時撮影モードの場合は時分割制御による撮影が行われる。また、ＡＥ（Ａｕｔｏｍａｔｉｃ Ｅｘｐｏｓｕｒｅ；自動露出）は撮像部２０−１および撮像部２０−２に対して別々に行なう。
【００３４】
撮影モードのモニタリング状態で、被写体撮像部２０−１による撮影の際は、制御部３２からの駆動制御信号により駆動するモータ２１−１の駆動により絞り位置が移動される。上記撮影レンズ２−１を含む光学系レンズ２２−１の撮影光軸後方に配置されたＣＣＤ２３−１が、タイミング発生器２４−１からのタイミング信号に基づき垂直ドライバ２５−１によって走査駆動され、一定時毎に結像した光像に対する光電変換出力を１フレーム分出力する。
【００３５】
同様に、モニタ側撮像部２０−２による撮影の際は、制御部３２からの駆動制御信号により駆動するモータ２１−２の駆動により絞り位置が移動される。上記撮影レンズ２−２を含む光学系レンズ２２−２の撮影光軸後方に配置されたＣＣＤ２３−２が、タイミング発生器２４からのタイミング信号に基づき垂直ドライバ２５によって走査駆動され、一定時毎に結像した光像に対する光電変換出力を１フレーム分出力する。
【００３６】
また、同時撮影モードの場合は、制御部３２は、モータ２１−１、２１−２及びタイミング発生器２４−１，２４−２のタイミング信号生成動作を時分割制御すると共に、垂直ドライバ２５−１、２５−２の信号出力先（ＣＣＤ２３−１、ＣＣＤ２３−２）を走査タイミングに同期させて切換えるようにして、ＣＣＤ２３−１及びＣＣＤ２３−２を走査駆動させ、一定時毎に結像した光像に対する光電変換出力を１フレーム分出力させる。
【００３７】
ＣＣＤ２３−１又はＣＣＤ２３−２からの光電変換出力は、アナログ値の状態でＲＧＢの原色毎に適宜ゲイン調整された後に、サンプルホールド回路２６−１．２６−２でサンプルホールドされ、Ａ／Ｄ変換器２７−１、２７−２でデジタルデータに変換され、カラープロセス回路２８（図３参照）で画素補間処理及びγ補正処理を含むカラープロセス処理が行われて、デジタル値の輝度信号Ｙ及び色差信号Ｃｂ、Ｃｒ（以下、画像データ）が生成され、ＤＭＡコントローラ２９に出力される。なお、同時撮影モードの場合は、ＣＣＤ２３−１からの光電変換出力とＣＣＤ２３−２からの光電変換出力に基づくカラープロセス処理結果が別々にＤＭＡコントローラ２９に出力される。
【００３８】
ＤＭＡコントローラ２９は、カラープロセス回路２８の出力する画像データをそれぞれカラープロセス回路２８からの複合同期信号、メモリ書込みイネーブル信号、及びクロック信号を用いて一度ＤＭＡコントローラ２９内部のバッファに書き込み、ＤＲＡＭインターフェイス３０を介してバッファメモリとして使用されるＤＲＡＭ３１にＤＭＡ転送する。
【００３９】
なお、ＤＭＡコントローラ２９内部のバッファは、ＣＣＤ２３−１からの光電変換出力とＣＣＤ２３−２からの光電変換出力に基づくカラープロセス処理の結果をそれぞれ書込むよう２つのバッファ（又は、２つの書込み領域が割り当てられた１つのバッファ）からなっており、同時撮影の場合は、それぞれのバッファ（又は、それぞれの書込み領域）から順次読み出してＤＲＡＭ３１にＤＭＡ転送し、ＤＲＡＭ３１に割り当てられている２つの書込み領域にそれぞれ書込む。
【００４０】
制御部３２は、ＣＰＵと、ＣＰＵで実行される動作プログラムや撮像動作プログラムを固定的に記憶したＲＯＭ、及びワークメモリとして使用されるＲＡＭ等により構成され、このデジタルカメラ１全体の制御動作を司るもので、上記輝度及び色差信号のＤＲＡＭ３１へのＤＭＡ転送終了後に、この画像データをＤＲＡＭインターフェイス３０を介してＤＲＡＭ３１から読出し、ＶＲＡＭコントローラ３３を介して被写体画像用のＶＲＡＭ３４−１又はモニタ側画像用のＶＲＡＭ３４−２に書込む。
【００４１】
また、同時撮影モードの場合はＤＲＡＭ３１に割り当てられている２つの書き込み領域に書込まれている被写体画像及びモニタ側画像の画像データをＶＲＡＭコントローラ３３を介して被写体画像用のＶＲＡＭ３４−１およびＶＲＡＭ３４−２にそれぞれ所定のタイミングで書込む。
【００４２】
デジタルビデオエンコーダ３５は、上記画像データをＶＲＡＭコントローラ３３を介してＶＲＡＭ３４から定期的に読み出し、これらのデータを元にビデオ信号を発生して表示部１３に出力する。同時撮影モードの場合は、ＶＲＡＭ３４−１に書込まれている被写体画像のビデオ信号にモニタ側画像のビデオ信号を上書き合成して表示部１３にスルー表示する（図５、図６参照）。また、手ブレ判別モードのときはモニタ側画像を拡大してウインドウ内にスルー表示する（図７、図８参照）。
【００４３】
表示部１３は、上述したように撮影モード時にはモニタ表示部（電子ファインダ）として機能し、デジタルビデオエンコーダ３５からのビデオ信号に基づいた表示を行うことで、その時点でＶＲＡＭコントローラから撮り込んでいる画像情報に基づく画像をリアルタイムに表示（スルー画像表示）する。また、手ブレ判別モードのときは拡大された撮影者像をスルー画像上にウインドウ表示する。
【００４４】
表示部１３にその時点での画像がスルー画像表示されている状態で、静止画像撮影を行いたいタイミングでユーザがキー入力部３６を構成するシャッターキー７（図１参照）を操作するとトリガ信号を発生する。
【００４５】
制御部３２はこのトリガ信号に応じてＣＣＤ２３−１又は／及びＣＣＤ２３−２から取り込んでいる１フレーム分の画像データのＤＭＡ転送の終了後、直ちにＣＣＤ２３−１又は／及びＣＣＤ２３−２からのＤＲＡＭ３１への経路を停止し、記録保存の状態（画像記録モード）に遷移する。
【００４６】
記録保存の状態では、制御部３２がＤＲＡＭ３１に書込まれている１フレーム分の画像データをＤＲＡＭインターフェイス３０を介してＹ、Ｃｂ，Ｃｒの各コンポーネント毎に縦８画素×横８画素の基本ブロック単位で読み出してＪＰＥＧ（Ｊｏｉｎｔ Ｐｈｏｔｏｇｒａｐｈ ｃｏｒｄｉｎｇ Ｅｘｐｅｒｔｓ Ｇｒｏｕｐ）回路３７に書込み、このＪＰＥＧ回路３７でＡＤＣＴ（Ａｄａｐｔｉｖｅ Ｄｉｓｃｒｅｔｅ Ｃｏｓｉｎｅ Ｔｒａｎｓｆｏｒｍ：適応離散コサイン変換）、エントロピ符号化方式であるハフマン符号化等の処理によりデータ圧縮する。そして、取得した符号データを１画像のデータファイルとしてＪＰＥＧ回路３７から読出し、デジタルカメラ１の記録媒体として着脱自在に装着されるメモリカード内に封入された、フラッシュメモリ等の不揮発性メモリからなる保存メモリ３８に書込む。なお、保存メモリ３８は上記メモリカードとは別にデジタルカメラ１に内蔵されていてもよい。
【００４７】
そして、１フレーム分の画像データの圧縮処理及び保存メモリ３８への全圧縮データの書込み終了に伴って、制御部３２はＣＣＤ２３−１又はＣＣＤ２３−２からＤＲＡＭ３１への経路を再び起動する。
【００４８】
また、同時撮影モードの場合は、記録保存の状態では、制御部３２は信号合成回路３９によりＤＲＡＭ３１に割り当てられている被写体画像データ領域に書込まれている１フレーム分の被写体画像の画像データとモニタ側画像データ領域に書込まれているモニタ側画像の画像データを合成し、その合成画像データをＤＲＡＭインターフェイス３０を介してＪＰＥＧ回路３７でデータ圧縮する。そして、取得した符号データを１画像のデータファイルとしてＪＰＥＧ回路３７から読出し、保存メモリ３８に書込む。
【００４９】
なお、上記説明では、同時撮影の場合は、記録保存の状態で被写体画像とモニタ側画像の合成画像データをデータ圧縮して保存メモリ３８に保存記憶するようにしたが、ＤＲＡＭ３１に書込まれている１フレーム分の被写体画像データとＤＲＡＭ３１に書込まれているモニタ側画像データをそれぞれ圧縮し、例えば、被写体画像データファイル名を”１−Ａ”、モニタ側画像データファイル名を”１−Ｂ”といったように互いに関連付けて保存メモリ３８に書込むようにしてもよい。また、合成画像として保存メモリ３８に書込むか別々の画像として関連付けて保存メモリ３８に書込むかをユーザが選択設定できるように構成してもよい。
【００５０】
キー入力部３６は、上述した電源キー６、シャッターキー７、モードスイッチ８、メニューキー９、及び十字キー１０から構成され、それらのキー操作に伴う信号は直接制御部に送出される。
【００５１】
再生モード時には、制御部３２が保存メモリ３８に記録されている画像データを選択的に読出し、ＪＰＥＧ回路３７で撮影モード時にデータ圧縮したと同じ手順で画像データを伸張し、伸張した画像データをＶＲＡＭコントローラ３３を介してＶＲＡＭ３４に展開して記憶させた上で、ＶＲＡＭ３４から定期的に読出し、これらの画像データを基にビデオ信号を発生して表示部１３で再生出力させる。
【００５２】
なお、同時撮影モードの場合で、合成画像を生成し、保存メモリ３８に書込んだ場合は、再生モード時には、上述したと同様の手順で合成画像データを再生し、ＶＲＡＭコントローラ３３を介してＶＲＡＭ３４に展開して記憶させた上で、ＶＲＡＭ３４から定期的に読出し、これらの画像データを基にビデオ信号を発生して表示部１３で再生出力させる。
【００５３】
また、同時撮影モードの場合で、被写体画像データとモニタ側画像データをそれぞれ圧縮し、互いに関連付けて保存メモリ３８に書込むように構成した場合には、再生モード時には、保存メモリ３８から被写体画像データとそれに関連付けられたモニタ側画像データを選択的に読出し上述したと同様の手順で画像データを再生し、これらの画像データを基に発生させたビデオ信号を合成してＶＲＡＭコントローラ３３を介してＶＲＡＭ３４展開して記憶させた上で、ＶＲＡＭ３４から定期的に読出して表示部１３に出力する。
【００５４】
（ホワイトバランス処理動作）  
図３はカラープロセス回路におけるＡＷＢ（ホワイトバランス）処理の説明図であり、カラープロセス回路２８は、この例では、デジタルクランプ２８０−１、ＡＥ用積分器２８０−２、ＡＦ用フィルタ２８０−３、ＷＢゲイン乗算回路２８２、ガンマ補正回路２８３、画像生成回路２８４、ＹＩＱ変換回路２８６、白検出回路２８７及びＷＢ係数決定回路２８８を含む画像処理系を有している。なお、ＹＩＱ変換回路２８６、白検出回路２８８及びＷＢ係数決定回路２８９はＷＢ係数演算ブロック２８５を構成している。また、符号２８１−１、２８１−２、２８１−３、２８５−１、２８５−２は、センサ撮影モード時にセンサーとして用いられる場合は開状態、同時撮影モード時や手ブレ判別モード時には走査タイミングに同期させて開閉制御されるスイッチであり、電子スイッチ若しくはプログラム制御によるスイッチを意味する。
【００５５】
図３で、センサ撮影モードのとき、スイッチ２８１−１、２８１−２、２８１−３が閉状態であれば（つまり、被写体撮像部２０−１による撮影の際は）、撮影レンズ２−１によって取り込まれた光学像はＣＣＤ２３−１で電気信号（画像信号）に変換され、出力される。ＣＣＤ２３−１から出力された画像信号はサンプリング＆Ａ／Ｄ変換され、デジタルクランプ２８０−１でベイヤ（Bayer）形式のデータとされ、所定のタイミングでＷＢゲイン乗算回路２４及びＹＩＱ変換回路２８６に与えられる。次に、ＷＢゲイン乗算回路２８２でＷＢ係数（ホワイトバランス係数）を乗算してからガンマ補正回路２８３で画像補間処理を行ない、画像生成回路２８４で映像信号を生成してＤＭＡコントローラ２９に出力する。一方、ＹＩＱ変換回路２８６に与えられたデータからＹＩＱ変換回路２７、白検出回路２８及びＷＢ係数決定回路２９からなるＷＢ係数演算ブロックでＷＢ係数を決定し、ＷＢゲイン乗算回路２４の設定値として、ＷＢゲイン乗算回路２４にフィードバックされる。また、このときは、スイッチ２８５−１、２８５−２が開状態（つまり、モニタ側撮像部２０−２がセンサとして用いられるとき）であるから、撮影レンズ２−２によって取り込まれた光学像はＣＣＤ２３−２で電気信号（画像信号）に変換され、出力される。ＣＣＤ２３−２から出力された画像信号はサンプリング＆Ａ／Ｄ変換され、デジタルクランプ２８０−１でベイヤ（Bayer）形式のデータとされ、所定のタイミングでＹＩＱ変換回路２８６に与えられ、ＣＣＤ２３−１からのデータに加算される。  
また、ＡＥ用積分器２８０−２では被写体撮像部２０−１からの入力信号を積分してその積分値を制御部３２に出力し、ＡＦ用フィルタ２８０−２では被写体撮像部２０−１からの入力信号からコントラストオートフォーカス用高周波を検出するため、入力信号に対しハイパスフィルタ（ＨＰＦ）をかけた後にその出力の積分値を制御部３２に出力する。
【００５６】
また、スイッチ２８１−１、２８１−２、２８１−３が開状態のとき（つまり、被写体撮像部２０−１がセンサとして用いられる際）は、スイッチ２８５−１、２８５−２が閉状態（モニタ側撮像部２０−２による撮影が行なわれる）となり、撮影レンズ２−２によって取り込まれた光学像はＣＣＤ２３−２で電気信号（画像信号）に変換され、出力される。ＣＣＤ２３−２から出力された画像信号はサンプリング＆Ａ／Ｄ変換され、デジタルクランプ２８０−１でベイヤー（Bayer）形式のデータとされ、所定のタイミングでＷＢゲイン乗算回路２４及びＹＩＱ変換回路２８６に与えられる。ＷＢゲイン乗算回路２８２でＷＢ係数（ホワイトバランス係数）を乗算してからガンマ補正回路２８３で画像補間処理を行ない、画像生成回路２８４で映像信号を生成してＤＭＡコントローラ２９に出力する。一方、ＹＩＱ変換回路２８６に与えられたデータからＹＩＱ変換回路２７、白検出回路２８及びＷＢ係数決定回路２９からなるＷＢ係数演算ブロックでＷＢ係数を決定し、ＷＢゲイン乗算回路２４の設定値として、ＷＢゲイン乗算回路２４にフィードバックされる。また、撮影レンズ２−１によって取り込まれた光学像はＣＣＤ２３−１で電気信号（画像信号）に変換され、出力される。ＣＣＤ２３−２から出力された画像信号はサンプリング＆Ａ／Ｄ変換され、デジタルクランプ２８０でベイヤ（Bayer）形式のデータとされ、所定のタイミングでＹＩＱ変換回路２８６に与えられ、ＣＣＤ２３−２からのデータに加算される。  
また、ＡＥ用積分器２８０−２では被写体撮像部２０−１からの入力信号を積分してその積分値を制御部３２に出力する。  
【００５７】
また、同時撮影モードや手ブレ判別モードのときは、時分割制御により、スイッチ２８１−１、２８１−２、２８１−３が閉状態のとき（つまり、被写体撮像部２０−１による撮影の際）は、スイッチ２８５−１、２８５−２が開放されてモニタ側撮像部２０−２がセンサとして用いられ、スイッチ２８５−１、２８５−２が閉状態のとき（つまり、被写体撮像部２０−２による撮影の際）は、スイッチ２８１１、２８１−２、２８１−３が開放されてモニタ側撮像部２０−１がセンサとして用いられる。  
【００５８】
図４は、センサ撮影モード時の撮影動作、つまり、被写体撮像部またはモニタ側撮像部のいずれか一方で画像を撮影し、他の一方を撮影情報収集用のセンサとして用いる場合のデジタルカメラ１の動作を説明するためのフローチャートである。このフローチャートはデジタルカメラ１に本願発明の撮影方法を実現させるためのプログラムを説明するためのものであり、撮影動作プログラムのサブプログラムの一つとして構成されていてもよいし、独立したプログラム（例えば、「センサ撮影モード時の撮影プログラム」）として構成されていてもよい。
【００５９】
以下に示す処理は基本的に制御部３２のＣＰＵが予めプログラムメモリに記憶されたプログラムに従って実行する例で説明するが、全ての機能をプログラムメモリに格納する必要はなく、必要に応じて、その一部若しくは全部をネットワークを介して受信して実現するようにしてもよい（図５、図７においても同様である）。以下、図１〜図４に基いて説明する。
【００６０】
撮影者がセンサ撮影モードを選択したとき、図４で、制御部３２はカラープロセス回路２８（図３）のスイッチ１８１−１、１８１−２、１８１−３を閉状態とし、スイッチ１８５−１、１８５−２を開放する（ステップＳ１）。
【００６１】
次に、制御部３２はその時点の（ズーム値に対応した）焦点距離でＡＥ処理を実行し、被写体撮像部２０−１で、撮影レンズ２−１から入射する被写体光像をＴＧ２４−１からのタイミング信号を基に垂直ドライバ２５−１でＣＣＤ２３−１を駆動制御して被写体像を取り込み光電変換してサンプルホールド回路２５−１、ＡＤ変換回路２６−１の経路でデジタルの画像信号を得て、カラープロセス回路２８に出力する。また、略同時に、撮影レンズ２−２から入射する撮影者側光像（撮影者像等）をモニタ側撮像部２０−２で、ＴＧ２４−２からのタイミング信号を基に垂直ドライバ２５−２でＣＣＤ２３−２を駆動制御して撮影者側の光像（撮影者像やその背景像）を光電変換してサンプルホールド回路２５−２、ＡＤ変換回路２６−２の経路でデジタルの画像信号を得て、カラープロセス回路２８に出力する（ステップＳ２）。
【００６２】
被写体撮像部２０−１からの画像信号はデジタルクランプ２８０でベイヤ（Bayer）形式のデータとされ、所定のタイミングでＷＢゲイン乗算回路２４及びＹＩＱ変換回路２８６に与えられ、モニタ側撮像部２０−２からの画像信号はデジタルクランプ２８０でベイヤ（Bayer）形式のデータとされ、所定のタイミングでＹＩＱ変換回路２８６に与えられる。つまり、カラープロセス回路２８で、被写体撮像部２０−１からの画像信号にモニタ側撮像部２０−２からの入力信号を付加してホワイトバランス処理を行い光源の色に対応したホワイトバランスになるように調整を施してから（ステップＳ３）、ガンマ補正回路２８３で画像補間処理し、画像生成回路２８４で映像信号を生成してＤＭＡコントローラ２９及びＤＲＡＭインターフェイス（Ｉ／Ｆ）３０を介してＤＲＡＭ３１にＤＭＡ転送する（ステップＳ４）。
【００６３】
また、カラープロセス回路２８からのＤＲＡＭ３１へのＤＭＡ転送と共に被写体撮像部２０−１からの画像データを間引いてスルー画像データを生成し、ＶＲＡＭコントローラ３３を制御してＶＲＡＭ３４−１を生成したスルー画像の映像信号で書き換え、デジタルビデオエンコーダ３５を経由させて表示部１３にファインダ用の映像（スルー画像）を表示させる（ステップＳ５）。
制御部３２はキー入力部３６からの信号を調べてシャッターキー７が半押し操作されたか否かを調べ、半押しされた場合はステップＳ７に進み、押されていない場合はステップＳ２に戻る（ステップＳ６）。
【００６４】
また、制御部３２は次に、所定のフォーカスエリアにピントが合うようにＡＦ駆動部１１−２を制御して自動合焦処理、つまり、フォーカスレンズ１２−１を移動させて合焦動作を行わせると共にＡＥ制御（絞り制御含む）やＡＷＢ制御（ステップＳ２、Ｓ３参照）を行い、合焦処理が終わると合焦位置をロックしてステップＳ８に進む。なお、図示されていないが合焦動作中もスルー画像は表示される（ステップＳ７）。  
【００６５】
制御部３２はキー入力部３０からの信号を調べてシャッターキー７が全押し操作されたか否かを判定し、シャッターキー７が全押しされた場合はステップＳ９に進む（ステップＳ８）。
【００６６】
シャッターキー７が全押しされた場合は、その時点で直ちに被写体撮像部２０−１からのＤＲＡＭ３１への経路を停止してスルー画像取得時とは異なる本撮影時のＣＣＤ駆動方式への切り替えを実行して取込んだ画像データに画像圧縮処理を施した後、この圧縮画像データ（画像ファイル）を保存メモリ３８に記録して１フレーム分の画像の撮影を終了する（ステップＳ９）。
【００６７】
上記図４のフローチャートに示した動作により、被写体撮像部２０−１で被写体を撮影する際にモニタ側撮像部２０−２からの光電変換出力をホワイトバランス処理等の撮影時の画像情報の調整データとして用いるので、被写体の撮影とモニタ周辺の明るさや光源等の情報の取得とを同時に行うことができる。つまり、前面及び背面の撮像素子が異なる撮影領域の光を取り込むので、被写体の撮影時に撮影者の背後等の周囲の光源情報等をより確実に得ることができる。そして、この情報を基にホワイトバランス等の撮影条件の設定を行い、被写体を撮影することができる。
【００６８】
また、上記図４のフローチャートの説明では被写体撮像部２０−１で被写体の撮影（相手撮り）を行い、モニタ側撮像部２０−２をセンサとして用いた例を示したが、図４はモニタ側撮像部２０−２で撮影（自分撮り）を行い、被写体撮像部２０−１をセンサとして用いる場合にも適用できる。但し、この場合は、スイッチ１８１−１、１８１−２、１８１−３を開放し、スイッチ１８５を閉状態にし、ＣＣＤ２３−２から撮影者側画像を取り込むようにする。また、モニタ側撮像部２０−２は本実施形態ではズーム動作は行なわないのでステップＳ１におけるズーム動作は行なわない。また、固定焦点であり、合焦処理は行なわないのでステップＳ６のシャッターキー７の半押し操作検出とステップＳ７のＡＦ〜ＡＷＢ動作は行なわないようにする。また、シャッターキー７が全押しされない場合はステップＳ２に戻るようにする。
【００６９】
なお、モニタ側撮像部２０−２でズーム動作を行なうようにデジタルカメラ１を構成した場合は、上記図４のフローチャートのステップＴ１で、スイッチ１８１−１、１８１−２、１８１−３を開放し、スイッチ１８５を閉状態にし、ＣＣＤ２３−２から撮影者側画像を取り込むようにすればよい。
【００７０】
（実施形態２）
図５は、同時撮影モード時の撮影動作、つまり、被写体撮像部及びモニタ側撮像部で画像を略同時に撮影する場合のデジタルカメラ１の動作を説明するためのフローチャートであり、図５（ａ）は被写体側画像とモニタ側画像の合成画像を記録するように構成した例、図５（ｂ）は被写体側画像とモニタ側画像を関連付けて記録するように構成した例を示す。  
このフローチャートはデジタルカメラ１に本願発明の撮影方法を実現させるためのプログラムを説明するためのものであり、撮影動作プログラムのサブプログラムの一つとして構成されていてもよいし、独立したプログラム（例えば、「同時撮影モード時の撮影プログラム」）として構成されていてもよい。以下、ホワイトバランス処理に係わる撮像部２−１、２−２の一連の動作について図１〜３、図５、図６を基に説明する。  
【００７１】
図５（ａ）で、撮影者が同時撮影モードを選択したとき制御部３２はその時点の（ズーム値に対応した）焦点距離でＡＥ処理を実行し、被写体撮像部２０−１で、撮影レンズ２−１から入射する被写体光像をＴＧ２４−１からのタイミング信号を基に垂直ドライバ２５−１でＣＣＤ２３−１を駆動制御して被写体像を取り込んで光電変換してサンプルホールド回路２５−１、ＡＤ変換回路２６−１の経路でデジタルの画像信号を得て、カラープロセス回路２８に出力する。また、略同時に、撮影レンズ２−２から入射する撮影者側光像ぞう撮影者像やその背景像）をモニタ側撮像部２０−２で、ＴＧ２４−２からのタイミング信号を基に垂直ドライバ２５−２でＣＣＤ２３−２を駆動制御して撮影者側の光像を光電変換してサンプルホールド回路２５−２、ＡＤ変換回路２６−２の経路で一定時毎にＣＣＤ−２３−１に結像した光像に対する１フレーム分のデジタルの画像信号を得てカラープロセス回路２８に出力する。また、略同時に、固定の焦点距離でＡＥ処理を実行し、被写体撮像部２０−２で、撮影レンズ２−２から入射する被写体光像をＴＧ２４−２からのタイミング信号を基に垂直ドライバ２５−２でＣＣＤ２３−２を駆動制御して被写体像を取り込み光電変換してサンプルホールド回路２５−２、ＡＤ変換回路２６−２の経路でデジタルの画像信号を得て、カラープロセス回路２８に出力する。また、略同時に、撮影レンズ２−２から入射する撮影者側光像撮影者像やその背景像）をモニタ側撮像部２０−２で、ＴＧ２４−２からのタイミング信号を基に垂直ドライバ２５−２でＣＣＤ２３−２を駆動制御して撮影者側の光像（撮影者像やその背景像）を光電変換してサンプルホールド回路２５−２、ＡＤ変換回路２６−２の経路で一定時毎にＣＣＤ−２３−２に結像した光像に対する１フレーム分のデジタルの画像信号を得てカラープロセス回路２８に出力する（ステップＴ１）。
【００７２】
制御部３２はまず上記１フレーム分の画像信号の出力タイミング（つまり、上記一定時）ごとに、カラープロセス回路２８（図３）のスイッチ１８１−１、１８１−２、１８１−３を閉状態とし、スイッチ１８５−１、１８５−２を開放する第１の状態（被写体撮像部能動状態）と、スイッチ１８５−１、１８５−２を閉状態とし、スイッチ１８１−１、１８１−２、１８１−３を開放する第２の状態（モニタ側撮像部能動状態）を繰り返す（ステップＴ２）。
【００７３】
第１の状態では、カラープロセス回路２８は、被写体撮像部２０−１からの画像信号をデジタルクランプ２８０でベイヤ（Bayer）形式のデータとしてＷＢゲイン乗算回路２４及びＹＩＱ変換回路２８６に与え、被写体撮像部２０−２からの画像信号は所定のタイミングでデジタルクランプ２８０でベイヤ（Bayer）形式のデータとし、ＹＩＱ変換回路２８６に与える。つまり、カラープロセス回路２８で、被写体撮像部２０−１からの画像信号にモニタ側撮像部２０−２からの入力信号を付加してホワイトバランス処理を行い光源の色に対応したホワイトバランスになるように調整を施してから（ステップＴ３）、ガンマ補正回路２８３で画像補間処理し、画像生成回路２８４で映像信号を生成してＤＭＡコントローラ２９及びＤＲＡＭインターフェイス（Ｉ／Ｆ）３０を介してＤＲＡＭ３１にＤＭＡ転送してＤＲＡＭ３１の被写体側像記憶領域に記憶させ、ステップＴ７に進む（ステップＴ４）。
【００７４】
更に、制御部３２は、上記ステップＴ４でのカラープロセス回路２８からのＤＲＡＭ３１へのＤＭＡ転送と共に被写体撮像部２０−１からの画像データを間引いてスルー画像データを生成し、ＶＲＡＭコントローラ３３を制御してＶＲＡＭ３４−２を画像データを生成したスルー画像データで書き換える（ステップＴ５）。
【００７５】
第２の状態では、カラープロセス回路２８は、モニタ側撮像部２０−２からの画像信号をデジタルクランプ２８０でベイヤ（Bayer）形式のデータとしてＷＢゲイン乗算回路２４及びＹＩＱ変換回路２８６に与え、被写体撮像部２０−１からの画像信号は所定のタイミングでデジタルクランプ２８０でベイヤ（Bayer）形式のデータとし、ＹＩＱ変換回路２８６に与える。つまり、カラープロセス回路２８で、モニタ側撮像部２０−２からの画像信号に被写体撮像部２０−２からの入力信号を付加してホワイトバランス処理を行い光源の色に対応したホワイトバランスになるように調整を施してから（ステップＴ６）、ガンマ補正回路２８３で画像補間処理し、画像生成回路２８４で映像信号を生成してＤＭＡコントローラ２９及びＤＲＡＭインターフェイス（Ｉ／Ｆ）３０を介してＤＲＡＭ３１にＤＭＡ転送してＤＲＡＭ３１のモニタ側画像記憶領域に記憶させ、ステップＴ８に進む（ステップＴ７）。
【００７６】
更に、制御部３２は、上記ステップＴ７でのカラープロセス回路２８からのＤＲＡＭ３１へのＤＭＡ転送と共に、モニタ側撮像部２０−２からの画像データを間引いてから所定比率で縮小処理したスルー画像データを生成し、ＶＲＡＭコントローラ３３を制御してＶＲＡＭ３４−１に記憶されている被写体側の映像信号に、図６の例に示すように、モニタ側の画像１３２が被写体側の画像１３１上の所定の位置（表示部１３の画面上の所定の位置）に重畳（上書き）表示されるように重畳（上書き）させ、デジタルビデオエンコーダ３５を経由させて表示部１３にモニタ側の画像が重畳（上書き）合成されたファインダ用の映像（スルー画像）を表示させる（ステップＴ８）。
【００７７】
制御部３２はキー入力部３６からの信号を調べてシャッターキー７が半押し操作されたか否かを調べ、半押しされた場合はステップＴ１０に進み、押されていない場合はステップＴ２に戻る（ステップＴ９）。
【００７８】
また、制御部３２は、次に、被写体撮像部２０−１で、所定のフォーカスエリアにピントが合うようにＡＦ駆動部１１−２を制御して自動合焦処理、つまり、フォーカスレンズ１２−１を移動させて合焦動作を行わせると共に被写体撮像部２０−１及びモニタ側撮像部２０−２のＡＥ制御（絞り制御含む）やＡＷＢ制御（ステップＴ１〜Ｔ３参照）を行わせ、合焦処理が終わると合焦位置をロックしてステップＴ１１に進む。なお、図示されていないが合焦動作中もスルー画像は表示される（ステップＴ１０）。  
【００７９】
制御部３２はキー入力部３０からの信号を調べてシャッターキー７が全押し操作されたか否かを判定し、シャッターキー７が全押しされた場合はステップＴ１２に進む（ステップＴ１１）。
【００８０】
シャッターキー７が全押しされた場合は、その時点で直ちに被写体撮像部２０−１及びモニタ側撮像部２０−２からＤＲＡＭ３１への経路を停止してスルー画像取得時とは異なる本撮影時のＣＣＤ駆動方式への切替を実行して被写体撮像部２０−１及びモニタ側撮像部２０−２からの画像データをそれぞれＤＲＡＭ３１の被写体側画像記憶領域及びモニタ側画像記憶領域に記憶させ（ステップＴ１２）、モニタ側画像記憶領域に記憶した画像データを縮小して、被写体側画像の所定の位置に縮小されたモニタ側画像が位置するように重畳させて合成（上書き合成）し（ステップＴ１３）、合成した画像データに画像圧縮処理を施した後、この圧縮画像データ（画像ファイル）を保存メモリ３８に記録して１フレーム分の合成画像の撮影を終了する（ステップＴ１４）。
【００８１】
上記図５（ａ）のフローチャートに示した動作により、被写体撮像部２０−１とモニタ側撮像部で略同時に撮影を行う際に、ＣＣＤからの１フレーム分のデータ出力のタイミングで、被写体撮像部２０−１からの画像信号をモニタ側撮像部２０−２からの光電変換出力をホワイトバランス処理の補完データとして用いる周期と、モニタ側撮像部２０−２からの画像信号を被写体撮像部２０−１からの光電変換出力をホワイトバランス処理の補完データとして用いる周期とを切り替えるので、被写体や撮影者の撮影と周囲の入射光の状態の検出とを同時に行うことができる。つまり、前面及び背面の撮像素子が異なる撮影領域の光を入射しているので、撮影時に周囲の光源情報をより確実に得ることができる。そしてこの情報を基にホワイトバランス等の撮影条件設定を行って被写体及び撮影者を撮影することができる。
【００８２】
（変形例１）  
上記図５（ａ）の例ではステップＳ１３、Ｓ１４に示したように被写体撮像部２０−１で撮影した画像とモニタ側撮像部２０−２で撮影した画像を合成して保存メモリ３８に記録したが、図５（ｂ）に示すように、被写体撮像部２０−１で撮影した画像とモニタ側撮像部２０−２で撮影した画像を別々に圧縮処理して（ステップＴ１３’）、圧縮した被写体撮像部２０−１で撮影した画像とモニタ側撮像部２０−２で撮影した画像を関連付けて保存メモリ３８に記録する（ステップＴ１４’）ようにしてもよい。この場合は、再生時に再生してから再生画像を合成して表示するができる。
【００８３】
図６は、同時撮影モード時のモニタリング状態に表示される被写体画像とモニタ側画像の合成画像の例を示す図である。  
デジタルカメラ１において、同時撮影モードが選択されると、カメラ正面の撮影レンズ２−１（図１（ａ））からの被写体画像１３１と、カメラ背面の撮影レンズ２−２（図１（ｂ））からのモニタ側画像１３２が図３（ｃ）に示すように合成されて表示される。ユーザは、所望のタイミングでシャッターキー７を操作して静止画像を得ることができる。
【００８４】
なお、上記図６の例では、モニタ側画像の合成個所は右下隅となっているが、これに限定されない。また画像合成領域選択欄を表示し、ユーザが入力部３６のキーの操作を行って所望の表示域を選択すると、選択された表示域にモニタ画像を合成して表示するように構成してもよい。
【００８５】
また、図６の例では、撮影レンズ２−１で撮影した被写体画像中に撮影レンズ２−１で撮影したモニタ側画像を合成表示したが、２つのレイアウトを入れ替えモニタ側画像中に被写体画像を合成表示することができるようにしてもよい。例えば、被写体画像中に合成されたモニタ画像をマウス等でクリックするとレイアウトが入れ替わり、モニタ側画像中に被写体画像を合成した合成画像を表示するようにしてもよい。
【００８６】
（変形例２）  
本実施形態２では略同時に被写体撮像部２０−１から取り込んだ画像とモニタ側撮像部２０−２で取り込んだ画像の縮小画像を合成してスルー表示したが、モニタ側画像を拡大してウインドウにスルー表示することにより手ブレ防止として利用することができる。
【００８７】
図７は、手ブレ防止撮影モード時のデジタルカメラ１の動作を説明するためのフローチャートである。このフローチャートはデジタルカメラ１に本願発明の撮影方法を実現させるためのプログラムを説明するためのものであり、撮影動作プログラムのサブプログラムの一つとして構成されていてもよいし、独立したプログラム（例えば、「手ブレ防止撮影モード時の撮影プログラム」）として構成されていてもよい。以下、ホワイトバランス処理に係わる撮像部２−１、２−２の一連の動作について図１〜３、図７、図８を基に説明する。
【００８８】
図７でステップＵ１〜Ｕ７の動作は各ステップの図示を省略しているが図５に示したフローチャートのステップＴ１〜Ｔ７と同様である。したがって、手ブレ防止撮影モードが選択されると、制御部３２は、図５のフローチャートのステップＴ１〜Ｔ７と同様の動作を行なうようデジタルカメラ１を制御する（ステップＵ１〜Ｕ７）。
【００８９】
次に、制御部３２は、上記ステップＵ７でのカラープロセス回路２８からのＤＲＡＭ３１へのＤＭＡ転送と共に、モニタ側撮像部２０−２からの画像データを拡大処理してスルー画像データを生成し（ステップＵ８）、間引き処理を施してからＶＲＡＭコントローラ３３、デジタルビデオエンコーダ３５を介して表示部１３のモニタ画面にスルー画像としてウインドウ表示させる（図８参照）（ステップＵ９）。
【００９０】
制御部３２はキー入力部３６からの信号を調べてシャッターキー７が半押し操作されたか否かを調べ、半押しされた場合はステップＵ１１に進み、押されていない場合はステップＵ２に戻る（ステップＵ１０）。
【００９１】
また、制御部３２は次に、所定のフォーカスエリアにピントが合うようにＡＦ駆動部１１−２を制御して自動合焦処理、つまり、フォーカスレンズ１２−１を移動させて合焦動作を行わせると共にＡＥ制御（絞り制御含む）やＡＷＢ制御（ステップＵ１〜Ｕ３参照）を行い、合焦処理が終わると合焦位置をロックしてステップＵ１２に進む。なお、図示されていないが合焦動作中もスルー画像は表示される（ステップＵ１１）。  
【００９２】
制御部３２はキー入力部３０からの信号を調べてシャッターキー７が全押し操作されたか否かを判定し、シャッターキー７が全押しされた場合はステップＵ１３に進む（ステップＵ１２）。
【００９３】
シャッターキー７が全押しされた場合は、その時点で直ちに被写体撮像部２０−１からのＤＲＡＭ３１への経路を停止してスルー画像取得時とは異なる本撮影時のＣＣＤ駆動方式への切替を実行して取込んだ画像データに画像圧縮処理を施した後、この圧縮画像データ（画像ファイル）を保存メモリ３８に記録して１フレーム分の画像の撮影を終了する（ステップＵ１３）。
【００９４】
上記図７のフローチャートに示した動作により、被写体撮像部２０−１で被写体を撮影する際に被写体撮像部２０−１で取り込んだスルー画像が表示されているモニタ画面上にモニタ側撮像部２０−２で取り込んだ背面側の被写体（通常は撮影者）を拡大してウインドウ表示するので、手ブレ状態が増幅されて表示されるので、カメラがブレるとウインドウ表示された画像が上下あるいは左右にゆれているように見えることから、撮影者は手ブレが生じていることを認識でき、カメラを構え直すなどしてブレを抑止することができる。したがって、デジタルカメラ１に特にブレ検出用のセンサを備えなくても手ブレの略ない画像を得ることができる。また、ＣＣＤが２つあるのでＣＣＤが１つの場合のように並列処理等で処理速度を遅くすることなく、拡大画像にて手ブレ状況を強調表示し、手ブレ状態の確認を行なうことができる。また、ウインドウの拡大画像は電子ズームばかりでなく光学ズームでも可能となる。
【００９５】
図８は、手ブレ防止撮影モード時のモニタリング状態に表示される被写体画像とモニタ側画像の合成画像の例を示す図である。デジタルカメラ１において、手ブレ防止撮影モードが選択されると、カメラ正面の撮影レンズ２−１（図１（ａ））からの被写体画像１３１がスルー表示され、カメラ背面の撮影レンズ２−２（図１（ｂ））からのモニタ側画像１３３（この例では撮影者像）が拡大されウインドウ表示される。また、符号１３３はブレた像を示す。拡大された画像１３３の動きは感知しやすいので、撮影者はウインドウ１３５に表示された画像１３３が上下または左右に動く場合は手ブレがあると判断できるので、撮影者がカメラを持ち直す等の手ブレ抑止動作を行なって画像１３３の動きが止まったタイミングでシャッターキー７を操作すると手ブレのない静止画像を得ることができる。
【００９６】
なお、上記図８の例では、ウインドウ１３５の表示個所は右下隅となっているが、これに限定されない。また、十字キー１０を操作してウインドウ１３５を画面上の所望の箇所、たとえば、スルー表示されている被写体画像の邪魔にならない箇所に移動させることもできる。
【００９７】
（変形例３）  
また、本実施形態２ではデジタルカメラ１が正面側に撮影レンズ２−１及びＣＣＤ−２３−１を備え、背面側に撮影レンズ２―２およびＣＣＤ２３−２を備えている例を基に説明したが、本実施形態２と本実施形態２の変形例２及び変形例３の発明はデジタルカメラ１が正面側に撮影レンズ２−１及びＣＣＤ−２３−１と、撮影レンズ２−２及びＣＣＤ−２３−２とを備えた場合にも適用できる。  
このようにした場合、同時撮影モードでは正面側の撮影レンズ２−１及び撮影レンズ２―２で取り込んだ光学像が合成されてスルー表示される。また、図５のステップＴ２のスイッチ動作により、撮像部２−１または撮像部レンズ２−２がセンサとして動作するので、カメラ正面の周辺光源を効率よく用いることができる。
また、手ブレ防止撮影モードでは一方の撮像部で取り込んだ画像を拡大してウインドウ表示する。拡大された画像の動きは感知しやすいので、ウインドウ内の画像をブレ防止用の画像として利用することができる。
【００９８】
以上、本発明のいくつかの実施例について説明したが本発明は上記各実施例に限定されるものではなく、種々の変形実施が可能であることはいうまでもない。
【図面の簡単な説明】
【００９９】
【図１】本発明を適用したデジタルカメラの外観構成の一実施例を示す図である。
【図２】図１のデジタルカメラの電子回路構成の一実施例を示す図である。
【図３】カラープロセス回路におけるＡＷＢ（ホワイトバランス）処理の説明図である。
【図４】センサ撮影モード時のデジタルカメラの動作を説明するためのフローチャートである。
【図５】同時撮影モード時のデジタルカメラの動作を説明するためのフローチャートである。
【図６】同時撮影モード時のモニタリング状態に表示される被写体画像とモニタ側画像の合成画像の例を示す図である。
【図７】手ブレ防止撮影モード時のデジタルカメラ１の動作を説明するためのフローチャートである。
【図８】手ブレ防止撮影モード時のモニタリング状態に表示される被写体画像とモニタ側画像の合成画像の例を示す図である。
【符号の説明】
【０１００】
１ デジタルカメラ
７ シャッターキー（撮像指示手段）
８ モードスイッチ（撮像モード選択手段）
９ メニューキー（撮像モード選択手段）
１３ 表示部（合成画像表示手段）
２０−１ 被写体撮像部（第１の撮像部）
２０−２ モニタ側撮像部（第２の撮像部）
２９  カラープロセス回路（信号変換処理手段）
３１ ＤＲＡＭ（画像記憶メモリ）
３２ 制御部（同時撮影制御手段、画像記憶制御手段）
３８ 保存メモリ（保存メモリ）
１３５  ウインドウ
【図１】
2006238085.tif 000003
【図２】
2006238085.tif 000004
【図３】
2006238085.tif 000005
【図４】
2006238085.tif 000006
【図５】
2006238085.tif 000007
【図６】
2006238085.tif 000008
【図７】
2006238085.tif 000009
【図８】
2006238085.tif 000010