(57)【特許請求の範囲】
【請求項１】
第１撮像光学系及び第２撮像光学系で撮像した各画像を表示する表示手段を備える撮像装置であって、
前記撮像装置に加わる振れを検出する振れ検出手段と、
前記第１撮像光学系の画角で撮像した第１画像と、該第１撮像光学系の画角よりも広角にて前記第２撮像光学系で撮像した第２画像を処理して、前記第１画像及び第２画像を示す映像信号を前記表示手段に出力する映像信号処理手段と、
前記第１撮像光学系の焦点距離が大きくなる方向に変更された場合に前記第２画像の拡大率を大きくし、前記第１撮像光学系の焦点距離が小さくなる方向に変更された場合に前記第２画像の拡大率を小さくする指示を前記映像信号処理手段に出力して前記第２画像の表示制御を行う制御手段を備え、
前記制御手段は、前記振れ検出手段による検出信号を取得し、前記振れの量を算出して前記第２画像の拡大率を変更して前記第２撮像光学系の画角を広げる制御を行うことを特徴とする撮像装置。
【請求項２】
前記映像信号処理手段は、前記第２画像の切り出し枠を変更することで電子ズーム倍率を変更する処理を行い、
前記制御手段は、前記第１撮像光学系の焦点距離が大きくなる方向に変更された場合には前記第２画像の切り出し枠を小さくして前記電子ズーム倍率を大きくし、前記第１撮像光学系の焦点距離が小さくなる方向に変更された場合に前記第２画像の切り出し枠を大きくして前記電子ズーム倍率を小さくする処理を前記映像信号処理手段に指示することを特徴とする請求項１に記載の撮像装置。
【請求項３】
ズームレンズ及び駆動制御手段をそれぞれ有する第１撮像光学系及び第２撮像光学系で撮像した各画像を表示する表示手段を備える撮像装置であって、
前記撮像装置に加わる振れを検出する振れ検出手段と、
前記第１撮像光学系の画角で撮像した第１画像と、該第１撮像光学系の画角よりも広角にて前記第２撮像光学系で撮像した第２画像を処理して、前記第１画像及び第２画像を示す映像信号を前記表示手段に出力する映像信号処理手段と、
前記第１撮像光学系の焦点距離が大きくなる方向に変更された場合に前記第２撮像光学系のズーム倍率を大きくし、前記第１撮像光学系の焦点距離が小さくなる方向に変更された場合に前記第２撮像光学系のズーム倍率を小さくする指示を前記駆動制御手段に出力する制御手段を備え、
前記制御手段は、前記振れ検出手段による検出信号を取得し、前記振れの量を算出して前記第２画像の拡大率を変更して前記第２撮像光学系の画角を広げる制御を行うことを特徴とする撮像装置。
【請求項４】
第１撮像光学系及び第２撮像光学系で撮像した各画像を表示する表示手段を備える撮像装置であって、
前記画像から動きベクトルを検出する動きベクトル検出手段と、
前記第１撮像光学系の画角で撮像した第１画像と、該第１撮像光学系の画角よりも広角にて前記第２撮像光学系で撮像した第２画像を処理して、前記第１画像及び第２画像を示す映像信号を前記表示手段に出力する映像信号処理手段と、
前記第１撮像光学系の焦点距離が大きくなる方向に変更された場合に前記第２画像の拡大率を大きくし、前記第１撮像光学系の焦点距離が小さくなる方向に変更された場合に前記第２画像の拡大率を小さくする指示を前記映像信号処理手段に出力して前記第２画像の表示制御を行う制御手段を備え、
前記制御手段は、前記動きベクトル検出手段から得た動きベクトルの大きさ及び方向に従って前記第２画像の拡大率を変更して前記第２撮像光学系の画角を広げる制御を行うことを特徴とする撮像装置。
【請求項５】
前記映像信号処理手段は、前記第２画像の切り出し枠を変更することで電子ズーム倍率を変更する処理を行い、
前記制御手段は、前記第１撮像光学系の焦点距離が大きくなる方向に変更された場合には前記第２画像の切り出し枠を小さくして前記電子ズーム倍率を大きくし、前記第１撮像光学系の焦点距離が小さくなる方向に変更された場合に前記第２画像の切り出し枠を大きくして前記電子ズーム倍率を小さくする処理を前記映像信号処理手段に指示することを特徴とする請求項４に記載の撮像装置。
【請求項６】
ズームレンズ及び駆動制御手段をそれぞれ有する第１撮像光学系及び第２撮像光学系で撮像した各画像を表示する表示手段を備える撮像装置であって、
前記画像から動きベクトルを検出する動きベクトル検出手段と、
前記第１撮像光学系の画角で撮像した第１画像と、該第１撮像光学系の画角よりも広角にて前記第２撮像光学系で撮像した第２画像を処理して、前記第１画像及び第２画像を示す映像信号を前記表示手段に出力する映像信号処理手段と、
前記第１撮像光学系の焦点距離が大きくなる方向に変更された場合に前記第２撮像光学系のズーム倍率を大きくし、前記第１撮像光学系の焦点距離が小さくなる方向に変更された場合に前記第２撮像光学系のズーム倍率を小さくする指示を前記駆動制御手段に出力する制御手段を備え、
前記制御手段は、前記動きベクトル検出手段から得た動きベクトルの大きさ及び方向に従って前記第２画像の拡大率を変更して前記第２撮像光学系の画角を広げる制御を行うことを特徴とする撮像装置。
【請求項７】
第１撮像光学系及び第２撮像光学系で撮像した各画像を表示する表示手段を備える撮像装置であって、
前記第１撮像光学系の画角で撮像した第１画像と、該第１撮像光学系の画角よりも広角にて前記第２撮像光学系で撮像した第２画像を処理して、前記第１画像及び第２画像を示す映像信号を前記表示手段に出力する映像信号処理手段と、
前記第１撮像光学系の焦点距離が大きくなる方向に変更された場合に前記第２画像の拡大率を大きくし、前記第１撮像光学系の焦点距離が小さくなる方向に変更された場合に前記第２画像の拡大率を小さくする指示を前記映像信号処理手段に出力して前記第２画像の表示制御を行う制御手段を備え、
前記制御手段は、前記第１画像及び第２画像から主被写体像を特定し、前記第１撮像光学系の画角枠から主被写体が外れる場合、その画角枠と前記主被写体像との距離を算出して前記第２画像の拡大率を変更して前記第２撮像光学系の画角を広げる制御を行うことを特徴とする撮像装置。
【請求項８】
前記映像信号処理手段は、前記第２画像の切り出し枠を変更することで電子ズーム倍率を変更する処理を行い、
前記制御手段は、前記第１撮像光学系の焦点距離が大きくなる方向に変更された場合には前記第２画像の切り出し枠を小さくして前記電子ズーム倍率を大きくし、前記第１撮像光学系の焦点距離が小さくなる方向に変更された場合に前記第２画像の切り出し枠を大きくして前記電子ズーム倍率を小さくする処理を前記映像信号処理手段に指示することを特徴とする請求項７に記載の撮像装置。
【請求項９】
ズームレンズ及び駆動制御手段をそれぞれ有する第１撮像光学系及び第２撮像光学系で撮像した各画像を表示する表示手段を備える撮像装置であって、
前記第１撮像光学系の画角で撮像した第１画像と、該第１撮像光学系の画角よりも広角にて前記第２撮像光学系で撮像した第２画像を処理して、前記第１画像及び第２画像を示す映像信号を前記表示手段に出力する映像信号処理手段と、
前記第１撮像光学系の焦点距離が大きくなる方向に変更された場合に前記第２撮像光学系のズーム倍率を大きくし、前記第１撮像光学系の焦点距離が小さくなる方向に変更された場合に前記第２撮像光学系のズーム倍率を小さくする指示を前記駆動制御手段に出力する制御手段を備え、
前記制御手段は、前記第１画像及び第２画像から主被写体像を特定し、前記第１撮像光学系の画角枠から主被写体が外れる場合、その画角枠と前記主被写体像との距離を算出して前記第２画像の拡大率を変更して前記第２撮像光学系の画角を広げる制御を行うことを特徴とする撮像装置。
【請求項１０】
第１撮像光学系及び第２撮像光学系で撮像した各画像を表示する表示手段を備える撮像装置にて実行される制御方法であって、
前記撮像装置に加わる振れを振れ検出手段が検出するステップと、
前記第１撮像光学系の画角で撮像した第１画像と、該第１撮像光学系の画角よりも広角にて前記第２撮像光学系で撮像した第２画像を映像信号処理手段が処理して、前記第１画像及び第２画像を示す映像信号を前記表示手段に出力するステップと、
前記第１撮像光学系の焦点距離が大きくなる方向に変更された場合に前記第２画像の拡大率を大きくし、前記第１撮像光学系の焦点距離が小さくなる方向に変更された場合に前記第２画像の拡大率を小さくする指示を前記映像信号処理手段に出力して前記第２画像の表示制御を制御手段が行う制御ステップと、を有し、
前記制御ステップにて前記制御手段は、前記振れ検出手段による検出信号を取得し、前記振れの量を算出して前記第２画像の拡大率を変更して前記第２撮像光学系の画角を広げる制御を行うことを特徴とする撮像装置の制御方法。
【請求項１１】
ズームレンズ及び駆動制御手段をそれぞれ有する第１撮像光学系及び第２撮像光学系で撮像した各画像を表示する表示手段を備える撮像装置にて実行される制御方法であって、
前記撮像装置に加わる振れを振れ検出手段が検出するステップと、
前記第１撮像光学系の画角で撮像した第１画像と、該第１撮像光学系の画角よりも広角にて前記第２撮像光学系で撮像した第２画像を映像信号処理手段が処理して、前記第１画像及び第２画像を示す映像信号を前記表示手段に出力するステップと、
前記第１撮像光学系の焦点距離が大きくなる方向に変更された場合に前記第２撮像光学系のズーム倍率を大きくし、前記第１撮像光学系の焦点距離が小さくなる方向に変更された場合に前記第２撮像光学系のズーム倍率を小さくする指示を制御手段が前記駆動制御手段に出力する制御ステップと、を有し、
前記制御ステップにて前記制御手段は、前記振れ検出手段による検出信号を取得し、前記振れの量を算出して前記第２画像の拡大率を変更して前記第２撮像光学系の画角を広げる制御を行うことを特徴とする撮像装置の制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数の撮像光学系を有する撮像装置とその制御方法に関するものである。
【背景技術】
【０００２】
近年、コンパクトデジタルカメラには焦点距離の長い、高倍率レンズを持つ製品が登場しており、遠方の被写体を表示画面に大きく映し出せる。しかし、その反面で、僅かな手ブレによるカメラの傾きや主被写体の小さな動きであっても、ユーザは画角から主被写体を逃しやすくなる。画角から主被写体を一旦逃してしまうと、ユーザは再び主被写体を探すために撮影レンズの焦点距離を一時的に広角側に戻し、画角を広げて主被写体を捉え直す必要がある。
そこで、単一のカメラ筐体に複数の撮像光学系を持つカメラが提案されている。例えば、複数の撮像光学系が第１撮像光学系と第２撮像光学系からなる場合に、第１撮像光学系を相対的に狭画角の光学系（以下、テレ側光学系という）とし、第２撮像光学系を相対的に広画角の光学系（以下、ワイド側光学系という）とする。特許文献１に開示の装置では、両光学系で同一の主被写体を撮影する場合、各光学系でそれぞれ撮影した画像を全体画像と拡大画像として同時に表示する。
【０００３】
このような構成のカメラを用いれば、前述のように高倍率レンズでの撮影にてユーザが画角から主被写体を逃した場合でも、ワイド側光学系で撮影された画像を確認できる。よって、ユーザはテレ側光学系の画角を変えず主被写体を探して捉え直すことができる。その際の画像と表示状態を図３に例示する。図３（Ａ）はテレ側光学系で主被写体（本例では自動車）を捉えている状態の第１画像を例示し、図３（Ｂ）は主被写体がテレ側光学系の画角から外れてしまっている画像例を示す。ここでテレ側光学系の画角はワイド側光学系の画像内に点線枠で示している。ワイド側光学系で捉えた第２画像が画面に表示されるので、ユーザは主被写体がどの場所にいるのかを容易に把握でき、再びテレ側光学系で主被写体を捉えることができる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００７−７４６９６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
従来技術ではテレ側光学系に高倍率レンズを用いる装置の場合、テレ側光学系で捉えた被写体像の大きさで適切でも、ワイド側光学系の画角が広い全体表示のままであるとワイド側光学系による被写体像の表示サイズに問題が生じる。図４（Ａ）に示すように、ワイド側光学系で捉えた主被写体が小さく表示されてしまうと、ユーザは主被写体を認識し難くなる。このことは今後さらに高倍率化が進むにつれて、より顕著になると予想される。
そこで本発明の目的は、複数の撮像光学系を有するカメラにおいて、狭角側の撮像光学系の焦点距離が変更された場合、広角側の撮像光学系の画角を制御することにより、ユーザが主被写体を容易に把握できるようにすることである。
【課題を解決するための手段】
【０００６】
上記した課題を解決するために本発明に係る装置は、第１撮像光学系及び第２撮像光学系で撮像した各画像を表示する表示手段を備える撮像装置であって、前記撮像装置に加わる振れを検出する振れ検出手段と、前記第１撮像光学系の画角で撮像した第１画像と、該第１撮像光学系の画角よりも広角にて前記第２撮像光学系で撮像した第２画像を処理して、前記第１画像及び第２画像を示す映像信号を前記表示手段に出力する映像信号処理手段と、前記第１撮像光学系の焦点距離が大きくなる方向に変更された場合に前記第２画像の拡大率を大きくし、前記第１撮像光学系の焦点距離が小さくなる方向に変更された場合に前記第２画像の拡大率を小さくする指示を前記映像信号処理手段に出力して前記第２画像の表示制御を行う制御手段を備える。前記制御手段は、前記振れ検出手段による検出信号を取得し、前記振れの量を算出して前記第２画像の拡大率を変更して前記第２撮像光学系の画角を広げる制御を行う。
【発明の効果】
【０００７】
本発明によれば、狭角側の第１撮像光学系の焦点距離が変更された場合、広角側の第２撮像光学系の画角を制御することにより、ユーザが主被写体を容易に把握できる。
【図面の簡単な説明】
【０００８】
【図１】本発明の第１及び第２実施形態に係る撮像装置の構成例を示す図である。
【図２】本発明の第１実施形態における処理例を示すフローチャートである。
【図３】複数の撮像光学系で撮像した画像例を示す図である。
【図４】本発明の課題を説明するための画像例（Ａ）、および本発明の第１実施形態を適用した場合に複数の撮像光学系により得られる画像例（Ｂ）を示す図である。
【図５】本発明の第２実施形態における処理例を示すフローチャートである。
【図６】本発明の第３及び第４実施形態に係る撮像装置の構成例を示す図である。
【発明を実施するための形態】
【０００９】
以下に、本発明の各実施形態を添付図面に基づいて詳細に説明する。
【００１０】
［第１実施形態］
図１は、本発明の第１実施形態に係る撮像装置の構成例を示す。本例に示す撮像装置は、第１撮像光学系１および第２撮像光学系２を備え、これらを制御部３が制御する。以下では、第１撮像光学系１をテレ側光学系とし、第２撮像光学系２をワイド側光学系として説明する。
第１撮像光学系１と第２撮像光学系２との相違点は、第１撮像光学系１だけがズームレンズ１３ａを有することである。それ以外は同じ構成であるため、以下では第１撮像光学系１の構成要素（符号に添え字ａを付して区別する。）を説明し、第２撮像光学系２の構成要素には符号に添え字ｂを付すことによりそれらの詳細な説明を省略する。
【００１１】
第１撮像光学系１はズームレンズ１３ａを備え、さらにはシャッタ・絞りユニット１４ａ、シフトレンズ１５ａ、フォーカスレンズ１６ａを備える。ズームレンズ１３ａは、光軸方向に沿って位置変更可能であり、倍率変更を行う。ズーム駆動制御部１９ａは、ズームレンズ１３ａを駆動する。ズームレンズ１３ａの後段に配置されたシャッタ・絞りユニット１４ａは露光量を調節する。シャッタ・絞り駆動制御部２０ａは、シャッタ・絞りユニット１４ａを駆動制御して露光量を調節する。シフトレンズ１５ａは、光軸に対して略垂直な平面内で位置変更可能であり、振れ補正光学系を構成する。シフトレンズ駆動制御部２１ａはシフトレンズ１５ａを駆動制御する。フォーカスレンズ１６ａは焦点調節を行うためのレンズであり、光軸方向に沿って位置変更可能である。フォーカス駆動制御部２２ａはフォーカスレンズ１６ａを駆動制御して焦点調節を行う。
撮像素子１７ａは、レンズ群を通ってきた被写体からの光を受光して電気信号に変換する。撮像素子１７ａはテレ側光学系に係る撮像信号を生成する。なお、第２撮像光学系２を構成する撮像素子１７ｂはワイド側光学系に係る撮像信号を生成する。
撮像信号処理部１８ａは撮像素子１７ａの出力信号を映像信号に変換し、画像データを映像信号処理部４に出力する。また第２撮像光学系２の撮像信号処理部１８ｂは撮像素子１７ｂの出力信号を処理して画像データを映像信号処理部４および動きベクトル検出部６に出力する。映像信号処理部４は、撮像信号処理部１８ａ、１８ｂがそれぞれ出力した画像データに対して所定の画像処理を施し、表示可能な画像信号を表示部５に出力する。また映像信号処理部４は、後述する制御部３から画像の拡大率等の制御指示を受けて撮像信号処理部１８ｂの画像データを切り出し、電子ズーム処理により拡大した画像の信号を出力する機能を有する。
【００１２】
制御部３はシステム全体を制御し、例えば、撮像光学系１、２が備える各駆動制御部を制御する。また制御部３は表示部５の表示制御を行い、映像信号処理部４が出力した画像信号に従って表示画面に画像を表示させる。なお制御部３は、不図示のＣＰＵ（中央演算処理装置）等により解釈及び実行されるプログラムに従って各種の処理を行う。
動きベクトル検出部６は第２撮像光学系２の撮像信号処理部１８ｂが出力した画像データから画像の動きベクトルを検出する。動きベクトル検出方法の１例として、本実施形態では現フィールドの画像と前フィールドの画像を、所定の代表点または画素ごとに比較対照するマッチング法を採用する。具体的には、動きベクトル検出部６は、前フィールドの画像を現フィールドの画像に対して画面内で水平および垂直のシフト操作を行って両者を照合し、最も一致するシフト量および方向をもって動きベクトルの大きさおよび方向とする。
【００１３】
ズームスイッチ７はユーザがズームレンズ１３ａの操作に使用し、その操作指示信号は制御部３に送られる。外部入出力端子部８は、撮像装置と不図示の外部装置との間の通信を媒介する。外部入出力端子部８には外部装置から映像信号及び音声信号が入力され、また外部装置に対して映像信号及び音声信号が外部入出力端子部８から出力される。
シャッタレリーズスイッチ９は、押し込み量に応じて第１スイッチ(以下、ＳＷ１と記す)及び第２スイッチ（以下、ＳＷ２と記す）が順にオン状態となる。ユーザがシャッタレリーズボタンを半押しで操作した場合にＳＷ１がオン状態となり、更にシャッタレリーズボタンを最後まで深く押し込む操作を行った場合にＳＷ２がオン状態となる。ＳＷ１、ＳＷ２のオン・オフ信号は制御部３に送信される。
記憶部１０は、撮像信号処理部１８ａ、１８ｂが出力した各画像データ、および映像信号処理部４が出力した画像データ等を記憶する。また記憶部１０は、制御部３によって解釈されて実行される制御プログラムを記憶する。電源部１１は撮像装置の各部に対して電源電圧を供給する。振れ検出用の角速度センサ１２は水平方向検出用および垂直方向検出用のセンサを含み、撮像装置の振れについて角速度を検出する。制御部３は角速度センサ１２による検出信号に基づいてシフトレンズ駆動制御部２１ａ、２１ｂに制御指令を出し、防振制御を行う。
【００１４】
本実施形態の撮像装置の制御方法は、制御部３が撮像装置の駆動制御部および処理部を制御することにより実現され、撮像装置の機能はＣＰＵが解釈して実行するコンピュータプログラムにより実現される。コンピュータプログラムは読み取り可能な記録媒体により提供されるか、又は通信インタフェースを介してネットワーク通信により提供される。
【００１５】
次に、図１に示す撮像装置における自動焦点調節（ＡＦ）処理、自動露出（ＡＥ）処理、及びズーム駆動制御処理について説明する。
ユーザがシャッタレリーズスイッチ９を操作し、ＳＷ１のオン信号が制御部３に入力されると、制御部３はフォーカス駆動制御部２２ａ、２２ｂに指示してＡＦ処理を実行させる。制御部３から指示を受けたフォーカス駆動制御部２２ａ、２２ｂはフォーカスレンズ１６ａ、１６ｂをそれぞれ駆動する。また制御部３はシャッタ・絞り駆動制御部２０ａ、２０ｂに指示してＡＥ処理を実行させる。具体的には、シャッタ・絞り駆動制御部２０ａ、２０ｂがシャッタ・絞りユニット１４ａ、１４ｂをそれぞれ駆動して、露光量を適正値に設定する。
【００１６】
その後、ＳＷ２のオン信号が制御部３に入力されると、制御部３は撮像素子１７ａ、１７ｂに撮像を指示する。撮像素子１７ａ、１７ｂはそれぞれ受光した光像を電気信号に変換し、撮像信号処理部１８ａ、１８ｂは画像データをそれぞれ出力する。映像信号処理部４は、こられの画像データに基づいて表示部５に対して画像信号を出力する。表示部５における画像の表示形態には、例えば、撮像光学系１、２による撮影画像を画面上に分割して表示する形態がある。また、通常の状態では表示部５が第２撮像光学系２による映像を表示し、ＳＷ１のオン信号により制御部３が第１撮像光学系１による映像を、表示部５の表示画面の一部に表示させる形態等がある。表示方法については状況に応じて様々な方法を採用できる。
制御部３は、撮像信号処理部１８ａ、１８ｂが出力した各画像データや、映像信号処理部４が出力した画像データを記憶部１０に記憶させる。また、ユーザがズームスイッチ７を操作した場合の操作信号を制御部３が受け付けてズーム駆動制御部１９ａに指示を出す。ズーム駆動制御部１９ａは、制御部３から指示されたズーム位置へズームレンズ１３ａを移動させ、ズーム駆動制御を行う。
【００１７】
以下、図２のフローチャートを参照して、撮像装置の動作について説明する。
Ｓ１０１で制御部３はズームスイッチ７の検出を行う。ユーザがズームスイッチ７を操作した場合、Ｓ１０２に進み、ズームスイッチ７の操作が検出されない場合、Ｓ１０１の判定処理が繰り返される。
Ｓ１０２では、制御部３の制御指示により第１撮像光学系１のズームレンズ１３ａが駆動され、その焦点距離が変更される。そしてＳ１０３に進み、制御部３は映像信号処理部４に制御指令を出し、第１撮像光学系１の焦点距離に合わせて第２撮像光学系２による画像の切り出し枠を変更し、電子ズーム倍率を変更する。すなわち映像信号処理部４は、第１撮像光学系１の焦点距離が大きくなった場合には第２撮像光学系２による画像の切り出し枠を小さくして電子ズーム倍率を大きくする。逆に第１撮像光学系１の焦点距離が小さくなった場合には第２撮像光学系２による画像の切り出し枠を大きくして電子ズーム倍率を小さくする処理が行われる。このように第１撮像光学系１の焦点距離に合わせて第２撮像光学系２に係る電子ズームの倍率が変更される。この場合、第１撮像光学系１の画角に対して、予め設定された比率（例えば３倍）に相当する画角に合わせるというように、第２撮像光学系２に係る電子ズーム倍率を一定の割合で変更する制御形態を採用することができる。
【００１８】
図４（Ｂ）は本実施形態による画像例を示し、右側には第１撮像光学系１で撮像した第１画像を示し、左側には第２撮像光学系２で撮像した第２画像を示す。第２画像は電子ズーム処理で得られる倍率の撮影画像例を示しており、ユーザが被写体を十分に認識できる画角で画像が表示される。すなわち、図４（Ａ）に示す高倍率での超望遠撮影時にて、ワイド側光学系による画像ではユーザは被写体を認識しづらいが、図４（Ｂ）に示すようにワイド側の第２画像にて被写体像は適正な大きさで表示される。
Ｓ１０４で制御部３は電源部１１がＯＦＦ状態になったか否かを判定する。電源部１１がＯＮ状態の場合、Ｓ１０１に戻り、電源部１１がＯＦＦ状態の場合には処理が終了する。
【００１９】
第１実施形態によれば、複数の撮像光学系を有する撮像装置において、狭角側の撮像光学系に高倍率レンズを用いる場合でも、ユーザは広角側の撮像光学系による撮影画像を見て主被写体を容易に把握できる。すなわち、テレ側光学系が超望遠の時でもワイド側光学系の画角が常に適正に制御されるので、ワイド側の画像にて被写体像が見辛くならないように防止できる。
【００２０】
［第２実施形態］
次に本発明の第２実施形態を説明する。第２実施形態に係る撮像装置の構成は図１に示す構成と同じであるため、第１実施形態の説明に使用した符号を第２実施形態でも使用することにより各部の詳細な説明を省略する。
【００２１】
以下、図５のフローチャートを参照して、第２実施形態に係る撮像装置の動作について説明する。図２との相違点であるＳ２０３乃至２０７の処理を説明する。
Ｓ１０２の後、またはＳ１０１でズームスイッチ７の操作が検出されなかった場合、Ｓ２０３に進む。制御部３は撮像状態の変化について判定する。その結果、角速度センサ１２によって手ブレが検出された場合、Ｓ２０４に進む。また、動きベクトル検出部６によって撮像中に画像の動きが検出された場合、Ｓ２０５に進む。また、撮影対象として主要な被写体（主被写体）の動きが映像信号処理部４で検出された場合、Ｓ２０６に進む。なお、Ｓ２０３で撮影状態の変化が検出されない場合には、図２と同じになるので（Ｓ１０３参照）、その説明は省略する。
Ｓ２０４で制御部３は角速度センサ１２の検出信号を取得して手ブレ量を算出する。Ｓ２０５で動きベクトル検出部６は画像の動きベクトル量を算出し、制御部３は算出結果を取得する。なお、動きベクトル量の検出処理方法は既知であるため、その詳細な説明は省略する。Ｓ２０６で制御部３は主被写体像と第１撮像光学系１の画角枠との距離を算出する。すなわち制御部３は画像中の主被写体像が第１撮像光学系１の画角枠からどれだけ外れてしまったかを算出する。
【００２２】
ここで主被写体の特定処理について説明する。例えば、ユーザが画像表示部に設けたタッチパネルを操作することで主被写体を特定する方法がある。この方法では、ユーザが画像表示部を見ながら主被写体像を決定し、その位置でタッチパネルに触れることにより主被写体を選択する。この時の選択信号は制御部３に送られて主被写体の位置情報として使用される。また他の特定方法では、ユーザがＳＷ１の操作により合焦処理を撮像装置に指示し、制御部３は最も合焦評価値の高かった箇所を主被写体と認識し、主被写体像の画像パターンをメモリに記憶することで主被写体を特定する。なお、これら以外にも、顔検出や事前に登録された画像とのパターンマッチング処理によって主被写体を特定する方法がある。
Ｓ２０４乃至２０６により、手ブレや被写体ブレ、主被写体の移動等が検出される場合、テレ側光学系だけでなくワイド光学系の画角からも主被写体が外れてしまう可能性がある。そのため、Ｓ２０７で制御部３は映像信号処理部４に制御指令を送り、第１撮像光学系１の焦点距離に合わせて第２撮像光学系２による画像の切り出し枠を変更する際、主被写体が第２撮像光学系２の画角から外れないように電子ズーム倍率を変更する。例えば第１撮像光学系１の画角に対して通常はその３倍に設定されている第２撮像光学系２の画角を、３倍を超える比率（４倍等）に設定し、画角を広げる処理が行われる。つまり、ワイド側光学系の画角から主被写体が外れないように電子ズーム倍率が設定される。ここで、ワイド側光学系の画角を広げるための電子ズーム倍率の値については、Ｓ１０２で変更された第１撮像光学系１の焦点距離と共に、Ｓ２０４乃至２０６のいずれかで算出した量、またはそれらのうちの２以上の量を用いて算出される。
【００２３】
第２実施形態では、高倍率レンズを用いた第１撮像光学系の焦点距離が大きいために、それに合わせて第２撮像光学系の画角を変化させる制御を行う場合、第２撮像光学系の画角から主被写体が外れないように防止できる。よって、手ブレ等により、テレ側光学系の画角から主被写体が外れてしまった場合でも、ユーザはワイド側光学系の表示画像を見て主被写体の位置を確認できるので、容易にテレ側光学系にて主被写体にフレーミングを合わせることができる。
【００２４】
［第３実施形態］
次に本発明の第３実施形態を説明する。第３実施形態に係る撮像装置は、図６に示すように、第１撮像光学系１と第２撮像光学系２が同じ構成であり、いずれもズームレンズ（１３ａ、１３ｂ参照）およびズーム駆動制御部（１９ａ、１９ｂ参照）を有する。それ以外の構成については第１実施形態の場合と同様であるため、第１実施形態で使用した符号を第３実施形態でも使用することにより各部の詳細な説明を省略する。
第３実施形態に係る撮像装置の動作において、図２と相違する処理はＳ１０３である。ここで制御部３は第２撮像光学系２のズーム駆動制御部１９ｂに制御指令を出し、第１撮像光学系１の焦点距離に合わせて第２撮像光学系２の焦点距離を変更する。つまり、第１撮像光学系１の焦点距離が大きくなった場合には第２撮像光学系２の光学ズーム倍率を大きくし、逆に第１撮像光学系１の焦点距離が小さくなった場合には第２撮像光学系２の光学ズーム倍率を小さくする処理が行われる。
このように第３実施形態では、第１撮像光学系１の焦点距離に合わせて第２撮像光学系２に係る光学ズーム倍率が変更される。
【００２５】
［第４実施形態］
次に本発明の第４実施形態を説明する。第４実施形態に係る撮像装置は、図６に示す構成と同じであるため、第３実施形態で使用した符号を第４実施形態でも使用することにより各部の詳細な説明を省略する。
第４実施形態に係る撮像装置の動作において、図５と相違する処理はＳ２０７である。ここで制御部３は第２撮像光学系２のズーム駆動制御部１９ｂに制御指令を出し、第１撮像光学系１の焦点距離に合わせて第２撮像光学系２の焦点距離を変更する。つまり、第４本実施形態では第３実施形態と同様に、電子ズーム倍率の変更に代えて、第２撮像光学系２の光学ズーム倍率を変更する処理が行われる。この他、図５のＳ１０２で第１撮像光学系１の焦点距離が変更された場合、Ｓ２０７で第２撮像光学系２に係る電子ズーム倍率および光学ズーム倍率の両方を変更する形態も可能である。
【００２６】
以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。
【符号の説明】
【００２７】
１  第１撮像光学系
２  第２撮像光学系
３  制御部
４  映像信号処理部
５  表示部
６  動きベクトル検出部
１２  角速度センサ
１３ａ，１３ｂ  ズームレンズ
１７ａ，１７ｂ  撮像素子
１９ａ，１９ｂ  ズーム駆動制御部
【図１】
0005744527.tif 000002
【図２】
0005744527.tif 000003
【図３】
0005744527.tif 000004
【図４】
0005744527.tif 000005
【図５】
0005744527.tif 000006
【図６】
0005744527.tif 000007