(57)【要約】  【課題】ユーザの使用状況に応じた最適な画面表示が可能な撮像装置、表示制御方法及びプログラムを提供する。  【解決手段】まずスルー画像とＯＳＤとを重ねて表示する（ステップＳ１２、Ｓ１４）。現フレームと前フレームとを比較して画像全体が横方向又は縦方向に移動しているか、移動している場合には相関度を算出する（ステップＳ１６）。横方向又は縦方向の相関度が所定の閾値以上である場合（ステップＳ１８、Ｓ２０でＹＥＳ）には、パン又はチルトが行われている、すなわちフレーミングが行われている場合であり、ユーザに不要な表示であるＯＳＤを消去し、スルー画像のみを表示する（ステップＳ２２）。横方向又は縦方向の相関度が所定の閾値以上でない場合（ステップＳ２０でＮＯ）には、パン、チルトのいずれも行われていない撮影状態であり、スルー画像とＯＳＤとを重ねて表示する。【選択図】  図３
2010028273.tif 000002
【特許請求の範囲】
【請求項１】
被写体像を連続して撮像する撮像手段と、
前記撮像手段により連続して撮像された被写体像を連続して表示する表示手段と、
撮影者が構図を決定するフレーミング中か否かを検出する検出手段と、
前記検出手段によりフレーミング中であることが検出された場合には、前記撮像手段により撮像された被写体像のみを前記表示手段に表示し、前記検出手段によりフレーミング中であることが検出されなかった場合には、前記撮像手段により撮像された被写体像と、オンスクリーンディスプレイ情報（ＯＳＤ情報）とを合成して前記表示手段に表示する表示制御手段と、
を備えたことを特徴とする撮像装置。
【請求項２】
前記検出手段は、前記撮像装置が停止している場合又は前記撮像手段により連続して撮像された被写体像が停止している場合をフレーミング中として検出することを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記撮像手段により連続して撮像された被写体像のうちの前後の２枚の被写体像の相関度を算出する相関算出手段を備え、
前記検出手段は、前記相関算出手段により算出された相関度に基づいてフレーミング中か否か検出することを特徴とする請求項１又は２に記載の撮像装置。
【請求項４】
前記撮像装置の角速度を検出する角速度センサーを備え、
前記検出手段は、前記角速度センサーにより検出する角速度に基づいてフレーミング中か否か検出することを特徴とする請求項１又は２に記載の撮像装置。
【請求項５】
前記撮像手段により連続して撮像される被写体像のフレームレートを制御するフレームレート制御手段であって、前記検出手段によりフレーミング中であることが検出された場合には、前記検出手段によりフレーミング中であることが検出されなかった場合より高いフレームレートに設定するフレームレート制御手段を備えたことを特徴とする請求項１から４のいずれかに記載の撮像装置。
【請求項６】
前記検出手段によりフレーミング中であることが検出された場合に、前記撮像装置又は前記撮像手段により連続して撮像された被写体像の移動速度を算出する移動速度算出手段を備え、
前記フレームレート制御手段は、前記移動速度算出手段により算出された移動速度に基づいてフレームレートの設定を変更することを特徴とする請求項５に記載の撮像装置。
【請求項７】
前記撮像手段により連続して撮像された被写体像に基づいて流し撮りを検出する流し撮り検出手段を備え、
前記表示制御手段は、前記流し撮り検出手段により流し撮りが行われていることが検出された場合には、前記被写体像と前記ＯＳＤ情報とを合成して前記表示手段に表示し、前記流し撮り検出手段により流し撮りが行われていないことが検出された場合には、前記被写体像のみを前記表示手段に表示することを特徴とする請求項１から６のいずれかに記載の撮像装置。
【請求項８】
前記撮像手段により連続して撮像される被写体像のフレームレートを制御するフレームレート制御手段であって、前記流し撮り検出手段により流し撮りが行われていることが検出された場合には、前記流し撮り検出手段により流し撮りが行われていることが検出されなかった場合より高いフレームレートに設定するフレームレート制御手段を備えたことを特徴とする請求項７に記載の撮像装置。
【請求項９】
被写体像を連続して撮像するステップと、
前記連続して撮像された被写体像を連続して表示手段に表示するステップと、
撮影者が構図を決定するフレーミング中か否かを検出するステップと、
前記フレーミング中であることが検出された場合には、前記撮像された被写体像のみを前記表示手段に表示し、前記フレーミング中であることが検出されなかった場合には、前記撮像された被写体像と、オンスクリーンディスプレイ情報（ＯＳＤ情報）とを合成して前記表示手段に表示するステップと、
を含むことを特徴とする表示制御方法。
【請求項１０】
請求項９に記載の表示制御方法を演算装置に実行させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は撮像装置、表示制御方法及びプログラムに係り、特に撮像素子で撮像される画像をリアルタイムに表示（スルー画像の表示）する撮像装置、表示制御方法及びプログラムに関する。
【背景技術】
【０００２】
特許文献１には、パン操作、チルト操作が行われた場合に、パン操作、チルト操作による画像の移動量や、パン操作、チルト操作量が設定値を超えた場合には警告を画像と同時に表示することで、見づらい画像の撮像を軽減する撮像装置が記載されている。
【０００３】
特許文献２には、前フレームと現フレームの画像データの差分を基に被写体の動きの大きさを検出し、動きの大きさに応じてスルー画像のフレームレートを切り替えることで、被写体のフレーミングに支障をきたすことなく、電力消費を抑えることができる撮像装置が記載されている。
【特許文献１】特開２００６―２３７９２７号公報
【特許文献２】特開２００５―３１１６９９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１に記載された発明においては、移動量又は警告を表示するのみであり、撮影に必要な情報を撮影状況に応じて表示できるわけではないため、撮影の補助としての効果が薄いという問題がある。
【０００５】
また、特許文献２に記載された発明においては、被写体の動きによってフレームレートを切り替えているため、被写体は停止しているが画像は移動している流し撮りの場合などにフレームレートが低くなってしまい、被写体のフレーミングに支障をきたすという問題がある。
【０００６】
本発明はこのような事情に鑑みてなされたもので、撮影者の使用状況に応じた最適な画面表示が可能な撮像装置、表示制御方法及びプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
前記目的を達成するために、請求項１に記載の撮像装置は、被写体像を連続して撮像する撮像手段と、前記撮像手段により連続して撮像された被写体像を連続して表示する表示手段と、撮影者が構図を決定するフレーミング中か否かを検出する検出手段と、前記検出手段によりフレーミング中であることが検出された場合には、前記撮像手段により撮像された被写体像のみを前記表示手段に表示し、前記検出手段によりフレーミング中であることが検出されなかった場合には、前記撮像手段により撮像された被写体像と、オンスクリーンディスプレイ情報（ＯＳＤ情報）とを合成して前記表示手段に表示する表示制御手段と、を備えたことを特徴とする。
【０００８】
請求項１に記載の撮像装置によれば、フレーミング中であることが検出された場合、すなわち撮影者が構図を決定している場合には、撮像手段により撮像された被写体像（動画やスルー画像）のみを表示手段に表示し、フレーミング中であることが検出されなかった場合、すなわち撮影者が構図を決定している場合には、スルー画像とＯＳＤ情報とを合成して表示手段に表示する。これにより、フレーミング中、すなわち撮影者が撮影を行っていない場合には、撮影者によって不要な表示であるＯＳＤ表示を自動的に消去し、フレーミングを行いやすくすることができる。また、撮影時には必要な情報が表示されるため、撮影者に対する撮影補助を適切に行うことができる。
【０００９】
請求項２に記載の撮像装置は、請求項１に記載の撮像装置において、前記検出手段は、前記撮像装置が停止している場合又は前記撮像手段により連続して撮像された被写体像が停止している場合をフレーミング中として検出することを特徴とする。
【００１０】
請求項２に記載の撮像装置によれば、撮像装置又は連続して撮像された被写体像が停止している場合には、フレーミング中であることを検出する。これにより、フレーミング中か否かを確実に検出することができる。
【００１１】
請求項３に記載の撮像装置は、請求項１又は２に記載の撮像装置において、前記撮像手段により連続して撮像された被写体像のうちの前後の２枚の被写体像の相関度を算出する相関算出手段を備え、前記検出手段は、前記相関算出手段により算出された相関度に基づいてフレーミング中か否か検出することを特徴とする。
【００１２】
請求項３に記載の撮像装置によれば、現フレームと前フレームなどの前後の２枚の被写体像の相関度を算出し、相関度に基づいてフレーミング中か否かを検出する。これにより、特別な部品を用いることなくフレーミング中か否かを検出することができる。
【００１３】
請求項４に記載の撮像装置は、請求項１又は２に記載の撮像装置において、前記撮像装置の角速度を検出する角速度センサーを備え、前記検出手段は、前記角速度センサーにより検出する角速度に基づいてフレーミング中か否か検出することを特徴とする。
【００１４】
請求項４に記載の撮像装置によれば、角速度センサが検出する縦方向又は横方向の角速度に基づいてフレーミング中か否かを検出する。これにより、確実にフレーミング中か否かを検出することができる。
【００１５】
請求項５に記載の撮像装置は、請求項１から４のいずれかに記載の撮像装置において、前記撮像手段により連続して撮像される被写体像のフレームレートを制御するフレームレート制御手段であって、前記検出手段によりフレーミング中であることが検出された場合には、前記検出手段によりフレーミング中であることが検出されなかった場合より高いフレームレートに設定するフレームレート制御手段を備えたことを特徴とする。
【００１６】
請求項５に記載の撮像装置によれば、フレーミング中であることが検出された場合には、フレーミング中であることが検出されかった場合より高いフレームレートでスルー画像の撮影、表示を行う。これにより、フレーミング中に表示されるスルー画像の画質を向上させることができる。
【００１７】
請求項６に記載の撮像装置は、請求項５に記載の撮像装置において、前記検出手段によりフレーミング中であることが検出された場合に、前記撮像装置又は前記撮像手段により連続して撮像された被写体像の移動速度を算出する移動速度算出手段を備え、前記フレームレート制御手段は、前記移動速度算出手段により算出された移動速度に基づいてフレームレートの設定を変更することを特徴とする。
【００１８】
請求項６に記載の撮像装置によれば、撮像装置又は被写体像の移動速度に基づいてフレームレートの設定を変更する。例えば、被写体像の移動速度が速い場合には、被写体像の移動速度に合わせてフレームレートを高くし、被写体像の移動速度が遅い場合には、被写体像の移動速度が遅いためフレームレートを低くする。また、撮像装置の移動速度が速い場合は、被写体像の移動速度が速いことを意味するため、フレームレートを高くし、撮像装置の移動速度が遅い場合は、被写体像の移動速度が遅いことを意味するため、フレームレートを低くする。これにより、スルー画像の画質をより向上させることができる。
【００１９】
請求項７に記載の撮像装置は、請求項１から６のいずれかに記載の撮像装置において、前記撮像手段により連続して撮像された被写体像に基づいて流し撮りを検出する流し撮り検出手段を備え、前記表示制御手段は、前記流し撮り検出手段により流し撮りが行われていることが検出された場合には、前記被写体像と前記ＯＳＤ情報とを合成して前記表示手段に表示し、前記流し撮り検出手段により流し撮りが行われていないことが検出された場合には、前記被写体像のみを前記表示手段に表示することを特徴とする。
【００２０】
請求項７に記載の撮像装置によれば、流し撮りを検出し、流し撮りが行われていることが検出された場合にはスルー画像とＯＳＤ情報とを合成して表示する。また、流し撮りが行われていない場合にはＯＳＤ情報を消去し、スルー画像のみを表示する。これにより、流し撮り、すなわち撮影が行われている場合には、ＯＳＤ情報、すなわち撮影に必要な情報が表示されるため、撮影者に対する撮影補助を適切に行うことができる。
【００２１】
請求項８に記載の撮像装置は、請求項７に記載の撮像装置において、前記撮像手段により連続して撮像される被写体像のフレームレートを制御するフレームレート制御手段であって、前記流し撮り検出手段により流し撮りが行われていることが検出された場合には、前記流し撮り検出手段により流し撮りが行われていることが検出されなかった場合より高いフレームレートに設定するフレームレート制御手段を備えたことを特徴とする。
【００２２】
請求項８に記載の撮像装置によれば、流し撮りが行われていることが検出された場合には、流し撮りが行われていることが検出されなかった場合より高いフレームレートに設定する。これにより、画像がブレやすい流し撮りの場合のスルー画像の画質を向上させることができる。
【００２３】
請求項９に記載の表示制御方法は、被写体像を連続して撮像するステップと、前記連続して撮像された被写体像を連続して表示手段に表示するステップと、撮影者が構図を決定するフレーミング中か否かを検出するステップと、前記フレーミング中であることが検出された場合には、前記撮像された被写体像のみを前記表示手段に表示し、前記フレーミング中であることが検出されなかった場合には、前記撮像された被写体像と、オンスクリーンディスプレイ情報（ＯＳＤ情報）とを合成して前記表示手段に表示するステップと、を含むことを特徴とする。
【００２４】
請求項１０に記載のプログラムは、請求項９に記載の表示制御方法を演算装置に実行させることを特徴とする。
【発明の効果】
【００２５】
本発明によれば、撮影者の使用状況に応じた最適な画面表示をすることができる。
【発明を実施するための最良の形態】
【００２６】
以下、添付図面に従って本発明が適用された撮像装置、表示制御方法及びプログラムを実施するための最良の形態について詳細に説明する。
【００２７】
＜第１の実施の形態＞
本発明の第１の実施の形態は、撮像された被写体像のなかに動きのある被写体が１つ検出された場合に、被写体の動きに応じた最適なフレームレートでスルー画像を表示する形態である。
【００２８】
図１は第１の実施の形態の撮像装置のデジタルカメラ１の内部の電気的な概略構成を示すブロック図である。
【００２９】
図１に示すように、デジタルカメラ１は、主として、ＣＰＵ１１０、操作部１１１、レンズユニット１１２、撮像素子１１４、Ａ／Ｄ変換器１１６、画像入力制御部１１８、画像処理部１２０、メモリＩ／Ｆ（インターフェース）１２２、メモリ１２４、表示回路１２６、表示部１２８、メディアＩ／Ｆ（インターフェース）１３０、記録メディア１３２、ＤＭＡコントローラ１３４、マイク１３６、Ａ／Ｄ変換器１３８、音声入力部１４０、オーディオＩ／Ｆ（インターフェース）１４２、オーディオ出力部１４４、パン、チルト検出部１４６、ＯＳＤ（オンスクリーンディスプレイ）生成部１４８等で構成されている。
【００３０】
ＣＰＵ１１０は、操作部１１１から入力される操作信号に基づき所定の制御プログラムに従ってデジタルカメラ１の全体を統括制御する。
【００３１】
ＣＰＵ１１０はメモリ領域を含み、メモリ領域には、このＣＰＵ１１０が実行する制御プログラム及び制御に必要な各種データや、撮影者設定情報等のデジタルカメラ１の動作に関する各種設定情報等が格納されている。また、メモリ領域は、ＣＰＵ１１０の演算作業用領域として利用されるとともに、画像データ等の一時記憶領域として利用される。
【００３２】
ＣＰＵ１１０は、ＡＦ（自動合焦）検出回路を含み、ＡＦ検出回路は、Ｇ信号の高周波成分のみを通過させるハイパスフィルタ、絶対値化処理部、所定のフォーカスエリア（たとえば、画面中央部）内の信号を切り出すＡＦエリア検出部及びＡＦエリア内の絶対値データを積算する積算部から構成される。ＣＰＵ１１０は、ＡＦ制御時にはフォーカスレンズを至近から無限遠に対応するレンズ位置に順次移動させるとともに、レンズ位置毎に撮像素子１１４を介して取り込まれるＡＦエリアの画像信号に基づいて画像信号の高周波成分を積算した評価値を取得し、この評価値がピークとなるレンズ位置を求め、そのレンズ位置にレンズユニット１１２内のフォーカスレンズを移動させるコントラストＡＦを行う。
【００３３】
また、ＣＰＵ１１０は、ＡＥ（自動露出）検出回路を含み、ＡＥ検出回路は、入力された画像信号からＡＥ制御及びＡＷＢ（自動ホワイトバランス）制御に必要な物理量を算出する。たとえば、ＡＥ制御に必要な物理量として、１画面を複数のエリア（たとえば１６×１６）に分割し、分割したエリアごとにＲ、Ｇ、Ｂの画像信号の積算値を算出する。
【００３４】
操作部１１１は、シャッターボタン、電源／モードスイッチ、ズームボタン等により構成される。
【００３５】
シャッターボタンは、いわゆる「半押し」と「全押し」とからなる２段ストローク式のスイッチで構成されている。デジタルカメラ１は、このシャッターボタンが「半押し」されることにより、ＡＥ／ＡＦが作動し、「全押し」されることにより、撮影を実行する。
【００３６】
電源／モードスイッチは、デジタルカメラ１の電源をＯＮ／ＯＦＦする電源スイッチとしての機能と、デジタルカメラ１のモードを設定するモードスイッチとしての機能とを併せ持っており、「ＯＦＦ位置」と「再生位置」と「撮影位置」との間をスライド自在に配設されている。デジタルカメラ１は、電源／モードスイッチをスライドさせて、「再生位置」又は「撮影位置」に合わせることにより、電源がＯＮになり、「ＯＦＦ位置」に合わせることにより、電源がＯＦＦになる。そして、電源／モードスイッチをスライドさせて、「再生位置」に合わせることにより、「再生モード」に設定され、「撮影位置」に合わせることにより、「撮影モード」に設定される。
【００３７】
ズームボタンは、ズームを指示するズーム指示手段として機能し、望遠側へのズームを指示するズームテレボタンと、広角側へのズームを指示するズームワイドボタンとからなる。撮影モード時にズームテレボタンとズームワイドボタンとが操作されると、ＣＰＵ１１０は、レンズユニット１１２内のズームレンズを移動し、焦点距離を変化させる。
【００３８】
レンズユニット１１２は、ズームレンズ、フォーカスレンズ、絞りなどで構成され、撮像素子に被写体像を結像させる。
【００３９】
撮像素子１１４は、たとえば、所定の配列構造（ベイヤー、Ｇストライプなど）で配列された赤（Ｒ）、緑（Ｇ）、青（Ｂ）のカラーフィルタを介して多数のフォトダイオード（受光素子）が受光面に二次元的に配置されており、レンズユニット１１２によって結像された被写体の画像を電子的に撮像する。撮像素子１１４は、ＣＰＵ１１０からの指令に応じてタイミング信号を出力するタイミングジェネレータ（ＴＧ）により駆動される。
【００４０】
Ａ／Ｄ変換器１１６はアナログ処理部を含み、アナログ処理部は、撮像素子１１４から出力された画像信号に対して、画素ごとのＲ、Ｇ、Ｂ信号をサンプリングホールド（相関二重サンプリング処理）するとともに、増幅し、アナログのＲ、Ｇ、Ｂ信号をデジタルのＲ、Ｇ、Ｂ信号に変換して出力する。
【００４１】
画像入力制御部１１８は、Ａ／Ｄ変換器１１６から出力されたデジタルのＲ、Ｇ、Ｂ信号を画像処理部１２０に出力する。
【００４２】
画像処理部１２０は、同時化回路（単板ＣＣＤのカラーフィルタ配列に伴う色信号の空間的なズレを補間して色信号を同時式に変換する処理回路）、ホワイトバランス補正回路、ガンマ補正回路、輪郭補正回路、輝度・色差信号生成回路等を含み、ＣＰＵ１１０からの指令に従い、入力された画像信号に所要の信号処理を施して、輝度データ（Ｙデータ）と色差データ（Ｃｒ，Ｃｂデータ）とからなる画像データ（ＹＵＶデータ）を生成する。
【００４３】
また、画像処理部１２０は、ＣＰＵ１１０からの指令に従い、入力された画像データに所定形式の圧縮処理を施し、圧縮画像データを生成する。また、ＣＰＵ１１０からの指令に従い、入力された圧縮画像データに所定形式の伸張処理を施し、非圧縮の画像データを生成する。
【００４４】
また、画像処理部１２０は、現フレーム画像と前フレーム画像との相関度を演算する。例えば、画像処理部１２０は、現フレーム画像全体が前フレーム画像に対して横方向又は縦方向に移動しているときの移動量を横方向又は縦方向の相関度として算出する。算出された相関度は、画像処理部１２０からパン、チルト検出部１４６へ出力する。
【００４５】
メモリＩ／Ｆ１２２は、画像処理部１２０から出力されたデジタルのＲ、Ｇ、Ｂ信号をメモリ１２４に出力する。メモリ１２４に記憶された撮像信号は、バスを介して表示回路１２６、メディアＩ／Ｆ１３０等に送られる。
【００４６】
表示回路１２６は、ＣＰＵ１１０からの指令に従い、表示部１２８への表示を制御する。すなわち、ＣＰＵ１１０からの指令に従い、入力された画像信号を表示部１２８に表示するための映像信号（たとえば、ＮＴＳＣ信号やＰＡＬ信号、ＳＣＡＭ信号）に変換して表示部１２８に出力するとともに、必要に応じてＣＰＵ１１０で合成された、所定の文字、図形情報を表示部１２８に出力する。
【００４７】
表示部１２８は、カラー表示が可能な液晶ディスプレイで構成されている。この表示部１２８は、再生モード時に撮影済み画像を表示するための画像表示パネルとして利用されるとともに、各種設定操作を行なう際の撮影者インターフェース表示パネルとして利用される。また、撮影モード時には、必要に応じてスルー画像が表示されて、画角確認用の電子ファインダとして利用される。
【００４８】
メディアＩ／Ｆ１３０は、ＣＰＵ１１０からの指令に従い、メディアスロットに装填された記録メディア１３２に対してデータの読み／書きを制御する。
【００４９】
ＤＭＡコントローラ１３４は、ＣＰＵ１１０からの指令に従い、記録メディア１３２内部のデータを読み取り、バスを介してメモリ１２４へ画像を転送する。逆に、メモリ１２４内部のデータを読み取り、バスを介して記録メディア１３２へ転送する。
【００５０】
マイク１３６は、集音した音声を電気信号に変換し、Ａ／Ｄ変換器１３８に出力する。
【００５１】
Ａ／Ｄ変換器１３８は、マイク１３６から入力された音声信号をデジタル信号に変換（Ａ／Ｄ変換）した、音声入力部１４０に出力する。
【００５２】
音声入力部１４０は、入力されたデジタル信号に対して所要の信号処理を行い、所定形式の音声データに変換する。音声入力部１４０で処理された音声データは、バス、オーディオＩ／Ｆ１４２を介してオーディオ出力部１４４から出力される。
【００５３】
パン、チルト検出部１４６は、画像処理部１２０から出力された相関度に基づいて、デジタルカメラ１が水平移動（パン）又は垂直移動（チルト）されたか、すなわち撮影者がパン又はチルト操作をしたかどうかを判別する。例えば、パン、チルト検出部１４６は、横方向の相関度が所定の閾値以上である場合には、撮影者によりパン操作が行われていると判断し、縦方向の相関度が所定の閾値以上である場合には、撮影者によりチルト操作が行われていると判断する。すなわち、パン、チルト検出部１４６は、撮影者が構図を決定するフレーミングが行われていると判断する。
【００５４】
ＯＳＤ生成部１４８は、シャッター速度、絞り値、残り撮影可能枚数、ホワイトバランスモード、感度、撮影日時、撮影モード、警告メッセージ、グラフィカル撮影者インターフェイス（ＧＵＩ）等の文字及び記号情報（ＯＳＤ情報）を表示するための信号を表示回路１２６に出力する。ＯＳＤ生成部１４８から出力される信号は、必要に応じて画像処理部１２０からの画像信号に混合されて、表示部１２８に供給される。これにより、図２に示すように、撮影時に必要なＯＳＤ情報がスルー画像と合成して表示される（ＯＳＤ表示）。
【００５５】
次に、以上のように構成された本実施の形態のデジタルカメラ１の作用について説明する。
【００５６】
図３は、撮影準備段階におけるデジタルカメラ１の処理の流れを示すフローチャートである。
【００５７】
まず、ＣＰＵ１１０は、デジタルカメラ１が撮影モードに設定されているかどうかを判断する（ステップＳ１０）。撮影モードは、電源／モードスイッチを撮影位置に合わせることにより設定される。デジタルカメラ１が撮影モードに設定されると、レンズユニット１１２が繰り出され、撮影スタンバイ状態になる。
【００５８】
デジタルカメラ１が撮影モードに設定されていない場合（ステップＳ１０でＮＯ）には、処理を終了し、デジタルカメラ１が撮影モードに設定されている場合（ステップＳ１０でＹＥＳ）には、以下の示す方法により、表示部１２８にスルー画像を表示する（ステップＳ１２）。
【００５９】
撮影モードの下、レンズユニットを通過した被写体光は、絞り（図示せず）を介して撮像素子１１４の受光面に結像される。レンズユニットを通過した被写体光は、各フォトダイオードによって受光され、入射光量に応じた量の信号電荷に変換される。
【００６０】
各フォトダイオードに蓄積された信号電荷は、タイミングジェネレータ（図示せず）から与えられる駆動パルスに基づいて信号電荷に応じた電圧信号（画像信号）として順次読み出され、Ａ／Ｄ変換器１１６でデジタルのＲ、Ｇ、Ｂ信号に変換され、画像入力制御部１１８を介して画像処理部１２０に加えられる。
【００６１】
ＣＰＵ１１０は、タイミングジェネレータに指令を出し、所定のフレームレートで撮像素子１１４を駆動することにより連続的に画像が撮像され、その画像信号が画像処理部１２０で連続的に処理されて、スルー画像用の画像データが連続的に生成される。この画像データは、画像処理部１２０から順次表示回路１２６に加えられ、表示用の信号形式に変換されて、表示部１２８に出力される。これにより、表示部１２８にスルー画像が表示される。
【００６２】
それと共に、表示回路１２６は、ＯＳＤ生成部１４８から出力された信号に基づいてＯＳＤ用のデータを生成し、画像処理部１２０から出力された画像信号と混合して表示部１２８に出力する。これにより、表示部１２８にＯＳＤがスルー画像に重ねて表示される（ステップＳ１４）。
【００６３】
画像処理部１２０は、スルー画像用の画像データを連続的に生成するのと同時に、現フレーム（最後に生成された画像データ）と、前フレーム（現フレームの１つ前に生成された画像データ）とを比較して相関度を算出する（ステップＳ１６）。
【００６４】
パン、チルト検出部１４６は、ステップＳ１６において算出された相関度に基づいて、画像全体が横方向に移動しているかどうか、すなわち横方向の相関度が所定の閾値以上であるかどうかを判断する（ステップＳ１８）。
【００６５】
横方向の相関度が所定の閾値以上である場合（ステップＳ１８でＹＥＳ）には、パン、チルト検出部１４６は、パン操作が行われている、すなわちフレーミング中であると判断し、判断結果をＣＰＵ１１０に出力する。ＣＰＵ１１０はＯＳＤ生成部１４８にＯＳＤ表示を消去するように指示し、ＯＳＤ生成部は表示回路１２６への信号の出力を止め、表示回路１２６は画像処理部１２０から出力された画像信号のみを表示部１２８に出力する。これにより、表示部１２８からＯＳＤ表示が消去され、表示部１２８にはスルー画像のみが表示される（ステップＳ２２）。
【００６６】
横方向の相関度が所定の閾値以上でない場合（ステップＳ１８でＮＯ）には、パン、チルト検出部１４６は、画像全体が縦方向に移動しているかどうか、すなわち縦方向の相関度が所定の閾値以上であるかどうかを判断する（ステップＳ２０）。
【００６７】
縦方向の相関度が所定の閾値以上である場合（ステップＳ２０でＹＥＳ）には、パン、チルト検出部１４６は、チルト操作が行われている、すなわちフレーミング中であると判断し、判断結果をＣＰＵ１１０に出力する。ＣＰＵ１１０はＯＳＤ生成部１４８にＯＳＤ表示を消去するように指示し、ＯＳＤ生成部は表示回路１２６への信号の出力を止め、表示回路１２６は画像処理部１２０から出力された画像信号のみを表示部１２８に出力する。これにより、表示部１２８からＯＳＤが消去され、スルー画像のみが表示される（ステップＳ２２）。
【００６８】
これにより、パン又はチルト操作が行われている場合にはＯＳＤ表示を行わないようにすることができる。撮影者がパン又はチルト操作を行っている場合には、撮影のためのフレーミングを行っているときであり、すぐに撮影するわけではないため、シャッター速度等の撮影における情報は必要ない。そのため、撮影者に不要な表示であるＯＳＤ表示を消去することで、撮影者のフレーミング操作を容易にすることができる。
【００６９】
縦方向の相関度が所定の閾値以上でない場合（ステップＳ２０でＮＯ）には、パン、チルト検出部１４６は、パン操作、チルト操作のいずれも行われていないと判断し、判断結果をＣＰＵ１１０に出力する。この場合には、ＣＰＵ１１０は、ＯＳＤ生成部１４８に指示を出力せず、処理を終了する。したがって、パン操作、チルト操作のいずれも行われていない場合には、表示部１２８の表示は変更されない、すなわち表示部１２８にはスルー画像の表示とＯＳＤ表示とが行われる。このように、通常の撮影準備状態においては、撮影を行うのに必要な情報を表示することができる。
【００７０】
これにより、撮影準備段階における処理が終了する。撮影者は、表示部１２８に表示されたスルー画像やＯＳＤ表示を確認しながら画角を決定し、撮影動作を行う。
【００７１】
撮影はシャッターボタンの押下によって行なわれる。シャッターボタンが半押しされると、Ｓ１ＯＮ信号がＣＰＵ１１０に入力される。
【００７２】
ＣＰＵ１１０は、算出された積算値のデータに基づいてレンズユニット１１２内のフォーカスレンズを移動させながら、複数のＡＦ検出ポイントで焦点評価値（ＡＦ評価値）を演算し、評価値が極大となるレンズ位置を合焦位置として決定する。そして、求めた合焦位置にフォーカスレンズを移動する。
【００７３】
ＣＰＵ１１０は、算出された積算値に基づいて被写体の明るさ（被写体輝度）を検出し、撮影に適した露出値（撮影ＥＶ値）を算出する。そして、求めた撮影ＥＶ値と所定のプログラム線図から絞り値とシャッタースピードを決定し、これに従い撮像素子１１４の電子シャッターを制御して（いわゆる電子シャッター）適正な露光量を得る。
【００７４】
また、ＣＰＵ１１０は、自動ホワイトバランス調整時、分割エリアごとにＲ、Ｇ、Ｂ信号の色別の平均積算値を算出し、その算出結果をＣＰＵ１１０に提供する。
【００７５】
ＣＰＵ１１０は、得られたＲの積算値、Ｂの積算値、Ｇの積算値から分割エリアごとにＲ／Ｇ及びＢ／Ｇの比を求め、求めたＲ／Ｇ、Ｂ／Ｇの値のＲ／Ｇ、Ｂ／Ｇの色空間における分布等に基づいて光源種判別を行う。そして、判別された光源種に適したホワイトバランス調整値に従って、たとえば、各比の値がおよそ１（つまり、１画面においてＲＧＢの積算比率がＲ：Ｇ：Ｂ≒１：１：１）になるように、ホワイトバランス調整回路のＲ、Ｇ、Ｂ信号に対するゲイン値（ホワイトバランス補正値）を制御し、各色チャンネルの信号に補正をかける。
【００７６】
以上のように、シャッターボタンの半押しによって、ＡＥ／ＡＦ処理及びＡＷＢ処理が行なわれる。この間、撮影者は、必要に応じてズームボタンを操作し、レンズユニット１１２をズーミングさせて画角を調整し、ＣＰＵ１１０は、ＡＥ／ＡＦ処理及びＡＷＢ処理を継続して行う。
【００７７】
この後、シャッターボタンが全押しされると、ＣＰＵ１１０にＳ２ＯＮ信号が入力され、ＣＰＵ１１０は、撮影、記録処理を開始する。シャッター測光結果に基づき決定されたシャッター速度、絞り値で撮像素子１１４を露光する。
【００７８】
撮像素子１１４から出力された画像信号は、Ａ／Ｄ変換器１１６、画像入力制御部１１８を介して画像処理部１２０に取り込まれ、画像処理部１２０において輝度／色差信号に変換されたのち、メモリ１２４に格納される。
【００７９】
メモリ１２４に格納された画像データは、画像処理部１２０に加えられ、所定の圧縮フォーマット（たとえばＪＰＥＧ形式）に従って圧縮された後、メモリ１２４に格納され、所定の画像記録フォーマット（たとえばＥｘｉｆ形式）の画像ファイルとされたのち、メディアＩ／Ｆ１３０を介して記録メディア１３２に記録される。
【００８０】
本実施の形態によれば、フレーミング中など撮影者にとってＯＳＤ表示が必要ないと考えられる場合に、撮影者に不要な表示を自動的に消去することができる。これにより、撮影者のフレーミング操作を容易にすることができる。
【００８１】
また、本実施の形態によれば、フレーミング中でない場合など撮影者にとってＯＳＤ表示が必要であると考えられる場合に、ＯＳＤ表示を自動的に行うことができる。これにより、撮影を補助し、その結果撮影者の希望に沿った画像を撮影することができる。
【００８２】
なお、本実施の形態では、現フレームの画像データと前フレームとの画像データを比較して相関度を算出したが、比較する画像データは現フレームと前フレームという連続した画像データに限らず、前フレームの画像データと２フレーム前の画像データとを比較してもよいし、現フレームの画像データと数フレーム前の画像データなど前後に取得された２枚の画像データを比較することにより、相関度を算出することができる。
【００８３】
なお、スルー画像撮影、再生中、すなわちＳ１がＯＮされるまでは、ステップＳ１６〜Ｓ２２の処理を繰り返すようにすると、そのときの状況に合わせてＯＳＤ表示のＯＮ／ＯＦＦを切り替えることができるため、より効果的である。
【００８４】
なお、本実施の形態は、スルー画像の撮影、再生のみでなく、動画の撮影にも適用することができる。
【００８５】
＜第２の実施の形態＞
本発明の第１の実施の形態は、画像処理部において、現フレーム画像と前フレーム画像との相関度を演算し、パン、チルト検出部はその結果に基づいてパン又はチルト操作が行われているか、すなわちフレーミング中か否かを判断したが、パン、チルト検出部がフレーミング中か否かを判断する方法はこれに限らない。
【００８６】
本発明の第２の実施の形態は、角速度センサーを用いてフレーミング中か否かを判断する形態である。以下、本発明の第２の実施の形態のデジタルカメラ２について説明する。なお、第１の実施の形態と同一の部分については、同一の符号を付し、説明を省略する。
【００８７】
図４は第２の実施の形態の撮像装置のデジタルカメラ２の内部の電気的な概略構成を示すブロック図である。
【００８８】
図４に示すように、デジタルカメラ２は、主として、ＣＰＵ１１０、操作部１１１、レンズユニット１１２、撮像素子１１４、Ａ／Ｄ変換器１１６、画像入力制御部１１８、画像処理部１２０、メモリＩ／Ｆ（インターフェース）１２２、メモリ１２４、表示回路１２６、表示部１２８、メディアＩ／Ｆ（インターフェース）１３０、記録メディア１３２、ＤＭＡコントローラ１３４、マイク１３６、Ａ／Ｄ変換器１３８、音声入力部１４０、オーディオＩ／Ｆ（インターフェース）１４２、オーディオ出力部１４４、ＯＳＤ（オンスクリーンディスプレイ）生成部１４８、角速度センサー１５０、パン、チルト検出部１５２等で構成されている。
【００８９】
角速度センサー１５０は、例えばジャイロセンサであり、デジタルカメラ２の縦方向及び横方向の角速度を検出する。検出結果はパン、チルト検出部１５２へ出力される。
【００９０】
パン、チルト検出部１５２は、角速度センサー１５０から出力された縦方向及び横方向の角速度に基づいて、水平移動（パン操作）あるいは垂直移動（チルト）が行われたかどうかを判別する。例えば、パン、チルト検出部１５２は、横方向の角速度が所定の閾値以上である場合にはパン操作が行われていると判断し、縦方向の角速度が所定の閾値以上である場合には、チルトが行われていると判断する。すなわち、パン、チルト検出部１５２は、撮影者が構図を決定するフレーミングが行われていると判断する。
【００９１】
次に、以上のように構成された本実施の形態のデジタルカメラ２の作用について説明する。
【００９２】
図５は、撮影準備段階におけるデジタルカメラ２の処理の流れを示すフローチャートである。
【００９３】
まず、ＣＰＵ１１０は、デジタルカメラ１が撮影モードに設定されているかどうかを判断する（ステップＳ１０）。デジタルカメラ１が撮影モードに設定されていない場合（ステップＳ１０でＮＯ）には、処理を終了し、デジタルカメラ１が撮影モードに設定されている場合（ステップＳ１０でＹＥＳ）には、表示部１２８にスルー画像を表示する（ステップＳ１２）。
【００９４】
それと共に、表示回路１２６は、ＯＳＤ生成部１４８から出力された信号に基づいてＯＳＤ用のデータを生成し、画像処理部１２０から出力された画像信号と混合して表示部１２８に出力する。これにより、表示部１２８にＯＳＤがスルー画像に重ねて表示される（ステップＳ１４）。
【００９５】
パン、チルト検出部１５２は、角速度センサー１５０から出力された角速度の情報に基づいてパン操作が行われているかどうかを判断する（ステップＳ２４）。
【００９６】
パン操作が行われている、すなわちフレーミング中であるとパン、チルト検出部１５２が判断した場合（ステップＳ２４でＹＥＳ）には、パン、チルト検出部１５２は判断結果をＣＰＵ１１０に出力し、ＯＳＤ生成部１４８にＯＳＤ表示を消去するように指示する。ＯＳＤ生成部１４８は、表示回路１２６への信号の出力を止め、表示回路１２６は画像処理部１２０から出力された画像信号のみを表示部１２８に出力する。これにより、表示部１２８からＯＳＤが消去され、スルー画像のみが表示される（ステップＳ２８）。
【００９７】
パン操作が行われていないとパン、チルト検出部１５２が判断した場合（ステップＳ２４でＮＯ）には、パン、チルト検出部１５２は、角速度センサー１５０から出力された角速度の情報に基づいてチルトが行われているかどうかを判断する（ステップＳ２６）。
【００９８】
チルト操作が行われている、すなわちフレーミング中であるとパン、チルト検出部１５２が判断した場合（ステップＳ２６でＹＥＳ）には、パン、チルト検出部１５２は判断結果をＣＰＵ１１０に出力し、ＯＳＤ生成部１４８にＯＳＤ表示を消去するように指示する。ＯＳＤ生成部１４８は、表示回路１２６への信号の出力を止め、表示回路１２６は画像処理部１２０から出力された画像信号のみを表示部１２８に出力する。これにより、表示部１２８からＯＳＤが消去され、スルー画像のみが表示される（ステップＳ２８）。
【００９９】
これにより、パン又はチルト操作が行われている場合にはＯＳＤ表示を行わないようにすることができる。撮影者がパン又はチルト操作を行っている場合には、撮影のためのフレーミングを行っているときであり、すぐに撮影するわけではないため、シャッター速度等の撮影における情報は必要ない。そのため、撮影者に不要な表示であるＯＳＤ表示を消去することで、撮影者のフレーミング操作を容易にすることができる。
【０１００】
チルトが行われていないとパン、チルト検出部１５２が判断した場合（ステップＳ２６でＮＯ）には、パン、チルト検出部１４６は、パン操作、チルト操作のいずれも行われていない、すなわちフレーミング中ではないという判断結果をＣＰＵ１１０に出力する。この場合には、ＣＰＵ１１０は、ＯＳＤ生成部１４８に指示を出力せず、処理を終了する。したがって、パン操作、チルト操作のいずれも行われていない場合には、表示部１２８には、ＯＳＤがスルー画像に重ねて表示される。このように、通常の撮影時には、撮影するための様々な情報を表示することができる。
【０１０１】
これにより、撮影準備段階における処理が終了する。撮影者は、表示部１２８に表示されたスルー画像やＯＳＤを確認しながら画角を決定し、撮影を行う。撮影、記録処理は第１の実施の形態と同様であるため、説明を省略する。
【０１０２】
本実施の形態によれば、角速度センサーを用いることで、フレーミング中か否かの判断を確実に行うことができる。
【０１０３】
なお、本実施の形態では、角速度センサー１５０でデジタルカメラ２の縦方向及び横方向の角速度を検出したが、縦方向の角速度検出用の角速度センサーと、横方向の角速度検出用の角速度センサーとの２個以上の角速度センサーを用いるようにしてもよい。また、角速度センサーに限らず、パン操作、チルト操作の検出が可能な様々なセンサーを用いることができる。
【０１０４】
なお、スルー画像撮影、再生中、すなわちＳ１がＯＮされるまでは、ステップＳ２４〜Ｓ２８の処理を繰り返すようにすると、そのときの状況に合わせてＯＳＤ表示のＯＮ／ＯＦＦを切り替えることができるため、より効果的である。
【０１０５】
なお、本実施の形態は、スルー画像の撮影、再生のみでなく、動画の撮影にも適用することができる。
【０１０６】
＜第３の実施の形態＞
本発明の第１の実施の形態及び第２の実施の形態は、パン又はチルト操作が行われている場合には、フレーミング中であり撮影をすぐに行う状態ではないため、撮影者にとって不要なＯＳＤ表示を自動的に消去し、撮影者のフレーミング操作を容易にする形態であるが、撮影者のフレーミング操作を容易にする方法はこれに限らない。
【０１０７】
本発明の第３の実施の形態は、パン操作、チルト操作の有無などに応じてフレームレートの切り替えを行うことで、撮影者のフレーミング操作を容易にする形態である。以下、本発明の第３の実施の形態のデジタルカメラ３について説明する。なお、第１の実施の形態と同一の部分については、同一の符号を付し、説明を省略する。
【０１０８】
図６は第３の実施の形態の撮像装置のデジタルカメラ３の内部の電気的な概略構成を示すブロック図である。
【０１０９】
図６に示すように、デジタルカメラ３は、主として、ＣＰＵ１１０、操作部１１１、レンズユニット１１２、撮像素子１１４、Ａ／Ｄ変換器１１６、画像入力制御部１１８、画像処理部１２０、メモリＩ／Ｆ（インターフェース）１２２、メモリ１２４、表示回路１２６、表示部１２８、メディアＩ／Ｆ（インターフェース）１３０、記録メディア１３２、ＤＭＡコントローラ１３４、マイク１３６、Ａ／Ｄ変換器１３８、音声入力部１４０、オーディオＩ／Ｆ（インターフェース）１４２、オーディオ出力部１４４、パン、チルト検出部１４６、ＯＳＤ（オンスクリーンディスプレイ）生成部１４８、フレームレート制御部１５４等で構成されている。
【０１１０】
フレームレート制御部１５４は、ＣＰＵ１１０からの指令に従い、スルー画像のフレームレートを制御する。フレームレート制御部１５４には、パン操作、チルト操作による画像の移動量に応じたフレームレートを選択できるように、予め複数のフレームレート移動量と関連付けて記憶されている。フレームレート制御部１５４で設定されたフレームレートの情報は、ＣＰＵ１１０及び表示回路１２６に出力される。
【０１１１】
次に、以上のように構成された本実施の形態のデジタルカメラ３の作用について説明する。
【０１１２】
図７は、撮影準備段階におけるデジタルカメラ３の処理の流れを示すフローチャートである。
【０１１３】
まず、ＣＰＵ１１０は、デジタルカメラ１が撮影モードに設定されているかどうかを判断する（ステップＳ１０）。デジタルカメラ１が撮影モードに設定されていない場合（ステップＳ１０でＮＯ）には、処理を終了し、デジタルカメラ１が撮影モードに設定されている場合（ステップＳ１０でＹＥＳ）には、表示部１２８にスルー画像を表示する（ステップＳ１２）。
【０１１４】
それと共に、表示回路１２６は、ＯＳＤ生成部１４８から出力された信号に基づいてＯＳＤ用のデータを生成し、画像処理部１２０から出力された画像信号と混合して表示部１２８に出力する。これにより、表示部１２８にＯＳＤがスルー画像に重ねて表示される（ステップＳ１４）。
【０１１５】
画像処理部１２０は、スルー画像用の画像データを連続的に生成するのと同時に、現フレーム（最後に生成された画像データ）と、前フレーム（現フレームの１つ前に生成された画像データ）とを比較して相関度を算出する（ステップＳ１６）。
【０１１６】
パン、チルト検出部１４６は、ステップＳ１６において算出された相関度に基づいて、画像全体が横方向に移動しているかどうか、すなわち横方向の相関度が所定の閾値以上であるかどうかを判断する（ステップＳ１８）。
【０１１７】
横方向の相関度が所定の閾値以上である場合（ステップＳ１８でＹＥＳ）には、後に詳述する移動量を判断するステップ（ステップＳ３０）に進む。
【０１１８】
横方向の相関度が所定の閾値以上でない場合（ステップＳ１８でＮＯ）には、パン、チルト検出部１４６は、画像全体が縦方向に移動しているかどうか、すなわち縦方向の相関度が所定の閾値以上であるかどうかを判断する（ステップＳ２０）。
【０１１９】
縦方向の相関度が所定の閾値以上である場合（ステップＳ２０でＹＥＳ）には、移動量を判断するステップ（ステップＳ３０）に進む。
【０１２０】
移動量を判断するステップ（ステップＳ３０）では、ＣＰＵ１１０は、パン、チルト検出部１４６から入力された相関度、すなわち現フレーム画像全体が前フレーム画像に対して横方向又は縦方向に移動しているときの移動量が所定の閾値より大きいかどうかを判断する（ステップＳ３０）。
【０１２１】
相関度が所定の閾値より大きい場合（ステップＳ３０でＹＥＳ）には、パン、チルト検出部１４６は、パン操作、チルト操作が行われており、すなわちフレーミング中であり、それによる画像の移動量が大きい場合であると判断し、判断結果をＣＰＵ１１０に出力する。ＣＰＵ１１０は、その結果をフレームレート制御部１５４に出力し、フレームレート制御部１５４は、スルー画像のフレームレートを移動量が大きい場合のフレームレート、すなわち高いフレームレート（例えば６０ｆ／ｓ）に設定し、ＣＰＵ１１０及び表示回路１２６に出力する。
【０１２２】
ＣＰＵ１１０は、フレームレート制御部１５４で設定された移動量が大きい場合のフレームレートで撮像素子１１４を駆動し、撮像素子１１４から画像信号を定期的に取り込む。画像処理部１２０は取り込まれた画像信号より輝度／色差信号を生成し、表示回路１２６は輝度／色差信号を表示用の信号形式に変換して表示部１２８に出力する。その結果、移動量が大きい場合のフレームレートでスルー画像の撮影及び表示が行われる（ステップＳ３２）。
【０１２３】
相関度が所定の閾値より大きくない場合（ステップＳ３０でＮＯ）には、パン、チルト検出部１４６は、パン操作、チルト操作が行われており、すなわちフレーミング中であるが、それによる画像の移動量が小さい場合であると判断し、判断結果をＣＰＵ１１０に出力する。ＣＰＵ１１０は、その結果をフレームレート制御部１５４に出力し、フレームレート制御部１５４は、スルー画像のフレームレートを移動量が小さい場合のフレームレート、すなわち標準のフレームレート（例えば３０ｆ／ｓ）に設定し、ＣＰＵ１１０及び表示回路１２６に出力する。
【０１２４】
ＣＰＵ１１０は、フレームレート制御部１５４で設定された移動量が小さい場合のフレームレートで撮像素子１１４を駆動し、撮像素子１１４から画像信号を定期的に取り込む。画像処理部１２０は取り込まれた画像信号より輝度／色差信号を生成し、表示回路１２６は輝度／色差信号を表示用の信号形式に変換して表示部１２８に出力する。その結果、移動量が小さい場合のフレームレートでスルー画像の撮影及び表示が行われる（ステップＳ３４）。
【０１２５】
これにより、フレーミング中であると判断した場合には、スルー画像のフレームレートを、画面の移動速度に応じた最適なフレームレートに設定することができる。そのため、撮影者のフレーミング操作を容易にすることができる。
【０１２６】
縦方向の相関度が所定の閾値以上でない場合（ステップＳ２０でＮＯ）には、パン、チルト検出部１４６は、パン操作、チルト操作のいずれも行われていない、すなわちフレーミング中ではないと判断し、判断結果をＣＰＵ１１０に出力する。この場合には、ＣＰＵ１１０は、パン操作、チルト操作のいずれも行われていないという結果をフレームレート制御部１５４に出力し、フレームレート制御部１５４は、スルー画像のフレームレートをパン操作、チルト操作のいずれも行われていない場合のフレームレート、すなわち低いフレームレート（例えば１５ｆ／ｓ）に設定し、ＣＰＵ１１０及び表示回路１２６に出力する。
【０１２７】
ＣＰＵ１１０は、フレームレート制御部１５４で設定された移動量が小さい場合のフレームレートで撮像素子１１４を駆動し、撮像素子１１４から画像信号を定期的に取り込む。画像処理部１２０は取り込まれた画像信号より輝度／色差信号を生成し、表示回路１２６は輝度／色差信号を表示用の信号形式に変換して表示部１２８に出力する。その結果、パン操作、チルト操作のいずれも行われていない場合のフレームレートでスルー画像の撮影及び表示が行われる（ステップＳ３６）。
【０１２８】
これにより、撮影準備段階における処理が終了する。撮影者は、表示部１２８に表示されたスルー画像やＯＳＤを確認しながら画角を決定し、撮影を行う。撮影、記録処理は第１の実施の形態と同様であるため、説明を省略する。
【０１２９】
本実施の形態によれば、画面の移動量に基づいてスルー画像の取得、表示のフレームレートを切り替えることで、画面の移動量に応じた適切なフレームレートでスルー画像を表示することができる。従来は、フレーミング中であっても、画面の移動量（移動速度）によっては、画面の表示が流れてフレーミングが行いにくくなるという問題がある。それに対し、本実施の形態では、画面の移動量に応じたフレームレートに設定するため、スルー画像の画質を向上させることで、このような不具合を解消することができる。
【０１３０】
また、本実施の形態によれば、撮影者のフレーミング操作に支障をきたすことなく、消費電力を下げることができる。一般的には、フレームレートは消費電力との相関があることから、撮影動作に入っていない時や省電力モードではフレームレートを落とすシステムが多く採用されている。このようなシステムにおいては、フレーミング中でない場合にもフレームレートが低くなることにより、画面の表示が流れてフレーミングが行いにくくなる。それに対し、本実施の形態では、フレーミング中でない場合のみフレームレートを下げることにより、このような問題点を解消することができる。
【０１３１】
なお、本実施の形態では、パン操作、チルト操作が行われている場合に、画像の移動量に応じて２段階に分けてフレームレートの設定を行った（ステップＳ３２〜Ｓ３６）、もっと細かく分けてフレームレートを設定しても良い。
【０１３２】
また、本実施の形態では、画像の移動量に基づいてフレームレートを変えたが、角速度センサーなどによりデジタルカメラ３の角速度を検出し、角速度に基づいてフレームレートを変えるようにしてもよい。例えば、角速度と画像の移動量とは、被写体距離をパラメータとして所定の関係を有していると考えられる。したがって、角速度と被写体距離とフレームレートとを関係付けておき、角速度と被写体距離とを取得し、それに応じたフレームレートを設定するようにすればよい。要は、画像の移動量に応じたフレームレートに設定できるのであればどのような方法を用いてもよい。
【０１３３】
また、本実施の形態では、フレームレートを設定したところで処理を終了したが、スルー画像撮影、再生中、すなわちＳ１がＯＮされるまでは、ステップＳ１６〜Ｓ３６の処理を繰り返すようにしてもよい。これにより、画面全体の動きが遅くなったり止まったりした場合にはフレームレートを自動的に下げ、画面全体の動きが早くなった場合にはフレームレートを高くすることができる。
【０１３４】
なお、本実施の形態は、第１の実施の形態又は第２の実施の形態と併せて実施するとより効果的である。
【０１３５】
＜第４の実施の形態＞
本発明の第１の実施の形態及び第２の実施の形態は、パン又はチルト操作が行われている場合、すなわちフレーミング中であるには、撮影をすぐに行う状態ではないため、撮影者にとって不要なＯＳＤ表示を自動的に消去し、撮影者のフレーミング操作を容易にする形態であるが、撮影者のフレーミング操作を容易にする方法はこれに限らない。
【０１３６】
本発明の第４の実施の形態は、パン操作、チルト操作の有無に加え、流し撮りの有無に応じてＯＳＤ表示の切り替えを行うことで、撮影者のフレーミング操作を容易にする形態である。以下、本発明の第４の実施の形態のデジタルカメラ４について説明する。なお、第１の実施の形態と同一の部分については、同一の符号を付し、説明を省略する。
【０１３７】
図８は第４の実施の形態の撮像装置のデジタルカメラ４の内部の電気的な概略構成を示すブロック図である。
【０１３８】
図８に示すように、デジタルカメラ４は、主として、ＣＰＵ１１０、操作部１１１、レンズユニット１１２、撮像素子１１４、Ａ／Ｄ変換器１１６、画像入力制御部１１８、画像処理部１２０、メモリＩ／Ｆ（インターフェース）１２２、メモリ１２４、表示回路１２６、表示部１２８、メディアＩ／Ｆ（インターフェース）１３０、記録メディア１３２、ＤＭＡコントローラ１３４、マイク１３６、Ａ／Ｄ変換器１３８、音声入力部１４０、オーディオＩ／Ｆ（インターフェース）１４２、オーディオ出力部１４４、パン、チルト検出部１４６、ＯＳＤ（オンスクリーンディスプレイ）生成部１４８、流し撮り検出部１５６等で構成されている。
【０１３９】
画像処理部１２０は、現フレーム画像と前フレーム画像とから主要被写体を検出する。例えば、画像処理部１２０は、画面中央の所定の領域からそれぞれ特徴点を抽出し、対応する特徴点がある場合にはそれを主要被写体としてもよいし、顔を検出し、検出された顔を主要被写体としてもよいし、画面中央の所定の領域自体を主要被写体としてもよい。そして、画像処理部１２０は、現フレーム画像と前フレーム画像とを主要被写体とそれ以外の領域とに分離し、それぞれ現フレーム画像のそれぞれの領域が前フレーム画像のそれぞれの領域に対して横方向又は縦方向に移動しているかを検出し、移動している場合にはその移動量を算出する。検出された結果及び算出された移動量は、画像処理部１２０から流し撮り検出部１５６へ出力される。
【０１４０】
流し撮り検出部１５６は、画像処理部１２０から出力された結果に基づいて、撮影者が流し撮りを行っているかどうかを判断する。例えば、主要被写体が移動せず、その他の領域のみが横方向又は縦方向、又は横方向及び縦方向に移動している場合には、流し撮り検出部１５６は、撮影者により流し撮りが行われていると判断する。
【０１４１】
次に、以上のように構成された本実施の形態のデジタルカメラ４の作用について説明する。
【０１４２】
図９は、撮影準備段階におけるデジタルカメラ４の処理の流れを示すフローチャートである。
【０１４３】
まず、ＣＰＵ１１０は、デジタルカメラ１が撮影モードに設定されているかどうかを判断する（ステップＳ１０）。デジタルカメラ１が撮影モードに設定されていない場合（ステップＳ１０でＮＯ）には、処理を終了し、デジタルカメラ１が撮影モードに設定されている場合（ステップＳ１０でＹＥＳ）には、表示部１２８にスルー画像を表示する（ステップＳ１２）。
【０１４４】
それと共に、表示回路１２６は、ＯＳＤ生成部１４８から出力された信号に基づいてＯＳＤ用のデータを生成し、画像処理部１２０から出力された画像信号と混合して表示部１２８に出力する。これにより、表示部１２８にＯＳＤがスルー画像に重ねて表示される（ステップＳ１４）。
【０１４５】
画像処理部１２０は、スルー画像用の画像データを連続的に生成するのと同時に、現フレーム（最後に生成された画像データ）と、前フレーム（現フレームの１つ前に生成された画像データ）とを比較して相関度を算出する（ステップＳ１６）。
【０１４６】
パン、チルト検出部１４６は、ステップＳ１６において算出された相関度に基づいて、画像全体が横方向に移動しているかどうか、すなわち横方向の相関度が所定の閾値以上であるかどうかを判断する（ステップＳ１８）。
【０１４７】
横方向の相関度が所定の閾値以上である場合（ステップＳ１８でＹＥＳ）には、後に詳述する流し撮りを判別するステップ（ステップＳ３８）に進む。
【０１４８】
横方向の相関度が所定の閾値以上でない場合（ステップＳ１８でＮＯ）には、パン、チルト検出部１４６は、画像全体が縦方向に移動しているかどうか、すなわち縦方向の相関度が所定の閾値以上であるかどうかを判断する（ステップＳ２０）。
【０１４９】
縦方向の相関度が所定の閾値以上である場合（ステップＳ２０でＹＥＳ）には、流し撮りを判別するステップ（ステップＳ３８）に進む。
【０１５０】
流し撮りを判別するステップ（ステップＳ３８）において、流し撮り検出部１５６は、画像処理部１２０から出力された結果に基づいて流し撮りが行われているかどうかを判断する。
【０１５１】
画面全体は横方向又は縦方向に移動しているが主要被写体は停止している場合、すなわち流し撮りが行われている場合（ステップＳ３８でＹＥＳ）には、流し撮り検出部１５６は、流し撮りが行われているという判断結果をＣＰＵ１１０に出力する。この場合には、ＣＰＵ１１０は、ＯＳＤ生成部１４８に指示を出力せず、処理を終了する。すなわち、表示部１２８にはスルー画像の表示とＯＳＤ表示とが行われる。これにより、流し撮りが行われている、すなわちフレーミングではなく撮影が行われている場合には、撮影するための様々な情報を表示することができる。
【０１５２】
画面全体は横方向又は縦方向に移動しており、かつ主被写体もその他の領域と同様に横方向又は縦方向に移動している場合、すなわち流し撮りが行われていない場合（ステップＳ３８でＹＥＳ）には、流し撮り検出部１５６は、流し撮りが行われていないという判断結果をＣＰＵ１１０に出力する。ＣＰＵ１１０は、ＯＳＤ生成部１４８にＯＳＤ表示を消去するように指示し、ＯＳＤ生成部は表示回路１２６への信号の出力を止め、表示回路１２６は画像処理部１２０から出力された画像信号のみを表示部１２８に出力する。これにより、流し撮りが行われていない、すなわちパン又はチルト操作が行われている場合には、フレーミングを行っている場合であり、すぐに撮影を行う場合では無いため、表示部１２８からＯＳＤ表示を消去し、スルー画像のみを表示する（ステップＳ４０）。
【０１５３】
縦方向の相関度が所定の閾値以上でない場合（ステップＳ２０でＮＯ）には、パン、チルト検出部１４６は、パン操作、チルト操作のいずれも行われていない、すなわちフレーミング中ではないと判断し、判断結果をＣＰＵ１１０に出力する。この場合には、ＣＰＵ１１０は、ＯＳＤ生成部１４８に指示を出力せず、処理を終了する。したがって、パン操作、チルト操作のいずれも行われていない場合には、表示部１２８には、ＯＳＤがスルー画像に重ねて表示される。このように、通常の撮影時には、撮影するための様々な情報を表示することができる。
【０１５４】
これにより、撮影準備段階における処理が終了する。撮影者は、表示部１２８に表示されたスルー画像やＯＳＤを確認しながら画角を決定し、撮影動作を行う。
【０１５５】
本実施の形態によれば、画面が横方向又は縦方向に移動している場合であっても、主要被写体を観察して流し撮りであると判断したときにはＯＳＤ表示を消去しないため、撮影者は必要な撮影情報を見ながら撮影することができる。
【０１５６】
なお、本実施の形態では、画像処理部１２０で算出された相関度に基づいてパン操作、チルト操作の判断を行ったが、第２の実施の形態と同様、角速度センサーを設け、その検出結果に基づいてパン操作、チルト操作の判断を行なってもよい。
【０１５７】
なお、スルー画像撮影、再生中、すなわちＳ１がＯＮされるまでは、ステップＳ１６〜Ｓ４２の処理を繰り返すようにすると、そのときの状況に合わせてＯＳＤ表示のＯＮ／ＯＦＦを切り替えることができるため、より効果的である。
【０１５８】
なお、本実施の形態は、スルー画像の撮影、再生のみでなく、動画の撮影にも適用することができる。
【０１５９】
＜第５の実施の形態＞
本発明の第４の実施の形態は、流し撮りが行われ散る場合には、撮影を行っている状態であるため、撮影者にとって必要なＯＳＤ表示を表示する形態であるが、撮影者のフレーミング操作を容易にする方法はこれに限らない。
【０１６０】
本発明の第５の実施の形態は、流し撮りの有無に応じてフレームレートの切り替えを行う形態である。以下、本発明の第５の実施の形態のデジタルカメラ５について説明する。なお、第３の実施の形態及び第４の実施の形態と同一の部分については、同一の符号を付し、説明を省略する。
【０１６１】
図１０は第５の実施の形態の撮像装置のデジタルカメラ４の内部の電気的な概略構成を示すブロック図である。
【０１６２】
図１０に示すように、デジタルカメラ５は、主として、ＣＰＵ１１０、操作部１１１、レンズユニット１１２、撮像素子１１４、Ａ／Ｄ変換器１１６、画像入力制御部１１８、画像処理部１２０、メモリＩ／Ｆ（インターフェース）１２２、メモリ１２４、表示回路１２６、表示部１２８、メディアＩ／Ｆ（インターフェース）１３０、記録メディア１３２、ＤＭＡコントローラ１３４、マイク１３６、Ａ／Ｄ変換器１３８、音声入力部１４０、オーディオＩ／Ｆ（インターフェース）１４２、オーディオ出力部１４４、パン、チルト検出部１４６、ＯＳＤ（オンスクリーンディスプレイ）生成部１４８、フレームレート制御部１５４、流し撮り検出部１５６等で構成されている。
【０１６３】
次に、以上のように構成された本実施の形態のデジタルカメラ４の作用について説明する。
【０１６４】
図１１は、撮影準備段階におけるデジタルカメラ５の処理の流れを示すフローチャートである。
【０１６５】
まず、ＣＰＵ１１０は、デジタルカメラ１が撮影モードに設定されているかどうかを判断する（ステップＳ１０）。デジタルカメラ１が撮影モードに設定されていない場合（ステップＳ１０でＮＯ）には、処理を終了し、デジタルカメラ１が撮影モードに設定されている場合（ステップＳ１０でＹＥＳ）には、表示部１２８にスルー画像を表示する（ステップＳ１２）。
【０１６６】
それと共に、表示回路１２６は、ＯＳＤ生成部１４８から出力された信号に基づいてＯＳＤ用のデータを生成し、画像処理部１２０から出力された画像信号と混合して表示部１２８に出力する。これにより、表示部１２８にＯＳＤがスルー画像に重ねて表示される（ステップＳ１４）。
【０１６７】
画像処理部１２０は、スルー画像用の画像データを連続的に生成するのと同時に、現フレーム（最後に生成された画像データ）と、前フレーム（現フレームの１つ前に生成された画像データ）とを比較して相関度を算出する（ステップＳ１６）。
【０１６８】
パン、チルト検出部１４６は、ステップＳ１６において算出された相関度に基づいて、画像全体が横方向に移動しているかどうか、すなわち横方向の相関度が所定の閾値以上であるかどうかを判断する（ステップＳ１８）。
【０１６９】
横方向の相関度が所定の閾値以上である場合（ステップＳ１８でＹＥＳ）には、流し撮りを判別するステップ（ステップＳ３８）に進む。
【０１７０】
横方向の相関度が所定の閾値以上でない場合（ステップＳ１８でＮＯ）には、パン、チルト検出部１４６は、画像全体が縦方向に移動しているかどうか、すなわち縦方向の相関度が所定の閾値以上であるかどうかを判断する（ステップＳ２０）。
【０１７１】
縦方向の相関度が所定の閾値以上である場合（ステップＳ２０でＹＥＳ）には、流し撮りを判別するステップ（ステップＳ３８）に進む。
【０１７２】
流し撮りを判別するステップ（ステップＳ３８）において、流し撮り検出部１５６は、画像処理部１２０から出力された結果に基づいて流し撮りが行われているかどうかを判断する。
【０１７３】
画面全体は横方向又は縦方向に移動しているが主要被写体は停止している場合、すなわち流し撮りが行われている場合（ステップＳ３８でＹＥＳ）には、流し撮り検出部１５６は、流し撮りが行われているという判断結果をＣＰＵ１１０に出力する。この場合には、ＣＰＵ１１０は、流し撮りが行われているという判断結果をフレームレート制御部１５４に出力し、フレームレート制御部１５４は、スルー画像のフレームレートを流し撮り用フレームレート、すなわち高いフレームレート（例えば６０ｆ／ｓ）に設定し、ＣＰＵ１１０及び表示回路１２６に出力する。
【０１７４】
ＣＰＵ１１０は、フレームレート制御部１５４で設定された流し撮り用のフレームレートで撮像素子１１４を駆動し、撮像素子１１４から画像信号を定期的に取り込む。画像処理部１２０は取り込まれた画像信号より輝度／色差信号を生成し、表示回路１２６は輝度／色差信号を表示用の信号形式に変換して表示部１２８に出力する。その結果、流し撮り用のフレームレートでスルー画像の撮影及び表示が行われる（ステップＳ４４）。
【０１７５】
これにより、流し撮りが行われている、すなわちフレーミングではなく撮影が行われている場合には、フレームレートをあげ、スルー画像の画質を向上させることができる。
【０１７６】
画面全体は横方向又は縦方向に移動しており、かつ主被写体もその他の領域と同様に横方向又は縦方向に移動している場合、すなわち流し撮りが行われておらずフレーミング中である場合（ステップＳ３８でＹＥＳ）には、流し撮り検出部１５６は、流し撮りが行われていないという判断結果をＣＰＵ１１０に出力する。この場合には、ＣＰＵ１１０は、流し撮りが行われていないという判断結果をフレームレート制御部１５４に出力し、フレームレート制御部１５４は、スルー画像のフレームレートを、すなわち標準のフレームレート（例えば３０ｆ／ｓ）に設定し、ＣＰＵ１１０及び表示回路１２６に出力する。
【０１７７】
ＣＰＵ１１０は、フレームレート制御部１５４で設定された通常のフレームレートで撮像素子１１４を駆動し、撮像素子１１４から画像信号を定期的に取り込む。画像処理部１２０は取り込まれた画像信号より輝度／色差信号を生成し、表示回路１２６は輝度／色差信号を表示用の信号形式に変換して表示部１２８に出力する。その結果、通常のフレームレートでスルー画像の撮影及び表示が行われる（ステップＳ４６）。
【０１７８】
縦方向の相関度が所定の閾値以上でない場合（ステップＳ２０でＮＯ）には、パン、チルト検出部１４６は、パン操作、チルト操作のいずれも行われていないと判断し、判断結果をＣＰＵ１１０に出力する。この場合には、ＣＰＵ１１０は、パン操作、チルト操作のいずれも行われていないという結果をフレームレート制御部１５４に出力し、フレームレート制御部１５４は、スルー画像のフレームレートをパン操作、チルト操作のいずれも行われていない場合のフレームレート、すなわち低いフレームレート（例えば１５ｆ／ｓ）に設定し、ＣＰＵ１１０及び表示回路１２６に出力する。
【０１７９】
ＣＰＵ１１０は、フレームレート制御部１５４で設定された移動量が小さい場合のフレームレートで撮像素子１１４を駆動し、撮像素子１１４から画像信号を定期的に取り込む。画像処理部１２０は取り込まれた画像信号より輝度／色差信号を生成し、表示回路１２６は輝度／色差信号を表示用の信号形式に変換して表示部１２８に出力する。その結果、パン操作、チルト操作のいずれも行われていない場合のフレームレートでスルー画像の撮影及び表示が行われる（ステップＳ３６）。
【０１８０】
これにより、撮影準備段階における処理が終了する。撮影者は、表示部１２８に表示されたスルー画像やＯＳＤ表示を確認しながら画角を決定し、撮影動作を行う。
【０１８１】
本実施の形態によれば、流し撮りの有無に基づいてスルー画像の取得、表示のフレームレートを切り替えることで、流し撮りに適した高いフレームレートでスルー画像を表示することができる。流し撮りの場合には、フレームレートが低くて画像がぶれてしまう場合には、撮影の判断ができず、シャッターチャンスを逃してしまうという問題がある。それに対し、本実施の形態では、流し撮りの場合にはフレームレートを高くするし、スルー画像の画質を向上させることで、このような不具合を解消することができる。
【０１８２】
また、本実施の形態によれば、撮影者のフレーミング操作に支障をきたすことなく、消費電力を下げることができる。一般的には、フレームレートは消費電力との相関があることから、撮影動作に入っていない時や省電力モードではフレームレートを落とすシステムが多く採用されている。このようなシステムにおいては、流し撮りが行われている場合にもフレームレートが低くなることにより、画面の表示が流れて撮影の判断ができない。それに対し、本実施の形態では、流し撮りが行われていない場合のみフレームレートを下げることにより、このような問題点を解消することができる。
【０１８３】
また、本実施の形態では、フレームレートを設定したところで処理を終了したが、スルー画像撮影、再生中、すなわちＳ１がＯＮされるまでは、ステップＳ１６〜Ｓ４６の処理を繰り返すようにしてもよい。これにより、画面全体の動きが遅くなったり止まったりした場合にはフレームレートを自動的に下げ、画面全体の動きが早くなった場合にはフレームレートを高くすることができる。
【０１８４】
なお、本実施の形態は、第４の実施の形態と併せて実施するとより効果的である。
【０１８５】
なお、本発明の適用は、デジタルカメラに限定されるものではなく、カメラつき携帯電話機やビデオカメラ等の撮像装置にも同様に適用することができる。また、デジタルカメラなどの装置に適用するプログラムとして提供することもできる。
【図面の簡単な説明】
【０１８６】
【図１】本発明が適用されたデジタルカメラ１の電気的構成を示すブロック図である。
【図２】上記デジタルカメラ１のＯＳＤの表示例である。
【図３】上記デジタルカメラ１の撮影準備処理の流れを示すフローチャートである。
【図４】本発明が適用されたデジタルカメラ２の電気的構成を示すブロック図である。
【図５】上記デジタルカメラ２の撮影準備処理の流れを示すフローチャートである。
【図６】本発明が適用されたデジタルカメラ３の電気的構成を示すブロック図である。
【図７】上記デジタルカメラ３の撮影準備処理の流れを示すフローチャートである。
【図８】本発明が適用されたデジタルカメラ４の電気的構成を示すブロック図である。
【図９】上記デジタルカメラ４の撮影準備処理の流れを示すフローチャートである。
【図１０】本発明が適用されたデジタルカメラ５の電気的構成を示すブロック図である。
【図１１】上記デジタルカメラ５の撮影準備処理の流れを示すフローチャートである。
【符号の説明】
【０１８７】
１、２、３、４、５：デジタルカメラ、１１０：ＣＰＵ、１１１：操作部、１１２：レンズユニット、１１４：撮像素子、１１６：Ａ／Ｄ変換器、１１８：画像入力制御部、１２０：画像処理部、１２２：メモリＩ／Ｆ、１２４：メモリ、１２６：表示回路、１２８：表示部、１３０：メディアＩ／Ｆ、１３２：記録メディア、１３４：ＤＭＡコントローラ、１３６：マイク、１３８：Ａ／Ｄ変換器、１４０：音声入力部、１４２：オーディオＩ／Ｆ、１４４：オーディオ出力部、１４６、１５２：パン、チルト検出部、１４８：ＯＳＤ生成部、１５０：角速度センサー、１５４：フレームレート制御部、１５６：流し撮り検出部
【図１】
2010028273.tif 000003
【図２】
2010028273.tif 000004
【図３】
2010028273.tif 000005
【図４】
2010028273.tif 000006
【図５】
2010028273.tif 000007
【図６】
2010028273.tif 000008
【図７】
2010028273.tif 000009
【図８】
2010028273.tif 000010
【図９】
2010028273.tif 000011
【図１０】
2010028273.tif 000012
【図１１】
2010028273.tif 000013