(57)【要約】【課題】スロー表示において、被写体に適した表示フレームレートを自動で設定すること。【解決手段】撮像装置１は、所定の撮像フレームレートで画像データを取得する撮像手段１２と、撮像手段１２により取得された複数の画像データを記憶手段１５に逐次記憶させる記憶制御手段１４と、記憶手段１５に記憶された画像データを、撮像フレームレートより低い表示フレームレートで表示手段１８にスロー表示する表示制御手段１４と、周囲の音を集音する集音手段１６と、集音手段１６で集音された音を解析する解析手段１４と、解析手段１４による解析結果に基づいて、表示制御手段１４によるスロー表示の表示フレームレートを設定する設定手段１４と、を備えることを特徴とする。【選択図】図１
2014086868.tif 000002
【特許請求の範囲】
【請求項１】
所定の撮像フレームレートで画像データを取得する撮像手段と、
前記撮像手段により取得された複数の画像データを記憶手段に逐次記憶させる記憶制御手段と、
前記記憶手段に記憶された画像データを、前記撮像フレームレートより低い表示フレームレートで表示手段にスロー表示する表示制御手段と、
周囲の音を集音する集音手段と、
前記集音手段で集音された音を解析する解析手段と、
前記解析手段による解析結果に基づいて、前記表示制御手段によるスロー表示の表示フレームレートを設定する設定手段と、
を備えることを特徴とする撮像装置。
【請求項２】
請求項１に記載の撮像装置において、
画像の記録を指示する指示手段と、
前記指示手段による指示が行われると、当該指示タイミングにおいて前記表示手段に表示されていた画像データを記録媒体に記録する記録制御手段と、
をさらに備えることを特徴とする撮像装置。
【請求項３】
請求項１または２に記載の撮像装置において、
前記設定手段により設定されるスロー表示の表示フレームレートは、前記集音手段で集音された音の種別に応じた表示フレームレートであることを特徴とする撮像装置。
【請求項４】
請求項１〜３のいずれか一項に記載の撮像装置において、
前記解析手段は、前記解析により、前記集音手段で集音された音の変化速度を算出し、
前記設定手段は、前記解析手段により算出された前記音の変化速度に応じて、前記表示制御手段によるスロー表示の表示フレームレートを設定することを特徴とする撮像装置。
【請求項５】
請求項１〜４のいずれか一項に記載の撮像装置において、
前記設定手段は、前記解析手段による解析結果と前記撮像手段による撮像倍率とに基づいて、前記表示制御手段によるスロー表示の表示フレームレートを設定することを特徴とする撮像装置。
【請求項６】
請求項１〜５のいずれか一項に記載の撮像装置において、
前記解析手段は、前記解析により、前記集音手段で集音された音が所定の条件を満たすか否かを判定し、
前記表示制御手段は、前記解析手段により前記集音手段で集音された音が所定の条件を満たすと判定された時点を基準とした所定期間内に前記撮像手段により取得された画像データをスロー表示することを特徴とする撮像装置。
【請求項７】
撮像手段により所定の撮像フレームレートで画像データを取得する撮像処理と、
前記撮像手段により取得した複数の画像データを記憶手段に逐次記憶させる記憶制御処理と、
前記記憶手段に記憶された画像データを、前記撮像フレームレートより低い表示フレームレートで表示手段にスロー表示する表示制御処理と、
周囲の音を集音する集音手段により集音された音を解析する解析処理と、
前記解析処理による解析結果に基づいて、前記表示制御処理によるスロー表示の表示フレームレートを設定する設定処理と、
をコンピュータに実行させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置およびプログラムに関する。
【背景技術】
【０００２】
シャッターボタンが半押し操作されると、所定の撮像フレームレートで撮像素子に繰り返し撮像させ、バッファメモリに複数の画像を記憶し、記憶した複数の画像を撮像フレームレートよりも低いフレームレートで読み出して繰り返し表示部にスロー表示する撮像装置が知られている（特許文献１参照)。この撮像装置では、ユーザがスロー表示を見ながら所望のタイミングでシャッターボタンを全押し操作することで、当該操作時点でスロー表示されていた画像を記録することができる。このようなスロー表示機能は、動きの速い被写体であってもユーザが適切にシャッターチャンスを捉えることができるように設けられている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特許第４４４９９７３号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
上記従来技術では、スロー表示スピード（すなわちスロー表示における表示フレームレート）をユーザが予め手動で設定しなければならない。そのため、被写体の変化速度に対して、設定したスロー表示スピードが速すぎたり遅すぎたりする場合がある。このような場合には、ユーザはスロー表示を確認しても適切にシャッターチャンスを捉えることができないという問題があった。
【課題を解決するための手段】
【０００５】
（１）請求項１に記載の発明による撮像装置は、所定の撮像フレームレートで画像データを取得する撮像手段と、撮像手段により取得された複数の画像データを記憶手段に逐次記憶させる記憶制御手段と、記憶手段に記憶された画像データを、撮像フレームレートより低い表示フレームレートで表示手段にスロー表示する表示制御手段と、周囲の音を集音する集音手段と、集音手段で集音された音を解析する解析手段と、解析手段による解析結果に基づいて、表示制御手段によるスロー表示の表示フレームレートを設定する設定手段と、を備えることを特徴とする。
（２）請求項７に記載の発明によるプログラムは、撮像手段により所定の撮像フレームレートで画像データを取得する撮像処理と、撮像手段により取得した複数の画像データを記憶手段に逐次記憶させる記憶制御処理と、記憶手段に記憶された画像データを、撮像フレームレートより低い表示フレームレートで表示手段にスロー表示する表示制御処理と、周囲の音を集音する集音手段で集音された音を解析する解析処理と、解析処理による解析結果に基づいて、表示制御処理によるスロー表示の表示フレームレートを設定する設定処理と、をコンピュータに実行させることを特徴とする。
【発明の効果】
【０００６】
本発明によれば、スロー表示において、被写体に適した表示フレームレートを自動で設定することができる。
【図面の簡単な説明】
【０００７】
【図１】本発明の一実施の形態によるデジタルカメラの構成例を説明するブロック図である。
【図２】第１の実施の形態のスロービューモードの概要を説明する図である。
【図３】テーブル情報を説明する図である。
【図４】第１の実施の形態のスロービューモードにおける処理の流れを説明するフローチャートである。
【図５】第２の実施の形態のスロービューモードの概要を説明する図である。
【図６】第２の実施の形態のスロービューモードにおける処理の流れを説明するフローチャートである。
【図７】プログラムの提供の様子を説明する図である。
【発明を実施するための形態】
【０００８】
−第１の実施の形態−
図面を参照して本発明の第１の実施の形態について説明する。図１は、第１の実施の形態におけるデジタルカメラ１の構成を示すブロック図である。デジタルカメラ１は、撮像光学系１１と、撮像素子１２と、レンズ駆動回路１３と、制御部１４と、バッファメモリ１５と、マイク１６と、操作部１７と、表示部１８とを備えている。デジタルカメラ１には、例えばメモリカードなどの記録媒体１９が着脱可能である。
【０００９】
撮像光学系１１は、ズームレンズやフォーカシングレンズを含む複数のレンズ群で構成され、被写体像を撮像素子１２の受光面に結像させる。なお、図１を簡単にするため、撮像光学系１１を単レンズとして図示している。
【００１０】
レンズ駆動回路１３は、制御部１４の制御のもと、撮像光学系１１のズームレンズを駆動して焦点距離を調節するとともに、撮像光学系１１のフォーカシングレンズを駆動して焦点調節を行う。
【００１１】
撮像素子１２は、例えばＣＣＤイメージセンサやＣＭＯＳイメージセンサなどで構成され、撮像光学系１１により結像した被写体像を撮像して、得られた画像信号を制御部１４へ出力する。
【００１２】
制御部１４は、ＣＰＵおよびその他の周辺回路等により構成され、デジタルカメラ１全体の制御を行う。制御部１４は、撮像素子１２から取得した画像信号から画像データを生成する。バッファメモリ１５は、撮像素子１２からの画像信号を基に取得される画像データを一時記憶するために使用される。
【００１３】
マイク１６は、デジタルカメラ１の周囲の音声を集音して音声信号に変換する。マイク１６から出力される音声信号は、不図示のアンプにより増幅された後に不図示のＡ／Ｄ変換部によりデジタル信号（音声データ）に変換されて、制御部１４に入力される。
【００１４】
操作部１７は、ユーザによって操作される種々の入力部材、例えば、モード切替ボタン、シャッターボタン、録画ボタン、十字キー、決定ボタンなどにより構成される。操作部１７は、各ボタンが押下操作されると、各操作に応じた操作信号を制御部１４へ出力する。
【００１５】
表示部１８は、デジタルカメラ１の背面に搭載された液晶モニタ（背面モニタ）等で構成され、撮像素子１２で撮像された画像や各種設定メニューなどが表示される。
【００１６】
制御部１４は、操作部１７からの操作信号に応じて撮影モードに設定されると、撮像素子１２から時系列で取得した画像信号からフレーム画像データを生成して表示部１８に出力する。これによって表示部１８にはスルー画が表示される。また制御部１４は、シャッターボタンが全押し操作されると、撮像素子１２から取得した画像信号に対して所定の画像処理を行って静止画像データを生成し、ＪＰＥＧなどの所定の方式により圧縮処理を行って、記録媒体１９に記録する。また制御部１４は、操作部１７からの操作信号に応じて再生モードに設定されると、記録媒体１９に記録された静止画像データを読み出して再生し、表示部１８に表示する。なお、本実施形態では、記憶とはバッファメモリなどの揮発性の記録媒体に画像を保存することであり、記録とはメモリカードなどの不揮発性の記録媒体に画像を保存することとする。
【００１７】
また、本実施形態のデジタルカメラ１には、撮像フレームレートと略同じ表示フレームレート（通常表示フレームレートと呼ぶ）でスルー画を表示するライブビューモードの他に、スロービューモードが設けられている。スロービューモードとは、撮像素子１２に撮像された複数の画像をバッファメモリ１５に記憶し、記憶した複数の画像を撮像フレームレートよりも低いフレームレート（スロー表示フレームレートと呼ぶ）で表示部１８にスロー表示するモードである。スロービューモードでは、ユーザはスロー表示を見ながら所望のタイミングでシャッターボタンを全押し操作することで、全押し操作時点で表示部１８に表示されていたフレーム画像に対応する静止画像データを記録媒体１９に記録することができる。したがって、ユーザはシャッターチャンスを逃さず撮影することができる。
【００１８】
ところで、例えば落雷を撮影する場合、落雷が走るスピードはとても速いため、落雷が走る瞬間にユーザがシャッターボタンを操作することは極めて困難である。そこで、本実施形態のスロービューモードでは、例えば落雷の音のような特徴的な音（特徴音）が検出されると、自動でスロー表示を開始する。また、本実施形態のスロービューモードでは、検出された特徴音に応じてスロー表示フレームレートを自動で設定する。例えば落雷の音が検出された場合には、落雷を撮影しようとしていることが予測されるので、落雷が走る速さに適したスロー表示フレームレートでスロー表示を行う。したがって、ユーザは、落雷の音が検出された際に撮像されたフレーム画像を、落雷が走る速さに適した表示フレームレートでスロー表示された状態で確認しながらシャッターチャンスを狙うことができるので、シャッターチャンスを逃さずに落雷を撮影することができる。以下、このような本実施形態のスロービューモードについて、詳しく説明する。
【００１９】
図２は、本実施形態のスロービューモードの概要を説明する図である。デジタルカメラ１の制御部１４は、スロービューモードに設定されると、撮像素子１２により所定の撮像フレームレート（例えば３０ｆｐｓ）で被写体像を繰り返し撮像させる撮像処理を行い、撮像処理により時系列で得られるフレーム画像データをバッファメモリ１５に逐次記憶させていくプリキャプチャ処理を行う。
【００２０】
また制御部１４は、マイク１６により集音された音を解析し、解析結果に基づいて特徴音を検出する。特徴音の検出方法については、後述する。デジタルカメラ１は、特徴音が検出されるまでは、バッファメモリ１５に記憶されたフレーム画像を、撮像フレームレートと略同じ通常表示フレームレートで表示するライブビュー表示処理を行う。
【００２１】
そして、制御部１４は、マイク１６により集音された音から特徴音が検出されると、バッファメモリ１５に記憶されたフレーム画像を、撮像フレームレートよりも低いスロー表示フレームレートで表示するスロー表示処理を開始する。このときデジタルカメラ１は、特徴音が検出された時点の前後所定期間（ｎ秒、例えばｎ＝３）内に撮像処理により取得されたフレーム画像を表示部１８にスロー表示する。また、このときのスロー表示フレームレートは、検出された特徴音に応じてデジタルカメラ１が自動で設定する。スロー表示フレームレートの設定方法については、後述する。
【００２２】
このように本実施形態のスロービューモードでは、マイク１６により集音された音から、特徴音が検出されると、検出された特徴音に応じて設定したスロー表示フレームレートでスロー表示を行うようになっている。
【００２３】
次に、マイク１６により集音された音から特徴音を検出し、スロー表示フレームレートを設定する方法について、具体的に説明する。本実施形態のデジタルカメラ１では、図３に示すようなテーブル情報が、予め不図示のメモリに記録されている。このテーブル情報では、特徴音ごとに、その特徴音から予測される被写体の種別と、その特徴音を識別するための識別情報（周波数、音圧および音圧の時間微分値の数値範囲）と、その被写体の変化速度に適した表示フレームレートとが対応付けられている。なお、特徴音の識別情報としては、図３に示したものに限らず、例えば、周波数の時間微分値や音の波形パターンなどの、音声データから解析されるこの他種々の情報を用いるようにしてもよい。
【００２４】
図３に示すテーブル情報には、一例として、落雷の音、レーシングカーの音、および通常の自動車（レーシングカーではない自動車）の３種類の特徴音について登録されている。図３に示すテーブル情報において、例えば、落雷の走る速度は、レーシングカーや通常の自動車の移動速度よりも速いため、落雷に対応するスロー表示フレームレートは、この３種類の中で最も遅い２ｆｐｓ（撮像フレームレート（３０ｆｐｓ）よりも１５倍遅い表示スピード）に設定されている。また、レーシングカーは通常の自動車の移動速度よりも速いため、レーシングカーに対応するスロー表示フレームレートは、通常の自動車に対応するスロー表示フレームレートよりも遅い５ｆｐｓ（撮像フレームレート（３０ｆｐｓ）よりも６倍遅いスピード）に設定されている。なお、通常の自動車に対応するスロー表示フレームレートは、１０ｆｐｓ（撮像フレームレート（３０ｆｐｓ）よりも３倍遅いスピード）に設定されている。
【００２５】
なお、テーブル情報に登録する特徴音は、上記３種類の特徴音に限らなくてよく、この他種々の特徴音（例えば、電車の音、花火の音、人の歓声、陸上競技のピストル音など）を登録するようにしてもよい。
【００２６】
スロービューモードが設定されると、制御部１４は、マイク１６から入力された音声データを解析して、マイク１６により集音された音の音圧、周波数および音圧の時間微分値を算出する。そして、制御部１４は、上記算出した音圧、周波数および音圧の時間微分値が上記テーブル情報に登録されたいずれかの特徴音の識別情報に合致するか（すなわち、上記テーブル情報に登録されたいずれかの特徴音の周波数、音圧および音圧の時間微分値の数値範囲内に含まれるか）否かを判断する。制御部１４は、上記算出した音圧、周波数および音圧の時間微分値が上記テーブル情報に登録されたいずれかの特徴音の識別情報に合致する場合には、合致した識別情報の特徴音が検出されたと判断する。そして制御部１４は、合致した識別情報に対応付けられた被写体の種別を、撮影しようとしている被写体の種別として判断する。また、制御部１４は、合致した識別情報に対応付けられた表示フレームレートを、スロー表示処理におけるスロー表示フレームレートとして設定する。
【００２７】
なお、制御部１４は、上記算出した音圧、周波数および音圧の時間微分値が上記テーブル情報に登録されたいずれの特徴音の識別情報と合致しない場合であっても、上記算出した音圧が所定値以上、または上記算出した周波数が所定値以上の場合には、特徴音が検出されたと判断する。なお、マイク１６により集音された音について、スロービューモードを開始してからの音圧や周波数の平均値を算出し、上記算出した音圧または周波数がこの平均値よりも所定値以上大きい場合に、特徴音が検出されたと判断するようにしてもよい。すなわち、制御部１４は、通常よりも大きい音や高い音についても、特徴音として判断して検出する。
【００２８】
このようにして特徴音を検出した場合、制御部１４は、上記算出した音圧の時間微分値に対して所定の定数αを乗算することで、スロー表示フレームレートを算出する。すなわち、以下の式（１）により、スロー表示フレームレートを算出する。
スロー表示フレームレート＝音圧の時間微分値×定数α・・・（１）
音圧の時間微分値が大きいほど、音圧の変化速度が速いため、変化の激しい（動きの速い）被写体であることが予測される。そのため、上記定数αは、音圧の時間微分値が大きいほど、算出されるスロー表示フレームレートが低くなり、音圧の時間微分値が小さいほど、算出されるスロー表示フレームレートが高くなるように設定されている。
【００２９】
また、制御部１４は、上記テーブル情報又は式（１）により求めたスロー表示フレームレートに対して、デジタルカメラ１の撮像倍率に応じた係数βを乗算することで、実際にスロー表示処理に用いるスロー表示フレームレートを算出するようにしてもよい。すなわち、以下の式（２）により、スロー表示フレームレートを算出する。
実際のスロー表示フレームレート＝テーブル情報又は式（１）により求めたスロー表示フレームレート×撮像倍率に応じた係数β・・・（２）
撮像倍率が大きいほど撮像画角が狭くなるため、撮像画角（すなわち撮像画像）内での被写体の変化速度が速くなることが予測される。そこで、撮像倍率に応じた係数βは、撮像倍率が大きいほど、算出されるスロー表示フレームレートが低くなり、撮像倍率が小さいほど、算出されるスロー表示フレームレートが高くなるように設定されている。例えば、撮像倍率に応じた係数βとしては、撮像光学系１１の焦点距離（３５ｍｍ判換算焦点距離）の逆数に５０を乗算した値を用いる。すなわち、撮像光学系１１の焦点距離（３５ｍｍ判換算焦点距離）が５０ｍｍのときに、この係数βが１となるように設定する。
【００３０】
このように制御部１４は、マイク１６により集音された音声データの解析結果（音圧、周波数および音圧の時間微分値）と撮像倍率とに基づいて、スロー表示処理におけるスロー表示フレームレートを設定する。
【００３１】
次に、上述したスロービューモードにおける処理の流れを、図４に示すフローチャートを用いて説明する。制御部１４は、操作部１７からの操作信号に応じてスロービューモードに設定されると、撮像処理およびライブビュー表示処理を開始すると共に、不図示のメモリに記録された図４に示す処理を行うプログラムを起動して、図４に示す処理を開始する。
【００３２】
ステップＳ１において、制御部１４は、撮像素子１２の撮像処理により時系列で得られるフレーム画像データをバッファメモリ１５に逐次記憶させていくプリキャプチャ処理を開始して、ステップＳ２へ進む。なお、バッファメモリ１５には、プリキャプチャ処理のために、予め所定容量の記憶領域が確保されている。制御部１４は、バッファメモリ１５内に記憶した画像データが所定枚数（例えば１８０フレーム）に達し、記憶済み容量が上記所定容量を上回る場合には、古い画像データから順に上書き消去するようになっている。
【００３３】
ステップＳ２において、制御部１４は、上述したように、マイク１６から入力される音声データの解析結果に基づいて、マイク１６により集音された音から特徴音が検出されたか否かを判定する。マイク１６により集音された音から特徴音が検出されていない場合には、制御部１４は、ステップＳ２の処理を繰り返し、ライブビュー表示処理を継続する。そして、制御部１４は、マイク１６により集音された音から特徴音が検出された場合には、ステップＳ２を肯定判定してライブビュー表示処理を終了し、ステップＳ３へ進む。
【００３４】
ステップＳ３において、制御部１４は、上述したように、マイク１６から入力される音声データの解析結果に基づいて、ステップＳ２で検出された特徴音に応じたスロー表示フレームレートを設定して、ステップＳ４へ進む。
【００３５】
ステップＳ４において、制御部１４は、ステップＳ２で特徴音が検出された時点の前後所定期間（ｎ秒）内に撮像処理により取得されたフレーム画像を、ステップＳ３で設定したスロー表示フレームレートで表示部１８にスロー表示するスロー表示処理を開始して、ステップＳ５へ進む。
【００３６】
なお、制御部１４は、ステップＳ２で特徴音が検出された時点の所定期間（ｎ秒）後にプリキャプチャ処理を終了する。そして制御部１４は、ステップＳ２で特徴音が検出された時点の前後所定期間（ｎ秒）内に撮像処理により取得されたフレーム画像データをバッファメモリ１５に残し、これ以外のフレーム画像データを削除する。また制御部１４は、バッファメモリ１５に記憶されているフレーム画像を最後までスロー表示すると、シャッターボタンの全押し操作がない限り、再度、バッファメモリ１５に記憶されているフレーム画像を順にスロー表示する。すなわち、制御部１４は、ステップＳ２で特徴音が検出された時点の前後所定期間（ｎ秒）内に撮像処理により取得されたフレーム画像のスロー表示を繰り返し行う（リピート表示する）。
【００３７】
ステップＳ５において、制御部１４は、シャッターボタンが全押し操作されたか否かを判定する。シャッターボタンが全押し操作されていない場合には、制御部１４は、ステップＳ５の処理を繰り返し、スロー表示処理を継続しながら、シャッターボタンの全押し操作が行われるまで待機する。一方、シャッターボタンが全押し操作された場合には、制御部１４は、ステップ５を肯定判定してステップＳ６へ進む。
【００３８】
ステップＳ６において、制御部１４は、シャッターボタンの全押し操作時点で表示していたフレーム画像に対応する静止画像データを記録媒体１９に記録して、図４の処理を終了する。
【００３９】
以上説明した第１の実施形態によれば、次の作用効果が得られる。
（１）デジタルカメラ１は、所定の撮像フレームレートで画像データを取得する撮像素子１２と、撮像素子１２により取得された複数の画像データをバッファメモリ１５に逐次記憶させる制御部１４と、バッファメモリ１５に記憶された画像データを、撮像フレームレートより低い表示フレームレートで表示部１８にスロー表示する制御部１４と、周囲の音を集音するマイク１６と、マイク１６で集音された音を解析する制御部１４と、この解析結果に基づいて、スロー表示の表示フレームレートを設定する制御部１４と、を備える。これにより、スロー表示において、被写体に適した表示フレームレートを自動で設定することができる。したがって、ユーザは、スロー表示を確認しながら、適切にシャッターチャンスを捉えることができる。
【００４０】
（２）上記（１）のデジタルカメラ１において、画像の記録を指示する操作部１７（シャッターボタン）と、シャッターボタンによる指示が行われると、当該指示タイミングにおいて表示部１８に表示されていたフレーム画像に対応する静止画像データを記録媒体１９に記録する制御部１４と、をさらに備えるようにした。これにより、ユーザは、スロー表示を見ながら所望のタイミングでシャッターボタンを全押し操作することで、撮影を行うことができる。
【００４１】
（３）上記（１）または（２）のデジタルカメラ１において、制御部１４は、マイク１６から入力された音声データの解析結果と上記テーブル情報（図３）とに基づいてスロー表示フレームレートを設定することにより、マイク１６で集音された特徴音の種別に応じたスロー表示フレームレートを設定するようにした。これにより、被写体の種別に適した表示フレームレートでスロー表示を行うことができる。
【００４２】
（４）上記（１）〜（３）のデジタルカメラ１において、制御部１４は、マイク１６で集音された音の変化速度（音圧の時間微分値）を算出し、算出した音の変化速度に応じてスロー表示の表示フレームレートを設定するようにした。これにより、被写体の変化速度に適した表示フレームレートでスロー表示を行うことができる。
【００４３】
（５）上記（１）〜（４）のデジタルカメラ１において、制御部１４は、マイク１６で集音された音の解析結果と撮像光学系１１の撮像倍率とに基づいて、スロー表示の表示フレームレートを設定するようにした。これにより、撮像画像内における被写体の変化速度に適した表示フレームレートでスロー表示を行うことができる。
【００４４】
（６）上記（１）〜（５）のデジタルカメラ１において、制御部１４は、マイク１６で集音された音が所定の条件を満たすか（すなわち特徴音であるか）否かを判定し、特徴音であると判定された時点を基準とした所定期間内に撮像されたフレーム画像をスロー表示するようにした。これにより、ユーザがシャッターチャンスを狙いたい（撮影したい）期間に取得された範囲のフレーム画像をスロー表示することができる。また、余分な（ユーザにとってシャッターチャンスがない）フレーム画像を表示しないので、シャッターチャンスを狙い続けるユーザの負荷を軽減することができる。また、スロー表示の開始と終了が自動的に行われるので、スロー表示の開始と終了を指示する煩わしさをなくすことができる。変化の激しい被写体でもスロー表示開始の指示が遅れることがない。
【００４５】
−第２の実施の形態−
次に、図面を参照して本発明の第２の実施の形態について説明する。第２の実施の形態では、スロービューモードにおける処理が第１の実施の形態と異なるので、この点を中心に説明する。なお、第２の実施の形態のデジタルカメラは、第１の実施の形態のデジタルカメラ１の構成と同様であるため、説明を省略する。またこの他、第２の実施の形態において、第１の実施の形態と同様の箇所については、説明および図示を省略する。
【００４６】
図５は、第２の実施の形態のスロービューモードの概要を説明する図である。第２の実施の形態のスロービューモードにおいて、デジタルカメラ１は、シャッターボタンが半押し操作されるまではライブビュー表示処理を行う。そしてシャッターボタンが半押し操作されると、デジタルカメラ１は、プリキャプチャ処理を開始し、この半押し操作時点に撮像処理により取得されたフレーム画像からスロー表示処理を開始する。このときのスロー表示フレームレートは、一律で設定された表示フレームレートであり、例えば６ｆｐｓ（撮像フレームレート（例えば３０ｆｐｓ）よりも５倍遅いスピード）である。
【００４７】
その後、デジタルカメラ１は、マイク１６により集音された音声から特徴音が検出されると、シャッターボタンの半押し操作時点からのスロー表示処理を終了し、特徴音が検出された時点のｎ秒前に撮像処理により取得されたフレーム画像から新たにスロー表示処理を開始する。このときのスロー表示フレームレートについては、上述した第１の実施の形態と同様に、マイク１６により集音された音声から検出された特徴音に応じて設定する。そして、デジタルカメラ１は、特徴音が検出された時点の前後所定期間（ｎ秒）内に撮像処理により取得されたフレーム画像を繰り返しスロー表示する。
【００４８】
次に、第２の実施の形態のスロービューモードにおける処理の流れを、図６に示すフローチャートを用いて説明する。制御部１４は、操作部１７からの操作信号に応じてスロービューモードに設定されると、撮像処理およびライブビュー表示処理を開始すると共に、不図示のメモリに記録された図６に示す処理を行うプログラムを起動して、図６に示す処理を開始する。
【００４９】
ステップＳ１１において、制御部１４は、シャッターボタンが半押し操作されたか否かを判定する。シャッターボタンが半押し操作されない場合には、ステップＳ１１の判定処理を繰り返しながら、ライブビュー表示処理を継続する。そして、シャッターボタンが半押し操作された場合には、制御部１４は、ステップＳ１１を肯定判定してライブビュー表示処理を終了し、ステップＳ１２へ進む。
【００５０】
ステップＳ１２において、制御部１４は、撮像素子１２の撮像処理により時系列で得られるフレーム画像データをバッファメモリ１５に逐次記憶させていくプリキャプチャ処理を開始して、ステップＳ１３へ進む。
【００５１】
なお、第２の実施の形態において、例えば、バッファメモリ１５には、プリキャプチャ処理のために、第１の記憶領域および第２の記憶領域が割り振られている。制御部１４は、プリキャプチャ処理において、第１の記憶領域および第２の記憶領域のそれぞれにフレーム画像データを逐次記憶させていく。そして、制御部１４は、バッファメモリ１５の第１の記憶領域および第２の記憶領域内にそれぞれ記憶したフレーム画像データが所定枚数（例えば１８０フレーム）に達した場合には、第１の記憶領域へのフレーム画像データの書き込みを停止し、これまでに記憶したフレーム画像データを第１の記憶領域にそのまま保持させておく。一方、制御部１４は、バッファメモリ１５の第２の記憶領域については画像データの書き込みを停止せず、所定枚数を古い画像データから順に上書き消去していくようにする。
【００５２】
ステップＳ１３において、制御部１４は、シャッターボタンの半押し操作時点で取得したフレーム画像データに基づいてＡＦ（自動焦点調節）処理、ＡＥ（自動露出演算）処理、およびＡＷＢ（自動ホワイトバランス調整）処理を実行する。制御部１４は、これらの処理後、焦点調節状態を固定するＡＦロック、露出を固定するＡＥロック、およびホワイトバランスを固定するＡＷＢロックを行う。
【００５３】
そして制御部１４は、バッファメモリ１５の第１の記憶領域に逐次記憶されたフレーム画像を、撮像フレームレートよりも低いスロー表示フレームレートで表示部１８に表示するスロー表示処理を開始して、ステップＳ１４へ進む。なお、ここでのスロー表示フレームレートは、一律で設定された表示フレームレートである。また、このスロー表示処理において、制御部１４は、バッファメモリ１５の第１の記憶領域に最後に記憶されたフレーム画像を最後までスロー表示すると、シャッターボタンの全押し操作がない限り、再度、バッファメモリ１５の第１の記憶領域に記憶されているフレーム画像を順にスロー表示する。すなわち、バッファメモリ１５の第１の記憶領域に記憶されているフレーム画像のスロー表示を繰り返し行う（リピート表示する）。
【００５４】
ステップＳ１４において、制御部１４は、シャッターボタンが全押し操作されたか否かを判定する。シャッターボタンが全押し操作された場合には、制御部１４は、ステップ１４を肯定判定してステップＳ２０へ進む。一方、シャッターボタンが全押し操作されていない場合には、ステップ１４を否定判定してステップＳ１５へ進む。
【００５５】
ステップＳ１５において、制御部１４は、上述した第１の実施の形態と同様に、マイク１６から入力される音声データの解析結果に基づいて、マイク１６により集音された音から特徴音が検出されたか否かを判定する。マイク１６により集音された音から特徴音が検出されていない場合には、制御部１４は、ステップＳ１４に戻る。すなわち、制御部１４は、特徴音が検出されていない場合には、ステップＳ１３で開始したスロー表示処理を継続して行う。一方、制御部１４は、マイク１６により集音された音から特徴音が検出された場合にはステップＳ１５を肯定判定してステップＳ１３で開始したスロー表示処理を終了し、ステップＳ１６へ進む。
【００５６】
ステップＳ１６において、制御部１４は、上述した第１の実施の形態と同様に、マイク１６から入力された音声データの解析結果に基づいて、ステップＳ１５で検出された特徴音に応じたスロー表示フレームレートを設定して、ステップＳ１７へ進む。
【００５７】
ステップＳ１７において、制御部１４は、これまでのＡＦロック、ＡＥロックおよびＡＷＢロックを解除する。そして制御部１４は、特徴音が検出された時点で取得したフレーム画像データに基づいて新たにＡＦ処理、ＡＥ処理、およびＡＷＢ処理を行い、これらの処理結果に基づいて新たにＡＦロック、ＡＥロック、およびＡＷＢロックを行う。そして、制御部１４は、ステップＳ１５で特徴音が検出された時点の前後所定期間（ｎ秒）内に撮像処理により取得されてバッファメモリ１５の第２の記憶領域に記憶されたフレーム画像を、ステップＳ１６で設定したスロー表示フレームレートで表示部１８にスロー表示する新たなスロー表示処理を開始して、ステップＳ１８へ進む。
【００５８】
なお、制御部１４は、ステップＳ１５で特徴音が検出された時点の所定期間（ｎ秒）後にプリキャプチャ処理を終了する。そして制御部１４は、ステップＳ１５で特徴音が検出された時点の前後所定期間（ｎ秒）内に撮像処理により取得されたフレーム画像をバッファメモリ１５の第２の記憶領域に残し、これ以外のフレーム画像を削除する。また制御部１４は、バッファメモリ１５の第２の記憶領域に記憶されているフレーム画像を最後までスロー表示すると、シャッターボタンの全押し操作がない限り、再度、バッファメモリ１５の第２の記憶領域に記憶されているフレーム画像を順にスロー表示する。すなわち、制御部１４は、ステップＳ１５で特徴音が検出された時点の前後所定期間（ｎ秒）内に撮像処理により取得されたフレーム画像のスロー表示を繰り返し行う（リピート表示する）。
【００５９】
ステップＳ１８において、制御部１４は、シャッターボタンが全押し操作されたか否かを判定する。シャッターボタンが全押し操作されていない場合には、制御部１４は、ステップＳ１８の処理を繰り返し、ステップＳ１７で開始されたスロー表示処理を継続しながら、シャッターボタンの全押し操作が行われるまで待機する。一方、シャッターボタンが全押し操作された場合には、制御部１４は、ステップ１８を肯定判定してステップＳ１９へ進む。
【００６０】
ステップＳ１４またはステップＳ１８でシャッターボタンが全押し操作されたことにより進むステップＳ１９において、制御部１４は、シャッターボタンの全押し操作時点で表示していたフレーム画像に対応する静止画像データを記録媒体１９に記録して、図６の処理を終了する。
【００６１】
このように第２の実施の形態のデジタルカメラ１では、シャッターボタンが半押し操作されると、スロー表示処理を開始するので、ユーザは、シャッターボタンの半押し操作後に取得されたフレーム画像をスロー表示で確認しながらシャッターチャンスを狙うことができる。また第２の実施の形態のデジタルカメラ１では、このスロー表示中に特徴音が検出されると、特徴音を検出した時点を基準として新たにスロー表示を開始するので、ユーザは、特徴音の検出前後に取得されたフレーム画像をスロー表示で確認しながらシャッターチャンスを狙うこともできる。
【００６２】
（変形例１）
上述した実施の形態では、特徴音の識別情報とスロー表示フレームレートとが対応付けられたテーブル情報（図３）を用いて、スロー表示フレームレートを設定する例について説明した。しかしながら、制御部１４は、上記テーブル情報を用いず、常に、上述した式（１）のように、音圧の時間微分値からスロー表示フレームレートを算出するようにしてもよい。また、周波数の時間微分値からスロー表示フレームレートを算出するようにしてもよい。この場合、周波数の時間微分値が高いほど、変化の激しい被写体であることが考えられるため、スロー表示フレームレートが低くなるように算出する。
【００６３】
（変形例２）
上述した実施の形態では、特徴音が検出された時点の前後所定期間（ｎ秒）内に撮像処理により取得されたフレーム画像を表示部１８にスロー表示する例について説明した。しかしながら、スロー表示を行うフレーム画像の期間については、特徴音が検出された時点の前と、特徴音が検出された時点の後とで、長さを変えるようにしてもよい。例えば、音がデジタルカメラ１に届くまでの時間差を考慮して、特徴音が検出された時点の前については、特徴音が検出された時点の後よりも、スロー表示を行うフレーム画像の期間を長くするようにしてもよい。
【００６４】
（変形例３）
デジタルカメラ１は、ＧＰＳ情報やイベント情報、気象情報などを取得し、これらの情報を、上述した特徴音の検出やスロー表示フレームレートの設定の際に用いるようにしてもよい。この場合、デジタルカメラ１には、ＧＰＳ衛星からＧＰＳ情報を受信するＧＰＳ受信部（不図示）と、無線通信によりインターネット等のネットワークに接続し、ネットワーク上のコンピュータから種々の情報を取得する通信部（不図示）とをさらに設けるようにする。
【００６５】
制御部１４は、ＧＰＳ受信部により受信したＧＰＳ情報に基づいてデジタルカメラ１の位置情報を特定する。そして制御部１４は、特定したデジタルカメラ１の位置情報を、通信部を介してネットワーク上のコンピュータに送信し、送信した位置情報に対応する場所で現在どのようなイベントが行われているかを示すイベント情報を、当該コンピュータから取得する。このような処理により、例えば、サーキットなどのレース会場に撮影者がいる場合、制御部１４は、デジタルカメラ１がサーキットにあることを特定し、その場所で行われるイベントが自動車レースであることを特定することができる。自動車レースである場合、撮影しようとする被写体はレーシングカーであり、特徴音はレーシングカーのモータ音であることが想定される。そこで制御部１４は、通信部を介して取得したイベント情報が自動車レースである場合、例えば、マイク１６により集音される音が所定の音圧以上であればレーシングカーのモータ音であると検出するようにして、レーシングカーの走行速度に応じたスロー表示フレームレートでスロー表示処理を行うようにする。
【００６６】
また、制御部１４は、撮像処理により取得されるフレーム画像において、１フレームごとの変化量を画像処理により算出し、この算出結果に基づいて被写体の変化速度を検出して、スロー表示フレームレートの設定に用いるようにしてもよい。
【００６７】
（変形例４）
上述したスロービューモードにおいて、制御部１４は、検出された特徴音の種別を示す情報（例えば特徴音が雷の音や車の音である旨を示すアイコンなど）を表示部１８に表示するようにしてもよい。
【００６８】
（変形例５）
上述したスロービューモードにおいて、制御部１４は、シャッターボタンの全押し操作に応じて静止画像データを記録する際、静止画像データに対応付けて、特徴音が検出された前後所定期間内の音声データを記録媒体１９に記録するようにしてもよい。この場合、制御部１４は、マイク１６から入力される音声データについてもバッファメモリ１５に逐次記憶するプリキャプチャ処理を行うようにする。
【００６９】
（変形例６）
上述した実施の形態では、デジタルカメラ１により被写体を撮影している際にスロー表示を行う例について説明したが、記録媒体１９に記録済みの動画像または連写された画像を記録媒体１９から読み出してスロー表示を行えるようにしてもよい。
【００７０】
この場合の制御部１４は、記録媒体１９に記録済みの動画像または連写された画像を表示部１８に表示する際、特徴音が検出された前後の所定期間については、上述した実施の形態と同様に、特徴音に応じたスロー表示フレームレートで表示する。このとき制御部１４は、動画像または連写された画像に含まれる全てのフレーム画像を表示するのではなく、特徴音が検出された前後の所定期間内のフレーム画像のみを読み出してスロー表示するようにしてもよい。
【００７１】
（変形例７）
上述した実施の形態では、マイク１６により集音された音から特徴音が検出されると、その検出時点の前後所定期間内に撮像されたフレーム画像をスロー表示する例について説明した。しかしながら、制御部１４は、マイク１６により集音された音から特徴音が検出された後、音圧が最も大きくなった時点の前後所定期間内に撮像されたフレーム画像をスロー表示するようにしてもよい。
【００７２】
（変形例８）
上述したテーブル情報や式（１）の定数αなどについては、ユーザの評価に基づいた自己学習処理によって逐次変更していくようにしてもよい。この場合、例えば、スロービューモードにおいて、ユーザが操作部１７の操作によってスロー表示フレームレートを変更できるようにする。そして、制御部１４は、ユーザによるスロー表示フレームレートの変更結果に応じて、テーブル情報や式（１）の定数αを変更する。
【００７３】
（変形例９）
上述した実施の形態では、シャッターボタンを全押し操作すると、記録用画像を記録してスロー表示処理を終了した。これに限らず、スロー表示処理を継続し、シャッターボタンの全押し操作が複数回できるようにしてもよい。そして、シャッターボタンが全押し操作される毎に、当該全押し操作された時点で表示部１８に表示していたフレーム画像に対応する画像データを記録用画像データとして記録媒体１９に記録するようにしてもよい。この場合、バッファメモリ１５に記憶された画像データが全てスロー表示されたときにスロー表示処理を終了するようにしてもよい。またリピート再生される場合は、スロー表示を終了する操作を別に設けるようにすればよい。
【００７４】
（変形例１０）
上述した実施の形態では、デジタルカメラ１の制御部１４が不図示のメモリに記録されたプログラムを実行することで、上述した図４または図６の処理を行う例について説明した。このプログラムは、製品出荷時に予め記録されていてもよいし、製品出荷後、メモリカードなどの記録媒体やインターネットなどのデータ信号を通じて提供されてもよい。図７はその様子を示す図である。デジタルカメラ１は、メモリカードなどの記録媒体１９を介してプログラムの提供を受ける。また、デジタルカメラ１は通信回線１０１との接続機能を有する。コンピュータ１０２は上記プログラムを提供するサーバコンピュータであり、ハードディスク１０３などの記録媒体にプログラムを格納する。通信回線１０１は、インターネット、パソコン通信などの通信回線、あるいは専用通信回線などである。コンピュータ１０２はハードディスク１０３を使用してプログラムを読み出し、通信回線１０１を介してプログラムをデジタルカメラ１に送信する。すなわち、プログラムをデータ信号として搬送波を介して、通信回線１０１を介して送信する。このように、プログラムは、記録媒体やデータ信号（搬送波）などの種々の形態のコンピュータ読み込み可能なコンピュータプログラム製品として供給できる。
【００７５】
（変形例１１）
上述した実施の形態では、デジタルカメラに本発明を適用する例について説明したが、例えばカメラ付き携帯端末など、撮像手段を有する電子機器に本発明を適用するようにしてもよい。
【００７６】
以上の説明はあくまで一例であり、上記の実施形態の構成に何ら限定されるものではない。また、上記実施形態に各変形例の構成を適宜組み合わせてもかまわない。
【符号の説明】
【００７７】
１…デジタルカメラ、１１…撮像光学系、１２…撮像素子、１４…制御部、１５…バッファメモリ、１６…マイク、１７…操作部、１８…表示部、１９…記録媒体
【図１】
2014086868.tif 000003
【図２】
2014086868.tif 000004
【図３】
2014086868.tif 000005
【図４】
2014086868.tif 000006
【図５】
2014086868.tif 000007
【図６】
2014086868.tif 000008
【図７】
2014086868.tif 000009