(57)【要約】【課題】光学ズーム動作に伴うノイズを記録音声および／または出力音声から除去可能な、撮像装置、撮像方法およびプログラムを提供する。【解決手段】ユーザからのズーム指示に応じて、光学ズーム動作を行う撮像部１５と、マイクロホン３５から入力される音声信号を、記録装置および／または出力装置に供給する音声信号供給部（主制御部１１）と、音声信号の入力状況を判定する音声信号判定部（主制御部１１）と、ズーム指示の操作信号が入力されるかを判定する操作信号判定部（主制御部１１）と、ズーム指示の操作信号が入力されると、音声信号の入力状況に応じて、光学ズームの作動時点を調節するズーム作動調節部（主制御部１１）と、を備える。【選択図】図３
2011114406.tif 000002
【特許請求の範囲】
【請求項１】
ユーザからのズーム指示に応じて、光学ズーム動作を行う撮像部と、
マイクロホンから入力される音声信号を、記録装置および／または出力装置に供給する音声信号供給部と、
前記音声信号の入力状況を判定する音声信号判定部と、
前記ズーム指示の操作信号が入力されるかを判定する操作信号判定部と、
前記ズーム指示の操作信号が入力されると、前記音声信号の入力状況に応じて、光学ズームの作動時点を調節するズーム作動調節部と、
を備える撮像装置。
【請求項２】
前記音声信号判定部は、前記音声信号の入力状況から有音区間または発話区間を判定し、
前記ズーム作動調節部は、前記有音区間または発話区間に前記ズーム指示の操作信号が入力されると、前記有音区間または発話区間の終了後に前記撮像部が光学ズーム動作を行うように、前記光学ズームの作動時点を調節する、請求項１に記載の撮像装置。
【請求項３】
前記撮像部から入力される撮像信号をデジタルズーム処理するズーム処理部をさらに備え、
前記ズーム処理部は、前記有音区間または発話区間に前記ズーム指示の操作信号が入力されると、前記有音区間または発話区間にデジタルズーム処理を行う、請求項２に記載の撮像装置。
【請求項４】
前記光学ズームの作動時点を調節する場合に、前記音声信号供給部は、光学ズーム動作時に、前記マイクロホンから入力される音声信号を前記記録装置および／または出力装置に供給しない、請求項１〜３のいずれか１項に記載の撮像装置。
【請求項５】
前記光学ズームの作動時点を調節する場合に、前記音声信号供給部は、光学ズーム動作時に、前記マイクロホンから入力される音声信号に代えて、コンフォートノイズを前記記録装置および／または出力装置に供給する、請求項１〜３のいずれか１項に記載の撮像装置。
【請求項６】
前記音声信号判定部は、光学ズーム動作に伴うノイズを考慮して、前記有音区間または発話区間を判定し、
前記ズーム作動調節部は、光学ズーム動作時に前記有音区間または発話区間が判定されると、前記撮像部が光学ズーム動作を一時的に停止するように、前記光学ズームの作動を調節する、請求項１〜５のいずれか１項に記載の撮像装置。
【請求項７】
前記ズーム作動調節部は、さらに、前記有音区間または発話区間の終了後に前記撮像部が光学ズーム動作を行うように、前記光学ズームの作動を調節する、請求項６に記載の撮像装置。
【請求項８】
前記音声信号判定部は、前記音声信号の信号ノイズ比が閾値以上の区間を前記有音区間または発話区間として判定する、請求項１〜７のいずれか１項に記載の撮像装置。
【請求項９】
音声信号判定部は、前記音声信号の音声検出値が閾値以上の区間を前記有音区間または発話区間として判定する、請求項１〜７のいずれか１項に記載の撮像装置。
【請求項１０】
マイクロホンから入力される音声信号を、記録装置および／または出力装置に供給するステップを含み、
前記ステップは、
前記音声信号の入力状況を判定するステップと、
前記ズーム指示の操作信号が入力されるかを判定するステップと、
前記ズーム指示の操作信号が入力されると、前記音声信号の入力状況に応じて、光学ズームの作動時点を調節するステップと、
を含む撮像方法。
【請求項１１】
マイクロホンから入力される音声信号を、記録装置および／または出力装置に供給するステップを含み、
前記ステップは、
前記音声信号の入力状況を判定するステップと、
前記ズーム指示の操作信号が入力されるかを判定するステップと、
前記ズーム指示の操作信号が入力されると、前記音声信号の入力状況に応じて、光学ズームの作動時点を調節するステップと、
を含む撮像方法をコンピュータに実行させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置、撮像方法およびプログラムに関する。
【背景技術】
【０００２】
スチルカメラ、ビデオカメラ、監視カメラ等の撮像装置では、光学ズーム動作に伴うモータ音等がノイズ（以下、ズームノイズとも称する。）としてマイクロホンに収音され、記録および／または出力されてしまう場合がある。
【０００３】
このため、光学ズームの代わりにデジタルズームを利用したり、光学ズームの動作速度を遅くしてノイズの発生を低減したりすることが行われている。また、ズームノイズを予め記録しておき、記録および／または出力すべき対象音声に重畳されたノイズを信号処理で除去して、ズームノイズを目立たなくさせることも行われている（下記特許文献１、２参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００６−２６２２４１号公報
【特許文献２】特開２０００−４４９４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、一般に、対象音声に重畳されたノイズを信号処理で除去すると、対象音声に歪みが生じ、記録品質および／または出力品質が低下してしまうことが知られている。
【０００６】
そこで、本発明は、光学ズーム動作に伴うノイズを記録音声および／または出力音声から除去可能な、撮像装置、撮像方法およびプログラムを提供しようとするものである。
【課題を解決するための手段】
【０００７】
本発明の第１の観点によれば、ユーザからのズーム指示に応じて、光学ズーム動作を行う撮像部と、マイクロホンから入力される音声信号を、記録装置および／または出力装置に供給する音声信号供給部と、音声信号の入力状況を判定する音声信号判定部と、ズーム指示の操作信号が入力されるかを判定する操作信号判定部と、ズーム指示の操作信号が入力されると、音声信号の入力状況に応じて、光学ズームの作動時点を調節するズーム作動調節部と、を備える撮像装置が提供される。
【０００８】
かかる構成によれば、ズーム指示の操作信号が入力されると、音声信号の入力状況に応じて、光学ズームの作動時点が調節される。これにより、光学ズームの作動時点を対象音声が入力されていない時点に調節することで、ノイズ除去に伴う対象音声の歪みによる記録品質および／または出力品質の低下を防止することができる。
【０００９】
また、音声信号判定部は、音声信号の入力状況から有音区間または発話区間を判定し、ズーム作動調節部は、有音区間または発話区間にズーム指示の操作信号が入力されると、有音区間または発話区間の終了後に撮像部が光学ズーム動作を行うように、光学ズームの作動時点を調節してもよい。
【００１０】
また、撮像部から入力される撮像信号をデジタルズーム処理するズーム処理部をさらに備え、ズーム処理部は、有音区間または発話区間にズーム指示の操作信号が入力されると、有音区間または発話区間にデジタルズーム処理を行ってもよい。
【００１１】
また、光学ズームの作動時点を調節する場合に、音声信号供給部は、光学ズーム動作時に、マイクロホンから入力される音声信号を記録装置および／または出力装置に供給しなくてもよく、マイクロホンから入力される音声信号に代えて、コンフォートノイズを記録装置および／または出力装置に供給してもよい。
【００１２】
また、音声信号判定部は、光学ズーム動作に伴うノイズを考慮して、有音区間または発話区間を判定し、ズーム作動調節部は、光学ズーム動作時に有音区間または発話区間が判定されると、撮像部が光学ズーム動作を一時的に停止するように、光学ズームの作動を調節してもよい。また、ズーム作動調節部は、さらに、有音区間または発話区間の終了後に撮像部が光学ズーム動作を行うように、光学ズームの作動を調節してもよい。
【００１３】
また、音声信号判定部は、音声信号の信号ノイズ比が閾値以上の区間を有音区間または発話区間として判定してもよく、音声信号の音声検出値が閾値以上の区間を有音区間または発話区間として判定してもよい。
【００１４】
また、本発明の第２の観点によれば、マイクロホンから入力される音声信号を、記録装置および／または出力装置に供給するステップを含み、上記ステップは、音声信号の入力状況を判定するステップと、ズーム指示の操作信号が入力されるかを判定するステップと、ズーム指示の操作信号が入力されると、音声信号の入力状況に応じて、光学ズームの作動時点を調節するステップと、を含む撮像方法が提供される。
【００１５】
また、本発明の第３の観点によれば、第２の観点による撮像方法をコンピュータに実行させるためのプログラムが提供される。ここで、プログラムは、コンピュータ読取り可能な記録媒体を用いて提供されてもよく、通信手段を介して提供されてもよい。
【発明の効果】
【００１６】
以上説明したように本発明によれば、光学ズーム動作に伴うノイズを記録音声および／または出力音声から除去可能な、撮像装置、撮像方法およびプログラムを提供することができる。
【図面の簡単な説明】
【００１７】
【図１】本発明の実施形態に係るスチルカメラの主要な機能構成を示すブロック図である。
【図２】第１の実施形態に係るスチルカメラの動作を示すフロー図である。
【図３】第１の実施形態に係るスチルカメラによる処理結果を示す模式図である。
【図４】第２の実施形態に係るスチルカメラによる処理結果を示す模式図である。
【図５】第３の実施形態に係るスチルカメラによる処理結果を示す模式図である。
【図６】第４の実施形態に係るスチルカメラによる処理結果を示す模式図である。
【発明を実施するための形態】
【００１８】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書および図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００１９】
［１．スチルカメラの構成］
まず、本発明の実施形態に係るスチルカメラ１０について説明する。図１は、本発明の実施形態に係るスチルカメラ１０の主要な機能構成を示すブロック図である。なお、以下では、本発明をスチルカメラ１０に適用する場合を例として説明するが、本発明は、ビデオカメラ、監視カメラ等、他の撮像装置にも同様に適用することができる。
【００２０】
図１に示すように、スチルカメラ１０は、主制御部１１、操作部１３、撮像部１５、レンズ制御部１７、シャッタ制御部１９、アイリス制御部２１、タイミング生成部２３、撮像信号変換部２５、撮像信号処理部２７、画像処理部２９、表示制御部３１、表示部３３を備える。また、スチルカメラ１０は、マイクロホン３５、音声信号変換部３７、音声信号処理部３９、音声処理部４１、スピーカ４３、メモリ制御部４５、メモリ４７、カード制御部４９、メモリカード５１を備える。
【００２１】
主制御部１１は、メモリ４７に格納されているプログラムを実行し、スチルカメラ１０の各部を制御する。操作部１３は、不図示の記録開始ボタン、ズームボタン等を通じてユーザから入力される指示を、操作信号に変換して主制御部１１に供給する。撮像部１５は、レンズ群１５ａ（ズームレンズを含む。）、シャッタ１５ｂ、アイリス１５ｃ、ＣＣＤ等の撮像素子１５ｄを備える。撮像部１５は、被写体の光像をレンズ群１５ａ、シャッタ１５ｂ、アイリス１５ｃを通じて撮像素子１５ｄに結像し、撮像信号に変換して撮像信号変換部２５に供給する。
【００２２】
レンズ制御部１７、シャッタ制御部１９、アイリス制御部２１は、レンズ群１５ａ、シャッタ１５ｂ、アイリス１５ｃを各々に制御する。タイミング生成部２３は、撮像素子１５ｄおよび撮像信号変換部２５にタイミング信号を供給し、撮像のタイミングを制御する。撮像信号変換部２５は、撮像素子１５ｄから供給される撮像信号に対して信号増幅、Ａ／Ｄ変換、ホワイトバランス調整等を行い、撮像信号処理部２７に供給する。
【００２３】
撮像信号処理部２７は、撮像信号に対して色空間変換、ノイズ除去等を行い、画像データを生成してメインバス６１に供給する。画像処理部２９は、画像データに対して拡大、縮小、符号化、復号化等を行う。表示制御部３１は、画像データを出力信号に変換し、液晶ディスプレイ等の表示部３３による画像の出力を制御する。また、表示制御部３１は、メモリ４７内のフレームメモリに展開された画像データ、ライブ動画像データ、主制御部１１により生成されたＧＵＩ領域の画像データを合成する。
【００２４】
マイクロホン３５は、スチルカメラ１０周辺の音声を収音し、音声信号に変換して音声信号変換部３７に供給する。音声信号変換部３７は、音声信号に対して信号増幅、Ａ／Ｄ変換等を行い、音声信号処理部３９に供給する。音声信号処理部３９は、音声信号に対して各種の信号処理を行い、音声データを生成してメインバス６１に供給する。音声処理部４１は、音声データに対して符号化、復号化等を行い、メインバス６１に供給する。スピーカ４３は、音声データを出力信号に変換し、音声を外部に出力する。
【００２５】
メモリ制御部４５は、画像データおよび音声データを一時記憶するために、主制御部１１の制御の下で、メモリ４７に対するデータの書込み／読出しを制御する。カード制御部４９は、画像データおよび音声データを格納するために、主制御部１１の制御の下で、メモリカード５１に対するデータの書込み／読出しを制御する。画像データ、音声データについては、画像処理部２９、音声処理部４１により符号化／復号化されて、メモリ４７、メモリカード５１に対して書込み／読出しが行われる。
【００２６】
スチルカメラ１０は、光学ズーム機能およびデジタルズーム機能を有する。主制御部１１は、光学ズーム動作の開始に際して、レンズ群１５ａの光学ズームの目標倍率、シャッタ１５ｂのスピード（撮像素子１５ｄの露光時間）、アイリス１５ｃの絞り量等の動作条件を設定する。そして、主制御部１１は、撮像部１５が動作条件に従って駆動するように、レンズ制御部１７、シャッタ制御部１９、アイリス制御部２１を制御する。また、主制御部１１は、デジタルズーム動作の開始に際して、デジタルズームの目標倍率、撮像素子１５ｄの撮像範囲等の動作条件を設定する。そして、主制御部１１は、動作条件に従って画像データが拡大されるように、画像処理部２９を制御する。
【００２７】
主制御部１１は、音声信号処理部３９に供給される音声信号に基づいて、音声信号の入力状況、特に、有音区間または発話区間を判定する。ここで、有音区間または発話区間とは、記録および／または出力すべき対象音声が収音される区間を意味する。主制御部１１は、詳細は後述するが、光学ズーム動作およびデジタルズーム動作を制御し、特に、音声信号の入力状況に応じて、光学ズームの作動時点を調節する。
【００２８】
スチルカメラ１０が起動されると、主制御部１１は、操作部１３を通じた操作信号の入力を待機する。ユーザが記録開始ボタンを操作すると、主制御部１１は、記録開始を示す操作信号を入力され、各部を制御して画像データおよび音声データの記録動作を開始する。スチルカメラ１０では、ユーザが記録終了ボタンを操作するまで、画像データおよび音声データの記録動作が継続される。つまり、スチルカメラ１０では、ライブ動画像およびライブ音声が記録される。
【００２９】
撮像部１５では、被写体の光像が撮像素子１５ｄに結像され、撮像信号に変換される。撮像信号は、一定周期で処理されて画像データとしてメインバス６１に供給される。そして、画像データは、符号化されてメモリ４７に書き込まれるとともに、画像として表示部３３に表示される。
【００３０】
マイクロホン３５では、スチルカメラ１０周辺の音声が収音され、音声信号に変換される。音声信号は、一定周期で処理されて音声データとしてメインバス６１に供給される。そして、音声データは、符号化されてメモリ４７に書き込まれる。
【００３１】
また、ユーザがデータ保存ボタンを操作すると、主制御部１１は、メモリ４７に一時記憶されているデータをメモリカード５１に格納するように、メモリ制御部４５およびカード制御部４９を制御する。
【００３２】
なお、以下では、画像データおよび音声データを記録（格納）する場合について説明する。しかし、画像データおよび音声データは、記録に代えて／記録と併せて、不図示の出力ポート等を通じて、外部装置に出力されてもよい。
【００３３】
［２．スチルカメラの動作］
つぎに、本発明のスチルカメラ１０の動作に係る第１〜第５の実施形態について説明する。なお、各実施形態で重複する説明は省略する。
【００３４】
＜第１の実施形態＞
まず、図２および図３を参照しながら、本発明の第１の実施形態について説明する。図２は、スチルカメラ１０の動作を示すフロー図である。図３は、第１の実施形態に係るスチルカメラ１０による処理結果を示す模式図である。
【００３５】
データの記録動作中、主制御部１１は、マイクロホン３５から入力される音声信号の入力状況を判定している。ユーザがズームボタンを操作すると、主制御部１１は、操作信号の入力状況に応じて、ズーム目標倍率等の動作条件を設定する。そして、主制御部１１は、音声信号の入力状況に応じて、光学ズーム動作の可否を判定する。
【００３６】
ここで、光学ズーム動作が可能であると判定した場合、主制御部１１は、動作条件に従って撮像部１５に光学ズーム動作を行わせる。一方、光学ズーム動作が不能であると判定した場合、主制御部１１は、光学ズームの作動時点を調節するとともに、動作条件に従って画像処理部２９にデジタルズーム動作を行わせる。
【００３７】
以下では、第１の実施形態に係るスチルカメラ１０の動作について詳細に説明する。図２に示すように、データの記録動作中、主制御部１１は、音声信号処理部３９に供給される音声信号に基づいて、音声信号の入力状況を判定する。音声信号の入力状況は、サンプリング周波数（例えば１６ｋＨｚ）の１サンプル毎に判定されてもよく、１フレーム（例えば５１２サンプル）毎に判定されてもよい。
【００３８】
音声信号の入力状況を判定するために、主制御部１１は、以下に示す式１〜式３により音声信号のノイズレベルｎ（ｔ）および信号レベルｓ（ｔ）を推定して、音声信号の信号ノイズ比ＳＮＲを算出する（ステップＳ１０１）。なお、ノイズレベルｎ（ｔ）および信号レベルｓ（ｔ）は、式１〜式３を用いる手法に限らず、音声検出を利用する手法、入力信号の最小値に基づく手法等により推定されてもよい。
【００３９】
【数１】
2011114406.tif 000003
【００４０】
ここで、ｎ（ｔ）、ｓ（ｔ）が時刻ｔのノイズレベルおよび信号レベルの推定値であり、ｍ（ｔ）が時刻ｔにマイクロホン３５から入力される音声信号の振幅である。また、α、βが０＜β＜α＜１の関係を満たす定数であり、γ、δが０＜γ＜δ＜１の関係を満たす定数である。
【００４１】
β＜αの関係から、ノイズレベルｎ（ｔ）には、ノイズレベルが増加傾向にある場合に現時点の振幅ｍ（ｔ）が反映され難くなり、ノイズレベルが減少傾向にある場合に現時点の振幅ｍ（ｔ）が反映され易くなる。また、γ＜δの関係から、信号レベルｓ（ｔ）には、信号レベルが増加傾向にある場合に現時点の振幅ｍ（ｔ）が反映され難くなり、信号レベルが減少傾向にある場合に現時点の振幅ｍ（ｔ）が反映され易くなる。これにより、非定常的な音声の影響を受け難い状態で、ノイズレベルｎ（ｔ）および信号レベルｓ（ｔ）を推定することができる。
【００４２】
主制御部１１は、操作部１３から入力される操作信号に基づいて、ズームボタンの操作状況を判定する（ステップＳ１０３）。ズームボタンが操作されている場合、主制御部１１は、操作状況に応じて光学ズームの目標倍率を更新する（ステップＳ１０５）。
【００４３】
主制御部１１は、光学ズームの現時点の倍率が目標倍率未満であるかを判定する（ステップＳ１０７）。そして、条件に該当する場合にステップＳ１０９の処理を行い、条件に該当しない場合にステップＳ１１５の処理を行う。
【００４４】
光学ズームの現時点の倍率が目標倍率未満である場合、主制御部１１は、ステップＳ１０１で算出したＳＮＲが所定の閾値Ｔ未満であるかを判定する（ステップＳ１０９）。ここで、閾値Ｔは、有音区間または発話区間を判定可能な値として予め設定されている。そして、主制御部１１は、条件に該当する場合、撮像部１５に光学ズーム動作（望遠側）を行わせ（ステップＳ１１１）、条件に該当しない場合、画像処理部２９にデジタルズーム動作（望遠側）を行わせる（ステップＳ１１３）。
【００４５】
ステップＳ１０７の処理で条件に該当しない場合（光学ズームの現時点の倍率が目標倍率以上である場合）、主制御部１１は、光学ズームの現時点の倍率が目標倍率と等しいかを判定する（ステップＳ１１５）。そして、条件に該当する場合（光学ズームが目標倍率に達している場合）、ズーム動作を行わず（ステップＳ１１７）、条件に該当しない場合（光学ズームが目標倍率を超えている場合）、撮像部１５に光学ズーム動作（広角側）を行わせる（ステップＳ１１９）。
【００４６】
上記フローによれば、有音区間または発話区間でズーム指示が入力されると、光学ズームの作動時点が調節され、光学ズーム動作に代えて、デジタルズーム動作が行われる（ステップＳ１１３）。そして、有音区間または発話区間の終了後に、作動時点を調節された光学ズーム動作が行われる（ステップＳ１１１）。なお、作動時点を調節された光学ズーム動作を行う場合、先に行われたデジタルズーム動作が解除される。
【００４７】
図３には、第１の実施形態による処理が従来の処理と対比して示されている。なお、図中、記録対象となる音声データに対応する音声信号がＶｒとして示されている。従来、状態ＳＴ−０に示すように、対象音声の入力時に光学ズーム動作が行われると、ズームノイズＮｚが収音されて、対象音声に重畳されてズームノイズＮｚが記録されてしまう。そして、対象音声に重畳されたノイズを信号処理で除去しようとすると、対象音声に歪みが生じ、記録品質が低下してしまう。
【００４８】
一方、本実施形態によれば、状態ＳＴ−１に示すように、対象音声が入力されていない時点（但し、定常雑音は入力されている。）に光学ズーム動作が行われるように、光学ズームの作動時点が調節される。また、光学ズーム動作に代えて、デジタルズーム動作が行われる。
【００４９】
これにより、ノイズ除去に伴う対象音声の歪みによる記録品質の低下を防止することができる。また、デジタルズーム動作を行うことで、画像データの記録品質の低下も防止することができる。
【００５０】
＜第２の実施形態＞
つぎに、図４を参照しながら、本発明の第２の実施形態について説明する。図４は、第２の実施形態に係るスチルカメラ１０による処理結果を示す模式図である。
【００５１】
図４には、第２の実施形態による処理が第１の実施形態による処理と対比して示されている。第１の実施形態によれば、状態ＳＴ−１に示すように、無音区間または非発話区間に光学ズーム動作が行われることで、ズームノイズＮｚの発生時点を対象音声が入力されていない時点に移動することができる。ところで、無音区間または非発話区間には、ズームノイズＮｚ以外とともに定常雑音のみがマイクロホン３５に収音されていると考えられる。
【００５２】
このため、状態ＳＴ−２に示すように、光学ズームの作動時点を調節するとともに、無音区間または非発話区間（但し、定常雑音が存在する。）のうちズームノイズＮｚが収音される期間に亘って、マイクロホン３５から入力される音声信号を無音化してもよい。具体的には、例えば、音声信号処理部３９からメインバス６１への音声データの供給を制限したり、音声データを無音時のデータに変換したりすればよい。これにより、無音区間または非発話区間においても、ズームノイズＮｚを含まない音声データを記録することができる。
【００５３】
＜第３の実施形態＞
つぎに、図５を参照しながら、本発明の第３の実施形態について説明する。図５は、第３の実施形態に係るスチルカメラ１０による処理結果を示す模式図である。
【００５４】
図５には、第３の実施形態による処理が第２の実施形態による処理と対比して示されている。第２の実施形態によれば、状態ＳＴ−２に示すように、音声信号を無音化することで、ズームノイズＮｚを抑制することができるが、定常雑音も抑制されてしまう。よって、定常雑音が記録されている区間と記録されていない区間が生じてしまい、音声データの再生時にユーザに違和感を持たせてしまう場合がある。
【００５５】
このため、状態ＳＴ−３に示すように、音声信号を無音化する期間に亘って、コンフォートノイズＮｃのデータを記録してもよい。ここで、コンフォートノイズＮｃは、スチルカメラ１０の使用環境における定常雑音の特性を反映して生成される。定常雑音の特性としては、例えば式１を用いて、周波数帯域毎にノイズレベルを推定した結果が適用される。
【００５６】
具体的には、スチルカメラ１０の起動中、定期的にコンフォートノイズＮｃのデータを生成し、直近のデータが利用可能となるようにデータを更新しておけばよい。そして、音声信号処理部３９からメインバス６１へ供給される音声データをコンフォートノイズＮｃのデータに変換すればよい。これにより、ズームノイズＮｚを抑制するとともに、定常雑音のレベル変動を抑制することができる。
【００５７】
＜第４の実施形態＞
つぎに、図６を参照しながら、本発明の第４の実施形態について説明する。図６は、第４の実施形態に係るスチルカメラ１０による処理結果を示す模式図である。
【００５８】
図６には、第４の実施形態による処理が第１の実施形態による処理と対比して示されている。第１の実施形態によれば、状態ＳＴ−１´に示すように、光学ズーム動作時に対象音声Ｖｔが入力されると、対象音声Ｖｔに重畳してズームノイズＮｚが収音されてしまう。そして、対象音声Ｖｔにノイズが重畳されているので、音声信号の入力状況から有音区間または発話区間を適切に判定することができない。
【００５９】
このため、光学ズーム動作時のノイズレベルｎ０（ｔ）を予め記録しておき、有音区間または発話区間の判定に利用することが考えられる。つまり、主制御部１１は、光学ズーム動作時以外に前述した式３を用いてＳＮＲを算出し、光学ズーム動作時に以下に示す式４を用いてＳＮＲを算出する。これにより、光学ズーム動作時でも、音声信号の入力状況から有音区間または発話区間を適切に判定することができる。
【００６０】
【数２】
2011114406.tif 000004
【００６１】
なお、光学ズーム動作時の有音区間または発話区間は、光学ズーム動作時のノイズレベルを用いる手法に限らず、例えば、光学ズームの動作時と非動作時の間で異なる閾値Ｔを用いる手法、ＳＮＲを周波数帯域毎に求めて加重平均する手法等により判定されてもよい。
【００６２】
そして、図２に示すステップＳ１１１の処理において、光学ズーム動作時に有音区間または発話区間を判定し、有音区間または発話区間が判定されると、状態ＳＴ−４に示すように、光学ズーム動作を一時的に停止してもよい。さらに、有音区間または発話区間の終了後に、光学ズーム動作を行うように、光学ズームの作動時点を調節してもよい。これにより、光学ズーム動作時に対象音声が入力されても、音声データの記録品質の低下を防止することができる。
【００６３】
＜第５の実施形態＞
つぎに、本発明の第５の実施形態について説明する。
【００６４】
第５の実施形態による処理では、音声信号のＳＮＲを用いて有音区間または発話区間を判定し、光学ズーム動作の可否を判定した。しかし、有音区間または発話区間は、ＳＮＲを用いる代わりに、音声検出により判定されてもよい。
【００６５】
具体的に、主制御部１１は、以下に示す式４によりスペクトルフラックスを算出する。なお、音声検出は、スペクトルフラックスを用いる手法に限らず、自己相関を用いる手法、ＬＰＣを用いる手法等により行われてもよい。
【００６６】
【数３】
2011114406.tif 000005
【００６７】
ここで、Ｘ（ｔ、ｆ）は、時刻ｔのフレームにおける周波数ｆのスペクトル成分の発生頻度を表している。スペクトルフラックスＦ（ｔ）は、式５に示すように、時刻ｔのフレームと時刻ｔ−１のフレームのスペクトル成分の発生頻度の差分の二乗和の平方根として定義される。
【００６８】
スペクトルフラックスＦ（ｔ）は、対象音声の場合、スペクトル成分の時間変動が大きいので大きくなり、定常雑音の場合、スペクトル成分の時間変動が小さいので小さくなることが知られている。このため、図２に示すステップＳ１０１の処理でスペクトルフラックスＦ（ｔ）を算出し、ステップＳ１０９の処理で閾値処理することで、ＳＮＲを用いる代わりに音声検出により有音区間または発話区間を判定することができる。
【００６９】
［３．まとめ］
以上説明したように、本発明の実施形態に係るスチルカメラ１０によれば、ズーム指示の操作信号が入力されると、音声信号の入力状況に応じて、光学ズームの作動時点が調節される。これにより、光学ズームの作動時点を対象音声が入力されていない時点に調節することで、ノイズ除去に伴う対象音声の歪みによる記録品質および／または出力品質の低下を防止することができる。
【００７０】
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【００７１】
例えば、上記実施形態の説明では、音声データをカードメモリに供給する場合について説明した。しかし、音声データは、カードメモリの代わりに、ハードディスク等の外部記録装置に供給されてもよい。また、音声データは、記録装置による記録に代えて、または記録と併せて、外部のスピーカ等の出力装置に供給されてもよい。
【符号の説明】
【００７２】
１０    スチルカメラ
１１    主制御部
１３    操作部
１５    撮像部
１７    レンズ制御部
１９    シャッタ制御部
２１    アイリス制御部
２３    タイミング生成部
２５    撮像信号変換部
２７    撮像信号処理部
２９    画像処理部
３１    表示制御部
３３    表示部
３５    マイクロホン
３７    音声信号変換部
３９    音声信号処理部
４１    音声処理部
４３    スピーカ
４５    メモリ制御部
４７    メモリ
４９    カード制御部
５１    メモリカード
【図１】
2011114406.tif 000006
【図２】
2011114406.tif 000007
【図３】
2011114406.tif 000008
【図４】
2011114406.tif 000009
【図５】
2011114406.tif 000010
【図６】
2011114406.tif 000011