(57)【要約】【課題】ファンの騒音による音質の低下を防止することができる音声処理装置を提供することを課題とする。【解決手段】音声処理装置は、第１のマイク（２０１）と、第２のマイク（２０２）と、前記第１のマイクより前記第２のマイクに近い位置に設けられるファン（１１６）と、前記第１のマイクからの音声信号と前記第２のマイクからの音声信号とを用いて、第１のチャンネルの音声信号と第２のチャンネルの音声信号とを生成する生成手段（２０３）と、前記生成手段により生成された前記第２のチャンネルの音声信号に対して、前記生成手段により生成された前記第１のチャンネルの音声信号を合成する処理を行い、前記第２のチャンネルの音声信号として出力する合成手段（２０４）と、前記第１のマイクからの音声信号のレベルまたは前記第２のマイクからの音声信号のレベルに応じて、前記合成手段における前記合成する処理を制御する制御手段（１１１）とを有する。【選択図】図２
2018201194.tif 000002
【特許請求の範囲】
【請求項１】
第１のマイクと、
第２のマイクと、
前記第１のマイクより前記第２のマイクに近い位置に設けられるファンと、
前記第１のマイクからの音声信号と前記第２のマイクからの音声信号とを用いて、第１のチャンネルの音声信号と第２のチャンネルの音声信号とを生成する生成手段と、
前記生成手段により生成された前記第２のチャンネルの音声信号に対して、前記生成手段により生成された前記第１のチャンネルの音声信号を合成する処理を行い、前記第２のチャンネルの音声信号として出力する合成手段と、
前記第１のマイクからの音声信号のレベルまたは前記第２のマイクからの音声信号のレベルに応じて、前記合成手段における前記合成する処理を制御する制御手段と
を有することを特徴とする音声処理装置。
【請求項２】
前記制御手段は、前記第１のマイクからの音声信号のレベルまたは前記第２のマイクからの音声信号のレベルに応じた合成比率で、前記生成手段からの前記第２のチャンネルの音声信号に対して前記生成手段からの前記第１のチャンネルの音声信号を合成し、前記第２のチャンネルの音声信号として出力するように、前記合成手段を制御することを特徴とする請求項１に記載の音声処理装置。
【請求項３】
前記制御手段は、前記第１のマイクからの音声信号のレベルまたは前記第２のマイクからの音声信号のレベルが小さくなるほど、前記生成手段からの前記第２のチャンネルの音声信号に対する前記生成手段からの前記第１のチャンネルの音声信号の合成比率が大きくなるように、前記合成手段を制御することを特徴とする請求項２に記載の音声処理装置。
【請求項４】
前記制御手段は、
前記第１のマイクからの音声信号のレベルと前記第２のマイクからの音声信号のレベルうちの大きい方が第１の閾値より大きい場合には、前記生成手段からの前記第２のチャンネルの音声信号に前記第１のチャンネルの音声信号を合成せずに出力し、
前記第１のマイクからの音声信号のレベルと前記第２のマイクからの音声信号のレベルのうちの大きい方が第２の閾値より小さい場合には、前記生成手段からの前記第２のチャンネルの音声信号の代わりに、前記生成手段からの前記第１のチャンネルの音声信号を前記第２のチャンネルの音声信号として出力するように、前記合成手段を制御することを特徴とする請求項１に記載の音声処理装置。
【請求項５】
前記合成手段は、前記第１のマイクからの音声信号のレベルと前記第２のマイクからの音声信号のレベルのうちの大きい方が前記第１の閾値以下かつ前記第２の閾値以上である場合には、前記大きい方のレベルに応じた合成比率で、前記第２のチャンネルの第１の音声信号に対して前記第１のチャンネルの第１の音声信号を合成するように、前記合成手段を制御することを特徴とする請求項４に記載の音声処理装置。
【請求項６】
前記制御手段は、前記第１のマイクからの音声信号のレベルと前記第２のマイクからの音声信号のレベルのうちの大きい方のレベルに応じて前記合成比率の目標値を設定し、前記合成手段における前記合成比率を、前記目標値に達するまで単位ステップずつ変化させることを特徴とする請求項５に記載の音声処理装置。
【請求項７】
前記合成手段は、前記生成手段からの前記第１のチャンネルの音声信号には前記生成手段からの前記第２のチャンネルの音声信号を合成せずに、前記第１のチャンネルの音声信号として出力することを特徴とする請求項１〜６のいずれか１項に記載の音声処理装置。
【請求項８】
前記制御手段は、前記第１のマイクからの音声信号のレベルと前記第２のマイクからの音声信号のレベルうちの大きい方が前記第２の閾値より大きい状態から小さい状態に変化した場合に、前記ファンの回転数を小さくするように制御することを特徴とする請求項４または５に記載の音声処理装置。
【請求項９】
前記制御手段は、前記合成比率に応じて前記ファンの回転数を変更することを特徴とする請求項２または３に記載の音声処理装置。
【請求項１０】
さらに、外部のマイクからの音声信号を入力する外部入力手段と、
前記合成手段から出力された音声信号と前記外部入力手段からの音声信号のいずれかを選択して出力する切り替え手段とを有することを特徴とする請求項１〜９のいずれか１項に記載の音声処理装置。
【請求項１１】
前記第１のチャンネルは右チャンネルと左チャンネルの一方であり、前記第２のチャンネルは他方であり、
前記第１のマイクは左側マイクと右側マイクのうちの前記一方のチャンネルに対応した側のマイクであり、前記第２のマイクは前記他方のチャンネルに対応した側のマイクであることを特徴とする請求項１〜１０のいずれか１項に記載の音声処理装置。
【請求項１２】
前記第１のマイクと前記第２のマイクはそれぞれ、無指向性のマイクであることを特徴とする請求項１〜１１のいずれか１項に記載の音声処理装置。
【請求項１３】
第１のマイクと、
第２のマイクと、
前記第１のマイクより前記第２のマイクに近い位置に設けられるファンとを有する音声処理装置の音声処理方法であって、
生成手段により、前記第１のマイクからの音声信号と前記第２のマイクからの音声信号とを用いて、第１のチャンネルの音声信号と第２のチャンネルの音声信号とを生成する生成ステップと、
合成手段により、前記生成ステップで生成された前記第２のチャンネルの音声信号に対して、前記生成ステップで生成された前記第１のチャンネルの音声信号を合成する処理を行い、前記第２のチャンネルの音声信号として出力する合成ステップと、
制御手段により、前記第１のマイクからの音声信号のレベルまたは前記第２のマイクからの音声信号のレベルに応じて、前記合成ステップにおける前記合成する処理を制御する制御ステップと
を有することを特徴とする音声処理方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、音声処理装置および音声処理方法に関する。
【背景技術】
【０００２】
音声処理装置として、ビデオカメラが知られている。ビデオカメラには、放熱用にファンを内蔵するものが存在する。ビデオカメラは、ファン動作時の音を収音してしまうために、音量を監視し、ファンの回転数を下げ、騒音を低減するビデオカメラや、サイレントモードを設けてファンを止めてしまうビデオカメラが知られている（特許文献１および特許文献２参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１６−８２４４９号公報
【特許文献２】特開２００４−２００７７８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、音の大きさに着目し、ファンを停止してしまったのでは、本来の放熱効果が十分に得られない。また、ファン停止後に温度が上昇すると、ファンを動作させるか、機器を停止させてユーザに使用制限を与え、放熱をする必要があり、ユーザが使いたいときに使えない機器になってしまう。
【０００５】
本発明の目的は、ファンの騒音による音質の低下を防止することができる音声処理装置および音声処理方法を提供することである。
【課題を解決するための手段】
【０００６】
本発明の音声処理装置は、第１のマイクと、第２のマイクと、前記第１のマイクより前記第２のマイクに近い位置に設けられるファンと、前記第１のマイクからの音声信号と前記第２のマイクからの音声信号とを用いて、第１のチャンネルの音声信号と第２のチャンネルの音声信号とを生成する生成手段と、前記生成手段により生成された前記第２のチャンネルの音声信号に対して、前記生成手段により生成された前記第１のチャンネルの音声信号を合成する処理を行い、前記第２のチャンネルの音声信号として出力する合成手段と、前記第１のマイクからの音声信号のレベルまたは前記第２のマイクからの音声信号のレベルに応じて、前記合成手段における前記合成する処理を制御する制御手段とを有する。
【発明の効果】
【０００７】
本発明によれば、ファンの騒音による音質の低下を防止することができる。
【図面の簡単な説明】
【０００８】
【図１】実施形態による撮像装置の構成例を示すブロック図である。
【図２】実施形態による音声処理装置の構成例を示すブロック図である。
【図３】音声処理方法を示すフローチャートである。
【図４】音声処理装置の動作を示す図である。
【発明を実施するための形態】
【０００９】
図１（ａ）は本発明の実施形態による音声処理装置を含む撮像装置１００の構成例を示す図であり、図１（ｂ）は撮像装置１００の外観図である。撮像装置１００は、デジタルカメラ、ビデオカメラの他、スマートフォン、タブレット、工業用カメラ、医療用カメラ等に適用可能である。撮像部１０１は、撮影レンズおよび撮像素子を有し、被写体の光学像を画像信号に変換し、アナログデジタル変換をして出力する。画像処理部１０２は、撮像部１０１から入力された画像信号に対して、現像処理およびホワイトバランス調整などの各種の処理を行い、出力する。
【００１０】
音声入力部１０３は、図１（ｂ）のマイク２０１および２０２を有し、撮像装置１００の周辺の音声を取得し、音声信号を出力する。また、音声入力部１０３は、外部からの音声入力端子を有し、外部に接続されたマイクからの音声を入力する。音声処理部１０４は、音声入力部１０３から入力された音声信号をアナログからデジタルに変換し、更に、指向性に関する処理、レベルの適正化処理、特定周波数の低減処理等の音声に関する処理を行い、出力する。メモリ１０５は、画像処理部１０２および音声処理部１０４により得られた画像信号および音声信号、或いは符号化された画像信号および音声信号などを一時的に記憶する。
【００１１】
符号化処理部１０６は、メモリ１０５に一時的に記憶された画像信号および音声信号を読み出し、画像信号の符号化および音声信号の符号化などを行い、圧縮画像データおよび圧縮音声データ等を生成する。記録再生部１０７は、符号化処理部１０６で生成された圧縮画像データ、圧縮音声データ、その他必要なデータを記録媒体１０８に記録する。また、記録再生部１０７は、記録媒体１０８に記録された各データを読み出して出力する。
【００１２】
記録媒体１０８は、メモリカードなどのランダムアクセスの記録媒体である。また、記録媒体１０８は、磁気ディスク、光学式ディスク、半導体メモリなどのあらゆる方式の記録媒体であってよく、また複数の記録媒体であってもよい。表示制御部１０９は、記録時においては撮像部１０１により得られた動画像や撮像装置１００の操作のために必要な情報を表示部１１０に表示する。また、表示制御部１０９は、再生時においては記録再生部１０７により再生された動画像などを表示部１１０に表示する。表示部１１０は、液晶ディスプレイ、有機ＥＬディスプレイ、電子ペーパー等の表示デバイスを含む。
【００１３】
操作部１１２は、ボタンやダイヤルなどを含み、ユーザの操作に応じて、指示信号を制御部１１１に出力する。操作部１１２は、例えば、電源ボタン、記録開始ボタン、メニュー表示ボタン、決定ボタン、カーソルキー、表示部１１０の任意の点を指定するためのポインティングデバイス、タッチパネル等を含む。制御部１１１は、操作部１１２から出力された指示信号に基づいて、撮像装置１００の各部を制御する。制御部１１１は、各種処理プログラムを実行するための例えば、ＣＰＵ（ＭＰＵ）、メモリ（ＤＲＡＭ、ＳＲＡＭ）などを有する。バス１１３は、各種データ、制御信号などを各部の間で転送する。
【００１４】
音声出力部１１４は、再生時において記録再生部１０７により再生された音声を外部の音声モニタなどに出力する。また、ファン制御部１１５は、撮像装置１００の本体を冷却するためのファン１１６の動作を制御する。ファン制御部１１５は、ファン１１６を駆動するためのモータなどを有し、後述のように、制御部１１１からの指示に応じてファン１１６の回転を制御する。ファン１１６は、ファン制御部１１５により回転させられることで、撮像装置１００の内部の熱を外部に放出して、撮像装置１００を冷却する。
【００１５】
次に、撮像装置１００の通常の動作について説明する。ユーザが操作部１１２の電源ボタンを操作すると、操作部１１２は、制御部１１１に起動の指示信号を出力する。制御部１１１は、この指示信号を受けて、不図示の電源供給部を制御して、撮像装置１００の各ブロックに対して電源電圧を供給させる。
【００１６】
電源電圧が供給されると、制御部１１１は、例えば、操作部１１２のモード切り換えスイッチが、例えば、撮影モード、再生モード等のどのモードであるかを、操作部１１２からの指示信号により確認する。撮影モードでは、撮像装置１００は、撮影待機状態でユーザが操作部１１２の記録開始ボタンを操作することで、撮影を開始し、その間、圧縮画像データと圧縮音声データを、記録媒体１０８に記録する。そして、撮像装置１００は、ユーザが操作部１１２の撮影終了ボタンを操作することで、撮影を終了し、再び撮影待機状態になる。再生モードでは、撮像装置１００は、ユーザが選択したファイルに関する圧縮画像データと圧縮音声データを記録媒体１０８から再生して、表示部１１０に映像を表示させる。
【００１７】
まず、撮影モードについて説明する。撮影モードが設定されると、制御部１１１は、前述のようにまず、撮影待機状態に設定する。撮影待機状態で、ユーザが操作部１１２の記録開始ボタンを操作することにより、操作部１１２は撮影開始の指示信号を送信し、制御部１１１は、撮影開始の制御信号を撮像装置１００の各ブロックに出力し、以下のような動作をさせるように制御する。
【００１８】
撮像部１０１は、撮影レンズにより取り込まれた被写体の光学像を撮像素子により画像信号に変換し、アナログデジタル変換し、画像処理部１０２に出力する。画像処理部１０２は、入力されたデジタル画像信号の画質調整処理（ホワイトバランスや色、明るさなど）を設定値に基づいて実行し、表示制御部１０９に出力する。表示制御部１０９は、入力した画像信号に関する映像を表示部１１０に表示させる。また、画像信号は、メモリ１０５にも出力され、メモリ１０５に一時的に記憶される。
【００１９】
音声入力部１０３は、内蔵されたマイクまたは音声入力端子を介して接続された音声装置から得られた音声信号をアナログからデジタルに変換して音声処理部１０４に出力する。音声処理部１０４は、入力された音声信号を必要に応じて選択し、レベルの適正化処理、特定周波数の低減処理等をして音声信号を生成し、メモリ１０５に一時的に記憶させる。
【００２０】
そして、符号化処理部１０６は、メモリ１０５に一時的に記憶された画像信号および音声信号を読み出して所定の符号化を行い、圧縮画像データおよび圧縮音声データ等を生成する。そして、制御部１１１は、これらの圧縮画像データおよび圧縮音声データを合成し、データストリームを形成し、記録再生部１０７に出力する。記録再生部１０７は、ＵＤＦ、ＦＡＴ等のファイルシステム管理のもとに、データストリームを一つの動画ファイルとして記録媒体１０８に書き込んでいく。撮像装置１００は、以上の動作を撮影中は継続する。
【００２１】
そして、ユーザが操作部１１２の記録ボタンを操作することにより、操作部１１２は撮影終了の指示信号を制御部１１１に出力し、制御部１１１は、撮影終了の制御信号を撮像装置１００の各ブロックに出力し、以下のような動作をさせるように制御する。
【００２２】
画像処理部１０２および音声処理部１０４は、それぞれ、画像信号および音声信号をメモリ１０５に出力することを停止する。そして、符号化処理部１０６は、メモリ１０５に記憶されている残りの画像信号と音声信号とを読み出して所定の符号化を行い、圧縮画像データと圧縮音声データ等を生成し、それが終わると動作を停止する。
【００２３】
制御部１１１は、これらの最後の圧縮画像データと圧縮音声データを合成し、データストリームを形成し、記録再生部１０７に出力する。記録再生部１０７は、ＵＤＦ、ＦＡＴ等のファイルシステム管理のもとに、データストリームを一つの動画ファイルとして記録媒体１０８に書き込んでいく。そして、記録再生部１０７は、データストリームの供給が停止したら、動画ファイルを完成させて、記録動作を停止させる。制御部１１１は、記録動作が停止すると、撮影待機状態に移行させるように制御信号を撮像装置１００の各ブロックに出力して、撮影待機状態に戻る。
【００２４】
また、撮影待機状態では、制御部１１１は、撮像装置１００の各ブロックを以下のような動作をさせるように制御する。画像処理部１０２は、画像信号を表示制御部１０９に出力し、表示部１１０に画像信号に関する映像を表示させる。ユーザは、この様にして表示された映像を見ながら撮影の準備を行う。
【００２５】
次に、再生モードでは、制御部１１１は、再生状態に移行させるように、制御信号を撮像装置１００の各ブロックに出力し、以下のような動作をさせる。記録再生部１０７は、記録媒体１０８に記録された圧縮画像データと圧縮音声データとからなる動画ファイルを読み出し、読み出した圧縮画像データと圧縮音声データを符号化処理部１０６に出力する。符号化処理部１０６は、圧縮画像データと圧縮音声データを一時的にメモリ１０５に記憶し、所定の手順で復号し、復号化した画像信号を表示制御部１０９に出力する。表示制御部１０９は、入力された画像信号に係る映像を表示部１１０に表示させる。
【００２６】
ファン制御部１１４は、撮像装置１００の電源がオンされた後、オフにされるまでの間は、ファン１１６を回転し続けるように制御して、撮像装置１００を冷却する。また、これ以外にも、例えば、動画の記録中、或いは、再生中など、多くの熱を発生する状態でファン１１６を回転させて、撮像装置１００を冷却するようにしてもよい。
【００２７】
図１（ｂ）は、撮像装置１００を上側から見た場合の外観図である。矢印１１７の方向が被写体の方向である。撮像装置１００には、被写体の方向に対して左側のマイク２０１と右側のマイク２０２が配置される。本実施形態では、左側マイク２０１、右側マイク２０２からの音声信号から、左チャンネルと右チャンネルのステレオ音声信号を生成する。従って、左側マイク２０１は、左チャンネルと右チャンネルのうちの一方である左チャンネルに対応した側のマイクである。また、右側マイク２０２は、左チャンネルと右チャンネルのうちの他方である右チャンネルに対応した側のマイクである。更に、ファン１１６は、筐体１００ａの内部で、被写体（音源）の方向に対して右側に配置される。このように、ファン１１６は、冷却用のファンであり、左側マイク２０１より右側マイク２０２に近い位置に設けられる。そのため、右側マイク２０２は、左側マイク２０１よりも、ファン１１６の回転により発生する雑音を多く取り込むことになる。
【００２８】
図２は、音声処理部１０４の構成例を示す図である。音声処理部１０４は、指向性生成部２０３と、合成部２０４と、切り替え部２０５と、レベル検出部２０７とを有する。左側マイク２０１と右側マイク２０２は、音声入力部１０３の一部である。左側マイク２０１は、音声を電気信号（音声信号）に変換する。右側マイク２０２は、音声を電気信号（音声信号）に変換する。例えば、左側マイク２０１と右側マイク２０２は、無指向性のマイクである。指向性生成部２０３は、左側マイク２０１からの音声信号と右側マイク２０２からの音声信号とを用いて、公知の所定の処理を行い、左側に指向性を持つ左チャンネルの音声信号と右側に指向性を持つ右チャンネルの音声信号を生成し、合成部２０４に出力する。
【００２９】
合成部２０４は、指向性生成部２０３が生成した左チャンネルの音声信号と右チャンネルの音声信号を入力し、右チャンネルの音声信号と左チャンネルの音声信号を出力する。合成部２０４は、指向性生成部２０３から入力した左チャンネルの音声信号をそのまま左チャンネルの音声信号として出力する。即ち、合成部２０４は、指向性生成部２０３から入力した左チャンネルの音声信号に対して、指向性生成部２０３からの右チャンネルの音声信号を合成せずに、左チャンネルの音声信号として出力する。また、合成部２０４は、後述のように、制御部１１１からの合成比率の情報に基づいて、右チャンネルの音声信号に対して左チャンネルの音声信号を合成して、右チャンネルの音声信号として出力する。合成部２０４は、合成比率が０の場合には、指向性生成部２０３からの右チャンネルの音声信号をそのまま右チャンネルの音声信号として出力する。また、合成部２０４は、合成比率が大きくなるほど、右チャンネルの音声信号に対する左チャンネルの音声信号の割合が大きくなるように合成して右チャンネルの信号として出力する。そして、合成部２０４は、合成比率が１の場合、右チャンネルの音声信号を合成せず、左チャンネルの音声信号をそのまま右チャンネルの音声信号として出力する。すなわち、合成比率が０の場合、合成部２０４は、指向性生成部２０３から入力した左チャンネルと右チャンネルの音声信号をそのまま左チャンネルと右チャンネルの音声信号（ステレオ音声信号）として出力する。また、合成比率が１の場合、合成部２０４は、指向性生成部２０３から入力した左チャンネル信号を左チャンネルと右チャンネルの音声信号（モノラル音声信号）として出力する。
【００３０】
切り替え部２０５は、合成部２０４が出力する音声信号と、外部入力部２０６からの外部音声信号のいずれかを、制御部１１１の指示に応じて選択して出力する。外部入力部２０６は、音声入力部１０３の一部であり、外部に接続されたマイクからの外部音声信号を入力する。レベル検出部２０７は、マイク２０１および２０２からの音声信号のレベルを検出し、大きい方のレベルを制御部１１１に出力する。
【００３１】
図３（ａ）〜（ｃ）は、音声処理部１０４による音声処理を示すフローチャートである。図３（ａ）は、合成部２０４の合成比率とファン１１６の回転数の制御のための各種のパラメータの設定処理を説明するフローチャートである。なお、図３に示す各フローチャートの処理は、制御部１１１が各部を制御することにより実行される。制御部１１１は、プログラムを実行することにより、図３（ａ）〜（ｃ）の制御を行う。
【００３２】
図３（ａ）〜（ｃ）で使用する各パラメータは、以下の通りである。Ｎｏｗは、レベル検出部２０７により検出された音声レベルの時間平均値である。ＦａｎＮｏｗは、ファン１１６の現在の回転数である。ＮｏｗＭｉｘは、合成部２０４に設定されている現在の合成比率である。Ｋは、合成比率を変更する際の１ステップ当たりの変化量である。Ａは、右チャンネルの音声に対する左チャンネルの音声の合成比率の設定値（目標値）である。Ｂは、ファン１１６の回転数の設定値であり、Ｂが１の場合、ファン１１６は通常の回転数となる。ＦａｎＬｏは、製品で決められたファン回転数の最小限度値である。ＦａｎＮｏｒｍは、製品仕様で決められた通常時のファン回転数である。
【００３３】
まず、図３（ａ）の処理を説明する。図３（ａ）の処理は、撮像装置１００により動画と音声の記録の開始の指示に応じて実行され、記録停止の指示に応じて停止する。また、ユーザは、操作部１１２を操作することにより、内蔵マイク２０１および２０２からの音声と、外部マイクからの入力音声の何れかを選択することができる。内蔵マイク２０１および２０２からの音声が選択されている場合に、図３（ａ）〜（ｃ）の処理が実行される。
【００３４】
まず、ステップＳ３０１では、制御部１１１は、レベル検出部２０７からの音声レベルを取得する。レベル検出部２０７は、左側マイク２０１と右側マイク２０２の音声信号のうちの大きい方の音声信号の音声レベルを検出する。次に、ステップＳ３０２では、制御部１１１は、取得した音声レベルを平均化する。例えば、制御部１１１は、音声レベルの１秒分の平均値を算出し、その平均値を入力音声レベルＮｏｗとする。
【００３５】
次に、ステップＳ３０３では、制御部１１１は、現在の入力音声レベルＮｏｗが、第１の閾値よりも大きいか否かを判定する。そして、制御部１１１は、入力音声レベルＮｏｗが第１の閾値より大きいと判定した場合にはステップＳ３０４に処理を進め、入力音声レベルＮｏｗが第１の閾値よりも大きくない（第１の閾値以下）と判定した場合にはステップＳ３０６に処理を進める。
【００３６】
ステップＳ３０４では、制御部１１１は、合成比率Ａを０に設定する。これにより、合成比率ＮｏｗＭｉｘが０になると、合成部２０４は、左チャンネルの音声信号を合成せず、指向性生成部２０３の右チャンネルの音声信号をそのまま右チャンネルの音声信号として出力する。その後、ステップＳ３０５では、制御部１１１は、期間ＬｏＬｅｖｅｌＴｉｍｅを０に初期化する。第１の閾値および期間ＬｏＬｅｖｅｌＴｉｍｅについては後述する。
【００３７】
Ｓ３０６では、制御部１１１は、入力音声レベルＮｏｗが第２の閾値よりも小さいか否かを判定する。第２の閾値は、第１の閾値より小さい。制御部１１１は、入力音声レベルＮｏｗが第２の閾値より小さいと判定した場合にはステップＳ３０８に処理を進め、入力音声レベルＮｏｗが第２の閾値よりも小さくない（第２の閾値以上）と判定した場合にはステップＳ３０７に処理を進める。
【００３８】
ステップＳ３０７では、制御部１１１は、下記の式により合成比率Ａを設定する。
Ａ＝１−（（Ｎｏｗ−第２の閾値）／（第１の閾値−第２の閾値））
【００３９】
ここで、第１の閾値と第２の閾値について説明する。第２の閾値は、一般に静かな環境であると感じられる状態での環境音レベルに対応した値である。このような状態では、環境音としてほぼフロアノイズによる音声が取得される。例えば、第２の閾値は、４０ｄｂＦｓを設定する。また、第１の閾値は、第２の閾値よりも大きな値である。第１の閾値は、特別に静かな環境というのではなく、通常の自然環境において取得される音声のレベルに対応した値である。例えば、第１の閾値は、６０ｄｂＦｓである。また、期間ＬｏＬｅｖｅｌＴｉｍｅは、入力音声レベルＮｏｗが第２の閾値よりも小さい状態が継続している期間を示す値である。
【００４０】
前述のように、ステップＳ３０７では、制御部１１１は、入力音声レベルＮｏｗが第１の閾値と第２の閾値の間にある場合には、第１の閾値と第２の閾値との差分に対する、入力音声レベルＮｏｗと第２の閾値との差分の割合に応じて、合成比率Ａを設定する。言い換えれば、入力音声レベルＮｏｗが小さいほど、右チャンネルの音声信号に対する左チャンネルの音声信号の合成比率が大きくなるように、合成比率Ａを設定する。その後、ステップＳ３０５では、制御部１１１は、期間ＬｏＬｅｖｅｌＴｉｍｅを０に初期化する。
【００４１】
ステップＳ３０８では、制御部１１１は、合成比率Ａを１に設定する。これにより、合成比率ＮｏｗＭｉｘが１になると、合成部２０４は、指向性生成部２０３の左チャンネルの音声信号をそのまま右チャンネルの音声信号として出力する。即ち、合成部２０４は、指向性生成部２０３からの右チャンネルの音声信号の代わりに、指向性生成部２０３からの左チャンネルの音声信号を、右チャンネルの音声信号として出力する。その後、ステップＳ３０９では、制御部１１１は、期間ＬｏＬｅｖｅｌＴｉｍｅの値をインクリメントする。
【００４２】
図３（ｂ）は、合成比率の設定処理を示すフローチャートである。まず、ステップＳ３１０では、制御部１１１は、図３（ａ）で設定した合成比率の目標値Ａを取得する。次に、ステップＳ３１１では、制御部１１１は、合成比率の目標値Ａが現在設定されている合成比率ＮｏｗＭｉｘよりも大きいか否かを判定する。そして、制御部１１１は、合成比率の目標値Ａが合成比率ＮｏｗＭｉｘより大きいと判定した場合にはステップＳ３１２に処理を進め、合成比率の目標値Ａが合成比率ＮｏｗＭｉｘよりも大きくないと判定した場合にはステップＳ３１３に処理を進める。
【００４３】
ステップＳ３１２では、制御部１１１は、合成比率ＮｏｗＭｉｘをＫだけ増加し、新たな合成比率ＮｏｗＭｉｘとして合成部２０４に設定する。その後、ステップＳ３１５では、制御部１１１は、ウエイト時間Ｔだけ待機し、図３（ｂ）の処理を繰り返す。
【００４４】
ステップＳ３１３では、制御部１１１は、目標値Ａが合成比率ＮｏｗＭｉｘよりも小さいか否かを判定する。そして、制御部１１１は、目標値Ａが合成比率ＮｏｗＭｉｘよりも小さいと判定した場合には、ステップＳ３１４に処理を進める。また、制御部１１１は、目標値Ａが合成比率ＮｏｗＭｉｘよりも小さくない、即ち、ここでは、目標値Ａが合成比率ＮｏｗＭｉｘと同じと判定した場合には、合成比率ＮｏｗＭｉｘを増減させずに、ステップＳ３１５に処理を進める。
【００４５】
ステップＳ３１４では、制御部１１１は、合成比率ＮｏｗＭｉｘをＫだけ減らし、新たな合成比率ＮｏｗＭｉｘとして合成部２０４に設定し、ステップＳ３１５に処理を進める。ステップＳ３１５では、制御部１１１は、ウエイト時間Ｔだけ待機し、図３（ｂ）の処理を繰り返す。
【００４６】
前述のように、合成比率が０の場合、合成部２０４は、指向性生成部２０３の右チャンネルの音声信号をそのまま右チャンネルの音声信号として出力する。合成比率が１の場合、合成部２０４は、指向性生成部２０３の左チャンネルの音声信号をそのまま右チャンネルの音声信号として出力する。合成比率を変更する際に、合成比率の目標値Ａに達するまで、処理サイクル当たりＫ分の増減をウエイト時間Ｔ以上かけて行い、緩やかに合成比率を変更する。ここで、ウエイト時間Ｔは、数秒、例えば１秒から２秒程度である。
【００４７】
図３（ｃ）は、ファン回転制御の処理を示すフローチャートである。まず、ステップＳ３１６では、制御部１１１は、期間ＬｏＬｅｖｅｌＴｉｍｅが閾値ＴｈＴｉｍｅよりも長いか否かを判定する。閾値ＴｈＴｉｍｅは、ウエイト時間Ｔよりも短い１秒以下程度の所定値であり、例えば０．５秒程度である。制御部１１１は、期間ＬｏＬｅｖｅｌＴｉｍｅが閾値ＴｈＴｉｍｅより長いと判定した場合にはステップＳ３１７に処理を進め、期間ＬｏＬｅｖｅｌＴｉｍｅが閾値ＴｈＴｉｍｅよりも長くないと判定した場合にはステップＳ３１８に処理を進める。
【００４８】
ステップＳ３１７では、制御部１１１は、回転数の設定値Ｂとして合成比率ＮｏｗＭｉｘを設定し、ステップＳ３１９に処理を進める。ステップＳ３１８では、制御部１１１は、回転数の設定値Ｂとして１を設定し、ステップＳ３１９に処理を進める。ステップＳ３１９では、制御部１１１は、回転数の設定値Ｂに基づいて、以下の式によりファン１１６の回転数ＦａｎＮｏｗを決定する。
ＦａｎＮｏｗ＝ＦａｎＬｏ＋（ＦａｎＮｏｒｍ−ＦａｎＬｏ）×Ｂ
【００４９】
図３（ｂ）に示すように、ウエイト時間Ｔを設定することで、入力音声レベルＮｏｗが変化した場合には、それに応じて合成比率ＮｏｗＭｉｘが緩やかに変化する。合成比率ＮｏｗＭｉｘは、単位時間Ｔごとに単位ステップＫずつ変化する。また、図３（ｃ）に示すように、期間ＬｏＬｅｖｅｌＴｉｍｅが閾値ＴｈＴｉｍｅより長い場合には、合成比率ＮｏｗＭｉｘに応じて、ファン１１６の回転数ＦａｎＮｏｗが変化する。周囲の環境の音量が小さくなった場合に、指向性生成部２０３が生成する右チャンネルの音声信号は、ファン１１６からの騒音が大きくなる。その場合、合成部２０４は、指向性生成部２０３が生成する左チャンネルの音声信号を右チャンネルの音声信号として出力することにより、記録される音声信号に含まれるファンの騒音を低減することができる。また、ファン１１６の回転数ＦａｎＮｏｗを合成比率ＮｏｗＭｉｘに応じて低下させるので、ファン１１６による冷却能力をあまり低下させずに、騒音を小さくすることができる。
【００５０】
図４に示すように、入力音声レベルＮｏｗが急激に小さくなり、入力音声レベルＮｏｗが第２の閾値４０４より小さくなると、制御部１１１は、迅速にファン１１６の回転数ＦａｎＮｏｗを低下させると共に、合成比率ＮｏｗＭｉｘを徐々に低下させる。合成比率ＮｏｗＭｉｘを急激に変化させると、音質への影響が大きい。そのため、入力音声レベルＮｏｗが急激に小さくなった場合には、ファン１１６の回転数ＦａｎＮｏｗを迅速に低下させ、記録される音声信号に含まれるファン１１６の騒音を低減させる。合成比率ＮｏｗＭｉｘについては、ファン１１６の回転数ＦａｎＮｏｗの変更よりもゆっくりと低下させることで、音質の変化への影響を少なくする。
【００５１】
図４は、動画と音声の記録中における、入力音声レベルＮｏｗの変化に応じた、ファン１１６の回転数ＦａｎＮｏｗと、右チャンネルの音声信号に対する左チャンネルの音声信号の合成比率ＮｏｗＭｉｘの制御の例を示す図である。状態４０１は、入力音声レベルＮｏｗがゆっくりと変化している場合の状態を示す。状態４０２は、入力音声レベルＮｏｗが急激に変化した場合の状態を示す。また、閾値４０３は第１の閾値であり、閾値４０４は第２の閾値である。期間４０５は、入力音声レベルＮｏｗが徐々に低下している期間である。期間４０６は、入力音声レベルＮｏｗが徐々に大きくなっている期間である。期間４０７は、入力音声レベルＮｏｗが第１の閾値４０３よりも小さくなっているが、期間ＬｏＬｅｖｅｌＴｉｍｅが閾値ＴｈＴｉｍｅよりも短い期間である。期間４０８は、入力音声レベルＮｏｗが第２の閾値４０４よりも小さく、期間ＬｏＬｅｖｅｌＴｉｍｅが閾値ＴｈＴｉｍｅよりも長い期間である。期間４０９は、入力音声レベルＮｏｗが第２の閾値４０４よりも小さくなり、それに応じて合成比率ＮｏｗＭｉｘが徐々に１に近づいている期間である。
【００５２】
期間４０５および４０６では、入力音声レベルＮｏｗが第１の閾値４０３よりも小さく、第２の閾値４０４よりも大きいため、合成比率ＮｏｗＭｉｘが徐々に変化する。しかし、期間４０５および４０６では、期間ＬｏＬｅｖｅｌＴｉｍｅが０のままであり、ファンの回転数ＦａｎＮｏｗは通常回転数ＦａｎＮｏｒｍと同一となる。
【００５３】
期間４０７では、入力音声レベルＮｏｗが第１の閾値４０３よりも小さくなり、第２の閾値４０４よりも大きいため、合成比率ＮｏｗＭｉｘが入力音声レベルＮｏｗに追従して変化を開始する。期間ＬｏＬｅｖｅｌＴｉｍｅが増加しているが、期間ＬｏＬｅｖｅｌＴｉｍｅが閾値ＴｈＴｉｍｅよりも短い。
【００５４】
期間４０８では、期間ＬｏＬｅｖｅｌＴｉｍｅが閾値ＴｈＴｉｍｅより長くなり、ファン１１６の回転数ＦａｎＮｏｗが下がる。ファン１１６の回転数ＦａｎＮｏｗは、合成比率ＮｏｗＭｉｘが変化するタイミングで変化する。ファン１１６の回転数ＦａｎＮｏｗは、入力音声レベルＮｏｗが第２の閾値４０４より大きい状態から小さい状態に変化した場合に減少し、その後、増加する。期間４０９では、合成比率ＮｏｗＭｉｘが１に近づいているので、ファン１１６の回転数の設定値Ｂも１に近づき、ファン１１６の回転数ＦａｎＮｏｗが通常回転数ＦａｎＮｏｒｍに戻っている。
【００５５】
右側マイク２０２は、左側マイク２０１より、ファン１１６からの騒音が入力されやすい位置に配置されているので、合成部２０４は、右チャンネルの音声信号に対して左チャンネルの音声信号を合成して、右チャンネルの音声信号として出力する。制御部１１１は、入力音声レベルＮｏｗに応じて、右チャンネルの音声信号に対する左チャンネルの音声信号の合成比率ＮｏｗＭｉｘを変える。
【００５６】
制御部１１１は、入力音声レベルＮｏｗが第１の閾値４０３より大きく、ファン１１６からの騒音が入力音声信号に含まれていてもそれほど目立たず、音質の劣化も少ない場合には、合成比率の目標値Ａおよび合成比率ＮｏｗＭｉｘを０にする。その場合、合成部２０４は、右チャンネルの音声信号に対して左チャンネルの音声信号を合成せずに、右チャンネルの音声信号をそのまま右チャンネルの音声信号として出力する。
【００５７】
また、制御部１１１は、入力音声レベルＮｏｗが第２の閾値４０４より小さく、周囲が静かな環境となって、ファン１１６からの騒音が目立つと思われる場合には、ファン１１６からの騒音の影響が少ない左チャンネルの音声の合成比率ＮｏｗＭｉｘを大きくする。これにより、音質の劣化を防ぐ。制御部１１１は、入力音声レベルＮｏｗが第２の閾値４０４よりも小さい場合には、合成比率の設定値Ａおよび合成比率ＮｏｗＭｉｘを１にする。その場合、合成部２０４は、指向性生成部２０３の左チャンネルの音声信号をそのまま右チャンネルの音声信号として出力する。合成部２０４は、右チャンネルの出力音声信号と左チャンネルの出力音声信号が同じになる。記録される音声は、モノラル音声となるが、もともと入力音声レベルＮｏｗが小さいので、音質に対する影響は小さい。
【００５８】
上記では、音声処理装置を含む撮像装置１００について説明したが、撮像装置１００以外にも、音声を処理するものであれば、どのような装置であってもよい。たとえば、ボイスレコーダーや携帯電話、スマートフォン、パソコン等であってもよい。
【００５９】
また、本実施形態では、２つの無指向性マイク２０１および２０２を使用したが、指向性のマイクを使用することも可能である。また、２チャンネルだけでなく、５．１チャンネルや７．１チャンネルなどの音声を処理することも可能である。また、図１（ｂ）では、ファン１１６が被写体方向に対して右側に配置されていたが、左側に配置されるようにしてもよい。この場合には、合成部２０４は、制御部１１１からの合成比率ＮｏｗＭｉｘに応じて、左チャンネルの音声信号に対して、右チャンネルの音声信号を合成して左チャンネルの音声信号として出力する。また、合成部２０４は、右チャンネルの音声信号をそのまま右チャンネルの音声信号として出力する。
【００６０】
（その他の実施形態）
本発明は、上述の実施形態の１以上の機能を実現するプログラムを、ネットワーク又は記憶媒体を介してシステム又は装置に供給し、そのシステム又は装置のコンピュータにおける１つ以上のプロセッサがプログラムを読み出し実行する処理でも実現可能である。また、１以上の機能を実現する回路（例えば、ＡＳＩＣ）によっても実現可能である。
【００６１】
なお、上記実施形態は、何れも本発明を実施するにあたっての具体化の例を示したものに過ぎず、これらによって本発明の技術的範囲が限定的に解釈されてはならないものである。すなわち、本発明はその技術思想、又はその主要な特徴から逸脱することなく、様々な形で実施することができる。
【符号の説明】
【００６２】
１１６  ファン、２０１  左側マイク、２０２  右側マイク、２０３  指向性生成部、２０４  合成部
【図１】
2018201194.tif 000003
【図２】
2018201194.tif 000004
【図３】
2018201194.tif 000005
【図４】
2018201194.tif 000006