(57)【要約】【課題】ノイズが重畳した音声信号についてノイズ除去を行う場合の音質劣化の防止を図る。【解決手段】ノイズ埋没判定結果に基づき、ノイズ除去が行われた音声信号とノイズ除去が行われていない音声信号とを択一的に選択することで、ノイズが埋没しないとされた場合にのみ上記ノイズ除去が行われた音声信号が選択出力されるようにする。これによりノイズが埋没するとされた場合に無駄なノイズ除去が行われてしまうことを効果的に防止することができ不要な音質劣化を防止できる。またこのとき、上記ノイズ埋没判定のための信号分析はノイズが発生する区間内でのみ行うもとして処理負担及び消費電力の削減と共に、ノイズ埋没判定の判定漏れを防止する。【選択図】図２
2008052771.tif 000002
【特許請求の範囲】
【請求項１】
収音手段を入力源とする音声信号を所要の記録媒体に記録する記録手段を備えると共に、記録動作に伴い間欠的なノイズを発生するノイズ発生源を有する記録装置であって、
上記音声信号に対して所定の信号処理を施すことによって上記音声信号に重畳する上記ノイズを除去するためのノイズ除去処理を行うノイズ除去手段と、
所定情報に基づき、上記ノイズが発生するタイミングを含む包含区間の情報を取得する包含区間情報取得手段と、
上記包含区間に基づく区間内でのみ上記音声信号についての分析を行い、その分析結果に基づき、上記ノイズが上記音声信号中の他の信号成分に埋もれるか否かを判定するノイズ埋没判定手段と、
上記ノイズ埋没判定手段の判定結果に基づいて、上記ノイズ除去手段によるノイズ除去処理に基づき上記ノイズの除去が行われた上記音声信号と、上記ノイズの除去が行われていない上記音声信号とを択一的に選択する選択手段と、
を備えることを特徴とする記録装置。
【請求項２】
上記選択手段は、
上記ノイズ埋没判定手段の判定の結果、上記ノイズが上記他の信号成分に埋もれるとされた場合にのみ、上記ノイズの除去が行われた上記音声信号を選択する、
ことを特徴とする請求項１に記載の記録装置。
【請求項３】
上記音声信号に重畳する上記ノイズの発生タイミングを検出するノイズタイミング検出手段をさらに備え、
上記包含区間情報取得手段は、
上記ノイズタイミング検出手段により検出された上記ノイズの発生タイミングの情報に基づき、上記包含区間情報を取得する、
ことを特徴とする請求項１に記載の記録装置。
【請求項４】
上記記録媒体に記録されるべき音声信号が一時保持される一時保持手段と、
上記一時保持手段に保持される音声信号が上記記録手段によって上記記録媒体に間欠的に書き込まれるように制御する間欠記録制御手段と、をさらに備え、
上記ノイズは、上記間欠記録制御手段の間欠記録制御に伴う上記記録手段の動作に伴って生じるものとされると共に、
上記包含区間情報取得手段は、
上記間欠記録制御手段による間欠記録制御に伴い発生する情報に基づき上記包含区間情報を取得する、
ことを特徴とする請求項１に記載の記録装置。
【請求項５】
上記ノイズ埋没判定手段の判定結果に基づき、上記ノイズ除去手段によるノイズ除去処理の停止／開始制御を行うノイズ除去制御手段をさらに備える、
ことを特徴とする請求項１に記載の記録装置。
【請求項６】
上記ノイズ埋没判定手段は、
上記音声信号についてのパワー計算を行った結果に基づき上記ノイズが埋もれるか否かを判定する、
ことを特徴とする請求項１に記載の記録装置。
【請求項７】
上記ノイズ埋没判定手段は、
上記音声信号についてのパワー計算を行い、所定の閾値と比較した結果に基づいて上記ノイズが埋もれるか否かを判定する、
ことを特徴とする請求項１に記載の記録装置。
【請求項８】
収音手段を入力源とする音声信号を所要の記録媒体に記録する記録手段を備えると共に、記録動作に伴い間欠的なノイズを発生するノイズ発生源を有する記録装置であって、上記音声信号に対して所定の信号処理を施すことによって上記音声信号に重畳する上記ノイズを除去するためのノイズ除去処理を行うノイズ除去手段を備えた記録装置におけるノイズ除去制御方法として、
所定情報に基づき、上記ノイズが発生するタイミングを含む包含区間の情報を取得する包含区間情報取得手順と、
上記包含区間に基づく区間内でのみ上記音声信号についての分析を行い、その分析結果に基づき、上記ノイズが上記音声信号中の他の信号成分に埋もれるか否かを判定するノイズ埋没判定手順と、
上記ノイズ埋没判定手順の判定結果に基づいて、上記ノイズ除去手段によるノイズ除去処理に基づき上記ノイズの除去が行われた上記音声信号と、上記ノイズの除去が行われていない上記音声信号とを択一的に選択する選択手順と、
を備えることを特徴とするノイズ除去制御方法。
【請求項９】
入力音声信号に対して所定の信号処理を施すことによって上記音声信号に重畳するノイズを除去するためのノイズ除去処理を行うノイズ除去手段を用いたノイズ除去動作について制御するためのノイズ除去制御装置であって、
所定情報に基づき、上記ノイズが発生するタイミングを含む包含区間の情報を取得する包含区間情報取得手段と、
上記包含区間に基づく区間内でのみ上記音声信号についての分析を行い、その分析結果に基づき、上記ノイズが上記音声信号中の他の信号成分に埋もれるか否かを判定するノイズ埋没判定手段と、
上記ノイズ埋没判定手段の判定結果に基づいて、上記ノイズ除去手段によるノイズ除去処理に基づき上記ノイズの除去が行われた上記音声信号と、上記ノイズの除去が行われていない上記音声信号とを択一的に選択する選択手段と、
を備えることを特徴とするノイズ除去制御装置。
【請求項１０】
入力音声信号に対して所定の信号処理を施すことによって上記音声信号に重畳するノイズを除去するためのノイズ除去処理を行うノイズ除去手段を用いたノイズ除去動作について制御するためのノイズ除去制御方法であって、
所定の入力情報に基づき、上記ノイズが発生するタイミングを含む包含区間の情報を取得する包含区間情報取得手順と、
上記包含区間に基づく区間内でのみ上記音声信号についての分析を行い、その分析結果に基づき、上記ノイズが上記音声信号中の他の信号成分に埋もれるか否かを判定するノイズ埋没判定手順と、
上記ノイズ埋没判定手順の判定結果に基づいて、上記ノイズ除去手段によるノイズ除去処理に基づき上記ノイズの除去が行われた上記音声信号と、上記ノイズの除去が行われていない上記音声信号とを択一的に選択する選択手順と、
を備えることを特徴とするノイズ除去制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、例えばビデオカメラ装置などの収音手段を入力源とする音声信号を所要の記録媒体に記録する記録手段を備えた記録装置として、特に記録動作に伴い間欠的なノイズを発生するノイズ発生源を有する記録装置に関する。また、音声信号に重畳するノイズの除去動作について制御するためのノイズ除去制御方法、及びノイズ除去制御装置に関する。
【背景技術】
【０００２】
従来より、撮影映像及び収音音声を所要の記録媒体に記録するビデオカメラ装置が普及している。そして、このようなビデオカメラ装置として、特に近年では、ＨＤＤ（ハードディスクドライブ）を内蔵しこれに撮影映像及び収音音声（以下撮影データとも言う）を記録するようにされたものがある。
【０００３】
このように撮影データをＨＤＤに記録するビデオカメラ装置では、回転駆動される磁気ディスク上に磁気ヘッドをロードしたままの状態で撮影データの記録を継続的に行うようにされたものがある。すなわち、記録開始指示から記録停止指示までの間、撮影データを継続的に磁気ディスクに書き込むといったものである。
【０００４】
しかしながら、この手法では、記録動作中は常時磁気ディスクの回転駆動を伴うことから、これを改良した記録手法として、間欠アクセスの手法が提案されている。
この間欠アクセスでは、記録開始後、撮影データを一旦内蔵メモリに蓄積するものとしておき、その間は磁気ヘッドを所定のパーキング位置に退避させた上で磁気ディスクの回転を止めておく。そして、内蔵メモリへの撮影データの蓄積量が所定以上となったことに応じ、磁気ディスクの回転駆動及び磁気ヘッドの記録位置へのロードを行って蓄積された撮影データの読出・記録を行い、所定時間分の記録を行うと、再度磁気ヘッドをパーキング位置へ退避させ且つ磁気ディスクの回転駆動を停止する。このようにして内蔵メモリへの撮影データの蓄積量に応じ、磁気ディスクに対する間欠的な記録を行う。
この間欠アクセスの手法により、磁気ディスクを常時回転させたままの状態で記録を行う場合よりも消費電力の削減が図られる。
【０００５】
但し、この間欠アクセスの手法を採用する場合には、磁気ヘッドを磁気ディスク上にロードする際、或いは磁気ヘッドをパーキング位置に退避させる際に、デバイスの物理的な衝突に起因するノイズがＨＤＤ内部で発生するものとなってしまう。そして、このノイズは、ビデオカメラ装置が備えるマイクロフォンにより収音され、これによって撮影データと共に記録されてしまうという問題が発生する。
このため、間欠アクセスの手法を用いる場合には、消費電力の削減が図られる一方で、このようなノイズについての対策を行うことが必要となってくる。
【０００６】
なお、関連する従来技術については下記の特許文献を挙げることができる。
【特許文献１】特開２００５−２５３０１０号公報
【特許文献２】特開平８−１５３３６５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００７】
ところで、上記のような間欠アクセスに伴うノイズを対策するとしたときには、それが間欠的に生じる性質のものであって、定常的なノイズとは異なるものであることを考慮しなければならない。
ここでノイズ除去は、本来の信号に対して改変を与える処理であり、その結果音質の劣化を招く可能性のある処理となる。定常的なノイズに関しては、それを除去するのであれば常にその除去処理を行う他はないが、間欠的なノイズについては、このような音質劣化の面から必要最小限の改変となるように、ノイズが生じる区間のみを対象として行われることが望ましいものとなる。
【０００８】
また、この一方で、上記のようにマイクロフォンによってノイズが収音されて撮影データと共に記録されてしまう場合を想定すると、収音されるべき外部音（背景音）の音量によっては、ノイズが聴感上認識されなくなるといった可能性もある。
このことを考慮すると、上記のように間欠的に生じるノイズに対応するとして単にノイズの発生区間を対象としてノイズの除去を行っていたのでは、場合によっては無駄な除去動作が行われてしまう可能性もあるということになり、そのような無駄な除去動作によって記録データに不必要な音質劣化部分を生じさせてしまうということがあり得る。
【課題を解決するための手段】
【０００９】
そこで、本発明では以上のような問題点に鑑み、記録装置として以下のように構成することとした。
つまり、本発明の記録装置は、収音手段を入力源とする音声信号を所要の記録媒体に記録する記録手段を備えると共に、記録動作に伴い間欠的なノイズを発生するノイズ発生源を有する記録装置であって、上記音声信号に対して所定の信号処理を施すことによって上記音声信号に重畳する上記ノイズを除去するためのノイズ除去処理を行うノイズ除去手段を備える。
また、所定情報に基づき、上記ノイズが発生するタイミングを含む包含区間の情報を取得する包含区間情報取得手段を備える。
また、上記包含区間に基づく区間内でのみ上記音声信号についての分析を行い、その分析結果に基づき、上記ノイズが上記音声信号中の他の信号成分に埋もれるか否かを判定するノイズ埋没判定手段を備える。
また、上記ノイズ埋没判定手段の判定結果に基づいて、上記ノイズ除去手段によるノイズ除去処理に基づき上記ノイズの除去が行われた上記音声信号と、上記ノイズの除去が行われていない上記音声信号とを択一的に選択する選択手段を備えるものである。
【００１０】
また、本発明ではノイズ除去制御装置として以下のように構成することとした。
すなわち、本発明のノイズ除去制御装置は、入力音声信号に対して所定の信号処理を施すことによって上記音声信号に重畳するノイズを除去するためのノイズ除去処理を行うノイズ除去手段を用いたノイズ除去動作について制御するためのノイズ除去制御装置であって、所定情報に基づき、上記ノイズが発生するタイミングを含む包含区間の情報を取得する包含区間情報取得手段を備える。
また、上記包含区間に基づく区間内でのみ上記音声信号についての分析を行い、その分析結果に基づき、上記ノイズが上記音声信号中の他の信号成分に埋もれるか否かを判定するノイズ埋没判定手段を備える。
また、上記ノイズ埋没判定手段の判定結果に基づいて、上記ノイズ除去手段によるノイズ除去処理に基づき上記ノイズの除去が行われた上記音声信号と、上記ノイズの除去が行われていない上記音声信号とを択一的に選択する選択手段を備えるものである。
【００１１】
上記本発明によれば、音声信号についての分析結果に基づき、上記ノイズが上記音声信号中の他の信号成分に埋もれるか否かを判定するノイズ埋没判定が行われ、このノイズ埋没判定結果に基づき、ノイズ除去が行われた音声信号とノイズ除去が行われていない音声信号とを択一的に選択することができる。
さらに本発明では、所定情報に基づき、ノイズが発生するタイミングを含む包含区間の情報が取得され、この包含区間内でのみ上記ノイズ埋没判定のための信号分析が行われるものとなる。
【発明の効果】
【００１２】
このようにして本発明にれば、ノイズ埋没判定結果に基づきノイズ除去が行われた音声信号とノイズ除去が行われていない音声信号とを択一的に選択することができ、これによりノイズが埋没しないとされた場合にのみ上記ノイズ除去が行われた音声信号を選択するといったことが可能となる。
これによれば、ノイズが埋没するとされた場合に無駄なノイズ除去が行われてしまうことを効果的に防止することができ、ノイズ除去に伴う音声信号の不要な音質劣化を防止することができる。
【００１３】
また、上記のようにして本発明では、所定情報に基づき取得されたノイズが発生するタイミングを含む包含区間内でのみ上記ノイズ埋没判定のための信号分析を行うものとしているが、これにより、例えば音声信号についての信号分析を常時行ってノイズ埋没判定を行うとした場合と比較して、処理負担の削減及び消費電力の削減を図ることができる。
また、このとき、上記のようにして信号分析はノイズが生じるとされる包含区間内でのみ行うものとしていることから、ノイズ埋没判定の判定漏れはないようにすることができる。すなわち、このような本発明によれば、ノイズ埋没判定のための処理負担・消費電力の削減と、ノイズ埋没判定の判定漏れがないようにすることとの両立を図ることができるものとなる。
【発明を実施するための最良の形態】
【００１４】
以下、発明を実施するための最良の形態（以下実施の形態とする）について説明していく。
[記録装置の構成]
図１は、本発明の記録装置の一実施形態であるビデオカメラ装置１について、その外観構成を斜視図により示した図である。
このビデオカメラ装置１は、図示するようにしてカメラレンズ１ａを備え、当該カメラレンズ１ａを介して得られる撮影映像を内部の記録媒体に対して記録することができる。また、ビデオカメラ装置１は、図示するようにして筐体外部に表出するようにして設けられた外部音収音マイク（マイクロフォン）１ｂを備えており、この外部音収音マイク１ｂにより収音された音声を、上記撮影映像と共に上記記録媒体に対して記録することができる。
【００１５】
図２は、ビデオカメラ装置１の内部構成について示すブロック図である。
先ず、この図２においても、図１に示したカメラレンズ１ａが示されている。カメラレンズ１ａは、図示するようにしてカメラブロック５内に設けられる。
カメラブロック５は、上記カメラレンズ１ａを介して入射される被写体光を検出するＣＣＤ（Charge Coupled Device）センサ或いはＣＭＯＳ（Complementary Metal-Oxide Semiconductor）センサ等の固体撮像素子部や、固体撮像素子部から画素信号を転送してゲイン調整やＡ／Ｄ変換などを行って映像信号を得る映像信号生成部等を備える。
【００１６】
カメラブロック５により得られた映像信号は、図示する映像信号処理部６に供給され、ここで例えばホワイトバランスやＹ／Ｃ処理等の所定の映像信号処理が施されて映像信号圧縮処理部７に供給される。
映像信号圧縮処理部７は、映像信号に対し所定の映像圧縮方式に基づく圧縮処理を施し圧縮ビデオデータを生成する。そして、この圧縮ビデオデータをストリームデータ（図示するビデオストリームＶstrm）として出力する。
【００１７】
また、この図２には、図１に示した外部音収音マイク１ｂも示されている。この外部音収音マイク１ｂの収音動作に基づき得られた入力音声信号Ａinは、図中の一点鎖線により囲うノイズ検出・除去部２に供給される。
【００１８】
ノイズ検出・除去部２は、上記入力音声信号Ａinと、後述するノイズ検出用マイク（マイクロフォン）１１からの検出用音声信号ＡNinと、後述するシステムコントローラ１２からのノイズ発生予想区間情報ＮcSとに基づき、ノイズ発生タイミングの検出やこのノイズ発生タイミングに基づいたノイズの除去を行い、その結果を図示する出力音声信号Ａoutとして出力する。
なお、このノイズ検出・除去部２の内部構成及び動作については後述する。
【００１９】
音声信号処理部３は、上記出力音声信号Ａoutを入力して所定の音声信号処理を施し、その結果を音声信号圧縮処理部４に供給する。
音声信号圧縮処理部４は、上記音声信号処理部３から供給される出力音声信号Ａoutに対して所定の音声圧縮方式に基づく圧縮処理を施し圧縮オーディオデータを生成する。そして、この圧縮オーディオデータをストリームデータ（図示するオーディオストリームＡstrm）として出力する。
【００２０】
ＡＶ（Audio Visual）ストリーム生成部８は、先に述べた映像信号圧縮処理部７からのビデオストリームＶstrmと、上記音声信号圧縮処理部４からのオーディオストリームＡstrmとを入力して、これらを合成したＡＶストリームAVstrmを生成する。そして、このＡＶストリームAVstrmをバッファメモリ９に対して供給する。
【００２１】
バッファメモリ９は、後述するシステムコントローラ１２からの指示に従って上記ＡＶストリーム生成部８から供給されるＡＶストリームAVstrmについての内部メモリへの書込／読出を行うことで、ＡＶストリームAVstrmのバッファリングを行う。
【００２２】
ＨＤＤ（ハードディスクドライブ）１０は、システムコントローラ１２の指示に基づき上記バッファメモリ９から供給されるＡＶストリームAVstrmを内部の磁気ディスク（磁気ディスク１０Ｂ）に対して記録する。
【００２３】
ここで、このＨＤＤ１０の内部構成を次の図３に示しておく。図３に示されるようにＨＤＤ１０には、磁気ディスク１０Ｂと、磁気ディスク１０Ｂに対して信号を記録するための磁気ヘッド１０Ａとが備えられている。なお、この他にも、例えば磁気ヘッド１０Ａを図中ロード／パーキング位置に駆動するための駆動系や磁気ディスク１０Ｂを回転駆動するための駆動系なども備えられるが、ここではそれら他の詳細な構成については省略している。
また、本実施の形態の場合、ＨＤＤ１０内にはノイズ検出用マイク（マイクロフォン）１１が設けられるものとなるが（図示せず、図２参照）、これについては後述する。
【００２４】
図２に戻り、システムコントローラ１２は、例えばＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）等を備えたマイクロコンピュータで構成され、起動されたプログラムに従って当該ビデオカメラ装置１の全体制御、演算処理を行う。
例えば、図示されない操作入力部からの操作信号に応じ必要な各部を制御することで、ユーザの操作入力に応じた動作を実現させたり、またＨＤＤ１０へのデータファイルの格納や管理情報の作成・更新等を行う。
【００２５】
また、特に実施の形態の場合のシステムコントローラ１２は、ＨＤＤ１０に対するＡＶストリームAVstrm（撮影データとも言う）の記録時における間欠アクセスを実現するための制御処理も実行する。
つまり、システムコントローラ１２は、撮影データの記録開始後、直ちにバッファメモリ９からの撮影データの読み出し及びＨＤＤ１０への撮影データの記録開始指示は行わず、バッファメモリ９への撮影データの蓄積量が第１の閾値以上となったことに応じてそれらの指示を行う。そして、バッファメモリ９からの撮影データの読み出し、及びＨＤＤ１０によるその記録の開始後は、バッファメモリ９における撮影データの蓄積量が第２の閾値以下となったことに応じ、バッファメモリ９からの撮影データの読み出し及びＨＤＤ１０の記録動作を停止させる指示を行う。以降も、バッファメモリ９の撮影データの蓄積量と上記第１及び第２の閾値との比較結果に応じ、バッファメモリ９からの撮影データの読み出し開始指示及びＨＤＤ１０への記録開始指示と、バッファメモリ９からの撮影データの読み出し停止指示及びＨＤＤ１０への記録停止指示とを繰り返し行うようにされる。
【００２６】
[ＨＤＤノイズ]
ここで、図２に示すビデオカメラ装置１において、このような間欠アクセスの手法が採用されることによっては、例えばＨＤＤ１０において磁気ディスク１０Ｂを回転させたままの状態で磁気ヘッド１０Ａによる記録動作を継続的に行う場合と比較して、その分消費電力の削減を図ることができる。
【００２７】
しかしながらこの間欠アクセスの手法において、上述したような記録開始指示に伴っては、ＨＤＤ１０において磁気ヘッド１０Ａを磁気ディスク１０Ｂ上にロードすることになるが、その際に、デバイスの物理的な衝突に起因するノイズがＨＤＤ１０内部で発生することになる。また、記録停止指示に応じては、磁気ヘッド１０Ａをパーキング位置に退避させることになるが、その際にもデバイスの物理的な衝突に起因するノイズがＨＤＤ１０内で発生することとなる。
【００２８】
このようにして撮影データの記録動作中にＨＤＤ１０内で生じるノイズは、外部音収音マイク１ｂによって収音され、入力音声信号Ａinに重畳してしまい、この結果撮影データと共にＨＤＤ１０に対して記録されてしまうという問題が発生する。
【００２９】
図４は、このようにして間欠アクセスに伴いＨＤＤ１０内で生じるノイズ（以下ＨＤＤノイズとも言う）の特性を例示した図であり、図４（ａ）ではその時間波形を、また図４（ｂ）ではそのスペクトログラムを示している。
このようなＨＤＤノイズは、ＨＤＤ１０の個体差に依存するものとはなるが、時間波形（図４（ａ））で見ると概ね持続時間が約0.03sec程度と非常に短いスパイク状のノイズとなっている。またスペクトログラム（図４（ｂ））で見るとインパルス状に広い周波数帯域にパワーが分布しており、時間的に集中している信号は周波数的には広い帯域に分布していることが確認できる。
このＨＤＤノイズは極めてレベルの小さい信号成分ではあるが、これらの特性より、聴覚的に非常に煩わしいノイズとなる。そして、このように煩わしいノイズが、間欠アクセスに伴う記録開始／停止ごとに間欠的に発生し、これが撮影データ（音声信号）に重畳されて記録されてしまう。
【００３０】
ここで、このようなＨＤＤノイズの記録が防止されるようにするためには、それを入力音声信号Ａinから除去することが考えられるが、その際には、ＨＤＤノイズが間欠的に生じる性質のものであって、定常的なノイズとは異なるものであることを考慮しなければならない。
つまり、ノイズ除去は、本来の信号に対して改変を与える処理であり、その結果音質の劣化を招く可能性のある処理となる。定常的なノイズに関しては、それを除去するのであれば常にその除去処理を行う他はないが、間欠的なノイズについては、このような音質劣化の面から必要最小限の改変となるように、ノイズが生じる区間のみを対象として行われることが望ましいものとなる。
【００３１】
このようなことを考慮すると、上記のようなＨＤＤノイズの除去を行うにあたっては、先ずはノイズの発生するタイミングを検出することが肝要となる。
【００３２】
そのための具体的な手法としては、例えば従来のようにノイズの発生源への制御が行われるタイミングからこれを予測するといったことが考えられる。
しかしながら、上述した間欠アクセスにおいて、記録開始指示に応じ磁気ヘッド１０Ａのロードに伴う衝突音が生じるまでの時間長、及び記録停止指示に応じ磁気ヘッド１０Ｂのパーキングに伴う衝突音が生じるまでの時間長は、記録開始／終了位置の違いやその他の条件に応じて異なることがわかっている。
これに対しては、記録開始／停止指示に応じて設定すべきノイズ区間に或る程度のマージンを設けることで対応することも考えられるが、先に述べた音質面の問題を考慮すると、除去を行う区間は最小限とすることが望ましく、その意味で、このように記録開始／停止指示のタイミングからノイズ発生区間を予測する手法には限界があるといえる。
【００３３】
［実施の形態のノイズタイミング検出］
そこで、本実施の形態のビデオカメラ装置１では、図２に示されるようにしてＨＤＤ１０内にノイズ検出用マイク１１を設けるものとし、当該ノイズ検出用マイク１１の収音動作に基づき得られる検出用音声信号ＡNinに基づき、ＨＤＤノイズの発生タイミングを検出するものとしている。
【００３４】
図２において、ノイズ検出用マイク１１からの検出用音声信号ＡNinは、ノイズ検出・除去部２内における、ノイズタイミング検出・ノイズ区間設定部２４に供給される。ノイズタイミング検出・ノイズ区間設定部２４は、このようにして供給される検出用音声信号ＡNinに基づき、後述するようにしてノイズ発生タイミングの検出、及び検出したノイズ発生タイミングに基づくノイズ区間の設定を行う。
【００３５】
ここで、先にも説明したように本実施の形態におけるＨＤＤノイズは、ＨＤＤ１０における記録動作の開始／停止に応じて間欠的に発生するノイズであり、その発生タイミングは、システムコントローラ１２からＨＤＤ１０に対する記録開始指示及び記録停止指示の行われたタイミングから或る程度予測することができる。
【００３６】
そこで、本実施の形態では、このようにして予測される、ＨＤＤノイズが発生するとされる区間でのみ、上記ノイズタイミング検出・ノイズ区間設定部２４による動作が実行されるようにし、無駄な検出動作の削減を図るものとしている。
【００３７】
図２に示すビデオカメラ装置１では、このように予測されるタイミングの情報を、システムコントローラ１２がノイズタイミング検出・ノイズ区間設定部２４に対して指示するようにされている。つまり、システムコントローラ１２は、上述した間欠アクセスのための制御処理に伴いＨＤＤ１０に対する記録開始指示、及び記録停止指示を行ったことに応じ、予め定められた区間情報をノイズ発生予想区間情報ＮcSとしてノイズタイミング検出・ノイズ区間設定部２４に対して供給する。
【００３８】
ノイズタイミング検出・ノイズ区間設定部２４は、このようにしてシステムコントローラ１２から供給されたノイズ発生予想区間情報ＮcSが示す区間内でのみ、ノイズ検出用マイク１１から供給される検出用音声信号ＡNinについての信号分析を行い、その結果に基づきＨＤＤノイズの発生タイミングを検出する。
そして、検出したノイズ発生タイミングに基づき、ＨＤＤノイズが生じる区間を示すノイズ区間を設定し、その開始タイミングと終了タイミングとを示すノイズ区間情報ＮSを出力する。
【００３９】
図５は、このようなノイズタイミング検出・ノイズ区間設定部２４によるノイズ発生タイミングの検出動作、及びノイズ区間の設定動作について模式的に示した図である。図５（ａ）では、ＨＤＤノイズ成分を含む検出用音声信号ＡNinの例を示し、図５（ｂ）では図５（ａ）に示される検出用音声信号ＡNinに応じて設定されるべきノイズ区間の例を示している。
【００４０】
先ず、ノイズタイミング検出・ノイズ区間設定部２４には、図５（ａ）に示されるように、検出用音声信号ＡNinの振幅値について予め定められた第１閾値ｔｈ-s1と第２閾値ｔｈ-s2とが設定されている。ノイズタイミング検出・ノイズ区間設定部２４は、入力される検出用音声信号ＡNinの振幅値が、これら第１閾値ｔｈ-s1と第２閾値ｔｈ-s2とにより定義される所定範囲外の値となったか否かを判別することで、ＨＤＤノイズが発生したか否かを判別するようにされる。すなわち、検出用音声信号ＡNinの振幅値が第１閾値ｔｈ-s1と第２閾値ｔｈ-s2とによる所定範囲外となったタイミングを、ＨＤＤノイズの発生タイミングとして検出する。
このとき、ノイズタイミング検出・ノイズ区間設定部２４は、ノイズ発生予想区間情報ＮcSが示すノイズ発生予想区間内でのみ、このような検出用音声信号ＡNinの振幅値と上記閾値ｔｈ-s1と閾値ｔｈ-s2との比較を行うようにされている。
【００４１】
上記のような判別の結果、ＨＤＤノイズの発生タイミングが検出された場合は、図５（ｂ）に示されるようにして、そのノイズ発生タイミングを含む所定区間をノイズ区間として設定する。例えばこの場合は、図示するようにしてノイズ発生タイミングを基準としてその前後にわたる所定区間をノイズ区間として設定する。
その上で、このように設定したノイズ区間の開始点と終了点の情報を、ノイズ区間情報ＮcSとして出力する。
【００４２】
なお、確認のために述べておくと、ノイズタイミング検出・ノイズ区間設定部２４は、ノイズ発生予想区間内において、検出用音声信号ＡNinの振幅値が上記閾値ｔｈ-s1と閾値ｔｈ-s2とによる範囲外とならずＨＤＤノイズが検出されなかった場合は、ノイズ区間情報ＮSの出力は行わないようにされる。
また、ＨＤＤノイズが検出されたとしてノイズ区間の設定を行った場合、以降、この設定したノイズ区間内においては検出用音声信号ＡNinについての信号分析（この場合は振幅値の第１閾値ｔｈ-s1・第２閾値ｔｈ-s2との比較）は行わないようにされている。
【００４３】
また、上記による例では、ノイズ発生タイミングの検出にあたっては、単に検出用音声信号ＡNinの振幅値と所定閾値とを比較するものとしたが、これに代えて、例えば所定時間内の平均パワーを計算し、その平均パワーと所定閾値との比較結果に基づきノイズ発生タイミングを検出するようにすることもできる。
【００４４】
[ノイズ埋没判定]
本実施の形態のビデオカメラ装置１では、上記のようにしてノイズタイミング検出・ノイズ区間設定部２４により検出・設定されたノイズ区間の情報（ＮS）に基づき、後述する構成によって入力音声信号Ａinからのノイズの除去を行うようにされることになるが、先の図４での説明時にも触れたように、本実施の形態の場合のＨＤＤノイズとしてはその信号レベルが比較的小さいものであることから、場合によっては外部音（背景音）に埋もれてかき消される可能性も考えられる。
【００４５】
図６〜図９は、このような外部音とＨＤＤノイズとの関係について模式的に示した図である。
先ず図６、図７は、それぞれ背景音が比較的小音量とされる場合について示した図であり、図６では（ａ）図により背景音の時間波形を、また（ｂ）図によりＨＤＤノイズの時間波形を、さらに（ｃ）図ではこれらＨＤＤノイズと背景音とが加算された入力音声信号Ａinの時間波形を示している。また、図７では背景音（破線）とＨＤＤノイズ（実線）の周波数スペクトルをそれぞれ対比して示している。
【００４６】
先ず、図６（ａ）（ｂ）を比較してわかるように、ＨＤＤノイズは16ビットフルスケール（±32767）に対しておよそ±300程度の振幅がある。これを踏まえると、例えば図６（ａ）に示されるような比較的小音量の背景音下での記録時には、図６（ｃ）に示す入力音声信号Ａin中において、ＨＤＤノイズは埋没しにくくなる。また、これを図７に示す周波数スペクトルで比較した場合にも、ＨＤＤノイズのスペクトルは背景音のスペクトルより所々大きいパワーで分布することがわかる。
これら図６、図７の結果からも、比較的小音量の背景音下では人間の聴覚はＨＤＤノイズを知覚しやすくなり、そのような場合にノイズ除去を行うことは有効であることがわかる。
【００４７】
一方図８、図９は、背景音が比較的大音量とされる場合について示した図であり、図８（ａ）は背景音、図８（ｂ）はＨＤＤノイズ、図８（ｃ）は入力音声信号Ａinの時間波形をそれぞれ示し、図９は背景音（破線）とＨＤＤノイズ（実線）の周波数スペクトルを対比して示している。
図８（ａ）のような比較的大音量による背景音下では、図８（ｃ）に示す入力音声信号Ａin中においてＨＤＤノイズは埋没しやすいものとなり、また図９に示す周波数スペクトルを見ても、ＨＤＤノイズのスペクトルは背景音のスペクトルより概ね小さいパワーで分布するものとなることがわかる。
このように大音量の背景音下では人間の聴覚はＨＤＤノイズを知覚しにくく、このような状況でノイズ除去を行う利点は極めて少ないものとなる。むしろこの場合には、ノイズ除去を行う入力音声信号Ａinのレベルが非常に大きなものとなるのだから、ノイズ除去を行ったことによる音質劣化がより聴取されやすくなってしまう可能性が高くなる。
【００４８】
これらのことから本実施の形態のビデオカメラ装置１では、背景音が比較的小音量とされ、ＨＤＤノイズが埋もれないとされた場合にのみノイズ除去が行われるようにし、比較的大音量の背景音下でＨＤＤノイズが埋もれてしまうような場合に無駄なノイズ除去が行われてしまうことを防止するものとしている。
【００４９】
このための構成として、図２に示されるノイズ検出・除去部２には、ディレイ回路２１、ノイズ埋没判定部２５、除去動作制御部２７、ディレイ回路２８、及び選択制御部２９が設けられる。
先ず、ディレイ回路２１は、外部音収音マイク１ｂからの入力音声信号Ａinを入力し、これに予め定められた所定時間長分のディレイを与え出力する。このようなディレイ回路２１による遅延が与えられた入力音声信号Ａinについては、入力音声信号Ａin-1と呼ぶ。
なお、この場合、外部音収音マイク１ｂからディレイ回路２１に入力される入力音声信号Ａinについては、このような遅延後の入力音声信号Ａinと区別するために、以下、入力音声信号Ａin-0とも呼ぶ。
【００５０】
ここで、このディレイ回路２１に設定される遅延時間としては、次に説明するノイズ埋没判定部２５に供給される入力音声信号Ａin-1として、少なくともノイズタイミング検出・ノイズ区間設定部２４により設定されたノイズ区間の開始点よりもタイミング的に前となる信号部分が供給されるようにして設定されていればよい。すなわち、ノイズ区間が設定されたときに、少なくともこのノイズ区間よりも前の信号部分がノイズ埋没判定部２５に供給されるようにして遅延が行われればよいものである。
【００５１】
ノイズ埋没判定部２５は、上記ディレイ回路２１からの入力音声信号Ａin-1について信号分析を行い、ＨＤＤノイズが背景音（つまり入力音声信号ＡinにおけるＨＤＤノイズ以外の信号成分）に埋もれるか否かを判定する。
具体的に、ノイズ埋没判定部２５は、入力音声信号Ａin-1の時間波形について、その所定区間ごとのパワーを計算し、このパワーが予め定められた所定の閾値ｔｈ-pより大きい場合には、人間の聴覚によってＨＤＤノイズが知覚されない、すなわちＨＤＤノイズが埋没する（マスクされる）という判定結果を埋没判定結果情報Ｍとして出力する。また、計算したパワーが上記閾値ｔｈ-pよりも大きくない場合には、ＨＤＤノイズが知覚される、すなわちＨＤＤノイズが埋没しないという判定結果を埋没判定結果情報Ｍとして出力する。
この際、入力音声信号Ａin-1の時間波形のパワーは、例えば以下の式に示すようにして、各時間における入力音声信号Ａin-1の値の２乗和により算出することができる。
Σt = 0 〜 T-1 {Ain(t)}2
【００５２】
なお、ノイズ埋没判定は、このように時間波形のパワー計算の結果に基づく以外にも、周波数スペクトルのパワー計算の結果に基づき判定することもできる。
すなわち、入力音声信号Ａin-1の周波数スペクトルのパワーを計算し、そのパワーが所定の閾値より大きい場合にはＨＤＤノイズが埋没するとの判定結果を埋没判定結果情報Ｍとして出力し、パワーが所定の閾値より小さい場合にはＨＤＤノイズが埋没しないとの判定結果を埋没判定結果情報Ｍとして出力する。
なお、周波数スペクトルのパワーは、例えば以下の式のように各時間における入力音声信号Ａin-1の周波数スペクトルの２乗和により算出することができる。
Σf = 0 〜 fs / 2 {Ain(f)}2
【００５３】
また、例えば対象とするノイズのスペクトルが所定の帯域において特徴的な周波数分布となるような場合には、その帯域からのみパワーを計算してもよい。周波数スペクトルのうち所定の帯域（例えば周波数ａ〜ｂとする）のパワーは、例えば以下のように算出することができる。
Σf = fa 〜 fb {Ain(f)}2
【００５４】
ところで、これまでで説明したノイズ埋没判定部２５の構成によっては、入力音声信号Ａin-1について上述のような信号分析を常時行って、埋没判定結果情報Ｍを常時出力するようにされることになるが、そもそも埋没判定結果情報ＭはＨＤＤノイズが背景音に埋没するか否かについて示す情報であり、従ってこれが常時出力されている必要性はないと考えることができる。
【００５５】
そこで、実施の形態のノイズ埋没判定部２５としては、先に説明したノイズタイミング検出・ノイズ区間設定部２４からのノイズ区間情報ＮSを入力し、このノイズ区間情報ＮSにより示される区間内でのみ、上述したような信号分析及びその結果に基づくノイズ埋没判定を行うようにされる。
具体的には、ノイズ区間情報ＮSにより示される区間内でのみ、上述したような入力音声信号Ａin-1の時間波形のパワー計算、及びそのパワーについての閾値ｔｈ-pとの比較、及びその比較結果に基づく埋没判定結果情報Ｍの出力を行うようにされているものである。
【００５６】
このようなノイズ埋没判定部２５により出力される上記埋没判定結果情報Ｍは、図示するようにして除去動作制御部２７に対して供給されると共に、分岐してディレイ回路２８を介し選択制御部２９に対しても供給される。
【００５７】
先ず、上記除去動作制御部２７は、上記埋没判定結果情報Ｍに基づき、後述するノイズ除去信号生成部２６の動作をON/OFFするためのON/OFF制御信号を出力する。具体的に、埋没判定結果情報Ｍが、ＨＤＤノイズが埋没しないとの判定結果を示すものである場合には、上記ON/OFF制御信号としてONを指示する信号を出力し、ＨＤＤノイズが埋没するとの判定結果を示すものである場合には上記ON/OFF制御信号としてOFFを指示する信号を出力する。
【００５８】
ここで後述もするが、上記ノイズ除去信号生成部２６は、入力音声信号Ａin（Ａin-2）を入力して所定の信号処理を施すことで、ＨＤＤノイズを除去したノイズ除去信号を生成する。このようなノイズ除去信号生成部２６に対し、上記のように埋没判定結果情報Ｍの内容に応じたON/OFF制御信号が供給されることで、ＨＤＤノイズが背景音に埋もれるとされた場合にはノイズ除去信号の生成動作が行われず、ＨＤＤノイズが背景音に埋もれないとされた場合にのみノイズ除去信号の生成動作が行われるようにすることができる。
【００５９】
一方、上記選択制御部２９は、上述したようにしてディレイ回路２８を介して得られる埋没判定結果情報Ｍを入力し、この埋没判定結果情報Ｍに基づき、図示する信号挿入部３０に入力される２つの入力信号のうちの一方を択一的に選択させるための選択制御信号ＳＬＣを出力する。
【００６０】
後述もするように上記信号挿入部３０は、先に説明したディレイ回路２１と共に図示するディレイ回路２２とディレイ回路２３とを介して得られる入力音声信号Ａin-3を入力すると共に、ノイズ除去信号生成部２６からのノイズ除去信号を入力するようにされる。そして、上記選択制御信号ＳＬＣに応じて、上記入力音声信号Ａin-3をそのまま出力するか、或いは上記入力音声信号Ａin-3に代えて上記ノイズ除去信号を出力するかを選択するものとされる。
【００６１】
上記選択制御部２９は、上記埋没判定結果情報Ｍが、ＨＤＤノイズが背景音に埋もれるとの判定結果を示すものである場合には、入力音声信号Ａin-3の選択を指示する選択制御信号ＳＬＣを出力する。一方、上記埋没判定結果情報ＭがＨＤＤノイズが背景音に埋もれないとの判定結果を示すものである場合には、ノイズ除去信号の選択を指示する選択制御信号ＳＬＣを出力する。
すなわち、このような選択制御信号ＳＬＣが信号挿入部３０に対して供給されることで、ＨＤＤノイズが背景音に埋もれるとされた場合には入力音声信号Ａin-3がそのまま出力され（つまりノイズ除去の行われていない音声信号が出力され）、ＨＤＤノイズが背景音に埋もれないとされた場合にのみ上記ノイズ除去信号（つまりノイズが除去された音声信号）が出力されるようにすることができる。
【００６２】
このようにしてノイズ埋没判定部２５が出力する埋没判定結果情報Ｍによっては、ＨＤＤノイズが背景音に埋没しなとされた場合、つまりノイズ除去が必要であるとされた場合に、入力音声信号Ａinについてのノイズ除去処理が行われると共に、ノイズ除去の行われた音声信号が選択出力されるようにすることができる。
一方、ＨＤＤノイズが背景音に埋没するとされた場合、つまりノイズ除去が不要であるとされた場合には、入力音声信号Ａinについてのノイズ除去処理は行われないようにすると共に、ノイズ除去の行われていない音声信号が選択出力されるようにすることができる。
【００６３】
なお、上述したディレイ回路２２、ディレイ回路２３、及びディレイ回路２８にそれぞれ設定されるべき遅延時間については後述する。
【００６４】
［ノイズ除去］
続いては、本実施の形態としてのビデオカメラ装置１にて行われるノイズ除去の手法について説明する。
先ずは、実施の形態のノイズ除去手法の説明に先立ち、実施の形態のＨＤＤノイズについて再考してみると、このＨＤＤノイズとしては、時間波形（図４（ａ））で見ると概ね持続時間が約0.03sec程度と非常に短いスパイク状のノイズとなっている。また、スペクトログラム（図４（ｂ））で見るとインパルス状に広い周波数帯域にパワーが分布しており、時間的に集中している信号は周波数的には広い帯域に分布しているものとなる。
【００６５】
このようにしてＨＤＤノイズは、その発生時間が非常に短い期間となっていることから、例えば従来行われていたような適応型フィルタを用いたノイズ除去手法では、フィルタの収束が間に合わず、結果としてノイズを除去しきれないといった可能性も考えられなくはない。
【００６６】
また、ＨＤＤノイズは上記のように比較的広帯域にわたりそのパワーが分布する特性とされるので、これを例えば逆位相の信号を加算することにより除去する手法を適用した場合には、ノイズを除去することが困難となる可能性がある。
【００６７】
そこで、本実施の形態では、このようなＨＤＤノイズの特性を考慮して適正にこれを除去することのできるノイズ除去の手法を採用するものとしている。
図１０は、実施の形態のノイズ除去手法の基本的な考え方について模式的に示した図であり、図１０（ａ）は、入力音声信号Ａinについてノイズ区間とその前後を含む時間波形とを示し、図１０（ｂ）ではノイズ除去後の音声出力信号Ａoutについてノイズ区間とその前後を含む時間波形を示している。
【００６８】
本実施の形態では、上記のようなＨＤＤノイズの特性を考慮して、ノイズ区間の音声信号を、ノイズ発生タイミングの周辺の音声信号の波形情報を利用して補間するものとしている。
つまり、図１０（ｂ）に示されるようにして、ノイズ発生タイミングの周辺波形からノイズを除去するためのノイズ除去信号を生成し、ノイズ区間に対し、このように生成したノイズ除去信号を挿入するようにしてノイズ区間の信号を補間するというものである。
【００６９】
このようなノイズ除去手法を実現するために、実施の形態のビデオカメラ装置１は、図２に示すノイズ除去信号生成部２６と信号挿入部３０とを備えている。
図２に示すようにしてノイズ除去信号生成部２６には、ディレイ回路２１とディレイ回路２２とを介して得られる入力音声信号Ａin-2と、ノイズタイミング検出・ノイズ区間設定部２４からのノイズ区間情報ＮSとが入力される。
ノイズ除去信号生成部２６は、上記入力音声信号Ａin-2における上記ノイズ区間情報ＮSが示すノイズ区間を補間するためのノイズ除去信号を生成し、これを上記信号挿入部３０に対して供給する。
【００７０】
また、先に述べたようにしてノイズ除去信号生成部２６には、除去動作制御部２７からのON/OFF制御信号が供給され、このON/OFF制御信号に基づきノイズ除去信号の生成動作のON/OFFが制御されるようになっている。
なお、このノイズ除去信号生成部２６の内部構成及び動作については後述する。
【００７１】
信号挿入部３０には、ノイズ除去信号生成部２６からのノイズ除去信号と共に、ディレイ回路２１とディレイ回路２２とディレイ回路２３とを介して得られる入力音声信号Ａin-3と、ノイズタイミング検出・ノイズ区間設定部２４からのノイズ区間情報ＮSとが入力される。
この信号挿入部３０は、上記入力音声信号Ａin-3をそのまま出力するか、或いは上記入力音声信号Ａin-3における上記ノイズ区間情報ＮSが示すノイズ区間に、上記入力音声信号Ａin-3に代えて上記ノイズ除去信号を出力するかを選択可能に構成される。この信号挿入部３０の選択出力は、図示するようにして音声出力信号Ａoutとして音声信号処理部３に対して供給される。
【００７２】
このような信号挿入部３０の選択動作は、先にも述べたように選択制御部２９からの選択制御信号ＳＬＣによって制御されるようになっている。
つまり、信号挿入部３０は、上記選択制御信号ＳＬＣにより入力音声信号Ａin-3の選択が指示された場合は、入力音声信号Ａin-3をそのまま選択出力する。そして、上記選択制御信号ＳＬＣによりノイズ除去信号の選択が指示された場合は、上記入力音声信号Ａin-3におけるノイズ区間の信号の代わりに、上記ノイズ除去信号を出力するようにされる。換言すれば、入力音声信号Ａin-3におけるノイズ区間にノイズ除去信号を挿入するようにされるものである。
【００７３】
ここで、本実施の形態のノイズ除去信号の生成手法について説明する。
図１１は、図２に示したノイズ除去信号生成部２６の内部構成を示している。
この図１１に示すようにしてノイズ除去信号生成部２６内には、ディレイ回路３１、前半ピッチ計算部３２、後半ピッチ計算部３３、前半信号生成部３４、後半信号生成部３５、クロスフェード処理部３６が備えられる。
先の図２にも示したように、ノイズ除去信号生成部２６には、ノイズタイミング検出・ノイズ区間設定部２４からのノイズ区間情報ＮSと、除去動作制御部２７からのON/OFF制御信号が供給される。図示は省略しているが、上記ノイズ区間情報ＮSは、ノイズ除去信号生成部２６内の各部に対して供給されている。
また、上記ON/OFF制御信号としても、ノイズ除去信号生成部２６内の各部に対して供給され、各部はこのON/OFF制御信号に応じてON/OFFするように構成されている。
【００７４】
図１１において、先ず前半ピッチ計算部３２、後半ピッチ計算部３３に対しては、先の図２に示したディレイ回路２１とディレイ回路２２とを介して得られる入力音声信号Ａin-2が入力される。
上記前半ピッチ計算部３２は、入力音声信号Ａin-2について、ノイズ区間情報ＮSにより示されるノイズ区間の開始点を基準としてその前後の最も相関性のあるとされるピッチ周期を計算し、そのピッチ周期により特定される区間を示す前半ピッチ情報Ｐ-fを得る。
また、上記後半ピッチ計算部３３は、入力音声信号Ａin-2について、ノイズ区間情報ＮSにより示されるノイズ区間の終了点を基準としてその前後の最も相関性のあるとされるピッチ周期を計算し、そのピッチ周期により特定される区間を示す後半ピッチ情報Ｐ-rを得る。
【００７５】
上記前半ピッチ計算部３２及び後半ピッチ計算部３３において、上記ピッチ周期は、例えば以下で定義するような平均歪みを最小にするサンプル数Tとして算出することができる。
(1 / T) * Σt = 0 〜 T-1 {Ain(t) - Ain(t + T)}2
又は、
(1 / T) * Σt = 0 〜 T-1 | Ain(t) - Ain(t + T) |
このようにして上記前半ピッチ計算部３２及び後半ピッチ計算部３３においては、波形相関が最も高くなるようなピッチ周期が算出される。
【００７６】
なお、上記のようにしてこの場合のピッチ周期の計算時には、ノイズ区間の開始点・終了点を基準としてその前後も対象とすることで、ノイズ区間内の部分もピッチ計算の対象としているが、これは、実施の形態ではノイズ区間を実際にＨＤＤノイズの存在する区間に対して広めに設定しているためであり、さらに、ＨＤＤノイズは極めてレベルの小さい信号でありピッチ計算において支配的な信号にはならないためである。
【００７７】
上記前半ピッチ計算部３２にて得られた前半ピッチ情報Ｐ-fは、前半信号生成部３４に対して供給される。また、上記後半ピッチ計算部３３にて得られた後半ピッチ情報Ｐ-rは後半信号生成部３５に対して供給される。
【００７８】
前半信号生成部３４、及び後半信号生成部３５に対しては、入力音声信号Ａin-2が図示するディレイ回路３１によって遅延された入力音声信号Ａin-2dが入力される。
なお、このディレイ回路３１に設定されるべき遅延時間については後述する。
【００７９】
前半信号生成部３４は、上記入力音声信号Ain-2dと、上記前半ピッチ情報Ｐ-fとに基き、次の図１２に説明するようにして前半信号を生成する。
また後半信号生成部３５は、上記入力音声信号Ain-2dと上記後半ピッチ情報Ｐ-rとに基き、次の図１３に説明するようにして後半信号を生成する。
【００８０】
図１２、図１３は、上記前半信号生成部３４における前半信号の生成処理と、後半信号生成部３５における後半信号の生成処理とについてそれぞれ模式的に示している。
先ず、図１２において、例えば図１２（ａ）に示されるようにして入力音声信号についてのノイズ区間が設定されたとすると、前半ピッチ計算部３２によっては、図１２（ｂ）に示すようなピッチ周期が計算される。先の説明からも理解されるように、このようなピッチ周期は、ノイズ区間の開始点を基準として、その前後において最も波形相関の高くなる周期が算出される。
【００８１】
そして、前半信号生成部３４は、このようなピッチ周期により特定される２つの区間（ピッチ区間）を示す前半ピッチ情報Ｐ-fに基づき、入力音声信号について所定の信号処理を施すことによって前半信号を生成する。
つまり、前半信号生成部３４は、先ずは入力音声信号（Ａin-2d）における、上記前半ピッチ情報Ｐ-fにより示される２つのピッチ区間の信号に対して、図１２（ｃ）に示されるような重み窓データをそれぞれ乗算することにより重み付けを行う。
図示するようにしてこの場合の重み窓データは、ノイズ区間の開始点を「１」として、それぞれのピッチ区間の端点側に向けて徐々に「０」に向けて低下するような窓データが設定される。
【００８２】
そして、前半信号生成部３４は、このようにしてそれぞれの窓データにより重み付けされた音声信号を図１２（ｄ）に示すようにして加算することにより、１ピッチ周期分の重み付け加算信号を得る。
その上で、次の図１２（ｅ）に示すようにして、この１ピッチ周期分の重み付け加算信号をノイズ区間の開始点からノイズ区間の終了点の方向に所定回数繰り返すことにより、繰り返し重み付け加算信号を得る。図示するようにしてこの場合は、上記重み付け加算信号を、ノイズ区間内に収まる範囲で最大個数繰り返して上記繰り返し重み付け加算信号を生成するものとしている。
【００８３】
ここで、個々の重み付け加算信号は、元々波形相関の高い信号同士を重み付け加算したものであり、またそれを繰り返した上記繰り返し重み付け加算信号は、入力音声信号の連続性を保持した繰り返し手法であるため、このようにして生成される繰り返し重み付け加算信号は聴感上極めて自然な音声信号とすることができる。
前半信号生成部３４は、この繰り返し重み付け加算信号を前半信号として出力する。
【００８４】
また、図１３は、後半信号生成部３５における後半信号の生成処理について示している。
この場合も、例えば図１３（ａ）に示されるようにして入力音声信号についてのノイズ区間が設定されたとすると、後半ピッチ計算部３３によっては、図１３（ｂ）に示すようなピッチ周期が計算される。このような後半ピッチ計算部３３によって計算されるピッチ周期としても、ノイズ区間の終了点を基準として、その前後において最も波形相関の高くなる周期となる。
【００８５】
そして、後半信号生成部３５としても、このようなピッチ周期により特定される２つのピッチ区間を示す後半ピッチ情報Ｐ-rに基づき、入力音声信号について所定の信号処理を施すことによって後半信号を生成する。
すなわち後半信号生成部３５は、入力音声信号（Ａin-2d）における、上記後半ピッチ情報Ｐ-rにより示される２つのピッチ区間の信号に対して、図１３（ｃ）に示されるような重み窓データをそれぞれ乗算することにより重み付けを行う。この場合の重み窓データとしても、図示するようにしてノイズ区間の終了点を「１」として、それぞれのピッチ区間の端点側に向けて徐々に「０」に向けて低下するような窓データが設定される。
【００８６】
そして、後半信号生成部３５としても、このようにしてそれぞれの窓データにより重み付けされた入力音声信号を、次の図１３（ｄ）に示すようにして加算して１ピッチ周期分の重み付け加算信号を得る。
その上で、図１３（ｅ）に示すようにして、この１ピッチ周期分の重み付け加算信号をノイズ区間の終了点からノイズ区間の開始点の方向に所定回数繰り返すことにより、繰り返し重み付け加算信号を得る。この場合も、上記重み付け加算信号を、ノイズ区間内に収まる範囲で最大個数繰り返して上記繰り返し重み付け加算信号を生成するようにされる。
【００８７】
後半信号生成部３５は、このようにして生成した繰り返し重み付け加算信号を後半信号として出力する。この後半信号としても、上記のようにして前半信号の場合と同様の手法により生成されることで、聴感上極めて自然な音声信号とすることができる。
【００８８】
説明を図１１に戻す。
クロスフェード処理部３６は、前半信号生成部３４が出力する前半信号と、後半信号生成部３５が出力する後半信号とを入力し、それらのクロスフェード処理を行ってノイズ除去信号を生成する。
【００８９】
図１４は、クロスフェード処理部３６のクロスフェード処理について模式的に示した図である。
クロスフェード処理部３６では、図１４（ａ）に示されるようにして、前半信号生成部３４からの前半信号に対し、図のような重み窓データを乗算して重み付けを行う。
同様に、図１４（ｂ）に示されるようにして、後半信号生成部３５からの後半信号に対しても、図のような重み窓データを乗算して重み付けを行う。
前半信号、後半信号に対して重み付けを行うための窓データは、それぞれ図示するようにして前半信号と後半信号とがオーバーラップする区間の長さを有し、「１」から「０」に徐々に低下するものが設定される。具体的に、前半信号に対する窓データは、後半信号の開始点を「１」として、前半信号の終了点にかけて徐々に「０」に向けて低下するものが設定される。また、後半信号に対する窓データとしては、前半信号の終了点を「１」として後半信号の開始点にかけて徐々に「０」に向けて低下するものが設定される。
【００９０】
そして、クロスフェード処理部３６は、このようにして重み付けされた前半信号および後半信号を、次の図１４（ｃ）に示すように加算することにより、ノイズ区間と等しい長さの前半・後半重み付け加算信号を得る。
クロスフェード処理部３６は、このような処理により生成された前半・後半重み付け加算信号（つまりクロスフェード信号）を、ノイズ除去信号として出力する。
【００９１】
先に述べたようにしてこのノイズ除去信号は、図２（図１１）に示される信号挿入部３０に入力され、これが入力音声信号（Ａin-3）におけるノイズ区間に挿入されることで、ノイズ除去が行われるようになっている。
【００９２】
なお、以上のようにしてノイズ除去が行われるノイズ検出・除去部２においては、複数のディレイ回路が設けられているが、ここでそれら各ディレイ回路（２１，２２，２３，２８，３１）に設定されるべき遅延時間について整理しておく。
先ず、ディレイ回路２１の遅延時間としては、先にも述べたようにノイズ埋没判定部２５に供給される入力音声信号Ａin-1として、少なくともノイズタイミング検出・ノイズ区間設定部２４により設定されたノイズ区間の開始点よりもタイミング的に前となる信号部分が供給されるようにして設定されていればよい。
【００９３】
また、ディレイ回路２２の遅延時間としては、ノイズ埋没判定部２５によるノイズ埋没判定が行われた後に、ノイズ除去信号生成部２６に対して入力音声信号Ａin-2のノイズ区間前の信号部分が供給されるように設定されればよい。
【００９４】
また、ディレイ回路３１については、前半ピッチ情報Ｐ-fの出力後に前半信号生成部３４に入力音声信号Ａin-2dのノイズ区間開始点より所定分前の信号部分が供給され、且つ後半ピッチ情報Ｐ-rの出力後に後半信号生成部３５に入力音声信号Ａin-2dのノイズ区間終了点より所定分前の信号部分が供給されるようにしてその遅延時間が設定されればよい。
【００９５】
また、ディレイ回路２３については、ノイズ除去信号生成部２６によるノイズ除去信号の生成後に、信号挿入部３０に対して入力音声信号Ａin-3のノイズ区間前の信号部分が供給されるようにその遅延時間が設定されればよい。
【００９６】
さらに、ディレイ回路２８については、ノイズ除去信号生成部２６によるノイズ除去信号の生成後に、選択制御部３０に対して更新された埋没判定結果情報Ｍが供給されるようにその遅延時間が設定されればよい。
【００９７】
各ディレイ回路に対してこのような遅延時間を設定することで、連続的に入力される入力音声信号に対して、ノイズ検出に応じてそのノイズ区間を補間してノイズを除去する動作、及びノイズ検出に応じてそのノイズ区間についてのノイズ埋没判定を行う動作、及び埋没判定結果に応じてノイズ除去の実行／不実行を制御する動作が、それぞれ適正に行われるようにすることができる。
【００９８】
[実施の形態のまとめ及び変形例]
これまでで説明したようにして、本実施の形態のビデオカメラ装置１によれば、ノイズ発生源としてのＨＤＤ１０内に設けたノイズ検出用マイク１１からの検出信号に基づいてＨＤＤノイズの発生タイミングを検出するので、例えばＨＤＤ１０への記録開始／停止指示のタイミングからノイズ発生区間を予測する場合とは異なり、適正にノイズ発生タイミングの検出を行うことができ、これによってノイズ区間は必要最小限の区間を設定することができる。
このようにしてノイズ区間を必要最小限に設定することができれば、ノイズ除去に伴い生じる可能性のある音質劣化部分としても最小限に抑えることができる。
【００９９】
そして、本実施の形態では、上記のようなノイズ検出用マイク１１の検出信号に基づくノイズ発生タイミングの検出のための信号分析を、ノイズ発生タイミングが含まれるとされる所定区間内でのみ行うものとしている。具体的には、ＨＤＤ１０に対する記録開始／停止指示に応じてシステムコントローラ１２が出力するノイズ発生予想区間情報ＮcSが示す範囲内でのみ行うものとしている。
これにより、ノイズタイミング検出・ノイズ区間設定部２４では、常時ノイズタイミング検出のための信号分析を行う必要がないものとでき、その分の処理負担と消費電力とを削減することができる。
【０１００】
また、このとき、上記信号分析はあくまでＨＤＤノイズの発生することが予想される区間内で行われるものであるので、上記のように信号分析区間が削減されることによるＨＤＤノイズの検出漏れはないものとすることができる。すなわちこのことから、ＨＤＤノイズの検出漏れの防止と、分析期間の削減による処理負担・消費電力の削減との両立が図られるものである。
【０１０１】
また、上記のような信号分析に基づくノイズタイミング検出は誤検出の可能性が皆無ではないが、上記のようにしてノイズタイミング検出のための信号分析を行う期間がノイズ発生予想区間ＮcSの区間内のみに絞られれば、その分ノイズタイミング検出の誤検出の機会は減り、その分、このような誤検出に基づく無駄なノイズ除去動作が行われる機会も減らすことができる。そして、このようにノイズ誤検出に基づく無駄なノイズ除去動作の機会を減らすことができれば、音質劣化の機会も減らすことができる。
すなわち、本実施の形態によれば、このようにノイズ検出のための信号分析の期間を削減したという面でも、音質劣化の最小限化を図ることができるものである。
【０１０２】
また、実施の形態では、ノイズ埋没判定部２５、除去動作制御部２７、及び選択制御部２９の動作により、ＨＤＤノイズが入力音声信号Ａinにおける背景音に埋没しないとされた場合にのみノイズ除去信号生成部２６によるノイズ除去信号の生成動作を実行させ、且つ信号挿入部３０にてノイズ除去信号（つまりノイズの除去された音声信号）が選択出力されるようにしている。
このようにして、ＨＤＤノイズが背景音に埋没しないとされた場合にのみノイズの除去された音声信号が選択出力されるようにしたことで、ＨＤＤノイズが背景音に埋没しノイズ除去を行う必要がない場合に、無駄なノイズ除去が行われてしまうことを効果的に防止することができる。そして、このように無駄なノイズ除去が行われないようにすることができれば、その分ノイズ除去に伴う音質劣化の機会も有効に減らすことができる。
【０１０３】
また、上記のようにしてＨＤＤノイズが入力音声信号Ａinにおける背景音に埋没しないとされた場合にのみノイズ除去信号生成部２６によるノイズ除去信号の生成動作を実行させるようにしたことで、ＨＤＤノイズが背景音に埋没しノイズ除去を行う必要がない場合に、無駄なノイズ除去動作が行われてしまうことを効果的に防止することができ、その分処理負担の削減と消費電力の削減を図ることができる。
【０１０４】
また、実施の形態では、上記のようなノイズ埋没判定部２５によるノイズ埋没判定のための信号分析を常時行うものとはせず、ＨＤＤノイズの発生するとされる区間内でのみ行うものとしている。具体的には、ノイズタイミング検出・ノイズ区間設定部２４によって設定されたノイズ区間内でのみ行うものとしている。
このようにしてノイズ埋没判定のための信号分析を行う期間がノイズの発生するとされる区間内のみに絞られれば、その分ノイズ埋没判定部２４の処理負担を軽減することができ、またその消費電力としても削減を図ることができる。
【０１０５】
そして、ノイズ埋没判定としても、このように少なくともノイズが発生するとされる区間内でのみ信号分析が行われるものとされることで、ノイズ埋没判定の判定漏れがないようにすることができ、このことで判定漏れの防止と上記のような処理負担・消費電力の削減と両立が図られるものとなる。
【０１０６】
また、実施の形態では、ノイズ発生源に対して設けたノイズ検出用マイクによりノイズ発生タイミングを検出する手法を採る場合に、上記のようなノイズ埋没判定に応じたノイズ除去動作の制御を行うものとしているが、このことによっては以下のような利点も得られる。
すなわち、このようにしてノイズ検出用マイクを用いる場合には、仮に背景音が比較的大きい状況下には、その背景音がノイズ検出用マイクにより収音されることで、ノイズが誤検出される可能性がなくはないが、万が一背景音の比較的大きい状況下でノイズが誤検出されてしまったとしても、上記のようなノイズ埋没判定の結果に基づくノイズ除去制御が行われることで、結果的にはノイズ除去が行われないようにすることができることになる。
【０１０７】
また、実施の形態では、ノイズタイミング検出・ノイズ区間設定部２４において、検出されたノイスタイミングに基づく所定区間をノイズ区間として設定し、入力音声信号Ａin中のこのノイズ区間に対し、入力音声信号Ａinから生成したノイズ除去信号を置き換えるようにして挿入することで、ノイズ除去を行うものとしている。
これによれば、本実施の形態のＨＤＤノイズのように、その発生期間が非常に短く、また比較的広い周波数帯域にわたりパワーが分布するノイズに対し、例えば従来の適応型フィルタを用いる手法や逆位相信号を加算する手法などが採られる場合と比較して、より有効にノイズ除去を行うことができる。
【０１０８】
また、実施の形態では、ノイズ区間の開始点前後の入力音声信号Ａin、及びノイズ区間の終了点前後の入力音声信号Ａinに対してピッチ計算を行い、得られたピッチ情報Ｐに基いてノイズ区間を補間するための前半信号および後半信号の生成を行い、これら前半信号と後半信号とのクロスフェード処理を行ってノイズ除去信号を生成するものとしたが、これにより、ノイズ区間前後の音声のつながりが聴感上極めて自然となるようにすることのできるノイズ除去信号を生成することができる。すなわち、このようなノイズ除去信号を用いて、聴感上極めて自然にノイズ区間を補間することができる。
【０１０９】
−実施の形態の変形例−
＜第１の変形例＞
以下、実施の形態の変形例について説明する。
先ず、第１の変形例は、これまでで説明した実施の形態としての動作を、ソフトウェア処理により実現するものである。
ここでは一例として、ビデオカメラ装置の全体制御を行うシステムコントローラのソフトウエア処理により実施の形態としての動作を実現する場合について説明する。
【０１１０】
図１５は、第１の変形例としてのビデオカメラ装置１５の内部構成を示すブロック図である。なお、この図において、既に図２にて説明した部分と同様となる部分については同一符号を付して説明を省略する。
図示するようにしてこの場合は、ディレイ回路２１からの入力音声信号Ａin-1、ディレイ回路２２からの入力音声信号Ａin-2、ディレイ回路３１からの入力音声信号Ａin-2d、及びディレイ回路２３からの入力音声信号Ａin-3が、それぞれシステムコントローラ１６に対して供給される。また、システムコントローラ１６には、ノイズ検出用マイク１１からの検出用音声信号ＡNinも供給される。
この場合のシステムコントローラ１６としても、先に説明したシステムコントローラ１２と同様に、間欠アクセスのための制御処理を行うものとされる。
【０１１１】
図１６〜図１８は、先に説明した実施の形態としての動作を実現するために、システムコントローラ１６が実行すべき処理動作について示したフローチャートである。なお、これらの図に示す処理動作は、システムコントローラ１６が例えば内部のＲＯＭ等に格納されるプログラムに基づいて実行するものである。
【０１１２】
先ず、図１６では、図２に示したノイズタイミング検出・ノイズ区間設定部２４の動作に対応した処理動作について示している。
先ず、ステップＳ１０１では、記録開始／停止指示の発生を待機する。つまり、この図に示す処理動作とは並行して行われることになる間欠アクセスのための制御処理によって行われる、ＨＤＤ１０への記録開始指示又は記録停止指示の発生を待機するようにされる。
【０１１３】
そして、上記記録開始／停止指示が発生した場合は、ステップＳ１０２において、検出用音声信号ＡNinを入力する。
さらに、続くステップＳ１０３では、ノイズ発生予想区間における信号分析を行う。すなわち、上記のようにして記録開始／停止指示のタイミングが検出されたことに応じ、そのタイミングに基づくノイズ発生予想区間（ノイズ発生予想区間情報ＮcS）を設定し、入力される検出用音声信号ＡNinの振幅値と先に述べた閾値ｔｈ-s1と閾値ｔｈ-s2との比較を行う。
【０１１４】
続くステップＳ１０４では、検出用音声信号ＡNinの振幅値が所定範囲外であるか否かについて判別する。つまり、上記信号分析の結果から検出用音声信号ＡNinの振幅値が閾値ｔｈ-s1と閾値ｔｈ-s2とによる所定範囲を超えたか否かについて判別処理を行う。
ステップＳ１０４において、検出用音声信号ＡNinの振幅値が上記所定範囲を超えていないとして否定結果が得られた場合は、ステップＳ１０５に進みノイズ発生予想区間が終了したか否かを判別する。そして、ノイズ発生予想区間が未だ終了していないとして否定結果が得られた場合はステップＳ１０４に戻り、またノイズ発生予想区間が終了したとして肯定結果が得られた場合はステップＳ１０７に進んで信号分析を終了して「ＲＥＴＵＲＮ」となる。
【０１１５】
また、ステップＳ１０４において、検出用音声信号ＡNinの振幅値が上記所定範囲を超えたとして肯定結果が得られた場合は、ステップＳ１０６において、その検出タイミングを含む所定長期間をノイズ区間（ノイズ区間情報ＮS）として設定した後、ステップＳ１０７にて信号分析を終了して「ＲＥＴＵＲＮ」となる。
【０１１６】
また、図１７は、ノイズ埋没判定部２５の動作に対応した処理動作について示している。
図１７において、ステップＳ２０１では、ノイズ検出待機処理として、先の図１６に示したステップＳ１０６によるノイズ区間の設定を待機するようにされる。
そして、ノイズ区間が設定された場合は、ステップＳ２０２において、入力音声信号Ａin-1を入力する。
【０１１７】
続くステップＳ２０３では、ノイズ区間における入力音声信号Ａin-1のパワー（Ｐ-NSとする）を計算する。つまり、このパワーＰ-NSとしては、先に説明したノイズ埋没判定部２５と同様に、ノイズ区間における入力音声信号Ａin-1の例えば時間波形のパワーを計算する。このような入力音声信号Ａin-1の時間波形のパワーは、先にも述べたように各時間における入力音声信号Ａin-1の値の２乗和により算出することができる。
【０１１８】
ステップＳ２０４では、計算したパワーＰ-NSが閾値ｔｈ-pを超えるか否かについて判別処理を行う。パワーＰ-NSが閾値ｔｈ-pを超えるとして肯定結果が得られた場合は、ステップＳ２０５に進みノイズ埋没判定を行って「ＲＥＴＵＲＮ」となる。
一方、パワーＰ-NSが閾値ｔｈ-pを超えないとして否定結果が得られた場合は、ステップＳ２０６に進んでノイズ非埋没判定を行って「ＲＥＴＵＲＮ」となる。
【０１１９】
さらに、図１８は、ノイズ除去信号生成部２６、除去動作制御部２７、選択制御部２９、及び信号挿入部３０の動作に対応した処理動作を示している。
先ず、ステップＳ３０１では、上記ステップＳ２０６によるノイズ非埋没判定を待機するようにされる。そして、ノイズ非埋没判定があった場合は、ステップＳ３０２において入力音声信号Ａin-2を入力する。
【０１２０】
続くステップＳ３０３では、前半ピッチ情報Ｐ-f、後半ピッチ情報Ｐ-rを計算する処理を実行する。すなわち、先に説明した前半ピッチ計算部３２、後半ピッチ計算部３３と同様に、入力音声信号Ａin-2のノイズ区間開始点前後のピッチ周期、終了点前後のピッチ周期を計算し、それら計算したピッチ周期から前半ピッチ情報Ｐ-f、後半ピッチ情報Ｐ-rを得る。
【０１２１】
ステップＳ３０４では、入力音声信号Ａin-2dを入力する。
そして、ステップＳ３０５では、前半ピッチ情報Ｐ-fに基づき前半信号を生成するための処理を実行する。すなわち、入力音声信号Ａin-2dについて、前半ピッチ情報Ｐ-fにより示される２つのピッチ区間の信号に先の図１２（ｃ）に示したような重み窓データをそれぞれ乗算し、それらを加算した重み付け加算信号を生成すると共に、この重み付け加算信号を図１２（ｄ）に示したようにノイズ区間の開始点から終了点側に所定回数繰り返すことで前半信号を生成する。
【０１２２】
また、ステップＳ３０６では、後半ピッチ情報Ｐ-rに基づき後半信号を生成するための処理を実行する。すなわち、入力音声信号Ａin-2dについて、後半ピッチ情報Ｐ-rにより示される２つのピッチ区間の信号に先の図１３（ｃ）に示したような重み窓データをそれぞれ乗算し、それらを加算した重み付け加算信号を生成すると共に、この重み付け加算信号を図１３（ｄ）に示したようにノイズ区間の終了点から開始点側に所定回数繰り返すことで後半信号を生成する。
【０１２３】
そして、ステップＳ３０７では、前半信号・後半信号のクロスフェード処理を実行する。つまり、上記のようにして生成した前半信号、後半信号について、先の図１４に示したようなクロスフェード処理を実行してクロスフェード信号（ノイズ除去信号）を得る。
【０１２４】
続くステップＳ３０８では、入力音声信号Ａin-3のノイズ区間にノイズ除去信号を挿入して出力するための処理を実行する。すなわち、入力される上記入力音声信号Ａin-3と、上記のようにして生成したノイズ除去信号のうち上記ノイズ除去信号を選択し、これを上記入力音声信号Ａin-3のノイズ区間の信号部分の代わりに出力する。
これにより、図１５に示す出力音声信号Ａoutとして、ＨＤＤノイズが除去された信号を出力することができる。
【０１２５】
＜その他の変形例＞
以上、本発明の実施の形態について説明したが、本発明としてはこれまでに説明した実施の形態に限定されるべきものではない。
例えば実施の形態では、ノイズ発生源に対して設けられたノイズ検出用センサとして、ノイズ検出用マイク１１としてのマイクロフォンを設ける場合を例示したが、ノイズ検出用センサとしてはこのようなマイクロフォン以外にも、例えば振動センサなど、ノイズの発生を検出することのできるセンサであれば他のセンサを用いることができる。
【０１２６】
ここで、例えば上記のような振動センサを用いる場合には、次のような効果を期待できる。つまり、背景音が大きい場合、ノイズ検出用センサとしてマイクのみを用いる場合だとノイズが誤検出される可能性がなくはないが、例えばこのような振動センサからの検出信号に基づくノイズ検出も組み合わせるものとする（つまり双方のセンサの検出信号の分析結果に基づきノイズ検出を行う）ことで、このように背景音が大きい場合の誤検出の防止を図ることができる。
【０１２７】
また、実施の形態では、ノイズが発生するとされるノイズ発生区間の情報を、ＨＤＤ１０に対する記録開始／停止指示の発生タイミングに応じて設定する場合を例示したが、このようなノイズ発生予想区間の情報は、上記記録開始／停止指示以外の情報に基づき取得することもできる。例えば、上記のような記録開始／停止指示に応じては、ＨＤＤ１０内で磁気ヘッド１０Ａをロード／パーキング位置に駆動するための制御信号が該当する駆動部に出力されるが、この制御信号からノイズ発生予想区間の情報を取得するようにすることもできる。
【０１２８】
また、実施の形態で例示したノイズ除去の手法はあくまで一例であり、例えばノイズ区間の音声信号をフィルタ処理により除去する等、様々なノイズ除去手法を適用することができる。
何れのノイズ除去手法が採られる場合にも、ノイズ除去に伴う音質の劣化は免れないものとなるので、そのような場合に実施の形態で例示したようなノイズ検出手法を採用して上述したようなノイズ除去区間（ノイズ区間）の最小限化、及びノイズ誤検出機会の削減に伴うノイズ除去機会の削減が図られることで、同様に音質劣化の防止を図ることができることに変わりはない。
【０１２９】
また、実施の形態では、ノイズ発生タイミングに基づき設定されたノイズ区間内でのみ、ノイズ埋没判定のための信号分析を行う場合を例示したが、これに代えて、上記したようなＨＤＤ１０への記録開始／停止指示に応じて取得されたノイズ発生予想区間内でのみ埋没判定のための信号分析を行うようにすることもできる。
このようにしてノイズ埋没判定のための信号分析は、少なくともノイズが生じるとされる区間内でのみ行うものとすれば、ノイズ埋没判定の判定漏れなく信号分析することと、ノイズ埋没判定のための処理負担・消費電力の削減との両立を図ることができる。
【０１３０】
また、実施の形態では、本発明の記録装置が記録媒体に対する記録のみが可能とされる場合を例示したが、再生も可能となるように構成することもできる。
【０１３１】
また、本発明としては、このようなビデオカメラ装置１に限らず、収音マイクを入力源とする入力音声信号にノイズ発生源からのノイズが重畳して記録されてしまう可能性のある記録装置全般に広く好適に適用することができる。
【０１３２】
また、実施の形態では、収音マイクからの入力音声信号を記録する前にノイズ除去を行う場合を例示したが、本発明はこれに限らず、録音済みの音声信号からノイズを除去する場合にも好適に適用することができる。
その場合、先ずノイズ発生タイミングの検出については、例えば対象とする音声信号の記録中に行われた記録開始／停止指示のタイミング情報を保持しておき、記録後に、それら保持したタイミング情報に基づき取得した各ノイズ発生予想区間内で、記録済み音声信号についてのノイズ発生タイミング検出を行うものとすればよい。そして、検出したノイズ発生タイミングに基づき、それぞれのノイズ区間の設定を行えばよい。
また、ノイズ埋没判定としては、このようにして設定されたノイズ区間内でのみ記録済み音声信号についての信号分析を行って、各ノイズ区間についてのノイズ埋没判定を行えばよい。
そして、ノイズ除去としては、記録済み音声信号について、上記のように設定されたノイズ区間のうちノイズ非埋没判定の為されたノイズ区間を対象としてのみ先に説明したような信号処理を行ってノイズ除去信号を生成し、これをそのノイズ区間の信号として挿入すればよい。
【０１３３】
なお、このようにして記録済み音声信号について行われるノイズ除去制御としても、ノイズ埋没判定結果に応じてノイズ除去の行われていない音声信号とノイズ除去の行われた音声信号とについての選択が行われていることに変わりはない。
【０１３４】
また、確認のために述べておくと、このように記録済み音声信号についてノイズ除去を行う場合には、先に説明したような各ディレイ回路は特に設ける必要性はないことになる。
【図面の簡単な説明】
【０１３５】
【図１】実施の形態の記録装置についての外観斜視図である。
【図２】実施の形態の記録装置の内部構成について示すブロック図である。
【図３】実施の形態の記録装置が備えるＨＤＤの内部構成を示す図である。
【図４】ＨＤＤノイズの特性を示す図である。
【図５】実施の形態としてのノイズタイミング検出・ノイズ区間設定の手法について説明するための図である。
【図６】背景音（外部音）とＨＤＤノイズとの関係について模式的に示す図として、背景音が比較的小音量とされる場合の背景音、ＨＤＤノイズ、ＨＤＤノイズと背景音とが加算された音声信号の時間波形をそれぞれ示した図である。
【図７】背景音（外部音）とＨＤＤノイズとの関係について模式的に示す図として、背景音が比較的小音量とされる場合の背景音とＨＤＤノイズの周波数スペクトルを対比して示した図である。
【図８】背景音（外部音）とＨＤＤノイズとの関係について模式的に示す図として、背景音が比較的大音量とされる場合の背景音、ＨＤＤノイズ、ＨＤＤノイズと背景音とが加算された音声信号の時間波形をそれぞれ示した図である。
【図９】背景音（外部音）とＨＤＤノイズとの関係について模式的に示す図として、背景音が比較的大音量とされる場合の背景音とＨＤＤノイズの周波数スペクトルを対比して示した図である。
【図１０】実施の形態のノイズ除去手法の基本的な考え方について模式的に示した図である。
【図１１】実施の形態の記録装置が備えるノイズ除去信号生成部の内部構成を示したブロック図である。
【図１２】前半信号の生成処理について模式的に示した図である。
【図１３】後半信号の生成処理について模式的に示した図である。
【図１４】クロスフェード処理について模式的に示した図である。
【図１５】実施の形態の第１の変形例としての記録装置の内部構成について示すブロック図である。
【図１６】実施の形態としての動作を実現するために行われるべき処理動作のうち、ノイズタイミング検出・ノイズ区間設定動作に対応した処理動作について示したフローチャートである。
【図１７】実施の形態としての動作を実現するために行われるべき処理動作のうち、ノイズ埋没判定動作に対応した処理動作について示したフローチャートである。
【図１８】実施の形態としての動作を実現するために行われるべき処理動作のうち、ノイズ除去信号生成、除去動作制御、選択制御、及び信号挿入動作に対応した処理動作について示したフローチャートである。
【符号の説明】
【０１３６】
１,１５  ビデオカメラ装置、１ａ  カメラレンズ、１ｂ  外部音収音マイク、２  ノイズ検出・除去部、３  音声信号処理部、４  音声信号圧縮処理部、５  カメラブロック、６  映像信号処理部、７  映像信号圧縮処理部、８  ＡＶストリーム生成部、９  バッファメモリ、１０  ＨＤＤ、１０Ａ  磁気ヘッド、１０Ｂ  磁気ディスク、１１  ノイズ検出用マイク、１２,１６  システムコントローラ、２１,２２,２３,２８,３１  ディレイ回路、２４  ノイズタイミング検出・ノイズ区間設定部、２５  ノイズ埋没判定部、２６  ノイズ除去信号生成部、２７  除去動作制御部、２９  選択制御部、３０  信号挿入部、３２  前半ピッチ計算部、３３  後半ピッチ計算部、３４  前半信号生成部、３５  後半信号生成部、３６  クロスフェード処理部
【図１】
2008052771.tif 000003
【図２】
2008052771.tif 000004
【図３】
2008052771.tif 000005
【図４】
2008052771.tif 000006
【図５】
2008052771.tif 000007
【図６】
2008052771.tif 000008
【図７】
2008052771.tif 000009
【図８】
2008052771.tif 000010
【図９】
2008052771.tif 000011
【図１０】
2008052771.tif 000012
【図１１】
2008052771.tif 000013
【図１２】
2008052771.tif 000014
【図１３】
2008052771.tif 000015
【図１４】
2008052771.tif 000016
【図１５】
2008052771.tif 000017
【図１６】
2008052771.tif 000018
【図１７】
2008052771.tif 000019
【図１８】
2008052771.tif 000020