【手続補正書】
【提出日】平成23年7月29日(2011.7.29)
【手続補正１】
【補正対象書類名】図面
【補正対象項目名】全図
【補正方法】変更
【補正の内容】
【図７】
2011120165.tif 000001
【図１】
2011120165.tif 000002
【図２】
2011120165.tif 000003
【図３】
2011120165.tif 000004
【図４】
2011120165.tif 000005
【図５】
2011120165.tif 000006
【図６】
2011120165.tif 000007
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】変更
【補正の内容】
【００１１】
【図１】本実施例に係るデジタルカメラ１０と音源の位置関係を示す図解図である。
【図２】本実施例に係るデジタルカメラ１０の回路構成の一部を示すブロック図である。
【図３】本実施例に係る方向判定部１０２が音声の到来する方向を算出する方法を説明するための図である。
【図４】本実施例に係るＬＣＤ３８に表示される画面の一例を示す図解図である。
【図５】本実施例に係るマイクロフォン５Ｌ及び５Ｒの指向性のイメージの一例を示す図解図である。
【図６】本実施例に係るデジタルカメラ１０の動作の一部を示すフローチャートである。
【図７】本実施例に係る光学ズーム倍率とレジスタ値の関係の一例を示すルックアップテーブルである。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】００３２
【補正方法】変更
【補正の内容】
【００３２】
次に、上述した電気的な指向性変更処理を図３を用いて詳細に説明する。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】００３３
【補正方法】変更
【補正の内容】
【００３３】
マイクロフォン音声処理部４２の内部構成の概略について説明する。マイクロフォン音声処理部４２は、マイクロフォン５Ｌ及び５Ｒによって集音された複数の音源（図１では、音源Ｐ、音源Ｑ及び音源Ｒの３つの音源）からの音声を音源毎に分離抽出する。そして、ＣＰＵ２２から通知される現在の光学ズーム倍率を検出し、光学ズーム倍率に応じて、分離抽出された各音源からの音声に対して、音源Ｐからの音声の感度が上昇する処理を施す。かかる処理の結果、視聴者が動画像ファイルを再生して視聴すると、主要被写体４からの音声がよりクリアに聴こえることになる。
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】００３４
【補正方法】変更
【補正の内容】
【００３４】
マイクロフォン５Ｌ及び５Ｒによって集音された音声を受けたマイクロフォン音声処理部４２について更に詳細に説明する。マイクロフォン音声処理部４２内の図示しないＡＤＣ６Ｌ及び６Ｒから出力されるデジタル音声信号は、時間領域上の信号であり、或る基準時刻からの経過時間をｔ（ｔは整数）とすると、当該デジタル音声信号はｔの関数として表現できる。以下、ＡＤＣ６Ｌ及び６Ｒから出力されるデジタル音声信号をそれぞれ原信号Ｌｉ（ｔ）及び原信号Ｒｉ（ｔ）と記載する。
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００３５
【補正方法】変更
【補正の内容】
【００３５】
マイクロフォン音声処理部４２内の図示しないＦＦＴ（Fast Fourier Transform）部１０１Ｌ及び１０１Ｒぞれぞれは、原信号Ｌｉ（ｔ）及びＲｉ（ｔ）それぞれに対して離散フーリエ変換を施し、周波数スペクトルを生成する。ＦＦＴ部１０１Ｌ及び１０１Ｒそれぞれから出力される周波数スペクトルは、ＡＤＣ６Ｌ及び６Ｒそれぞれから時間領域上の信号として出力されるデジタル音声信号を周波数領域上の信号に変換したものである。従って、当該周波数スペクトルは、周波数ｆ（ｆは正の整数）の関数として表現できる。以下、ＦＦＴ部１０１Ｌ及び１０１Ｒから出力される周波数スペクトルを、それぞれ周波数スペクトルＬ（ｆ）及びＲ（ｆ）と記載する。
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００３９
【補正方法】変更
【補正の内容】
【００３９】
マイクロフォン音声処理部４２内の図示しない方向判定部１０２は、ＦＦＴ部１０１Ｌ及び１０１Ｒそれぞれから出力される各細分化帯域の周波数スペクトルから、各細分化帯域に含まれるデジタル音声信号がマイクロフォン５Ｌ及び５Ｒへ到達した時の位相差を算出し、この位相差に基づいて各細分化帯域に含まれるデジタル音声信号の到来方向を判定する。
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００４０
【補正方法】変更
【補正の内容】
【００４０】
図３は、方向判定部１０２が音声信号の到来する方向を算出する方法を説明するための図である。今、互いに直行するＸ軸及びＹ軸を座標軸とする２次元の座標面を想定する。Ｘ軸とＹ軸は原点Ｏで直交する。原点Ｏを基準としてＸ軸正方向を右側、負方向を左側、Ｙ軸正方向を前方、負方向を後方とする。マイクロフォン５Ｌ及び５ＲがそれぞれＸ軸上の互いに異なる位置であって、Ｙ軸を基準に対称となるように配置され、２つのマイクロフォンの間隔がＤであるとする。間隔Ｄは、例えば数ｍｍ程度である。
今、例えば、ｆ０Ｈｚの細分化帯域に含まれる音声が音源Ｈから発せられたものであり、当該音声が原点Ｏへ到来する時の入射角を、原点を中心に反時計周りを正としてθ（rad）（ラジアン）であるとする。このときマイクロフォン５Ｌ及び５Ｒへの入射角もθ（rad）と近似することができる。当該音声がマイク５Ｌ及び５Ｒに到達する際の位相差をΔφ（rad）とすると、Δφは、ＦＦＴ部１０１Ｌ及び１０１Ｒそれぞれから出力される周波数スペクトルＬ（ｆ０）及びＲ（ｆ０）から算出することができる。
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００５６
【補正方法】変更
【補正の内容】
【００５６】
マイクロフォン音声処理部４２内の図示しないズーム倍率判定部１０３は、方向判定部１０２から出力される細分化帯域の周波数スペクトルと当該細分化帯域の入射角の組から、入射角毎に細分化帯域の周波数スペクトルを抽出するとともにこれらを合成し、合成周波数スペクトルを生成する。即ち、音声の到来方向毎の合成周波数スペクトルを生成する。以下、入射角θから到来する細分化帯域の周波数スペクトルを合成して生成した合成周波数スペクトルをＬ（θ）と記載する。
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００６０
【補正方法】変更
【補正の内容】
【００６０】
ズーム倍率判定部１０３は、合成周波数スペクトルＬ（θＰ）、Ｌ（θＱ）及びＬ（θＲ）をマイクロフォン音声処理部４２内の図示しないゲイン調整部１０４へ通知する。ＣＰＵ２２は、ズーム倍率に応じてレジスタ値を決定し、ゲイン調整部１０４に通知することによってゲイン調整部１０４内に設けられたレジスタ１０４ａのレジスタ値が設定される。
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００６２
【補正方法】変更
【補正の内容】
【００６２】
図５（Ａ）〜（Ｃ）に示された、マイクロフォン５Ｌ（Ｌｃｈ）及び５Ｒ（Ｒｃｈ）の指向性のイメージ図を用いて、具体的に説明する。例えば、光学ズーム倍率が１倍以上〜２．５倍未満に該当するズーム操作が為された場合には、第１増幅率、第２増幅率及び第３増幅率は、あたかも図５（Ａ）に示すようなマイクロフォン５Ｌの指向性がデジタルカメラ１０のレンズ群１６の光軸方向を中心軸として反時計回りに略９０°、マイクロフォン５Ｒの指向性がデジタルカメラ１０のレンズ群１６の光軸方向を中心軸として時計回りに略９０°となるような増幅率に設定される。
【手続補正１２】
【補正対象書類名】明細書
【補正対象項目名】００６３
【補正方法】変更
【補正の内容】
【００６３】
光学ズーム倍率が２．５倍以上〜４倍未満に該当するズーム操作が為された場合には、第１増幅率、第２増幅率及び第３増幅率は、あたかも図５（Ｂ）に示すようなマイクロフォン５Ｌの指向性がデジタルカメラ１０のレンズ群１６の光軸方向を中心軸として反時計回りに略６０°、マイクロフォン５Ｒの指向性がデジタルカメラ１０のレンズ群１６の光軸方向を中心軸として時計回りに略６０°となるような増幅率に設定される。
【手続補正１３】
【補正対象書類名】明細書
【補正対象項目名】００６４
【補正方法】変更
【補正の内容】
【００６４】
光学ズーム倍率が４倍以上に該当するズーム操作が為された場合には、第１増幅率、第２増幅率及び第３増幅率は、あたかも図５（Ｃ）に示すようなマイクロフォン５Ｌの指向性がデジタルカメラ１０のレンズ群１６の光軸方向を中心軸として反時計回りに略３０°、マイクロフォン５Ｒの指向性がデジタルカメラ１０のレンズ群１６の光軸方向を中心軸として時計回りに略３０°となるような増幅率に設定される。
【手続補正１４】
【補正対象書類名】明細書
【補正対象項目名】００６５
【補正方法】変更
【補正の内容】
【００６５】
マイクロフォン音声処理部４２内の図示しないＩＦＦＴ（Inverse Fast Fourier Transform）部１０５Ｌ及び１０５Ｒは、それぞれゲイン調整後の周波数スペクトルＬ（ｆ）及びＲ（ｆ）に対し逆フーリエ変換を行い、時間領域上の信号に変換し、それぞれＬｏ（ｔ）及びＲｏ（ｔ）としてバス４０に出力する。
【手続補正１５】
【補正対象書類名】明細書
【補正対象項目名】００６７
【補正方法】変更
【補正の内容】
【００６７】
また、本実施例のデジタルカメラ１０では、上述したような光学ズーム倍率の変更に応じて電気的な指向性変更処理を行った際に、使用者に対してマイクロフォン５Ｌ及び５Ｒの指向性がどのように変更されているかを、使用者に対して示すことができる。具体的には、ＣＰＵ２２がスーパーインボース回路４４を制御して、マイクロフォン５Ｌ及び５Ｒの指向性を表す指向性マークをデジタル画像信号に重畳させて、リアルタイム記録画像としてＬＣＤ３８に出力する。更に詳細に説明すると、ＣＰＵ２２は現在の光学ズーム倍率を検出すると、図７に示すような光学ズーム倍率とレジスタ値の関係を示したルックアッ
プテーブルを参照してレジスタ値を決定し、スーパーインボース回路４４内に設けられたレジスタ４４ａにレジスタ値を設定する。スーパーインボース回路４４は、レジスタ４４ａのレジスタ値に対応した、指向性マークをデジタル画像信号に重畳させる指向性マーク重畳処理を行い、バス４０へ出力する。
【手続補正１６】
【補正対象書類名】明細書
【補正対象項目名】００６８
【補正方法】変更
【補正の内容】
【００６８】
図４（Ａ）〜（Ｃ）は、光学ズーム倍率の変更に応じて、ＬＣＤ３８に表示される、指向性を示すマークがデジタル画像信号に重畳されたリアルタイム記録画像の画面を示している。
【手続補正１７】
【補正対象書類名】明細書
【補正対象項目名】００６９
【補正方法】変更
【補正の内容】
【００６９】
図４（Ａ）は、光学ズーム倍率が１倍の時にＬＣＤ３８に表示されるリアルタイム記録画像の画面を示しており、図５（Ａ）に示すようなマイクロフォン５Ｌ及び５Ｒの指向性を、使用者に対してイメージさせるような指向性マーク２００が、デジタル画像信号に重畳されている。
【手続補正１８】
【補正対象書類名】明細書
【補正対象項目名】００７０
【補正方法】変更
【補正の内容】
【００７０】
図４（Ｂ）は、光学ズーム倍率が３倍の時にＬＣＤ３８に表示されるリアルタイム記録画像の画面を示しており、図５（Ｂ）に示すようなマイクロフォン５Ｌ及び５Ｒの指向性を、使用者に対してイメージさせるような指向性マーク３００がデジタル画像信号に重畳されている。
【手続補正１９】
【補正対象書類名】明細書
【補正対象項目名】００７１
【補正方法】変更
【補正の内容】
【００７１】
図４（Ｃ）は、光学ズーム倍率が５倍の時にＬＣＤ３８に表示されるリアルタイム記録画像の画面を示しており、図５（Ｃ）に示すようなマイクロフォン５Ｌ及び５Ｒの指向性を、使用者に対してイメージさせるような指向性マーク４００がデジタル画像信号に重畳されている。
【手続補正２０】
【補正対象書類名】明細書
【補正対象項目名】００７２
【補正方法】変更
【補正の内容】
【００７２】
図６は、指向性変更処理および指向性マーク重畳処理の流れの一例を示すフローチャートである。指向性変更処理および指向性マーク重畳処理は、ＣＰＵ２２が図示しないフラッシュメモリに格納されているプログラムを、ＣＰＵ２２が実行することにより実現される処理である。
【手続補正２１】
【補正対象書類名】明細書
【補正対象項目名】００７３
【補正方法】変更
【補正の内容】
【００７３】
まず、デジタルカメラ１０のモード選択ボタン２４ａが操作されることにより、動画像撮像モードに移行されると、ＣＰＵ２２は、ステップＳ１で光学ズーム倍率を検出する。次にステップＳ３へ進み、ステップＳ３では、図７に示すルックアップテーブルを用いて、光学ズーム倍率に対応したレジスタ値を決定する。次にステップＳ５へ進み、ステップＳ５では、マイクロフォン音声処理部４２内のゲイン調整部１０４ａに設けられたレジスタ１０４ａのレジスタ値、及びスーパーインボース回路４４に設けられたレジスタ４４ａのレジスタ値を決定された値に設定する。次にステップＳ７へ進み、ステップＳ７では、光学ズーム倍率の変更指示が有ったか否かを判別する。ＮＯと判別された場合は、ステップＳ７へ戻り、ＹＥＳと判別されるまで判別を繰り返す。ステップＳ７においてＹＥＳと判別されると、ステップＳ１へ戻り、上記処理を繰り返す。