(57)【特許請求の範囲】
【請求項１】
被写体像を撮像して画像信号を出力する撮像部と、
自身に取り付けられているマイクと、
自身に取り付けられていない閃光装置の外部マイクからの外部音情報が入力される外部音情報入力部と、
前記マイクの取得する音情報を、前記外部音情報により補正処理し、補正音情報データとする音情報処理部と、
前記補正音情報データを、前記画像信号に対応させて記憶部に記録する音情報記録部と
を有し、
前記音情報処理部が、前記音情報と前記外部音情報とを比較し、当該音情報においてのみ測定されている音情報信号を、差分データとして検出し、当該差分データを前記音情報から除去して前記補正音情報データを生成する
ことを特徴とする撮像装置。
【請求項２】
前記音情報処理部が、前記被写体と前記マイクとの間の第１の距離と、前記被写体及び前記外部マイク間の第２の距離との距離差により、前記音情報と前記外部音情報との音圧比及び位相差を求め、当該音圧比及び位相差により前記外部音情報の音圧及び位相を前記音情報に対応させ、前記音情報の補正処理を行うことを特徴とする請求項１記載の撮像装置。
【請求項３】
前記音情報処理部が、前記被写体の仮想位置から前記マイクまでの仮想距離が入力されると、前記第１の距離における前記音情報を、当該仮想距離における音圧及び位相となる仮想音情報に変換し、前記仮想位置から前記外部マイクまでの距離を前記第２の距離とし、前記仮想音情報の補正処置を行うことを特徴とする請求項２に記載の撮像装置。
【請求項４】
前記音情報処理部が、前記差分データのレベルが設定値以上である場合、前記設定値以上の差分データが存在する期間の前記音情報を、前記音圧比及び位相差により当該音情報に対応させた前記外部音情報と置き換えることを特徴とする請求項２または請求項３に記載の撮像装置。
【請求項５】
前記マイク及び前記外部マイクが複数設けられている場合、前記被写体及び複数の前記マイク各々の間の第１の距離と、前記被写体及び複数の前記外部マイク各々の間の第２の距離との距離差を求め、それぞれの距離差に対応した音圧比及び位相差により、当該マイク各々の音情報の補正処理を行うことを特徴とする請求項１から請求項４のいずれかに記載の撮像装置。
【請求項６】
前記マイク及び前記閃光装置が複数設けられている場合、前記被写体及び複数の前記マイク各々の間の第１の距離と、前記被写体及び複数の前記閃光装置の外部マイク各々の間の距離である第２の距離と、複数の前記閃光装置の外部マイクからの前記外部音情報とを用いて、当該マイク各々の音情報の補正処理を行うことを特徴とする請求項１から請求項４のいずれかに記載の撮像装置。
【請求項７】
前記第１の距離及び前記第２の距離を測定する測距手段をさらに有することを特徴とす
る請求項２から請求項６のいずれかに記載の撮像装置。
【請求項８】
撮像装置と、当該撮像装置と異なる場所に配置され、当該撮像装置の撮像時に前記被写体に対して光を照射する閃光装置とからなる撮像システムであり、
前記閃光装置が
前記撮像装置からの撮像タイミングを示す撮像信号により、被写体に対して光を照射する照射部と、
外部マイクと
当該外部マイクが取得した外部音情報を前記撮像装置に送信する外部音情報出力部と
を有し、
前記撮像装置が、
前記被写体の被写体像を撮像して画像信号を出力する撮像部と、
撮像装置に搭載されたマイクと、
前記外部マイクの取得した外部音情報を、当該閃光装置から入力する外部音情報入力部と、
前記マイクの取得する音情報を、前記外部音情報により補正処理し、補正音情報データとする音情報処理部と、
前記補正音情報データを、前記画像信号に対応させて記憶部に記録する音情報記録部と
を有し、
前記音情報処理部が、前記音情報と前記外部音情報とを比較し、当該音情報においてのみ測定されている音情報信号を、差分データとして検出し、当該差分データを前記音情報から除去して前記補正音情報データを生成する
ことを特徴とする撮像システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、音情報を画像に対応させて記録する撮像装置に関し、特に機械的なノイズを除去する機能を有する撮像装置及び撮像システムに関する。
【背景技術】
【０００２】
本体にマイクが取り付けられているビデオカメラ、デジタルカメラなどの撮像装置の小型化が進んでいる。
このため、上記マイクが撮像装置の筐体におけるレンズ近傍に配置される場合が多く、撮像する際における周囲の音情報以外に、撮像装置の機械的なノイズ、例えば、レンズを移動させるズーミング操作、合焦動作などの焦点距離変更時のモータ音やシャッター動作などの各機能スイッチの操作音が、直接にあるいは筐体を伝搬して、マイクに拾われ、音情報のＳ／Ｎ比を悪化させて、音情報の録音品質を低下させている。
【０００３】
このＳ／Ｎ比を改善させるため、マイクの位置を撮像装置の筐体からできるだけ離すことを考慮し、撮像装置一体型の閃光装置にマイクを取り付ける提案がなされている（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００３−１０１８３４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、撮像装置一体型の閃光装置にマイクを取り付ける場合、すでに述べたように撮像装置の小型化が進んでおり、撮像装置内部の機械的な振動音源とマイクとの距離には制約があり、マイクが拾うノイズ音を人間が気にしない程度までに、大幅に低下させることができない。
【０００６】
本発明は、このような事情に鑑みてなされたもので、撮像装置に設けられているマイクに入力される音情報から、撮像装置の機械的なノイズ音を除去することで、ノイズ音を含まない音情報を得ることができる撮像装置及び撮像システムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
本発明の撮像装置は、被写体像を撮像して画像信号を出力する撮像部と、自身に取り付けられているマイクと、自身に取り付けられていない閃光装置の外部マイクからの外部音情報が入力される外部音情報入力部と、前記マイクの取得する音情報を、前記外部音情報により補正処理し、補正音情報データとする音情報処理部と、前記補正音情報データを、前記画像信号に対応させて記憶部に記録する音情報記録部とを有し、前記音情報処理部が、前記音情報と前記外部音情報とを比較し、当該音情報においてのみ測定されている音情報信号を、差分データとして検出し、当該差分データを前記音情報から除去して前記補正音情報データを生成することを特徴とする。
【０００９】
本発明の撮像装置は、前記音情報処理部が、前記被写体と前記マイクとの間の第１の距離と、前記被写体及び前記外部マイク間の第２の距離との距離差により、前記音情報と前記外部音情報との音圧比及び位相差を求め、当該音圧比及び位相差により前記外部音情報の音圧及び位相を前記音情報に対応させ、前記音情報の補正処理を行うことを特徴とする。
【００１０】
本発明の撮像装置は、前記音情報処理部が、前記被写体の仮想位置から前記マイクまでの仮想距離が入力されると、前記第１の距離における前記音情報を、当該仮想距離における音圧及び位相となる仮想音情報に変換し、前記仮想位置から前記外部マイクまでの距離を前記第２の距離とし、前記仮想音情報の補正処置を行うことを特徴とする。
【００１１】
本発明の撮像装置は、前記音情報処理部が、前記差分データのレベルが設定値以上である場合、前記設定値以上の差分データが存在する期間の前記音情報を、前記音圧比及び位相差により当該音情報に対応させた前記外部音情報と置き換えることを特徴とする。
【００１２】
本発明の撮像装置は、前記マイク及び前記外部マイクが複数設けられている場合、前記被写体及び複数の前記マイク各々の間の第１の距離と、前記被写体及び複数の前記外部マイク各々の間の第２の距離との距離差を求め、それぞれの距離差に対応した音圧比及び位相差により、当該マイク各々の音情報の補正処理を行うことを特徴とする。
【００１３】
本発明の撮像装置は、前記マイク及び前記閃光装置が複数設けられている場合、前記被写体及び複数の前記マイク各々の間の第１の距離と、前記被写体及び複数の前記閃光装置の外部マイク各々の間の距離である第２の距離と、複数の前記閃光装置の外部マイクからの前記外部音情報とを用いて、当該マイク各々の音情報の補正処理を行うことを特徴とする。
【００１４】
本発明の撮像装置は、前記第１の距離及び前記第２の距離を測定する測距手段をさらに有することを特徴とする。
【００１５】
本発明の撮像システムは、撮像装置と、当該撮像装置と異なる場所に配置され、当該撮像装置の撮像時に前記被写体に対して光を照射する閃光装置とからなる撮像システムであり、前記閃光装置が前記撮像装置からの撮像タイミングを示す撮像信号により、被写体に対して光を照射する照射部と、外部マイクと当該外部マイクが取得した外部音情報を前記撮像装置に送信する外部音情報出力部とを有し、前記撮像装置が、前記被写体の被写体像を撮像して画像信号を出力する撮像部と、撮像装置に搭載されたマイクと、前記外部マイクの取得した外部音情報を、当該閃光装置から入力する外部音情報入力部と、前記マイクの取得する音情報を、前記外部音情報により補正処理し、補正音情報データとする音情報処理部と、前記補正音情報データを、前記画像信号に対応させて記憶部に記録する音情報記録部とを有し、前記音情報処理部が、前記音情報と前記外部音情報とを比較し、当該音情報においてのみ測定されている音情報信号を、差分データとして検出し、当該差分データを前記音情報から除去して前記補正音情報データを生成することを特徴とする。
【発明の効果】
【００１６】
以上説明したように、本発明によれば、撮像装置に設けられているマイクに入力される音情報と、撮像装置と直接に接触していない閃光装置から入力される外部音情報とを比較し、音情報に存在して外部音情報に存在しない音を、撮像装置の機械的な動作によるノイズ音として検出し、このノイズ音を上記音情報から除去することにより、従来に比較して、音の品質が向上した音情報を提供することが可能となる。
【図面の簡単な説明】
【００１７】
【図１】本発明の第１の実施形態による撮像システムの構成例を示す図である。
【図２】図１における撮像装置１の構成例を示すブロック図である。
【図３】図１における閃光装置２の構成例を示すブロック図である。
【図４】第１の実施形態による撮像システムにおける撮像装置の動作例を説明するフローチャートである。
【図５】本発明の第２の実施形態による撮像システムの構成例を示す図である。
【図６】本発明の第３の実施形態による撮像システムの構成例を示す図である。
【図７】本発明の第４の実施形態による撮像システムの構成例を示す図である。
【図８】図７における閃光装置２の構成例を示すブロック図である。
【図９】本発明の第５の実施形態による撮像システムの構成例を示す図である。
【発明を実施するための形態】
【００１８】
＜第１の実施形態＞
以下、本発明の一実施形態による撮像装置及び閃光装置を有する撮像システムを図面を参照して説明する。図１は同実施形態による撮像システムの構成例を示すブロック図である。
この図において、本実施形態の撮像装置１は、被写体を撮像するものであり、撮像装置本体１０に対し、被写体周辺の撮影環境における音が音情報として入力されるマイクＭＩＣ１が搭載されている。
閃光装置２は、上記撮像装置１から入力される画像の撮像タイミングを示す指示信号により、閃光（フラッシュ光）を出射するものであり、上記撮影環境における音が外部音情報として入力されるマイクＭＩＣ２が搭載されている。
【００１９】
次に、図１における上記撮像装置１の構成を図面を参照して説明する。図２は、図１における撮像装置１の構成例を示すブロック図である。
図２において、撮像装置１は、マイクＭＩＣ１、撮像部１１、外部音情報入力部１２、距離計測部１３、角度計測部１４、距離算出部１５、音情報処理部１６、送信部１７、制御部１８、記憶部１９を有している。
【００２０】
撮像部１１は、ズームレンズ及びフォーカスレンズを有する撮影レンズと、ＣＣＤ（Charge Coupled Device）などにより構成される撮像素子とを有している。また、撮像部１１は、ズーム機構制御部を有し、上記ズームレンズを光軸方向に進退駆動し、撮影レンズのズームの制御を行う。ここで、撮影レンズ、ズーム機構制御部及びフォーカス機構制御部が撮影光学系を構成する。また、撮像部１１は、オートフォーカスを行うフォーカス機構制御部を有し、上記フォーカスレンズを光軸に進退駆動して、撮像素子の撮像面に対して結像される撮影被写体の像のピント調整を行う。上記撮像素子は、撮影レンズを介してその撮像面上に結像される被写体の像を撮像して画像データとして、記憶部１９に時刻情報に対応して書き込み、記憶させる。
【００２１】
外部音情報入力部１２は、マイクＭＩＣ２から送信されるＦＭ変調された音情報などの信号が受信されると、その信号をＦＭ復調して音情報処理部１６へ出力する。
【００２２】
距離計測部１３は、撮像装置１と被写体１００との距離Ｌ１１、撮像装置１と閃光装置２との距離Ｌ２１を測定する。ここで、距離計測部１３は、例えば、被写体１００（あるいは閃光装置２）に対して例えば赤外線を照射するとともにその反射光を受光して、被写体までの距離を測定する構成としても良い。すなわち、距離計測部１３は、被写体１００に対して赤外線等の光を照射受光し、その時間差に基づいて被写体までの距離を計算する。
また、距離計測部１３は、 撮像部１１における被写体１００の撮像画像のコントラストに基づき、撮像装置１から被写体１００までの距離である被写体距離を、所定の演算を行うことによって特定する。
【００２３】
すなわち、距離計測部１３は、撮像部１１において焦点を合わせるための撮影レンズを移動させた合焦位置を検知し、撮像部１から被写体１００までの距離情報を得るための距離情報テーブルを有し、合焦位置に対応した距離を上記被写体距離として出力する。この距離情報テーブルは、合焦位置と、被写体１００と撮像部１１との間の距離である被写体距離とが対応して記憶されており、例えば至近位置から無限位置までの被写体距離を数ビット程度のコードパターンとして有し、検知された合焦位置に対応する被写体距離を求めることができるようになっている。この距離計測部１３において計測される被写体距離として、撮像装置１と被写体１００との距離は第１距離Ｌ１１であり、撮像装置１と閃光装置２との距離は第２距離Ｌ２１である。
【００２４】
角度計測部１４は、方位角センサ等により構成されており、例えば、ジャイロにより撮像部１１の方位角（北を基準として、時計廻りに角度を測り、度・分・秒の単位）を測定するものである。すなわち、角度計測部１４は、ユーザの角度測定を指示する入力により、撮像装置１から被写体１００への方位角α（不図示）を測定し、次に撮像装置１から閃光装置２への方位角β（不図示）を測定し、測定された方位角αと方位角βの角度差を算出し、これら方位角の角度差を角度θ１として出力する。ここで、角度測定部１４は、撮像部１１のレンズを向けた方向の方位角を測定するように、撮像装置１に搭載されている。
【００２５】
距離算出部１５は、第１距離Ｌ１１、第２距離Ｌ２１及び角度θ１を用い、閃光装置２と被写体１００との第３距離Ｌ３１を、以下のように算出する。
まず、距離算出部１５は、撮像装置１及び被写体１００を結ぶ線ＬＮ１１と、この線ＬＮ１１に垂直であり、かつマイクＭＩＣ２を通過する線ＬＮ２２との交点Ａから、撮像装置１までの距離Ｌ１２を、第２距離Ｌ２１及び角度θ１を用い、以下の式により算出する。
Ｌ１２＝Ｌ２１×cos（θ１）
そして、距離算出部１５は、下記式のように、第１距離Ｌ１１から距離Ｌ１２を減算することにより、交点Ａから被写体１００までの距離Ｌ１３を算出する。
Ｌ１３＝Ｌ１１−Ｌ１２
距離算出部１５は、下記式のように、第２距離Ｌ２１及び角度θ１を用い、下記式により、交点ＡからマイクＭＩＣ２（閃光装置２）までの距離Ｌ２２を算出する。
Ｌ２２＝Ｌ２１×sin（θ１）
距離Ｌ１３及び距離Ｌ２２を算出すると、距離算出部１５は、下記の式により、閃光装置２から被写体１００までの第３距離Ｌ３１を算出する。
Ｌ３１＝（Ｌ１３２＋Ｌ２２２）１／２
【００２６】
音情報処理部１６は、第１距離Ｌ１１から第３距離Ｌ３１を減算し、第１距離Ｌ１１と第３距離Ｌ３１との距離差ＳＢを算出し、距離差ＳＢによる位相差である伝搬遅延時間Ｔｄを求める。この伝搬遅延時間Ｔｄは、第１距離Ｌ１１を音が伝搬する時間と第３距離Ｌ３１を音が伝搬する時間差を示している。音情報処理部１６は、以下の式により、距離差ＳＢを音速ｃにより除算することで伝搬遅延時間Ｔｄを算出する。
Ｔｄ＝ＳＢ／ｃ
＝ＳＢ／（３３１．５＋０．６×ｔｍ）  ここで、ｔｍは周囲温度（摂氏）
【００２７】
また、音情報処理部１６は、マイクＭＩＣ１から入力される音情報（マイクＭＩＣ１に入力される音圧の振幅強度を示す電気信号）と、外部音情報入力部１２から入力される外部音情報（マイクＭＩＣ２に入力される音圧の振幅強度を示す電気信号）とを比較するため、外部音情報を上記伝搬遅延時間Ｔｄ分遅らせて、比較する音情報に対して位相（時刻のタイミング）を合わせる。すなわち、音情報処理部１６は、外部音情報と音情報との比較に際し、音情報と外部音情報との位相差を０とし、マイクＭＩＣ１及びＭＩＣ２の各々が被写体１００から同一の距離にて音を取得した状態とする。ここで、音情報処理部１６は、マイクＭＩＣ１から入力される音情報を予め設定された増幅度により増幅する増幅回路を有している。上記外部情報音は、閃光装置２において、後述するように、マイクＭＩＣ２から入力されてから増幅回路により増幅されてから撮像装置１へ送信される。
また、音情報処理部１６は、音情報と外部音情報との音圧を合わせるため、音の強さが距離の２乗で減衰するため、外部音情報と音情報との音圧比に対応させて、外部音情報の音の強さを音情報に合わせるため、以下に示す式により算出した増幅度γにより外部音情報の信号レベルを減衰させる。
γ＝（Ｌ３１／Ｌ１１）２
【００２８】
また、音情報処理部１６は、距離差ＳＢに対応して、外部音情報に対して音圧（信号レベル）及び位相（時間のタイミング）の補正を行った後、音情報と外部音情報との音圧の比較を行う。
すなわち、音情報処理部１６は、音情報と外部音情報との音圧の差分である差分データを求め、この差分データを時刻に合わせて音情報から削除することにより、ノイズ音が除去された音情報を求める。
すなわち、音情報処理部１６は、閃光装置２のマイクＭＩＣ２にて入力されず、一方、撮像装置１におけるマイクＭＩＣ１においてのみ入力される音をノイズ音として、音情報から除去して、ノイズ音の存在しない音情報を生成し、時刻情報に対応して記憶部１９に書き込んで記憶させる。
また、音情報処理部１６は、差分データのレベルが予め設定された閾値を超えた場合、補正不能として、この閾値を超える差分データの存在する期間（時刻範囲）の音情報を、音圧及び位相を補正した外部音情報と置換するように構成しても良い。
【００２９】
制御部１８は、図示しない電源スイッチ、ズームスイッチ、設定スイッチ、半押しスイッチ、レリーズスイッチ（全押しスイッチ）からの指示信号が入力された際、それぞれの指示信号に対応し、撮像装置１の各部の制御を行う。制御部１８は、撮像する際に、利用者が撮像を指示するレリーズスイッチが押されたことを検出すると、撮像部１１に撮像処理を制御する制御信号を出力するとともに、送信部１７に対して閃光装置２を制御する制御信号を出力する。
送信部１７は、制御部１８から上記制御信号が入力されると、フラッシュを被写体１００に照射する撮像タイミングを示す指示信号を閃光装置２に対して送信する。
また、制御部１９は、音情報及び外部音情報とを同一のサンプリング周期にてサンプリングし、Ａ／Ｄ（アナログ／デジタル）変換し、各周期の時刻毎に時系列に音情報処理部１６へ、Ａ／Ｄ変換した音情報及び外部音情報を出力する。
また、制御部１８は、撮像部１１が出力する画像データを、液晶表示パネルから形成された表示部に表示する。
記憶部１９には、補正された音信号と、撮像部１１の撮像した画像データとが時刻情報に対応して記憶されている。
【００３０】
次に、図１における上記閃光装置２の構成を図面を参照して説明する。図３は、図１における閃光装置２の構成例を示すブロック図である。
図３において、閃光装置２は、マイクＭＩＣ２、閃光出射部２１、制御部２２、外部音出力部２３、受信部２４、記憶部２５を有している。
制御部２２は、撮像装置１から送信された指示信号を受信部２４を介して入力すると、閃光出射部２１に対し、閃光（フラッシュ）を出射する制御情報を出力する。
【００３１】
閃光出射部２１は、制御部２２から上記閃光を出射する制御情報が入力されると、出射方向の対して閃光を出射する。
外部音出力部２３は、マイクＭＩＣ２から入力される外部音情報をレベル調整する増幅回路を有し、レベル調整した外部音情報をＦＭ変調するＦＭ変調回路を有し、図示しないアンテナから変調された外部音情報を、撮像装置１に対して送信する。ここで、マイクＭＩＣ２から入力される外部音情報には、撮像装置１内部におけるノイズ音は当然のことながら含まれていない。また、上記外部音出力部２３における増幅回路の外部音情報に対する増幅度と、撮像装置１における音情報処理部１６における増幅回路の音情報に対する増幅度とは、マイクＭＩＣ１及びＭＩＣ２とが同じ距離にて同一の音を入力した場合、増幅結果が同一の音圧のレベルになるように調整されている。
また、制御部２２は、記憶部２３に記憶されている情報により、閃光装置２における各部の動作を制御する。
【００３２】
次に、図１、図２及び図４を用いて、本実施形態による撮像装置１におけるノイズ音除去の処理を説明する、図４は、本実施形態による撮像装置１におけるノイズ音除去の処理の動作例を説明するフローチャートである。
制御部１８は、第１距離Ｌ１１を取得する操作がユーザにより行われると、距離計測部１３に対して第１距離Ｌ１１を取得する制御信号を出力する。このとき、ユーザは被写体１００に対して撮像部１１を向けた状態である。
上記制御信号が入力されると、距離計測部１３は、被写体１００と撮像装置１との距離である第１距離Ｌ１１を測定し（ステップＳ１）、距離算出部１５へ測定結果の第１距離Ｌ１１を出力する。
【００３３】
次に、ユーザは撮像装置１の撮像部１１を閃光装置２に対して向ける。
そして、制御部１８は、第２距離Ｌ２１を取得する操作がユーザにより行われると、距離計測部１３に対して第２距離Ｌ２１を取得する制御信号を出力する。
上記制御信号が入力されると、距離計測部１３は、閃光装置２と撮像装置１との距離である第２距離Ｌ２１を測定し（ステップＳ２）、距離算出部１５へ測定結果の第２距離Ｌ２１を出力する。
【００３４】
ユーザが撮像装置１の撮像部１１を被写体１００に対して向け、方位角の測定を行う操作を行うことにより、角度計測部１４は、撮像装置１から被写体１００を結ぶ線ＬＮ１１の方向の方位角α（不図示）を計測する。
また、ユーザが撮像装置１の撮像部１１を閃光装置２に対して向け、方位角の測定を行う操作を行うことにより、角度計測部１４は、撮像装置１から閃光装置２を結ぶ線ＬＮ２１の方向の方位角β（不図示）を計測する。
そして、角度計測部１４は、方位角αと方位角βとの差を求め、線ＬＮ１１と線ＬＮ２１とがなす角度θ１として出力する（ステップＳ３）。
【００３５】
次に、距離算出部１５は、閃光装置２と被写体１００との第１距離Ｌ３１を算出する（ステップＳ４）。
第１距離Ｌ３１を算出すると、距離算出部１５は、第１距離Ｌ１１と第３距離Ｌ３１との距離差ＢＳを求め、この距離差ＢＳを音が伝搬する伝搬遅延時間Ｔｄを算出する（ステップＳ５）。また、音情報処理部１６は、上記距離差ＢＳにより、マイクＭＩＣ２から入力される音情報の音圧を、マイクＭＩＣ１から入力される音情報の音圧に合わせる増幅度γを算出する。
【００３６】
制御部１８は、録音を開始する録音スイッチがオン状態にあるか否かの判定を行い（ステップＳ６）、録音スイッチがオン状態である場合、録音を開始するために処理をステップＳ７へ進め、一方、録音スイッチがオフ状態である場合、ステップＳ６の処理を所定の時間繰り返す。
【００３７】
スイッチがオン状態である場合、制御部１８は音情報処理部１６に対して録音処理の開始を指示する制御信号を出力する。
これにより、音情報処理部１６は、上記増幅度γと伝搬遅延時間Ｔｄを用いて、外部音情報の音圧及び位相を、Ａ／Ｄ変換した周期毎に音情報の音圧及び位相に合わせる補正処理を行う（ステップＳ７）。
音情報処理部１６は、音情報と外部音情報との音圧及び位相を合わせた後、Ａ／Ｄ変換したサンプリング周期毎に、音情報と外部音情報とを同一位相にて比較し、音情報と外部音情報との音圧（信号の振幅レベル）の差分として差分データを求める（ステップＳ８）。
【００３８】
次に、音情報処理部１６は、上記周期毎に音情報から差分データを減算し、差分データ（すなわちノイズ音の情報）を除去する補正処理を行う（ステップＳ９）。
そして、音情報処理部１６は、補正処理を行った音情報を、画像データの時刻と対応させて記憶部１９へ書き込んで記憶させる（ステップＳ１０）。
制御部１８は、予め設定された検出周期毎に録音スイッチがオン（録音処理を行う状態）またはオフ（録音処理を行わない状態）かの検出を行い（ステップＳ１１）、オフ状態の場合に処理をステップＳ６へ進め、オン状態の場合に処理をステップＳ７へ進め、ステップＳ７からステップＳ１１の処理を繰り返して行う。
【００３９】
上述した処理により、本実施形態によれば、撮像装置１に設けられているマイクＭＩＣ１に入力される音情報における、撮像装置１内部の機械的な動作によるノイズ音を、音情報と外部音情報との差分データとして検出し、この差分データを音情報から減算する補正を行い、ノイズ音が除去された音情報を生成するため、その時点にてノイズ音が除去された音情報を、画像データとともに記憶部１９に記憶させることが可能となり、従来に比較して、音の品質が向上した音情報を、画像データとともに提供することができる。
また、距離Ｌ１１、距離Ｌ２１及び角度θ１が予め他の測定機器により測定され、利用者が撮像装置１に入力して、入力された距離Ｌ１１、距離Ｌ２１及び角度θ１を、制御部１８が距離算出部１５及び音情報処理部１６へ出力するように構成しても良い。
【００４０】
＜第２の実施形態＞
以下、本発明の一実施形態による撮像装置及び閃光装置を有する撮像システムを図面を参照して説明する。図５は同実施形態による撮像システムの構成例を示すブロック図である。第１の実施形態と同様な構成については同一の符号を付し、その説明を省略する。以下、第１の実施形態と異なる点について説明する。
撮像装置１から被写体１００までの距離が離れている場合、音速の関係により画像データの動きと音情報とが対応しないことがある。すなわち、被写体１００の発生する音情報が、撮像装置１から被写体１００までの距離が離れていると、距離を音速により除算した結果の伝搬遅延が生じる。
このため、第２の実施形態によるおいては、図５に示すように、撮像装置１から被写体１００までの距離を、距離Ｌｘに短くして、撮像装置１からＬ１１−Ｌｘの距離に仮想被写体１０１を仮想的に設け、この仮想被写体１０１から音情報が発生されたとして、音情報処理部１６が音情報を外部音情報により補正する。
【００４１】
利用者が距離Ｌｘを入力すると、制御部１８は、入力された距離Ｌｘを音情報処理部１６へ出力する。
そして、音情報処理部１６は、第１の実施形態と同様に、増幅度γと伝搬遅延時間Ｔｄを用いて、外部音情報の音圧及び位相を、音情報の音圧及び位相に合わせる補正処理を行い、音情報と外部音情報とを比較して得られる差分データにより音情報の補正処理を行う。
次に、音情報処理部１６は、距離Ｌｘを音速により除算し、補正時間Ｔｃを算出し、記憶部１９に対して画像データの時刻と対応して記憶する際、画像データに対する補正された音情報の時刻を上記補正時間Ｔｃ早めて記憶部１９に記憶させる。
【００４２】
これにより、第２の実施形態によれば、実際の被写体１００の位置に対して、撮像装置１から距離Ｌｘだけ近い仮想被写体１０１からの音情報を、画像データに対応して得ることができるため、すなわち音情報を任意な位置で発生されたように、画像データとの位相をずらす変換を行うことができるため、第１の実施形態と同様に音の品質を向上させることができるとともに、画像データによる動画とタイミングに違和感の少ない音情報を生成することができる。
【００４３】
＜第３の実施形態＞
以下、本発明の一実施形態による撮像装置及び閃光装置を有する撮像システムを図面を参照して説明する。図６は同実施形態による撮像システムの構成例を示すブロック図である。第１の実施形態と同様な構成については同一の符号を付し、その説明を省略する。以下、第１の実施形態と異なる点について説明する。閃光装置４は、図１の閃光装置２と同様な構成となっている。
第１の実施形態において、撮像システムは、閃光装置が閃光装置２の１台のみであったが、一方、第３の実施形態において、マイクを搭載した閃光装置を２台、すなわちマイクＭＩＣ２を搭載した閃光装置２と、マイクＭＩＣ４を搭載した閃光装置４とを有している。また、撮像装置１にもマイクＭＩＣ１１及びＭＩＣ１２の２つのマイク（ステレオ録音のため）が搭載されている。ここで、マイクＭＩＣ１１の音情報の補正をマイクＭＩＣ２が行い、マイクＭＩＣ１２の音情報の補正をマイクＭＩＣ４が行う構成となっている。
つまり、撮像装置１に複数のマイクＭＩＣ１１、ＭＩＣ１２が設けられており、各マイクＭＩＣ１１、ＭＩＣ１２に対応する閃光装置２、４が用いられている。
【００４４】
距離計測部１３は、第１の実施形態と同様に、撮像装置１の点Ｃと被写体１００との第１距離ＬＮ１１と、撮像装置１の点Ｃと閃光装置２との第２距離Ｌ２１と、撮像装置１の点Ｃと閃光装置４１との第４距離とを測定する。
また、角度計測部１４は、第１の実施形態と同様に、撮像装置１の点Ｃから被写体１００への方向の方位角α（不図示）と、撮像装置１の点Ｃから閃光装置２への方向の方位角β１（不図示）と、撮像装置１から閃光装置４への方向の方位角β２（不図示）とを測定する。ここで、撮像装置１の点Ｃとは、線ＬＮ１１と線ＬＮ２１との２次元平面において、マイクＭＩＣ１２とマイクＭＩＣ１１とのマイク面（振動板の面）の中心を通る線上における、マイクＭＩＣ１２のマイク面の中心と、マイクＭＩＣ１１のマイク面の中心との間の（挟まれた）線分の中点である。例えば、点Ｃは撮像部１１の光学系の光軸上の交点である。
そして、角度計測部１４は、方位角αと方位角β１との角度差である角度θ１と、方位角αと方位角β２との角度差である角度θ２とを求める。
【００４５】
距離算出部１５は、第１距離Ｌ１１、第２距離Ｌ２１及び角度θ１を用い、閃光装置２と被写体１００との第３距離Ｌ３１を、第１の実施形態と同様に算出する。
また、距離算出部１５は、第１距離Ｌ１１、第４距離Ｌ４１及び角度θ２を用い、閃光装置４と被写体１００との第５距離Ｌ５１を、以下のように算出する。
まず、距離算出部１５は、撮像装置１及び被写体１００を結ぶ線ＬＮ１１と、この線ＬＮ１１に垂直であり、かつマイクＭＩＣ４を通過する線ＬＮ４４との交点Ｂから、撮像装置１までの距離Ｌ１４を、第４距離Ｌ４１及び角度θ２を用い、以下の式により算出する。
Ｌ１４＝Ｌ４１×cos（θ２）
【００４６】
そして、距離算出部１５は、下記式のように、第１距離Ｌ１１から距離Ｌ１４を減算することにより、交点Ｂから被写体１００までの距離Ｌ４３を算出する。
Ｌ４３＝Ｌ１１−Ｌ１４
距離算出部１５は、下記式のように、第４距離Ｌ４１及び角度θ２を用い、下記式により、交点ＢからマイクＭＩＣ４（閃光装置４）までの距離Ｌ４４を算出する。
Ｌ４４＝Ｌ４１×sin（θ２）
距離Ｌ４３及び距離Ｌ４４を算出すると、距離算出部１５は、下記の式により、閃光装置４から被写体１００までの第５距離Ｌ５１を算出する。
Ｌ５１＝（Ｌ４３２＋Ｌ４４２）１／２
【００４７】
また、距離算出部１５は、マイクＭＩＣ１１と被写体１００との距離Ｌ１１１を以下の式により求める。以下の式において、距離Ｌ１０ＲはマイクＭＩＣ１１のマイク面の中心と点Ｃとの距離であり、予め距離算出部１５に設定されている。
Ｌ１１１＝（Ｌ１０Ｒ２＋Ｌ１１２）１／２
同様に、距離算出部１５は、マイクＭＩＣ１２と被写体１００との距離Ｌ１１２を以下の式により求める。以下の式において、距離Ｌ１０ＬはマイクＭＩＣ１２のマイク面の中心と点Ｃとの距離であり、予め距離算出部１５に設定されている。
Ｌ１１２＝（Ｌ１０Ｌ２＋Ｌ１１２）１／２
【００４８】
音情報処理部１６は、距離Ｌ１１１から距離Ｌ３１を減算して、距離Ｌ１１１と距離Ｌ３１との距離差ＳＢ１を求め、また距離Ｌ１１２から距離Ｌ５１を減算して、距離Ｌ１１２と距離Ｌ５１との距離差ＳＢ２を求める。
また、音情報処理部１６は、上記距離差ＳＢ１を音速により除算し、マイクＭＩＣ１１の音情報と閃光装置２からの外部音情報との伝搬遅延時間Ｔｄ１を求め、同様に、上記距離差ＳＢ２を音速により除算し、マイクＭＩＣ１２の音情報と閃光装置４からの外部音情報との伝搬遅延時間Ｔｄ２を求める。
【００４９】
また、音情報処理部１６は、マイクＭＩＣ１１の音情報の音圧に、マイクＭＩＣ２の外部音情報の音圧を合わせる増幅率γ１を以下の式により求める。
γ１＝（Ｌ３１／Ｌ１１１）２
同様に、音情報処理部１６は、マイクＭＩＣ１２の音情報の音圧に、マイクＭＩＣ４の外部音情報の音圧を合わせる増幅率γ２を以下の式により求める。
γ２＝（Ｌ５１／Ｌ１１２）２
音情報処理部１６は、上記増幅率γ１により、マイクＭＩＣ２の音情報の音圧をマイクＭＩＣ１１に合わせるとともに、伝搬遅延時間Ｔｄ１によりマイクＭＩＣ２の音情報を遅延させ、マイクＭＩＣ１１の音情報の位相に合わせる補正を行う。
同様に、音情報処理部１６は、上記増幅率γ２により、マイクＭＩＣ４の音情報の音圧をマイクＭＩＣ１２に合わせるとともに、伝搬遅延時間Ｔｄ２によりマイクＭＩＣ４の音情報を遅延させ、マイクＭＩＣ１２の音情報の位相に合わせる補正を行う。
【００５０】
音情報と外部音情報との音圧及び位相を合わせた後、音情報処理部１６は、マイクＭＩＣ１１の音情報とマイクＭＩＣ２の外部音情報とを同一位相にて比較し、マイクＭＩＣ１１の音情報とマイクＭＩＣ２の外部音情報との音圧（信号の振幅レベル）の差分として差分データＤ１を求める。
そして、音情報処理部１６は、マイクＭＩＣ１１の音情報から上記差分データＤ１を減算し、ノイズ音を除去する補正を行い、補正されたマイクＭＩＣ１１の音情報を求め、画像データの時刻情報に対応して記憶部１９へ書き込み、記憶させる。
【００５１】
同様に、音情報処理部１６は、マイクＭＩＣ１２の音情報とマイクＭＩＣ４の外部音情報とを同一位相にて比較し、マイクＭＩＣ１２の音情報とマイクＭＩＣ４の外部音情報との音圧の差分として差分データＤ２を求める。
そして、音情報処理部１６は、マイクＭＩＣ１２の音情報から上記差分データＤ２を減算し、ノイズ音を除去する補正を行い、補正されたマイクＭＩＣ１２の音情報を求め、画像データの時刻情報に対応して記憶部１９へ書き込み、記憶させる。
また、音情報処理部１６は、マイクＭＩＣ１１及びマイクＭＩＣ１２の音情報を記憶部１９に記憶させる際、右の音情報または左の音情報を識別できるように、記憶部１９において右音情報、左音情報として記憶領域を設定する。
【００５２】
また、距離Ｌ１１、距離Ｌ２１、距離Ｌ４１、角度θ１及び角度θ２が予め他の測定機器により測定され、利用者が撮像装置１に入力して、入力された距離Ｌ１１、距離Ｌ２１、距離Ｌ４１、角度θ１及び角度θ２を、制御部１８が距離算出部１５及び音情報処理部１６へ出力するように構成しても良い。
【００５３】
＜第４の実施形態＞
以下、本発明の一実施形態による撮像装置及び閃光装置を有する撮像システムを図面を参照して説明する。図７は同実施形態による撮像システムの構成例を示すブロック図である。第１の実施形態と同様な構成については同一の符号を付し、その説明を省略する。以下、第１の実施形態と異なる点について説明する。図７における点Ｃは、第３の実施形態の図６で説明した点Ｃと同様である。
本実施形態においては、撮像装置１に複数のマイク、例えばマイクＭＩＣ１１、ＭＩＣ１２の２つが設けられており、閃光装置２に各マイクＭＩＣ１１、ＭＩＣ１２に対応するマイクＭＩＣ２Ｌ、ＭＩＣ２Ｒが設けられている。
【００５４】
撮像装置１には、撮像部１１のレンズの光軸から距離Ｌ１０Ｒ離れた位置にマイクＭＩＣ１１が設けられ、距離Ｌ１０Ｌ離れた位置にマイクＭＩＣ１２が設けられている。
また、閃光装置２には、距離Ｌ２０離れてマイクＭＩＣ２ＬとマイクＭＩＣ２Ｒとが設けられている。なお、マイクの直径は上記距離Ｌ２０に比較して小さいとする。この距離Ｌ２０は距離算出部１５に予め設定されている。また、マイクＭＩＣ２ＬまたはマイクＭＩＣ２Ｒのいずれかにおいて、撮像部１１にて撮像されるマイク近傍に距離測定用のマーク（例えば、発光ＬＥＤ）が付加されている。本実施形態においては、一例としてマイクＭＩＣ２Ｌにマークが付加されているとする。
ここで、マイクＭＩＣ２ＬはＭＩＣ１２の音情報からノイズ音を除去する補正に用いる外部音情報を取得し、マイクＭＩＣ２ＲはＭＩＣ１１の音情報からノイズ音を除去する補正に用いる外部音情報を取得する。
【００５５】
距離計測部１３は、第１の実施形態と同様に、撮像装置１と閃光装置２におけるマイクＭＩＣ２Ｌとの第２距離Ｌ２１とを測定する。
また、角度計測部１４は、第１の実施形態と同様に、撮像装置１から被写体１００への方向の方位角α（不図示）と、撮像装置１から閃光装置２への方向の方位角β（不図示）とを測定する。
そして、角度計測部１４は、方位角αと方位角βとの角度差である角度θ１とを求める。
また、閃光装置２には、図８に示すように、撮像装置１における角度計測部１４と同様に方位角センサからなる角度計測部２６と、マイクＭＩＣ２Ｌ、ＭＩＣ２Ｒとが設けられている。図８は第４の実施形態における閃光装置２の構成例を示す。
【００５６】
角度計測部２６が方位角δ（不図示）を測定し、外部音出力部２３が測定された方位角δをＦＭ変調して撮像装置１へ送信する。そして、外部音入力部１２は、入力される方位角δの情報をＦＭ復調して制御部１８へ出力する。制御部１８はＦＭ復調された方位角δを角度計測部１４へ出力する。角度計測部１４は、方位角δと方位角αとの角度差である角度θ３を算出し、算出された角度θ３を音情報処理部１６へ出力する。
ここで、方位角δは、線ＬＮ１１と線Ｌ２１との存在する２次元平面に平行であり、かつ、閃光装置２におけるマイクＭＩＣ２ＬとマイクＭＩＣ２Ｒとのマイク表面（振動板の面）の中心を通る線ＬＮ２２５に対して垂直方向（図７における閃光装置２を通る一点鎖線）の方位角である。
【００５７】
距離算出部１５は、第１距離Ｌ１１、第２距離Ｌ２１、角度θ１及び角度θ３を用い、閃光装置２におけるマイクＭＩＣ２Ｒと被写体１００との第６距離Ｌ３１１と、閃光装置２におけるマイクＭＩＣ２Ｌと被写体１００との第７の距離Ｌ３１２とを算出する。ここで、マイクＭＩＣ２Ｌのマイク表面の中心から線ＬＮ１１に対して垂直に引いた線ＬＮ１２８と、線ＬＮ１１との交点をＡ点とする。
すなわち、距離算出部１５は、Ａ点とＣ点との距離Ｌ１１８を以下の式により算出する。
Ｌ１１８＝Ｌ２１cos（θ１）
また、距離算出部１５は、Ａ点から被写体１００までの距離Ｌ１１９を以下の式により算出する。
Ｌ１１９＝Ｌ１１−Ｌ１１８
また、距離算出部１５は、マイクＭＩＣ２Ｌのマイク表面の中心から点Ａまでの距離Ｌ１２８を以下の式により算出する。
Ｌ１２８＝Ｌ２１sin（θ１）
【００５８】
また、距離算出部１５は、点Ａから点Ｄまでの距離Ｌ２１１を以下の式により算出する。ここで、点Ｄは、線ＬＮ２２５（マイクＭＩＣ２Ｌを基点とし線ＬＮ１２８と角度θ３をなす線）と線ＬＮ１１との交点である。
Ｌ２１１＝Ｌ１２８tan（θ３）
また、距離算出部１５は、点Ｄと点Ｃとの距離Ｌ２１３を以下の式により算出する。
Ｌ２１３＝Ｌ１１８−Ｌ２１１
また、距離算出部１５は、マイクＭＩＣ２Ｌのマイク表面の中心から点Ｄまでの距離Ｌ２２５を以下の式により算出する。
Ｌ２２５＝（Ｌ２１３２＋Ｌ２１２−２×Ｌ２１３×Ｌ２１×cos（θ１））１／２
【００５９】
また、距離算出部１５は、マイクＭＩＣ２Ｌのマイク表面の中心から被写体１００までの距離Ｌ３１２を以下の式により算出する。
Ｌ３１２＝（Ｌ２２５２＋（Ｌ１１９＋Ｌ２１１）２−２×Ｌ２２５×（Ｌ１１９＋Ｌ２１１）×cos（θ４））１／２
ここで、θ４は、線ＬＮ２２５と線ＬＮ１１とのなす角度である。
また、距離算出部１５は、マイクＭＩＣ２Ｒのマイク中心から被写体１００までの距離Ｌ３１１を以下の式により算出する。
Ｌ３１１＝（（Ｌ２２５＋Ｌ２０）２＋（Ｌ１１９＋Ｌ２１１）２−２×（Ｌ２２５＋Ｌ２０）×（Ｌ１１９＋Ｌ２１１）×cos（θ４））１／２
ここで、Ｌ２０は、マイクＭＩＣ２Ｌのマイク面の中心と、マイクＭＩＣ２Ｒのメイク面の中心との距離であり、予め距離算出部１５に設定されている。
また、距離算出部１５は、第３の実施形態と同様に、マイクＭＩＣ１１と被写体１００との距離Ｌ１１１、及びマイクＭＩＣ１２と被写体１００との距離Ｌ１１２を算出する。
【００６０】
上述した距離算出部１５の計算処理により、マイクＭＩＣ１２と被写体１００との距離Ｌ１１２、マイクＭＩＣ１１と被写体１００との距離Ｌ１１１、マイクＭＩＣ２Ｌと被写体１００との距離Ｌ３１２、マイクＭＩＣ２Ｒと被写体１００との距離Ｌ３１１が求められる。
音情報処理部１６は、距離Ｌ１１１から距離Ｌ３１１を減算して、距離Ｌ１１１と距離Ｌ３１１との距離差ＳＢ１を求め、また距離Ｌ１１２から距離Ｌ３１２を減算して、距離Ｌ１１２と距離Ｌ３１２との距離差ＳＢ２を求める。
また、音情報処理部１６は、上記距離差ＳＢ１を音速ｃにより除算し、マイクＭＩＣ１１の音情報とＭＩＣ２ＬはマイクＭＩＣ２Ｒの外部音情報とにおける伝搬遅延時間Ｔｄ１を求め、同様に、上記距離差ＳＢ２を音速ｃにより除算し、マイクＭＩＣ１２の音情報とマイクＭＩＣ２Ｌの外部音情報とにおける伝搬遅延時間Ｔｄ２を求める。
【００６１】
また、音情報処理部１６は、マイクＭＩＣ１１の音情報の音圧に、マイクＭＩＣ２Ｒの外部音情報の音圧を合わせる増幅率γ１を以下の式により求める。
γ１＝（Ｌ３１１／Ｌ１１１）２
同様に、音情報処理部１６は、マイクＭＩＣ１２の音情報の音圧に、マイクＭＩＣ２Ｌの外部音情報の音圧を合わせる増幅率γ２を以下の式により求める。
γ２＝（Ｌ３１２／Ｌ１１２）２
音情報処理部１６は、上記増幅率γ１により、マイクＭＩＣ２Ｒの音情報の音圧をマイクＭＩＣ１１に合わせるとともに、伝搬遅延時間Ｔｄ１によりマイクＭＩＣ２Ｒの音情報を遅延させ、マイクＭＩＣ１１の音情報の位相に合わせる補正を行う。
同様に、音情報処理部１６は、上記増幅率γ２により、マイクＭＩＣ２Ｌの音情報の音圧をマイクＭＩＣ１２に合わせるとともに、伝搬遅延時間Ｔｄ２によりマイクＭＩＣ２Ｌの音情報を遅延させ、マイクＭＩＣ１２の音情報の位相に合わせる補正を行う。
【００６２】
音情報と外部音情報との音圧及び位相を合わせた後、音情報処理部１６は、マイクＭＩＣ１１の音情報とマイクＭＩＣ２Ｒの外部音情報とを同一位相にて比較し、マイクＭＩＣ１１の音情報とマイクＭＩＣ２Ｒの外部音情報との音圧（信号の振幅レベル）の差分として差分データＤ１を求める。
そして、音情報処理部１６は、マイクＭＩＣ１１の音情報から上記差分データＤ１を減算する補正を行い、ノイズ音を除去する補正を行い、補正されたマイクＭＩＣ１１の音情報を求め、画像データの時刻情報に対応して記憶部１９へ書き込み、記憶させる。
【００６３】
同様に、音情報処理部１６は、マイクＭＩＣ１２の音情報とマイクＭＩＣ２Ｌの外部音情報とを同一位相にて比較し、マイクＭＩＣ１２の音情報とマイクＭＩＣ２Ｌの外部音情報との音圧の差分として差分データＤ２を求める。
そして、音情報処理部１６は、マイクＭＩＣ１２の音情報から上記差分データＤ２を減算する補正を行い、ノイズ音を除去する補正を行い、補正されたマイクＭＩＣ１２の音情報を求め、画像データの時刻情報に対応して記憶部１９へ書き込み、記憶させる。
また、音情報処理部１６は、マイクＭＩＣ１１及びマイクＭＩＣ１２の音情報を記憶部１９に記憶させる際、右の音情報または左の音情報を識別できるように、記憶部１９において右音情報、左音情報として記憶領域を設定する。
【００６４】
また、距離Ｌ１１、距離Ｌ２１、角度θ１及び角度θ３が予め他の測定機器により測定され、利用者が撮像装置１に入力して、入力された距離Ｌ１１、距離Ｌ２１、角度θ１及び角度θ３を、制御部１８が距離算出部１５及び音情報処理部１６へ出力するように構成しても良い。
【００６５】
＜第５の実施形態＞
以下、本発明の一実施形態による撮像装置及び閃光装置を有する撮像システムを図面を参照して説明する。図９は同実施形態による撮像システムの構成例を示すブロック図である。第４の実施形態と同様な構成については同一の符号を付し、その説明を省略する。以下、第４の実施形態と異なる点について説明する。第５の実施形態においては、第４の実施形態の構成に加え、新たに閃光装置４が設けられている。この閃光装置４は、図８の閃光装置２と同様な構成をしている。閃光装置４に設けられているマイクは、マイクＭＩＣ４ＬとマイクＭＩＣ４Ｒとである。
本実施形態においては、マイクＭＩＣ１２の音情報をマイクＭＩＣ４Ｌ及びマイクＭＩＣ４Ｒの外部音情報により補正し、マイクＭＩＣ１１の音情報をマイクＭＩＣ２Ｌ及びマイクＭＩＣ２Ｒの外部音情報により補正する。
【００６６】
第４の実施形態と同様に、撮像装置１は、閃光装置２から方位角δ（不図示）、閃光装置４から方位角σ（不図示）を入力する。ここで、方位角σは、線ＬＮ１１と線ＬＮ４１との存在する２次元平面に平行であり、閃光装置２におけるマイクＭＩＣ４ＬとマイクＭＩＣ４Ｒとのマイク表面（振動板の面）の中心を通る線ＬＮ４４５に対して垂直方向の方位角である。
角度計測部１４は、上記方位角σと方位角αとの角度差である角度θ６を算出する。
距離算出部１５は、角度θ１、角度θ３、距離Ｌ１１及び距離Ｌ２１とを用いて距離Ｌ３１１と距離３１２とを算出したのと同様に、角度θ２、角度θ６、距離Ｌ１１及び距離Ｌ４１とを用いて距離Ｌ５１１及び距離Ｌ５１２を算出する。ここで、距離Ｌ４１はマイクＭＩＣ４Ｒと点Ｃとの距離であり、距離Ｌ５１１は被写体１００とマイクＭＩＣ４Ｒとの距離であり、距離Ｌ５１２は被写体１００とマイクＭＩＣ４Ｌとの距離である。
【００６７】
距離算出部１５は、第４の実施形態と同様に、距離Ｌ１１１と距離Ｌ３１１との距離差ＳＢ１１、距離Ｌ１１１と距離Ｌ３１２との距離差ＳＢ１２、距離Ｌ１１２と距離Ｌ５１１との距離差ＳＢ４１、距離Ｌ１１２と距離Ｌ５１２との距離差ＳＢ４２を算出する。
音情報処理部１６は、距離差ＳＢ１１、ＳＢ１２、ＳＢ４１、ＳＢ４２の各々を、音速ｃにより除算し、マイクＭＩＣ１１の音情報とマイクＭＩＣ２Ｒの外部音情報との伝搬遅延時間Ｔｄ１１、マイクＭＩＣ１１の音情報とマイクＭＩＣ２Ｌの外部音情報との伝搬遅延時間Ｔｄ１２、マイクＭＩＣ１２の音情報とマイクＭＩＣ４Ｒの外部音情報との伝搬遅延時間Ｔｄ４１、マイクＭＩＣ１２の音情報とマイクＭＩＣ４Ｌの外部音情報との伝搬遅延時間Ｔｄ４２の各々を算出する。
また、音情報処理部１６は、マイクＭＩＣ１１の音情報の音圧に、マイクＭＩＣ２Ｒ、ＭＩＣ２Ｌの各々の音圧を合わせる増幅率γ１１及びγ１２を以下の式により求める。
γ１１＝（Ｌ３１１／Ｌ１１１）２
γ１２＝（Ｌ３１２／Ｌ１１１）２
同様に、音情報処理部１６は、マイクＭＩＣ１２の音情報の音圧に、マイクＭＩＣ４Ｒ、ＭＩＣ４Ｌの外部音情報の音圧を合わせる増幅率γ４１及びγ４２を以下の式により求める。
γ４１＝（Ｌ５１１／Ｌ１１１）２
γ４２＝（Ｌ５１２／Ｌ１１１）２
【００６８】
ここで、音情報処理部１６は、マイクＭＩＣ２Ｒの外部音情報の位相を、伝搬遅延時間Ｔｄ１１によりずらして、マイクＭＩＣ１１の音情報の位相に合わせ、同様に、マイクＭＩＣ２Ｌの外部音情報の位相を、伝搬遅延時間Ｔｄ１２によりずらして、マイクＭＩＣ１１の音情報の位相に合わせる。
また、音情報処理部１６は、マイクＭＩＣ２Ｒの外部音情報の音圧に対し、増幅率γ１１を乗じて、マイクＭＩＣ１１の音情報の音圧に合わせ、同様に、マイクＭＩＣ２Ｌの外部音情報の音圧に対し、増幅率γ１２を乗じて、マイクＭＩＣ１１の音情報の音圧に合わせる。
また、音情報処理部１６は、マイクＭＩＣ４Ｒの外部音情報の位相を、伝搬遅延時間Ｔｄ４１によりずらして、マイクＭＩＣ１２の音情報の位相に合わせ、同様に、マイクＭＩＣ４Ｌの外部音情報の位相を、伝搬遅延時間Ｔｄ４２によりずらして、マイクＭＩＣ１２の音情報の位相に合わせる。
また、音情報処理部１６は、マイクＭＩＣ４Ｒの外部音情報の音圧に対し、増幅率γ４１を乗じて、マイクＭＩＣ１２の音情報の音圧に合わせ、同様に、マイクＭＩＣ４Ｌの外部音情報の音圧に対し、増幅率γ４２を乗じて、マイクＭＩＣ１２の音情報の音圧に合わせる。
【００６９】
また、音情報処理部１６は、マイクＭＩＣ２Ｌの外部音情報及びマイクＭＩＣ２Ｒの外部音情報を合成するため、合成時において上記双方の外部音情報に乗算する係数μ１が設定されている。すなわち、音情報処理部１６は、マイクＭＩＣ２Ｌの音圧が補正された外部音情報に係数μ１を乗算し、一方マイクＭＩＣ２Ｌの音圧が補正された外部音情報に係数（１−μ１）を乗算し、乗算結果を加算して、マイクＭＩＣ１１の音情報と比較する第１外部音情報を生成する。
同様に、音情報処理部１６は、マイクＭＩＣ４Ｌの外部音情報及びマイクＭＩＣ４Ｒの外部音情報を合成するため、合成時において上記双方の外部音情報に乗算する係数μ２が設定されている。すなわち、音情報処理部１６は、マイクＭＩＣ４Ｌの音圧が補正された外部音情報に係数μ２を乗算し、一方マイクＭＩＣ４Ｒの音圧が補正された外部音情報に係数（１−μ２）を乗算し、乗算結果を加算して、マイクＭＩＣ１２の音情報と比較する第２外部音情報を生成する。
【００７０】
音情報処理部１６は、マイクＭＩＣ１１の音情報と第１外部音情報とを同一位相にて比較し、マイクＭＩＣ１１の音情報と第１外部音情報との音圧（信号の振幅レベル）の差分として差分データＤ１を求める。
そして、音情報処理部１６は、マイクＭＩＣ１１の音情報から上記差分データＤ１を減算する補正を行い、ノイズ音を除去する補正を行い、補正されたマイクＭＩＣ１１の音情報を求め、画像データの時刻情報に対応して記憶部１９へ書き込み、記憶させる。
同様に、音情報処理部１６は、マイクＭＩＣ１２の音情報と第２外部音情報とを同一位相にて比較し、マイクＭＩＣ１２の音情報と第２外部音情報との音圧の差分として差分データＤ２を求める。
そして、音情報処理部１６は、マイクＭＩＣ１２の音情報から上記差分データＤ２を減算する補正を行い、ノイズ音を除去する補正を行い、補正されたマイクＭＩＣ１２の音情報を求め、画像データの時刻情報に対応して記憶部１９へ書き込み、記憶させる。
また、音情報処理部１６は、マイクＭＩＣ１１及びマイクＭＩＣ１２の音情報を記憶部１９に記憶させる際、右の音情報または左の音情報を識別できるように、記憶部１９において右音情報、左音情報として記憶領域を設定する。
【００７１】
また、距離Ｌ１１、距離Ｌ２１、距離Ｌ４１、角度θ１、角度θ２、角度θ３及び角度θ６が予め他の測定機器により測定され、利用者が撮像装置１に入力して、入力された距離Ｌ１１、距離Ｌ２１、角度θ１及び角度θ３を、制御部１８が距離算出部１５及び音情報処理部１６へ出力するように構成しても良い。
【００７２】
なお、図２における距離算出部１５、音情報処理部１６の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより撮像装置１に設けられたマイクの音情報の補正処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、ホームページ提供環境（あるいは表示環境）を備えたＷＷＷシステムも含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（ＲＡＭ）のように、一定時間プログラムを保持しているものも含むものとする。
【００７３】
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。
【符号の説明】
【００７４】
１…撮像装置
２，４…閃光装置
１１…撮像部
１２…外部音情報入力部
１３…距離計測部
１４，２６…角度計測部
１５…距離算出部
１６…音情報処理部
１７…送信部
１８，２２…制御部
１９，２５…記憶部
２１…閃光出射部
２３…外部音出力部
２４…受信部
ＭＩＣ１１，ＭＩＣ１２，ＭＩＣ２Ｌ，ＭＩＣ２Ｒ，ＭＩＣ４Ｌ，ＭＩＣ４Ｒ…マイク
【図１】
0005446568.tif 000002
【図２】
0005446568.tif 000003
【図３】
0005446568.tif 000004
【図４】
0005446568.tif 000005
【図５】
0005446568.tif 000006
【図６】
0005446568.tif 000007
【図７】
0005446568.tif 000008
【図８】
0005446568.tif 000009
【図９】
0005446568.tif 000010