(57)【要約】【課題】合焦した被写体の位置に応じて集音範囲の広がりを制御すること。【解決手段】装置は、レンズの視野範囲内で合焦した合焦領域を特定する合焦領域特定部と、視野範囲および視野範囲内の合焦領域の位置に基づいて、集音部の集音範囲が視野範囲内の合焦領域を含むよう、集音範囲の広がりを制御する集音制御部とを備える。プログラムは、レンズの視野範囲内で合焦した合焦領域を特定する合焦領域特定ステップと、視野範囲および視野範囲内の合焦領域の位置に基づいて、集音部の集音範囲が視野範囲内の合焦領域を含むよう、集音範囲の広がりを制御する集音制御ステップとをコンピュータに実行させる。【選択図】図３
2013121000.tif 000002
【特許請求の範囲】
【請求項１】
レンズの視野範囲内で合焦した合焦領域を特定する合焦領域特定部と、
前記視野範囲および前記視野範囲内の前記合焦領域の位置に基づいて、集音部の集音範囲が前記視野範囲内の前記合焦領域を含むよう、前記集音範囲の広がりを制御する集音制御部と
を備える装置。
【請求項２】
前記集音制御部は、複数の合焦領域が検出された場合に、前記集音範囲が前記複数の合焦領域を含むよう、前記集音範囲の広がりを制御する
請求項１に記載の装置。
【請求項３】
前記集音部は、集音範囲が互いに異なり、集音範囲が固定された複数のマイクロフォンを有し、
前記集音制御部は、前記合焦領域を集音範囲に含むマイクロフォンを選択して、選択したマイクロフォンに集音させる
請求項１または２に記載の装置。
【請求項４】
前記集音制御部は、前記合焦領域を集音範囲に含むマイクロフォンが複数存在する場合に、集音範囲がより狭いマイクロフォンをより優先して選択する
請求項３に記載の装置。
【請求項５】
前記集音制御部は、前記合焦領域の位置の変化に応じて、集音させるマイクロフォンとしてマイクロフォンが新たに選択された場合に、他のマイクロフォンに対する前記新たに選択されたマイクロフォンの集音の重みづけの比率を漸増させる
請求項３または４に記載の装置。
【請求項６】
前記集音部は、第１マイクロフォンの集音範囲を含み前記第１マイクロフォンの集音範囲よりも広い集音範囲を持つ第２マイクロフォンを有し、
前記集音制御部は、前記合焦領域が前記第２マイクロフォンの集音範囲内にあり、かつ、前記第１マイクロフォンの集音範囲外にある場合に、前記第２マイクロフォンで得られた音声信号から前記第１マイクロフォンで得られた音声信号を減算させる
請求項１から５のいずれか一項に記載の装置。
【請求項７】
前記集音部は、前記レンズの光軸に直交する方向に離間して設けられた複数のマイクロフォンを有し、
前記集音制御部は、前記光軸とは異なる位置に前記合焦領域が存在する場合に、前記複数のマイクロフォンのうち前記合焦領域に対応する側に位置するマイクロフォンを選択して集音させる
請求項１から６のいずれか一項に記載の装置。
【請求項８】
前記集音部は、前記集音範囲の広さが可変なマイクロフォンを有し、
前記集音制御部は、前記集音範囲が前記視野範囲内の前記合焦領域を含むよう、前記マイクロフォンの集音範囲の広がりを制御する
請求項１または２に記載の装置。
【請求項９】
前記レンズを通過した被写体光により撮像する撮像部
をさらに備える請求項１から８のいずれか一項に記載の装置。
【請求項１０】
前記視野範囲内の予め定められた範囲に対応する焦点調節領域に対して、前記レンズの焦点調節を行う焦点調節部
をさらに備え、
前記集音制御部は、前記焦点調節によって合焦した焦点調節領域に対応する範囲を前記集音範囲が含むよう、前記集音範囲の広がりを制御する
請求項９に記載の装置。
【請求項１１】
前記集音制御部は、前記焦点調節領域の合焦状態が変化した場合に、当該変化した合焦状態が予め定められた期間継続したことを条件として、合焦した焦点調節領域に対応する範囲を前記集音範囲が含むよう前記集音範囲の広がりを制御する
請求項１０に記載の装置。
【請求項１２】
合焦した焦点調節領域に対応する被写体の動きを特定する動き特定部
をさらに備え、
前記集音制御部は、前記被写体の位置を前記集音範囲が含むよう、前記被写体の動きに基づいて前記集音範囲の広がりを制御する
請求項１０または１１に記載の装置。
【請求項１３】
前記撮像部が撮像した画像と、前記集音部が集音した音声とを対応づけて記録する記録部
をさらに備える請求項９から１２のいずれか一項に記載の装置。
【請求項１４】
レンズの視野範囲内で合焦した合焦領域を特定する合焦領域特定ステップと、
前記視野範囲および前記視野範囲内の前記合焦領域の位置に基づいて、集音部の集音範囲が前記視野範囲内の前記合焦領域を含むよう、前記集音範囲の広がりを制御する集音制御ステップと
をコンピュータに実行させるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、装置およびプログラムに関する。
【背景技術】
【０００２】
集音の指向性を設定する技術が知られている（例えば、特許文献１参照）。
［先行技術文献］
［特許文献］
［特許文献１］特開２００６−２８７７３５号公報
【発明の概要】
【発明が解決しようとする課題】
【０００３】
合焦した被写体の画角内の位置に応じて集音範囲の広がりを制御することができないという課題があった。
【課題を解決するための手段】
【０００４】
本発明の第１の態様においては、装置は、レンズの視野範囲内で合焦した合焦領域を特定する合焦領域特定部と、視野範囲および視野範囲内の合焦領域の位置に基づいて、集音部の集音範囲が視野範囲内の合焦領域を含むよう、集音範囲の広がりを制御する集音制御部とを備える。
【０００５】
本発明の第２の態様においては、プログラムは、レンズの視野範囲内で合焦した合焦領域を特定する合焦領域特定ステップと、視野範囲および視野範囲内の合焦領域の位置に基づいて、集音部の集音範囲が視野範囲内の合焦領域を含むよう、集音範囲の広がりを制御する集音制御ステップとをコンピュータに実行させる。
【０００６】
なお、上記の発明の概要は、本発明の必要な特徴の全てを列挙したものではない。また、これらの特徴群のサブコンビネーションもまた、発明となりうる。
【図面の簡単な説明】
【０００７】
【図１】本実施形態に係る撮像装置１００の利用場面の一例を示す図である。
【図２】撮像装置１００のシステム構成図である。
【図３】外付マイク１５１および内蔵マイク１５２の指向性を模式的に示す図である。
【図４】焦点調節領域と集音範囲との関係の一例を示す図である。
【図５】撮像装置１００による集音制御に関する一連の動作フローを示す図である。
【図６】録音に使用するマイクを選択する動作フローを示す図である。
【図７】マイクに対する重みづけの制御例を示す図である。
【図８】焦点調節領域と集音範囲との関係の他の一例を示す図である。
【図９】画角および焦点調節領域と集音範囲との関係の更なる他の一例を示す図である。
【図１０】被写体の動きに応じてマイクを選択する動作の一例を説明するための図である。
【図１１】焦点調節領域と集音範囲との関係の更なる他の一例を示す図である。
【発明を実施するための形態】
【０００８】
以下、発明の実施の形態を通じて本発明を説明するが、以下の実施形態は特許請求の範囲にかかる発明を限定するものではない。また、実施形態の中で説明されている特徴の組み合わせの全てが発明の解決手段に必須であるとは限らない。
【０００９】
図１は、本実施形態に係る撮像装置１００の利用場面の一例を示す図である。撮像装置１００は、被写体を撮像しつつ、撮像装置１００の周囲の音を集音して録音する。撮像装置１００は、集音できる範囲が互いに異なる内蔵マイクおよび外付マイク１５１により、周囲の音を集音する。撮像装置１００は、合焦した焦点調節領域の位置に応じて、内蔵マイクと外付マイク１５１とを切り替えて集音し録音することにより、集音範囲を特定の範囲に制御する。例えば、撮像装置１００は、合焦した被写体からの音を集音できるよう、内蔵マイクと外付マイク１５１とを切り替えて集音する。
【００１０】
本実施形態において、外付マイク１５１および内蔵マイクは、それぞれ撮像装置１００のレンズの光軸方向を中心とする予め定められた固定の角度範囲に実質的な感度を有する。すなわち、それぞれのマイクの集音範囲は固定されているとする。また、外付マイク１５１は、内蔵マイクよりも強い指向性を持つ。例えば、合焦した焦点調節領域が外付マイク１５１の集音範囲内に対応する場合、外付マイク１５１を選択して録音に用いる。
【００１１】
撮像装置１００によれば、例えば鳥に合焦している場合、鳥の鳴き声が、川の流れで生じる音で邪魔されることを防ぐことができる。このため、画角内において、鳥が存在する範囲に集音範囲を狭めることができる。また、各マイクの集音範囲は固定であるので、集音範囲の切り替は電気的に制御することができる。したがって、機械的な切り替え機構は必要ない。例えば、集音範囲を可変にするためのモータ等を設ける必要がない。また、合焦した焦点調節領域に応じてマイクを自動的に選択するので、操作部材の操作音やモータ等の機械的な駆動音が録音されてしまうことを未然に防ぐことができる。
【００１２】
図２は、撮像装置１００のシステム構成図である。撮像装置１００は、交換レンズ１２０とカメラ本体１３０とを備える。交換レンズ１２０は、レンズマウント接点１２１を有するレンズマウントを備え、カメラ本体１３０は、カメラマウント接点１３１を有するカメラマウントを備える。レンズマウントとカメラマウントが係合して交換レンズ１２０とカメラ本体１３０が一体化されると、レンズマウント接点１２１とカメラマウント接点１３１が接続される。
【００１３】
被写体像は、光軸に沿って撮影光学系としてのレンズ群１２２を透過して、撮像素子１３２の受光面に結像する。レンズ群１２２は、レンズＭＰＵ１２３によって制御される。例えば、レンズＭＰＵ１２３は、フォーカスレンズモータを制御して、レンズ群１２２を構成するフォーカスレンズ群を移動させる。撮像素子１３２は、レンズ群１２２を通過した被写体光により撮像する撮像部として機能する。
【００１４】
レンズＭＰＵ１２３は、レンズマウント接点１２１およびカメラマウント接点１３１を介してカメラＭＰＵ１３３と接続され、相互に通信を実行しつつ協働して交換レンズ１２０とカメラ本体１３０を制御する。撮像部の一部としての撮像素子１３２は、被写体像である光学像を光電変換する素子であり、例えば、ＣＣＤ、ＣＭＯＳセンサが用いられる。撮像素子１３２で光電変換された被写体像は、Ａ／Ｄ変換器１３４でアナログ信号からデジタル信号に変換される。露光制御部１４０は、カメラＭＰＵ１３３から与えられる露光時間、露光周期等に従って、撮像素子１３２の電荷リセットおよび読み出しタイミング、読み出しゲイン等に対する制御信号を出力する。
【００１５】
デジタル信号に変換された受光信号としての被写体像は、画像データとして順次処理される。Ａ／Ｄ変換器１３４によりデジタル信号に変換された画像データは、ＡＳＩＣ１３５へ引き渡される。ＡＳＩＣ１３５は、後述するように、画像処理機能、被写体の動きを検出する機能等の回路を一つにまとめた集積回路である。ＡＳＩＣ１３５は、ＳＤＲＡＭ１３６との間で画像データを往復させつつ画像処理を施して、画像処理後の画像データを、メモリーカード等の外部メモリ１６０へ記憶する。ＳＤＲＡＭ１３６は、画像の記録、再生動作時に一時的に画像データを記憶するためのバッファメモリとして機能する。ＳＤＲＡＭ１３６は、高速で読み書きのできる揮発性のランダムアクセスメモリである。外部メモリ１６０は、例えばフラッシュメモリ等により構成される、カメラ本体１３０に対して着脱可能な不揮発性メモリである。
【００１６】
ＡＳＩＣ１３５は、画像データを規格化された画像フォーマットに即した画像データに変換して出力する。例えば、静止画としてＪＰＥＧファイルを生成する場合、色変換処理、ガンマ処理、ホワイトバランス処理等の画像処理を行った後に適応離散コサイン変換等を施して圧縮処理を行う。また、動画像としてＭＰＥＧファイルを生成する場合、画像処理により生成された連続する静止画としてのフレーム画像データに対して、フレーム内符号化、フレーム間符号化を施して圧縮処理を行う。
【００１７】
ＡＳＩＣ１３５で処理された画像データは、記憶用に処理される画像データに並行して、表示用の画像データを生成する。生成された表示用の画像データは、表示制御部１３７の制御に従って表示画像信号に変換され、液晶ディスプレイ等の表示デバイスとしての表示部１３８に、画像として表示される。また、画像の表示と共に、もしくは画像を表示することなく、撮像装置１００の各種設定に関する様々なメニュー項目も、表示制御部１３７の制御により表示部１３８に表示することができる。
【００１８】
撮像装置１００は、上記の画像処理における各々の要素も含めて、カメラＭＰＵ１３３により直接的または間接的に制御される。システムメモリ１３９は、電気的に消去・記憶可能な不揮発性メモリであり、例えばフラッシュＲＯＭ等により構成される。システムメモリ１３９は、撮像装置１００の動作時に必要な定数、変数、プログラム等を、撮像装置１００の非動作時にも失われないように記憶している。カメラＭＰＵ１３３は、定数、変数、プログラム等を適宜ＳＤＲＡＭ１３６に展開して、撮像装置１００の制御に利用する。カメラ本体１３０内のＡ／Ｄ変換器１３４、ＡＳＩＣ１３５、ＳＤＲＡＭ１３６、システムメモリ１３９、表示制御部１３７、カメラＭＰＵ１３３、外付マイク１５１、内蔵マイク１５２、外部メモリ１６０は、メモリインターフェースを含む接続インタフェース１４５により、相互に接続される。
【００１９】
カメラＭＰＵ１３３は、ユーザによる設定操作等のユーザ操作を受け付ける操作入力部１４１が操作されたことを検知して、操作に応じた動作を実行する。操作入力部１４１としては、電源スイッチ、レリーズボタン、各種操作ボタン、表示部１３８に一体に実装されたタッチパネル等を含む。カメラＭＰＵ１３３は、レリーズボタンが操作された場合に、レリーズ動作を実行するよう撮像装置１００の各要素を制御する。また、カメラＭＰＵ１３３は、タッチパネルが操作された場合に、表示部１３８に表示されたメニュー項目および操作内容に応じた動作をするよう、撮像装置１００の各要素を制御する。
【００２０】
内蔵マイク１５２および外付マイク１５１は、集音部として機能し、周囲の音を集音して得られた音声の電気信号をデジタルの音声データに変換して、接続インタフェース１４５に出力する。内蔵マイク１５２および外付マイク１５１が生成した音声データは、ＡＳＩＣ１３５において画像データに対応する音声データとして処理される。カメラＭＰＵ１３３は、マイクが集音した音声データを、撮像して得られた画像データに対応づけて、例えば外部メモリ１６０内に記録する。
【００２１】
カメラ本体１３０および外部メモリ１６０は、電源１７０から電力供給を受ける。電源１７０は、カメラ本体１３０に対して着脱できる、例えばリチウムイオン電池などの二次電池、家庭用ＡＣ電源等により構成される。カメラＭＰＵ１３３は、電源１７０による各要素への電力供給を制御する。
【００２２】
ＡＳＩＣ１３５は、画像データから、１以上の画像領域、例えば予め定められた複数の焦点調整領域毎にコントラスト量を算出する。フォーカスレンズ群の位置は、カメラＭＰＵ１３３、レンズＭＰＵ１２３、フォーカスレンズモータ等の制御によって、コントラスト量に基づき決定された目標位置に向けて制御される。このように、交換レンズ１２０に対して、コントラスト検出方式で焦点状態が検出されて焦点調節が行われる。また、交換レンズ１２０に対して、位相差検出方式で焦点状態が検出されて焦点調節が行われてもよい。例えば、ＡＳＩＣ１３５は、被写体像の特定の領域に対応して予め定められた複数の焦点調整領域のそれぞれにおいて、合焦状態、前ピン状態、後ピン状態などの焦点状態を検出する。前ピン状態、後ピン状態のような非合焦状態である場合には、合焦状態からのずれ量も検出される。そして、ＡＳＩＣ１３５は、ずれ量に基づいてフォーカスレンズ群の移動量を算出して、カメラＭＰＵ１３３、レンズＭＰＵ１２３、フォーカスレンズモータ等の制御によって、フォーカスレンズ群を移動させる。このように、複数の焦点調整領域の少なくともいずれかに対して合焦制御される。ＡＳＩＣ１３５、カメラＭＰＵ１３３、およびレンズＭＰＵ１２３の機能ブロックは、交換レンズ１２０の視野範囲内の予め定められた範囲に対応する焦点調節領域に対して、交換レンズ１２０の焦点調節を行う焦点調節部として機能する。そして、焦点状態を特定するＡＳＩＣ１３５が、視野範囲内で合焦した合焦領域を特定する合焦領域特定部として機能する。
【００２３】
図３は、外付マイク１５１および内蔵マイク１５２の指向性を模式的に示す。本図は、物体側からの光軸に沿う方向を角度０°とした場合の感度曲線を示す。感度曲線３１０は、外付マイク１５１の感度曲線を示す。感度曲線３２０は、内蔵マイク１５２の感度曲線３２０を示す。
【００２４】
すなわち、外付マイク１５１および内蔵マイク１５２は、物体からの光軸方向の音に対して、最大の感度を持つ。また、角度０°から９０°までの間では、角度が増加するにつれて感度が減少していき、角度９０°で感度が実質的に０となる。また、角度０°に対応する角度３６０°から２７０°までの間では、角度が減少するにつれて感度が増加していき、角度２７０°で感度が実質的に０となる。このように、外付マイク１５１および内蔵マイク１５２は、撮像装置１００の撮影方向に対して物体側でない位置からの音声に対しては、実質的に感度を有さないとする。
【００２５】
本図の線３１１および線３１２は、感度曲線３１０において感度がピーク値の１／２となる位置とマイク位置とを結ぶ線である。線３１１と線３１２とがなす角の大きさを、外付マイク１５１の集音範囲の広がりを示す指標とする。本例において、集音範囲の広がりを示す指標としての集音角度∠Ｍ１は、外付マイク１５１の集音範囲の広さを表す。同様に、感度曲線３２０において感度がピーク値の１／２となる位置とマイク位置とを結ぶ線３２１と線３２２とがなす角の大きさを、内蔵マイク１５２の集音範囲の広がりを示す指標とする。本例において、集音範囲の広がりを示す指標としての集音角度∠Ｍ２は、内蔵マイク１５２の集音範囲の広さを表す。
【００２６】
本図において、交換レンズ１２０および撮像素子１３２により定まる画角∠Ｒを、線３３１と線３３２との間の角度で示す。本実施形態に係る説明では、特に断らない限り、撮像素子１３２の長手方向の長さに対応する画角を用いて説明する。画角は、交換レンズ１２０による視野範囲を示す。画角は、交換レンズ１２０の焦点距離によって変化する。一方、外付マイク１５１の集音範囲および内蔵マイク１５２の集音範囲は固定されている。したがって、被写体像上の集音範囲に対応する範囲は、画角に応じて変化する。一方、交換レンズ１２０の焦点調節は、被写体像上に設定された複数の焦点調整領域で行われる。すなわち、被写体像上の焦点調節領域の位置は、画角に応じて変化しない。
【００２７】
図４は、焦点調節領域と集音範囲との関係の一例を示す。画像領域４００は、撮像素子１３２により撮像される被写体像の領域である。画像領域４００の被写体像が、画像データとして処理され、表示部１３８に表示され、外部メモリ１６０に記録される。画像領域４００の中心は、交換レンズ１２０の光軸に対応する。
【００２８】
ＡＦ１〜ＡＦ７は、被写体像上に予め設定される焦点調節領域に対応する。ＡＦ１〜ＡＦ７の画像領域４００内の位置は、画角が変わっても変化しない。ＡＳＩＣ１３５は、コントラスト検出方式または位相差検出方式等により、焦点調節領域ＡＦ１〜ＡＦ７の焦点状態を検出する。検出された焦点状態に基づき決定される目標位置にフォーカシングレンズを位置させるよう、カメラＭＰＵ１３３がレンズＭＰＵ１２３を制御する。この焦点調節動作によって、ＡＦ１〜ＡＦ７のうちのいずれかの焦点調節領域について合焦状態とすることができる。
【００２９】
外付マイク１５１および内蔵マイク１５２は、光軸を中心とした集音角度を持つ。外付マイク１５１の集音角度∠Ｍ１に対応する範囲を本図のＭＡ１として示す。外付マイク１５１は、集音範囲ＭＡ１内に撮像される被写体からの音を集音することができる。内蔵マイク１５２の集音角度∠Ｍ２に対応する範囲を本図のＭＡ２として示す。内蔵マイク１５２は、集音範囲ＭＡ２内の被写体からの音を集音することができる。ＭＡ１およびＭＡ２の半径は、画角の変化に応じて変化する。
【００３０】
本例に例示した画角では、ＭＡ１はＡＦ２〜ＡＦ４、ＡＦ６およびＡＦ７を含む。すなわち、外付マイク１５１は、ＡＦ２〜ＡＦ４、ＡＦ６およびＡＦ７に対応する方向に位置する被写体からの音を集音することができる。ＭＡ２は、ＡＦ１〜ＡＦ７を含む。すなわち、内蔵マイク１５２は、ＡＦ１〜ＡＦ７に対応する方向に位置する被写体からの音を集音することができる。
【００３１】
ＡＳＩＣ１３５は、焦点調節動作によって、ＡＦ１およびＡＦ５の少なくとも一方だけが合焦状態にあると判定された場合、内蔵マイク１５２を選択して集音させる。これにより、合焦した被写体からの音声を確実に録音することができる。一方、ＡＳＩＣ１３５は、焦点調節動作によって、ＡＦ１およびＡＦ５のいずれも合焦状態になく、ＡＦ２〜ＡＦ４、ＡＦ６およびＡＦ７の少なくともいずれかが合焦状態にあると判定された場合、外付マイク１５１を選択して集音させる。これにより、合焦していない被写体からの音声が大きな音で録音されてしまうことを未然に防ぐことができる。
【００３２】
本実施形態において、外付マイク１５１および内蔵マイク１５２のいずれかを選択するための指標値として、各マイクの集音角度を画角∠Ｒで除した値を示すＲＭ値と、合焦した焦点調節領域の位置を画像幅で除した値を示すＲＦ値とを算出する。例えば、ＡＦ４が合焦した焦点調節領域である場合、画像中心からＡＦ４の右端までの距離Ｌ１を、画像の横幅Ｌ２で除した値をＲＦ値として算出する。ＲＦ値が外付マイク１５１のＲＭ値より小さい場合、対応する焦点調節領域はＭ１の内側に存在することを示す。この場合、ＡＳＩＣ１３５は、外付マイク１５１を選択して、焦点調節領域に対応する被写体からの音声を集音させる。このように、ＡＳＩＣ１３５は、指向性が比較的に強い外付マイク１５１のＲＭ値とＲＦ値との比較結果に基づいて、外付マイク１５１を集音に使用すべきか否かを判断する。
【００３３】
本例のように、内蔵マイク１５２は、外付マイク１５１の集音範囲を含み、外付マイク１５１の集音範囲よりも広い集音範囲を持つ。このような集音範囲の関係を有する場合、ＡＦ１およびＡＦ５の少なくとも一方だけが合焦状態にあると判定されたときは、内蔵マイク１５２だけでなく外付マイク１５１にも集音させ、内蔵マイク１５２で得られた音声信号から外付マイク１５１で得られた音声信号を減算させた音声信号を録音に使用してもよい。すなわち、ＡＳＩＣ１３５は、合焦領域が内蔵マイク１５２の集音範囲内にあり、かつ、外付マイク１５１の集音範囲外にある場合に、内蔵マイク１５２で得られた音声信号から外付マイク１５１で得られた音声信号を減算させてもよい。これにより、合焦した被写体からの音が、外付マイク１５１の集音範囲内の被写体の音で邪魔されることを防ぐことできる。
【００３４】
図５は、撮像装置１００による集音制御に関する一連の動作フローを示す。本動作フローは、撮像装置１００が合焦動作を始める準備ができた場合に、開始される。本動作フローの処理は、特に説明しない場合、カメラＭＰＵ１３３が主体となって動作する。ステップＳ５００において、合焦動作を開始する指示として、レリーズボタンの半押し操作を待つ。レリーズボタンの半押しの操作がされた場合、ステップＳ５０２において、焦点調節動作を開始するとともに、動画の撮影を始める。以後、カメラＭＰＵ１３３は、動画を構成するフレーム画像となる画像を予め定められたフレームレートで撮像しつつ焦点調節を行うよう、撮像装置１００の各部を制御する。本フローでは、主として撮影中の合焦処理について主として説明し、実際の撮影動作については説明を省略する。
【００３５】
ステップＳ５０２の処理に続き、ステップＳ５０４において、交換レンズ１２０の現在の焦点距離を特定する。ステップＳ５０６において、ＡＳＩＣ１３５は、焦点距離に対応する画角と、外付マイク１５１および内蔵マイク１５２のそれぞれの集音角度とに基づいて、ＲＭ値を算出する。具体的には、∠Ｍ１／∠Ｒを外付マイク１５１のＲＭ値として算出し、∠Ｍ２／∠Ｒを内蔵マイク１５２のＲＭ値として算出する。
【００３６】
ステップＳ５０８において、ＡＳＩＣ１３５は、ＡＦ１〜７の中から、合焦した焦点調節領域を特定する。具体的には、ＡＳＩＣ１３５は、コントラスト検出方式または位相差検出方式による焦点状態の検出結果に基づき、合焦した焦点調節領域を特定する。ＡＳＩＣ１３５は、複数の焦点調節領域のそれぞれから検出された焦点状態に基づき、合焦状態と判定された複数の焦点調節領域を、合焦した焦点調節領域として特定してよい。そして、ステップＳ５１０において、ＡＳＩＣ１３５は、表示制御部１３７を制御して、表示部１３８に合焦した焦点調節領域の枠で表示させる等して、合焦領域をユーザに提示する。
【００３７】
ステップＳ５１２において、ＡＳＩＣ１３５は、外付マイク１５１および内蔵マイク１５２のうち、録音に使用するマイクを選択する。具体的には、録音に主として使用するマイクを選択する。より具体的には、外付マイク１５１および内蔵マイク１５２に対する重みづけを決定する。本処理の詳細については、図６に関連して説明する。ステップＳ５１４において、ＡＳＩＣ１３５は、ステップＳ５１２で決定した重みづけに従って、各マイクの重みづけを制御して録音して、音声データを生成する。重みづけの制御については、図７に関連して説明する。
【００３８】
ステップＳ５１６において、撮影を終了するか否かを判断する。具体的には、操作入力部１４１に対して撮影終了の操作がなされたか否かを判断する。撮影終了の操作がなされていない場合、ステップＳ５０４に処理を移行させる。撮影終了の操作がなされるまで、ステップＳ５０４からステップＳ５１４の動作が繰り返される。撮影終了の操作がなされた場合、撮影で得られた動画データおよび録音で得られた音声データを、撮影および録音の時刻に同期して再生されるよう外部メモリ１６０に記録する。ステップＳ５１８の処理が完了すると、本動作フローは終了する。なお、カメラＭＰＵ１３３は、撮影終了の操作の他、録音終了の操作を取得してもよい。録音終了の操作を取得した場合、撮影を終了することなく、外付マイク１５１および内蔵マイク１５２の少なくとも一方による集音を終了させてよい。
【００３９】
図６は、録音に使用するマイクを選択する動作フローを示す。すなわち、図５のステップＳ５１２の内部動作を示す。
【００４０】
ステップＳ６００において、ＡＳＩＣ１３５は、ＡＦ１〜７のうち、合焦した焦点調節領域が変わったか否かを判断する。例えば、ＡＦ１〜７の少なくともいずれか１つの焦点状態が変化した場合に、合焦した焦点調節領域が変わったと判断する。具体的には、合焦状態にあった焦点調節領域が非合焦状態に変わった場合に、合焦した焦点調節領域が変わったと判断する。また、非合焦状態にあった焦点調節領域が合焦状態に変わった場合にも、合焦した焦点調節領域が変わったと判断する。本動作フローの後のステップにおいて、合焦した焦点調節領域の位置に応じて外付マイク１５１の重みづけを設定するが、ステップＳ６００では、前回重みづけを設定したときと比較して、合焦した焦点調節領域が変わったか否かを判断する。
【００４１】
合焦した焦点調節領域が変わった場合、ステップＳ６０２において、焦点調節領域が変わってから予め定められた時間長さが経過したか否かを判断する。つまり、ＡＦ１〜７の焦点状態が変化していない状態が予め定められた期間経過したか否かが判断される。
【００４２】
合焦した焦点調節領域が変わってから予め定められた期間が経過した場合、ステップＳ６０４において、合焦した焦点調節領域の位置と画像領域の幅とに基づき、ＲＦ値を算出する。合焦した焦点調節領域が複数存在する場合は、合焦した焦点調節領域のそれぞれについてＲＦ値を算出してよい。
【００４３】
ステップＳ６０６において、ＡＳＩＣ１３５は、外付マイク１５１のＲＭ値がＲＦ値よりも大きいか否かを判断する。合焦した焦点調節領域が複数存在する場合は、各焦点調節領域に対応する複数のＲＦ値のうち最大のＲＦ値を、本比較の対象とすればよい。
【００４４】
外付マイク１５１のＲＭ値がＲＦ値よりも大きい場合、ステップＳ６０８において、外付マイク１５１による録音の重みづけを、内蔵マイク１５２による録音の重みづけよりも大きく設定する。外付マイク１５１のＲＭ値がＲＦ値以下である場合、ステップＳ６１０において、内蔵マイク１５２による録音の重みづけを、外付マイク１５１による録音の重みづけよりも大きく設定する。ステップＳ６０８、ステップＳ６１０の処理が完了すると、本動作フローを終了する。
【００４５】
ステップＳ６００で合焦した焦点調節領域が変わっていないと判断された場合、または、ステップＳ６０２で一定の期間が経過していない判断された場合、本動作フローを終了する。本動作フローで説明したように、ＡＳＩＣ１３５は、焦点調節領域の合焦状態が変化した場合に、当該変化した合焦状態が予め定められた期間継続したことを条件として、合焦した焦点調節領域に対応する範囲を集音範囲が含むよう集音範囲の広がりを制御する。このため、録音の重みづけが頻繁に変わってしまうことを未然に防ぐことができる。
【００４６】
図７は、マイクに対する重みづけの制御例を示す。ＡＳＩＣ１３５は、外付マイク１５１および内蔵マイク１５２で得られた音声信号に対して重みづけ係数を時間的に制御することで、実効的な集音範囲を時間的に制御して記録用の音声データを生成する。
【００４７】
撮像装置１００は、予め定められた時間間隔で画像データから焦点調節領域の焦点状態を検出して焦点調節を行う。本例では、ＡＦ４だけが合焦状態にある状態が時刻ｔ２まで継続していたとする。そして、時刻ｔ３以後は、ＡＦ５だけが合焦状態になったとする。すなわち、合焦した焦点調節領域が、Ａ４からＡＦ５に変化したとする。この場合、時刻ｔ２までは、外付マイク１５１への重みづけｗ１が、内蔵マイク１５２への重みづけｗ２よりも大きい状態に制御される。一例として、時刻ｔ２までは、ｗ１＝１、ｗ２＝０に制御される。
【００４８】
重みづけは、各マイクの音声信号にゲインとして乗じる乗算値であってよい。例えば、外付マイク１５１から得られた音声信号をＳ１、内蔵マイク１５２から得られた音声信号をＳ２とした場合、音声信号Ｓ１およびＳ２は、ｗ１×Ｓ１＋ｗ２×Ｓ２により重みづけ加算される。ＡＳＩＣ１３５は、重みづけ加算された音声信号から、記録用の音声データを生成する。ＡＳＩＣ１３５は、デジタルの音声信号Ｓ１およびＳ２を取得して重みづけ加算することにより、記録用の音声データを生成してよい。ＡＳＩＣ１３５は、アナログの音声信号に対して重みづけ加算させてもよい。この場合、ＡＳＩＣ１３５は、重みづけ加算後にデジタル変換された音声信号を取得して、記録用の音声信号データを生成してよい。本例のようにｗ１＝１、ｗ２＝０に設定する場合、内蔵マイク１５２により得られた音声は記録用の音声データに寄与せず、外付マイク１５１により得られた音声が記録用の音声データに寄与する。
【００４９】
図６のステップＳ６０２等に関連して説明したように、合焦した焦点調節領域が時刻ｔ３でＡＦ５に変わった場合に、ＡＳＩＣ１３５は、ＡＦ５が合焦している状態が予め定められた時間が経過するまで、重みづけ係数ｗ１およびｗ２を変化させない。本図の例では、時刻ｔ８までは、重みづけ係数の値が維持される。ＡＦ５が合焦している状態が時刻ｔ８まで継続すると、ＡＳＩＣ１３５は、重みづけ係数ｗ１の目標値として０を設定して、重みづけ係数ｗ２の目標値として１を設定する。
【００５０】
そして、ＡＳＩＣ１３５は、時刻ｔ８を過ぎると、重みづけ係数ｗ１およびｗ２を、それぞれの目標値に向けて変化させる。本例では、重みづけ係数ｗ１を目標値に向けて漸減させ、重みづけ係数ｗ２を目標値に向けて漸増させる。このように、ＡＳＩＣ１３５は、合焦領域の位置の変化に応じて、集音させるマイクとしてマイクが新たに選択された場合に、他のマイクに対する新たに選択されたマイクの集音の重みづけの比率を漸増させる。ＡＳＩＣ１３５は、予め定められた時間長さの期間が経過したときに重みづけ係数がそれぞれの目標値に達するよう、重みづけ係数の単位時間あたりの変化量を決定して、決定した変化量に従って、重みづけ係数を目標値に向けて変化させてよい。重みづけ係数の単位時間あたりの変化量は、本例に例示するように変化を開始してから経過した時間に応じて変化させてよいが、重みづけ係数の単位時間あたりの変化量を一定値としてもよい。ＡＳＩＣ１３５は、ｗ１＋ｗ２＝１を満たすように重みづけ係数ｗ１およびｗ２を変化させてよい。
【００５１】
時刻ｔ１４で重みづけ係数ｗ１およびｗ２がそれぞれの目標値に達すると、ＡＳＩＣ１３５は、重みづけ係数ｗ１およびｗ２を固定する。本制御により、重みづけ係数を単調増加または単調減少させることができる。このため、合焦した焦点調節領域が変わった場合に、集音に使用するマイクが急に切り替わってしまうことを未然に防ぐことができる。したがって、再生したときに音源範囲が徐々に切り替わっていくような音声データを記録することができるので、ユーザが再生音を聴いたときに感じる違和感を低減することができる。
【００５２】
図８は、焦点調節領域と集音範囲との関係の他の一例を示す。本例は、例えばＴＥＬＥ端における関係を示す。画像領域８００に重ねて示された集音範囲８１０は、外付マイク１５１の集音角度∠Ｍ１に対応する。本例では、ＡＦ１〜７のいずれの焦点調節領域も、外付マイク１５１の集音範囲内に位置している。この場合、いずれのＡＦが合焦状態にある場合でも、外付マイク１５１を使用して録音することができる。この場合、ＡＳＩＣ１３５は、外付マイク１５１を、集音に使用すべきマイクとして選択する。ＡＦ１〜７の焦点調節領域は、集音範囲がより広い内蔵マイク１５２の集音範囲内にも位置するが、ＡＳＩＣ１３５は、集音に使用すべきマイクとして、より狭い集音範囲を持つ外付マイク１５１をより優先して選択する。
【００５３】
図９は、画角および焦点調節領域と集音範囲との関係の更なる他の一例を示す。本例は、例えばＷＩＤＥ端における関係を示す。画像領域９００に重ねて示された集音範囲９１０は、外付マイク１５１の集音角度∠Ｍ１に対応する。集音範囲９２０は、内蔵マイク１５２の集音角度∠ＭＲに対応する。本例では、ＡＦ１およびＡＦ５の焦点調節領域は、集音範囲９２０外に位置している。すなわち、ＡＦ１およびＡＦ５に対応する角度では、内蔵マイク１５２の感度は最大値の１／２未満となる。このような場合、ＡＳＩＣ１３５は、集音に使用すべきマイクとして、より広い集音範囲を持つ内蔵マイク１５２をより優先して選択する。なお、ＡＳＩＣ１３５は、外付マイク１５１および内蔵マイク１５２の角度に対する感度に基づき、集音に使用すべきマイクを選択してもよい。例えば、ＡＳＩＣ１３５は、合焦した焦点調節領域に対応する角度に対する感度がより高いマイクを、より優先して選択してもよい。
【００５４】
図１０は、被写体の動きに応じてマイクを選択する動作の一例を説明するための図である。本図は、動画を構成するフレーム画像上に、ＡＦ領域および集音範囲を重ねて表す。
【００５５】
フレーム画像１０００では、ＡＦ４の焦点調節領域が合焦状態にある。集音範囲１００１および集音範囲１００２は、それぞれ外付マイク１５１および内蔵マイク１５２の集音範囲を示す。ＡＦ４は、外付マイク１５１の集音範囲１００１内にあるので、ＡＳＩＣ１３５は、集音範囲がより狭い外付マイク１５１を、集音に使用すべきマイクとして選択する。
【００５６】
フレーム画像１０１０は、ＡＦ４内の合焦被写体が動き始めた後に撮影されたフレーム画像である。集音範囲１０１１および集音範囲１０１２は、それぞれ外付マイク１５１および内蔵マイク１５２の集音範囲を示す。ＡＳＩＣ１３５は、合焦状態にあった画像領域で動きが検出されると、動きに応じて、集音に使用すべきマイクを選択する。具体的には、ＡＳＩＣ１３５は、合焦被写体の動き量に基づき画角内の合焦被写体の位置を特定して、特定した位置を集音範囲として含むマイクを、集音に使用すべきマイクとして選択する。動き検出方式や動き量を検出する方式としては、動画像データのフレーム間、フィールド間で動きベクトルを検出する方式、オプティカルフロー方式、パターンマッチング等の種々の方式を例示することができる。ＡＳＩＣ１３５は、画像データの色信号および輝度信号の少なくとも一方に基づき、動きを検出してよい。
【００５７】
本例のフレーム画像１０１０では、合焦被写体は、外付マイク１５１の集音範囲１０１１内に位置している。このため、合焦被写体の位置を集音範囲として含む外付マイク１５１を、集音に使用すべきマイクとして選択する。フレーム画像１０２０は、フレーム画像１０１０の後に撮影されたフレーム画像である。集音範囲１０２１および集音範囲１０２２は、それぞれ外付マイク１５１および内蔵マイク１５２の集音範囲を示す。フレーム画像１０２０では、合焦被写体は、外付マイク１５１の集音範囲１０１１外に位置している。このため、内蔵マイク１５２を、集音に使用すべきマイクとして選択する。
【００５８】
ＡＳＩＣ１３５は、被写体の動きに応じてマイクを選択するとき、合焦した焦点調節領域の位置からＲＭ値を算出するときと同様に、合焦被写体の位置に対応するＲＭ値を算出する。具体的には、ＡＳＩＣ１３５は、合焦被写体の位置を画像の幅Ｌ２で除した値を、ＲＦ値として算出する。そして、ＡＳＩＣ１３５は、図６のステップＳ６０６等に関連して説明した処理と同様、ＲＭ値とＲＦ値とを比較して、比較結果に基づき、外付マイク１５１および内蔵マイク１５２のいずれのマイクを集音に使用すべきかを判断すればよい。なお、合焦した焦点調節領域の位置が変わった場合は、予め定められた期間が経過してからマイクを切り替えるとしたが、動きが検出された場合は、予め定められた期間が経過するのを待つことなく、集音に使用するマイクを動きに追従して動的に切り替えてよい。
【００５９】
本例で説明したように、ＡＳＩＣ１３５は、合焦した焦点調節領域に対応する被写体の動きを特定する動き特定部として機能する。そして、ＡＳＩＣ１３５は、被写体の位置を集音範囲が含むよう、被写体の動きに基づいて集音範囲の広がりを制御する。このため、合焦被写体に動きがある場合、動きに応じて適切な方向からの音を集音することができる。また、ＡＦ１〜７のいずれかの焦点調節領域に被写体が存在しない場合でも、被写体の動きに追従した方向からの音を集音することができる。
【００６０】
図１１は、焦点調節領域と集音範囲との関係の更なる他の一例を示す。図１から図１０にかけて、発明を分かり易く説明することを目的として、外付マイク１５１および内蔵マイク１５２が共に、光軸を中心とする集音指向性を持つとして説明した。しかし、外付マイク１５１および内蔵マイク１５２の少なくとも一方が、光軸を中心とする集音の指向性を有しなくてもよい。
【００６１】
本図では、光軸を中心とする集音の指向性を有しないマイクの一例として、ステレオマイクを用いる変形例を示す。ここでは、説明を簡単にするために、光軸に平行な方向に単一指向性を持つ２つのマイクを内部に含むステレオマイクを取り上げて説明する。当該２つのマイクは、撮像領域の長軸方向に離間して設けられるとする。便宜上、この２つのマイクを、ＬマイクおよびＲマイクとすると呼ぶ。Ｌマイクは、撮像装置１００から物体を見た場合に光軸に対して左側に位置しており、Ｒマイクは、撮像装置１００から物体を見た場合に光軸に対して右側に位置しているとする。
【００６２】
本図において、画像領域１１００に重ねて、Ｌマイクの集音範囲１１１０およびＲマイクの集音範囲１１２０を示した。例えば、ＡＦ１の焦点調節領域だけが合焦状態にある場合、ＡＳＩＣ１３５は、ＡＦ１の位置を集音範囲に含むＬマイクを、集音に使用すべきマイクとして選択する。ＡＦ５の焦点調節領域だけが合焦状態にある場合、ＡＳＩＣ１３５は、ＡＦ５の位置を集音範囲に含むＲマイクを、集音に使用すべきマイクとして選択する。また、ＡＦ１の焦点調節領域およびＡＦ５の焦点調節領域が合焦状態にある場合、ＡＳＩＣ１３５は、ＬマイクおよびＲマイクを、集音に使用すべきマイクとして選択する。本制御により、集音範囲の位置を選択することができる。
【００６３】
ＡＦ３、ＡＦ６、ＡＦ７の焦点調節領域の少なくともいずれかだけが合焦状態にある場合、ＡＳＩＣ１３５はいずれのマイクを選択してよい。ＡＦ２の焦点調節領域だけが合焦状態にある場合、ＡＦ２に対応する角度からの音声に対し感度が高いマイクＬを選択してよい。ＡＦ４の焦点調節領域だけが合焦状態にある場合、ＡＦ４に対応する角度からの音声に対し感度が高いＲマイクを選択してよい。
【００６４】
このように、ＡＳＩＣ１３５は、合焦した焦点調節領域が、選択したマイクの少なくともいずれかの集音範囲に含まれるよう、１以上のマイクを選択する。本例においては、マイクを選択することにより、画角内における集音指向性の向きを制御することができる。また、複数のマイクを選択することにより、集音範囲の広さを制御することができる。複数のマイクを選択する場合、ＡＳＩＣ１３５は、重ね合わせた集音範囲が最も狭くなる組み合わせのマイクを選択してよい。このように集音範囲の広さおよび集音指向性の向きの少なくとも一方を制御することで、集音範囲の広がりが制御される。
【００６５】
本例においてステレオマイクを用いて説明した。しかし、ステレオマイクに限られず、交換レンズ１２０の光軸に直交する方向に離間して設けられた複数のマイクに、本制御を適用することができる。ＡＳＩＣ１３５は、交換レンズ１２０の光軸とは異なる位置に合焦領域が存在する場合に、複数のマイクのうち合焦領域に対応する側に位置するマイクを選択して集音させればよい。
【００６６】
以上の説明においては、撮像装置１００は、２つのマイクの中からマイクを選択して集音して音声を記録するとした。すなわち、ＡＳＩＣ１３５は、集音範囲が互いに異なり、集音範囲が固定された複数のマイクを含む集音部の集音範囲の広がりを制御するとした。具体的には、ＡＳＩＣ１３５は、２つのマイクの中から、合焦領域を集音範囲に含むマイクを選択して、選択したマイクに集音させるとした。しかし、撮像装置１００は、３以上のマイクの中からマイクを選択して集音して音声を記録してもよい。すなわち、ＡＳＩＣ１３５は、集音範囲が互いに異なり、集音範囲が固定された複数のマイクを含む集音部の集音範囲の広がりを制御するべく、複数のマイクの中から、合焦領域を集音範囲に含むマイクを選択して、選択したマイクに集音させてよい。合焦領域を集音範囲に含むマイクが複数存在する場合には、ＡＳＩＣ１３５は、集音範囲がより狭いマイクンをより優先して選択する。このように、ＡＳＩＣ１３５は、交換レンズ１２０の視野範囲および視野範囲内の合焦領域の位置に基づいて、集音部の集音範囲が視野範囲内の合焦領域を含むよう、集音範囲の広がりを制御することができる。そして、ＡＳＩＣ１３５は、複数の合焦領域が検出された場合には、複数の合焦領域を含むよう、１以上のマイクを選択する等して、集音範囲の広がりを制御すればよい。
【００６７】
以上の説明において、合焦した焦点調節領域に応じて、集音に使用すべきマイクを選択するとした。しかし、ＡＳＩＣ１３５は、合焦した焦点調節領域が人物の顔の一部領域に対応する場合、人物の顔の全体を集音範囲として含むマイクを、集音に使用すべきマイクとして選択してもよい。すなわち、ＡＳＩＣ１３５は、合焦した焦点調節領域が予め定められた被写体の一部領域に対応する場合、当該予め定められた被写体の全体を集音範囲として含むマイクを、集音に使用すべきマイクとして選択してもよい。予め定められた被写体が人物の顔である場合、ＡＳＩＣ１３５は、人物の口を集音範囲として含むマイクを、集音に使用すべきマイクとして選択してもよい。人物の顔であるか否かの判定や、人物の口の領域の特定は、パターンマッチング等の画像認識により行うことができる。
【００６８】
以上の説明において、自動焦点調節により合焦した焦点調節領域に応じて、集音範囲の広がりを制御するとした。しかし、合焦した領域に集音範囲を制限しなくてもよい場合もある。例えば、スタジアム等でサッカー等のスポーツの試合を観客席から観戦している場合、シュートしている選手にズームして撮影するときでも、シュートしている選手がいる方向からの音よりは、スタジアム全体からの音を集音したい場合もある。そこで、合焦した焦点調節領域に応じて集音範囲の広がりを制御するか否かを、ユーザ入力に基づいて設定できるようにしてもよい。ＡＳＩＣ１３５は、合焦した焦点調節領域に応じて集音範囲の広がりを制御する旨がユーザ操作等で設定されていることを条件として、集音範囲の広がりを制御する処理を行ってよい。なお、合焦した焦点調節領域に応じて集音範囲の広がりを制御するか否かを、ユーザ入力によらずに設定してもよい。例えば、ＡＳＩＣ１３５は、ズーム値が予め定められた値未満であることを条件として、合焦した焦点調節領域に応じて集音範囲の広がりを制御してもよい。例えば、ＡＳＩＣ１３５は、画角内の被写体からの音声が撮像装置１００まで実質的に届くようなズーム値であることを条件として、合焦した焦点調節領域に応じて集音範囲の広がりを制御してもよい。一方、画角内の被写体からの音声が撮像装置１００まで実質的に届かないほどズーム値が大きい場合には、合焦した焦点調節領域が外付マイク１５１の範囲内である場合であっても、集音に使用すべきマイクとして内蔵マイク１５２を選択してよい。
【００６９】
以上の説明において、撮像装置１００の位置または向きの少なくとも一方が変わることについては特に言及しなかった。ユーザが選択した焦点調節領域に対して焦点調節がされた後、撮像装置１００の位置または向きをユーザが変えることで、焦点調節時とは異なる構図で撮影をする場合がある。例えば、ユーザは、光軸の位置が変わるように撮像装置１００を移動させる、光軸の向きが変わるように撮像装置１００の向きを変える等して、構図を変える場合がある。この場合、ＡＳＩＣ１３５は、撮像装置１００の向きの変化を含む移動量に基づき、焦点調節時に焦点調節された焦点調節領域が、移動後の画角内でいずれの位置に対応するかを特定し、特定した位置を集音範囲に含むように、集音に使用すべきマイクを選択してよい。撮像装置１００は、ジャイロセンサまたは加速度センサ等、撮像装置１００の移動量を検出する検出器をさらに備えてよい。
【００７０】
以上の説明において、撮像装置１００は、外付マイク１５１と、外付マイク１５１よりも広い集音範囲を持つ内蔵マイク１５２を備えるとしたが、撮像装置１００は、外付マイク１５１と、外付マイク１５１よりも狭い集音範囲を持つ内蔵マイク１５２を備えるとしてもよい。マイクはともに内蔵マイクであってよいし、ともに外付マイクであってよい。また、集音範囲が固定のマイクを用いるとしたが、集音範囲の広さが可変の１以上のマイクを用いてもよい。集音範囲の広さが可変なマイクとしては、複数個のマイクユニットの出力信号を遅延や重み付けを変えて演算することによりズーム特性を得る形式、または、複数個のマイクユニットの指向性の向きを機械的に変えることによりズーム特性を得る形式のズームマイクを適用することができる。すなわち、撮像装置１００は、集音範囲の広さが可変なマイクを集音部として有し、ＡＳＩＣ１３５は、集音範囲が視野範囲内の合焦領域を含むよう、マイクの集音範囲の広がりを制御してもよい。
【００７１】
上記実施形態においては、レンズ交換式カメラの一例である一眼レフレックスカメラとしての撮像装置１００を例に説明した。しかし、撮像装置１００として、一眼レフレックスカメラ以外のレンズ交換式カメラ、コンパクトデジタルカメラ等のレンズ非交換式カメラ、ミラーレス一眼カメラ、ビデオカメラ、撮像機能付きの携帯電話機、撮像機能付きのゲーム機器等を適用の対象とすることができる。また、撮像装置１００に関連して説明した処理は、撮像装置１００の各部、例えばカメラＭＰＵ１３３等が、プログラムに従ってＡＳＩＣ１３５、システムメモリ１３９、ＳＤＲＡＭ１３６などと協働して動作することにより実現することができる。すなわち、当該処理を、いわゆるコンピュータ装置によって実現することができる。コンピュータ装置は、上述した処理の実行を制御するプログラムをロードして、読み込んだプログラムに従って動作して、当該処理を実行してよい。コンピュータ装置は、当該プログラムを記憶しているコンピュータ読取可能な記録媒体を読み込むことによって、当該プログラムをロードすることができる。
【００７２】
なお、撮像装置１００を例に挙げて説明した。すなわち、ＡＳＩＣ１３５は、ＡＳＩＣ１３５、カメラＭＰＵ１３３およびレンズＭＰＵ１２３を主体とした焦点調節によって合焦した焦点調節領域に対応する範囲を集音範囲が含むよう、集音範囲の広がりを制御するとした。しかし、本制御は、撮像装置１００に限られず、他の機器にも適用し得る。例えば、上述した合焦領域を特定する処理に係る制御、および、集音範囲の広がりを制御する処理に係る制御等を、双眼鏡、望遠鏡の処理として適用することができる。
【００７３】
以上、本発明を実施の形態を用いて説明したが、本発明の技術的範囲は上記実施の形態に記載の範囲には限定されない。上記実施の形態に、多様な変更または改良を加えることが可能であることが当業者に明らかである。その様な変更または改良を加えた形態も本発明の技術的範囲に含まれ得ることが、特許請求の範囲の記載から明らかである。
【００７４】
特許請求の範囲、明細書、および図面中において示した装置、システム、プログラム、および方法における動作、手順、ステップ、および段階等の各処理の実行順序は、特段「より前に」、「先立って」等と明示しておらず、また、前の処理の出力を後の処理で用いるのでない限り、任意の順序で実現しうることに留意すべきである。特許請求の範囲、明細書、および図面中の動作フローに関して、便宜上「まず、」、「次に、」等を用いて説明したとしても、この順で実施することが必須であることを意味するものではない。
【符号の説明】
【００７５】
１００  撮像装置、１２０  交換レンズ、１２１  レンズマウント接点、１３０  カメラ本体、１３１  カメラマウント接点、１２２  レンズ群、１３２  撮像素子、１２３  レンズＭＰＵ、１３３  カメラＭＰＵ、１３４  Ａ／Ｄ変換器、１３５  ＡＳＩＣ、１３６  ＳＤＲＡＭ、１３７  表示制御部、１３８  表示部、１３９  システムメモリ、１４０  露光制御部、１４１  操作入力部、１４５  接続インタフェース、１５１  外付マイク、１５２  内蔵マイク、１６０  外部メモリ、１７０  電源、３１０、３２０  感度曲線、３１１、３１２、３２１、３２２、３３１、３３２  線、４００、１１００  画像領域、８１０、９１０、９２０、１００１、１００２、１０１１、１０１２、１０２１、１０２２、１１１０、１１２０  集音範囲、１０００、１０１０、１０２０  フレーム画像
【図１】
2013121000.tif 000003
【図２】
2013121000.tif 000004
【図３】
2013121000.tif 000005
【図４】
2013121000.tif 000006
【図５】
2013121000.tif 000007
【図６】
2013121000.tif 000008
【図７】
2013121000.tif 000009
【図８】
2013121000.tif 000010
【図９】
2013121000.tif 000011
【図１０】
2013121000.tif 000012
【図１１】
2013121000.tif 000013