(57)【要約】【課題】煩雑な操作を伴うことなく被写体が発する音声を優先的に集音できる撮像装置を提供することを目的とする。【解決手段】被写体像を撮像して画像情報を生成するＣＣＤイメージセンサ１４３と、画像情報から被写体領域を抽出するデジタル画像・音声処理部１２０と、被写体領域の画像情報内における位置情報に基づいて被写体に対する指向性空間を示す情報を生成するコントローラ１３０と、外部から入力される音声に基づいて第１の音声情報を生成する指向性制御用マイク１１１Ｌおよび１１１Ｒと、第１の音声情報に対し、指向性空間を示す情報に基づいて処理を行うアナログ音声処理部１１５とを備える。【選択図】図４
2011188055.tif 000002
【特許請求の範囲】
【請求項１】
被写体像を撮像して画像情報を生成する撮像部と、
前記画像情報から被写体領域を抽出する被写体認識部と、
前記被写体領域の前記画像情報内における位置情報に基づいて被写体に対する指向性空間を生成するための情報を生成する指向性空間情報生成部と、
外部から入力される音声に基づいて第１の音声情報を生成する第１の音声入力部と、
前記第１の音声情報に対し、前記指向性空間を示す情報に基づいて処理を行う第１の音声処理部と、
を備えた撮像装置。
【請求項２】
前記被写体認識部は、前記画像情報において被写体の顔を検出し、被写体領域として決定する、請求項１記載の撮像装置。
【請求項３】
外部から入力される音声に基づいて第２の音声情報を生成する第２の音声入力部と、
前記第２の音声情報に対し、前記第１の音声情報に対する処理とは異なる処理を行う第２の音声処理部と、
前記第１の音声処理部から出力される第１の音声情報および前記第２の音声処理部から出力される第２の音声情報を合成し、合成音声情報を生成する合成部と、
を備えた請求項１記載の撮像装置。
【請求項４】
前記位置情報は、前記被写体領域の画像情報内における座標に関する情報を含む、請求項１記載の撮像装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は被写体を撮像する撮像装置に関し、特に音声データと共に動画記録を行う撮像装置に関する。
【背景技術】
【０００２】
被写体を撮像し、音声と共に動画像を記録可能なデジタルカメラ等の撮像装置が普及している。このような撮像装置は、集音のためにマイクを備えている。
【０００３】
従来のマイクとしては、目標とする方向の音を優先的に集音できるようにした構成が開示されている（例えば、特許文献１参照。）。この従来のマイクは、複数個の受音素子を並設し、これらの出力を所定の大きさ、および位相で合成し、高次の合成指向性特性の出力信号を出力することにより、目標とする方向の音声の向きに合わせて指向性特性の方向を合わせることができるとしている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平６−２６９０８２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
このような従来のマイクを備えた撮像装置を考えた場合、撮影対象である被写体が発する音声を優先的に集音すべく、撮像装置と被写体との相対位置が変化するたびに、使用者がマイクの指向性について設定する必要があり、操作が煩雑になるという課題があった。
【０００６】
本発明はこのような課題に鑑みてなされたものであり、煩雑な操作を伴うことなく被写体が発する音声を優先的に集音できる撮像装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記課題を解決するために本発明の撮像装置は、被写体像を撮像して画像情報を生成する撮像部と、画像情報から被写体領域を抽出する被写体認識部と、被写体領域の画像情報内における位置情報に基づいて被写体に対する指向性空間を示す情報を生成する指向性空間情報生成部と、外部から入力される音声に基づいて第１の音声情報を生成する第１の音声入力部と、第１の音声情報に対し、指向性空間を示す情報に基づいて処理を行う第１の音声処理部とを備える。
【発明の効果】
【０００８】
本発明によれば、煩雑な操作を伴うことなく被写体が発する音声を優先的に集音できる撮像装置を提供することができる。
【図面の簡単な説明】
【０００９】
【図１】実施の形態１に係るデジタルカメラ１００の前面構成図
【図２】実施の形態１に係るデジタルカメラ１００の背面構成図
【図３】実施の形態１に係るデジタルカメラ１００の上面構成図
【図４】実施の形態１に係るデジタルカメラ１００の電気的構成を示すブロック図
【図５】実施の形態１に係るステレオ合成および指向性制御ブロック図
【図６】実施の形態１に係る音声合成モード移行動作の流れを示すフローチャート
【図７】実施の形態１に係る指向性制御の流れを示すフローチャート
【図８】実施の形態１に係る指向性空間の生成を説明するための図
【発明を実施するための形態】
【００１０】
〔実施の形態１〕
実施の形態１のデジタルカメラ１００は、被写体の顔認識を行い、撮像した画像情報の画面内における被写体の位置情報に基づいて指向性空間を生成し、狭い範囲の音声を記録する指向性制御用マイクの制御を行う。以下、デジタルカメラ１００の構成および動作を説明する。
【００１１】
〔１．構成〕
以下図を用いてデジタルカメラ１００の構成を説明する。
【００１２】
〔１−１．デジタルカメラ１００の構成〕
図１は、デジタルカメラ１００の前面構成図である。デジタルカメラ１００は、前面に鏡筒１４１や、フラッシュ２００を備える。また、デジタルカメラ１００は上面にレリーズ釦１８１やズームレバー１８２、電源釦１８３、モードダイヤル１８４などの操作部１８０を備える。
【００１３】
図２は、デジタルカメラ１００の背面構成図である。デジタルカメラ１００は背面に表示部１９０や、中央釦１８５や十字釦１８６などの操作部１８０を備える。
【００１４】
図３は、デジタルカメラ１００の上面構成図である。デジタルカメラ１００は上面の左右各二ヶ所にマイク孔２１０を備える。マイク孔の下部には、指向性制御用のマイク１１１Ｌおよび１１１Ｒ、通常用のマイク１１２Ｌおよび１１２Ｒを備える。
【００１５】
図４は、デジタルカメラ１００の電気的構成図である。デジタルカメラ１００は、外部から得られた画像情報および音声情報を生成する。画像情報は画像入力系１４０によって生成される。また、音声情報は音声入力系１１０によって生成される。生成された画像情報および音声情報はＡ／Ｄ変換され、デジタル画像・音声処理部１２０で各処理が施された後、外部記憶媒体１６０に記録される。外部記憶媒体１６０に記録された画像情報および音声情報は、使用者による操作部１８０の操作を受け付けて表示部１９０に表示される。以下、図１から図５に示す各構成の詳細を説明する。
【００１６】
画像入力系１４０は、鏡筒１４１やレンズ制御部１４２、ＣＣＤイメージセンサ１４３、ＡＦＥ（アナログ・フロント・エンド）１４４により構成される。
【００１７】
鏡筒１４１は、レンズ制御部１４２から通知された制御信号に従って駆動されたモータによって、被写体のフォーカス調節や画角調節、入射する光量調節、手ぶれ補正などを行い、被写体像を形成する。
【００１８】
ＣＣＤイメージセンサ１４３は、鏡筒１４１を通して形成された被写体像を撮像して画像情報を生成する。ＣＣＤイメージセンサ１４３の受光面には多数のフォトダイオードが２次元的に配列されている。また、各フォトダイオードに対応してＲ、Ｇ、Ｂの原色カラーフィルターが所定の配列構造で配置されている。撮像対象となる被写体からの光は、鏡筒１４１を通過した後に、ＣＣＤイメージセンサ１４３の受光面に結像される。結像された被写体像は、各フォトダイオードへ入射した光量に応じてＲ、Ｇ、Ｂに仕分けられたそれぞれの色情報に変換される。その結果、被写体像を示す全体の画像情報が生成される。各フォトダイオードは、ＣＣＤイメージセンサ１４３の画素に対応する。しかし、各フォトダイオードから実際に出力される色情報は、Ｒ、Ｇ、Ｂのいずれかの原色情報である。そのため、各画素のそれぞれで発現させるべき色は、後段のデジタル画像・音声処理部１２０において、各画素に対応するフォトダイオードおよび、その周辺のフォトダイオードから出力される原色情報（色、光量）に基づき生成される。なお、ＣＣＤイメージセンサ１４３は、デジタルカメラ１００が撮影モードにあるとき、一定時間ごとに新しいフレームの画像情報を生成することができる。
【００１９】
ＡＦＥ１４４では、ＣＣＤイメージセンサ１４３から読み出された画像情報に対して相関二重サンプリングによる雑音抑圧、アナログゲインコントローラによるＡ／Ｄコンバータの入力レンジ幅への増幅、Ａ／ＤコンバータによるＡ／Ｄ変換が施される。その後、ＡＦＥ１４４は画像情報をデジタル画像・音声処理部１２０に出力する。
【００２０】
音声入力系１１０は、指向性制御用のマイク１１１Ｌおよび１１１Ｒや通常用のマイク１１２Ｌおよび１１２Ｒ、アナログ音声処理部１１５により構成される。指向性制御用マイク１１１Ｌおよび１１１Ｒは、デジタルカメラ１００の上面に、左右方向に並べて配置される。通常用マイク１１２Ｌおよび１１２Ｒも同様に、デジタルカメラ１００の上面に、左右方向に並べて配置される。また、指向性制御用マイク１１１Ｌおよび１１１Ｒの中央位置と、通常用マイク１１２Ｌおよび１１２Ｒの中央位置とは、左右方向の位置が一致するように配置される。
【００２１】
アナログ音声処理部１１５は、指向性制御用マイク１１１Ｌおよび１１１Ｒから入力される第１の音声情報に対して、コントローラ１３０から出力される被写体に対する指向性空間を示す情報に基づいて増幅処理およびフィルタ処理を行う。また、通常用マイク１１２Ｌおよび１１２Ｒから入力される第２の音声情報に対して、通常の増幅処理およびフィルタ処理を行う。ここで通常の増幅処理およびフィルタ処理とは、指向性空間を示す情報に依存せずに行われる処理である。またアナログ音声処理部１１５は、処理した音声情報をＡ／ＤコンバータによりＡ／Ｄ変換し、デジタル画像・音声処理部１２０に出力する。
【００２２】
図５は、アナログ音声処理部１１５がステレオ合成および指向性制御を行うための構成の一例を示すブロック図である。ステレオ合成は、Ｌｃｈ側とＲｃｈ側から入力された信号から位相比較回路１１５Ｋにより位相を比較し、その位相差によってアンプ１１５Ｅ、１１５Ｆ、１１５Ｉ、１１５Ｊの増幅量を設定し、ＬｃｈとＲｃｈの増幅調節を行う。また、指向性制御用マイク１１１Ｌと１１１Ｒの指向性制御には、位相差補正回路１１５Ｌを用いる。位相差補正回路１１５Ｌは、コントローラ１３０から出力された被写体に対する指向性空間を示す情報（被写体までの距離ｄおよび光軸に対する角度θ）から、位相差を補正するための値を位相比較回路１１５Ｋに出力する。
【００２３】
デジタル画像・音声処理部１２０は、ＡＦＥ１４４から出力された画像情報およびアナログ音声処理部１１５から出力された音声情報に対して各種の処理を施す。例えばデジタル画像・音声処理部１２０は、画像情報に対してガンマ補正やホワイトバランス補正、傷補正、符号化処理を行う。また、デジタル画像・音声処理部１２０は、コントローラ１３０からの指示に従って画像情報から被写体の領域を抽出し、画像情報内（画面内）における２次元位置情報をコントローラ１３０に出力する。デジタル画像・音声処理部１２０が抽出する被写体の領域とは、例えば人物の顔を含む領域である。また、デジタル画像・音声処理部１２０は、第１の音声情報と第２の音声情報の合成を行い、合成音声情報を生成する。デジタル画像・音声処理部１２０は、ハードワイヤードな電子回路で構成してもよいし、プログラムを用いたマイクロコンピュータなどで構成してもよい。またコントローラ１３０などと共に１つの半導体チップで構成してもよい。
【００２４】
表示部１９０は、デジタルカメラ１００の背面に備わる。表示部１９０は、デジタル画像・音声処理部１２０にて処理された画像情報に基づく画像を表示する。表示部１９０が表示する画像には、スルー画像や記録画像がある。スルー画像は、ＣＣＤイメージセンサ１４３により一定時間ごとに生成される新しいフレームの画像を連続して表示する画像である。通常は、デジタルカメラ１００が撮影モードに設定されており、かつ静止画撮影や動画撮影を行っていない待機状態にあるときに、デジタル画像・音声処理部１２０がＣＣＤイメージセンサ１４３の生成した画像情報からスルー画像を生成する。使用者は、表示部１９０に表示されるスルー画像を参照することにより、被写体の構図を確認しながら撮影できる。記録画像は、デジタルカメラ１００が再生モードにあるときに、外部記憶媒体１６０等に記録された高画素の画像を表示部１９０に表示するために低画素に縮小した画像である。外部記憶媒体１６０に記録される高画素の画像情報は、使用者によるレリーズ釦１８１の操作を受け付けた後に、ＣＣＤイメージセンサ１４３が生成した画像情報に基づいてデジタル画像・音声処理部１２０により生成される。スピーカー１９５は、外部記憶媒体１６０に記録された音声情報を出力する。
【００２５】
コントローラ１３０は、デジタルカメラ１００全体の動作を統括制御する。また、コントローラ１３０は、ＡＦ動作の際に得られた焦点距離、および、デジタル画像・音声処理部１２０が出力する被写体の画面内の２次元位置情報に基づいて、被写体に対する指向性空間を生成するための情報を生成する。
【００２６】
ＲＯＭ１７０は、コントローラ１３０が実行するための、オートフォーカス制御（ＡＦ制御）や自動露出制御（ＡＥ制御）、フラッシュ２００の発光制御に関するプログラムの他、デジタルカメラ１００全体の動作を統括制御するためのプログラムを格納している。
【００２７】
コントローラ１３０は、ハードワイヤードな電子回路で構成してもよいし、マイクロコンピュータなどで構成してもよい。また、デジタル画像・音声処理部１２０などと共に１つの半導体チップで構成してもよい。また、ＲＯＭ１７０はコントローラ１３０の外部に備わっている必要はなく、コントローラ１３０の内部に備わったものでもよい。
【００２８】
ＲＡＭ１５０は、デジタル画像・音声処理部１２０やコントローラ１３０のワークメモリとして機能する記憶手段である。ＲＡＭ１５０はＳＤＲＡＭやフラッシュメモリなどで実現できる。また、ＲＡＭ１５０は、画像情報や音声情報などを記録するための内部メモリとしても機能する。
【００２９】
外部記憶媒体１６０は、内部にフラッシュメモリ等の記録部を備えた外部メモリである。外部記憶媒体１６０は、デジタル画像・音声処理部１２０で処理される画像情報や音声情報などのデータを記録可能である。
【００３０】
操作部１８０は、デジタルカメラ１００の外装に備わっている操作釦や操作ダイヤルの総称であり、使用者による操作を受け付ける。例えば図１や図２、図３に示したレリーズ釦１８１や、ズームレバー１８２、電源釦１８３、モードダイヤル１８４、中央釦１８５、十字釦１８６などがこれにあたる。操作部１８０は使用者による操作を受け付けると、コントローラ１３０に種々の動作指示信号を通知する。
【００３１】
レリーズ釦１８１は、半押し状態と全押し状態の二段階押下式釦である。レリーズ釦１８１が使用者により半押しされると、コントローラ１３０は、ＡＦ（Ａｕｔｏ  Ｆｏｃｕｓ）制御や、ＡＥ（Ａｕｔｏ  Ｅｘｐｏｓｕｒｅ）制御を実行し撮影条件を決定する。ＡＦ制御においては、デジタル画像・音声処理部１２０が画像情報の所定領域におけるコントラスト値を算出し、これに基づいてコントローラ１３０がレンズ制御部１４２を通じて鏡筒１４１を駆動させ、コントラスト値が最大になるようにフィードバック制御を行う。ＡＦ制御の結果、コントローラ１３０はＡＦ制御対象の被写体までの焦点距離を得ることができる。続いて、レリーズ釦１８１が、使用者により全押しされると、コントローラ１３０は、全押しのタイミングに撮像された画像情報を外部記憶媒体１６０などに記録する。
【００３２】
ズームレバー１８２は画角調節についての広角端と望遠端を有する中央位置自己復帰式のレバーである。ズームレバー１８２は、使用者により操作されるとコントローラ１３０に鏡筒１４１を駆動するための動作指示信号を通知する。すなわち、ズームレバー１８２が広角側に操作されると、コントローラ１３０は、レンズ制御部を介して被写体を広角で捉えられるように鏡筒１４１を駆動する。同様に、ズームレバー１８２が望遠側に操作されると、コントローラ１３０は、レンズ制御部を介して被写体を望遠で捉えられるように鏡筒１４１を駆動する。
【００３３】
電源釦１８３は、デジタルカメラ１００を構成する各部への電力供給をＯＮ／ＯＦＦするためのスライド式釦である。電源ＯＦＦ時に電源釦１８３が使用者により右方にスライドされると、コントローラ１３０はデジタルカメラ１００を構成する各部に電力を供給し、起動させる。また、電源ＯＮ時に電源釦１８３が使用者により左方にスライドされると、コントローラ１３０は各部への電力供給を停止する。
【００３４】
モードダイヤル１８４は、回転式ダイヤルである。モードダイヤル１８４が使用者により回転されると、コントローラ１３０はデジタルカメラ１００の動作モードを対応する動作モードに切り替える。対応する動作モードとは、オート撮影モード、マニュアル撮影モード、シーン選択モード、再生モードなどである。なお、オート撮影モード、マニュアル撮影モードおよびシーン選択モードを総称して撮影モードと呼ぶものとする。
【００３５】
中央釦１８５は、押下式釦である。デジタルカメラ１００が撮影モードあるいは再生モードにあるときに、中央釦１８５が使用者により押下されると、コントローラ１３０は表示部１９０にメニュー画面を表示する。メニュー画面とは、撮影／再生のための各種条件を設定するための画面である。各種条件の設定項目が選択されているときに押下されると、中央釦１８５は決定釦としても機能する。
【００３６】
十字釦１８６は、上下左右方向に設けられた押下式釦である。使用者は、十字釦１８６のいずれかの方向を押下することにより、表示部１９０に表示される各種条件項目を選択することができる。
【００３７】
フラッシュ２００は、キセノン管と、コンデンサと、昇圧回路と、発光トリガ回路などから構成される。昇圧回路は、コントローラ１３０からの制御信号に従って、コンデンサに高電圧を印加する。発光トリガ回路は、コントローラ１３０からの制御信号に従って、印加充電されたコンデンサの高電圧を放電させて、キセノン管内のキセノンガスを瞬間的に発光させる。発光トリガ回路は、コンデンサの高電圧を撮影と同期して放電させる。これにより、デジタルカメラ１００は、発光された被写体を撮影することができる。すなわち、フラッシュ２００が被写体に対して撮像時に瞬間的に発光することによって、被写体の明るさを補った撮影ができる。なお、フラッシュ２００の発光には、プリ発光と本発光がある。プリ発光は、フラッシュ発光による被写体からの反射光量の度合に基づいて被写体までの距離を判定し、判定結果に応じて撮影時のフラッシュ２００の発光量を求めるための、撮影事前の発光である。本発光は、プリ発光により求められた発光量により、撮影のタイミングと同期して実行される発光である。
【００３８】
〔１−２．本発明との対応関係〕
指向性制御用マイク１１１Ｌおよび１１１Ｒは、本発明の第１の音声入力部の一例である。通常用マイク１１２Ｌおよび１１２Ｒは、本発明の第２の音声入力部の一例である。アナログ音声処理部１１５は、本発明の第１の音声処理部の一例である。アナログ音声処理部１１５は、本発明の第２の音声処理部の一例である。デジタル画像・音声処理部１２０は、本発明の合成部の一例である。デジタル画像・音声処理部１２０は、本発明の被写体認識部の一例である。コントローラ１３０は、本発明の指向性空間情報生成部の一例である。ＣＣＤイメージセンサ１４３は、本発明の撮像部の一例である。デジタルカメラ１００は、本発明の撮像装置の一例である。
【００３９】
〔２．動作〕
続いて、本実施の形態１に係るデジタルカメラ１００の動画撮影モード時の動作について説明する。デジタルカメラ１００は、動画撮影モードにおける待機状態または動作撮影中である動画撮影状態において、被写体の顔認識から得られた被写体の位置情報に基づいて、合成音声モードへの移行を判断する。合成音声モードへ移行した場合、指向性空間の生成は対象の被写体を検出している限り、リアルタイムで継続し行われる。以下ではまず指向性空間の生成の判断について説明し、次に動画撮影中の指向性空間の生成の制御について説明する。
【００４０】
〔２−１．音声合成モード移行の判断〕
まず、デジタルカメラ１００の動画撮影モードにおける音声合成モード移行の判断について説明する。図６は、デジタルカメラ１００の音声合成モード移行の判断フローチャートである。デジタルカメラ１００は、指向性制御用のマイクから得られる第１の音声情報と通常用のマイクから得られる第２の音声情報を合成する音声合成モードへの移行の可否を判断する。
【００４１】
コントローラ１３０は、デジタル画像・音声処理部１２０に顔認識処理を指示する。デジタル画像・音声処理部１２０は、コントローラ１３０からの指示に従い画像入力系１４０から得られる画像情報を元に顔認識を行う（Ｓ３０１）。コントローラ１３０は、デジタル画像・音声処理部からの認識結果から顔認識の可否を判断する（Ｓ３０２）。顔認識ができなかった場合、コントローラ１３０は音声合成モードへの移行は否と判断し、指向性制御用マイク１１１Ｌおよび１１１Ｒを使用せず、通常用マイク１１２Ｌおよび１１２Ｒのみを使用する通常モードに移行する（Ｓ３０８）。一方、顔認識ができた場合、コントローラ１３０は顔認識できた被写体の数を判断する（Ｓ３０４）。コントローラ１３０は、顔認識できた被写体の数が２人以上の場合、使用者に操作部１８０を用いて、１人を選択するように指示をし、使用者の入力に従い１人の被写体を決定する（Ｓ３０５）。コントローラ１３０は、レンズ制御部１４２を制御し、決定した被写体に対し、ＡＦロックを行う（Ｓ３０６）。ＡＦロックとは、対象の被写体に対して、ＡＦ動作を追従させることを指す。被写体の顔が画面内で移動した場合でも、デジタル画像・音声処理部１２０が移動前および移動後に認識した顔が同一人物のものであると判定した場合、コントローラ１３０は、被写体の顔が移動したことを検出できる。したがって、顔認識した被写体の顔に対してＡＦロックを行うことにより、画面内で被写体の顔が移動した場合でも、その領域に対してＡＦ動作を追従させることができる。一方、顔認識できた被写体が１人の場合、コントローラ１３０はレンズ制御部１４２を制御し、その被写体に対しＡＦロックを行う（Ｓ３０６）。その後、コントローラ１３０は、音声合成モードへの移行は可と判断し、指向性制御用マイクを使用する音声合成モードに移行する（Ｓ３０７）。
【００４２】
〔２−２．指向性制御処理〕
次に、デジタルカメラ１００が音声合成モードに移行した際における指向性制御用マイクの指向性制御処理について説明する。図７は、デジタルカメラ１００の音声合成モードにおける指向性制御のフローチャートである。
【００４３】
音声合成モードに移行すると、コントローラ１３０はまず、対象の被写体に対し、ＡＦロックが継続しているかを判断する（Ｓ４０１）。被写体の顔を認識できなかった等の理由によりＡＦロックが継続されていない場合、コントローラ１３０は、指向性制御の設定を解除し、通常モードに移行し動画撮影を継続する（Ｓ４０５）。一方、ＡＦロックが継続している場合、コントローラ１３０は対象の被写体までの距離ｄと光軸に対する角度θを取得し、これを被写体に対する指向性空間を生成するための情報とする（Ｓ４０２）。以下、距離ｄと角度θの具体的な決定方法について説明する。コントローラ１３０は、ＡＦ動作の際に得られた焦点距離から対象の被写体までの距離ｄを決定する。コントローラ１３０は、デジタル画像・音声処理部１２０から対象の被写体の画面内における二次元座標を取得し、その水平方向の座標をＡＦ動作の際に得られた画角と対比することによって、デジタルカメラ１００から対象の被写体までを結ぶ線分と、デジタルカメラ１００の光軸とのなす角を水平面に投影した角度θを決定する。次にコントローラ１３０は、対象の被写体に対する指向性空間を示す情報をアナログ音声処理部に入力することによって、指向性制御用マイクの指向性空間５００を設定する（Ｓ４０３）。以上の動作は動画撮影が終了するまで繰り返される（Ｓ４０４）。
【００４４】
ステップＳ４０３において、指向性空間５００は次のように設定される。図８（ａ）と図８（ｂ）は、指向性制御用マイクの指向性空間５００を説明するための図である。図の縦軸はデジタルカメラ１００の光軸方向を示し、横軸はデジタルカメラ１００の左右方向（光軸に垂直な方向）を示す。指向性空間５００は、被写体５０１を含む領域として形成され、デジタルカメラ１００を基準とした被写体方向の指向性空間の長さをｌ、被写体方向と垂直な方向の指向性空間の幅をｗとする。指向性空間５００の被写体方向の中心軸５０２上に、被写体５０１が位置する。コントローラ１３０から得られた指向性空間を生成するための情報は、それぞれデジタルカメラ１００からの距離ｄとデジタルカメラ１００の光軸から被写体までの角度θに対応する。距離ｄは形成される指向性空間の長さｌと幅ｗに対応し、距離ｄが短いほど長さｌは短く、幅ｗは長くなる。一方、距離ｄが長いほど長さｌは長く、幅ｗは短くなる。また、角度θは指向性空間５００の中心軸５０２に対応し、中心軸５０２は光軸からθずれた位置に設定される。上記処理により、アナログ音声処理部１１５は距離ｄと角度θから指向性空間５００を設定する。アナログ音声処理部１１５は、指向性制御用マイク１１１Ｌおよび１１１Ｒから入力された第１の音声情報を、コントローラ１３０から出力された被写体に対する指向性空間を生成するための情報に基づいて生成した指向性空間５００に従い、増幅処理およびフィルタ処理を行った後、Ａ／Ｄ変換を施し、デジタル画像・音声処理部１２０に出力する。デジタル画像・音声処理部はアナログ音声処理部１１５から出力された第１の音声情報および第２の音声情報を合成し、合成音声情報を生成する。
【００４５】
上記構成により、対象の被写体に対して、あたかもマイクを近づけているかのような音声情報を生成することができ、被写体の位置情報に応じて指向性空間を設定しないときと比較して、対象の被写体の声が明瞭に記録される。
【００４６】
〔３．まとめ〕
以上のように、実施の形態１に係るデジタルカメラ１００は、被写体像を撮像して画像情報を生成するＣＣＤイメージセンサ１４３と、画像情報から被写体領域を抽出するデジタル画像・音声処理部１２０と、被写体領域の画像情報内における位置情報に基づいて被写体に対する指向性空間を示す情報を生成するコントローラ１３０と、外部から入力される音声に基づいて第１の音声情報を生成する指向性制御用マイク１１１Ｌおよび１１１Ｒと、第１の音声情報に対し、指向性空間を示す情報に基づいて処理を行うアナログ音声処理部１１５とを備える。
【００４７】
このような構成とすることにより、被写体領域の画像情報内における位置情報に基づいて被写体に対する指向性空間を設定できるため、煩雑な操作を伴うことなく被写体が発する音声を優先的に集音することができる。
【００４８】
また、上記実施の形態１に係るデジタルカメラ１００において、デジタル画像・音声処理部１２０は、画像情報において被写体の顔を検出し、被写体領域として決定する。
【００４９】
このような構成とすることにより、被写体の顔の画像情報内における位置情報に基づいて指向性空間を設定できるため、煩雑な操作を伴うことなく被写体が発する音声を優先的に集音することができる。
【００５０】
また、上記実施の形態１に係るデジタルカメラ１００において、外部から入力される音声に基づいて第２の音声情報を生成する通常用マイク１１２Ｌおよび１１２Ｒを備え、アナログ音声処理部１１５は、第２の音声情報に対し、第１の音声情報に対する処理とは異なる処理を行い、デジタル画像・音声処理部１２０は、第１の音声情報および前記第２の音声情報を合成する。
【００５１】
このような構成とすることにより、被写体が発する音声と、通常用マイク１１２Ｌおよび１１２Ｒが集音した被写体以外が発する音声（環境音）とを合成することができる。
【００５２】
〔４．他の実施の形態〕
本発明は、上記実施の形態に限定されず、種々の実施の形態が考えられる。以下、本発明の他の実施の形態についてまとめて記載する。
【００５３】
上記実施の形態において、デジタル画像・音声処理部１２０およびコントローラ１３０は、各々上記のような機能および構成を有するものとして説明したが、各々の持つ機能および構成の一部が他方に含まれるような構成としてもよい。
【００５４】
上記実施の形態において、ＣＣＤイメージセンサ１４３を、撮像部の一例として説明したが、本発明はこれに限定されない。すなわち、ＣＭＯＳイメージセンサや、ＮＭＯＳイメージセンサなど他の撮像素子であっても本発明に適用可能である。
【産業上の利用可能性】
【００５５】
本発明によれば、煩雑な操作を伴うことなく被写体が発する音声を優先的に集音できる撮像装置を提供することができるため、デジタルカメラ、ムービーカメラ、カメラ付き携帯電話など、音声データと共に動画記録を行う撮像装置にも適用可能である。
【符号の説明】
【００５６】
１００  デジタルカメラ
１１０  音声入力系
１１１Ｌ  マイク
１１１Ｒ  マイク
１１２Ｌ  マイク
１１２Ｒ  マイク
１１５  アナログ音声処理部
１１５Ａ  フィルタ１
１１５Ｂ  フィルタ２
１１５Ｃ  フィルタ３
１１５Ｄ  フィルタ４
１１５Ｅ  アンプ１
１１５Ｆ  アンプ２
１１５Ｇ  フィルタ５
１１５Ｈ  フィルタ６
１１５Ｉ  アンプ３
１１５Ｊ  アンプ４
１１５Ｋ  位相比較回路
１１５Ｌ  位相差補正回路
１２０  デジタル画像・音声処理部
１３０  コントローラ
１３１  距離情報入力部
１３２  角度情報入力部
１４０  画像入力系
１４１  鏡筒
１４２  レンズ制御部
１４３  ＣＣＤイメージセンサ
１５０  ＲＡＭ
１６０  外部記憶媒体
１７０  ＲＯＭ
１８０  操作部
１８１  レリーズ釦
１８２  ズームレバー
１８３  電源釦
１８４  モードダイヤル
１８５  中央釦
１８６  十字釦
１９０  表示部
１９５  スピーカー
２００  フラッシュ
２１０  マイク孔
【図１】
2011188055.tif 000003
【図２】
2011188055.tif 000004
【図３】
2011188055.tif 000005
【図４】
2011188055.tif 000006
【図５】
2011188055.tif 000007
【図６】
2011188055.tif 000008
【図７】
2011188055.tif 000009
【図８】
2011188055.tif 000010