(57)【要約】【課題】  近くから発せられる大きな音声から遠くで発せられる小さな音声まで、幅広い音量の音声を聞き取りやすい音声として録音可能な録音レベル制御機能を備えた撮像装置を提供する。【解決手段】  本発明の撮像装置は、主制御手段と、表示手段と、動画像録画手段と、音声入力手段と、録音レベル制御手段と、を備え、録音レベル制御手段は、音声信号の利得を増減させる可変利得増減手段と、入力電圧値を基準電圧値に近づけるように可変利得増減手段を制御する自動利得制御手段と、動画像データから顔を認識する顔認識手段と、顔認識手段が認識した顔の寸法に対応した基準電圧値を算出する基準電圧値算出手段と、基準電圧値算出手段が算出した基準電圧値を自動利得制御手段の基準電圧値として設定する基準電圧値設定手段と、から構成されている。【選択図】      図５
2010239356.tif 000002
【特許請求の範囲】
【請求項１】
主制御手段と、
動画撮影により動画像データを生成記録する動画像録画手段と、
該動画像録画手段が撮影しているスルー画像等が表示される表示手段と、
音声を音声信号に変換する音声入力手段と、
録音レベルを制御する録音レベル制御手段と、を備え、
該録音レベル制御手段は、
前記音声信号の利得を増減させる可変利得増減手段と、
前記音声信号の電圧値を所定の基準電圧値に近づけるように前記可変利得増減手段を制御する自動利得制御手段と、
前記表示手段に表示されたスルー画像の動画像データから顔を認識する顔認識手段と、
該顔認識手段が認識した顔の寸法に対応した前記基準電圧値を算出する基準電圧値算出手段と、
該基準電圧値算出手段が算出した基準電圧値を前記自動利得制御手段の基準電圧値として設定する基準電圧値設定手段と、から構成されていることを特徴とする撮像装置。
【請求項２】
前記顔認識手段が認識した顔における口の動きを検出する口動作検出手段を有し、
前記主制御手段は、前記口動作検出手段が所定の顔における口の動きを検出したとき、前記基準電圧値設定手段として、口が動いた所定の顔に対応する前記基準電圧値算出手段が算出した基準電圧値を前記自動利得制御手段の基準電圧値として設定することを特徴とする請求項１に記載の撮像装置。
【請求項３】
前記顔認識手段が複数の顔を認識し、前記口動作検出手段が複数の顔における口の動きを検出したとき、
前記主制御手段は、前記基準電圧値設定手段として、前記口動作検出手段が口の動きを検出した複数の顔に対応する夫々の基準電圧値の平均値を前記自動利得制御手段の基準電圧値として設定することを特徴とする請求項２に記載の撮像装置。
【請求項４】
前記顔認識手段が認識した顔を囲む枠を前記表示手段に表示させる顔枠表示手段を有し、
前記主制御手段は、前記基準電圧値算出手段として、前記顔枠表示手段が前記表示手段に表示させた顔枠の寸法を算出し、算出した顔枠寸法に対応する基準電圧値を算出することを特徴とする請求項１乃至請求項３のいずれかに記載の撮像装置。
【請求項５】
動画像データから顔を認識する顔認識処理と、
該顔認識処理において認識された顔の寸法から該顔に対応する基準電圧値を算出する基準電圧値算出処理と、
該基準電圧値算出処理で算出した基準電圧値を自動利得制御手段における基準電圧値として設定する基準電圧設定処理と、
該基準電圧設定処理において設定した基準電圧値に音声信号の電圧値を近づけるように可変利得増減手段に利得の制御信号を送信する利得制御信号送信処理と、
該利得制御信号送信処理において送信された制御信号に従って前記音声信号の利得を徐々に増幅させる、或いは、徐々に減少させる利得制御処理と、を行なうことを特徴とする音声レベル制御方法。
【請求項６】
前記基準電圧値算出処理の後、前記顔認識処理で認識した顔の中で口が動いた顔を検出する口動作検出処理を行い、該口動作検出処理において検出した口が動いた顔に対応した基準電圧値に前記自動利得制御手段の基準電圧値を設定する前記基準電圧設定処理を行なうことを特徴とする請求項５に記載の音声レベル制御方法。
【請求項７】
前記顔認識処理の後、前記顔認識処理において認識した顔の周りに枠を表示した画像を表示手段に表示させる顔枠表示処理を行なうことを特徴とする請求項５又は請求項６に記載の音声レベル制御方法。
【請求項８】
動画像データから顔を認識する顔認識処理と、
該顔認識処理において認識された顔の寸法から該顔に対応する基準電圧値を算出する基準電圧値算出処理と、
該基準電圧値算出処理で算出した基準電圧値を自動利得制御手段における基準電圧値として設定する基準電圧設定処理と、
該基準電圧設定処理において設定した基準電圧値に音声信号の電圧値を近づけるように可変利得増減手段に利得の制御信号を送信する利得制御信号送信処理と、
該利得制御信号送信処理において送信された制御信号に従って前記音声信号の利得を徐々に増幅させる、或いは、徐々に減少させる利得制御処理と、を実現するためのプログラムが記憶されたことを特徴とするコンピュータ読み取り可能な記憶媒体。
【請求項９】
前記顔認識処理で認識した顔の中で口が動いた顔を検出する口動作検出処理を実現するためのプログラムが記憶されたことを特徴とする請求項８に記載のコンピュータ読み取り可能な記憶媒体。
【請求項１０】
前記顔認識処理において認識した顔の周りに枠を表示した画像を表示手段に表示させる顔枠表示処理を実現させるためのプログラムが記憶されたことを特徴とする請求項９又は請求項９に記載のコンピュータ読取り可能な記憶媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、動画撮影機能を備えた撮像装置と、動画撮影時の録音レベル制御方法と、該録音レベル制御方法をコンピュータに実行させるためのプログラムが記憶された記憶媒体と、に関する。
【背景技術】
【０００２】
デジタルカメラ等の撮像装置は、近年多機能化し、ビデオカメラのように動画の撮影機能を有したものが増えている。このような動画撮影機能を有した撮像装置では、音声等を録音するため或いは録音した音声等を再生するために音声Ｃｏｄｅｃ（Ｃｏｄｅｒ-Ｄｅｃｏｄｅｒ）を備えている。
【０００３】
近年の音声Ｃｏｄｅｃは、ゲインアンプの増幅率を調整制御するＡＬＣ（Ａｕｔｏｍａｔｉｃ  Ｌｅｖｅｌ  Ｃｏｎｔｏｒｏｌ）という自動利得制御手段を備えることにより、録音レベルを調整している場合が殆どである（例えば、特許文献１）。このＡＬＣは、録音をするための基準となる電圧値（以下、基準電圧値と呼ぶ。）が予め設定されており、マイク入力された音声信号の電圧値（以下、入力電圧値と呼ぶ。）と基準電圧値を対比し、入力電圧値がこの基準電圧値よりも大きい場合、ゲインアンプに入力と出力の比である利得（ゲイン）を徐々に小さくさせる処理を実行させ、逆に、入力電圧値が基準電圧値よりも小さい場合、利得を徐々に大きくさせる処理を実行させることにより、小さな音から大きな音までを満遍なく録音可能としている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平１０−２４７８３２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
上述したようなＡＬＣによる録音レベルの制御では、基準電圧値を大きく設定した場合、小さな音に関しては大きな音として録音できるためよいが、大きな音に関しては音割れが発生してしまい、音質が悪化してしまうという問題が発生していた。又、逆に、ＡＬＣによる録音レベルの制御では、基準電圧値を小さく設定した場合、大きな音に関しては音割れもなく高音質な録音が可能となるが、小さな音に関しては小さな音のまま録音されるため、聞こえ辛い、或いは、聞き取れないという問題が発生していた。よって、ＡＬＣにおいて基準電圧値を設定することは非常に困難な作業であり、例えバランスの良い基準電圧値を設定した場合であっても録音状況によっては音質が悪化してしまうという問題点があった。
【０００６】
本発明は、上述したような従来技術の問題点に鑑みてなされたものであり、近くから発せられる大きな音声から遠くで発せられる小さな音声まで、幅広い音量の音声を聞き取りやすい音声として録音可能な録音レベル制御機能を備えた撮像装置と、録音レベル制御方法と、この録音レベル制御方法を実現させるためのプログラムが記憶された記憶媒体と、を提供することを目的としている。
【課題を解決するための手段】
【０００７】
本発明の撮像装置は、主制御手段と、動画撮影により動画像データを生成記録する動画像録画手段と、該動画像録画手段が撮影しているスルー画像等が表示される表示手段と、音声を音声信号に変換する音声入力手段と、録音レベルを制御する録音レベル制御手段と、を備え、該録音レベル制御手段は、前記音声信号の利得を増減させる可変利得増減手段と、前記音声信号の電圧値を所定の基準電圧値に近づけるように前記可変利得増減手段を制御する自動利得制御手段と、前記表示手段に表示されたスルー画像の動画像データから顔を認識する顔認識手段と、該顔認識手段が認識した顔の寸法に対応した前記基準電圧値を算出する基準電圧値算出手段と、該基準電圧値算出手段が算出した基準電圧値を前記自動利得制御手段の基準電圧値として設定する基準電圧値設定手段と、から構成されていることを特徴とする。
【０００８】
又、本発明の撮像装置は、前記顔認識手段が認識した顔における口の動きを検出する口動作検出手段を有し、前記主制御手段は、前記口動作検出手段が所定の顔における口の動きを検出したとき、前記基準電圧値設定手段として、口が動いた所定の顔に対応する前記基準電圧値算出手段が算出した基準電圧値を前記自動利得制御手段の基準電圧値として設定することを特徴とする。
【０００９】
更に、本発明の撮像装置において、前記顔認識手段が複数の顔を認識し、前記口動作検出手段が複数の顔における口の動きを検出したとき、前記主制御手段は、前記基準電圧値設定手段として、前記口動作検出手段が口の動きを検出した複数の顔に対応する夫々の基準電圧値の平均値を前記自動利得制御手段の基準電圧値として設定することを特徴とする。
【００１０】
又、本発明の撮像装置において、前記顔認識手段が認識した顔を囲む枠を前記表示手段に表示させる顔枠表示手段を有し、前記主制御手段は、前記基準電圧値算出手段として、前記顔枠表示手段が前記表示手段に表示させた顔枠の寸法を算出し、算出した顔枠寸法に対応する基準電圧値を算出することを特徴とする。
【００１１】
本発明の音声レベル制御方法は、動画像データから顔を認識する顔認識処理と、該顔認識処理において認識された顔の寸法から該顔に対応する基準電圧値を算出する基準電圧値算出処理と、該基準電圧値算出処理で算出した基準電圧値を自動利得制御手段における基準電圧値として設定する基準電圧設定処理と、該基準電圧設定処理において設定した基準電圧値に音声信号の電圧値を近づけるように可変利得増減手段に利得の制御信号を送信する利得制御信号送信処理と、該利得制御信号送信処理において送信された制御信号に従って前記音声信号の利得を徐々に増幅させる、或いは、徐々に減少させる利得制御処理と、を行なうことを特徴とする。
【００１２】
又、本発明の音声レベル制御方法は、前記基準電圧値算出処理の後、前記顔認識処理で認識した顔の中で口が動いた顔を検出する口動作検出処理を行い、該口動作検出処理において検出した口が動いた顔に対応した基準電圧値に前記自動利得制御手段の基準電圧値を設定する前記基準電圧設定処理を行なうことを特徴とする。
【００１３】
更に、本発明の音声レベル制御方法は、前記顔認識処理の後、前記顔認識処理において認識した顔の周りに枠を表示した画像を表示手段に表示させる顔枠表示処理を行なうことを特徴とする。
【００１４】
本発明のコンピュータ読み取り可能な記憶媒体は、動画像データから顔を認識する顔認識処理と、該顔認識処理において認識された顔の寸法から該顔に対応する基準電圧値を算出する基準電圧値算出処理と、該基準電圧値算出処理で算出した基準電圧値を自動利得制御手段における基準電圧値として設定する基準電圧設定処理と、該基準電圧設定処理において設定した基準電圧値に音声信号の電圧値を近づけるように可変利得増減手段に利得の制御信号を送信する利得制御信号送信処理と、該利得制御信号送信処理において送信された制御信号に従って前記音声信号の利得を徐々に増幅させる、或いは、徐々に減少させる利得制御処理と、を実現するためのプログラムが記憶されたことを特徴とする。
【００１５】
又、本発明のコンピュータ読み取り可能な記憶媒体は、前記顔認識処理で認識した顔の中で口が動いた顔を検出する口動作検出処理を実現するためのプログラムが記憶されたことを特徴とする。
【００１６】
更に、本発明のコンピュータ読み取り可能な記憶媒体は、前記顔認識処理において認識した顔の周りに枠を表示した画像を表示手段に表示させる顔枠表示処理を実現させるためのプログラムが記憶されたことを特徴とする。
【発明の効果】
【００１７】
本発明によれば、撮影中の動画像データにおける顔を認識し、認識した顔の大きさに対応した基準電圧値を算出し、算出した基準電圧値の中から所定のものを自動利得制御手段の基準電圧値として設定することにより、近くから発せられる大きな音声から遠くで発せられる小さな音声まで、幅広い音量の音声を聞き取りやすい音声として録音可能な録音レベル制御機能を備えた撮像装置と、録音レベル制御方法と、この録音レベル制御方法を実現させるためのプログラムが記憶された記憶媒体と、を提供することができる。
【図面の簡単な説明】
【００１８】
【図１】本発明の実施例に係る撮像装置の正面図である。
【図２】本発明の実施例に係る撮像装置の背面図である。
【図３】本発明の実施例に係る撮像装置の機能ブロック図である。
【図４】本発明の実施例に係る撮像装置における録音レベル制御機能の構成を説明するための補足図である。
【図５】本発明の実施例に係る撮像装置における録音レベル制御機能の制御フローを示すフローチャートである。
【図６】本発明の変形例に係る撮像装置における録音レベル制御機能の構成を説明するための補足図である。
【発明を実施するための形態】
【００１９】
本発明を実施するための形態における撮像装置1は、主制御手段としての制御部50と、スルー画像等が表示される表示手段としての画像表示部70と、動画を撮影し動画像データを生成記録する動画像録画手段と、音声を音声信号に変換する音声入力手段としてのマイク41と、録音レベルを制御する録音レベル制御手段と、を備える。
【００２０】
又、録音レベル制御手段は、音声信号の利得を増減させる可変利得増減手段としてのゲインアンプ42と、音声信号の電圧値を所定の基準電圧値に近づけるように可変利得増減手段を制御する自動利得制御手段としてのＡＬＣ44と、スルー画像の動画像データから顔を認識する顔認識手段と、顔認識手段が認識した顔を囲む枠を表示手段に表示させる顔枠表示手段と、顔認識手段が認識した顔における口の動きを検出する口動作検出手段と、顔認識手段が認識した顔の寸法に対応した基準電圧値を算出する基準電圧値算出手段と、基準電圧値算出手段が算出した基準電圧値を自動利得制御手段の基準電圧値として設定する基準電圧値設定手段と、から構成されている。
【実施例】
【００２１】
以下、本発明の実施例を図に基づいて詳説する。図１は、本発明に係る撮像装置1の正面図であり、図２は、本発明に係る撮像装置1の背面図である。本発明の撮像装置1は、動画の録画と録音とを同時に行なう動画撮影機能を備えており、動画撮影機能において作成される動画ファイルは、動画像として記録される動画像データと録音データとから構成されている。この撮像装置1は、撮影しているスルー画像の動画像データから顔を認識し、この顔の寸法を利用して録音レベルを制御する録音レベル制御機能を備えている。
【００２２】
そして、撮像装置1は、正面板と背面板を有する薄肉方形状の筐体を有し、この筐体の正面には、図１に示すように、レンズ鏡筒2やフラッシュ3が配置されている。又、レンズ鏡筒2内には、複数の可動レンズ及び複数の固定レンズから構成されたレンズ群が組み込まれている。
【００２３】
又、撮像装置1の筐体の背面には、図２に示すように、液晶表示板などを用いた表示部4、メニューキーや各種機能を設定する設定キー等の操作キー6、方向キー7等が配設されている。更に、撮像装置1の上面には、図示しないが、電源キーや撮影キー、ズームキー等が適宜配設されている。
【００２４】
次に、本実施例の撮像装置1における制御回路について述べる。図３は、本実施例の撮像装置1の機能ブロック図である。撮像装置1は、光学ズーム機能とオートフォーカス機能とを備え、これらを実現するためのレンズブロック11を有している。
【００２５】
このレンズブロック11は、レンズ群9、ズーム用位置検出センサ12及びフォーカス用位置検出センサ13、ズームモータ14及びフォーカスモータ15と、絞り用アクチュエータ16と、シャッター用アクチュエータ17を備える。
【００２６】
レンズ群9は、上述したように、光軸方向に移動可能に配置されたズームレンズ及びフォーカスレンズからなる複数の可動レンズと複数の固定レンズから構成されている。ズーム用位置検出センサ12及びフォーカス用位置検出センサ13は、このレンズ群9におけるズームレンズ及びフォーカスレンズの位置を検出する。ズームモータ14は、ズームレンズを駆動させるモータであり、フォーカスモータ15は、フォーカスレンズを駆動させるモータである。絞り用アクチュエータ16は、図示しない絞りを開閉駆動するアクチュエータであり、シャッター用アクチュエータ17は、メカニカルシャッターを開閉駆動するアクチュエータである。
【００２７】
そして、各モータ及びアクチュエータ14〜17は、モータドライバブロック20に設けられたズームドライバ21、フォーカスドライバ22、絞りドライバ23、シャッタードライバ24によって駆動される。
【００２８】
又、位置検出センサ12,13及びモータドライバブロック20の各種ドライバ21〜24は、レンズコントロールブロック58からの駆動信号によって動作し、センサ出力及びモータ回転数等の情報をＣＰＵ等の制御部50にレンズコントロールブロック58を介して送信する。
【００２９】
更に、撮像装置1は、主としてレンズ群9の光軸後方に配置されたＣＣＤベース（ＣＣＤ  Ｂａｓｅ）31上の撮像素子であるＣＣＤ32と、ＣＤＳ（Ｃｏｒｒｅｌａｔｅｄ  Ｄｏｕｂｌｅ  Ｓａｍｐｌｉｎｇ）／ＡＤＣブロック33と、タイミングジェネレータ（ＴＧ）34からなるＣＣＤ撮像系ブロック30を有している。
【００３０】
このＣＣＤベース31は、手ブレ補正機能がオン状態のとき、制御部50に制御されてＣＣＤ可動範囲内でレンズの光軸に対し垂直に縦横方向にシフトする。又、撮像素子であるＣＣＤ32は、撮像装置1が撮影モードに設定されているとき、レンズ群9によって結像された被写体の光学像を光電変換すると共に、タイミングジェネレータ34により走査駆動されて一定周期毎に光電変換出力を１画面分出力する。尚、撮像素子としてＣＣＤ32を用いているが、ＣＭＯＳ等の他の撮像素子を用いることも可能である。
【００３１】
更に、ＣＤＳ／ＡＤＣブロック33は、ＣＣＤ32から出力されたデータを、ＲＧＢの色成分毎に適宜ゲイン調整されたアナログの出力信号に対する相関二重サンプリングによるノイズ除去及びデジタル信号への変換を行ない、カラープロセス回路51へ出力する。
【００３２】
そして、音声系ブロック（音声ＣＯＤＥＣ）40には、音声入力手段としてのマイク41と、音声出力手段としてのスピーカ45と、が接続されている。この音声系ブロック40は、音声入力系として、可変利得増減手段としてのゲインアンプ（ＰＧＡ）42と、Ａ／Ｄ変換器（ＡＤＣ）43と、ゲインアンプ42を制御する自動利得制御手段としてのＡＬＣ（Ａｕｔｏｍａｔｉｃ  Ｌｅｖｅｌ  Ｃｏｎｔｏｒｏｌ）44と、を備える。
【００３３】
又、音声系ブロック40は、音声出力系としてＤ／Ａ変換器（ＤＡＣ）46を備える。更に、音声系ブロック40は、Ａ／Ｄ変換器43から送信されるデジタル音声信号やＤ／Ａ変換器46に送信されるデジタル音声信号のノイズを除去するフィルタ48と、音声系ブロック40と制御部50の間における信号のやりとりを実現させる音声系インターフェース49を備える。
【００３４】
マイク41は、音声をアナログ音声信号に変換し、このアナログ音声信号をアンプであるゲインアンプ42に送信する。可変利得増減手段としてのゲインアンプ42は、ＡＬＣ44からの指令に従ってアナログ音声信号の利得（ゲイン、つまり、入力と出力の比）を徐々に増減させる制御を行ない、利得を変化させたアナログ音声信号をＡ／Ｄ変換器43に送信する。又、Ａ／Ｄ変換器43は、ゲインアンプ42から送信されたアナログ音声信号を受信すると、デジタル音声信号に変換し、フィルタ48にデジタル音声信号を送信する。
【００３５】
フィルタ48は、受信したデジタル音声信号からノイズを除去する処理を行い、音声系インターフェース49を介して制御部50にデジタル音声信号を送信する。そして、制御部50に送信されたデジタル音声信号の音声データは、ワークメモリ60に取り込まれ、音声圧縮処理を施された後、圧縮された動画像データと共に動画ファイルとして画像記録部80に着脱自在に装着される記録手段等（例えば、ＳＤカード）に記録される。
【００３６】
ＡＬＣ44は、録音を実行するための基準となる音声信号の電圧値（以下、基準電圧値と呼ぶ。）を設定し、マイク41に入力された音声における音声信号の電圧値（以下、入力電圧値と呼ぶ。）を基準電圧値に近づけるようにゲインアンプ42に制御信号を送信する。つまり、ＡＬＣ44は、基準電圧値よりも大きな入力電圧値となる音がマイク41に入力された場合には、ゲインアンプ42に利得を徐々に下げるように制御信号を送信し、基準電圧値よりも小さな入力電圧値となる音がマイク41に入力された場合には、ゲインアンプ42に利得を徐々に上げるように制御信号を送信する。
【００３７】
このようにＡＬＣ44によって、ゲインアンプ42を制御することにより、小さな音から大きな音まで幅広い音量の音声を聞き取りやすい音量で録音できるようになる。尚、本実施例では、この基準電圧値を変更可能としているため、予め設定された通常時の基準電圧値を基本電圧値と呼ぶ。
【００３８】
音声出力系であるＤ／Ａ変換器（ＤＡＣ）46は、制御部50からフィルタ48を介して受け取ったデジタル音声信号をアナログ音声信号に変換し、スピーカ45にこのアナログ音声信号を送信する。スピーカ45は、受信したアナログ音声信号を音声として外部に出力する。
【００３９】
そして、カラープロセス回路51は、入力した撮像信号に対し画素補間処理を行うカラープロセス処理を施し、デジタル値の輝度信号（Ｙ）及び色差信号（Ｃｂ、Ｃｒ)を生成して、本発明の主制御手段であって撮像装置1全体を制御する制御部50へ出力する。
【００４０】
ＪＰＥＧ／ＭＰＥＧ部52は、静止画撮影モードにおいては、記録時にワークメモリ60に取り込まれている静止画像データをＡＤＣＴ（Ａｄａｐｔｉｖｅ  Ｄｉｓｃｒｅｔｅ  Ｃｏｓｉｎｅ  Ｔｒａｎｓｆｏｒｍ：適応離散コサイン変換）、エントロピ符号化方式であるハフマン符号化等の処理によりＪＰＥＧデータ圧縮をする。そして、ＪＰＥＧデータ圧縮により得た符号データを１画像のデータファイルとして画像記録部80のＳＤカードに記録保存する。
【００４１】
動画撮影時においては、記録時にワークメモリ60に取り込まれている一連の動画像データをＭＰＥＧ（Ｍｏｖｉｎｇ  Ｐｉｃｔｕｒｅ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）方式等によりデータ圧縮する。そしてＭＰＥＧ等のデータ圧縮により得た符号データを動画像データとして画像記録部80のＳＤカードに記録保存する。
【００４２】
制御部50は、ＣＰＵ等の制御手段及びＲＯＭ等の記憶手段から構成される。この制御部50は、受信したデジタル信号（画像信号）をＤＲＡＭ等のワークメモリ60に一時保存すると共に画像表示部70に出力し、ワークメモリ60に一時保存されている１フレーム分の輝度及び色差信号の圧縮処理及び画像記録部80の記録媒体への全圧縮データの書込み処理を実行する。
【００４３】
又、制御部50は、各種のレンズ動作プログラムやキー回路95からの操作信号等に基づき、レンズコントロールブロック58に対して、モータドライバブロック20の各種ドライバ21〜24に送る駆動信号を生成させ、それによりズームレンズやフォーカスレンズの位置制御、絞りの開度、メカニカルシャッターの開閉動作を制御する。その際、制御部50には、レンズコントロールブロック58を介して、ズーム位置用及びフォーカス位置用の位置検出センサ12,13によって検出したズームレンズやフォーカスレンズのレンズの位置情報が逐次入力される。
【００４４】
更に、制御部50は、手ブレ補正機能がオンの場合に姿勢センサ65からの姿勢検出信号を処理し、ＣＣＤベース31をＸ方向、Ｙ方向に移動させるためＣＣＤシフトドライバ55に送る駆動信号を生成し、それにより、ＣＣＤ用アクチュエータ18によるＣＣＤベース31（つまり、ＣＣＤ32）の移動動作を制御する。又、その際、制御部50は、ＣＣＤ32が一部切出駆動されることによりＣＣＤ32から出力される手ブレ補正時使用範囲内の画像信号が適切に処理されるようにＣＤＳ／ＡＤＣブロック33及びカラープロセス回路51を制御する。
【００４５】
そして、姿勢センサ65は、手ブレ補正機能や位置ずれ抑制機能を実行するために、撮像装置1の振動や衝撃等を検出して振動衝撃検出信号を制御部50に出力する。
【００４６】
画像表示部70は、ビデオエンコーダ、ＶＲＡＭコントローラ、ＶＲＡＭ、液晶モニタ及びその駆動回路を含み、送られたデジタル信号に基づくビデオ信号をビデオエンコーダによって生成し、それに基づく表示画像、すなわちＣＣＤ32により撮像された被写体のスルー画像やメニューデータ等を表示部4等に表示する。
【００４７】
又、画像表示部70は、表示手段として機能するものであって、ビデオエンコーダからのビデオ信号に基づいた表示を行うことにより、その時点でＶＲＡＭコントローラから取込んでいる画像情報に基づく画像をリアルタイムに表示する。
【００４８】
画像記録部80は、具体的にはカードインターフェイス、及び、カードインターフェイスを介して制御部50に接続される不揮発性の各種メモリカード等（例えば、ＳＤカード）により構成される。画像記録部80に記録された画像データは、再生モードにおいて制御部50に読み出され、ＪＰＥＧ／ＭＰＥＧ部52によって伸張された後、画像表示部70へ送られ、表示部4等に表示される。又、静止画撮影モードにおいて画像表示部70にその時点での画像がモニタ画像としてリアルタイムに表示されている、いわゆるスルー画像の表示状態で、撮影キーを操作するとトリガ信号を発生する。
【００４９】
制御部50は、このトリガ信号に応じてスルー画像撮像処理を停止して静止画撮影処理を開始する。そして、制御部50は、この静止画撮像処理によりＣＣＤ32から取込まれた１画面分の輝度及び色差信号のワークメモリ60へのＤＭＡ転送の終了後、スルー画像撮像処理を再開する。又、制御部50は、ワークメモリ60に記憶されている１画面分の輝度及び色差信号を、ＪＰＥＧ／ＭＰＥＧ部52によりＪＰＥＧ圧縮して画像記録部80のＳＤカードに記録保存する。
【００５０】
尚、スルー画像撮像処理は、ＣＣＤ32を画素加算駆動させる、或いは、ＣＤＳ／ＡＤＣブロック33やカラープロセス回路51において画素間引き処理を行わせることにより画像信号の解像度（画素数）を落とし、撮像処理を高速で行なえるようにする。又、静止画撮影処理は、ＣＣＤ32を全画素駆動させる、或いは、露光時間をスルー画像撮像処理時よりも長くすることにより画像信号の画質を上げるようにする。
【００５１】
又、動画撮影時において画像表示部70にその時点での画像がモニタ画像としてリアルタイムに表示されている、つまり、スルー画像の表示状態で、撮影キーが操作されるとトリガ信号が発生する。制御部50は、このトリガ信号に応じてスルー画像撮像処理及びスルー画像表示処理を継続させつつ、ＣＣＤ32から取込まれ、ワークメモリ60に順次記憶される１画面分の輝度及び色差信号をＪＰＥＧ／ＭＰＥＧ部52によりＭＰＥＧ圧縮して画像記録部80の記憶手段に記録保存する。尚、再び撮影キーが操作されたときや記憶手段の空き容量が無くなったとき、制御部50は、圧縮処理及び記録処理を停止してスルー画像を画像表示部70に表示させる。
【００５２】
サブマイコン90は、キー回路95に設けられている各種キーの操作に応じた信号を制御部50に送るサブのＣＰＵ（図示せず）により構成されている。なお、サブマイコン90は必要に応じモードダイアルの状態を示す状態信号（以下、キー情報）を制御部50に送る。又、サブマイコン90は、電源回路96のオン／オフ制御等を行う。更に、電源回路96には電力となる電池97が接続されている。
【００５３】
又、キー回路95としては、電源キーや撮影キー、撮像モードと再生モードを切替える切替えキー、ズームキー、操作キー6、方向キー7が設けられている。そして、これらのキーが操作されるとキーの種類および操作状態に応じた信号がサブマイコン90に出力される。
【００５４】
そして、このような構成とされた本実施例における撮像装置1は、動画撮影時において、録画している画像から被写体の顔を認識し、認識した顔の寸法を利用してＡＬＣ44の基準電圧値を設定することにより、録音レベルを制御する録音レベル制御機能を備えている。以下、この録音レベル制御機能について述べる。
【００５５】
撮像装置1は、録音レベル制御機能を実現するため、主制御手段としてのＣＰＵと、プログラム等が記憶された記憶手段であるＲＯＭと、スルー画像等が表示される表示手段としての画像表示部70と、動画を撮影し動画像データを生成記録する動画像録画手段と、音声入力手段としてのマイク41と、録音レベル制御手段と、を備える。又、この録音レベル制御手段は、可変利得増減手段としてのゲインアンプ42と、自動利得制御手段としてのＡＬＣ44と、顔認識手段と、顔枠表示手段と、基準電圧値算出手段と、口動作検出手段と、基準電圧値設定手段と、から構成される。
【００５６】
顔認識手段は、図４（ａ）に示すように、動画像録画手段が撮影し、表示手段に表示されているスルー画像の動画像データから被写体の顔を認識する処理を実行し、顔枠表示手段は、顔認識手段が認識した顔の周りに枠を表示した画像を表示手段に表示させる処理を実行する。
【００５７】
基準電圧値算出手段は、顔枠表示手段が表示した顔枠の寸法からＡＬＣ44の基準電圧値を算出する処理を実行する。この基準電圧値を算出する方法について述べる。記憶手段としてのＲＯＭには、ＡＬＣ44の基本電圧値、つまり、通常時の基準電圧値と、この基本電圧値に対応する基本となる顔枠寸法が予め記憶されている。又、記憶手段には、この基本顔枠寸法に対しての倍率に応じた基準電圧値も複数パターン記憶されている。そして、基準電圧値算出手段は、基本顔枠寸法と表示手段に表示された所定の顔枠寸法とを比較し、基本顔枠寸法に対する倍率を算出して、この倍率に対応する基準電圧値を記憶手段から選択し、この基準電圧値を所定の顔枠寸法に対応する基準電圧値として算出する。
【００５８】
具体的には、図４（ｂ）に示すように、基本電圧値である３００ｍＶと、この基本電圧値と対応する基本顔枠寸法とが予め設定されている場合において、基準電圧値算出手段は、基本顔枠寸法よりも小さい所定の顔枠に関しては、基本顔枠寸法に対する倍率から６００ｍＶを基準電圧値として算出し、基本顔枠寸法よりも大きい所定の顔枠に対しては１００ｍＶを基準電圧値として算出する。尚、基本電圧値や基準電圧値の値に関しては例として述べたものであり、この数値に何ら限定されるものではない。
【００５９】
又、基本顔枠寸法との倍率から基準電圧値を連続的に算出する構成とする、つまり、予め顔枠寸法と対応する基準電圧値を設定するのではなく、基準電圧値を算出する式を用いる構成とすることもできる。尚、基準電圧値を算出する式としては、基準電圧値＝基本顔枠寸法／所定の顔枠寸法×基本電圧値、という式を用いることができる。
【００６０】
更に、本実施例の撮像装置1はズーム機能を有しているため、表示手段に表示される顔の寸法は、ズーム機能を使用している場合と、使用していない場合で、被写体までの距離が同じであったとしても異なる。よって、基本顔枠寸法や顔枠に囲まれた領域の面積は、ズーム機能が利用されていない場合における表示手段に表示される画面上での寸法を基準に設定されている。そして、ズーム機能が利用されている場合には、上述したズーム用位置検出センサ12が検出するズームレンズの位置情報から、ズーム画像における顔枠の寸法を自動で算出する構成としている。
【００６１】
口動作検出手段は、顔認識手段が認識した顔の中で口が動いた顔を検出する処理を実行する。図４（ｃ）においては、基準電圧値の電圧値が６００ｍＶの顔枠内の口が動いたことを検出している。
【００６２】
基準電圧値設定手段は、口が動いた顔枠に対応する基準電圧値算出手段が算出した基準電圧値をＡＬＣ44の基準電圧値として設定する。つまり、図４（ｄ）に示すように、口動作検出手段が６００ｍＶの顔枠内の口の動きを検出すると、基本電圧値である３００ｍＶであったＡＬＣ44の基準電圧値を６００ｍＶに設定する。
【００６３】
そして、自動利得制御手段としてのＡＬＣ44は、基準電圧値設定手段が設定した基準電圧値と入力電圧値（マイク入力の電圧値）を比較し、図４（ｅ）に示すように、基準電圧値よりも入力電圧値が低い場合には徐々に利得を上げるよう可変利得増減手段であるゲインアンプ42に制御信号を送信し、図４（ｆ）に示すように、基準電圧値よりも入力電圧値が高い場合には徐々に利得を下げるよう可変利得増減手段に制御信号を送信する。
【００６４】
又、可変利得増減手段としてのゲインアンプ42は、自動利得制御手段から送信された制御信号を受信すると、図４（ｅ）及び図４（ｆ）に示したように、音声信号の利得を徐々に上げる或いは下げるという処理を実行する。
【００６５】
次に、録音レベル制御機能における制御フローについて述べる。図５は、本実施例に係る撮像装置1における録音レベル制御機能における制御フローを示すフローチャートである。動画撮影が開始されると、主制御手段は、録画及び録音を開始する録画録音開始処理（ステップＳ１０１）を実行する。尚、録画録音開始処理（ステップＳ１０１）における録音においてＡＬＣ44の基準電圧値は、基本電圧値に設定されている。
【００６６】
録画録音開始処理（ステップＳ１０１）の後、主制御手段は、顔認識手段として、動画像録画手段が撮影し、表示手段に表示されているスルー画像の動画像データから顔を認識する顔認識処理（ステップＳ１０５）を実行する。次に、主制御手段は、顔枠表示手段として、顔認識手段が認識した顔の周りに枠を表示した画像を表示手段に表示させる顔枠表示処理（ステップＳ１１０）を実行する。
【００６７】
顔枠表示処理（ステップＳ１１０）の後、主制御手段は、基準電圧値算出手段として、表示手段に表示された顔枠の寸法から顔枠に対応する基準電圧値を算出する基準電圧値算出処理（ステップＳ１１５）を実行し、算出した基準電圧値をＤＲＡＭ等のワークメモリ60に一時保存しておく。基準電圧値算出処理（ステップＳ１１５）において基準電圧値の算出が終了すると、主制御手段は、口動作検出手段として、顔認識手段が認識した顔の中で口が動いた顔を検出する口動作検出処理（ステップＳ１２０）を実行する。
【００６８】
口動作検出処理（ステップＳ１２０）において口の動きを検出すると、主制御手段は、基準電圧設定手段として、口が動いた顔枠に対応する基準電圧値算出処理（ステップＳ１１５）で算出していた基準電圧値を自動利得制御手段としてのＡＬＣ44の基準電圧値として設定する基準電圧設定処理（ステップＳ１２５）を実行する。
【００６９】
基準電圧設定処理（ステップＳ１２５）において自動利得制御手段の基準電圧値の設定が完了すると、主制御手段は、自動利得制御手段としてのＡＬＣ44を制御して、入力電圧値と基準電圧値を比較させ、可変利得増減手段としてのゲインアンプ42に利得の制御信号を送信する利得制御信号送信処理（ステップＳ１３０）を実行させる。
【００７０】
可変利得増減手段としてのゲインアンプ42は、利得制御信号送信処理（ステップＳ１３０）において利得制御信号を受信すると、この利得制御信号に従って音声信号の利得を徐々に増幅させる、或いは、徐々に減少させる利得制御処理（ステップＳ１３５）を実行する。
【００７１】
利得制御処理（ステップＳ１３５）の後、主制御手段は、動画撮影が継続されているかを判定する動画撮影判定処理（ステップＳ１４５）を実行し、動画撮影が継続されている場合には、顔認識処理（ステップＳ１０５）から利得制御処理（ステップＳ１３５）までの録音レベル制御処理を繰り返し、動画撮影判定処理（ステップＳ１４５）において動画撮影が終了した場合には録音レベル制御処理を終了する。
【００７２】
尚、上述した口動作検出処理（ステップＳ１２０）において、複数の顔枠内で口の動きを検出した場合、基準電圧値設定手段は、口の動きを検出した複数の顔枠に対して基準電圧値算出手段が算出した夫々の基準電圧値の平均値を基準電圧値として設定する。このように夫々の基準電圧値の平均値を基準電圧値と設定することにより、録音レベルが大きすぎる或いは小さすぎるという問題が発生することを防止でき、バランスの良い録音レベルで録音が可能となる。
【００７３】
本実施例の撮像装置1によれば、撮影中の動画像データにおける顔を検出し、この顔の寸法を用いて録音レベルを制御する録音レベル制御機能を備えることにより、遠くの音声の場合にはＡＣＬ44の基準電圧値が自動で大きく設定され、近くの音声の場合には基準電圧値が自動で小さく設定される構成とすることができる。よって、撮像装置1は、遠くに音声発生源がある音に関しては利得が増幅されて大きな音声として録音し、近くに音声発生源がある音に関しては利得を減少させて小さな音声として録音することができ、録音された音声の音量が大きすぎて音割れが発生する、或いは、録音された音声の音量が小さすぎて聞き取ることができないといった問題が発生することを防止できる。
【００７４】
又、撮像装置1は、口動作検出手段を有し、この口動作検出手段で口の動きを検出した顔の寸法に対応する基準電圧値にＡＬＣ44の基準電圧値を設定する構成とすることにより、実際に喋っている被写体に合わせて録音レベルを制御できることとなる。
【００７５】
更に、口動作検出手段が複数の顔において口の動きを検出したときに、口動作検出手段が口の動きを検出した複数の顔に対応する夫々の基準電圧値の平均値をＡＬＣ44の基準電圧値として設定することにより、被写体の複数人が音声を発している場合であっても、バランスの良い録音レベル制御が可能となる。
【００７６】
又、顔認識手段が認識した顔を囲む枠を表示手段に表示させる顔枠表示手段を有することにより、顔枠の寸法を顔の寸法として基準電圧値の設定ができるため、基準電圧値を設定するための基準となる顔の寸法を把握することが容易となる。
【００７７】
尚、上述した実施例においては、口動作検出手段によって顔枠内の口の動きを検出し、この口の動きを検出した顔枠に対応する基準電圧値を設定する構成としているが、顔枠表示手段が顔枠を表示手段に表示させた場合に、口の動きを検出することなく顔枠寸法に合わせて基準電圧値を設定する構成とすることもできる。
【００７８】
つまり、図６（ａ）に示すように、寸法の異なる２つの顔枠が表示手段に表示されている場合において、基準電圧値算出手段が小さな顔枠には５００ｍＶ、大きな顔枠には３００ｍＶの電圧値を算出した場合、図６（ｂ）に示すように、基準電圧値設定手段は、基本電圧値である３００ｍＶの基準電圧値から各顔枠の基準電圧値の平均値である４００ｍＶの基準電圧値に設定を変更する。
【００７９】
又、図６（ｃ）に示すように、大きな１つの顔枠が表示手段に表示されている場合において、基準電圧値算出手段がこの顔枠に対して５０ｍＶの電圧値を算出した場合、図６（ｄ）に示すように、基準電圧値設定手段は、基本電圧値である３００ｍＶの基準電圧値から５０ｍＶの基準電圧値に設定を変更する。
【００８０】
このように、口の動きを検出することなく顔枠寸法から直に基準電圧値を設定する構成とすることにより、口の検出が困難な場合等でも録音レベルを制御することができ、又、口の検出を行なわないため主制御手段の負担を軽くすることもできる。
【００８１】
尚、勿論、この構成と口の動きを検出した顔枠に対応する基準電圧値を設定する構成とを併用し、顔認識手段が顔を認識した段階でＡＬＣ44の基準電圧値を認識された顔の寸法に対応する基準電圧値に設定し、その後、口動作検出手段で口の動きが検出された場合に、ＡＬＣ44の基準電圧値を検出された顔の寸法に対応する基準電圧値に設定し直すようにしてもよい。
【００８２】
又、上述した録音レベル制御処理においては、基本顔枠寸法を設定し、この基本顔枠寸法に対する動画像データにおける実際の顔枠の寸法を利用して録音レベルを制御しているが、基本電圧値と対応する被写体との基本距離を設定し、フォーカス用位置検出センサ13からフォーカスレンズの位置情報を取得し、被写体に対する焦点距離と基本距離を比較して録音レベルを制御する構成とすることもできる。
【００８３】
更に、ズーム用位置検出センサ12が検出するズームレンズの位置情報と対応させて、ズームインが行なわれた場合には基準電圧値を大きく設定し、ズームアウトが行なわれた場合には基準電圧値を小さく設定するといった構成とすることもできる。このような構成とすることにより、画像で大きく表示されている場合には音声も大きく、画像で小さく表示されている場合には音声も小さくすることもでき、新たな嗜好を提供できる。
【００８４】
尚、本実施例におけるフローチャートに示した処理は、コンピュータに実現させることのできるプログラムとして、例えば磁気ディスク、光ディスク、半導体メモリ等の記憶媒体に書き込んだ状態で各種装置に適用する、或いは、通信媒体により伝送して各種装置に適用することも可能である。このように所望の記憶媒体に本実施例で述べた各処理を記憶させ、他のコンピュータ等でプログラムを実行させることにより、本実施例の装置を用いた場合と同様の作用効果が得られる。尚、コンピュータは、本実施例で述べた装置に内蔵されたコンピュータに限定されるわけではなく、記憶媒体に記憶されたプログラムを読取り可能であって、読み取ったプログラムに従って制御動作を行なうＣＰＵ等の演算装置を備えているあらゆるコンピュータを含む。
【００８５】
そして、このような録音レベル制御機能は、従来の撮像装置1が有している顔認識手段や顔枠表示手段等による制御を利用して録音レベルを制御するため、プログラムを変更するだけで実現可能であり、様々な撮像装置1においてコストをかけずに使用することができる。
【００８６】
更に、本発明は、以上の実施例に限定されるものでなく、発明の要旨を逸脱しない範囲で自由に変更、改良が可能である。
【符号の説明】
【００８７】
1  撮像装置                            2  レンズ鏡筒
3  フラッシュ                          4  表示部
6  操作キー                            7  方向キー
9  レンズ群
11  レンズブロック                     12  ズーム用位置検出センサ
13  フォーカス用位置検出センサ         14  ズームモータ
15  フォーカスモータ                   16  絞り用アクチュエータ
17  シャッター用アクチュエータ         18  ＣＣＤ用アクチュエータ
20  モータドライバブロック             21  ズームドライバ
22  フォーカスドライバ                 23  絞りドライバ
24  シャッタードライバ                 30  ＣＣＤ撮像系ブロック
31  ＣＣＤベース                       32  ＣＣＤ
33  ＣＤＳ／ＡＤＣブロック             34  タイミングジェネレータ
40  音声系ブロック
41  マイク                             42  ゲインアンプ
43  Ａ／Ｄ変換器                       44  ＡＬＣ
45  スピーカ                           46  Ｄ／Ａ変換器
48  フィルタ                           49  音声系インターフェース
50  制御部                             51  カラープロセス回路
52  ＪＰＥＧ／ＭＰＥＧ部               55  ＣＣＤシフトドライバ
58  レンズコントロールブロック         60  ワークメモリ
65  姿勢センサ                         70  画像表示部
80  画像記録部                         90  サブマイコン
95  キー回路                           96  電源回路
97  電池
【図１】
2010239356.tif 000003
【図２】
2010239356.tif 000004
【図３】
2010239356.tif 000005
【図４】
2010239356.tif 000006
【図５】
2010239356.tif 000007
【図６】
2010239356.tif 000008