(57)【要約】【課題】  音が再生されながら録音された音の再生の精度を向上する撮像装置及びそのプログラムを実現する。【解決手段】  ＣＰＵ１０は、減算処理部３１を備え、音を再生しながら音付動画撮影を行なう場合は、再生する音データを内蔵スピーカ２６から放音するとともに、内蔵マイク２１によって集音された音データから、該再生している音データを減算し、該減算後の音データをフラッシュメモリ１３に記録する。これにより、撮影録音時に音を再生した場合であっても、録音される音は、再生された音によって被写体の音声がかき消されることがなく、音が再生されながら録音された音の再生の精度を向上することができる。【選択図】      図２
2011250439.tif 000002
【特許請求の範囲】
【請求項１】
被写体を撮像する撮像手段と、
音を放音するスピーカと、
前記スピーカから音データを放音させる放音制御手段と、
音を集音するマイクロフォンと、
前記撮像手段により撮像された画像データと前記マイクロフォンにより集音された音データとを関連付けて記録手段に記録する記録制御手段と、
前記マイクロフォンにより集音された音データが前記記録制御手段により前記記録手段に記録されている最中に、前記放音制御手段により放音された音データを、前記マイクロフォンにより集音された音データから減算する減算手段と、
を備えたことを特徴とする撮像装置。
【請求項２】
前記減算手段は、
前記マイクロフォンにより集音された音データが前記記録手段に記録される前に減算を実行し、
前記記録制御手段は、
前記減算手段により減算された音データを前記記録手段に記録することを特徴とする請求項１記載の撮像装置。
【請求項３】
前記減算手段は、
前記記録手段による前記マイクロフォンにより集音された音データの記録後に、減算を実行することを特徴とする請求項１記載の撮像装置。
【請求項４】
前記記録制御手段により記録された音データを再生する再生手段を備え、
前記減算手段は、
前記記録手段に記録された音データを再生する際に、減算を実行し、
前記再生手段は、
前記減算手段により減算された音データを再生すること特徴とする請求項３記載の撮像装置。
【請求項５】
前記スピーカから放音させる音データと逆位相の音データを生成する生成手段を備え、
前記スピーカは、
被写体側に向けられた第１のスピーカと、撮影者側に向けられた第２のスピーカとを有し、
前記放音制御手段は、
前記第１のスピーカから前記放音させる音データを放音させ、前記第２のスピーカから前記生成手段により生成された逆位相の音データを放音させることを特徴とする請求項１乃至４の何れかに記載の撮像装置。
【請求項６】
前記マイクロフォンにより集音された音データに対して音声認識を行なう音声認識手段を備え、
前記減算手段は、
前記マイクロフォンにより集音された音データが前記記録制御手段により前記記録手段に記録されている最中に、音声認識手段による認識結果に基づいて、音声以外の周辺音を前記マイクロフォンにより集音された音データから減算することを特徴とする請求項１乃至５の何れかに記載の撮像装置。
【請求項７】
前記減算手段は、
音声以外の周辺音のうち、前記放音制御手段により放音された音データ以外の音データを前記マイクロフォンにより集音された音データから減算するととともに、前記放音制御手段により放音された音データも前記マイクロフォンにより集音された音データから減算することを特徴とする請求項６記載の撮像装置。
【請求項８】
前記マイクロフォンにより集音された音データに対して音声認識を行なう音声認識手段を備え、
前記減算手段は、
前記マイクロフォンにより集音された音データが前記記録制御手段により前記記録手段に記録されている最中に、音声認識手段による認識結果に基づいて、複数の音声のうち、音レベルの高い音声を、前記マイクロフォンにより集音された音データから減算することを特徴とする請求項１乃至５の何れかに記載の撮像装置。
【請求項９】
被写体を撮像する撮像手段と、音を放音するスピーカと、音を集音するマイクロフォンと、を備えた撮像装置を実行させるためのプログラムであって、
前記スピーカから音データを放音させる放音制御処理と、
前記撮像手段により撮像された画像データと前記マイクロフォンにより集音された音データとを関連付けて記録媒体に記録する記録制御処理と、
前記マイクロフォンにより集音された音データが前記記録制御処理により前記記録媒体に記録されている最中に、前記放音制御処理により放音された音データを、前記マイクロフォンにより集音された音データから減算する減算処理と、
を含むことを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮像装置及びそのプログラムに係り、詳しくは、録音機能を有した撮像装置及びそのプログラムに関する。
【背景技術】
【０００２】
近年、電子カメラ等の撮像装置において、録音して被写体を撮影（音付撮影）する機能や（特許文献１）、音楽等の音データを再生する機能を有した技術が登場してきている（特許文献２）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】公開特許公報  特開２００７−０３６４２７
【特許文献２】公開特許公報  特開２００２−１７６５７８
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、従来の技術では、音楽等の音を再生しながら、被写体を音付撮影する場合、録音される被写体の声（音声）が再生されている音によってかき消されてしまい、被写体の声をよく録音することができず、該録音された音を再生した場合には聞きづらい音となってしまう。
【０００５】
そこで本発明は、かかる従来の問題点に鑑みてなされたものであり、音が再生されながら録音された音の再生の精度を向上する撮像装置及びそのプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的達成のため、請求項１記載の発明による撮像装置は、音を放音するスピーカと、
前記スピーカから音データを放音させる放音制御手段と、
音を集音するマイクロフォンと、
前記マイクロフォンにより集音された音データを記録手段に記録する記録制御手段と、
前記マイクロフォンにより集音された音データが前記記録制御手段により前記記録手段に記録されている最中に、前記放音制御手段により放音された音データを、前記マイクロフォンにより集音された音データから減算する減算手段と、
を備えたことを特徴とする。
【０００７】
また、例えば、請求項２に記載されているように、前記減算手段は、
前記マイクロフォンにより集音された音データが前記記録手段に記録される前に減算を実行し、
前記記録制御手段は、
前記減算手段により減算された音データを前記記録手段に記録するようにしてもよい。
【０００８】
また、例えば、請求項３に記載されているように、前記減算手段は、
前記記録手段による前記マイクロフォンにより集音された音データの記録後に、減算を実行するようにしてもよい。
【０００９】
また、例えば、請求項４に記載されているように、前記記録制御手段により記録された音データを再生する再生手段を備え、
前記減算手段は、
前記記録手段に記録された音データを再生する際に、減算を実行し、
前記再生手段は、
前記減算手段により減算された音データを再生するようにしてもよい。
【００１０】
また、例えば、請求項５に記載されているように、前記スピーカから放音させる音データと逆位相の音データを生成する生成手段を備え、
前記スピーカは、
被写体側に向けられた第１のスピーカと、撮影者側に向けられた第２のスピーカとを有し、
前記放音制御手段は、
前記第１のスピーカから前記放音させる音データを放音させ、前記第２のスピーカから前記生成手段により生成された逆位相の音データを放音させるようにしてもよい。
【００１１】
また、例えば、請求項６に記載されているように、前記マイクロフォンにより集音された音データに対して音声認識を行なう音声認識手段を備え、
前記減算手段は、
前記マイクロフォンにより集音された音データが前記記録制御手段により前記記録手段に記録されている最中に、音声認識手段による認識結果に基づいて、音声以外の周辺音を前記マイクロフォンにより集音された音データから減算するようにしてもよい。
【００１２】
また、例えば、請求項７に記載されているように、前記減算手段は、
音声以外の周辺音のうち、前記放音制御手段により放音された音データ以外の音データを前記マイクロフォンにより集音された音データから減算するととともに、前記放音制御手段により放音された音データも前記マイクロフォンにより集音された音データから減算するようにしてもよい。
【００１３】
また、例えば、請求項８に記載されているように、前記マイクロフォンにより集音された音データに対して音声認識を行なう音声認識手段を備え、
前記減算手段は、
前記マイクロフォンにより集音された音データが前記記録制御手段により前記記録手段に記録されている最中に、音声認識手段による認識結果に基づいて、音レベルの高い音声データを、前記マイクロフォンにより集音された音データから減算するようにしてもよい。
【００１４】
上記目的達成のため、請求項９記載の発明によるプログラムは、被写体を撮像する撮像手段と、音を放音するスピーカと、音を集音するマイクロフォンと、を備えた撮像装置を実行させるためのプログラムであって、
前記スピーカから音データを放音させる放音制御処理と、
前記撮像手段により撮像された画像データと前記マイクロフォンにより集音された音データとを関連付けて記録媒体に記録する記録制御処理と、
前記マイクロフォンにより集音された音データが前記記録制御処理により前記記録媒体に記録されている最中に、前記放音制御処理により放音された音データを、前記マイクロフォンにより集音された音データから減算する減算処理と、
を含むことを特徴とする。
【発明の効果】
【００１５】
本願発明によれば、音が再生されながら録音された音の再生精度を向上することができる。
【図面の簡単な説明】
【００１６】
【図１】本発明の実施の形態のデジタルカメラのブロック図である。
【図２】本発明の音声処理部及びＣＰＵ１０の機能を説明するためのブロック図である。
【図３】本発明の音声処理部及びＣＰＵ１０の機能を説明するためのブロック図である。
【図４】録音時に再生された音データを減算する場合の動作を示すフローチャートである。
【図５】再生時に減算する場合の音付動作撮影の動作を示すフローチャートである。
【図６】再生時に減算する場合の音付動作再生に動作を示すフローチャートである。
【図７】第２の実施の形態における音声処理部１５及びＣＰＵ１０の機能を説明するための図である。
【図８】第２の実施の形態のデジタルカメラ１の動作を示すフローチャートである。
【図９】第３の実施の形態における音声処理部１５及びＣＰＵ１０の機能を説明するための図である。
【図１０】第３の実施の形態のデジタルカメラ１の動作を示すフローチャートである。
【発明を実施するための形態】
【００１７】
以下、本実施の形態について、本発明の撮像装置をデジタルカメラに適用した一例として図面を参照して詳細に説明する。
[第１の実施の形態]
Ａ．デジタルカメラの構成
図１は、本発明の撮像装置を実現するデジタルカメラ１の電気的な概略構成を示すブロック図である。
デジタルカメラ１は、撮影レンズ２、レンズ駆動ブロック３、絞り４、ＣＣＤ５、ドライバ６、ＴＧ（timing generator）７、ユニット回路８、メモリ９、ＣＰＵ１０、ＤＲＡＭ１１、画像表示部１２、フラッシュメモリ１３、キー入力部１４、音声処理部１５、バス１６を備えている。
【００１８】
撮影レンズ２は、図示しない複数のレンズ群から構成されるフォーカスレンズ、ズームレンズ等を含む。そして、撮影レンズ２にはレンズ駆動ブロック３が接続されている。レンズ駆動ブロック３は、フォーカスレンズ、ズームレンズをそれぞれ光軸方向に沿って駆動させるフォーカスモータ、ズームモータと、ＣＰＵ１０から送られてくる制御信号にしたがって、フォーカスモータ、ズームモータを駆動させるフォーカスモータドライバ、ズームモータドライバから構成されている（図示略）。
【００１９】
絞り４は、図示しない駆動回路を含み、駆動回路はＣＰＵ１０から送られてくる制御信号にしたがって絞り４を動作させる。
絞り４とは、撮影レンズ２から入ってくる光の量を制御する機構のことをいう。
【００２０】
ＣＣＤ５は、ドライバ６によって駆動され、一定周期毎に被写体像のＲＧＢ値の各色の光の強さを光電変換して撮像信号としてユニット回路８に出力する。このドライバ６、ユニット回路８の動作タイミングはＴＧ７を介してＣＰＵ１０により制御される。なお、ＣＣＤ５はベイヤー配列の色フィルターを有しており、電子シャッタとしての機能も有する。この電子シャッタのシャッタ速度は、ドライバ６、ＴＧ７を介してＣＰＵ１０によって制御される。
【００２１】
ユニット回路８には、ＴＧ７が接続されており、ＣＣＤ５から出力される撮像信号を相関二重サンプリングして保持するＣＤＳ（Correlated Double Sampling）回路、そのサンプリング後の撮像信号の自動利得調整を行なうＡＧＣ（Automatic Gain Control）回路、その自動利得調整後のアナログの撮像信号をデジタル信号に変換するＡ／Ｄ変換器から構成されており、ＣＣＤ５から出力された撮像信号はユニット回路８を経てデジタル信号としてＣＰＵ１０に送られる。
【００２２】
ＣＰＵ１０は、ユニット回路８から送られてきた画像データや音声処理部１５の内蔵マイクによって集音された音データをバッファメモリ（ＤＲＡＭ１１）に記憶させるとともに、該記憶させた画像データに対してガンマ補正、補間処理、ホワイトバランス処理、輝度色差信号（ＹＵＶデータ）の生成処理などの画像処理、フラッシュメモリ１３への画像データや音データの記録処理を行う機能を有するとともに、デジタルカメラ１の各部を制御するワンチップマイコンである。
特に、ＣＰＵ１０は、録音された音声データから録音時に再生された音データを減算する減算部を有する。
【００２３】
メモリ９には、ＣＰＵ１０が各部を制御するのに必要な制御プログラム、及び必要なデータが記録されており、ＣＰＵ１０は、該プログラムに従い動作する。
ＤＲＡＭ１１は、ＣＣＤ５によって撮像された後、ＣＰＵ１０に送られてきた画像データ、音声処理部１５の内蔵マイクによって集音された音データを一時記憶するバッファメモリとして使用されるとともに、ＣＰＵ１０のワーキングメモリとして使用される。
フラッシュメモリ１３は、画像データや音データを保存する記録媒体である。
【００２４】
画像表示部１２は、カラーＬＣＤとその駆動回路を含み、撮影待機状態にあるときには、ＣＣＤ５によって撮像された被写体をスルー画像として表示し、記録画像の再生時には、フラッシュメモリ１３から読み出され、伸張された記録画像を表示させる。
キー入力部１４は、シャッタボタン、モード切替キー、音再生キー、十字キー、ＳＥＴキー等の複数の操作キーを含み、ユーザのキー操作に応じた操作信号をＣＰＵ１０に出力する。
【００２５】
音声処理部１５は、内蔵マイク（マイクロフォン）、アンプ／ローパスフィルタ、Ａ／Ｄ変換器、Ｄ／Ａ変換器、ローパスフィルタ／アンプ、内蔵スピーカ等を含み、音付動画撮影時には、内蔵マイクにより集音された音声をデジタル信号に変換してＣＰＵ１０に送る。ＣＰＵ１０は、送られてきた音声データを、バッファメモリ（ＤＲＡＭ１２）に順次記憶し、該記憶した音声データを撮影された動画データと関連付けてフラッシュメモリ１３に記録する。つまり、音付動画データを記録する。
【００２６】
また、音声処理部１５は、ＣＰＵ１０から送られてきた音データを内蔵スピーカから放音することにより、該音データを再生する。
この内蔵マイク、内蔵スピーカは共に、デジタルカメラ１の撮影レンズ２が設けられている面に備えられている。これにより、再生される音がよく被写体に聞こえるようになり、被写体の音声等も良く録音することが可能となる。なお、画像表示部１２は、撮影レンズ２が設けられている面と反対側（撮影者側）の面に備えられている。
【００２７】
Ｂ．デジタルカメラ１の機能
次に、本発明のデジタルカメラ１の構成の機能を説明する。
図２、３は、本発明の音声処理部及びＣＰＵ１０の機能を説明するためのブロック図である。
図２は、フラッシュメモリ１３やメモリ９に記録されている音データを再生させながら、音付動画撮影（録音処理）を行なう場合についての、ＣＰＵ１０の機能を説明するための図である。
図２を見ると分かるように、音声処理部１５は、内蔵マイク２１、アンプ／ローパスフィルタ２２、Ａ／Ｄ変換器２３、Ｄ／Ａ変換器２４、ローパスフィルタ／アンプ２５、内蔵スピーカ２６を備えており、ＣＰＵ１０は、減算処理部３１を備えている。
【００２８】
まず、内蔵マイク２１は、集音された被写体の音声等を電気信号に変換してアンプ／ローパスフィルタ２２に音データを出力する。アンプ／ローパスフィルタ２２は、音データを増幅してから（ＡＭＰ）、不要な周波数帯域をカットして（ＬＰＦ）、Ａ／Ｄ変換器２３に出力する。そして、Ａ／Ｄ変換器２３は、入力された音データをデジタル信号に変換してＣＰＵ１０に出力する。
【００２９】
このとき、ＣＰＵ１０は、フラッシュメモリ１３やメモリ９に予め記録されているデジタル信号の音データ（音楽や、遊び音等の音のデータ）をバッファメモリ（ＤＲＡＭ１１）に記憶させ、該記憶させた音データをＤ／Ａ変換器２４に出力する。そして、Ｄ／Ａ変換器２４は、送られてきた音データをアナログ信号に変換して、ローパスフィルタ／アンプ２５に出力し、ローパスフィルタ／アンプ２５は、入力された音データの不要な周波数帯域をカットして、増幅してから内蔵スピーカ２６に出力し、内蔵スピーカ２６は該入力された音データを音に変換して放音する。
【００３０】
この場合、録音を行なっているときに、内蔵スピーカ２６から音を放音させると、被写体の音声より大きな音レベルで内蔵スピーカ２６から再生されている音（再生音）が内蔵マイク２１によって集音されてしまい、被写体の音声がかき消されてしまうという不具合がある。これは、内蔵マイク２１が被写体と比べ、内蔵スピーカ２６と至近距離にあるためであり、また、被写体に聞こえるような音レベルで内蔵スピーカ２６から音を放音するためである。
【００３１】
したがって、ＣＰＵ１０の減算処理部３１は、内蔵マイク２１によって集音される被写体の音声と、内蔵マイク２１によって集音される再生音との音レベル（ボリューム）が同じになるように、内蔵マイク２１によって集音された音声データから、内蔵スピーカ２６によって再生される音データを減算する。この減算処理は、内蔵マイク２１によって集音される音声と、再生音とのボリュームが同じになるように減算するためであり、必ずしも再生される音を無くすために減算するためのものではない。また、この減算は、録音されている再生音と同期させて再生音の音データを減算する。
【００３２】
なお、減算の度合いをユーザが選択することができ、該選択された度合いの減算を行なうようにしてもよい。例えば、減算度合いを大にした場合は再生音のボリューム（音レベル）が小さくなるように記録することができ、減算度合いを小にした場合は再生音のボリュームが大きくなるように記録することができる。
【００３３】
そして、この減算処理部３１によって減算された後の音データがバッファメモリに記憶され、フラッシュメモリ１３に記録されることになる。
これにより、内蔵マイク２１によって集音された内蔵スピーカ２６からの再生音のボリュームを調整して記録することができる。
【００３４】
図３は、音データを再生させながら減算処理を行うことなく単に音付動画撮影（録音処理）により録音された音データを再生する場合についての、ＣＰＵ１０の機能を説明するための図である。
音付動画撮影時（録音処理時）に再生された音データを、内蔵マイク２１から集音された音声データから減算処理を行うことなく録音された音は、被写体の音声より再生された音のボリュームの方が遥かに大きく、被写体の音声がかき消されてしまっている状況である。
【００３５】
したがって、このような音を再生する場合には、ＣＰＵ１０の減算処理部３１は、録音処理時に録音された被写体の音声と、録音処理時に再生された音とが同じ音レベルになるように、録音された音データから、該録音時に再生された音データを減算する。この減算処理は、内蔵マイク２１によって集音された音声と、内蔵マイク２１によって集音された再生音とのボリュームが同じになるように減算するためであり、必ずしも録音時に再生された音を無くすために減算するためのものではない。
なお、減算の度合いをユーザが選択することができ、該選択された度合いの減算を行なうようにしてもよい。例えば、減算度合いを大にした場合は録音時に再生された音のボリューム（音レベル）を小さくして再生することができ、減算度合いを小にした場合は録音時に再生された音のボリュームを大きくして再生することができる。
【００３６】
そして、減算処理部３１によって減算された後の音データが、Ｄ／Ａ変換器２４に入力され、Ｄ／Ａ変換器２４は、該入力された音をアナログ信号に変換してローパスフィルタ／アンプ２５に出力し、ローパスフィルタ／アンプ２５は、入力された音データの不要な周波数帯域をカットして、増幅してから内蔵スピーカ２６に出力し、内蔵スピーカ２６は該入力された音データを音に変換して放音する。これにより、録音時に再生された音のボリュームを調整して再生することができる。
【００３７】
Ｃ．デジタルカメラ１の動作
実施の形態におけるデジタルカメラ１の動作を、録音時に減算する場合と、再生時減算する場合に分けて説明する。
Ｃ−１．まず、録音時に減算する場合の動作を説明する。
録音時に再生された音データを減算する場合の動作を図４のフローチャートに従って説明する。
【００３８】
ユーザのキー入力部１４のモード切替キーの操作により音付撮影モードに設定されると、ステップＳ１で、ＣＰＵ１０は、ＣＣＤ５に所定のフレームレートで被写体を撮像させる処理を開始させ（動画撮像処理を開始させ）、該撮像により順次得られたフレーム画像データから輝度色差信号のフレーム画像データ（ＹＵＶデータ）を生成していき、該順次生成された輝度色差信号のフレーム画像データをバッファメモリ（ＤＲＡＭ１１）に記憶させ、該記憶された被写体のフレーム画像データを順次画像表示部１２に表示させるというスルー画像表示を開始させる。
【００３９】
次いで、ステップＳ２で、ＣＰＵ１０は、音を再生させるか否かを判断する。
このとき、ユーザは、音再生キーの操作を行なうと、ＣＰＵ１０は、フラッシュメモリ１３やメモリ９に記録されている音データ（音楽や、お遊びの音等の音データ）がスルー画像表示に重ねて一覧表示させ、ユーザが十字キー、ＳＥＴキーの操作を行なうことにより、任意の音データを選択することができ、ＣＰＵ１０は、該一連の操作が行なわれると、音を再生させると判断する。
【００４０】
ステップＳ２で、音を再生させると判断すると、ステップＳ３に進み、ＣＰＵ１０は、ユーザによって選択された音データの再生処理を開始させて、ステップＳ４に進む。つまり、該選択された音データを読み出してバッファメモリに記憶し、該記憶した音データを順次音声処理部１５に入力し、音声処理部１５は、該入力された音データをアナログ変換などをして内蔵スピーカ２６から放音する処理を開始する。この音データの再生処理は、最後まで再生させると自動的に終了するが、ユーザによって再生終了の指示操作が行なわれた場合も終了する。
一方、ステップＳ２で、音を再生しないと判断すると、そのままステップＳ４に進む。
【００４１】
ステップＳ４に進むと、ＣＰＵ１０は、録画を開始するか否かを判断する。この判断は、シャッタボタンの押下に対応する操作信号がキー入力部１４から送られてきたか否かにより判断する。
ステップＳ４で、録画を開始しないと判断すると、ステップＳ５に進み、ＣＰＵ１０は、現在、音の再生処理中であるか否かを判断する。つまり、現在、内蔵スピーカ２６から音が放音されているか否かを判断する。
ステップＳ５で、音の再生処理が行なわれていないと判断するとステップＳ２に戻り、音の再生処理が行なわれていると判断するとステップＳ４に戻る。
【００４２】
一方、ステップＳ４で、録画を開始すると判断すると、ステップＳ６に進み、ＣＰＵ１０は、動画記録処理を開始する。つまり、ＣＣＤ５により順次撮像されバッファメモリに記憶されたフレーム画像データをフラッシュメモリ１３に記録させていく処理を開始する。
次いで、ステップＳ７に進み、ＣＰＵ１０は、録音処理を開始する。つまり、内蔵マイク２６により集音された音が電気信号に変換され、デジタル信号に変換された音データを順次バッファメモリに記憶し、該記憶した音データをフラッシュメモリ１３に記録させていく処理を開始する。
【００４３】
次いで、ステップＳ８で、ＣＰＵ１０は、現在、音の再生処理中であるか否かを判断する。
ステップＳ８で、音の再生処理中であると判断するとステップＳ１２に進み、ステップＳ８で、音の再生処理中でないと判断すると、ステップＳ９に進み、音を再生するか否かを判断する。つまり、ステップＳ２と同様の判断を行う。
【００４４】
ステップＳ９で、音を再生しないと判断すると、ステップＳ１０に進み、ＣＰＵ１０は、録画を終了するか否かを判断する。この判断は、シャッタボタンの押下に対応する操作信号がキー入力１４から送られてきたか否かにより判断する。
なお、ここでは、シャッタボタンの押下と共に録画を開始し、再びシャッタボタンが押下されると録画を終了すると判断するようにしたが、シャッタボタンの押下中は録画を行い、シャッタボタンの押下が解除されると録画を終了すると判断するようにしてもよい。
ステップＳ１０で、録画を終了しないと判断するとステップＳ９に戻る。
【００４５】
一方、ステップＳ９で、音を再生すると判断すると、ステップＳ１１に進み、ＣＰＵ１０は、ユーザによって選択された音データの再生処理を開始させて、ステップＳ１２に進む。
ステップＳ１２に進むと、ＣＰＵ１０の減算処理部３１は、内蔵マイク２１から集音された音データから、現在内蔵スピーカ２６から放音している（再生している）音データを減算する処理を開始させる。この減算処理により減算された音データが、音声録音処理によってバッファメモリに記憶され、フラッシュメモリ１３に記録されていることになる。
【００４６】
次いで、ステップＳ１３に進み、ＣＰＵ１０は、録画を終了するか否かを判断する。この判断は、ステップＳ１０と同様の判断を行う。
ステップＳ１０で、録画を終了しないと判断すると、ステップＳ１４に進み、ＣＰＵ１０は、音の再生処理が終了したか否かを判断する。この音の再生処理が終了したと判断する場合としては、再生している音が最後まで再生された場合や、ユーザによって再生終了の指示操作が行なわれた場合等がある。このユーザによって再生終了の指示操作が行なわれると、ＣＰＵ１０は、音の再生処理を中止させる。
【００４７】
ステップＳ１４で、音の再生処理が終了していないと判断すると、ステップＳ１３に戻り、ステップＳ１４で音の再生処理が終了したと判断すると、ステップＳ１５に進み、ＣＰＵ１０は、減算処理を終了させて、ステップＳ９に戻る。減算処理が終了されると、内蔵マイク２１によって取得された音データがそのままバッファメモリに記憶され、フラッシュメモリ１３に記録されることになる。つまり、図２の減算処理部３１は、Ａ／Ｄ変換器２３から送られてきた音データを減算させることなくそのままスルーさせてバッファメモリ等に記憶、記録させることになる。
【００４８】
一方、ステップＳ１０で録画を終了すると判断した場合、ステップＳ１３で録画を終了したと判断した場合は、ステップＳ１６に進み、ＣＰＵ１０は、動画記録処理によりフラッシュメモリ１３に記録されたフレーム画像データと、録音処理によりフラッシュメモリ１３に記録された音データとから音付動画ファイルを生成する。なお、音付動画ファイルを生成するようにしたが、要は音データと動画データとが関連付けられて記録されるようにすればよい。
これにより、音を再生しながら録音した場合であっても、再生された音によって被写体の音声がかき消されることがなく、録音中に音を再生する場合の被写体音声の録音精度を向上することができる。
【００４９】
Ｃ−２．次に、再生時に減算する場合の動作を説明する。
この再生時に減算する場合の動作は、更に、音付動画撮影と音付動画再生に分けて説明する。
まず、再生時に減算する場合の音付動作撮影の動作を図５のフローチャートに従って説明する。
【００５０】
ユーザのキー入力部１４のモード切替キーの音付動画撮影モードに設定されると、ステップＳ３１で、ＣＰＵ１０は、動画撮像処理を開始して、被写体のスルー画像表示を開始させる。
次いで、ステップＳ３２で、ＣＰＵ１０は、音を再生させるか否かを判断する。この判断は、図４のステップＳ２と同様の判断を行う。
ステップＳ３２で、音を再生させると判断すると、ステップＳ３３に進み、ＣＰＵ１０は、ユーザによって選択された音データの再生処理を開始させて、ステップＳ３４に進む。
一方、ステップＳ３２で、音を再生させないと判断するとそのままステップＳ３４に進む。
【００５１】
ステップＳ３４に進むと、ＣＰＵ１０は、録画を開始させるか否かを判断する。この判断は、図４のステップＳ４と同様の判断を行う。
ステップＳ３４で、録画を開始しないと判断すると、ステップＳ３５に進み、ＣＰＵ１０は、現在、音の再生処理中であるか否かを判断する。つまり、現在、内蔵スピーカから音が放音されているか否かを判断する。
ステップＳ３５で、音の再生処理が行なわれていないと判断するとステップＳ３２に戻り、音の再生処理が行なわれていると判断するとステップＳ３４に戻る。
【００５２】
一方、ステップＳ３４で、録画を開始すると判断すると、ステップＳ３６に進み、ＣＰＵ１０は、動画記録処理を開始する。つまり、ＣＣＤ５により順次撮像されバッファメモリに記憶されたフレーム画像データをフラッシュメモリ１３に記録させていく処理を開始する。
次いで、ＣＰＵ１０は、ステップＳ３７に進み、ＣＰＵ１０は、録音処理を開始する。つまり、内蔵マイク２６により集音された音が電気信号に変換され、デジタル信号に変換された音データを順次バッファメモリに記憶し、該記憶した音データをフラッシュメモリ１３に記録させていく処理を開始する。
【００５３】
次いで、ステップＳ３８に進み、ＣＰＵ１０は、現在、音の再生処理中であるか否かを判断する。つまり、現在、内蔵スピーカから音が放音されているか否かを判断する。
ステップＳ３８で、音の再生処理が行なわれていないと判断すると、ステップＳ３９に進み、ＣＰＵ１０は、音を再生させるか否かを判断する。この判断は、図４のステップＳ２と同様の判断を行う。
【００５４】
ステップＳ３９で、音を再生させると判断すると、ステップＳ４０に進み、ＣＰＵ１０は、ユーザによって選択された音データの再生処理を開始させて、ステップＳ４１に進む。この再生処理は、最後まで再生させると自動的に終了するが、ユーザによって再生終了の指示操作が行なわれた場合も終了する。
一方、ステップＳ３８で現在、音の再生処理が行なわれていないと判断した場合、ステップＳ３９で音を再生させないと判断した場合は、そのままステップＳ４１に進む。
【００５５】
ステップＳ４１に進むと、ＣＰＵ１０は、録画を終了するか否かを判断する。この判断は、図４のステップＳ１０と同様の判断を行う。
ステップＳ４１で録画を終了しないと判断するとステップＳ３８に戻り、ステップＳ４１で録画を終了すると判断すると、ステップＳ４２に進み、ＣＰＵ１０は、動画記録処理によりフラッシュメモリ１３に記録されたフレーム画像データと、録音処理によりフラッシュメモリ１３に記録された音データとから音付動画ファイルを生成すると共に、再生された音データの情報（音情報）も関連付けて記録させる。この音情報とは、再生された音データの所在情報、どのタイミングで音データが再生されたか、どのタイミングで音データの再生が終了したか、再生された音データのうち、どの部分から録音されたか等の情報である。例えば、録音処理開始時に既に音データが再生されていた場合は、該再生されていた音データのうち、どのタイミングから該音データが録音されたかの情報や、録音処理開始されてから音データが再生された場合は、録画、録音のどのタイミングで音データが再生されたかの情報である。
【００５６】
次に、再生時に減算する場合の音付動作再生に動作を図６のフローチャートに従って説明する。
ユーザのキー入力部１４のモード切替キーの音付動画撮影モードに設定されると、ステップＳ５１に進み、ＣＰＵ１０は、ユーザの操作にしたがって、再生対象となる音付動画ファイルを選択する。
【００５７】
次いで、ステップＳ５２で、ＣＰＵ１０は、該選択した音付動画ファイルの再生処理を開始する。つまり、音付動画ファイルを読み出してバッファメモリに記憶させ、フレーム画像データを順次画像表示部１２に表示させていくと共に、音データを順次内蔵スピーカ２６から放音させる処理を開始させる。
このとき、該選択した音付動画ファイルに音情報が関連付けて記録されている場合は、該音情報に基づいて録音時に再生された音データを特定し、フラッシュメモリ１３やメモリ９から読み出してバッファメモリに音データを記憶させておく。
【００５８】
次いで、ステップＳ５３で、ＣＰＵ１０は、撮影時に再生された音の録音が開始されたタイミングが到来したか否かを判断する。この判断は、ステップＳ５１で選択した音付動画ファイルに関連付けられて記録されている音情報に基づいて判断する。この撮影時に再生された音の録音が開始されたタイミングとは、例えば、動画記録、録音開始時に既に音データが再生されている場合は、動画記録、録音が開始されたタイミングのことであり、動画記録、録音が開始され、その後、音データの再生が開始された場合は、該音データの再生開始が開始されたタイミングのことである。
【００５９】
ステップＳ５３で、再生された音の録音が開始されたタイミングが到来していないと判断すると、ステップＳ５４に進み、ＣＰＵ１０は、音付動画ファイルの再生処理が終了したか否かを判断する。
ステップＳ５４で、音付動画ファイルの再生処理が終了していないと判断するとステップＳ５３に戻る。
【００６０】
一方、ステップＳ５３で、再生された音の録音が開始されたタイミングが到来したと判断すると、ステップＳ５５に進み、ＣＰＵ１０の減算処理部３１は、現在再生している音付動画ファイルの音データから、バッファメモリに記憶されている録音時に再生された音データを減算する処理を開始させる。このときは、録音時に再生された音と同期させて、音付動画ファイルの音データから、再生させた音データを減算させる。この減算された音データが内蔵スピーカ２６から放音されることになる。
【００６１】
次いで、ステップＳ５６で、ＣＰＵ１０は、音付動画ファイルの再生が終了したか否かを判断する。この判断は、音付動画ファイルを最後まで再生させた場合や、ユーザのキー入力部１４の操作により再生を終了する旨の操作信号が送られてくると、音付動画ファイルの再生が終了したと判断する。
ステップＳ５６で、音付動画ファイルの再生が終了していないと判断すると、ステップＳ５７に進み、ＣＰＵ１０は、撮影時（録音時）に再生された音の録音が終了したタイミングが到来したか否かを判断する。この判断も、ステップＳ５１で選択した音付動画ファイルに関連付けられて記録されている音情報に基づいて行なう。この撮影時に再生された音の録音が終了したタイミングとして、撮影時に再生された音が最後まで再生され、自動的に音の再生が終了したタイミング、若しくは撮影時にユーザによって再生している音の再生終了操作が行なわれたタイミングなどがある。
【００６２】
ステップＳ５７で、撮影時に再生された音の録音が終了したタイミングが到来していないと判断するとステップＳ５６に戻り、ステップＳ５７で、撮影時に再生された音の録音が終了したタイミングが到来したと判断すると、ステップＳ５８に進み、ＣＰＵ１０は、現在再生している音付動画ファイルの音データから録音時に再生された音データの減算処理を終了して、ステップＳ５３に戻る。
一方、ステップＳ５４、ステップＳ５６で、音付動画ファイルの再生を終了すると判断すると、ステップＳ５９に進み、ＣＰＵ１０は、音付動画ファイルの再生処理を終了させる。
これにより、音が再生されながら録音された音を再生する場合であっても、該録音時に再生された音によって被写体の音声がかき消されることなく、録音された音の再生精度を向上することができる。
【００６３】
以上のように、第１の実施の形態においては、音付動画撮影中に、音データが再生された場合であっても、内蔵マイク２１により集音された音データから該再生する音データを減算するので、撮影録音時に音を再生した場合であっても、再生された音によって被写体の音声がかき消されることがなく、音が再生されながら録音された音の再生の精度を向上することができる。
例えば、ダンス等の曲を再生ながら音付動画撮影を行なった場合であっても、動画再生の際にダンスの曲のみが極端に大きな音で再生されることがない。
【００６４】
なお、上記第１の実施の形態において、被写体の音声と、録音時に再生された音とが同じ音レベルとなるように、内蔵マイク２１から集音された音データから該再生された音データを減算するようにしたが、録音時に再生された音が無くなるように（音レベルがゼロ若しくは略ゼロ）となるように、内蔵マイク２１から集音された音データから該再生された音データを減算し、該減算後の音データと録音時に再生された音データとを合成するようにしてもよい。この場合は、録音時に再生された音データの音レベルと被写体の音声の音レベルとが同じになるように合成するようにしてもよいし、ユーザによって選択された音レベルとなるように該録音時に再生された音データを合成させるようにしてもよい。これにより、再生された音を綺麗な音で録音することができる。
また、内蔵マイク２１により集音された音データをそのまま記録し、記録後に、記録した音データから、録音時に再生された音データを減算した音データを生成して記録するようにしてもよい。これにより、撮影時、再生時の処理負担を軽減することができる。
【００６５】
［第２の実施の形態］
次に第２の実施の形態について説明する。
第２の実施の形態では、音付動画撮影を行なうときや行なっている最中に、音データを再生した場合であっても、被写体の音声が再生した音にかき消されないよう十分に被写体の声が撮影者に聞こえるようにするというものである。
【００６６】
Ｄ.デジタルカメラ１の機能
第２の実施の形態も、図１に示したものと同様の構成を有するデジタルカメラ１を用いることにより本発明の撮像装置を実現する。
但し、第２の実施の形態においては、音声処理部１５は、内蔵スピーカ、ローパスフィルタ／アンプ、Ａ／Ｄ変換器を２つずつ備え、一方の内蔵スピーカ（第１の実施の形態で説明した内蔵スピーカ２１）は撮影レンズ２が設けられている面（被写体側）に備えられ、他方の内蔵スピーカは画像表示部１２が設けられている反対側の面（撮影者側）に備えられている。また、ＣＰＵ１０は、音データと逆位相の音データを生成する逆位相生成部を備えている。
【００６７】
図７は、第２の実施の形態における音声処理部１５及びＣＰＵ１０の機能を説明するための図である。
図７を見るとわかるように、音声処理部１５は、Ｄ／Ａ変換器２４、ローパスフィルタ／アンプ２５、内蔵スピーカ２６（第１のスピーカ２６）に加え、更に、Ｄ／Ａ変換器２７、ローパスフィルタ／アンプ２８、内蔵スピーカ２９（第２のスピーカ２９）を備えている。なお、内蔵マイク２１、アンプ／ローパスフィルタ２２、Ａ／Ｄ変換器２３は、図示を省略している。
【００６８】
まず、ＣＰＵ１０は、フラッシュメモリ１３に記録されているデジタル信号の音データ（音楽等の音データ）をバッファメモリに記憶させ、ＣＰＵ１０の逆位相生成部３２は、該記憶させた音データから、該音データと逆位相の音声データを順次生成さていく。この逆位相の音声データの生成は既に周知技術なので説明を割愛する。
【００６９】
そして、ＣＰＵ１０は、該記憶させた音データを順次Ｄ／Ａ変換器２４に出力すると共に、該生成された逆位相の音データをＤ／Ａ変換器２７に順次出力させていく。このとき、音データと生成された逆位相の音データとを同期させて、Ｄ／Ａ変換器２４、２７にそれぞれ出力させる。
Ａ／Ｄ変換器２４、２７は、該入力されたデジタル信号の音データからアナログ信号の音データに変換して、ローパスフィルタ／アンプ２５、２８にそれぞれ出力し、ローパスフィルタ／アンプ２５、２８は、入力された音データの不要な周波数帯域をカットして、増幅してから内蔵スピーカ２６、２９にそれぞれ出力し、内蔵スピーカ２６、２９は該入力された音データを音に変換して放音する。
【００７０】
このように、被写体側の内蔵スピーカ２６には、音データがそのまま放音され、撮影者側の内蔵スピーカ２９には音データと逆位相の音データが放音されるので、被写体には内蔵スピーカ２６から放音された音がそのまま伝わり、撮影者には、内蔵スピーカ２６から放音された音が、内蔵スピーカ２９から放音された逆位相の音によって減殺されるので、内蔵スピーカ２６から放音される音が小さくなり、被写体の声がかき消されることなく撮影者に十分に伝わる。
【００７１】
Ｅ．デジタルカメラ１の動作
以下、第２の実施の形態のデジタルカメラ１の動作を図８のフローチャートにしたがって説明する。
まず、ステップＳ７１で、ＣＰＵ１０は、音を再生させるか否かを判断する。この判断は、図４のステップＳ２や、ステップＳ９と同様の判断であり、ユーザによって音再生キーの操作を行なわれ、スルー画像表示に重ねて表示されたフラッシュメモリ１３等に記録されている音データ（音楽や、お遊びの音等の音データ）がユーザの十字キー、ＳＥＴキーの操作によって選択された場合は、音を再生させると判断する。
【００７２】
ステップＳ７１で、音を再生させると判断すると、ステップＳ７２に進み、ＣＰＵ１０の逆位相生成部３２は、ユーザによって選択された音データと逆位相の音データを生成する処理を開始する。
次いで、ステップＳ７３で、ユーザによって選択された音データを、第１のスピーカから放音させることにより該音データの再生処理を開始させる。
次いで、ステップＳ７４で、該生成された逆位相の音データを、第２のスピーカから放音させることにより該音データの再生処理を開始させる。このとき、逆位相の音データを、ステップＳ７３で再生される音データと同期させて放音させる。
【００７３】
次いで、ステップＳ７５で、音の再生処理を終了したか否かを判断する。この判断は、図４のステップＳ１４と同様の判断であり、再生している音が最後まで再生された場合や、ユーザによって再生を中止する操作が行なわれた場合等は、再生処理が終了したと判断する。
ステップＳ７５で、音の再生処理が終了していないと判断すると、終了するまでステップＳ７５に戻り、音の再生処理が終了したと判断すると、ステップＳ７６に進み、ＣＰＵ１０は、逆位相の生成処理、ステップＳ７３、７４の再生処理を終了してステップＳ７１に戻る。
【００７４】
以上のように、第２の実施の形態においては、再生している音データと逆位相の音データを生成し、再生している音データを被写体側に向けられた第１のスピーカから放音し、該生成した逆位相の音データを撮影者側に向けられた第２のスピーカから放音するようにしたので、再生している音によって被写体の音声がかき消されること無く撮影者にも聞こえる。
【００７５】
［第３の実施の形態］
次に第３の実施の形態について説明する。
第３の実施の形態では、録音される音のうち、被写体の音声以外の周辺音を抑えることによって、被写体の音声が周辺音によってかき消されないようにするというものである。
【００７６】
Ｆ．デジタルカメラ１の機能
第３の実施の形態も図１に示したものと同様の構成を有するデジタルカメラ１を用いることにより本発明の撮像装置を実現する。
但し、第３の実施の形態においては、ＣＰＵ１０は、音声認識処理部、音抽出部、減算処理部を有している。
【００７７】
図９は、第３の実施の形態における音声処理部１５及びＣＰＵ１０の機能を説明するための図である。
図９を見るとわかるように、音声処理部１５の内蔵マイク２１によって変換され、アンプ／ローパスフィルタ２２を介してＡ／Ｄ変換器２３から出力されるデジタル信号の音データ（音声と周辺音を含む音データ）は、ＣＰＵ１０の音声認識処理部３３に送られる。なお、音声処理部１５のＤ／Ａ変換器２４、ローパスフィルタ／アンプ２５、内蔵スピーカ２６は、図示を省略している。
【００７８】
そして、音声認識処理部３３は、該送られてきた音データ（音声と周辺音を含む音データ）に対して音声認識処理を行うことにより音データの音声部分を認識して、音抽出部３４に出力する。この音声認識により、音声（人の声）と、それ以外の周辺音（動物の鳴き声や、車の音、海の波の音、風によって木がなびく音）とを区別することが可能となる。この音声認識処理は既に周知技術なので説明を割愛する。
音抽出部３４は、音声認識処理部の認識結果に基づいて、該送られてきた音データ（音声と周辺音を含む音データ）から周辺音の音データを抽出する。この音抽出部３４は、送られてきた音データ（音声と周辺音を含む音データ）を減算処理部３１にそのまま出力すると共に、抽出した周辺音の音データも減算処理部３１に出力する。
【００７９】
減算処理部３１は、送られてきた音データ（音声と周辺音を含む音データ）から該送られてきた周辺音の音データを減算する。この減算は、周辺音の音が全く無くなるように減算してもよいし、周辺音の音が少し聞こえるように減算するようにしてもよい。また、ユーザが減算の度合いを任意に選択することができるようにしてもよい。
そして、減算処理部３１から出力される減算後の音データがバッファメモリに記憶され、フラッシュメモリ１３に記録される。
これにより、周辺音のボリュームを抑えて録音することができ、被写体の音声が周辺音にかき消されずにすむ。
【００８０】
Ｇ．デジタルカメラ１の動作
以下、第３の実施の形態のデジタルカメラ１の動作を図１０のフローチャートにしたがって説明する。
ユーザのキー入力部１４のモード切替キーの音付動画撮影モードに設定されると、ステップＳ９１に進み、ＣＰＵ１０は、動画撮像処理を開始して、被写体のスルー画像表示を開始させる。
【００８１】
次いで、ステップＳ９２で、ＣＰＵ１０は、録画を開始するか否かを判断する。この判断は、図４のステップＳ４と同様の判断を行う。
ステップＳ９２で、録画を開始しないと判断すると、録画を開始すると判断するまでステップＳ９２に留まり、録画を開始すると判断すると、ステップＳ９３に進み、ＣＰＵ１０は、動画記録処理を開始する。つまり、ＣＣＤ５により順次撮像されバッファメモリに記憶されたフレーム画像データをフラッシュメモリ１３に記録させていく処理を開始する。
【００８２】
次いで、ステップＳ９４で、ＣＰＵ１０は、録音処理を開始する。つまり、内蔵マイク２１により電気信号に変換され、デジタル信号に変換された音データを順次バッファメモリに記憶し、該記憶した音データをフラッシュメモリ１３に記録させていく処理を開始する。
次いで、ステップＳ９５で、ＣＰＵ１０の音声認識処理部３３は、該内蔵マイク２１により取得され、Ａ／Ｄ変換器２３により順次変換されたデジタル信号の音データに対して音声認識処理を行うことにより、音声部分を認識して、送られてきた音データをそのまま音抽出部３４に出力する。
【００８３】
次いで、ステップＳ９６で、ＣＰＵ１０は、該音声認識処理による認識結果に基づいて被写体の音声が含まれているか否かを判断する。
ステップＳ９６で、被写体の音声が含まれていると判断すると、ステップＳ９７に進み、ＣＰＵ１０の音抽出部３４は、音声認識結果に基づいて、音声認識処理部３３から送られてきた音データのうち、周辺音の音データを抽出し、減算処理部３１は、該送られてきた音データから該抽出した周辺音の音データを減算する処理を行って、ステップＳ９８に進む。この減算後の音データがバッファメモリに記憶され、フラッシュメモリ１３に記録されることになる。
【００８４】
一方、ステップＳ９６で、被写体の音声が含まれていないと判断すると、そのままステップＳ９８に進む。このときは、音抽出部３４、減算処理部３１は送られてきた音データをスルーさせて出力することになり、音声認識処理部３３に送られてきた音データは減算されずにそのままバッファメモリに記憶され、フラッシュメモリ１３に記録されることになる。
ステップＳ９８に進むと、ＣＰＵ１０は、録画を終了するか否かを判断する。この判断は、図４のステップＳ１０と同様の判断を行う。
ステップＳ９８で、録画を終了しないと判断するとステップＳ９６に戻り、ステップＳ９８で、録画を終了すると判断すると、ステップＳ９９に進み、ＣＰＵ１０は、該撮像され記録されたフレーム画像データと記録された音データとに基づいて音付動画ファイルを生成する。
【００８５】
以上のように、第３の実施の形態においては、内蔵マイク２１により集音された音データを音声認識し、該音声認識結果に基づいて内蔵マイク２１により集音された音データから、音声以外の周辺音の音データを減算するようにしたので、周辺音が騒々しい場合でも、被写体の音声が周辺音によってかき消されることは無く、被写体の音声が最も大きくなるように録音することができ、録音、再生の精度を向上させることができる。
【００８６】
なお、第３の実施の形態においては、内蔵マイク２１から集音された音データから周辺音の音データを減算して、記録するようにしたが（録音するようにしたが）、録音時は、減算することなくそのまま記録し、再生時に、音声認識処理を行うことにより、再生する音データから周辺音の音データを減算して、音を再生するようにしてもよい。
また、内蔵マイク２１から集音された音データをそのまま記録し、記録後に、音声認識処理を行うことにより、周辺音を減算した音データを生成して記録するようにしてもよい。これにより、撮影時、再生時の処理負担を軽減することができる。
【００８７】
また、例えば、撮影者と被写体が会話をした場合、内蔵マイク２１に近い撮影者の声の方が大きくなるので、内蔵マイク２１により集音された音データを音声認識することにより、音レベルの大きい音声（音が大きい音声）と、音レベルの小さい音声（音が小さい音声）とを区別し、該音レベルが大きい音声と、音レベルが小さい音声とが同じ音レベルとなるように、内蔵マイク２１により集音された音データから、音レベルの大きい音声データを減算するようにしてもよいし、音レベルの小さい音声を増幅して音レベルを大きくするようにしてもよい。これにより、撮影者と被写体の音の大きさを同じにして録音、再生することができ、録音精度、再生精度を向上させることができる。
また、この場合もユーザが減算の度合い、増幅の度合いを指定することができるようにしてもよい。
【００８８】
また、第１及び第３の実施の形態において、内蔵マイク２１によって集音された音データに対して音声認識を行い、内蔵マイク２１によって集音された音データに対して減算を行なわず、または減算を行なうと共に、音声の音レベルを大きくして記録、再生するようにしてもよい。
【００８９】
また、上記各実施の形態を任意に組み合わせた態様であってもよい。
この第１の実施の形態と、第３の実施の形態とを組み合わせる場合は、周辺音の音データのうち、録音時に再生された音データ以外の音データを内蔵マイク２１によって集音された音データから減算すると共に、該録音時に再生させる音データも減算するようにしてもよい。
例えば、録音時にヴォーカル付きの音楽を再生している場合は、該再生している音が周辺音として認識されない部分と、周辺音として認識される部分とに分かれてしまう場合があり、適切に再生している音楽を減算することはできないので、再生している音楽と、周辺音のうち該音楽以外の音データとを分けてそれぞれ内蔵マイク２１から集音された音データから減算する。これにより、再生精度を向上させることができる。
【００９０】
また、上記各実施の形態においては、音付動画撮影の場合について説明したが、音付静止画撮影、撮影を伴わない単なる録音の場合のおいても適用可能である。
【００９１】
また、本発明の上記実施形態は、何れも最良の実施形態としての単なる例に過ぎず、本発明の原理や構造等をより良く理解することができるようにするために述べられたものであって、添付の特許請求の範囲を限定する趣旨のものでない。
したがって、本発明の上記実施形態に対してなされ得る多種多様な変形ないし修正はすべて本発明の範囲内に含まれるものであり、添付の特許請求の範囲によって保護されるものと解さなければならない。
【００９２】
最後に、上記各実施の形態においては、本発明の撮像装置をデジタルカメラ１に適用した場合について説明したが、上記の実施の形態に限定されるものではなく、要は、被写体を撮影し、音を録音することができる機器であれば適用可能である。
【符号の説明】
【００９３】
１      デジタルカメラ
２      撮影レンズ
３      レンズ駆動ブロック
４      絞り
５      ＣＣＤ
６      ドライバ
７      ＴＧ
８      ユニット回路
９      メモリ
１０    ＣＰＵ
１１    ＤＲＡＭ
１２    画像表示部
１３    フラッシュメモリ
１４    キー入力部
１５    音声処理部
１６    バス
【図１】
2011250439.tif 000003
【図２】
2011250439.tif 000004
【図３】
2011250439.tif 000005
【図４】
2011250439.tif 000006
【図５】
2011250439.tif 000007
【図６】
2011250439.tif 000008
【図７】
2011250439.tif 000009
【図８】
2011250439.tif 000010
【図９】
2011250439.tif 000011
【図１０】
2011250439.tif 000012
【手続補正書】
【提出日】平成23年8月1日(2011.8.1)
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【０００６】
上記目的達成のため、本発明の撮像装置は、
撮像手段と、
マイクロフォンにより集音された音データを取得する取得手段と、
前記取得された音データに対して人の声を認識する音声認識を行なう認識手段と、
前記音声認識の結果に基づいて、人の声以外の音を前記取得された音データから減算する減算手段と、
前記撮像手段により撮像された画像データと前記人の声以外の音を減算した音データとを関連付けて記録装置に記録する記録制御手段と
を備えたことを特徴とする。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】削除
【補正の内容】
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】削除
【補正の内容】
【手続補正５】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】削除
【補正の内容】
【手続補正６】
【補正対象書類名】明細書
【補正対象項目名】００１０
【補正方法】削除
【補正の内容】
【手続補正７】
【補正対象書類名】明細書
【補正対象項目名】００１１
【補正方法】削除
【補正の内容】
【手続補正８】
【補正対象書類名】明細書
【補正対象項目名】００１２
【補正方法】削除
【補正の内容】
【手続補正９】
【補正対象書類名】明細書
【補正対象項目名】００１３
【補正方法】削除
【補正の内容】
【手続補正１０】
【補正対象書類名】明細書
【補正対象項目名】００１４
【補正方法】削除
【補正の内容】
【手続補正１１】
【補正対象書類名】明細書
【補正対象項目名】００１５
【補正方法】変更
【補正の内容】
【００１５】
本願発明によれば、録音された音の再生精度を向上することができる。
【手続補正１２】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
撮像手段と、
マイクロフォンにより集音された音データを取得する取得手段と、
前記取得された音データに対して人の声を認識する音声認識を行なう認識手段と、
前記音声認識の結果に基づいて、人の声以外の音を前記取得された音データから減算する減算手段と、
前記撮像手段により撮像された画像データと前記人の声以外の音を減算した音データとを関連付けて記録装置に記録する記録制御手段と
を備えたことを特徴とする撮像装置。
【請求項２】
使用者が前記人の声以外の音の音レベルを選択するための第１選択手段を備え、
前記減算手段は、前記第１選択手段によって選択された音レベルに従って前記減算する人の声以外の音の音量を決定する
ことを特徴とする請求項１に記載された撮像装置。
【請求項３】
撮像装置の録音方法において、
マイクロフォンによって集音された音データを取得するステップと、
前記取得された音データに対して人の声を認識する音声認識を行なうステップと、
前記音声認識の結果に基づいて、人の声以外の音を前記取得された音データから減算するステップと、
前記撮像装置により撮像された画像データと前記人の声以外の音を減算した音データとを関連付けて記録装置に記録するステップと
を含む録音方法。
【請求項４】
撮像装置を制御するコンピュータに、
マイクロフォンによって集音された音データを取得する機能と、
前記取得された音データに対して人の声を認識する音声認識を行なう機能と、
前記音声認識の結果に基づいて、人の声以外の音を前記取得された音データから減算する機能と、
前記撮像装置により撮像された画像データと前記人の声以外の音を減算した音データとを関連付けて記録装置に記録する機能と
を実現させるためのプログラム。