(57)【要約】【課題】撮影者が撮影のタイミングを計ることなく撮影を行うことができる技術を提供する。【解決手段】撮影装置１の制御部１１は、マイクロホン１５で収音される音声を録音するとともに、収音されている音声の音圧を検出し、検出した音圧が予め定められた閾値未満である期間が予め定められた期間以上継続し、かつ、その後に閾値以上の音圧が検出されたときに、静止画像の撮影を行う。制御部１１は、録音した音声を表す音声データと撮影された静止画像を表す静止画像データとを含むとともに、音声データと静止画像データとの時間的な対応関係を示す対応関係データを含むコンテンツを作成する。【選択図】図１
2010200079.tif 000002
【特許請求の範囲】
【請求項１】
自装置の周囲で収音する収音手段によって収音された音声を録音する録音手段と、
前記収音手段によって収音されている音声を解析し、解析結果が予め定められた条件を満たしたときに、静止画像の撮影指示を出力する撮影指示出力手段と、
前記撮影指示出力手段によって出力された撮影指示に従って静止画像を撮影する撮影手段と、
前記録音手段によって録音された音声を表す音声データと前記撮影手段によって撮影された静止画像を表す静止画像データとを含み、前記音声データと前記静止画像データとが時間的に対応付けられたコンテンツを作成するコンテンツ作成手段と
を具備することを特徴とする撮影制御装置。
【請求項２】
前記コンテンツは、前記録音手段によって録音された音声を表す音声データ、前記撮影手段によって撮影された静止画像を表す静止画像データ及び前記音声データと前記静止画像データとの時間的な対応関係を示す対応関係データを含む
ことを特徴とする請求項１に記載の撮影制御装置。
【請求項３】
前記撮影指示出力手段は、前記収音手段によって収音されている音声の音圧を検出し、検出した音圧が予め定められた閾値未満である期間が予め定められた期間以上継続し、かつ、その後に該閾値以上の音圧が検出されたときに、前記撮影指示を出力する
ことを特徴とする請求項１又は２に記載の撮影制御装置。
【請求項４】
前記コンテンツ作成手段によって作成されたコンテンツに含まれる音声データを再生する音声再生手段と、
前記コンテンツ作成手段によって作成されたコンテンツに含まれる前記音声データと前記静止画像データとの時間的な対応関係に従って、前記音声再生手段によって再生される音声データに同期させて、該コンテンツに含まれる静止画像データを表示手段に表示させる表示制御手段と
を具備することを特徴とする請求項１乃至３のいずれかに記載の撮影制御装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、撮影や録音を行う技術に関する。
【背景技術】
【０００２】
静止画や動画を撮影するデジタルカメラ等の撮影装置において、撮影時に音声を録音できるようにしたものが提案されている。例えば特許文献１には、撮影により得られた視覚化情報をそれに関連する音声情報に対応付けて情報の整理を容易に行うことができる録音機内蔵型撮影機器が提案されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平０５−３３３４５２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、特許文献１に記載の技術では、撮影は利用者の操作により行われる。そのため、撮影のタイミングは利用者が決めなければならず、利用者は常に注意してそのタイミングを計る必要がある。
本発明は上述した背景の下になされたものであり、撮影者が撮影のタイミングを計ることなく撮影を行うことのできる技術を提供することを目的とする。
【課題を解決するための手段】
【０００５】
上記課題を解決するために、本発明の好適な態様である撮影制御装置は、自装置の周囲で収音する収音手段によって収音された音声を録音する録音手段と、前記収音手段によって収音されている音声を解析し、解析結果が予め定められた条件を満たしたときに、静止画像の撮影指示を出力する撮影指示出力手段と、前記撮影指示出力手段によって出力された撮影指示に従って静止画像を撮影する撮影手段と、前記録音手段によって録音された音声を表す音声データと前記撮影手段によって撮影された静止画像を表す静止画像データとを含み、前記音声データと前記静止画像データとが時間的に対応付けられたコンテンツを作成するコンテンツ作成手段とを具備することを特徴とする。
【０００６】
上述の態様において、前記コンテンツは、前記録音手段によって録音された音声を表す音声データ、前記撮影手段によって撮影された静止画像を表す静止画像データ及び前記音声データと前記静止画像データとの時間的な対応関係を示す対応関係データを含んでもよい。
また、上述の態様において、前記撮影指示出力手段は、前記収音手段によって収音されている音声の音圧を検出し、検出した音圧が予め定められた閾値未満である期間が予め定められた期間以上継続し、かつ、その後に該閾値以上の音圧が検出されたときに、前記撮影指示を出力してもよい。
【０００７】
また、上述の態様において、前記コンテンツ作成手段によって作成されたコンテンツに含まれる音声データを再生する音声再生手段と、前記コンテンツ作成手段によって作成されたコンテンツに含まれる前記音声データと前記静止画像データとの時間的な対応関係に従って、前記音声再生手段によって再生される音声データに同期させて、該コンテンツに含まれる静止画像データを表示手段に表示させる表示制御手段とを具備してもよい。
【発明の効果】
【０００８】
本発明によれば、撮影者が撮影のタイミングを計ることなく撮影を行うことができる。
【図面の簡単な説明】
【０００９】
【図１】撮影装置のハードウェア構成の一例を示すブロック図である。
【図２】撮影装置の外観の一例を示す斜視図である。
【図３】コンテンツの内容の一例を示す図である。
【図４】撮影装置の機能的構成の一例を示すブロック図である。
【図５】撮影装置が行う撮影処理の流れを示すフローチャートである。
【図６】静止画像の撮影タイミングの一例を説明するための図である。
【発明を実施するための形態】
【００１０】
以下、図面を参照して、本発明の実施形態について説明する。
＜Ａ：構成＞
図１は、この発明の一実施形態である撮影装置１のハードウェア構成の一例を示すブロック図であり、図２は撮影装置１の外観の一例を示す斜視図である。撮影装置１は、静止画や動画を撮影する機能を備えた装置であり、例えばデジタルカメラである。図１において、制御部１１は、ＣＰＵ（Central Processing Unit）やＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）を備え、ＲＯＭ又は記憶部１２に記憶されているコンピュータプログラムを読み出して実行することにより、バスを介して撮影装置１の各部を制御する。記憶部１２は、制御部１１によって実行されるコンピュータプログラムやその実行時に使用されるデータを記憶するための記憶手段であり、例えばハードディスク装置である。表示部１３は、液晶パネル等を備え、制御部１１による制御の下に各種の画像を表示する。操作部１４は、撮影装置１の利用者による操作に応じた信号を制御部１１に出力する。操作部１４は、十字キー（図示略）や、録音を開始・終了させるためのボタンＢ１、静止画像の撮影及び動画像の撮影を開始・終了させるためのボタンＢ２等の各種のボタンを備えており、撮影装置１の利用者は、これらのボタンを押下することで、録音や撮影等を行うことができる。なお、静止画の撮影と動画像の撮影との切替は、撮影装置１に設けられた切替スイッチ（図示略）によって切り替えられるようになっている。撮影部１８は、撮影用レンズ１８ａ等を備え、撮影し、撮影した映像を表す映像データを出力する。撮影部１８は、撮影用レンズ１８ａを前後に移動させることによって撮影範囲を変更可能である。撮影装置１の利用者は、操作部１４の十字キー等を用いて撮影部１８の撮影範囲を設定できるようになっており、撮影部１８は、操作部１４からの信号に応じて、撮影用レンズ１８ａを移動させて撮影範囲を設定する。なお、本実施形態に係る映像データは、静止画像を表すデータや動画像を表すデータを含む。
【００１１】
マイクロホン１５は、収音し、収音した音声を表すアナログ信号を出力する収音手段である。音声処理部１６は、マイクロホン１５が出力するアナログ信号をＡ／Ｄ変換してデジタルデータを生成する。また、音声処理部１６は、制御部１１の制御の下、デジタル形式の音声データをＤ／Ａ変換してアナログ信号を生成し、生成した音声信号をスピーカ１７に出力する。スピーカ１７は、音声処理部１６から供給されるアナログ信号に応じた強度で放音する放音手段である。
【００１２】
なお、この実施形態では、マイクロホン１５とスピーカ１７とが撮影装置１に含まれている場合について説明するが、音声処理部１６に入力端子及び出力端子を設け、オーディオケーブルを介してその入力端子に外部マイクロホンを接続するとしても良く、同様に、オーディオケーブルを介してその出力端子に外部スピーカを接続するとしても良い。また、この実施形態では、マイクロホン１５から音声処理部１６へ入力される音声信号及び音声処理部１６からスピーカ１７へ出力される音声信号がアナログ音声信号である場合について説明するが、デジタル音声データを入出力するようにしても良い。このような場合には、音声処理部１６にてＡ／Ｄ変換やＤ／Ａ変換を行う必要はない。表示部１３、操作部１４、撮影部１８についても同様であり、撮影装置１に内蔵される形式であってもよく、外付けされる形式であってもよい。
【００１３】
記憶部１２は、図示のように、録音データ記憶領域１２１と、録画データ記憶領域１２２と、コンテンツ記憶領域１２３とを有している。録音データ記憶領域１２１には、マイクロホン１５で収音された音声を表す音声データが記憶される。録画データ記憶領域１２２には、撮影部１８から出力される映像データが記憶される。コンテンツ記憶領域１２３には、録音された音声を表す音声データ、撮影された静止画像を表す静止画像データ及び音声データと静止画像データとの時間的な対応関係を示す対応関係データを含むコンテンツが記憶される。
【００１４】
ここで、コンテンツ記憶領域１２３に記憶されるコンテンツの内容の一例について、図３を参照しつつ説明する。図３は、コンテンツの内容の一例を示す図である。図示のように、コンテンツは、「コンテンツＩＤ」と「音声データ」と「静止画像データ」と「対応関係」との各項目が互いに関連付けて構成される。これらの項目のうち、「コンテンツＩＤ」の項目には、コンテンツを識別する識別情報が格納される。「音声データ」の項目には、録音された音声を表す音声データが格納される。「静止画像データ」の項目には、撮影された静止画像を表す静止画像データが格納される。「対応関係」の項目には、音声データと静止画像データとの時間的な対応関係を示す対応関係データが格納される。この対応関係データとしては、例えば、音声の録音が開始されてから経過した時間を示すデータであってもよく、また、例えば、静止画像が撮影された時刻を示すデータであってもよく、要は、録音された音声と撮影された静止画像との時間的な対応関係を示すデータであればどのようなものであってもよい。このように、「音声データ」と「静止画像データ」とは時間的な対応関係をもって記憶されている。
【００１５】
次に、撮影装置１の機能的構成の一例について図面を参照しつつ説明する。図４は、撮影装置１の機能的構成の一例を示す図である。図において、音声入力部１１１には、マイクロホン１５によって収音された音声を表す音声データが入力される。録音部１１２は、音声入力部１１１に入力される音声データを録音データ記憶領域１２１に記憶する（すなわち録音する）。
【００１６】
音声解析部１１３は、マイクロホン１５によって収音されている音声を解析し、解析結果が予め定められた条件を満たしたときに、静止画像の撮影指示を出力する。ここでは、音声解析部１１３は、撮影開始直後のタイミング（すなわち利用者がボタンＢ１を押下したタイミング）で静止画像の撮影指示を出力する。また、音声解析部１１３は、録音部１１２によって録音されている音声の音圧を検出し、検出した音圧が予め定められた閾値未満である期間が予め定められた期間以上継続し、かつ、その後に閾値以上の音圧が検出されたときに、撮影指示を出力する。
【００１７】
映像入力部１１４には、撮影部１８によって撮影された映像を表す映像データが入力される。録画部１１５は、音声解析部１１３から撮影指示が出力されたタイミングで、そのタイミングにおいて映像入力部１１４に入力された映像データを録画データ記憶領域１２２に記憶する（すなわち静止画像を撮影する）。コンテンツ作成部１１６は、録音部１１２によって録音された音声と、録画部１１５によって録画された静止画像とからコンテンツを生成する。ここでは、コンテンツ作成部１１６は、録音された音声を表す音声データと、撮影された静止画像を表す静止画像データと、その音声データとその静止画像データとの時間的な対応関係を示す対応関係データとを含むコンテンツを作成する。コンテンツ作成部１１６は、作成したコンテンツをコンテンツ記憶領域１２３に格納する。
【００１８】
＜Ｂ：動作＞
＜Ｂ−１：撮影動作＞
次に、撮影装置１の動作について説明する。まず、撮影装置１が録音及び静止画像の撮影を行ってコンテンツを作成する動作について説明する。なお、静止画像のみの撮影動作や動画像の撮影動作については、従来の撮影装置の動作と同様であり、ここではその説明を省略する。まず、撮影者は、撮影したい被写体の方向に撮影用レンズ１８ａを向けて撮影準備を行い、操作部１４のボタンＢ１を押下することによって録音を開始する。
【００１９】
図５は、撮影装置１が行う処理の流れを示すフローチャートである。撮影装置１の制御部１１は、ボタンＢ１が押下されるまで待機し（ステップＳ１；ＮＯ）、ボタンＢ１が押下されると（ステップＳ１；ＹＥＳ）、操作部１４は操作された内容に応じた操作信号を出力し、制御部１１は、操作部１４から供給される信号に応じて、録音を開始する（ステップＳ２）。マイクロホン１５は収音した音声を音声信号に変換し、音声処理部１６へ出力する。音声処理部１６は、マイクロホン１５から出力される音声信号をデジタルデータ（以下「音声データ」という）に変換する。変換された音声データは録音データ記憶領域１２１に順次記憶されていく。
【００２０】
制御部１１は、マイクロホン１５によって収音された音声を解析し、解析結果が予め定められた条件を満たしたときに静止画像を撮影すると判定し（ステップＳ３；ＹＥＳ）、判定されたタイミングにおいて撮影部１８から出力される映像データを録画データ記憶領域１２２に記憶する（すなわち静止画像を撮影する）（ステップＳ４）。一方、解析結果が予め定められた条件を満たさない場合は（ステップＳ３；ＮＯ）、制御部１１は、静止画像の撮影指示を出力せずに（すなわちステップＳ４の処理を実行せずに）、ステップＳ５の処理に進む。
【００２１】
ここで、静止画像の撮影タイミングの特定処理（図５のステップＳ３〜Ｓ４）の具体的な内容の一例について、図面を参照しつつ説明する。制御部１１は、撮影開始直後のタイミング（すなわち利用者がボタンＢ１を押下したタイミング）で静止画像を撮影する。また、制御部１１は、マイクロホン１５によって収音された音声の音圧を常時リアルタイムで検出し、検出した音圧が予め定められた閾値未満である期間が予め定められた期間以上継続し、かつ、その後に閾値以上の音圧が検出されたときに、静止画像の撮影を行う。ここで、以下の説明では、説明の便宜上、予め定められた閾値未満である音圧が予め定められた期間以上継続して検出された期間を「無音期間」と称して説明する。また、「無音期間」以外の期間を「有音期間」と称して説明する。制御部１１は、音圧を検出して無音期間を検出し、無音期間が検出された場合、無音期間の後で閾値以上の音圧が検出されたタイミングで静止画像の撮影を行う。すなわち、制御部１１は、無音期間から有音期間に切り替わったタイミングで静止画像の撮影を行う。
【００２２】
図６は、撮影装置１の静止画像の撮影タイミングの具体的な内容の一例を説明するための図である。図において、横軸は録音が開始されてから経過した時間を示し、縦軸は音圧を示す。図６に示す例おいては、内容の理解を容易にするために、０．２秒毎のサンプリングとしている。図６に示す例においては、閾値Ｆを超える音圧がある場合に有音と判定される。制御部１１は、録音が開始されてから音声の音圧を検出し、音圧が閾値Ｆ以上か否かを判定し、音圧が閾値Ｆ未満である期間が予め定められた期間以上継続した場合に、無音期間として検出する。具体的には、図６に示す例において、制御部１１は、時刻ｔ１から音圧が閾値Ｆ未満である期間が時間Ｔ以上継続したことを検知し、この期間が無音期間であると検出する。
【００２３】
無音期間が検出されると、制御部１１は、無音期間から有音期間に切り替わるタイミングを検出する。具体的には、例えば、録音が開始されて予め定められた時間が経過した後に、利用者Ａが「こんにちは」という音声を発すると、制御部１１は、撮影タイミングを検出し、撮影を行う。具体的には、図６に示す時刻ｔ２において、制御部１１は、無音期間から有音期間への切り替わりを検出し、このタイミングで静止画像の撮影を行う。また、同様に、時刻ｔ３においても、制御部１１は、無音期間から有音期間への切り替わりを検出し、検出したタイミングにおいて撮影を行う。このように、図６に示す例では、録音が開始された時刻ｔ０、無音期間から有音期間に切り替わった時刻ｔ２、無音期間から有音期間に切り替わった時刻ｔ３のそれぞれのタイミングにおいて、静止画像の撮影が行われる。
【００２４】
図５の説明に戻る。ステップＳ５において、制御部１１は、録音を終了するか否かを判定する（ステップＳ５）。この判定は、撮影者によってボタンＢ１が押下されたか否かによって判定され、ボタンＢ１が押下されたときに録音を終了すると判定される。録音を継続すると判定した場合には（ステップＳ５；ＮＯ）、制御部１１は、録音処理を継続して行う。一方、録音を終了すると判定した場合には（ステップＳ５；ＹＥＳ）、制御部１１は録音を終了し（ステップＳ６）、ステップＳ７の処理に進んで音声データと映像データとの対応付けを行う。制御部１１は、ステップＳ６の処理を終えると、録画データ記憶領域１２２に記憶された映像データ、すなわち撮影部１８から出力された映像データと、音声データとを関連付けたコンテンツを生成し（ステップＳ７）、生成したコンテンツをコンテンツ記憶領域１２３に記憶する。
【００２５】
＜Ｂ−２：再生動作＞
次いで、撮影装置１が行う再生動作について説明する。撮影装置１の制御部１１は、利用者によって画像の表示を指示する旨の操作が行われるまで待機し、利用者によって画像の表示を指示する旨の操作が行われたことを検知すると、操作部１４から供給される信号に応じて、コンテンツ記憶領域１２３に記憶されたコンテンツに含まれる音声データを読み出し、読み出した音声データを音声処理部１６に供給して、音声データの表す音声をスピーカ１７から音として出力させる。
【００２６】
また、制御部１１は、指定されたコンテンツに含まれる対応関係データの示す時間的な対応関係に従って、再生される音声データに同期させて、コンテンツに含まれる静止画像データを表示部１３に出力して、静止画像データの表す静止画像を表示部１３に表示させる。すなわち、利用者の操作に応じて録音された音声が再生され、この再生に伴って、その音声データにおいて静止画像が撮影されたタイミングで表示される静止画像が切り替わる。なお、音声の再生に伴って表示される静止画像の表示態様は、音声と静止画像との間に時間的な対応関係があれば限定されることはなく、上記静止画像の表示方法は一態様である。
【００２７】
＜Ｃ：実施形態の効果＞
以上説明したように本実施形態に係る撮影装置は、静止画像と音声とを含むコンテンツを作成する際に、静止画像を撮影する適切なタイミングを特定するために、録音中の周囲音声を常時解析し、その解析結果に応じてタイミングを特定する。このようにすることによって、撮影者が撮影のタイミングを計ることなく撮影を行うことができる。
【００２８】
また、従来の装置において、動画像を録画する場合には、音声と同時に動画像も録音されるため、例えば、ほとんど風景が変わらない場合でもファイルサイズが大きくなる。逆に、ファイルサイズを小さくしようとすると動画の解像度が低くなってしまう。それに対しこの実施形態では、静止画像と音声のみでコンテンツを構成するため、画像と音声の解像度を高くすることができる。すなわち、また、音声と静止画像とを時間的に対応付けることによって、ファイルサイズが小さいが臨場感のある音声付静止画像を生成することができる。
【００２９】
＜Ｄ：変形例＞
以上、本発明の実施形態について説明したが、本発明は上述した実施形態に限定されることなく、他の様々な形態で実施可能である。以下にその一例を示す。なお、以下の各態様を適宜に組み合わせてもよい。
（１）上述の実施形態では、音声解析部１１３が、マイクロホン１５によって収音されている音声の音圧を検出し、検出した音圧が予め定められた閾値未満である期間が予め定められた閾値以上継続し、かつ、その後に閾値以上の音圧が検出されたときに、撮影指示を出力した。撮影指示の出力タイミングはこれに限らず、例えば、音声解析部１１３が、録音部１１２によって録音されている音声の音圧を検出し、予め定められた閾値以上の音圧が検出されたタイミングで撮影指示を出力するようにしてもよい。また、例えば、音声解析部１１３が、録音されている音声を解析して音声認識を行い、予め定められた音声パターンが検出されたタイミングで撮影指示を出力するようにしてもよい。要は、音声解析部１１３が、録音されている音声を解析し、解析結果が予め定められた条件を満たしたときに、静止画像の撮影指示を出力すればよい。
【００３０】
（２）上述の実施形態では、撮影装置１は、コンテンツの作成機能とコンテンツの再生機能との両方の機能を備えていたが、これに限らず、いずれか一方の機能のみを備えた装置であってもよい。例えば、撮影装置１がコンテンツの作成機能のみを備え、コンテンツの再生機能を有さない装置であってもよい。この場合は、コンテンツの再生機能を備える他の装置でコンテンツの再生を行うようにしてもよい。
【００３１】
（３）上述の実施形態では、コンテンツは対応関係データを用いて音声データと静止画像データとの時間的対応関係を示していたが、特に時間的対応関係を示すデータを必要としない。例えば、記憶部１２の記憶領域に予め音声再生の時間に対応してデータを再生する領域が決まっており、撮影タイミングに応じてその対応する領域に静止画像データあるいは静止画像データを示すデータを格納する方法でもよい。
【００３２】
（４）上述の実施形態では、コンテンツを記憶する記憶手段としてハードディスク装置等の記憶部１２を用いたが、コンテンツを記憶する記憶手段はハードディスク装置に限らず、例えば、ＳＤカード、ＣＤ−Ｒ、ＣＤ−Ｒ／Ｗ等の記録媒体であってもよく、要は、制御部１１が、生成したコンテンツを、コンピュータが読取可能な記録媒体に記録するようにすればよい。
【００３３】
（５）上述の実施形態では、本発明に係る撮影制御装置をデジタルカメラに適用した例について説明したが、本発明に係る撮影装置が適用される装置はデジタルカメラに限らず、例えば、パーソナルコンピュータ、携帯電話端末、コンピュータゲーム機等であってもよく、本発明に係る撮影制御装置は様々な装置に適用可能である。
【００３４】
（６）上述の実施形態における撮影装置１の制御部１１によって実行されるプログラムは、磁気記録媒体（磁気テープ、磁気ディスクなど）、光記録媒体（光ディスクなど）、光磁気記録媒体、半導体メモリなどのコンピュータが読取可能な記録媒体に記憶した状態で提供し得る。また、インターネットのようなネットワーク経由で撮影装置１にダウンロードさせることも可能である。なお、このような制御を行う制御手段としてはＣＰＵ以外にも種々の装置を適用することができ、例えば、専用のプロセッサなどを用いてもよい。
【符号の説明】
【００３５】
１…撮影装置、１１…制御部、１２…記憶部、１３…表示部、１４…操作部、１５…マイクロホン、１６…音声処理部、１７…スピーカ、１８…撮影部、１１１…音声入力部、１１２…録音部、１１３…音声解析部、１１４…映像入力部、１１５…録画部、１１６…コンテンツ作成部、１２１…録音データ記憶領域、１２２…録画データ記憶領域、１２３…コンテンツ記憶領域。
【図１】
2010200079.tif 000003
【図２】
2010200079.tif 000004
【図３】
2010200079.tif 000005
【図４】
2010200079.tif 000006
【図５】
2010200079.tif 000007
【図６】
2010200079.tif 000008