(57)【要約】  電子機器（１）は、動画における被写体の動きを解析する画像解析部（１０５）と、画像解析部（１０５）により解析された被写体の動きに応じた音声データ及び振動データを生成し、動画の画像データに生成した音声データ及び振動データを時間的に同期させたデータを生成する生成部（１０６）とを備える。
2013008869.tif 000002
【特許請求の範囲】
【請求項１】
動画における被写体の動きを解析する解析部と、
前記解析部により解析された被写体の動きに応じた音声データの生成と、前記生成した音声データに応じた振動データの生成とを行なう生成部と、
を備えることを特徴とする電子機器。
【請求項２】
被写体の動きそれぞれに応じた音声要素データを記憶する記憶部を備え、
前記生成部は、前記解析部により解析された被写体の動きに応じた音声要素データを前記記憶部から読み出し、読み出した音声要素データに基づいて前記音声データを生成する
ことを特徴とする請求項１に記載の電子機器。
【請求項３】
前記動画と時間的に同期している音声データにおいて、前記解析部により解析された被写体の動きに応じた音声を抽出する抽出部を備え、
前記生成部は、前記音声データにおいて、前記抽出部により抽出された音声を強調する
ことを特徴とする請求項１に記載の電子機器。
【請求項４】
動画における被写体の動きを解析する解析部と、
前記解析部により解析された被写体の動きに応じた振動データの生成を行なう生成部と、
を備えることを特徴とする電子機器。
【請求項５】
前記生成部は、前記解析部により解析された被写体の動きに応じた音声データを生成する
ことを特徴とする請求項４に記載の電子機器。
【請求項６】
被写体の動きそれぞれに応じた音声要素データを記憶する第１の記憶部を備え、
前記生成部は、前記解析部により解析された被写体の動きに応じた音声要素データを前記第１の記憶部から読み出し、読み出した音声要素データに基づいて前記音声データを生成する
ことを特徴とする請求項５に記載の電子機器。
【請求項７】
前記動画と時間的に同期している音声データにおいて、前記解析部により解析された被写体の動きに応じた音声を抽出する抽出部を備え、
前記生成部は、前記音声データにおいて、前記抽出部により抽出された音声を強調する
ことを特徴とする請求項４又は５に記載の電子機器。
【請求項８】
被写体の動きそれぞれに応じた振動に関する情報を記憶する第２の記憶部を備え、
前記生成部は、前記第２の記憶部から前記解析部により解析された被写体の動きに応じた振動に関する情報を読み出し、読み出した振動に関する情報に基づいて振動データを生成する
ことを特徴とする請求項４から７のうちいずれか１項に記載の電子機器。
【請求項９】
前記生成部は、前記動画に、音声データと振動データとを時間的に同期させたマルチメディアデータを生成する
ことを特徴とする請求項１から８のうちいずれか１項に記載の電子機器。
【請求項１０】
画像を表示する表示部と、
音声を出力する音声出力部と、
振動を発生する振動部と、
前記マルチメディアデータに含まれる動画を前記表示部に表示するとともに、前記マルチメディアデータに含まれる音声データの音声を前記音声出力部に出力させ、前記マルチメディアデータに含まれる振動データに基づく振動を前記振動部に発生させることにより前記データを再生する再生部と、
を備えることを特徴とする請求項９に記載の電子機器。
【請求項１１】
被写体を撮像する撮像部と、
前記撮像部において動画を撮像しているときに、前記画像解析部及び前記生成部を制御して当該動画に対応するデータを生成する制御部と、
を備えることを特徴とする請求項１から１０のうちいずれか１項に記載の電子機器。
【請求項１２】
前記解析部は、前記被写体の動きのベクトルに基づいて前記被写体の動きを解析する
ことを特徴とする請求項１から１１のうちいずれか１項に記載の電子機器。
【請求項１３】
電子機器が、動画における被写体の動きを解析することと、
前記電子機器が、解析された前記被写体の動きに応じた音声データの生成と、前記生成した音声データに応じた振動データの生成とを行なうことと、
を有することを特徴とするデータ生成方法。
【請求項１４】
電子機器が、動画における被写体の動きを解析することと、
前記電子機器が、解析された被写体の動きに応じた音声データの生成と、前記解析部により解析された被写体の動きに応じた振動データの生成とを行なうことと、
を有することを特徴とするデータ生成方法。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、電子機器及びデータ生成方法に関する。
本願は、２０１１年７月１４日に出願された特願２０１１−１５５５８６号に基づき優先権を主張し、その内容をここに援用する。
【背景技術】
【０００２】
現在、映像に応じた音声信号を生成する技術が知られている（例えば、特許文献１参照）。特許文献１に記載された技術では、映像における所定の検出領域の色情報を検出し、当該色情報に対応する所定の音色を用いて音声信号を生成している。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００１−９２４７８号
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１に記載された技術では、映像における色情報に対応する音色を用いて音声信号のみを生成しており、映像における被写体の動きについては考慮されていない、という問題がある。【０００５】
本発明の態様は、動画における被写体の動きに応じた音声データと振動データとを生成することができる電子機器及びデータ生成方法を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の一態様は、動画における被写体の動きを解析する解析部と、前記解析部により解析された被写体の動きに応じた音声データの生成と、前記生成した音声データに応じた振動データの生成とを行なう生成部と、を備えることを特徴とする電子機器である。
本発明の他の一態様は、動画における被写体の動きを解析する解析部と、前記解析部により解析された被写体の動きに応じた音声データの生成と、前記解析部により解析された被写体の動きに応じた振動データの生成とを行なう生成部と、を備えることを特徴とする電子機器である。
【発明の効果】
【０００７】
本発明の態様によれば、動画における被写体の動きに応じた音声データと振動データとを生成することができる。
【図面の簡単な説明】
【０００８】
【図１】第１の実施形態による電子機器の構成を示すブロック図である。
【図２】第１の実施形態によるマルチメディアデータの生成方法を説明するための図である。
【図３】第１の実施形態によるマルチメディアデータ生成処理の手順を示すフローチャートである。
【図４】第２の実施形態によるマルチメディアデータ生成処理の手順を示すフローチャートである。
【図５】第３の実施形態による電子機器の構成を示すブロック図である。
【図６】第３の実施形態によるマルチメディアデータ生成処理の手順を示すフローチャートである。
【発明を実施するための形態】
【０００９】
以下、図面を参照しながら本発明の実施形態について詳しく説明する。
【００１０】
［第１の実施形態］
図１は、本発明の第１の実施形態による電子機器１の構成を示すブロック図である。
電子機器１は、携帯電話機、スマートフォン、デジタルカメラ等の携帯情報端末である。電子機器１は、制御部１０１と、撮像部１０２と、マイク１０３と、データ記憶部１０４と、画像解析部１０５と、生成部１０６と、ライブラリ（記憶部）１０７と、音声出力部１０８と、振動部１０９と、表示部１１０とを含む。
【００１１】
撮像部１０２は、被写体を撮像して画像データを生成する。例えば、撮像部１０２は、静止画撮影操作に応じて、撮像した静止画の画像データを出力する。また、撮像部１０２は、動画撮影操作に応じて、所定の間隔で連続的に撮像した動画の画像データを出力する。そして、撮像部１０２によって撮像された静止画の画像データ及び動画の画像データは、制御部１０１の制御により、データ記憶部１０４に記録される。また、撮像部１０２は、撮影操作がされていない撮影待機状態の場合、所定の間隔で連続的に得られる画像データをスルー画像データ(スルー画）として出力する。そして、撮像部１０２によって得られたスルー画像データは、制御部１０１の制御により、表示部１１０に表示される。
マイク１０３は、音声を収音し、収音した音声に応じた音声データを生成する。
【００１２】
データ記憶部１０４は、動画の画像データ、動画音声データ、及び、マルチメディアデータ等を記憶する。動画音声データは、動画の画像データと、当動画の画像データと時間的に同期している音声データとを含むデータである。また、マルチメディアデータは、動画の画像データと、当動画の画像データと時間的に同期している音声データと、当動画の画像データと時間的に同期している振動データとを含むデータである。
【００１３】
制御部１０１は、電子機器１の各部を統括して制御する。例えば、制御部１０１は、撮像部１０２が生成した動画の画像データとマイク１０３が収集した音声データとを時間的に同期させて動画音声データを生成し、生成した動画音声データをデータ記憶部１０４に書き込む。また、制御部１０１は、画像解析部１０５及び生成部１０６を制御することにより、動画の画像データに対応する音声データ及び振動データを生成し、動画の画像データに生成した音声データと振動データとを時間的に同期させることによりマルチメディアデータを生成する。また、制御部１０１は、データ記憶部１０４からマルチメディアデータを読み出し、表示部１１０、音声出力部１０８、及び振動部１０９を制御して読み出したマルチメディアデータを再生する。
【００１４】
画像解析部１０５は、動画の画像データにおける被写体の動きを解析し、解析した被写体の動きを生成部１０６に出力する。
ライブラリ１０７は、被写体の動きそれぞれに応じた音声要素データを記憶する記憶部である。
生成部１０６は、画像解析部１０５により解析された被写体の動きに応じた音声データを生成する。具体的には、生成部１０６は、被写体の動きに応じた音声要素データをライブラリ１０７から読み出し、読み出した音声要素データに基づいて音声データを生成する。また、生成部１０６は、生成した音声データに応じた振動データを生成する。具体的には、生成部１０６は、所定の変換式を用いて音声データを振動データに変換する。例えば、生成部１０６は、音声データの時間軸において音声の振動が所定値より大きい場合に振動が発生するように振動データを生成する。そして、生成部１０６は、当動画の画像データと、生成した音声データと、生成した振動データとを時間的に同期させてマルチメディアデータを生成し、生成したマルチメディアデータをデータ記憶部１０４に書き込む。
【００１５】
表示部１１０は、例えば液晶表示器等のディスプレイである。表示部１１０は、画像データを表示する。
音声出力部１０８は、音声データに応じた音声を出力する。音声出力部１０８は、デジタルの音声データをアナログに変換するコーデックと、変換されたアナログの音声データを出力するスピーカとを備える。
振動部１０９は、振動データに応じた振動を発生する。振動部１０９は、振動データに基づいて振動デバイスを振動させる振動信号発生部と、リニア振動アクチュエータ等の振動を発生する振動デバイスとを備える。
【００１６】
次に、図２及び図３を参照して、動画の画像データからマルチメディアデータを生成する処理について説明する。図２は、本実施形態によるマルチメディアデータの生成方法を説明するための図である。図３は、本実施形態によるマルチメディアデータ生成処理の手順を示すフローチャートである。
図２は、主被写体（人物）Ｔが走っている動画を示す。以下、主被写体Ｔが走っている動画を例に説明する。
制御部１０１は、データ記憶部１０４から動画の画像データを読み出し、読み出した動画の画像データを画像解析部１０５に出力することによりマルチメディアデータの生成を指示する。
【００１７】
まず、画像解析部１０５が、動画の画像データにおける主被写体Ｔを抽出する（ステップＳ１０１）。例えば、画像解析部１０５は、パターンマッチングにより人物を抽出し、抽出した人物を主被写体Ｔとする。このとき、画像解析部１０５は、複数の人物が抽出された場合には、画像データの中心部に近い人物を主被写体Ｔとしたり、顔認識により特定の人物を主被写体Ｔとする。顔認識により主被写体Ｔを決定する場合、電子機器１は、主被写体Ｔとする人物の顔のデータを予め記憶している。或いは、画像解析部１０５は、人物に限らず、中心部の近くに位置するオブジェクト、又は、動画中に多く出現するオブジェクトを主被写体Ｔとしてもよい。
【００１８】
次に、画像解析部１０５は、抽出した主被写体Ｔの動きを解析する（ステップＳ１０２）。具体的には、画像解析部１０５は、予め記憶してある動きのパターン（例えば、走っている、飛び跳ねている等）と動画における主被写体Ｔの動きをパターンマッチングすることにより、主被写体の動きを判定する。本例では、画像解析部１０５は、主被写体Ｔが走っていると判定する。また、画像解析部１０５は、主被写体Ｔの足が地面に着地するタイミング（動画における時間位置）を、例えば足の動きのベクトル解析により抽出する。画像解析部１０５は、ベクトル解析により抽出する場合、動きのベクトル方向が所定値より大きく変化したタイミングを足が地面に着地するタイミングとする。
【００１９】
次に、生成部１０６が、主被写体Ｔの動きに応じた音声データを生成する（ステップＳ１０３）。具体的には、まず、生成部１０６は、主被写体Ｔの動きに応じた音声要素データをライブラリ１０７から読み出し、読み出した音声要素データに基づいて音声データを生成する。本例では、生成部１０６は、走っている足音「タッ」をライブラリ１０７から読み出す。そして、生成部１０６は、主被写体Ｔの足が地面に着地するタイミングで足音「タッ」が鳴るように音声データを生成する。これにより、動画における主被写体Ｔが走る動きに合わせた「タッタッタッタ」という音の音声データが生成される。
【００２０】
次に、生成部１０６は、生成した音声データに応じた振動データを生成する（ステップＳ１０４）。本例では、生成部１０６は、足音「タッ」が出力されるタイミングで振動するように振動データを生成する。
最後に、生成部１０６は、動画の画像データと、生成した音声データと、生成した振動データと時間的に同期させてマルチメディアデータを生成する（ステップＳ１０５）。
【００２１】
制御部１０１は、生成されたマルチメディアデータを再生する際、動画の画像データを表示部１１０に表示するとともに、音声データを音声出力部１０８に出力し、振動データを振動部１０９に出力する。これにより、このマルチメディアデータが再生されると、表示部１１０に表示される主被写体Ｔの動きに合わせて音声出力部１０８が足音「タッタッタッタ」を再生し、振動部１０９が振動を発生する。すなわち、表示部１１０において主被写体Ｔの足が地面に着地するタイミングで、足音「タッ」が再生されるとともに電子機器１において振動が発生する。
【００２２】
上述した例では、データ記憶部１０４に既に記憶されている動画の画像データからマルチメディアデータを生成しているが、撮像部１０２が撮影している動画の画像データからマルチメディアデータを生成してもよい。この場合、制御部１０１は、撮像部１０２が撮像中の動画の画像データを順次画像解析部１０５に出力する。そして、制御部１０１は、動画の撮影を終了する操作に応じて、生成部１０６を制御してこの動画のマルチメディアデータを生成する。これにより、ユーザは、動画撮影操作を行うだけで、振動が付加されたマルチメディアデータを取得することができる。
また、本実施形態では、生成部１０６は、所定の変換式により音声データを振動データに変換しているが、音声データ（音声要素データ）に対応する振動に関する情報（例えば、周波数、振動振幅、又は、振動時間等）を予めライブラリ１０７に記憶しておいて、ライブラリ１０７から音声データ（音声要素データ）に対応する振動に関する情報を読み出し、読み出した振動に関する情報に基づいて振動データを生成してもよい。
【００２３】
このように、本実施形態によれば、生成部１０６は、画像解析部１０５により解析された被写体の動きに応じた音声データ及び振動データを生成し、動画の画像データに音声データ及び振動データを時間的に同期させてマルチメディアデータを生成する。これにより、動画における被写体の動きに応じた音声データ及び振動データを生成することができる。また、マルチメディアデータを再生すると、動画に合わせて音声が再生されるとともに、電子機器１において振動が発生するため、マルチメディアデータの視聴をより楽しむことができる。例えば、思い出のある動画音声データに振動データを結合したマルチメディアデータの場合には、動画と音と振動という３感の表現により、動画と音だけの場合より、より鮮明に動画に関連する思い出を思い出すことに貢献できる。
【００２４】
［第２の実施形態］
次に、本発明の第２の実施形態について説明する。
本実施形態によるライブラリ１０７は、被写体の動きそれぞれに応じた振動に関するデータを記憶する。振動に関するデータには、例えば、周波数、振幅、又は、振動時間等が含まれる。また、生成部１０６は、被写体の動きに応じた振動データを生成する。具体的には、生成部１０６は、被写体の動きに応じた振動に関するデータをライブラリ１０７から読み出し、読み出した振動に関するデータに基づいて振動データを生成する。
他の構成は第１の実施形態と同様であるため説明を省略する。
【００２５】
次に、図４を参照して、動画音声データからマルチメディアデータを生成する処理について説明する。図４は、本実施形態によるマルチメディアデータ生成処理の手順を示すフローチャートである。
制御部１０１は、データ記憶部１０４から動画音声データを読み出し、読み出した動画音声データを画像解析部１０５に出力することによりマルチメディアデータの生成を指示する。
【００２６】
まず、画像解析部１０５が、動画音声データに含まれる動画の画像データにおける主被写体Ｔを抽出する（ステップＳ２０１）。
次に、画像解析部１０５は、抽出した主被写体Ｔの動きを解析する（ステップＳ２０２）。本例では、画像解析部１０５は、主被写体Ｔが走っていると判定する。また、画像解析部１０５は、主被写体Ｔの足が地面に着地するタイミング（動画における時間位置）を、例えば足の動きのベクトル解析により抽出する。
【００２７】
次に、生成部１０６が、主被写体Ｔの動きに応じた振動データを生成する（ステップＳ２０３）。具体的には、制御部１０６は、主被写体Ｔの動きに応じた振動に関するデータを読み出し、読み出した振動に関するデータに基づいて振動データを生成する。本例では、生成部１０６は、主被写体Ｔの足が地面に着地するタイミングで、振動に関するデータ（例えば、周波数、振幅、振動時間等）に従った振動が発生するように振動データを生成する。
或いは、ベクトル解析により得られたデータを基に、振動データを生成することもできる。この場合、動きのベクトル方向が所定値より大きく変化した場合に振動するように振動データを生成する等考えられる。
最後に、生成部１０６は、動画音声データに生成した振動データを時間的に同期させてマルチメディアデータを生成する（ステップＳ２０４）。
【００２８】
このマルチメディアデータが再生されると、表示部１１０に表示される主被写体Ｔの動きに合わせて振動部１０９が振動を発生する。すなわち、表示部１１０において主被写体Ｔの足が地面に着地するタイミングで、電子機器１において振動が発生する。
【００２９】
このように、本実施形態によれば、生成部１０６は、画像解析部１０５の解析結果に基づき振動データを生成するため、より被写体の動きに合わせた振動を発生することができる。
【００３０】
［第３の実施形態］
次に、本発明の第３の実施形態について説明する。
図５は、本実施形態による電子機器２の構成を示すブロック図である。
本実施形態による電子機器２は、図１に示す電子機器１の構成に加えて音声抽出部２１１を備える。
音声抽出部２１１は、画像解析部２０５による動画の画像データの解析結果に基づいて、音声データから主被写体Ｔの動きに応じた音声を抽出し、抽出した音声に関する情報（例えば、音声データにおける当該音声の時間位置）を生成部２０６に出力する。
生成部２０６は、音声データにおいて音声抽出部２１１が抽出した音声の音量を、少なくとも予め設定された所定量より大きくして新たに音声データを生成する。次に、生成部２０６は、生成した音声データに応じた振動データを生成する。具体的には、生成部２０６は、音声データにおいて音量が所定量より大きい時間位置で振動するように振動データを生成する。或いは、所定の変換式により音声データを振動データに変換してもよい。そして、生成部２０６は、動画の画像データと、生成した音声データと、生成した振動データとを時間的に同期させてマルチメディアデータを生成する。
他の構成は第１の実施形態と同様であるため説明を省略する。
【００３１】
次に、図６を参照して、動画音声データからマルチメディアデータを生成する処理について説明する。図６は、本実施形態によるマルチメディアデータ生成処理の手順を示すフローチャートである。
制御部２０１は、データ記憶部２０４から動画音声データを読み出し、読み出した動画音声データを画像解析部２０５と音声抽出部２１１とに出力することによりマルチメディアデータの生成を指示する。
【００３２】
まず、画像解析部２０５が、動画音声データに含まれる動画の画像データにおける主被写体Ｔを抽出する（ステップＳ３０１）。
次に、画像解析部２０５は、抽出した主被写体Ｔの動きを解析する（ステップＳ３０２）。本例では、画像解析部２０５は、主被写体Ｔが走っていると判定する。また、画像解析部２０５は、主被写体Ｔの足が地面に着地するタイミング（動画における位置（時間））を、例えば足の動きのベクトル解析により抽出する。
【００３３】
次に、音声抽出部２１１が、動画音声データに含まれる音声データから主被写体Ｔの動きに応じた音声を抽出する（ステップＳ３０３）。本例では、音声抽出部２１１は、主被写体Ｔの足音を、例えば時間的なタイミングを基にして、周波数解析などにより抽出する。周波数解析により抽出する場合、電子機器２は、足音の周波数に関するデータを予め記憶している。すなわち、音声抽出部２１１は、画像解析部２０５による解析結果に基づいて、主被写体Ｔの足が地面に着地する際の音声を足音として音声データから抽出する。
【００３４】
次に、生成部２０６が、音声抽出部２１１の抽出した音声に基づき音声データを生成する（ステップＳ３０４）。具体的には、生成部２０６は、動画音声データに含まれる音声データにおいて音声抽出部２１１が抽出した音声の音量を大きくする。本例では、生成部２０６は、動画音声データに含まれる音声データにおいて、主被写体Ｔの足が地面に着地するタイミングの音声（足音）の音量を大きくする。すなわち、生成部２０６は、動画音声データに含まれる音声データにおいて、足音を強調する。
【００３５】
次に、生成部２０６は、生成した音声データに応じた振動データを生成する（ステップＳ３０５）。本例では、生成部２０６は、強調された足音が出力されるタイミングで振動するように振動データを生成する。
最後に、生成部２０６は、動画音声データに含まれる動画の画像データに、生成した音声データと生成した振動データとを時間的に同期させてマルチメディアデータを生成する（ステップＳ３０６）。
【００３６】
このマルチメディアデータが再生されると、表示部２１０に表示される主被写体Ｔの動きに合わせて音声出力部２０８が強調された足音を再生し、振動部２０９が振動を発生する。すなわち、表示部２１０において主被写体Ｔの足が地面に着地するタイミングで、強調された足音が再生されるとともに電子機器２において振動が発生する。
【００３７】
このように、本実施形態によれば、生成部２０６は、被写体の動きに応じた音声を強調しているため、被写体の動きを音声により強調して表現することができる。
【００３８】
また、図３，４，６に示す各ステップを実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより、マルチメディアデータ生成処理を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものであってもよい。
また、「コンピュータ読み取り可能な記録媒体」とは、フロッピー（登録商標）ディスク、光磁気ディスク、ＳＤカード、フラッシュメモリ等の書き込み可能な不揮発性メモリ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。
【００３９】
さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（例えばＤＲＡＭ（Dynamic Random Access Memory））のように、一定時間プログラムを保持しているものも含むものとする。
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。
また、上記プログラムは、前述した機能の一部を実現するためのものであっても良い。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であっても良い。
【００４０】
以上、図面を参照してこの発明の実施形態について詳しく説明してきたが、具体的な構成は上述のものに限られることはなく、この発明の要旨を逸脱しない範囲内において様々な設計変更等をすることが可能である。
例えば、本実施形態では、人物が走っている動画を例に説明したが、これに限られることなく、鳥が羽ばたく動画に羽ばたく音の音声データを付加する等、主被写体が人物以外の動画に対して音声データ又は振動データを生成してもよい。また、アニメーション等の動画に対して音声データ又は振動データを生成してもよい。
また、本実施形態では、動画に対する音声データ又は振動データを生成しているが、静止画に対する音声データ又は振動データを生成してもよい。この場合、画像解析部１０５（又は２０５）は、パターンマッチング等により、静止画から被写体の動きを解析する。例えば、運動会の静止画の場合には、運動会に応じた音声（走っている音や歓声、行進曲等）を静止画に結合する。
【符号の説明】
【００４１】
１，２…電子機器  １０１，２０１…制御部  １０２，２０２…撮像部  １０３，２０３…マイク  １０４，２０４…データ記憶部  １０５，２０５…画像解析部  １０６，２０６…生成部  １０７，２０７…ライブラリ  １０８，２０８…音声出力部  １０９，２０９…振動部  １１０，２１０…表示部  ２１１…音声抽出部
【図１】
2013008869.tif 000003
【図２】
2013008869.tif 000004
【図３】
2013008869.tif 000005
【図４】
2013008869.tif 000006
【図５】
2013008869.tif 000007
【図６】
2013008869.tif 000008
【国際調査報告】
2013008869.tif 000009
2013008869.tif 000010
2013008869.tif 000011
2013008869.tif 000012
2013008869.tif 000013
2013008869.tif 000014
2013008869.tif 000015
2013008869.tif 000016