(57)【要約】【課題】再生対象とするデータと同じ時刻に取得された他のデータを選択し、再生対象とするデータに応じたエフェクトを施して同時に再生する。【解決手段】管理部３１は、取り込んだ音声データや画像データをDB３２に格納させる。音声解析部３３は、再生対象のデータとしてユーザにより選択された音声データをDB３２から読み出して解析する。再生データ選択部３４は、選択された音声データおよび音声データに付加されているタイムコードをDB３２から読み出すとともに、そのタイムコードと同タイムコードの画像データをDB３２から読み出す。再生部３５は、再生データ選択部３４から供給された音声データをスピーカから出力させるとともに、画像データを、音声解析部３３により取得されたサウンドパターンに合わせたエフェクトを施してディスプレイに表示させる。本発明は、パーソナルコンピュータに適用することができる。【選択図】図３
2007035121.tif 000002
【特許請求の範囲】
【請求項１】
取得時刻を表すタイムコードが付加された第１と第２のデータを管理する管理手段と、
再生対象とする前記第１のデータと同じ時刻に取得された前記第２のデータを、付加されているタイムコードに基づいて選択し、前記第１のデータの特徴に応じたエフェクトを施して前記第１のデータとともに再生する再生制御手段と
を備える再生制御装置。
【請求項２】
前記再生制御手段は、再生対象とする前記第１のデータと同じ時刻に取得された前記第２のデータであって、さらに、再生対象とする前記第１のデータと同じディレクトリに前記管理手段により管理されている前記第２のデータを、前記第１のデータとともに再生する
請求項１に記載の再生制御装置。
【請求項３】
前記第１のデータを解析する解析手段をさらに備え、
前記再生制御手段は、前記解析手段による解析結果で得られた特徴に応じたエフェクトを前記第２のデータに施す
請求項１に記載の再生制御装置。
【請求項４】
前記第１のデータは、音声データであり、
前記第２のデータは、画像データである
請求項１に記載の再生制御装置。
【請求項５】
取得時のタイムコードが付加された第１と第２のデータを管理し、再生する再生制御装置の再生制御方法において、
再生対象とする前記第１のデータと同じ時刻に取得された前記第２のデータを、付加されているタイムコードに基づいて選択し、前記第１のデータの特徴に応じたエフェクトを施して前記第１のデータとともに再生するステップを含む再生制御方法。
【請求項６】
取得時のタイムコードが付加された第１と第２のデータを管理し、再生する再生制御処理をコンピュータに実行させるプログラムにおいて、
再生対象とする前記第１のデータと同じ時刻に取得された前記第２のデータを付加されているタイムコードに基づいて選択し、前記第１のデータの特徴に応じたエフェクトを施して前記第１のデータとともに再生するステップを含むプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、再生制御装置および方法、並びにプログラムに関し、特に、あるデータを、容易に、それと関連のある他のデータに応じたエフェクトを施して再生することができるようにした再生制御装置および方法、並びにプログラムに関する。
【背景技術】
【０００２】
従来より、パーソナルコンピュータなどに取り込んだ音楽を再生する際、それに合わせて、再生する音楽の雰囲気にあう画像をモニタに表示させるようなアプリケーションが存在する。
【０００３】
近年普及してきている、フラッシュメモリやHDD(Hard Disk Drive)を内蔵するポータブルオーディオプレーヤの中にはLCD(Liquid Crystal Display)などの表示部を搭載するものもあり、音楽に合う画像を音楽再生時に表示する機能は、このような表示部を搭載するオーディオプレーヤにも採用されている。
【０００４】
特許文献１には、再生する曲のテンポや盛り上がり位置などを検出し、その検出結果に基づいて、曲に合う動画像を、その曲とともに再生させる技術が開示されている。
【０００５】
また、特許文献２には、音楽再生時の視覚的効果を与えるいわゆるビジュアライザを、処理負担を軽減しつつ実現する技術が開示されている。
【特許文献１】特開２００４−１２７０１９号公報
【特許文献２】特開２００５−１２２６６４号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
ところで、上述したようなアプリケーションに用意された画像ではなく、ユーザがディジタルビデオカメラなどで撮影した動画や静止画が、それとは別の機器で録音された音（音楽、音声）に合わせて表示されるようにする場合、ユーザは、動画編集を行うアプリケーション等を使用し、どのタイミングで、どの画像とどの音を再生させるのかなどの選択操作を行う必要があり手間がかかるという問題があった。ある音と同時に再生されるような画像は、その音と関連のあるものであることが好ましいが、そのような関連のある画像を探し出すことにさえ手間がかかる。
【０００７】
また、そのような編集時においては、表示されるようにする画像に、その画像とともに再生される音と同期のとれたエフェクト（音の雰囲気に合う特殊効果）をかけるようなことも行われるが、音の内容を確認し、それに合わせてエフェクトの内容を選択する必要があることなどから、この、音と同期のとれたエフェクトをそれぞれの画像にかける操作も手間のかかるものである。
【０００８】
本発明はこのような状況に鑑みてなされたものであり、再生対象とするデータと同じ時刻に取得された他のデータを選択し、再生対象とするデータに応じたエフェクトを施して同時に再生することができるようにするものである。
【課題を解決するための手段】
【０００９】
本発明の一側面は、取得時刻を表すタイムコードが付加された第１と第２のデータを管理する管理手段と、再生対象とする前記第１のデータと同じ時刻に取得された前記第２のデータを、付加されているタイムコードに基づいて選択し、前記第１のデータの特徴に応じたエフェクトを施して前記第１のデータとともに再生する再生制御手段とを備える再生制御装置である。
【００１０】
前記再生制御手段には、再生対象とする前記第１のデータと同じ時刻に取得された前記第２のデータであって、さらに、再生対象とする前記第１のデータと同じディレクトリに前記管理手段により管理されている前記第２のデータを、前記第１のデータとともに再生させるようにすることができる。
【００１１】
前記第１のデータを解析する解析手段をさらに設けることができ、前記再生制御手段には、前記解析手段による解析結果で得られた特徴に応じたエフェクトを前記第２のデータに施させるようにすることができる。
【００１２】
前記第１のデータは、音声データであり、前記第２のデータは、画像データであるようにすることができる。
【００１３】
本発明の一側面は、取得時のタイムコードが付加された第１と第２のデータを管理し、再生する再生制御処理を行う再生制御方法、または前記再生制御処理をコンピュータに実行させるプログラムにおいて、再生対象とする前記第１のデータと同じ時刻に取得された前記第２のデータを、付加されているタイムコードに基づいて選択し、前記第１のデータの特徴に応じたエフェクトを施して前記第１のデータとともに再生するステップを含む再生制御方法またはプログラムである。
【００１４】
本発明の一側面においては、再生対象とする第１のデータと同じ時刻に取得された第２のデータが、付加されているタイムコードに基づいて選択され、第１のデータの特徴に応じたエフェクトが施されて第１のデータとともに再生される。
【発明の効果】
【００１５】
本発明の一側面によれば、再生対象とするデータと同じ時刻に取得された他のデータを選択して同時に再生することができる。また、本発明の一側面によれば、再生対象とするデータと同じ時刻に取得された他のデータに、再生対象とするデータに応じたエフェクトを施して同時に再生することができる。
【発明を実施するための最良の形態】
【００１６】
以下に本発明の実施の形態を説明するが、本発明の構成要件と、発明の詳細な説明に記載の実施の形態との対応関係を例示すると、次のようになる。この記載は、本発明をサポートする実施の形態が、発明の詳細な説明に記載されていることを確認するためのものである。従って、発明の詳細な説明中には記載されているが、本発明の構成要件に対応する実施の形態として、ここには記載されていない実施の形態があったとしても、そのことは、その実施の形態が、その構成要件に対応するものではないことを意味するものではない。逆に、実施の形態が発明に対応するものとしてここに記載されていたとしても、そのことは、その実施の形態が、その構成要件以外には対応しないものであることを意味するものでもない。
【００１７】
本発明の一側面の再生制御装置（例えば、図１の情報処理装置１）は、取得時刻を表すタイムコードが付加された第１と第２のデータを管理する管理手段（例えば、図３の管理部３１）と、再生対象とする前記第１のデータ（例えば、音声データ）と同じ時刻に取得された前記第２のデータ（例えば、画像データ）を、付加されているタイムコードに基づいて選択し、前記第１のデータの特徴に応じたエフェクトを施して前記第１のデータとともに再生する再生制御手段（例えば、図３の再生部３５）とを備える。
【００１８】
この再生制御装置には、前記第１のデータを解析する解析手段（例えば、図３の音声解析部３３）をさらに設けることができる。
【００１９】
本発明の一側面の再生制御方法またはプログラムは、取得時のタイムコードが付加された第１と第２のデータを管理し、再生する再生制御処理の再生制御方法、または、前記再生制御処理をコンピュータに実行させるプログラムにおいて、再生対象とする前記第１のデータ（例えば、音声データ）と同じ時刻に取得された前記第２のデータ（例えば、画像データ）を、付加されているタイムコードに基づいて選択し、前記第１のデータの特徴に応じたエフェクトを施して前記第１のデータとともに再生するステップ（例えば、図８のステップＳ８）を含む。
【００２０】
以下、本発明の実施の形態について図を参照して説明する。
【００２１】
図１は、本発明の一実施形態に係る情報処理装置１と、情報処理装置１とケーブルを介して接続されるICレコーダ２およびディジタルカメラ３を示す図である。
【００２２】
情報処理装置１は、ICレコーダ２で録音された音声をUSB(Universal Serial Bus)ケーブルなどを介して内蔵のHDD(Hard Disk Drive)２０（図２）に取り込み、それをスピーカなどに出力させる機能を有する。また情報処理装置１は、ディジタルカメラ３で撮影された画像をUSBケーブルなどを介して内蔵のHDD２０に取り込み、それをディスプレイなどに表示させる機能を有する。
【００２３】
後に詳述するように、情報処理装置１は、HDD２０に記憶されている音声データの再生が指示されたとき、再生が指示された音声データに付加されているタイムコードと同タイムコードが付加されている画像データを取得し、音声データをスピーカに出力させるとともに、取得した画像データを、音声データのサウンドパターンに合わせたエフェクトを施してディスプレイに表示させる。
【００２４】
これにより、ユーザは、別々の機器で取得した音声データと画像データを同時に再生させることが可能になり、さらに、音に同期したエフェクトを施すといった手間のかかる編集作業も不要となる。
【００２５】
図２は、図１の情報処理装置１の構成例を示すブロック図である。
【００２６】
CPU(Central Processing Unit)１１、ROM(Read Only Memory)１２、およびRAM(Random Access Memory)１３は、バス１４を介して相互に接続されている。このバス１４にはまた、入出力インタフェース１５も接続されている。
【００２７】
入出力インタフェース１５には、録画／再生部１７、入力部１８、出力部１９、HDD２０、通信部２１、メモリカードI/F２２、ドライブ２４、およびUSBポート２６が接続されている。
【００２８】
CPU１１は、ROM１２に記憶されているプログラム、または、HDD２０からRAM１３にロードされたプログラムに従って各種の処理を実行する。RAM１３にはまた、CPU１１が各種の処理を実行する上において必要なデータなどが適宜記憶される。
【００２９】
例えば、CPU１１は、情報処置装置１とUSBケーブルを介して接続されたICレコーダ２から、それにより録音された音声データをUSBポート２６を制御して取り込み、取り込んだ音声データをHDD２０に記憶させる。ICレコーダ２から取り込まれた音声データには、録音日、録音の開始時刻、終了時刻を表すタイムコードが付加されている。
【００３０】
また、CPU１１は、情報処理装置１とUSBケーブルを介して接続されたディジタルカメラ３から、それにより撮影された画像データをUSBポート２６を制御して取り込み、取り込んだ画像データをHDD２０に記憶させる。ディジタルカメラ３から取り込まれた画像データには、Exif(Exchangeable image file format)に従って撮影日、撮影時刻を表す情報（タイムコード）が付加されている。
【００３１】
さらに、CPU１１は、再生する音声データが例えばユーザにより選択されたとき、音声データに付加されているタイムコードを取得し、指定されたディレクトリ内において管理されている、音声データに付加されているタイムコードと同じタイムコードが付加された画像データを検索する。そして、CPU１１は、再生する音声データと同じタイムコードが付加された画像データ（音声データの録音開始時刻から録音終了時刻までの間に撮影された画像データ）を取得し、音声データをスピーカに出力させるとともに、取得した画像データを、音声データのサウンドパターンに合わせたエフェクトを施してディスプレイに表示させる。
【００３２】
録画／再生部１７は、アンテナ１６から供給されてきた信号から取得したテレビジョン番組データを例えばMPEG(Moving Picture Experts Group)2方式で圧縮し、圧縮して得られたデータ（ビデオコンテンツ）を、入出力インタフェース１５を介してHDD２０に供給して記憶させる。また、録画／再生部１７は、HDD２０に記憶されているビデオコンテンツを伸張し、得られるテレビジョン番組の画像データを出力部１９からディスプレイに出力させる。すなわち、情報処理装置１は、テレビジョン番組を録画し、再生する機能を有する。
【００３３】
入力部１８は、例えば、赤外線の受光部よりなる。入力部１８は、図示せぬリモートコントローラからの信号を受信し、ユーザの操作内容を表す情報をCPU１１に出力する。
【００３４】
出力部１９は、入出力インタフェース１５を介して供給されてきた画像データをアナログ信号に変換し、得られた画像をディスプレイに出力する。また、出力部１９は、入出力インタフェース１５を介して供給されてきた音声データをアナログ信号に変換し、得られた音声をスピーカに出力する。
【００３５】
HDD２０は、録画／再生部１７により得られたビデオコンテンツ、メモリカードI/F２２によりメモリカード２３から取り込まれた静止画、USBポート２６とUSBケーブルを介してICレコーダ２から取り込まれた音声やディジタルカメラ３から取り込まれた静止画、ドライブ２４により光ディスク２５から取り込まれ、MP3(MPEG Audio Layer-3)方式などで圧縮された曲データ（オーディオコンテンツ）を記憶する。
【００３６】
通信部２１は、ネットワークを介しての通信処理を行う。
【００３７】
メモリカードI/F２２は、情報処理装置１の筐体に形成されるメモリカードスロットに装着されたメモリカード２３に記憶されているデータを読み出し、読み出したデータをHDD２０などに記憶させる。例えば、静止画のデータなどがメモリカード２３を介して情報処理装置１に取り込まれる。
【００３８】
ドライブ２４は、装着された光ディスク２５を駆動させ、光ディスク２５に記憶されているデータの読み出し、光ディスク２５に対するデータの書き込みを行う。光ディスク２５はCD(Compact Disk)やDVD(Digital Versatile Disc)などであり、この光ディスク２５によっても、静止画、オーディオコンテンツ、ビデオコンテンツなどのデータが情報処理装置１に取り込まれる。
【００３９】
なお、情報処理装置１はゲーム機としての機能も有している。ドライブ２４により光ディスク２５から読み出されたゲーム（プログラム）の画像も、入出力インタフェース１５を介して出力部１９に供給され、ディスプレイに出力される。
【００４０】
USBポート２６は、USBケーブルを介してICレコーダ２やディジタルカメラ３などの外部機器との間で通信を行い、取り込んだ音声や静止画をHDD２０に記憶させる。
【００４１】
図３は、情報処理装置１の機能構成例を示すブロック図である。図３に示す機能部のうちの少なくとも一部は、図２のCPU１１により所定のプログラムが実行されることによって実現される。
【００４２】
図３に示されるように、情報処理装置１においては、管理部３１、データベース（DB）３２、音声解析部３３、再生データ選択部３４、および再生部３５が実現される。
【００４３】
管理部３１は、入出力インタフェース１５を制御して音声データや画像データを取り込み、取り込んだデータを、DB３２に作成された所定のディレクトリに格納させ、管理する。
【００４４】
音声解析部３３は、例えば、ユーザによる選択に応じて再生する音声データをDB３２から読み出し、読み出した音声データの解析を行う。音声解析部３３による解析により、例えば、再生する音声のボリューム、周波数、およびテンポ等のサウンドパターンが解析結果として取得され、再生部３５に出力される。
【００４５】
テンポの算出方法としては、BPM(Beats per minute)解析技術に基づき、例えば、音響信号の特性の激しい変化（アタック音）の立ち上がりまたは立ち下がりを検出することによって求める。楽曲のテンポは、このアタック音のように特徴的に抽出される音響信号の周期とデータのタイムコードから算出することができる。また、ベースラインやシンバルのような特徴的な信号特性をもつ周波数情報等もアタック音として抽出される。
【００４６】
再生データ選択部３４は、再生対象のデータとしてユーザにより選択された音声データをDB３２から読み出し、読み出した音声データを再生部３５に出力する。
【００４７】
また、再生データ選択部３４は、再生対象のデータとしてユーザにより選択された音声データに付加されているタイムコードをDB３２から読み出し、読み出したタイムコードにより表される録音日時を取得する。上述したように、音声データには、ICレコーダ２で録音された日時を表すタイムコードが付加されている。
【００４８】
再生データ選択部３４は、音声データの録音日時を取得したとき、その音声データと同じ日時に撮影された画像データを、DB３２に記憶されている画像データの中からそれぞれの画像データに付加されているタイムコードに基づいて検索する。上述したように、画像データには、ディジタルカメラ３で撮影された日時を表すタイムコードが付加されている。再生データ選択部３４は、そのような、音声データの録音日時と同じ日時に撮影された画像データをDB３２から読み出し、再生部３５に出力する。
【００４９】
再生部３５は、再生データ選択部３４から供給されてきた音声データを再生し、スピーカから出力させるとともに、再生データ選択部３４から供給されてきた画像データを、音声解析部３３により取得されたサウンドパターンに合わせたエフェクトを施してディスプレイに表示させる。すなわち、再生部３５は、サウンドパターンと、画像データに施すエフェクトの内容の対応（テーブル）をあらかじめ有しており、それに基づいて、画像データに施すエフェクトの内容を決定する。
【００５０】
図４は、再生部３５が有するテーブルの例を示す図である。
【００５１】
図４に示すように、テーブルには、音声データのサウンドパターンと、画像データに施すエフェクトパターン（エフェクトの内容）が対応付けられている。図４の例では、サウンドパターンＡ１乃至Ａ４と、エフェクトパターンＥ１乃至Ｅ４がそれぞれ対応付けられている。
【００５２】
ここで、図５を参照して、音声データのサウンドパターンについて説明する。
【００５３】
図５Ａに示すように、音声データが、それぞれの部分に現れる音声変化量（例えば音量の変化量）のレベルに基づいて、音声変化量が第１の閾値より小さいサウンドパターン（音声変化量小）、音声変化量が第１の閾値より大きく、第２の閾値より小さいサウンドパターン（音声変化量中）、および、音声変化量が第２の閾値より大きいサウンドパターン（音声変化量大）の部分に分類される。
【００５４】
また、図５Ｂに示すように、音声データが、それぞれの部分に現れる音声変化量の時間的な増減に基づいて、音声変化量がなめらかに増大（フェードイン）するサウンドパターン、および、音声変化量がなめらかに減衰（フェードアウト）するサウンドパターンの部分に分類される。
【００５５】
さらに、図５Ｃに示すように、音声データが、周期的に現れる変化（例えば、アタック音）に応じたサウンドパターンの部分に分類される。
【００５６】
なお、分類されるサウンドパターンは、例えば、音声変化量が増大と減衰を周期的に繰り返すサウンドパターンなど、図５Ａ乃至図５Ｃのサウンドパターンに限られるものではない。
【００５７】
次に、図６および図７を参照して、画像データに施すエフェクトパターンについて説明する。
【００５８】
図６Ａに示すように、画像を所定の大きさに拡大するエフェクトパターン、図６Ｂに示すように、画像を所定の大きさに縮小するエフェクトパターン、図６Ｃに示すように、画像を画面の上部から下部へ移動させるエフェクトパターン、図６Ｄに示すように、画像を画面の右側から左側へ移動させるエフェクトパターン、および、図６Ｅに示すように、画像を左回りに回転させるエフェクトパターンが例えば用意される。
【００５９】
また、画像を所定の大きさに拡大するエフェクトパターンは、図６Ａのパターンの他、例えば、図７Ａに示すように、画面表示枠（表示領域）全体に画像を表示させている状態から、所定の大きさに拡大することで、画像の表示範囲が変わるようにしてもよい（いわゆる部分拡大表示するようにしてもよい）。同様に、画像を所定の大きさに縮小するエフェクトパターンも、図６Ｂのパターンの他、例えば、図７Ｂに示すように、画像が画面表示枠内に収まっていない状態（部分拡大表示されている状態）から、画面表示枠全体に収まるように縮小してもよい。
【００６０】
また、画像を画面の上部から下部へ移動させるエフェクトパターンは、図６Ｃのパターンの他、例えば、図７Ｃに示すように、図中において実線で囲まれた領域が、画像の一部をなぞるように上部から下部へ移動し、実線で囲まれた領域内の画像が表示され、実線で囲まれた領域外（図中において点線で示された部分）の画像は覆われているようにしてもよい（非表示にしても良い）。同様に、画像を画面の右側から左側へ移動させるエフェクトパターンも、図６Ｄのパターンの他、例えば、図７Ｄに示すように、図中において実線で囲まれた領域が、画像の一部をなぞるように左側から右側へ移動し、実線で囲まれた領域内の画像が表示され、実線で囲まれた領域外の画像は覆われているようにしてもよい。
【００６１】
さらに、画像を左回りに回転させるエフェクトパターンは、図６Ｅのパターンの他、例えば、図７Ｅに示すように、画面表示枠内に収まっていない状態（部分拡大表示されている状態）の画像を左回りに回転させるようにしてもよい。
【００６２】
なお、図６および図７に示したエフェクトパターン以外にも、図示は省略するが、画像を画面の下部から上部へ移動させるエフェクトパターン、画像を画面の左側から右側へ移動させるエフェクトパターン、および、画像を右回りに回転させるエフェクトパターンが例えば用意される。  
【００６３】
すなわち、用意されるエフェクトパターンは、図６Ａ乃至図６Ｅ、および図７Ａ乃至図７Ｅのエフェクトパターンに限られるものではなく、例えば、画像を拡大するエフェクトパターン（図６Ａ）と画像を画面の上部から下部へ移動させるエフェクトパターン（図６Ｃ）の組み合わせや、画像を回転するエフェクトパターン（図７Ｅ）と画像を縮小するエフェクトパターン（図７Ｂ）の組み合わせなど、さまざまなパターンが用意されることはいうまでもない。
【００６４】
また、上述したようなエフェクトパターン以外にも、前の画像と次の画像を切り替える際に、トランジションと呼ばれる特殊効果を画像に施すことができる。これもエフェクトの１つである。音声データと同じ日時に撮影された画像データが複数ある場合、音声データが再生されるとともに、それらの複数の画像がエフェクトが施された形で連続的に表示されるが、それぞれの画像の表示のつなぎ目部分には、適宜、このトランジションが施される。
【００６５】
次に、図８を参照して、画像データに施すトランジションパターンについて説明する。
【００６６】
図８Ａに示すように、単に、前の画像から次の画像に切り替えるトランジションパターン、図８Ｂに示すように、前の画像から黒画にフェードアウトして、さらに、黒画から次の画像にフェードインするトランジションパターン、図８Ｃに示すように、前の画像がフェードアウトした後、次の画像に切り替えるトランジションパターン、図８Ｄに示すように、前の画像がフェードアウトした後、次の画像にフェードインするトランジションパターンが例えば用意される。
【００６７】
以上のような、サウンドパターンとエフェクトパターン（トランジションパターンも含む）が対応付けられたテーブルが予め用意され、再生部３５によって保持される。
【００６８】
次に、図９のフローチャートを参照して、情報処理装置１が実行する再生処理について説明する。この処理は、再生対象のデータとして音声データがユーザにより選択され、再生が指示されたときに開始される。
【００６９】
ステップＳ１において、再生データ選択部３４は、ユーザにより再生が指示された音声データをDB３２から読み出し、読み出した音声データを再生部３５に出力する。再生部３５は、再生データ選択部３４から供給されてきた音声データを再生し、スピーカから出力させる。
【００７０】
ステップＳ２において、音声解析部３３は、ユーザにより再生が指示された音声データをDB３２から読み出し、読み出した音声データのボリューム、周波数、およびテンポ等を取得し、サウンドパターンを解析する。
【００７１】
ステップＳ３において、再生データ選択部３４は、ユーザにより再生が指示された音声データに付加されているタイムコードをDB３２から読み出し、読み出したタイムコードにより表される録音日時を取得する。
【００７２】
ステップＳ４において、再生データ選択部３４は、ステップＳ３の処理で取得した録音日時に基づいて、再生対象の音声データと同タイムコードの画像データ（同じ日時に撮影された画像データ）を、DB３２に記憶されている指定ディレクトリ内における画像データの中から検索する。ここで、指定ディレクトリとは、再生対象の音声データが格納されているディレクトリのことであるが、勿論、ユーザにより任意に指定されるディレクトリであってもよい。
【００７３】
ステップＳ５において、再生データ選択部３４は、ステップＳ４の処理により、再生対象の音声データと同タイムコードの画像データが検索されたか否かを判定し、画像データが検索されたと判定した場合、ステップＳ６に進む。
【００７４】
ステップＳ６において、再生データ選択部３４は、検索された再生対象の音声データと同タイムコードの画像データをDB３２から取得し、再生部３５に出力する。
【００７５】
ステップＳ７において、再生部３５は、ステップＳ２の処理で解析されたサウンドパターンに応じたエフェクトパターンをテーブル（図４）から選択する。ステップＳ８において、再生部３５は、ステップＳ７の処理で選択されたエフェクトパターンに基づいて、再生データ選択部３４から供給されてきた画像データにエフェクトをかけてディスプレイに表示させる。
【００７６】
一方、ステップＳ５において、再生対象の音声データと同タイムコードの画像データが検索されなかったと判定された場合、上述したステップＳ６乃至Ｓ８の処理はスキップされ（すなわち、新たな画像表示はなされず）、処理はステップＳ９に進む。
【００７７】
ステップＳ９において、再生部３５は、音声データの再生が終了したか否かを判定し、再生終了ではないと判定した場合、ステップＳ２に戻り、それ以降の処理を繰り返し実行する。
【００７８】
そして、ステップＳ９において、音声データの再生が終了したと判定された場合、再生処理が終了され、ほぼ同じタイミングでいま表示中の画像データの表示も終了される。
【００７９】
以上のように、画像を撮影することができるICレコーダや、音声を録音することができるディジタルカメラといった複合機器がなくても、容易に、音声を再生させつつ、その音声に関連のある画像を表示させることができる。また、音声が再生されている間、音声データのタイムコードと同タイムコードの画像データ（すなわち、音声データに関連性のある画像データ）が繰り返し検索され、検索された画像データにエフェクトが施されて表示されることで、音声に合わせた画像を順次表示させるスライドショーが簡単に（ユーザの操作によらずに）行われる。
【００８０】
以上においては、音声データのタイムコード（録音日時）と同タイムコード（録画日時）の画像データを検索するようにしたが、例えば、音声データのタイムコードに近いタイムコード（例えば、音声データのタイムコードの前後３０秒など）の画像データを検索するようにしてもよい。
【００８１】
また、複数の画像データが検索された場合、検索された複数の画像を同時に（全て）表示させるようにしてもよいし、あるいは、１つずつ順次表示させるようにしてもよい。
【００８２】
さらに、以上においては、音声が再生されている間、音声データのタイムコードと同タイムコードの画像データが検索されるようにしたが、本発明はこれに限られるものではなく、例えば、画像（動画および静止画を含む）が表示されている間、画像データのタイムコードと同タイムコードの音声データ（すなわち、画像データに関連性のある音声データ）が検索されて再生されるようにしてもよい。
【００８３】
なお、本発明の実施の形態は、上述した実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲において種々の変更が可能である。
【００８４】
上述した一連の処理は、ハードウエアにより実行させることもできるし、ソフトウエアにより実行させることもできる。一連の処理をソフトウエアにより実行させる場合には、そのソフトウエアを構成するプログラムが、専用のハードウエアに組み込まれているコンピュータ、または、各種のプログラムをインストールすることで、各種の機能を実行することが可能な、例えば汎用のパーソナルコンピュータなどに、プログラム格納媒体からインストールされる。
【００８５】
コンピュータにインストールされ、コンピュータによって実行可能な状態とされるプログラムを格納するプログラム格納媒体は、図２に示すように、磁気ディスク（フロッピディスクを含む）、光ディスク（CD-ROM(Compact Disk-Read Only Memory)、DVD(Digital Versatile Disk)を含む）、光磁気ディスク（ＭＤ（Mini-Disk）を含む）、もしくは半導体メモリなどよりなるリムーバブルメディア、または、プログラムが一時的もしくは永続的に格納されるROM１２や、HDD２０に含まれるハードディスクなどにより構成される。プログラム格納媒体へのプログラムの格納は、必要に応じてルータ、モデムなどのインタフェースである通信部２１を介して、ローカルエリアネットワーク、インターネット、デジタル衛星放送といった、有線または無線の通信媒体を利用して行われる。
【００８６】
なお、本明細書において、プログラム格納媒体に格納されるプログラムを記述するステップは、記載された順序に沿って時系列的に行われる処理はもちろん、必ずしも時系列的に処理されなくとも、並列的あるいは個別に実行される処理をも含むものである。
【図面の簡単な説明】
【００８７】
【図１】本発明の一実施形態に係る情報処理装置と、ICレコーダおよびディジタルカメラを示す図である。
【図２】図１の情報処理装置の構成例を示すブロック図である。
【図３】情報処理装置の機能構成例を示すブロック図である。
【図４】テーブルの例を示す図である。
【図５】サウンドパターンについて説明する図である。
【図６】エフェクトパターンについて説明する図である。
【図７】他のエフェクトパターンについて説明する図である。
【図８】トランジションパターンについて説明する図である。
【図９】再生処理を説明するフローチャートである。
【符号の説明】
【００８８】
１  情報処理装置，  ２  ICレコーダ，  ３  ディジタルカメラ，  １１  CPU，  １９  出力部，  ２０  HDD，  ２６  USBポート，  ３１  管理部，  ３２  DB，  ３３  音声解析部，  ３４  再生データ選択部，  ３５  再生部
【図１】
2007035121.tif 000003
【図２】
2007035121.tif 000004
【図３】
2007035121.tif 000005
【図４】
2007035121.tif 000006
【図５】
2007035121.tif 000007
【図６】
2007035121.tif 000008
【図７】
2007035121.tif 000009
【図８】
2007035121.tif 000010
【図９】
2007035121.tif 000011