(57)【特許請求の範囲】
【請求項１】
複数の画像情報Ｖ１，Ｖ２…の各々を特定する情報と、特定された各画像情報を提示する提示期間の情報とを関連づけた画像記録情報と、音声を記録した音声情報であって、有声部分ごとに、再生期間の情報を関連づけた音声記録情報とを含む記録情報を受け入れる手段と、
前記画像記録情報に含まれる画像情報の一部を再生の対象とする再生指示を受け入れる手段と、
当該再生の対象として、画像情報Ｖn+1を先頭とした範囲の指定を受け入れると、当該最先に提示されるべき画像情報Ｖn+1の提示期間の始期を再生開始基準位置として、当該再生開始基準位置をまたいだ再生期間に関連付けられている有声部分の情報があれば、再生開始基準位置を、当該有声部分の再生期間の始期に更新し、再生の対象として、画像情報Ｖmを末尾とした範囲の指定を受け入れると、当該最後に提示されるべき画像情報Ｖｍの提示期間の終期を再生終了基準位置として、当該再生終了基準位置をまたいだ再生期間に関連付けられている有声部分の情報があれば、前記再生終了基準位置を、当該有声部分の再生期間の終期に更新する更新手段と、
提示期間が到来するごとに、当該到来した提示期間に関連付けられている画像情報を出力する画像出力手段と、
再生期間が到来するごとに、当該到来した再生期間に関連付けられている有声部分の音声情報を出力する音声出力手段と、
を含むことを特徴とする情報再生装置。
【請求項２】
前記画像出力手段は、前記更新手段が、再生開始基準位置を更新した場合、再生対象となった画像情報のうち、最先に提示されるべき画像情報の提示期間の始期を、更新された再生開始基準位置に補正し、前記更新手段が、再生終了基準位置を更新した場合、再生対象となった画像情報のうち、最後に提示されるべき画像情報の提示期間の終期を、更新された再生終了基準位置に補正することを特徴とする請求項１記載の情報再生装置。
【請求項３】
複数の画像情報の各々を特定する情報と、特定された各画像情報を提示する提示期間の情報とを関連づけた画像記録情報と、音声を記録した音声情報であって、有声部分ごとに、再生期間の情報を関連づけた音声記録情報とを含む記録情報を受け入れる手段と、
前記有声部分の各々を順次注目有声部分として選択し、当該選択した注目有声部分の再生期間の少なくとも一部を含む提示期間に関連付けられた画像情報を特定し、当該特定した画像情報に関連づける関連づけ手段と、
を含み、
前記関連づけ手段は、前記選択した注目有声部分の再生期間の少なくとも一部を含む提示期間に関連付けられた画像情報が複数ある場合に、前記再生期間と提示期間とに基づいて、当該複数の画像情報のいずれか一つの画像情報を選択し、当該選択した一つの画像情報に前記注目有声部分を関連付けることを特徴とする情報処理装置。
【請求項４】
コンピュータを、
複数の画像情報Ｖ１，Ｖ２…の各々を特定する情報と、特定された各画像情報を提示する提示期間の情報とを関連づけた画像記録情報と、音声を記録した音声情報であって、有声部分ごとに、再生期間の情報を関連づけた音声記録情報とを含む記録情報を受け入れる手段と、
前記画像記録情報に含まれる画像情報の一部を再生の対象とする再生指示を受け入れる手段と、
当該再生の対象として、画像情報Ｖn+1を先頭とした範囲の指定を受け入れると、当該最先に提示されるべき画像情報Ｖn+1の提示期間の始期を再生開始基準位置として、当該再生開始基準位置をまたいだ再生期間に関連付けられている有声部分の情報があれば、再生開始基準位置を、当該有声部分の再生期間の始期に更新し、再生の対象として、画像情報Ｖmを末尾とした範囲の指定を受け入れると、当該最後に提示されるべき画像情報Ｖｍの提示期間の終期を再生終了基準位置として、当該再生終了基準位置をまたいだ再生期間に関連付けられている有声部分の情報があれば、前記再生終了基準位置を、当該有声部分の再生期間の終期に更新する更新手段と、
提示期間が到来するごとに、当該到来した提示期間に関連付けられている画像情報を出力する画像出力手段と、
再生期間が到来するごとに、当該到来した再生期間に関連付けられている有声部分の音声情報を出力する音声出力手段と、
として機能させるプログラム。
【請求項５】
コンピュータを、
複数の画像情報の各々を特定する情報と、特定された各画像情報を提示する提示期間の情報とを関連づけた画像記録情報と、音声を記録した音声情報であって、有声部分ごとに、再生期間の情報を関連づけた音声記録情報とを含む記録情報を受け入れる手段と、
前記有声部分の各々を順次注目有声部分として選択し、当該選択した注目有声部分の再生期間の少なくとも一部を含む提示期間に関連付けられた画像情報を特定し、当該特定した画像情報に関連づける関連づけ手段と、
として機能させ、
前記関連づけ手段として機能させる際には、前記選択した注目有声部分の再生期間の少なくとも一部を含む提示期間に関連付けられた画像情報が複数ある場合に、前記再生期間と提示期間とに基づいて、当該複数の画像情報のいずれか一つの画像情報を選択させ、当該選択した一つの画像情報に前記注目有声部分を関連付けさせるプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報再生装置、情報処理装置、及びプログラムに関する。
【背景技術】
【０００２】
プレゼンテーションや講義で利用されるスライドの画像と、講演者の音声とを関連付けて記録するシステムがある。例えば特許文献１には、スライドと音声とを、スライドが切り替わるタイミングで１対１に対応づけて記録するシステムが開示されている。
【特許文献１】特開２００３−５８９０１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
スライドなどの画像切り替えのタイミングでは、講演者が発言を続けていることもあり、当該発言が切り替えられる前のスライドの説明の継続であるか、切り替え後のスライドの説明であるかは場合によって異なる。
【０００４】
しかしながら、スライドなどの画像を単位にして再生の指示を行う場合、複数の画像の提示期間にまたがって再生される音声は途中から、または途中までしか再生されない場合がある。
【課題を解決するための手段】
【０００５】
請求項１記載の発明は、情報再生装置であって、複数の画像情報Ｖ１，Ｖ２…の各々を特定する情報と、特定された各画像情報を提示する提示期間の情報とを関連づけた画像記録情報と、音声を記録した音声情報であって、有声部分ごとに、再生期間の情報を関連づけた音声記録情報とを含む記録情報を受け入れる手段と、前記画像記録情報に含まれる画像情報の一部を再生の対象とする再生指示を受け入れる手段と、当該再生の対象として、画像情報Ｖn+1を先頭とした範囲の指定を受け入れると、当該最先に提示されるべき画像情報Ｖn+1の提示期間の始期を再生開始基準位置として、当該再生開始基準位置をまたいだ再生期間に関連付けられている有声部分の情報があれば、再生開始基準位置を、当該有声部分の再生期間の始期に更新し、再生の対象として、画像情報Ｖmを末尾とした範囲の指定を受け入れると、当該最後に提示されるべき画像情報Ｖｍの提示期間の終期を再生終了基準位置として、当該再生終了基準位置をまたいだ再生期間に関連付けられている有声部分の情報があれば、前記再生終了基準位置を、当該有声部分の再生期間の終期に更新する更新手段と、提示期間が到来するごとに、当該到来した提示期間に関連付けられている画像情報を出力する画像出力手段と、再生期間が到来するごとに、当該到来した再生期間に関連付けられている有声部分の音声情報を出力する音声出力手段と、を含むこととしたものである。
【０００６】
請求項２記載の発明は、請求項１記載の情報再生装置であって、前記画像出力手段は、前記更新手段が、再生開始基準位置を更新した場合、再生対象となった画像情報のうち、最先に提示されるべき画像情報の提示期間の始期を、更新された再生開始基準位置に補正し、前記更新手段が、再生終了基準位置を更新した場合、再生対象となった画像情報のうち、最後に提示されるべき画像情報の提示期間の終期を、更新された再生終了基準位置に補正することとしたものである。
【０００７】
請求項３記載の発明は、情報処理装置であって、複数の画像情報の各々を特定する情報と、特定された各画像情報を提示する提示期間の情報とを関連づけた画像記録情報と、音声を記録した音声情報であって、有声部分ごとに、再生期間の情報を関連づけた音声記録情報とを含む記録情報を受け入れる手段と、前記有声部分の各々を順次注目有声部分として選択し、当該選択した注目有声部分の再生期間の少なくとも一部を含む提示期間に関連付けられた画像情報を特定し、当該特定した画像情報に関連づける関連づけ手段と、を含み、前記関連づけ手段は、前記選択した注目有声部分の再生期間の少なくとも一部を含む提示期間に関連付けられた画像情報が複数ある場合に、前記再生期間と提示期間とに基づいて、当該複数の画像情報のいずれか一つの画像情報を選択し、当該選択した一つの画像情報に前記注目有声部分を関連付けることとしたものである。
【０００８】
請求項４記載の発明は、プログラムであって、コンピュータを、複数の画像情報Ｖ１，Ｖ２…の各々を特定する情報と、特定された各画像情報を提示する提示期間の情報とを関連づけた画像記録情報と、音声を記録した音声情報であって、有声部分ごとに、再生期間の情報を関連づけた音声記録情報とを含む記録情報を受け入れる手段と、前記画像記録情報に含まれる画像情報の一部を再生の対象とする再生指示を受け入れる手段と、当該再生の対象として、画像情報Ｖn+1を先頭とした範囲の指定を受け入れると、当該最先に提示されるべき画像情報Ｖn+1の提示期間の始期を再生開始基準位置として、当該再生開始基準位置をまたいだ再生期間に関連付けられている有声部分の情報があれば、再生開始基準位置を、当該有声部分の再生期間の始期に更新し、再生の対象として、画像情報Ｖmを末尾とした範囲の指定を受け入れると、当該最後に提示されるべき画像情報Ｖｍの提示期間の終期を再生終了基準位置として、当該再生終了基準位置をまたいだ再生期間に関連付けられている有声部分の情報があれば、前記再生終了基準位置を、当該有声部分の再生期間の終期に更新する更新手段と、提示期間が到来するごとに、当該到来した提示期間に関連付けられている画像情報を出力する画像出力手段と、再生期間が到来するごとに、当該到来した再生期間に関連付けられている有声部分の音声情報を出力する音声出力手段と、として機能させることとしたものである。
【０００９】
請求項５記載の発明は、プログラムであって、コンピュータを、複数の画像情報の各々を特定する情報と、特定された各画像情報を提示する提示期間の情報とを関連づけた画像記録情報と、音声を記録した音声情報であって、有声部分ごとに、再生期間の情報を関連づけた音声記録情報とを含む記録情報を受け入れる手段と、前記有声部分の各々を順次注目有声部分として選択し、当該選択した注目有声部分の再生期間の少なくとも一部を含む提示期間に関連付けられた画像情報を特定し、当該特定した画像情報に関連づける関連づけ手段と、として機能させ、前記関連づけ手段として機能させる際には、前記選択した注目有声部分の再生期間の少なくとも一部を含む提示期間に関連付けられた画像情報が複数ある場合に、前記再生期間と提示期間とに基づいて、当該複数の画像情報のいずれか一つの画像情報を選択させ、当該選択した一つの画像情報に前記注目有声部分を関連付けさせることとしたものである。
【発明の効果】
【００１０】
請求項１，４記載の発明によると、再生を画像の単位で行う場合であっても、複数の画像の提示期間にまたがって再生される音声もその全体が再生できる。
【００１１】
請求項２記載の発明によると、音声の有声部分の期間に応じて、画像の再生長を調整できる。
【００１２】
請求項３，５記載の発明によると、複数の画像の提示期間にまたがって再生されるべき音声情報を、当該複数の画像のいずれかの画像に関連付けて記録できる。
【発明を実施するための最良の形態】
【００１３】
本発明の実施の形態について図面を参照しながら説明する。本発明の第１の実施の形態に係る情報再生装置は、図１に示すように、制御部１１と、記憶部１２と、操作部１３と、表示部１４と、音声出力部１５と、計時部１６とを含んで構成される。
【００１４】
ここで制御部１１は、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）などのプログラム制御デバイスであり、記憶部１２に格納されているプログラムに従って動作する。本実施の形態においては、この制御部１１が、再生の対象となる画像と音声との記録を含む記録情報を受け入れて記憶部１２に保持する。そして制御部１１は、利用者から再生の対象となる画像情報の特定を受ける。制御部１１は、当該再生の対象となった画像情報のうち最先に再生するものと、最後に再生するものとにおいて、それぞれの先頭と末尾が、音声情報の有声部分の途中であるか否かを調べ、途中であれば、有声部分の再生時間に合わせて再生の開始点または終了点を調整する。この制御部１１の処理の内容については、後に詳しく述べる。
【００１５】
記憶部１２は、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）等のメモリ素子やハードディスクなどを含んで構成されている。この記憶部１２には、制御部１１によって実行されるプログラムが格納される。このプログラムは、ＤＶＤ−ＲＯＭなどのコンピュータ可読な記録媒体に格納されて提供され、ここに複写されたものであってもよい。また、この記憶部１２は、制御部１１のワークメモリとしても動作する。
【００１６】
操作部１３は、マウスやキーボードなどを含む。この操作部１３において利用者が行った操作の内容は、制御部１１に伝達される。表示部１４は、例えばディスプレイなどであり、制御部１１から入力される指示に従って画像情報などの表示を行う。音声出力部１５は、音声合成カードや、スピーカーなどを含んで構成される。この音声出力部１５は、制御部１１から入力される音声情報を電気的な音声信号に変換し、スピーカーを介して音声を鳴動させる。計時部１６は、時刻を計時するものであり、制御部１１からリセットの信号を受けて、リセットされる。この計時部１６は、リセットの時点からの時刻を計時して、計時している時刻の情報を出力する。またこの計時部１６は、制御部１１からセットする時刻の指定を受けて、当該指定された時刻に計時時刻をセットする。そして、セットされた時刻から計時を開始する。
【００１７】
なお、本実施の形態において再生の対象となる記録情報は、講演などの会場に配備された情報記録装置によって記録されるものであり、その内容は、図２に例示するようなものとなる。すなわち、本実施の形態において再生の対象となる記録情報は、図２に示すように、複数の画像情報の各々を特定する情報（Ｖ１，Ｖ２…）と、特定された各画像情報を提示する提示期間の情報（ＶＴ１，ＶＴ２…）とを関連づけた画像記録情報（ＶＲ）と、音声を記録した音声情報であって、有声部分（Ｐ１，Ｐ２…）ごとに、再生期間の情報（ＰＴ１，ＰＴ２…）を関連づけた音声記録情報（ＡＲ）とを含む。
【００１８】
ここに入力された音声の情報を、無声部分（無音区間などともいう）と有声部分（音声区間などともいう）とに区分して記録する技術については、例えば特開平７−１２９１９８号公報に開示のものなど、種々の技術を採用できるので、ここでの詳しい説明を省略する。
【００１９】
次に本実施の形態に係る制御部１１について説明する。本実施の形態の制御部１１が実行するプログラムは、図３に例示するように、記録情報受入部２１と、再生指示受入部２２と、再生範囲調整部２３と、画像再生制御部２４と、音声再生制御部２５とを含んで構成される。
【００２０】
記録情報受入部２１は、再生の対象となる記録情報を受け入れる。この記録情報は、図２に例示したような構造を有する。
【００２１】
再生指示受入部２２は、再生指示を受け入れる。この再生指示は、必ずしも記録情報の全体を再生する指示でなくても構わない。例えば記録情報の一部を再生する指示であってもよい。このように記録情報の一部を再生する場合は、再生の範囲を特定する情報として、一連の画像情報Ｖ１，Ｖ２…のうちの一部の画像情報を受け入れる。例えば、「Ｖ２からＶ４までを再生」または「Ｖ２を再生」といったように、画像情報の提示期間を単位として再生範囲を特定する。
【００２２】
再生範囲調整部２３は、再生指示受入部２２が受け入れた再生指示によって再生の対象となった画像情報のうち、最先に提示されるべき画像情報の提示期間の始期（以下、再生開始基準位置と呼ぶ）を取得する。これは例えば、再生の対象となった画像情報を、それぞれに関連付けて記録情報に含まれている提示期間の情報の始期をキーとして昇順（時刻が後のものほど後となるように）並べ替えて、その先頭となった画像情報を得る。そして、当該得た画像情報の提示期間の始期を再生開始基準位置として読み出せばよい。
【００２３】
また、再生範囲調整部２３は、再生指示受入部２２が受け入れた再生指示によって再生の対象となった画像情報のうち、最後に提示されるべき画像情報の提示期間の終期（以下、再生終了基準位置と呼ぶ）を取得する。この場合も、上記並べ替え後、末尾となった画像情報の提示期間の終期を再生終了基準位置として読み出せばよい。
【００２４】
再生範囲調整部２３は、さらに、再生開始基準位置を含む再生期間に関連付けられている有声部分の情報があるか否かを調べる。例えば再生開始基準位置をτｓとする。また、再生期間ＶＴｉの始期をＶＴｓｉ、終期をＶＴｅｉとする。このとき、ＶＴｓｉ＜τｓ＜ＶＴｅｉとなるｉを検索する。この検索の結果、ＶＴｓｉ＜τｓ＜ＶＴｅｉとなるｉが見出されると、再生開始基準位置τｓを、検索の結果見出した再生期間に対応する有声部分Ｖｉに関連付けられている再生期間の始期ＶＴｓｉに設定して更新する。
【００２５】
また、この再生範囲調整部２３は、再生終了基準位置を含む再生期間に関連付けられている有声部分の情報があるか否かを調べる。例えば再生終了基準位置をτｅとする。このとき、ＶＴｓｉ＜τｅ＜ＶＴｅｉとなるｉを検索する。この検索の結果、ＶＴｓｉ＜τｅ＜ＶＴｅｉとなるｉが見出されると、再生終了基準位置τｅを、検索の結果見出した再生期間に対応する有声部分Ｖｉに関連付けられている再生期間の終期ＶＴｅｉに設定して更新する。
【００２６】
さらに再生範囲調整部２３は、計時部１６に再生開始基準位置の時刻τｓをセットし、計時を開始させる。
【００２７】
画像再生制御部２４は、計時部１６の計時時刻と、再生の対象となった画像情報の提示開始時刻、提示終了時刻とを比較する。そして計時時刻がいずれかの画像情報の提示開始時刻に達すると、当該提示開始時刻に達した画像情報を表示部１４に表示させる。また、計時時刻がいずれかの画像情報の提示終了時刻に達すると、当該提示終了時刻に達した画像情報の表示を停止する。
【００２８】
ここで、画像再生制御部２４は、再生の対象となった画像情報のいずれか一つを選択的に表示するようにしてもよい。この場合は、次に提示するべき画像情報の提示開始時刻が到来すると、それまで表示されていた画像情報の表示を停止し、次に提示するべき画像情報を表示する。このときには、計時時刻と提示終了時刻との比較を行う必要はない。
【００２９】
音声再生制御部２５は、計時部１６の計時時刻と、音声情報に含まれる、各有声部分の再生開始時刻とを比較する。そして計時時刻がいずれかの音声情報の再生開始時刻に達すると、当該再生開始時刻に達した有声部分の音声情報を音声出力部１５に出力して、音声の鳴動を開始させる。
【００３０】
なお、再生範囲調整部２３は、再生開始基準位置τｓが更新されると、再生対象となった画像情報のうち、最先に提示されるべき画像情報の提示期間の始期を、更新された再生開始基準位置に補正してもよい。同様に、再生終了基準位置τｅを更新した場合は、再生対象となった画像情報のうち、最後に提示されるべき画像情報の提示期間の終期を、更新された再生終了基準位置に補正してもよい。
【００３１】
本実施の形態は、以上のような構成を備えており、次のように動作する。なお、以下の例では、図４（ａ）に例示するように、スライドの画像情報Ｖｎの提示期間に、音声情報の有声部分Ｐ１，Ｐ２，Ｐ３が含まれているとする。また、この画像情報Ｖｎの提示期間終了前に、有声部分Ｐ４の再生期間が始まり、次のスライドの画像情報Ｖｎ＋１の提示期間開始後に、この有声部分Ｐ４の再生期間が終了する。つまり、有声部分Ｐ４は、画像情報ＶｎとＶｎ＋１とにまたがって再生されるべきこととなる。
【００３２】
そして本実施の形態の情報再生装置は、図５に示すように動作する。すなわち情報再生装置は、この図４に例示したような記録情報を再生の対象として受け入れる（Ｓ１）。そして例えば、画像情報Ｖｎ＋１を先頭とした範囲の指定とともに、当該指定された範囲を再生の対象とする再生指示を受け入れる（Ｓ２）。情報再生装置は、再生範囲指定に係る画像情報の提示期間の始期のうち最先のものを再生開始基準位置と、また再生範囲指定に係る画像情報の提示期間の最後のものと再生終了基準位置と仮に定める（Ｓ３）。ここでは、画像情報Ｖｎ＋１の提示期間の始期が仮の再生開始基準位置となる。
【００３３】
次に、仮の再生開始基準位置をまたいで再生されるべき有声部分があるか否かを調べる（Ｓ４）。ここでは画像情報Ｖｎ＋１の提示期間の始期をまたいで再生されるべき有声部分Ｐ４があるために、情報再生装置は、仮の再生開始基準位置をまたいで再生されるべき有声部分があると判断する。そして、情報再生装置は、当該有声部分（ここでは有声部分Ｐ４）の再生期間の始期で、再生開始基準位置を更新する（Ｓ５）。また情報再生装置は、先頭の画像情報Ｖｎ＋１の提示期間の始期を、更新後の再生開始基準位置に補正する（Ｓ６）。
【００３４】
そして情報再生装置は、更新後の再生開始基準位置から計時を開始し、再生の対象となった画像情報のうち、提供期間の始期が到来したものを逐次再生するとともに、再生期間の始期が到来した有声部分の音声を逐次再生する（Ｓ７）。
【００３５】
この場合は、再生開始とともに画像情報Ｖｎ＋１が出力され、また有声部分Ｐ４がその先頭から再生される（図４（ｂ））。
【００３６】
同様に、情報再生装置が、図４に例示した記録情報を再生の対象として受け入れ（Ｓ１１）、また画像情報Ｖｎを末尾とした範囲の指定とともに、当該指定された範囲を再生の対象とする再生指示を受け入れた（Ｓ１２）、場合について図６を参照しつつ説明する。この場合、情報再生装置は、再生範囲指定に係る画像情報の提示期間の始期のうち最先のものを再生開始基準位置と、また再生範囲指定に係る画像情報の提示期間の最後のものと再生終了基準位置と仮に定める（Ｓ１３）。ここでは、画像情報Ｖｎの提示期間の終期が仮の再生終了基準位置となる。
【００３７】
次に、仮の再生終了基準位置をまたいで再生されるべき有声部分があるか否かを調べる（Ｓ１４）。ここでは画像情報Ｖｎの提示期間の終期をまたいで再生されるべき有声部分Ｐ４があるために、情報再生装置は、仮の再生終了基準位置をまたいで再生されるべき有声部分があると判断する。そして、情報再生装置は、当該有声部分（ここでは有声部分Ｐ４）の再生期間の終期で、再生終了基準位置を更新する（Ｓ１５）。また情報再生装置は、最後に提示されるべき画像情報Ｖｎの提示期間の終期を、更新後の再生終了基準位置に補正する（Ｓ１６）。
【００３８】
そして情報再生装置は、更新後の再生開始基準位置から計時を開始し、再生の対象となった画像情報のうち、提供期間の始期が到来したものを逐次再生するとともに、再生期間の始期が到来した有声部分の音声を逐次再生する（Ｓ１７）。
【００３９】
情報再生装置は少なくとも最後に提示される画像情報Ｖｎについては、有声部分Ｐ４の再生期間の終期に至るまで、その表示を継続する。
【００４０】
また記録の時点または再生前の時点において、画像情報の切り替え時点をまたいでいる有声部分の情報を、切り替え前後の画像情報のいずれか一方に関連付けることとし、画像情報の提示期間を併せて調整しておいても構わない。
【００４１】
以下、有声部分の情報を、切り替え前後の画像情報のいずれか一方に関連付ける、本発明の第２の実施の形態に係る情報処理装置について説明する。
【００４２】
本実施の形態の情報処理装置は、例えば図７に示すように、制御部３１と、記憶部３２と、入出力部３３とを含んで構成される。制御部３１は、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）などのプログラム制御デバイスであり、記憶部３２に格納されているプログラムに従って動作する。本実施の形態においては、この制御部３１が、処理の対象となる画像と音声との記録を含む記録情報を、入出力部３３を介して受け入れて記憶部１２に保持する。そして制御部３１は、有声部分の各々について、その再生期間と画像情報の提示期間との比較に基づいて、いずれかの画像情報に関連付ける処理を行う。また、その関連付け処理後の情報を入出力部３３を介して出力する。この制御部３１の処理の内容については、後に詳しく述べる。
【００４３】
記憶部３２は、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）等のメモリ素子やハードディスクなどを含んで構成されている。この記憶部３２には、制御部３１によって実行されるプログラムが格納される。このプログラムは、ＤＶＤ−ＲＯＭなどのコンピュータ可読な記録媒体に格納されて提供され、ここに複写されたものであってもよい。また、この記憶部３２は、制御部３１のワークメモリとしても動作する。
【００４４】
本実施の形態の情報処理装置が処理の対象とする記録情報は、図２に例示した記録情報と同様のものである。この記録情報は、例えば記憶部３２に格納されている。
【００４５】
次にこの制御部３１の動作について説明する。本実施の形態の制御部３１は、例えば図８に示すように、処理の対象となった有声部分の一つを注目有声部分として選択する（Ｓ２１）。例えばｉ＝１から順に、Ｐｉ番目の有声部分を注目有声部分として順次選択していけばよい。
【００４６】
制御部３１は、注目有声部分の再生期間の情報を記憶部３２から読み出す。そして、当該読み出した再生期間の少なくとも一部を含む提示期間に関連付けられた画像情報を検索する（Ｓ２２）。つまり、読み出した再生期間と少なくとも一部が重複する提示期間に関連付けられた画像情報を検索する。ここで制御部３１は、注目有声部分の再生期間の始期をＰＴｓ［ｉ］、終期をＰＴｅ［ｉ］とするとき、
ＶＴｓ［ｊ］≦ＰＴｓ［ｉ］＜ＰＴｅ［ｉ］≦ＶＴｅ［ｊ］
（ただしＶＴｓ［ｊ］，ＶＴｅ［ｊ］はｊ番目の画像情報の提示期間の始期及び終期）
であるようなｊ番目の画像情報があれば、当該一つの画像情報を特定する情報（例えば「ｊ」）を得る。
【００４７】
また、
ＶＴｓ［ｊ］＜ＰＴｓ［ｉ］＜ＶＴｅ［ｊ］＝ＶＴｓ［ｊ＋１］＜ＰＴｅ［ｉ］＜ＶＴｅ［ｊ＋１］
であるような、ｊ番目、及びｊ＋１番目の画像情報があれば、制御部３１は検索の結果として、これら複数の画像情報を特定する情報（例えば「ｊ及びｊ＋１」）を得る。
【００４８】
制御部３１は、検索の結果として複数の画像情報を特定する情報が得られたか否かを調べ（Ｓ２３）、複数ではなく、一つの画像情報を特定する情報が得られた場合は、当該得られた情報で特定される画像情報に、注目有声部分の情報を関連付ける（Ｓ２４）。例えば、注目有声部分の情報に対して得られた情報（画像情報を特定する情報）を関連付けて、記憶部３２に格納すればよい。
【００４９】
制御部３１は、すべての有声部分の情報について処理を終えたか否かを判断し（Ｓ２５）、未だ注目有声情報として選択されていない有声部分があれば、処理Ｓ２１に戻って処理を続ける。また、処理Ｓ２５において、すべての有声部分の情報について処理を終えたと判断すると、処理を終了する。
【００５０】
また制御部３１は、処理Ｓ２３において、検索の結果として複数の画像情報を特定する情報が得られたと判断すると、当該複数の画像情報のうち一つの画像情報を選択する（Ｓ２６）。そして、当該選択した画像情報に注目有声部分の情報を関連付ける（Ｓ２７）。この場合も注目有声部分の情報に対して選択した画像情報を特定する情報を関連付けて、記憶部３２に格納すればよい。そして制御部３１は、処理Ｓ２５に移行して処理を続ける。
【００５１】
なお、処理Ｓ２６における画像情報の選択は、例えば注目有声部分の再生期間との間で、重複期間の最も長い提示期間に関連付けられている画像情報を選択することとすればよい。一例として、
ＶＴｓ［ｊ］＜ＰＴｓ［ｉ］＜ＶＴｅ［ｊ］＝ＶＴｓ［ｊ＋１］＜ＰＴｅ［ｉ］＜ＶＴｅ［ｊ＋１］
であった場合は、
ΔＴ１＝ＶＴｅ［ｊ］−ＰＴｓ［ｉ］と、
ΔＴ２＝ＰＴｅ［ｉ］−ＶＴｓ［ｊ＋１］と、
を演算する。
【００５２】
そして、ΔＴ１＜ΔＴ２であった場合には、注目有声部分の情報を、ｊ番目の画像情報を特定する情報に関連付ける。また、ΔＴ２＜ΔＴ１であった場合には、注目有声部分の情報を、ｊ＋１番目の画像情報を特定する情報に関連付ける。なお、ΔＴ１＝ΔＴ２であった場合には、予め定めた条件に従って画像情報の一つを選択すればよい。この条件としては、例えばより先行して提示されている画像情報とするなどの条件とすればよい。
【００５３】
制御部３１は、このように処理Ｓ２３において見出された複数の画像情報のうちいずれかの画像情報を選択して、当該選択した画像情報に注目有声部分を関連付けた場合、処理Ｓ２３において見出された複数の画像情報の提示期間を補正してもよい。
【００５４】
すなわち、上述のようにΔＴ１＜ΔＴ２であった場合など、注目有声部分の情報を、ｊ番目の画像情報を特定する情報に関連付けるときは、ＶＴｅ［ｊ］＝ＰＴｅ［ｉ］と補正する。つまり注目有声部分を、その再生期間中に提示が終了する画像情報に関連付ける場合、当該画像情報の提示期間の終期を注目有声部分の再生期間終期に一致させる補正をする。また制御部３１は、次の画像情報の提示期間の始期を、ＶＴｓ［ｊ＋１］＝ＰＴｅ［ｉ］として、この注目有声部分の再生期間終期に一致させる補正を併せて行ってもよい。
【００５５】
また、ΔＴ２＜ΔＴ１であった場合など、注目有声部分の情報を、ｊ＋１番目の画像情報を特定する情報に関連付けるときは、ＶＴｓ［ｊ＋１］＝ＰＴｓ［ｉ］と補正する。つまり注目有声部分を、その再生期間中に提示が開始される画像情報に関連付ける場合、当該画像情報の提示期間の始期を注目有声部分の再生期間始期に一致させる補正をする。また制御部３１は、先行する画像情報の提示期間の終期を、ＶＴｅ［ｊ］＝ＰＴｓ［ｉ］、として、この注目有声部分の再生期間始期に一致させる補正を併せて行ってもよい。
【００５６】
さらに、記録の時点または再生までの時点で、画像情報ごとに、その提示期間の終期において音声情報が有声部分となっているか否かを表す検出フラグを関連付けて記録しておいてもよい（図９）。なお、図９において検出フラグは、有声部分となっている場合（検出の場合）は「Ｄ」、有声部分となっていない場合（検出せずの場合）は「Ｎ」として表している。
【００５７】
この場合は、例えば第１の実施の形態の情報再生装置は、上述の処理に代えて、再生の時点で次のように処理を行ってもよい。
【００５８】
すなわち、再生の対象として選択された画像情報のうち、最先に提示されるべき画像情報Ｖ［ｉ］について、当該画像情報に先行して提示される（再生範囲に含まれていないので再生はされない）画像情報Ｖ［ｉ−１］に関連付けられた検出フラグを調べる。この検出フラグが、有声部分を検出したことを表す値になっていれば、再生開始の時刻を、そこで検出された有声部分（Ｖ［ｉ］の提示期間の始期を、その再生期間内に含む有声部分）に関連する再生期間の始期に設定する。また、画像情報Ｖ［ｉ］の提示期間の始期を、この再生期間の始期に一致させる補正を行ってもよい。
【００５９】
また、情報再生装置は、再生の対象として選択された画像情報のうち、最先に提示されるべき画像情報Ｖ［ｊ］について、当該画像情報Ｖ［ｊ］に関連付けられた検出フラグを調べる。そしてこの検出フラグが、有声部分を検出したことを表す値になっていれば、再生終了の時刻を、そこで検出された有声部分（Ｖ［ｊ］の提示期間の終期を、その再生期間内に含む有声部分）に関連する再生期間の終期に設定する。また、画像情報Ｖ［ｊ］の提示期間の終期を、この再生期間の終期に一致させる補正を行ってもよい。
【図面の簡単な説明】
【００６０】
【図１】本発明の第１の実施の形態に係る情報再生装置の構成例を表すブロック図である。
【図２】本発明の第１の実施の形態に係る情報再生装置の処理対象となる記録情報の内容例を表す説明図である。
【図３】本発明の第１の実施の形態に係る情報再生装置の例を表す機能ブロック図である。
【図４】本発明の第１の実施の形態に係る情報再生装置の処理例を表す説明図である。
【図５】本発明の第１の実施の形態に係る情報再生装置の処理例を表すフローチャート図である。
【図６】本発明の第１の実施の形態に係る情報再生装置のもう一つの処理例を表すフローチャート図である。
【図７】本発明の第２の実施の形態に係る情報処理装置の構成例を表すブロック図である。
【図８】本発明の第２の実施の形態に係る情報処理装置の処理例を表すフローチャート図である。
【図９】本発明の第１の実施の形態に係る情報再生装置による別の処理例を表す説明図である。
【符号の説明】
【００６１】
１１，３１  制御部、１２，３２  記憶部、１３  操作部、１４  表示部、１５  音声出力部、１６  計時部、２１  記録情報受入部、２２  再生指示受入部、２３  再生範囲調整部、２４  画像再生制御部、２５  音声再生制御部、３３  入出力部。
【図１】
0005104135.tif 000002
【図２】
0005104135.tif 000003
【図３】
0005104135.tif 000004
【図４】
0005104135.tif 000005
【図５】
0005104135.tif 000006
【図６】
0005104135.tif 000007
【図７】
0005104135.tif 000008
【図８】
0005104135.tif 000009
【図９】
0005104135.tif 000010