(57)【要約】【課題】質問者など、プレゼンテーションの実施者（発表者）以外の者の発言を、個々の質問者ごとに識別可能にする。【解決手段】発表者の指示を受けて、複数の画像のうちから指定された画像を、端末側へ提供する。また端末側で収録された音声情報を受信して、端末ごとに蓄積して保持し、この受信した音声情報に関連付けられるべき画像を特定する画像特定情報を、受信した音声情報に関連付けて記録する。端末ごとに蓄積された音声情報と関係情報とは予め定めた処理に供される。【選択図】図１
2009065262.tif 000002
【特許請求の範囲】
【請求項１】
情報処理装置と、少なくとも一つの端末とを含み、
前記端末は、前記情報処理装置から提供される画像を表示する手段と、
周辺の音声を収録して、前記情報処理装置へ送信する音声送信手段と、
を含み、
前記情報処理装置は、
発表者の指示を受けて、複数の画像のうちから指定された画像を、端末側へ提供する手段と、
前記端末側で収録された音声情報を受信して、端末ごとに蓄積して保持する手段と、
前記受信した音声情報に関連付けられるべき画像を特定する画像特定情報を、受信した音声情報に関連付けて記録する手段と、
を含み、前記端末ごとに蓄積された音声情報と関係情報とが予め定めた処理に供されることを特徴とする情報処理システム。
【請求項２】
発表者の指示を受けて、複数の画像のうちから指定された画像を、端末側へ提供する手段と、
前記端末側で収録された音声情報を受信して、端末ごとに蓄積して保持する手段と、
前記受信した音声情報に関連付けられるべき画像を特定する画像特定情報を、受信した音声情報に関連付けて記録する手段と、
を含み、前記端末ごとに蓄積された音声情報と関係情報とが予め定めた処理に供されることを特徴とする情報処理装置。
【請求項３】
前記画像特定情報は、前記受信した音声情報に関連付けられるべき画像そのものを含むことを特徴とする請求項２記載の情報処理装置。
【請求項４】
端末の利用者を特定する情報を取得する手段をさらに含み、
前記端末ごとに蓄積された音声情報に対し、当該取得した、各端末の利用者を特定する情報を関連付けて保持することを特徴とする請求項２または３記載の情報処理装置。
【請求項５】
コンピュータを、
発表者の指示を受けて、複数の画像のうちから指定された画像を、端末側へ提供する手段と、
前記端末ごとに、その利用者を特定する情報を記憶する手段と、
前記端末側で収録された音声情報を受信して、端末ごとに蓄積して保持する手段と、
前記受信した音声情報に関連付けられるべき画像を特定する画像特定情報を、受信した音声情報に関連付けて記録する手段と、
として機能させ、前記端末ごとに蓄積された音声情報と関係情報とが予め定めた処理に供されることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、情報処理システム、情報処理装置、及びプログラムに関する。
【背景技術】
【０００２】
実施されたプレゼンテーションなどを記録するシステムがある。
【０００３】
複数の音声入力装置を備えて、個々の音声入力装置で受け入れた発話を抽出し、会議提示資料と関連付ける技術の例が特許文献１に開示されている。
【特許文献１】特開平１１−２７２６７９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
質問者など、プレゼンテーションの実施者（発表者）以外の者の発言を、個々の質問者ごとに識別可能にする技術が求められている。
【課題を解決するための手段】
【０００５】
請求項１記載の発明は、情報処理システムであって、情報処理装置と、少なくとも一つの端末とを含み、前記端末は、前記情報処理装置から提供される画像を表示する手段と、周辺の音声を収録して、前記情報処理装置へ送信する音声送信手段と、を含み、前記情報処理装置は、発表者の指示を受けて、複数の画像のうちから指定された画像を、端末側へ提供する手段と、前記端末側で収録された音声情報を受信して、端末ごとに蓄積して保持する手段と、前記受信した音声情報に関連付けられるべき画像を特定する画像特定情報を、受信した音声情報に関連付けて記録する手段と、を含み、前記端末ごとに蓄積された音声情報と関係情報とが予め定めた処理に供されることとしたものである。
【０００６】
請求項２記載の発明は、情報処理装置であって、発表者の指示を受けて、複数の画像のうちから指定された画像を、端末側へ提供する手段と、前記端末側で収録された音声情報を受信して、端末ごとに蓄積して保持する手段と、前記受信した音声情報に関連付けられるべき画像を特定する画像特定情報を、受信した音声情報に関連付けて記録する手段と、を含み、前記端末ごとに蓄積された音声情報と関係情報とが予め定めた処理に供されることとしたものである。
【０００７】
請求項３記載の発明は、請求項２記載の情報処理装置であって、前記画像特定情報は、前記受信した音声情報に関連付けられるべき画像そのものを含むこととしたものである。
【０００８】
請求項４記載の発明は、請求項２または３記載の情報処理装置であって、端末の利用者を特定する情報を取得する手段をさらに含み、前記端末ごとに蓄積された音声情報に対し、当該取得した、各端末の利用者を特定する情報を関連付けて保持することとしたものである。
【０００９】
請求項５記載の発明は、プログラムであって、コンピュータを、発表者の指示を受けて、複数の画像のうちから指定された画像を、端末側へ提供する手段と、前記端末ごとに、その利用者を特定する情報を記憶する手段と、前記端末側で収録された音声情報を受信して、端末ごとに蓄積して保持する手段と、前記受信した音声情報に関連付けられるべき画像を特定する画像特定情報を、受信した音声情報に関連付けて記録する手段と、として機能させ、前記端末ごとに蓄積された音声情報と関係情報とが予め定めた処理に供されることとしたものである。
【発明の効果】
【００１０】
請求項１，２，５記載の発明によると、端末ごとに、取得した音声を記録することで、質問者など、プレゼンテーションの実施者以外の者の発言を、個々の質問者ごとに識別可能となる。
【００１１】
請求項３記載の発明によると、音声の収録時点で提供されていた画像そのものが併せて記録されることで、この構成を有しない場合に比して、画像の参照が容易になる。
【００１２】
請求項４記載の発明によると、端末の利用者を特定する情報が、音声情報に関連付けられるので、この構成を有しない場合に比して、発言者の特定が容易になる。
【発明を実施するための最良の形態】
【００１３】
本発明の実施の形態について図面を参照しながら説明する。本発明の実施の形態に係る情報処理システムは、図１に示すように、情報処理装置１と、これにネットワークなどの通信回線を介して接続されている端末装置２ａ，２ｂ…とを含んで構成される。
【００１４】
ここに情報処理装置１は、制御部１１と、記憶部１２と、操作部１３と、表示部１４と、通信部１５とを含んで構成されている。また各端末装置２は、音声入力のためのマイク等を備えたパーソナルコンピュータでよい。
【００１５】
情報処理装置１の制御部１１は、ＣＰＵなどのプログラム制御デバイスであり、発表者の利用する端末装置２から受信される指示に従い、当該指示によって指定された画像を表示部１４に表示し、また、当該画像を端末装置２へ配信する。また、この制御部１１は、各端末装置２から受信される音声情報を、受信元の端末装置２ごとに保持する処理を実行している。これら制御部１１の処理の詳しい例については、後に述べる。
【００１６】
記憶部１２は、ＲＡＭ（Random Access Memory）などのメモリ素子や、ハードディスクなどのストレージデバイスなどを含んで構成される。この記憶部１２には、制御部１１によって実行されるプログラムが保持される。このプログラムは、例えばＤＶＤ−ＲＯＭなどのコンピュータ可読な記録媒体に格納されて提供され、この記憶部１２に複写されたものであってもよい。また、この記憶部１２は制御部１１のワークメモリとしても動作する。さらに本実施の形態では、この記憶部１２に、端末装置２から受信された音声の情報や、表示された画像の情報などが蓄積される。
【００１７】
操作部１３は、マウスやキーボードなどであり、ここで行われた操作の内容を表す情報は制御部１１に出力される。表示部１４は、ディスプレイや、プロジェクタなどであり、制御部１１から入力される指示に従って、画像を表示する。通信部１５は、例えばネットワークインタフェースなどであり、制御部１１から入力される指示に従って、各端末装置２宛に情報を送信する。また、各端末装置２が送信した情報を受信して制御部１１に出力する。
【００１８】
端末装置２は、キーボードやマウスなどを備えて、その利用者の指示操作を表す情報（ＨＩＤ（Human Interface Device）イベント）を、情報処理装置１へ宛てて送信する。また、この端末装置２は、情報処理装置１から画像の配信を受けて、当該配信された画像を表示する。
【００１９】
また本実施の形態においては、この端末装置２は、マイクなどの音声入力デバイスを備える。そして、この音声入力デバイスにより、端末装置２周辺の音声を収録し、収録した音声の信号を符号化して、ディジタルデータである音声情報を生成する。そして当該音声情報を情報処理装置１へ送出する。
【００２０】
ここで情報処理装置１の制御部１１によって行われる処理の内容について述べる。この制御部１１が、記憶部１２に格納されているプログラムを実行することで、本実施の形態の情報処理装置１は、機能的には、図２に例示するように、仮想アプリケーションサーバ部２１と、記録配信サーバ部２２とを含んで構成されるものとなる。
【００２１】
ここで仮想アプリケーションサーバ部２１は、画像保持部３１と、配信処理部３２と、音声情報取得部３３と、音声情報記録部３４と、画像記録部３５とを含んで構成される。
【００２２】
画像保持部３１は、記憶部１２にプレゼンテーションで用いられる画像（スライド画像や、電子文書など）を保持している。配信処理部３２は、スライド画像を表示するなどの処理を行うプレゼンテーション・アプリケーションを実行しており、その実行画面の画像を各端末装置２へ配信する。ここで配信先の端末装置２のアドレスなどは予め登録をしておけばよい。例えば情報処理装置１は、端末装置２の利用者から、利用者を識別する情報として利用者名やパスワードなどの認証情報を受け入れる。そして端末装置２を特定する情報（例えば、通信で利用される宛先の情報、ネットワークであればＩＰ（internet protocol）アドレスなどネットワークアドレスでよい）と、受け入れた認証情報の少なくとも一部（利用者名など）とを関連付けて、記憶部１２に保持する。
【００２３】
配信処理部３２は、このような処理によって保持した情報で特定される端末装置２に対して、実行画面の画像を配信する。この実行画面の画像の配信は、アプリケーションの表示画面イメージを予め定めたサイズのブロックずつ送信するＲＦＢ（Remote Frame Buffer）プロトコルなどを採用して実現できる。また、配信処理部３２は、このアプリケーションの画面の画像を、表示部１４に出力して表示させる。
【００２４】
また、この配信処理部３２は、発表者がその端末装置２にて行う指示操作を受けて、画像保持部３１が保持している画像のうちから、指定された画像をアプリケーションで表示し、これにより当該画像を端末装置２へ配信して提供する処理を実行している。つまり、発表者は、自らが利用する端末装置２を操作して、プレゼンテーションで利用する画像を表示するよう、情報処理装置１上で動作するアプリケーションに指示を行うことになる。
【００２５】
音声情報取得部３３は、端末装置２から音声情報が受信されると、その送信元である端末装置２を特定する情報（例えば端末装置２のＩＰアドレス）と、当該音声情報とを音声情報記録部３４へ出力する。
【００２６】
音声情報記録部３４は、音声情報取得部３３から入力される音声情報と、その送信元である端末装置２を特定する情報との入力を受け入れる。そして、音声情報記録部３４は、端末装置２を特定する情報に関連付けられているデータファイルが、記憶部１２に蓄積されているか否かを調べる。ここで、かかるデータファイルが記憶部１２に蓄積されている場合、受け入れた音声情報をこのデータファイルに格納する。一方音声情報記録部３４は、端末装置２を特定する情報に関連付けられているデータファイルがなければ、当該データファイルを新たに生成して、記憶部１２に格納し、この生成したデータファイルに、受け入れた音声情報を格納する。このデータファイルには、さらに関連付けられた情報で特定される端末装置２の利用者を特定する情報を関連付けて記録してもよい。
【００２７】
画像記録部３５は、音声情報が受信されたときに、当該音声情報に関連付けるべき画像として、例えば、音声情報の受信の時点で提供されている画像を特定する情報を、音声情報に関連付けて蓄積する。ここで、関連付けるべき画像を特定する情報は、音声情報を受信した時点で提供されていた画像そのものであってもよい。
【００２８】
また画像記録部３５は、質問者が発言を希望してから、実際に音声の情報が受け入れられるまでに時間が経過してしまう場合があることに配慮して次のように処理を行ってもよい。すなわち、画像記録部３５は、ＵＩＤイベントとして、発言を要求する旨の操作がされたことを表す情報が、端末装置２から受信されると、当該情報を送信した端末装置２を特定する情報に関連付けて、その時点で配信処理部３２が提供している画像を一時的に保持する。そして画像記録部３５は、ここで保持した画像を、音声情報に関連付けるべき画像として、その後に受信される音声情報に関連付けて、当該保持した画像を記録することとしてもよい。
【００２９】
さらに、画像記録部３５は、発表者の利用している端末装置２から、画像を切り替える旨の指示が入力されるごとに、当該指示によって提供される画像を、記憶部１２に記録することとしてもよい。
【００３０】
また、本実施の形態の情報処理装置１は、発表者が、プレゼンテーションを開始する指示を行ってからの経過時間を、図示しない計時部で計時しておいてもよい。この場合、情報処理装置１の音声情報記録部３４や画像記録部３５は、音声情報や画像を記録するごとに、その記録を行う時点での、計時部の計時時刻を表す情報を、記録する音声情報や画像に関連付けることとしてもよい。
【００３１】
これら音声情報記録部３４及び画像記録部３５の処理により、記憶部１２には、図３に例示するように各端末装置２から受信された音声情報を、それぞれ蓄積して保持するデータファイル（Ｆ）が記録される。各データファイルには、断続的に受信される音声情報（Ａ）が少なくとも一つ含まれる。そして各音声情報には、音声情報に関連付けるべき画像を特定する情報（Ｖ）と、記録の時点を表す情報（Ｔ）とが関連付けて記録される。
【００３２】
また記憶部１２には、発表者の音声情報を記録したデータファイル（ＰＡ）と、発表者の指示で表示された画像の情報（ＰＶ）とが格納される。ここで発表者の音声情報を記録したデータファイルＰＡにおいても、それぞれの音声情報には、その記録の時点を表す情報（Ｔ）が関連付けられている。
【００３３】
さらに情報処理装置１の記録配信サーバ部２２は、ＨＴＴＰ（Hyper Text Transfer Protocol）サーバとして動作し、ネットワークなどの通信回線を介してウェブクライアント（ウェブブラウザなど）からのアクセスを受けて、記憶部１２に記録した各利用者の音声情報や画像の情報を配信する。
【００３４】
すなわち記録配信サーバ部２２は、ウェブクライアント側からプレゼンテーションの記録を再生するべき指示を受けると、図示しない計時部での計時を開始する。
【００３５】
そして計時部での計時時刻が、発表者の指示によって表示された画像の記録時点に到達するごとに、当該時刻に関連付けられている画像を、ウェブクライアント側での表示処理に供する。
【００３６】
また、時部での計時時刻が、各データファイルに格納された音声情報に関連付けられた時刻に達するごとに、その時点での発表者の音声情報や、質問者の音声情報、並びにこれらに関連付けられた画像の情報を配信して、ウェブクライアント側での再生、表示の処理に供する。
【００３７】
以上の構成を有する本実施の形態の情報処理システムによると、図４に例示するように、情報処理装置１が発表者の指示に従って、画像を配信している（ここに発表者の端末装置２から受け入れた音声情報を併せて配信してもよい）（Ｓ１）。
【００３８】
このとき、質問者が、端末装置２のキーボードなどを操作して、発言を求める操作を行うと（Ｓ２）、その時点で配信されている画像が記録される（Ｓ３）。その後、質問者の端末装置２で収録されて、符号化された音声情報が受け入れられると（Ｓ４）、情報処理装置１は、受け入れた音声情報と処理Ｓ３で記録した画像とを関連付けて蓄積する（Ｓ５）。
【００３９】
このように本実施の形態では、質問者など、プレゼンテーションの実施者（発表者）以外の者の発言を収録した音声情報も、個々の質問者ごとに（端末装置２ごと）に記録されることとなる。また、本実施の形態では、各端末装置２において音声情報の符号化が行われるので、この構成を有しない場合に比して、情報処理装置１側での処理負荷が軽減される。
【図面の簡単な説明】
【００４０】
【図１】本発明の実施の形態に係る情報処理システムの例を表す構成ブロック図である。
【図２】本発明の実施の形態に係る情報処理装置の例を表す機能ブロック図である。
【図３】本発明の実施の形態に係る情報処理装置が記録する情報の例を表す説明図である。
【図４】本発明の実施の形態に係る情報処理装置の動作の一部の例を表すフローチャート図である。
【符号の説明】
【００４１】
１  情報処理装置、２  端末装置、１１  制御部、１２  記憶部、１３  操作部、１４  表示部、１５  通信部、２１  仮想アプリケーションサーバ部、２２  記録配信サーバ部、３１  画像保持部、３２  配信処理部、３３  音声情報取得部、３４  音声情報記録部、３５  画像記録部。
【図１】
2009065262.tif 000003
【図２】
2009065262.tif 000004
【図３】
2009065262.tif 000005
【図４】
2009065262.tif 000006