(57)【要約】      （修正有）【課題】途中参加者や退席者が、発言の内容を容易に知ることができるＴＶ会議システムを提供する。【解決手段】ＴＶ会議システムは、ＭＦＰ、ＰＣ２００ａ、２００ｂ、２００ｃを含む。ＭＦＰの資料記憶部１１０は、対話相手に提示する資料情報を記憶し、認識ファイル記憶部１０８は、前記資料情報に基づく発言内容がテキスト化されたテキスト化情報を記憶し、補足説明作成部１１１は、テキスト化情報の１の構成要素が資料情報の構成要素のいずれかに相当するか否かを判断し、相当しないと判断される場合に、テキスト化情報の前記構成要素を補足説明として含む参加者用資料を生成し、通信部１０７は、参加者用資料を送信する。各ＰＣは、参加者用資料を表示する。【選択図】図２
2010219866.tif 000002
【特許請求の範囲】
【請求項１】
対話相手とのコミュニケーションを支援するコミュニケーション支援装置であって、
対話相手に提示する資料情報を記憶している情報記憶手段と、
前記資料情報に基づく発言による音声データを音声認識によりテキスト化してテキスト化情報を生成する音声認識手段と、
テキスト化情報の１の構成要素が資料情報の構成要素のいずれかに相当するか否かを判断する判断手段と、
相当しないと判断される場合に、テキスト化情報の前記構成要素を補足説明として出力する出力手段と
を備えることを特徴とするコミュニケーション支援装置。
【請求項２】
前記判断手段は、テキスト化情報の前記構成要素と資料情報の１の構成要素とを比較し、テキスト化情報の前記構成要素と資料情報の前記構成要素との一致率が所定の閾値以下である場合に、テキスト化情報の前記構成要素が、資料情報の前記構成要素に相当しないと判断する
ことを特徴とする請求項１に記載のコミュニケーション支援装置。
【請求項３】
前記出力手段は、相当しないと判断される場合に、さらに、前記補足説明に対応付けて、前記資料情報内においてテキスト化情報の前記構成要素が存在すべき位置を示す位置情報を出力する
ことを特徴とする請求項２に記載のコミュニケーション支援装置。
【請求項４】
前記判断手段は、情報記憶手段に記憶されている資料情報及び音声認識手段により生成されたテキスト化情報を、それぞれ、句読点により分解して前記構成要素を得、得られた構成要素と構成要素とを比較する
ことを特徴とする請求項３に記載のコミュニケーション支援装置。
【請求項５】
前記判断手段は、情報記憶手段に記憶されている資料情報及び音声認識手段により生成されたテキスト化情報を、それぞれ、句読点により分解して部分情報を得、得られた前記部分情報を、さらに、品詞により分解して前記構成要素を得、得られた構成要素と構成要素とを比較する
ことを特徴とする請求項３に記載のコミュニケーション支援装置。
【請求項６】
前記出力手段は、補足説明とされたテキスト化情報の構成要素のうち、同一の部分情報を分解して得られたものを関連付ける
ことを特徴とする請求項５に記載のコミュニケーション支援装置。
【請求項７】
前記出力手段は、前記資料情報内において、前記位置情報が示す位置を含むページに、前記補足説明からなる補足説明画像を付加し、補足説明画像が付加されたページを含む参加者用資料を出力する
ことを特徴とする請求項３に記載の会議支援装置。
【請求項８】
前記出力手段は、前記位置情報が示す位置を指し示す前記補足説明画像を、前記ページに付加する
ことを特徴とする請求項７に記載の会議支援装置。
【請求項９】
前記出力手段は、さらに、前記情報記憶手段に記憶されている前記資料情報の各ページの縮小画像を生成し、前記資料情報内において、前記位置情報が示す位置を含むページに対応する縮小画像に、前記補足説明が存在することを示すアイコンを付加し、補足説明画像が付加された前記ぺージと前記縮小画像とを、前記参加者用資料として、出力する
ことを特徴とする請求項７に記載のコミュニケーション支援装置。
【請求項１０】
対話相手とのコミュニケーションを支援するコミュニケーション支援装置と、表示デバイスを備える外部装置とから構成されるコミュニケーション支援システムであって、
前記コミュニケーション支援装置は、
対話相手に提示する資料情報を記憶している情報記憶手段と、
前記資料情報に基づく発言による音声データを音声認識によりテキスト化してテキスト化情報を生成する音声認識手段と、
テキスト化情報の１の構成要素が資料情報の構成要素のいずれかに相当するか否かを判断する判断手段と、
相当しないと判断される場合に、テキスト化情報の前記構成要素を補足説明として出力する出力手段とを備え、
前記表示デバイスは、前記補足説明を表示する
ことを特徴とするコミュニケーション支援システム。
【請求項１１】
対話相手とのコミュニケーションを支援するコミュニケーション支援装置において用いられるコミュニケーション支援方法であって、
前記コミュニケーション支援装置は、対話相手に提示する資料情報を記憶している情報記憶手段とを備え、
前記コミュニケーション支援方法は、
前記資料情報に基づく発言による音声データを音声認識によりテキスト化してテキスト化情報を生成する音声認識ステップと、
テキスト化情報の１の構成要素が資料情報の構成要素のいずれかに相当するか否かを判断する判断ステップと、
相当しないと判断される場合に、テキスト化情報の前記構成要素を補足説明として出力する出力ステップと
を含むことを特徴とするコミュニケーション支援方法。
【請求項１２】
対話相手に提示する資料情報を記憶している情報記憶手段を備え、対話相手とのコミュニケーションを支援し、少なくともメモリとプロセッサを備えるコンピュータとしてのコミュニケーション支援装置において用いられるコンピュータプログラムを記録しているコンピュータ読み取り可能な記録媒体であって、
前記コンピュータに、
前記資料情報に基づく発言による音声データを音声認識によりテキスト化してテキスト化情報を生成する音声認識ステップと、
テキスト化情報の１の構成要素が資料情報の構成要素のいずれかに相当するか否かを判断する判断ステップと、
相当しないと判断される場合に、テキスト化情報の前記構成要素を補足説明として出力する出力ステップと
を実行させるための前記コンピュータプログラムを記録している記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、離れた拠点間をネットワークで結び、映像や音声を用いて、遠隔地にいる相手とのコミュニケーションを支援するコミュニケーション支援技術に関する。
【背景技術】
【０００２】
ADSL、光ファイバなどのブロードバンド回線の普及により、離れた拠点間をネットワークで結び、遠隔地にいる相手と映像や音声を用いてコミュニケーションすることができるテレビ会議システムの利用が拡大している。
特許文献１によると、このようなテレビ会議では、通常の会議とは異なって、欠席者や欠席者や途中参加者、一時退席者の発生頻度が多くなる傾向が見られる。その理由の一つとして、パーソナルコンピュータベースの電子会議においては、専用の会議部屋が設けられることなく個人の居室で行われることが大半であるため、通常と同様のインタラプト（電話、隣人の話しかけ）などが行われやすいことが指摘されている。特許文献１は、このような、会議への中途参加者や一時退席者であっても、会議の概要（会議の場の雰囲気、会議の痕跡）を知ることができるようにするために、発生する各参加者のマルチメディア会議データ、例えば、音声、映像、メモ書き、共有資料、共有資料への書き込みなどを、メディアおよび参加者毎にランダムアクセス可能な時系列形式で蓄積し、会議進行と同時に、当会議の開始時刻から現時点までの生の該マルチメディア会議データを解析して会議概要情報を抽出し、要求のあったクライアントＰＣに送信する技術を開示している。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００４−３５０１３４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
通常、会議では、説明用の資料が予め作成されて、配布され、会議の参加者は、配布された資料を見ながら、説明者から説明を聞く。この場合に、説明者が資料の内容をそのまま説明するのであれば、途中参加者や退席者は、その資料を読めばよいのであるが、説明者は、配布された資料には記載されていない事項を補足的に説明することもある。このような場合において、上記従来の技術を適用しても、会議データを解析して抽出された会議概要情報を最初から視認するなどして、補足的に説明された事項を自ら検出しなければならない。このような作業をした結果、補足的に説明された事項を検出できなかった場合には、途中参加者や退席者は、説明者が補足的に説明した事項について知り得ないことがある。
【０００５】
本発明は、このような問題点を解決し、資料情報に基づいて発言される場合に、説明者が資料情報に記載されていない内容について補足的に発言したような場合であっても、途中参加者や退席者が、その補足的な発言の内容を容易に知ることができるコミュニケーション支援装置、コミュニケーション支援システム、コミュニケーション支援方法、コミュニケーション支援用のコンピュータプログラムを記録している記録媒体を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するために、本発明は、対話相手とのコミュニケーションを支援するコミュニケーション支援装置であって、対話相手に提示する資料情報を記憶している情報記憶手段と、前記資料情報に基づく発言による音声データを音声認識によりテキスト化してテキスト化情報を生成する音声認識手段と、テキスト化情報の１の構成要素が資料情報の構成要素のいずれかに相当するか否かを判断する判断手段と、相当しないと判断される場合に、テキスト化情報の前記構成要素を補足説明として出力する出力手段とを備えることを特徴とする。
【発明の効果】
【０００７】
この構成によると、資料情報の構成要素のいずれにも相当しないテキスト化情報の構成要素が補足説明として出力されるので、途中参加者や退席者は、資料情報に記載されていない発言内容を容易に知ることができるという優れた効果を奏する。
ここで、前記判断手段は、テキスト化情報の前記構成要素と資料情報の１の構成要素とを比較し、テキスト化情報の前記構成要素と資料情報の前記構成要素との一致率が所定の閾値以下である場合に、テキスト化情報の前記構成要素が、資料情報の前記構成要素に相当しないと判断してもよい。
【０００８】
この構成によると、テキスト化情報の構成要素が、資料情報の１の構成要素に相当しないことを、テキスト化情報の構成要素と資料情報の１の構成要素との一致率が所定の閾値以下であるかを判断することにより、確実に決定できる。
ここで、前記出力手段は、相当しないと判断される場合に、さらに、前記補足説明に対応付けて、前記資料情報内においてテキスト化情報の前記構成要素が存在すべき位置を示す位置情報を出力してもよい。
【０００９】
この構成によると、補足説明に対応付けて、資料情報内においてテキスト化情報の構成要素が存在すべき位置を示す位置情報を出力するので、補足説明が資料情報内のどの位置に対応しているかを知ることができる。
ここで、前記判断手段は、情報記憶手段に記憶されている資料情報及び音声認識手段により生成されたテキスト化情報を、それぞれ、句読点により分解して前記構成要素を得、得られた構成要素と構成要素とを比較してもよい。
【００１０】
この構成によると、資料情報及びテキスト化情報を、それぞれ、句読点により分解して得られた構成要素と構成要素とを比較するので、構成要素と構成要素との相当判断を確実に行うことができる。
ここで、前記判断手段は、情報記憶手段に記憶されている資料情報及び音声認識手段により生成されたテキスト化情報を、それぞれ、句読点により分解して部分情報を得、得られた前記部分情報を、さらに、品詞により分解して前記構成要素を得、得られた構成要素と構成要素とを比較してもよい。
【００１１】
この構成によると、資料情報及びテキスト化情報を、それぞれ、品詞により分解して得られた構成要素と構成要素とを比較するので、構成要素と構成要素との相当判断を確実に行うことができる。
ここで、前記出力手段は、補足説明とされたテキスト化情報の構成要素のうち、同一の部分情報を分解して得られたものを関連付けるとしてもよい。
【００１２】
この構成によると、補足説明とされたテキスト化情報の構成要素のうち、同一の部分情報を分解して得られたものを関連付けるので、まとまりのある補足説明を出力することができる。
ここで、前記出力手段は、前記資料情報内において、前記位置情報が示す位置を含むページに、前記補足説明からなる補足説明画像を付加し、補足説明画像が付加されたページを含む参加者用資料を出力してもよい。
【００１３】
この構成によると、資料情報内において、位置情報が示す位置を含むページに、補足説明からなる補足説明画像を付加するので、利用者は、補足説明画像が付加されたページにおいて、補足説明を明確に知ることができる。
ここで、前記出力手段は、前記位置情報が示す位置を指し示す前記補足説明画像を、前記ページに付加してもよい。
【００１４】
この構成によると、位置情報が示す位置を指し示す前記補足説明画像をページに付加するので、利用者は、補足説明画像が付加されたページにおいて、補足説明が存在すべき位置を明確に知ることができる。
ここで、前記出力手段は、さらに、前記情報記憶手段に記憶されている前記資料情報の各ページの縮小画像を生成し、前記資料情報内において、前記位置情報が示す位置を含むページに対応する縮小画像に、前記補足説明が存在することを示すアイコンを付加し、補足説明画像が付加された前記ぺージと前記縮小画像とを、前記参加者用資料として、出力してもよい。
【００１５】
前記出力手段は、資料情報内において、位置情報が示す位置を含むページに対応する縮小画像に、補足説明が存在することを示すアイコンを付加するので、利用者は、縮小画像により、補足説明が存在するページを素早く知ることができる。
【図面の簡単な説明】
【００１６】
【図１】ＴＶ会議システム１０の構成を示す。
【図２】ＭＦＰ１００が有する制御部１２０の構成を示すブロック図である。
【図３】ＭＦＰ１００において、説明用資料ファイル３０１及び音声認識ファイル３２１から、補足ファイル３６１が生成される過程において生成される各ファイルの例を示す。
【図４】ＭＦＰ１００において、資料１文ファイル４０１及び音声１文ファイル４２１から、補足ファイル４６１が生成される過程において生成される各ファイルの例を示す。
【図５】ＭＦＰ１００において、音声１文ファイル４７１から、補足ファイル４９１が生成される過程において生成される各ファイルの例を示す。
【図６】ＰＣ２００ａの構成を示すブロック図である。
【図７】ＰＣ２００ａのモニタ２１０に表示される開始画面５０１を示す。
【図８】ＰＣ２００ａのモニタ２１０に表示される記録開始画面５１１を示す。
【図９】ＰＣ２００ａのモニタ２１０に表示される資料指定画面５２１を示す。
【図１０】ＰＣ２００ａのモニタ２１０に表示される記録中画面５３１を示す。
【図１１】ＰＣ２００ａのモニタ２１０に表示される会議補足情報表示画面５４１を示す。
【図１２】ＰＣ２００ａのモニタ２１０に表示される会議補足情報表示画面５５１を示す。
【図１３】ＴＶ会議システム１０の概要の動作を示すフローチャートである。
【図１４】ＴＶ会議システム１０におけるページ表示の動作を示すフローチャートである。
【図１５】ＭＦＰ１００による音声認識及び補足説明作成の動作を示すフローチャートである。
【図１６】ＭＦＰ１００による音声認識の開始のタイミング及び補足説明作成の開始のタイミングを示す。
【図１７】ＭＦＰ１００の音声認識データ補正部１０４による音声認識ファイルの補正の動作を示すフローチャートである。
【図１８】ＭＦＰ１００の補足説明作成部１１１による補足ファイルの作成の動作を示すフローチャートである。
【図１９】ＭＦＰ１００の補足説明作成部１１１による品詞比較処理の動作を示すフローチャートである。図２０へ続く。
【図２０】ＭＦＰ１００の補足説明作成部１１１による品詞比較処理の動作を示すフローチャートである。図１９から続く。
【図２１】ＭＦＰ１００の補足説明作成部１１１による１文比較処理の動作を示すフローチャートである。
【図２２】ＭＦＰ１００の参加者用資料作成部１０６による参加者用資料作成の動作を示すフローチャートである。
【図２３】ＭＦＰ１００の参加者用資料作成部１０６による補足説明の挿入処理の動作を示すフローチャートである。
【発明を実施するための形態】
【００１７】
１．実施の形態
本発明の１の実施の形態としてのＴＶ会議システム１０について説明する。
１．１  ＴＶ会議システム１０
ＴＶ会議システム１０は、図１に示すように、多機能周辺装置（Multifunction Peripheral、又は複合機。以下、ＭＦＰと呼ぶ。）１００、パーソナルコンピュータ（以下、ＰＣと呼ぶ。）２００ａ、２００ｂ及び２００ｃから構成されている。ＭＦＰ１００、ＰＣ２００ａ、２００ｂ及び２００ｃは、インターネット２０により、相互に接続されている。ＴＶ会議システム１０は、ＭＦＰ１００を中継局として、ＰＣから他のＰＣへ会議用の資料、映像及び音声を配信する。
【００１８】
１．２  ＭＦＰ１００
ＭＦＰ１００は、１台でプリンタ、スキャナー、コピー機、ＦＡＸなどの機能を兼ねる複合機であり、制御部１２０を備える。ＭＦＰ１００は、対話相手とのコミュニケーションを支援するコミュニケーション支援装置としても機能する。
制御部１２０は、図２に示すように、システムコントローラ１０２、音声認識部１０３、音声認識データ補正部１０４、補足説明作成部１１１、形態素解析部１０５、参加者用資料作成部１０６、通信部１０７、認識ファイル記憶部１０８、音声記憶部１０９及び資料記憶部１１０から構成されている。
【００１９】
制御部１２０は、具体的には、マイクロプロセッサ、ＲＯＭ、ＲＡＭなどから構成されるコンピュータシステムである。前記ＲＡＭには、コンピュータプログラムが記憶されている。前記マイクロプロセッサが、前記コンピュータプログラムに従って動作することにより、制御部１２０は、その機能を達成する。
（１）音声記憶部１０９、資料記憶部１１０及び認識ファイル記憶部１０８
音声記憶部１０９は、ハードディスクユニット又は半導体メモリから構成され、音声データを記憶するための領域を有する。音声データは、通信部１０７により書き込まれたデジタル音声信号である。
【００２０】
資料記憶部１１０は、ハードディスクユニット又は半導体メモリから構成され、説明用資料ファイル１２３、補足ファイル１２４及び参加者用資料ファイル１２５等を記憶するための領域を有する。
説明用資料ファイル１２３は、ＴＶ会議において、資料の説明者が他の者に対して説明する際に用いる資料データの集合であり、複数のぺージから構成される。説明用資料ファイル１２３の一例として、図３に、説明用資料ファイル３０１を示している。各ページは、複数の文データから構成されている。各文データは、１個のセンテンスを構成している。センテンスは、一つのまとまった内容を有し、形の上で完結した言語の単位である。つまり、その表記において、通常、句点により終了する。説明用資料ファイル３０１は、図３に示すように、少なくとも、文データ３０２及び文データ３０３を含んでいる。
【００２１】
補足ファイル１２４は、説明者が説明用資料ファイル１２３の内容を口頭により説明する際に、口頭による説明の内容と、説明用資料ファイル１２３に記載された内容との差分を示すデータの集合である。参加者用資料ファイル１２５は、説明用資料ファイル１２３の内容に対して、補足ファイル１２４に含まれる内容を付加してできた資料ファイルである。
【００２２】
認識ファイル記憶部１０８は、ハードディスクユニット又は半導体メモリから構成され、音声認識ファイル１２１及び補正後音声認識ファイル１２２を記憶するための領域を有する。音声認識ファイル１２１は、音声記憶部１０９に記憶され、ＴＶ会議における資料の説明者の口頭による説明を記録した音声データに対して、音声認識処理を施して、文字データとしたものの集合である。補正後音声認識ファイル１２２は、音声認識ファイル１２１から説明者の言いよどみの言葉や有声休止の言葉を除いたものである。ここで、言いよどみとは、話をする前又は途中で「えー」、「あのー」、「そのー」などの言葉が入る現象を言う。また、有声休止は、言いよどみ現象の一つで、母音の引き延ばしとして現れ、例えば、「音声認識」という語を最後まで思い出せないときに、「おんせいー」(「いー」の部分が有声休止)にように言いよどむ現象を言う。
【００２３】
（２）通信部１０７
通信部１０７は、外部のＰＣ２００ａ、２００ｂ及び２００ｃと接続され、ＰＣ２００ａ、２００ｂ及び２００ｃとの間でデータの送受信を行う。
（３）音声認識部１０３及び音声認識データ補正部１０４
音声認識部１０３は、音声記憶部１０９に記憶されている音声データを読み出し、読み出した音声データに対して、音声認識処理を施して、文字データを生成し、生成した文字データを音声認識ファイル１２１として認識ファイル記憶部１０８に書き込む。ここで、音声記憶部１０９に記憶されている音声データは、説明者が説明用資料ファイル１２３の内容を口頭により説明する際に、発した音声が電気信号に変換され、デジタル音声データに変換されたものである。なお、音声認識処理については、公知であり、ここでは、説明を省略する。
【００２４】
なお、音声認識により音声をテキストに変換する際に、句読点を付加する技術については、
http://www.nikkeibp.co.jp/archives/046/46317.html、
http://www.ryutu.inpit.go.jp/chart/H17/denki34/2/pdf/2-15.pdf  及び
特許第3282075号特許公報（連続音声認識において句読点を自動的に生成する装置および方法）に開示されている。
【００２５】
音声認識データ補正部１０４は、認識ファイル記憶部１０８に記憶されている音声認識ファイル１２１から、言いよどみの言葉や有声休止の言葉を除き、これらを除いた後の音声認識ファイルを補正後音声認識ファイル１２２として、認識ファイル記憶部１０８へ書き込む。
図３に一例として示すように、音声認識ファイル３２１は、言いよどみ言葉３２２、３２３、３２４を含んでいる。音声認識データ補正部１０４は、音声認識ファイル３２１から、これらの言いよどみ言葉３２２、３２３、３２４を削除し、言いよどみ言葉が削除された補正後音声認識ファイル３３１を認識ファイル記憶部１０８へ書き込む。
【００２６】
（４）補足説明作成部１１１及び形態素解析部１０５
補足説明作成部１１１は、説明用資料ファイル１２３に含まれる全てのページの各々について、認識ファイル記憶部１０８に記憶されている補正後音声認識ファイル１２２のページ相当分と、説明用資料ファイル１２３のページとを比較し、その差分を抽出し、抽出した差分を補足ファイル１２４として、資料記憶部１１０へ書き込む。なお、補足説明作成部１１１についての詳細の説明については、後述する。
【００２７】
形態素解析部１０５は、文章を、文章を構成する形態素に分解し、分解して生成した形態素を記憶する。形態素は、意味のある最小の単位である。形態素解析については、公知であるので、説明を省略する。
なお、形態素解析については、
http://ja.wikipedia.org/wiki/%E5%BD%A2%E6%85%8B%E7%B4%A0%E8%A7%A3%E6%9E%90、
長尾真（1979年）「計算機による日本語文章の解析に関する研究」、昭和53年度文部省科学研究費特定研究(1)研究報告書、
長尾真・辻井潤一（1978年）「国語辞書の記憶と日本語の自動分割」、情報処理 Vol.19 No.6、
首藤公昭・楢原登志子・吉田将（1979年）「日本語の機械処理のための文節構造モデル」、電子通信学会誌 Vol.62-D No.12 、
首藤公昭（1980年）「文節構造モデルによる日本語の機械処理に関する研究」福岡大学研究所報 No.45、及び
特許3908919号特許公報（形態素解析システムと形態素解析方法）に開示されている。
【００２８】
（５）参加者用資料作成部１０６
参加者用資料作成部１０６は、資料記憶部１１０に記憶されている説明用資料ファイル１２３の内容に対して、補足ファイル１２４に含まれる内容を付加して、参加者用資料ファイル１２５を生成し、生成した参加者用資料ファイル１２５を資料記憶部１１０へ書き込む。
【００２９】
（６）システムコントローラ１０２
システムコントローラ１０２は、音声認識部１０３、音声認識データ補正部１０４、補足説明作成部１１１、形態素解析部１０５、参加者用資料作成部１０６、通信部１０７、認識ファイル記憶部１０８、音声記憶部１０９及び資料記憶部１１０を制御する。
１．３  補足説明作成部１１１
ここでは、補足説明作成部１１１について詳細に説明する。
【００３０】
補足説明作成部１１１は、上述したように、説明用資料ファイル１２３に含まれる全てのぺージの各々について、認識ファイル記憶部１０８に記憶されている補正後音声認識ファイル１２２のページ相当分と、説明用資料ファイル１２３のぺージとを比較し、その差分を抽出し、抽出した差分を補足ファイル１２４として、資料記憶部１１０へ書き込む。
言い換えると、補足説明作成部１１１は、認識ファイル記憶部１０８に記憶されたテキスト化情報の１の構成要素が、資料記憶ブロック１１０に記憶された資料情報の構成要素のいずれかに相当するか否かを判断する判断部（図示していない）と、相当しないと判断される場合に、テキスト化情報の前記構成要素を補足説明として出力する出力部（図示していない）とを含む。
【００３１】
ここで、補足説明作成部１１１が上記の比較を行う際に、比較の対象となる単位の大きさにより、２種類の方法を使い分ける。第１の方法は、１文比較であり、第２の方法は、品詞比較である。１文比較では、文章が句読点により分解され、分解により得られた部分を比較の単位とする。これに対して、品詞比較では、文章が品詞毎に分解され、分解により得られた品詞の部分を比較単位とする。
【００３２】
補足説明作成部１１１は、１文比較及び品詞比較の何れかを示す比較フラグを有している。比較フラグが「０」であるときは、１文比較を示し、比較フラグが「１」であるときは、品詞比較を示す。
比較フラグは、次のようにして決定される。
補足説明作成部１１１は、句読点による分解により生成した音声１文ファイルについて、音声１文ファイルの全体の文字の中から、句読点の数を算出し、音声１文ファイルの全体の文字数と、算出した句読点の数との比率により、１文比較を用いるか、品詞比較を用いるかをを決定して、比較フラグを設定する。具体的には、音声１文ファイルの全体の文字数における、算出した句読点の数の比率が、例えば、５％以下であるとき、又は９０％以上であるとき、つまり、句読点の数が全体の文字数と比較して非常に少ないとき、又は句読点の数が全体の文字数と比較して非常に多いときには、品詞比較を用いる。その他の場合には、１文比較を用いる。
【００３３】
補足説明作成部１１１は、品詞比較を用いると決定する場合には、比較フラグを「１」に設定する。１文比較を用いると決定する場合には、比較フラグを「０」に設定する。
また、音声１文ファイルではなく、資料１文ファイルを用いるとしてもよい。
また、これ以外に、比較フラグは、予め、ＭＦＰ１００の操作者により、「０」及び「１」の何れかに設定されているとしてもよい。また、比較フラグは、ＭＦＰ１００に接続されているＰＣからの指示により、何れかに設定されるとしてもよい。
【００３４】
（１）１文比較の場合
（資料１文ファイルの生成）
補足説明作成部１１１は、資料記憶部１１０から説明用資料ファイル１２３の指定に係るページを読み出し、読み出した説明用資料ファイル１２３に含まれるページを、句読点を区切りとして、分解して、部分センテンスを生成する。つまり、１個のセンテンスを、先頭から句読点まで、又は句読点から句読点までの部分に分解する。こうして生成されたセンテンスの部分を部分センテンスと呼ぶことにする。また、補足説明作成部１１１は、各部分センテンスに対して、通し番号を割り当てる。つまり、１個のセンテンスから、例えば、１０個の部分センテンスが生成された場合には、１０個の部分センテンスに対して、それぞれ、通し番号「１」、「２」、・・・、「１０」を割り当てる。
【００３５】
こうして、補足説明作成部１１１は、説明用資料ファイル１２３に含まれる指定に係るページについて、各センテンスを句読点により分解し、通し番号と部分センテンスとの組を生成し、通し番号と部分センテンスとの全ての組を、資料１文ファイルとして、資料記憶部１１０に書き込む。
このように、資料１文ファイルは、説明用資料ファイル１２３のページ毎に生成される。
【００３６】
ここで、図３に示す説明用資料ファイル３０１及び資料１文ファイル３１１を例として説明する。説明用資料ファイル３０１は、少なくとも文データ３０２を含んでいる。補足説明作成部１１１は、説明用資料ファイル３０１に含まれる文データ３０２について、センテンスを句読点により分解して、部分センテンス３１２、３１３、・・・、３１４を生成し、通し番号「１」、「２」、・・・、「７」と部分センテンス３１２、３１３、・・・、３１４とを組として、資料記憶部１１０に書き込み、資料１文ファイル３１１を生成する。資料１文ファイル３１１は、部分センテンス３１２、３１３、・・・、３１４を含み、それぞれの部分センテンスについて、通し番号を含んでいる。
【００３７】
（音声１文ファイルの生成）
次に、同様にして、補足説明作成部１１１は、補正後音声認識ファイル１２２の指定に係るページに相当する音声データから音声１文ファイルを生成する。図３に一例として示すように、補足説明作成部１１１は、補正後音声認識ファイル３３１の指定に係るページに相当する音声データから、音声１文ファイル３４１を生成し、生成した音声１文ファイル３４１を資料記憶部１１０に書き込む。音声１文ファイル３４１は、部分センテンス３４２、３４３、・・・、３４４を含み、各部分センテンスに対応して、通し番号を含んでいる。
【００３８】
このように、音声１文ファイルは、説明用資料ファイル１２３のページ毎に生成される。
（補足ファイルの生成）
次に、一例として、図３に示すように、補足説明作成部１１１は、資料１文ファイル３１１と音声１文ファイル３４１とを比較し、音声１文ファイル３４１に含まれるが、資料１文ファイル３１１には含まれない部分センテンスを抽出する。
【００３９】
具体的には、補足説明作成部１１１は、音声１文ファイル３４１に含まれる１個の部分センテンスが、資料１文ファイル３１１に含まれる何れかの部分センテンスと一致するか否かを判断する。音声１文ファイル３４１の含まれる１個の部分センテンスと、資料１文ファイル３１１に含まれる１個の部分センテンスとの一致の判断は、音声１文ファイル３４１の含まれる１個の部分センテンスと、資料１文ファイル３１１に含まれる１個の部分センテンスとの一致度が所定の閾値以下であるか否かにより判断する。所定の閾値以下である場合には、一致しないと決定し、所定の閾値より大きい場合には、一致すると決定する。
【００４０】
こうして、補足説明作成部１１１は、音声１文ファイル３４１に含まれる１個の部分センテンスが、資料１文ファイル３１１に含まれる何れかの部分センテンスと一致する場合には、音声１文ファイル３４１に含まれる前記部分センテンスを抽出する。次に、抽出した部分センテンスを、補足説明として、資料記憶部１１０の補足一時ファイル３５１へ書き込む。
【００４１】
このとき、補足説明作成部１１１は、補足一時ファイル３５１へ書き込む補足説明に対応付けて、先頭部分センテンス番号と末尾部分センテンス番号とを、補足一時ファイル３５１へ書き込む。ここで、先頭部分センテンス番号及び末尾部分センテンス番号は、それぞれ、資料１文ファイル３１１に含まれる部分センテンスを示す識別番号である。当該補足説明は、先頭部分センテンス番号により示される部分センテンスと末尾部分センテンス番号により示される部分センテンスとの間に、存在すべきものである。
【００４２】
補足一時ファイル３５１に書き込まれる各データは、先頭部分センテンス番号、区切子「−」、末尾部分センテンス番号、区切子「）」及び補足説明から構成される。
一例として、図３に示す補足一時ファイル３５１に含まれるデータ３５２「１−２）他にも中座して戻ってきた場合等ありますが、」については、先頭部分センテンス番号が「１」であり、末尾部分センテンス番号が「２」であり、補足説明が「他にも中座して戻ってきた場合等ありますが、」である。先頭部分センテンス番号「１」は、図３の資料１文ファイル３１１のデータ３１２を示し、末尾部分センテンス番号「２」は、資料１文ファイル３１１のデータ３１３を示している。つまり、補足説明「他にも中座して戻ってきた場合等ありますが、」が、図３の資料１文ファイル３１１のデータ３１２及びデータ３１３の間に存在すべきことを示している。
【００４３】
このように、補足一時ファイルは、説明用資料ファイル１２３のページ毎に生成される。
次に、補足説明作成部１１１は、補足一時ファイル３５１内の補足説明のうち、「１個以上の名詞を含まない」又は「２個以上の品詞を含まない」補足説明を削除し、これらの補足説明の削除後の補足一時ファイルを、資料記憶部１１０に、補足ファイル１２４として保存する。補足説明作成部１１１は、補足一時ファイル３５１内の補足説明のうち、「１個以上の名詞を含み」かつ「２個以上の品詞を含む」補足説明を削除しない。このように、補足説明作成部１１１により、削除対象となる補足説明は、非常に少ない数の品詞しか含まないものである。
【００４４】
補足ファイル１２４の一例を図３の補足ファイル３６１として示している。補足ファイル３６１は、補足一時ファイル３５１において、データ３５３が削除されたものとなっている。
このように、補足ファイル３６１は、説明用資料ファイル１２３のページ毎に生成される。
【００４５】
（２）品詞比較の場合
（資料１文ファイルの生成）
補足説明作成部１１１は、１文比較の場合と同様に、資料記憶部１１０から説明用資料ファイル１２３に含まれ指定に係るページを読み出し、読み出した説明用資料ファイル１２３に含まれるページを、句読点を区切りとして、分解して、部分センテンスを生成する。
【００４６】
このように、補足説明作成部１１１は、説明用資料ファイル１２３に含まれ、指定に係るページについて、当該ページに含まれる各センテンスを句読点により分解し、通し番号と部分センテンスとの全ての組を、資料記憶部１１０の資料１文ファイルに書き込む。生成した資料１文ファイルの一例として、図４に資料１文ファイル４０１を示す。資料１文ファイル４０１は、図３に示す資料１文ファイル３１１と同一である。
【００４７】
（資料品詞ファイルの生成）
次に、補足説明作成部１１１は、資料記憶部１１０に記憶されている資料１文ファイルに含まれる各部分センテンスについて、当該部分センテンスを品詞単位に分解して、１個又は複数の資料品詞データを生成し、生成した資料品詞データを、当該資料品詞データを示す通し番号及び当該資料品詞データの品詞を示す種類データとともに、資料記憶部１１０の資料品詞ファイルへ書き込む。資料品詞ファイルの一例を図４の資料品詞ファイル４１１として示す。
【００４８】
一例としての資料品詞ファイル４１１は、資料品詞データを示す通し番号と、資料品詞データと、当該資料品詞データの品詞の種類を示す種類データとを含む。なお、資料品詞ファイルは、品詞の種類を示す種類データを含まないとしてもよい。
（音声１文ファイルの生成）
次に、一文比較の場合と同様にして、補足説明作成部１１１は、補正後音声認識ファイル１２２内の指定に係るページに相当する音声データから音声１文ファイルを生成する。音声１文ファイルの一例として、図４に音声１文ファイル４２１を示す。
【００４９】
（音声品詞ファイルの生成）
次に、資料品詞ファイルの生成の場合と同様にして、補足説明作成部１１１は、資料記憶部１１０に記憶されている音声１文ファイルに含まれる各部分センテンスについて、当該部分センテンスを品詞単位に分解して、１個又は複数の音声品詞データを生成し、生成した音声品詞データを、資料記憶部１１０の音声品詞ファイルへ書き込む。音声品詞ファイルの一例を図４の音声品詞ファイル４３１として示す。
【００５０】
一例としての音声品詞ファイル４３１は、音声品詞データを示す通し番号と、音声品詞データと、当該音声品詞データの品詞の種類を示す種類データを含む。なお、音声品詞ファイルは、品詞の種類を示す種類データを含まないとしてもよい。
（補足ファイルの生成）
次に、一例として、図４に示すように、補足説明作成部１１１は、資料品詞ファイル４１１と音声品詞ファイル４３１とを比較し、音声品詞ファイル４３１に含まれるが、資料品詞ファイル４１１には含まれない品詞データを抽出する。具体的には、補足説明作成部１１１は、音声品詞ファイル４３１に含まれる１個の音声品詞データが、資料品詞ファイル４１１に含まれる何れかの資料品詞データと完全に一致するか否かを判断する。
【００５１】
こうして、音声品詞ファイル４３１に含まれるが、資料品詞ファイル４１１には含まれない品詞データが抽出されると、補足説明作成部１１１は、抽出した品詞データを、資料記憶部１１０の補足一時ファイル４４１内に書き込む。このとき、補足説明作成部１１１は、抽出した前記品詞データに対応付けて、先頭部分センテンス番号、末尾部分センテンス番号及び連続情報を補足一時ファイル４４１内に書き込む。
【００５２】
ここで、先頭部分センテンス番号及び末尾部分センテンス番号は、それぞれ、資料１文ファイル４０１に含まれる部分センテンスを示す識別番号である。当該品詞データは、先頭部分センテンス番号により示される部分センテンスと末尾部分センテンス番号により示される部分センテンスとの間に、存在すべきものである。
また、連続情報は、対応する品詞データと、その前後に位置して、補足一時ファイル４４１に書き込まれた品詞データとが、元々の補正後音声認識ファイルにおいて、連続するものであるか否かを示す。つまり、補足一時ファイル４４１の複数のデータのうち、同じ値を有する連続情報に対応する複数のデータについては、これらのデータに含まれる品詞データが、補正後音声認識ファイルにおいて、連続しているものであることを示す。
【００５３】
このように、補足一時ファイル４４１に含まれるデータは、先頭部分センテンス番号、区切子「−」、末尾部分センテンス番号、区切子「−」、連続情報、区切子「）」、及び品詞データから構成されている。ここで、先頭部分センテンス番号及び末尾部分センテンス番号を位置情報と呼ぶこともある。
図４の補足一時ファイル４４１におけるデータ４４２「０−１−１）それでは」について説明すると、データ４４２の先頭部分センテンス番号は、「０」であり、末尾部分センテンス番号は、「１」であるので、末尾部分センテンス番号「１」は、資料１文ファイル４０１の部分センテンス４０２を示し、品詞データ「それでは」は、資料１文ファイル４０１の部分センテンス４０２の直前に位置すべきものであることが分かる。
【００５４】
同様に、データ４４６「１−２−２）他」については、品詞データ「他」が、資料１文ファイル４０１において、データ４０２とデータ４０３の間に位置すべきものであることが分かる。
また、例えば、データ４４２、４４３、・・・、４４４は、それぞれ、同一の連続情報「１」を含むので、データ４４２、４４３、・・・、４４４に含まれる複数の品詞データは、補正後音声認識ファイルにおいて、連続しているものであることが分かる。
【００５５】
また、例えば、データ４４６、４４７、・・・、４４８は、それぞれ、同一の連続情報「２」を含むので、データ４４６、４４７、・・・、４４８に含まれる複数の品詞データは、補正後音声認識ファイルにおいて、連続しているものであることが分かる。
次に、補足説明作成部１１１は、補足一時ファイル４４１内に含まれる複数のデータに対して、同一の位置情報（つまり、先頭部分センテンス番号及び末尾部分センテンス番号）を含み、かつ、同じ連続情報を含む複数のデータを、連結して一つの連結データとし、位置情報とともに、連結データを補足説明として、補足一時ファイル４５１に書き込む。
【００５６】
次に、補足説明作成部１１１は、上記と同様にして、補足一時ファイル４５１内の補足説明のうち、「１個以上の名詞を含まない」又は「２個以上の品詞を含まない」補足説明を削除し、補足説明の削除後の一時補足ファイルを、補足ファイル１２４として、資料記憶部１１０に書き込む。補足ファイル１２４の一例を図４の補足ファイル４６１として示している。
【００５７】
（３）品詞比較の他の一例
ここでは、説明用資料ファイル１２３内の１個のセンテンス中において、説明者の補足説明が存在する場合について説明する。つまり、説明者が説明用資料ファイル１２３内の指定に係るページ内の１個のセンテンスを読み上げている途中に、補足説明をした場合について説明する。
【００５８】
図５に示す音声１文ファイル４７１は、図３に示す説明用資料ファイル３０１内の文データ３０２に相当する部分４７７を含んでおり、部分４７７中のデータ４７２、４７４、４７６は、文データ３０２に相当するが、部分４７７中のデータ４７３、４７５は、文データ３０２には存在していない。
このような場合であっても、補足説明作成部１１１は、上記と同様にして、補足一時ファイル４８１を生成し、さらに、補足ファイル４９１を生成する。
【００５９】
１．４  ＰＣ２００ａ
ＰＣ２００ａは、図６に示すように、制御部２０１、映像処理部２０２、入力部２０３、通信部２０４、記憶部２０５、表示制御部２０６及び音声処理部２１２から構成されている。また、表示制御部２０６には、モニタ２１０が接続され、音声処理部２１２には、マイク２１１及びスピーカ２１３が接続され、映像処理部２０２には、カメラ２０７が接続され、入力部２０３には、キーボード２０８及びマウス２０９が接続されている。
【００６０】
ＰＣ２００ａは、具体的には、マイクロプロセッサ、ＲＯＭ、ＲＡＭ、ハードディスクユニットなどから構成されるコンピュータシステムである。前記ＲＡＭ又は前記ハードディスクユニットには、コンピュータプログラムが記憶されている。前記マイクロプロセッサが、前記コンピュータプログラムに従って動作することにより、ＰＣ２００ａは、その機能を達成する。
【００６１】
ＰＣ２００ｂ及びＰＣ２００ｃは、ＰＣ２００ａと同様の構成を有しているので、これらについての説明を省略する。
映像処理部２０２は、カメラ２０７から受け取った画像信号を、デジタル画像データに変換し、さらに、データ圧縮を施して、例えば、ＭＰＥＧ２の形式の圧縮画像データを生成し、生成した圧縮画像データを、制御部２０１の制御により、通信部２０４を介して、ＭＰＦ１００へ送信する。
【００６２】
音声処理部２１２は、マイク２１１から受け取った音声電気信号を、デジタル音声データに変換し、デジタル音声データを、制御部２０１の制御により、通信部２０４を介して、ＭＰＦ１００へ送信する。また、音声処理部２１２は、制御部２０１から受け取ったデジタル音声データを音声電気信号に変換し、音声電気信号をスピーカ２１３へ出力する。
入力部２０３は、キーボード２０８及びマウス２０９から受け取った入力データを制御部２０１へ出力する。
【００６３】
記憶部２０５は、説明用資料ファイルを記憶している。また、参加者用資料ファイルを記憶している。
通信部２０４は、説明用資料ファイル、圧縮画像データ、デジタル音声データ、及びその他のデータを、インターネット２０を介して、ＭＦＰ１００へ送信する。
表示制御部２０６は、制御部２０１の制御により、図７〜図１０にそれぞれ示す開始画面５０１、記録開始画面５１１、資料指定画面５２１及び記録中画面５３１をモニタ２１０に表示するように制御する。
【００６４】
開始画面５０１は、ＭＦＰ１００において、補足説明を作成するか否かを示すフラグを設定するための画面である。「補足情報を記録しますか？」という問いに対して、利用者が、「はい」を選択すると、補足説明を作成することを示すフラグが設定される。利用者が、「いいえ」を選択すると、補足説明を作成しないことを示すフラグが設定される。
補足説明を作成するか否かを示すフラグは、ＰＣ２００ａからＭＦＰ１００へ送信される。ＭＦＰ１００は、補足説明を作成するか否かを示すフラグが、作成することを示す場合に、補足説明を作成し、作成しないことを示す場合に、補足説明を作成しない。
【００６５】
記録開始画面５１１は、会議を開始することを指示するための画面である。利用者により、「開始」が選択されると、会議が開始される。「キャンセル」が選択されると、会議は、始まらない。
資料指定画面５２１は、作成元資料の指定及び作成先資料の指定のためのエントリから構成される。利用者は、作成元資料の指定のためのエントリにおいて、ＰＣ２００ａに保存されている説明用資料を指定する。また、利用者は、作成先資料の指定のためのエントリにおいて、ＭＦＰ１００のどのボックスに、説明用資料を保存するかを指定する。
【００６６】
記録中画面５３１は、補足資料作成を中断するか、又は終了するかを指定するための画面である。この画面は、会議が開始された後、ＰＣ２００ａにおける説明用資料を示す画面とともに、表示される。利用者により、「中断」が選択されると、補足資料の作成が中断される。「終了」が選択されると、補足資料の作成が終了し、会議も終了する。
また、表示制御部２０６は、制御部２０１の制御により、会議補足情報表示画面をモニタ２１０に表示するように制御する。会議補足情報表示画面の例として、図１１及び図１２にそれぞれ会議補足情報表示画面５４１及び会議補足情報表示画面５５１を示す。
【００６７】
会議補足情報表示画面５４１は、図１１に示すように、補足資料表示部５４２及び進行中資料表示部５４３から構成されている。表示制御部２０６は、進行中資料表示部５４３には、説明者により説明の対象となっている説明用資料ファイルの各ページを表示するように制御する。補足資料表示部５４２は、サムネイル表示部５４４と資料表示部５４５とから構成される。サムネイル表示部５４４には、参加者用資料ファイルの各ページの縮小画像５４６、５４７、５４８が表示されている。資料表示部５４５には、操作者がサムネイル表示部５４４に表示されている縮小画像５４６、５４７、５４８を指定する操作により、指定された縮小画像に対応する参加者用資料ファイルの各ページが表示される。縮小画像５４６、５４７、５４８のうち、アイコン５４９が付された縮小画像５４８には、対応するページに補足説明が付されていることを示している。
【００６８】
操作者がアイコン５４９が付された縮小画像５４８を指定する操作をすると、表示制御部２０６は、図１２に示すように、補足資料表示部５４２の資料表示部５４５に、指定された縮小画像に対応するページを表示するように制御する。補足資料表示部５４２の資料表示部５４５に表示されたページには、補足説明を表示する吹き出し表示５５２及び５５３が付されている。吹き出し表示５５２及び５５３は、それぞれ、補足資料表示部５４２の資料表示部５４５に表示されたページにおいて、補足説明がされた箇所を指し示す。
【００６９】
制御部２０１は、映像処理部２０２、入力部２０３、通信部２０４、記憶部２０５、表示制御部２０６及び音声処理部２１２を制御する。
２．１  ＴＶ会議システム１０の動作
ＴＶ会議システム１０の動作について説明する。
（１）ＴＶ会議システム１０の概要の動作
ここでは、ＴＶ会議システム１０の概要の動作について、図１３に示すフローチャートを用いて説明する。
【００７０】
説明用資料ファイルの説明者が操作するＰＣ２００ａは、説明者の操作により、説明用資料ファイルを記憶部２０５から読み出し、読み出した説明用資料ファイルを、通信部２０４及びインターネット２０を介して、ＭＦＰ１００へ送信する（ステップＳ１０１）。
次に、ＭＦＰ１００は、ＰＣ２００ａから説明用資料ファイルを受信し（ステップＳ１０１）、受信した説明用資料ファイルを資料記憶部１１０へ書き込む（ステップＳ１０２）。次に、ＭＦＰ１００は、資料記憶部１１０から説明用資料ファイルを読み出し、読み出した説明用資料ファイルを、インターネット２０を介して、ＰＣ２００ｂへ送信し（ステップＳ１０３）、ＰＣ２００ｂは、受信した説明用資料ファイルを内部に保存する（ステップＳ１０４）。また、ＭＦＰ１００は、資料記憶部１１０から説明用資料ファイルを読み出し、読み出した説明用資料ファイルを、インターネット２０を介して、ＰＣ２００ｃへ送信し（ステップＳ１０５）、ＰＣ２００ｃは、受信した説明用資料ファイルを内部に保存する（ステップＳ１０６）。
【００７１】
ＰＣ２００ａは、説明者の操作により、会議開始を示す情報をＭＦＰ１００へ送信し（ステップＳ１０７）、ＭＦＰ１００は、会議開始を示す情報をＰＣ２００ｂへ送信し（ステップＳ１０８）、会議開始を示す情報をＰＣ２００ｃへ送信する（ステップＳ１０９）。
ＰＣ２００ａ、２００ｂ、２００ｃは、ＭＦＰ１００を介して、映像データ及び音声データを相互に配信する（ステップＳ１１０）。これと並行して、ＭＦＰ１００は、音声認識処理を行い、また、補足説明の処理及び配信を行う（ステップＳ１１１）。
【００７２】
次に、ＰＣ２００ａは、説明者の操作により、会議終了を示す情報をＭＦＰ１００へ送信し（ステップＳ１１２）、ＭＦＰ１００は、会議終了を示す情報をＰＣ２００ｂへ送信し（ステップＳ１１３）、会議終了を示す情報をＰＣ２００ｃへ送信する（ステップＳ１１４）。
これでＴＶ会議が終了する。
【００７３】
（２）ＴＶ会議システム１０におけるページ表示の動作
ここでは、主に、ＴＶ会議システム１０におけるページ表示の動作について、図１４に示すフローチャートを用いて説明する。
ＰＣ２００ａの入力部２０３は、説明者から説明用資料ファイルのページの指定を受け付け（ステップＳ１３１）、制御部２０１は、指定を受け付けたページを、通信部２０４を介して、ＭＦＰ１００へ送信する（ステップＳ１３２）。次に、制御部２０１は、指定を受け付けたページを、記憶部２０５に記憶されている説明用資料ファイルから読み出し（ステップＳ１３３）、読み出したページを、モニタ２１０に表示するように、表示制御部２０６を制御する（ステップＳ１３４）。次に、制御部２０１は、次のページの指定を待ち受けるように、ステップＳ１３１へ制御を移す。
【００７４】
これらと並行して、ＰＣ２００ａのマイク２１１は、説明者の音声を電気信号に変換し、音声処理部２１２は、電気信号をデジタルの音声データに変換し、音声データを通信部２０４を介してＭＦＰ１００へ送信する（ステップＳ１３５）。
ＭＦＰ１００の通信部１０７は、音声データを受信し、受信した音声データを音声記憶部１０９へ書き込む（ステップＳ１３６）。また、通信部１０７は、ＰＣ２００ａからページの指定を受信し（ステップＳ１３２）、システムコントローラ１０２は、ページの指定を受信すると、音声認識部１０３に対して音声認識をするように制御し（ステップＳ１４２）、音声認識部１０３は、音声認識を行う（ステップＳ１４６）。
【００７５】
また、システムコントローラ１０２は、ページの指定を受信すると、補足説明作成部１１１に対して補足説明の処理をするように制御し（ステップＳ１４１）、補足説明作成部１１１は、補足説明の処理をする（ステップＳ１４７）。
また、システムコントローラ１０２は、ページの指定を受信すると、ＰＣ２００ｂに対して、ページの指定を送信し（ステップＳ１４４）、ＰＣ２００ｂは、内部に記憶している説明用資料ファイルから指定されたページを読み出し、読み出したページを表示する（ステップＳ１４８）。ここで、表示したページの書き換えはできない。また、システムコントローラ１０２は、ページの指定を受信すると、ＰＣ２００ｃに対して、ページの指定を送信し（ステップＳ１４５）、ＰＣ２００ｃは、内部に記憶している説明用資料ファイルから指定されたページを読み出し、読み出したページを表示する（ステップＳ１４９）。ここで、表示したページの書き換えはできない。
【００７６】
ＭＦＰ１００のシステムコントローラ１０２は、補足説明作成部１１１による参加者用資料ファイルのページ単位の作成が終了すると、参加者用資料ファイルのページを各ＰＣへ送信するように、制御し、通信部１０７を介して、参加者用資料ファイルのページをＰＣ２００ｂへ送信し（ステップＳ１５１）、参加者用資料ファイルのページをＰＣ２００ｃへ送信する（ステップＳ１５２）。
【００７７】
ＰＣ２００ｂは、参加者用資料ファイルのページを受信し（ステップＳ１５１）、受信した参加者用資料ファイルのページを内部に記憶する（ステップＳ１５３）。ＰＣ２００ｂの操作者から参加者用資料ファイルのページの指定を受け付けると（ステップＳ１５４）、参加者用資料ファイルから指定されたページを読み出し（ステップＳ１５５）、読み出したページを表示する（ステップＳ１５６）。
【００７８】
ＰＣ２００ｃは、参加者用資料ファイルのページを受信し（ステップＳ１５２）、受信した参加者用資料ファイルのページを内部に記憶する（ステップＳ１５７）。ＰＣ２００ｃの操作者から参加者用資料ファイルのページの指定を受け付けると（ステップＳ１５８）、参加者用資料ファイルから指定されたページを読み出し（ステップＳ１５９）、読み出したページを表示する（ステップＳ１６０）。
【００７９】
（３）ＭＦＰ１００による音声認識及び補足説明作成の動作
ここでは、ＭＦＰ１００による音声認識及び補足説明作成の動作について、図１５に示すフローチャートを用いて説明する。
音声認識部１０３は、音声認識処理を実行する（ステップＳ１８１）。
次に、通信部１０７は、ページの指定の受信を待ち（ステップＳ１８２）、ページの指定を受信すると（ステップＳ１８２）、音声認識データ補正部１０４は、音声認識ファイルの補正を行い（ステップＳ１８４）、補足説明作成部１１１は、補足ファイルの作成処理を行い（ステップＳ１８５）、参加者用資料作成部１０６は、参加者用資料ファイルの各ページの作成を行う（ステップＳ１８６）。次に、システムコントローラ１０２は、終了判定を行い（ステップＳ１８７）、継続すべきときは、ステップＳ１８１へ戻って処理を繰り返す。終了すべきときは、処理を終了する。
【００８０】
（４）ＭＦＰ１００による音声認識及び補足説明作成の開始タイミング
ここでは、ＭＦＰ１００による音声認識の開始のタイミング及び補足説明作成の開始のタイミングについて、図１６を用いて説明する。
ＭＦＰ１００の通信部１０７は、ＰＣ２００ａからページの指定を受信する。また、ＰＣ２００ａから音声データを受信し、受信した音声データを、順次、音声記憶部１０９へ書き込む。
【００８１】
システムコントローラ１０２は、音声記憶部１０９に書き込まれる音声データを、ＰＣ２００ａからページの指定を受信した時点により、区切る。例えば、図１６に示すように、ＰＣ２００ａからページ「５」の指定を受信すると、その時点により、音声データを区切り、その時点以前の音声データを、ページ「４」の音声データ４とし、その時点以降の音声データを、ページ「５」の音声データ５とする。システムコントローラ１０２は、このような音声データを区切る区切子を音声記憶部１０９に書き込む。音声データの区切りは、具体的には、音声データを区切る時点における音声データの位置を示すアドレスと、ぺージ番号とを対応付けて音声記憶部１０９に書き込むことにより、行う。このアドレスとぺージ番号のペアが、上記の区切子に相当する。
【００８２】
システムコントローラ１０２は、ＰＣ２００ａから例えばページ「５」の指定を受信すると（ステップＳ２０３）、音声認識部１０３に対して、音声記憶部１０９に記憶されている音声データ５について、音声認識処理を行うように指示し、音声認識部１０３は、音声記憶部１０９に記憶されている音声データ５について、音声認識処理を行う。
今、音声データ５の途中において、音声データを受信しているとすると（ステップＳ２０１）、図１６に示すように、受信している音声データは、音声データ５の途中である領域６０７に書き込まれる。
【００８３】
さらに時間が経過して、領域６０６について全て音声データが書き込まれ、ＰＣ２００ａからページ「６」の指定を受信すると（ステップＳ２０５）、音声データ５の最後尾が確定し、システムコントローラ１０２は、補足説明作成部１１１に対して、音声認識ファイルに記憶されているデータであって、音声データ５に相当する部分について、補足説明処理（ステップＳ１８３）を行うように、制御し、補足説明作成部１１１は、音声認識ファイルに記憶されているデータであって、音声データ５に相当する部分について、補足説明処理として、音声認識データファイル補正処理（ステップＳ１８４）、補足ファイル作成処理（ステップＳ１８５）及び参加者用資料作成処理（ステップＳ１８６）を行う。
【００８４】
このように、ＭＦＰ１００は、説明用資料ファイルの５ぺージが表示されている時間帯中は、説明者が５ページについて口頭により解説をしているものとみなし、この時間帯中に受信する音声データを５ページについての音声データとみなし、この時間帯中に記録された音声データに対して、音声認識部１０３により音声認識処理を行う。また、５ページの表示が終了し、６ページの指定を受け取った時点において、前記音声認識処理により文字化された音声認識ファイル中の文字データ（５ページに相当する部分）について、補足説明作成部１１１により補足説明作成を行う。
【００８５】
次に、ＭＦＰ１００は、６ページの指定を受け取ると、６ぺージについての説明の時間帯中に記録された音声データに対して、音声認識部１０３により６ぺージとしての音声認識処理を行う。次に、６ページの表示が終了し、７ページの指定を受け取った時点において、前記音声認識処理により文字化された音声認識ファイル中の文字データ（６ページに相当する部分）について、補足説明作成部１１１により補足説明作成を行う。
【００８６】
このように、ＭＦＰ１００は、５ページについての補足説明作成部１１１による補足説明作成と、６ページについての音声認識部１０３による音声認識処理とを、同一時間帯において、並行して行う。
（５）ＭＦＰ１００の音声認識データ補正部１０４による音声認識ファイルの補正の動作
ＭＦＰ１００の音声認識データ補正部１０４による音声認識ファイルの補正の動作について、図１７に示すフローチャートを用いて説明する。
【００８７】
音声認識データ補正部１０４は、認識ファイル記憶部１０８から、音声認識ファイル１２１を構成する部分データの読み出しを試みる（ステップＳ２２１）。部分データの読み出しが全て終了しているときは（ステップＳ２２２でＹＥＳ）、ステップＳ２２５へ制御を移す。
部分データの読み出しが全て終了していないときは（ステップＳ２２２でＮＯ）、読み出した部分データが言いよどみ言葉であるか否かを判断し（ステップＳ２２３）、言いよどみ言葉であると判断される場合には、読み出した部分データを音声認識ファイルから削除し（ステップＳ２２４）、次に、ステップＳ２２１へ制御を移す。言いよどみ言葉でないと判断される場合には、次に、ステップＳ２２１へ制御を移す。
【００８８】
音声認識データ補正部１０４は、言いよどみ言葉が削除された音声認識ファイルを、補正後音声認識ファイルとし、補正後音声認識ファイルを認識ファイル記憶部１０８へ書き込む（ステップＳ２２５）。
（６）ＭＦＰ１００の補足説明作成部１１１による補足ファイルの作成の動作
ＭＦＰ１００の補足説明作成部１１１による補足ファイルの作成の動作について、図１８に示すフローチャートを用いて説明する。
【００８９】
補足説明作成部１１１は、資料１文ファイルを作成し（ステップＳ２４１）、音声１文ファイルを作成する（ステップＳ２４２）。
次に、上記のように比較フラグにより、比較方法を判定し（ステップＳ２４３）、１文比較である場合には、１文比較処理を行う（ステップＳ２４５）。品詞比較である場合には、品詞比較処理を行う（ステップＳ２４４）。
【００９０】
次に、補足説明作成部１１１は、補足一時ファイルの補足説明の判定を行い（ステップＳ２４６）、補足説明が１個以上の名詞を含まない、又は、補足説明が２個以上の品詞を含まないとき（ステップＳ２４６）、補足説明を削除する（ステップＳ２４７）。補足説明が１個以上の名詞を含み、かつ、２個以上の品詞を含むとき（ステップＳ２４６）、補足説明の削除は行わない。
【００９１】
次に、終了判定を行い（ステップＳ２４８）、全ての補足説明についての判定が終了していなければ（ステップＳ２４８）、ステップＳ２４６へ戻って処理を繰り返す。
全ての補足説明についての判定が終了していれば（ステップＳ２４８）、補足一時ファイルから補足説明が削除され、残りの補足説明を補足ファイルとして資料記憶部１１０に保存する（ステップＳ２４９）。
【００９２】
（６）ＭＦＰ１００の補足説明作成部１１１による品詞比較処理の動作
ＭＦＰ１００の補足説明作成部１１１による品詞比較処理の動作について、図１９〜図２０に示すフローチャートを用いて説明する。
補足説明作成部１１１は、以下に示すようにして、資料品詞ファイル及び音声品詞ファイルを生成し、音声品詞ファイル上の１の音声品詞データが、資料品詞ファイルのいずれかの資料品詞データと一致するか否かを確認し、一致しない場合に、当該音声品詞データを補足一時データとして保存する。
【００９３】
補足説明作成部１１１は、資料品詞ファイルを生成し（ステップＳ２６１）、音声品詞ファイルを生成し（ステップＳ２６２）、音声品詞ファイルの読出しポイントを初期化する（ステップＳ２６３）。
次に、補足説明作成部１１１は、音声品詞ファイル上の読出しポイントにより指定された位置から、音声品詞データの読出しを試みる（ステップＳ２６４）。
【００９４】
読出しポイントにより指定された位置に音声品詞データが存在せず、音声品詞ファイルの読出しが終了していれば（ステップＳ２６５でＹＥＳ）、補足説明作成部１１１は、ステップＳ２８１へ制御を移す。
音声品詞ファイルの読出しが終了していなければ（ステップＳ２６５でＮＯ）、補足説明作成部１１１は、音声品詞ファイルの読出しポイントに「１」を加算し（ステップＳ２６６）、資料品詞ファイルの読出しポイントを初期化する（ステップＳ２６７）。
【００９５】
次に、補足説明作成部１１１は、資料品詞ファイル上の読出しポイントにより指定された位置から、資料品詞データの読出しを試みる（ステップＳ２６８）。
読出しポイントにより指定された位置に資料品詞データが存在せず、資料品詞ファイルの読出しが終了していれば（ステップＳ２６９でＹＥＳ）、補足説明作成部１１１は、音声品詞データを補足一時データとして補足一時ファイルに保存し（ステップＳ２７０）、次に、ステップＳ２６４へ制御を移す。
【００９６】
資料品詞ファイルの読出しが終了していなければ（ステップＳ２６９でＮＯ）、補足説明作成部１１１は、資料品詞ファイルの読出しポイントに「１」を加算し（ステップＳ２７１）、読み出した音声品詞データと読み出した資料品詞データとを比較し（ステップＳ２７２）、比較結果が不一致を示す場合には（ステップＳ２７３）、ステップＳ２６８へ戻って処理を繰り返す。比較結果が一致を示す場合には（ステップＳ２７３）、ステップＳ２６４へ戻って処理を繰り返す。
【００９７】
次に、補足説明作成部１１１は、以下に示すようにして、補足一時ファイルに保存されている複数の補足一時データを一つの補足説明にまとめる。
補足説明作成部１１１は、作業用データを初期化し（ステップＳ２８１）、データセットを初期化する（ステップＳ２８２）。
次に、補足説明作成部１１１は、補足一時ファイルから補足一時データの読み出しを試み（ステップＳ２８３）、読み出しが終了していれば（ステップＳ２８４でＹＥＳ）、データセットに補足一時データが含まれていれば、データセットを補足説明として補足ファイルへ書き込み（ステップＳ２８５）、処理を終了する。
【００９８】
読み出しが終了していなければ（ステップＳ２８４でＮＯ）、補足説明作成部１１１は、補足一時データをデータセットへ追加する（ステップＳ２８６）。
次に、補足説明作成部１１１は、補足一時データに句点が含まれているか否かを判断し（ステップＳ２８７）、句点が含まれている場合（ステップＳ２８７でＹＥＳ）、データセットを補足説明として補足ファイルへ書き込み（ステップＳ２８９）、次に、データセットを初期し（ステップＳ２９０）、補足一時データを作業データに設定し（ステップＳ２９１）、次に、ステップＳ２８３へ戻って処理を繰り返す。
【００９９】
句点が含まれていない場合（ステップＳ２８７でＮＯ）、補足説明作成部１１１は、補足一時データと作業用データとが連続しているか否かを判断し（ステップＳ２８８）、連続していないと判断する場合（ステップＳ２８８でＮＯ）、ステップＳ２８９へ制御を移す。連続していると判断する場合（ステップＳ２８８でＹＥＳ）、ステップＳ２９１へ制御を移す。
【０１００】
（７）ＭＦＰ１００の補足説明作成部１１１による１文比較処理の動作
ＭＦＰ１００の補足説明作成部１１１による１文比較処理の動作について、図２１に示すフローチャートを用いて説明する。
補足説明作成部１１１は、以下に示すようにして、音声１文ファイル上の１の音声１文データが、資料１文ファイルのいずれかの資料１文データと一致するか否かを確認し、一致しない場合に、当該音声１文データを補足一時データとして保存する。
【０１０１】
補足説明作成部１１１は、音声１文ファイルの読出しポイントを初期化する（ステップＳ３１１）。
次に、補足説明作成部１１１は、音声１文ファイル上の読出しポイントにより指定された位置から、音声１文データの読出しを試みる（ステップＳ３１２）。
読出しポイントにより指定された位置に音声１文データが存在せず、音声１文ファイルの読出しが終了していれば（ステップＳ３１３でＹＥＳ）、補足説明作成部１１１は、当該処理を終了する。
【０１０２】
音声１文ファイルの読出しが終了していなければ（ステップＳ３１３でＮＯ）、補足説明作成部１１１は、音声１文ファイルの読出しポイントに「１」を加算し（ステップＳ３１４）、資料１文ファイルの読出しポイントを初期化する（ステップＳ３１５）。
次に、補足説明作成部１１１は、資料１文ファイル上の読出しポイントにより指定された位置から、資料１文データの読出しを試みる（ステップＳ３１６）。
【０１０３】
読出しポイントにより指定された位置に資料１文データが存在せず、資料１文ファイルの読出しが終了していれば（ステップＳ３１７でＹＥＳ）、補足説明作成部１１１は、音声１文データを補足一時データとして補足一時ファイルに保存し（ステップＳ３１８）、次に、ステップＳ３１２へ制御を移す。
資料１文ファイルの読出しが終了していなければ（ステップＳ３１７でＮＯ）、補足説明作成部１１１は、資料１文ファイルの読出しポイントに「１」を加算し（ステップＳ３１９）、読み出した音声１文データと読み出した資料１文データとを比較し（ステップＳ３２０）、比較結果が不一致を示す場合には（ステップＳ３２１）、ステップＳ３１６へ戻って処理を繰り返す。比較結果が一致を示す場合には（ステップＳ３２１）、ステップＳ３１２へ戻って処理を繰り返す。
【０１０４】
（音声１文データと資料１文データとの比較の方法の一例）
補足説明作成部１１１は、上記のステップＳ３２０における音声１文データと資料１文データとの比較を、例えば、次のようにして行う。
補足説明作成部１１１は、音声１文データを、文字毎に分解する。次に、音声１文データ内において、同一の文字が発生している頻度をカウントする。こうして、音声１文データに含まれる各種類の文字について、その発生の頻度が算出される。補足説明作成部１１１は、資料１文データについても、同様にして、資料１文データに含まれる各種類の文字について、その発生の頻度を算出する。
【０１０５】
次に、補足説明作成部１１１は、音声１文データに含まれる１の文字について、音声１文データにおける頻度と、資料１文データにおける頻度との差分を算出し、算出した差分が所定の閾値以下であるか否かを判断する。補足説明作成部１１１は、音声１文データに含まれる全ての文字について、上記の判断を行う。
次に、補足説明作成部１１１は、音声１文データに含まれる全ての文字についての全ての前記判断において、所定閾値以下である場合に、補足説明作成部１１１は、音声１文データと資料１文データとが一致すると決定する。そうでない場合に、補足説明作成部１１１は、音声１文データと資料１文データとが一致しないと決定する。
【０１０６】
（８）ＭＦＰ１００の参加者用資料作成部１０６による参加者用資料作成の動作
ＭＦＰ１００の参加者用資料作成部１０６による参加者用資料作成の動作について、図２２に示すフローチャートを用いて説明する。
参加者用資料作成部１０６は、資料記憶部１１０から説明者用資料ファイルに含まれ指定に係るページを読み出し（ステップＳ４０１）、資料１文ファイルを読み出し（ステップＳ４０２）、補足ファイルを読み出し（ステップＳ４０３）、読み出した説明者用資料ファイルの各ページについて、縮小画像を生成する（ステップＳ４０４）。
【０１０７】
次に、参加者用資料作成部１０６は、指定されたページに係る補足ファイルが存在するか否かを判断し（ステップＳ４０５）、補足ファイルが存在しない場合には（ステップＳ４０５）、ステップＳ４０９へ制御を移す。
補足ファイルが存在する場合には（ステップＳ４０５）、補足ファイル内の補足説明の挿入処理を行い（ステップＳ４０６）、補足ファイル内の全ての補足説明について、処理が終了したか否かを判断し、終了していないと判断する場合（ステップＳ４０７）、ステップＳ４０６へ制御を移す。終了したと判断する場合（ステップＳ４０７）、補足説明の挿入処理が行われたページの縮小画像に対して、補足があることを示すアイコンを付す（ステップＳ４０８）。
【０１０８】
次に、元のページ又は補足説明の挿入処理がされたページ及び縮小画像を、資料記憶部１１０の参加者用資料ファイルへ書き込み（ステップＳ４０９）、処理を終了する。
（９）ＭＦＰ１００の参加者用資料作成部１０６による補足説明の挿入処理の動作
ＭＦＰ１００の参加者用資料作成部１０６による補足説明の挿入処理の動作について、図２３に示すフローチャートを用いて説明する。
【０１０９】
参加者用資料作成部１０６は、補足ファイルから補足説明及びその挿入箇所を読み出し（ステップＳ４２１）、説明者用資料ファイルの指定に係るページ上の挿入箇所（座標）を特定し（ステップＳ４２２）、補足説明を含む吹き出しを生成して、吹き出しが挿入箇所を指し示すように、挿入箇所に付加する（ステップＳ４２３）。
２．まとめ
以上説明したように、本実施の形態においては、途中参加者や退席者が、発言の内容を容易に知ることができるＴＶ会議システム１０を提供する。ＴＶ会議システム１０は、ＭＦＰ１００、ＰＣ２００ａ、２００ｂ、２００ｃを含む。
【０１１０】
ＭＦＰ１００の資料記憶部１１０は、対話相手に提示する資料情報を記憶し、認識ファイル記憶部１０８は、前記資料情報に基づく発言内容がテキスト化されたテキスト化情報を記憶し、補足説明作成部１１１は、テキスト化情報の１の構成要素が資料情報の構成要素のいずれかに相当するか否かを判断し、相当しないと判断される場合に、テキスト化情報の前記構成要素を補足説明として含む参加者用資料を生成し、送信部１０７は、参加者用資料を送信する。各ＰＣは、参加者用資料を表示する。
【０１１１】
本発明の一の実施態様は、ネットワークで結ばれた遠隔地の相手とのコミュニケーションを支援し、提示資料に基づく発言の視聴及び理解を支援するコミュニケーション支援装置であって、相手に提示する資料情報を記憶している第１記憶手段と、前記資料情報に基づく発言内容がテキスト化されたテキスト化情報を記憶している第２記憶手段と、第１記憶手段に記憶されている資料情報の構成要素と第２記憶手段に記憶されているテキスト化情報の構成要素とを比較する比較手段と、資料情報の構成要素とテキスト化情報の構成要素との一致率が、所定の閾値以下である場合に、資料情報内におけるテキスト化情報の前記構成要素の位置情報とともに、テキスト化情報の構成要素を補足説明として、出力する出力手段とを備える。
【０１１２】
また、本発明の他の実施態様は、資料情報に基づく発言内容から資料情報に存在しない補足説明を抽出する会議支援装置であって、会議において公表される資料情報を記憶している第１記憶手段と、前記資料情報に基づく発言内容がテキスト化されたテキスト化情報を記憶している第２記憶手段と、第３記憶手段と、第１記憶手段に記憶されている資料情報の構成要素と第２記憶手段に記憶されているテキスト化情報の構成要素とを比較する比較手段と、資料情報の構成要素とテキスト化情報の構成要素との一致率が、所定の閾値以下である場合に、資料情報内におけるテキスト化情報の前記構成要素の位置情報とともに、テキスト化情報の構成要素を補足説明として、前記第３記憶手段に書き込む書き込み手段とを備える。
【０１１３】
３．その他の変形例
なお、本発明を上記の実施の形態に基づいて説明してきたが、本発明は、上記の実施の形態に限定されないのはもちろんである。以下のような場合も本発明に含まれる。
（１）補足説明を含む吹き出しは、図１２に示すように、元の資料部分に重ならないように、表示するしているが、これには限定されない。
【０１１４】
補足説明を含む吹き出しは、図には示していないが、元の資料部分に重なるように表示し、このとき、吹き出しに含まれる補足説明は、半透明で表示されるとしてもよい。
（２）本発明は、上記に示す方法であるとしてもよい。また、これらの方法をコンピュータにより実現するコンピュータプログラムであるとしてもよいし、前記コンピュータプログラムからなるデジタル信号であるとしてもよい。ここで、コンピュータプログラムは、所定の機能を達成するために、コンピュータに対する指令を示す命令コードが複数個組み合わされて構成されたものである。
【０１１５】
また、本発明は、前記コンピュータプログラム又は前記デジタル信号をコンピュータ読み取り可能な記録媒体、例えば、フレキシブルディスク、ハードディスク、ＣＤ―ＲＯＭ、ＭＯ、ＤＶＤ、ＤＶＤ−ＲＯＭ、ＤＶＤ−ＲＡＭ、ＢＤ（Ｂｌｕ−ｒａｙ  Ｄｉｓｃ）、半導体メモリなど、に記録したものとしてもよい。また、これらの記録媒体に記録されている前記コンピュータプログラム又は前記デジタル信号であるとしてもよい。
【０１１６】
また、本発明は、前記コンピュータプログラム又は前記デジタル信号を、電気通信回線、無線又は有線通信回線、インターネットを代表とするネットワーク、データ放送等を経由して伝送するものとしてもよい。
また、本発明は、マイクロプロセッサとメモリとを備えたコンピュータシステムであって、前記メモリは、上記コンピュータプログラムを記憶しており、前記マイクロプロセッサは、前記コンピュータプログラムに従って動作するとしてもよい。
【０１１７】
また、前記プログラム又は前記デジタル信号を前記記録媒体に記録して移送することにより、又は前記プログラム又は前記デジタル信号を前記ネットワーク等を経由して移送することにより、独立した他のコンピュータシステムにより実施するとしてもよい。
（３）上記実施の形態及び上記変形例をそれぞれ組み合わせるとしてもよい。
【産業上の利用可能性】
【０１１８】
本発明を構成する各装置は、プレゼンテーションの発表者が資料に基づいて発表するあらゆる産業において、経営的に、また継続的及び反復的に使用することができる。プレゼンテーションにおいて、資料に基づいて発言される場合に、説明者が資料に記載されていない内容について発言したような場合であっても、途中参加者や退席者が、その発言の内容を容易に知ることができ、有用である。
【符号の説明】
【０１１９】
１０    ＴＶ会議システム
２０    インターネット
１００    ＭＦＰ
１０２    システムコントローラ
１０３    音声認識部
１０４    音声認識データ補正部
１０５    形態素解析部
１０６    参加者用資料作成部
１０７    通信部
１０８    認識ファイル記憶部
１０９    音声記憶部
１１０    資料記憶部
１１１    補足説明作成部
１２０    制御部
２００ａ  ＰＣ
２００ｂ  ＰＣ
２００ｃ  ＰＣ
２０１    制御部
２０２    映像処理部
２０３    入力部
２０４    通信部
２０５    記憶部
２０６    表示制御部
２０７    カメラ
２０８    キーボード
２０９    マウス
２１０    モニタ
２１１    マイク
２１２    音声処理部
２１３    スピーカ
【図１】
2010219866.tif 000003
【図２】
2010219866.tif 000004
【図３】
2010219866.tif 000005
【図４】
2010219866.tif 000006
【図５】
2010219866.tif 000007
【図６】
2010219866.tif 000008
【図７】
2010219866.tif 000009
【図８】
2010219866.tif 000010
【図９】
2010219866.tif 000011
【図１０】
2010219866.tif 000012
【図１１】
2010219866.tif 000013
【図１２】
2010219866.tif 000014
【図１３】
2010219866.tif 000015
【図１４】
2010219866.tif 000016
【図１５】
2010219866.tif 000017
【図１６】
2010219866.tif 000018
【図１７】
2010219866.tif 000019
【図１８】
2010219866.tif 000020
【図１９】
2010219866.tif 000021
【図２０】
2010219866.tif 000022
【図２１】
2010219866.tif 000023
【図２２】
2010219866.tif 000024
【図２３】
2010219866.tif 000025