(57)【要約】【課題】  聴覚障害を有する利用者にとっても、会議への参加をスムーズに行うことのできる電子会議支援装置を提供する。【解決手段】  会議の開始指示を受け入れる手段と、受け入れた会議開始の指示に応じて、他の参加者の電子会議支援装置へ電子会議の開始を通知し、他の電子会議支援装置から受信された電子会議の開始通知を利用者に提示する電子会議支援装置である。【選択図】        図１
2007058681.tif 000002
【特許請求の範囲】
【請求項１】
会議の開始指示を受け入れる手段と、
前記受け入れた会議開始の指示に応じて、他の参加者の電子会議支援装置へ電子会議の開始を通知する手段と、
他の電子会議支援装置から受信された電子会議の開始通知を利用者に提示する手段と、
を含むことを特徴とする電子会議支援装置。
【請求項２】
発言に係る情報を受け入れる手段と、
発言に係る情報を受け入れている間は、他の参加者の電子会議支援装置へ発言中である旨を通知する手段と、
他の電子会議支援装置から発言中である旨が通知されたときに、他者が発言中である旨の情報を利用者に提示する手段と、
を含むことを特徴とする電子会議支援装置。
【請求項３】
発言を希望する情報を受け入れる手段と、
発言を希望する情報を受け入れて、他の参加者の電子会議支援装置へ発言を希望する旨を通知する手段と、
他の電子会議支援装置から発言を希望する旨が通知されたときに、他者が発言中である旨の情報を利用者に提示する手段と、
を含むことを特徴とする電子会議支援装置。
【請求項４】
利用者の発話した音声を受け入れるマイクと、
利用者を特定する情報を取得する手段と、
前記マイクで受け入れた音声に基づく音声認識処理を行い、当該音声認識結果と、前記取得した利用者を特定する情報とを他の参加者の電子会議支援装置へ通知する手段と、
他の電子会議支援装置から通知された音声認識結果と利用者を特定する情報とを利用者に提示する手段と、
を含むことを特徴とする電子会議支援装置。
【請求項５】
コンピュータに、
会議の開始指示を受け入れ、前記受け入れた会議開始の指示に応じて、他の参加者側のコンピュータへ電子会議の開始を通知する工程と、
他の参加者のコンピュータから受信された電子会議の開始通知を利用者に提示する工程と、
を実行させることを特徴とする電子会議支援方法。
【請求項６】
コンピュータに、
会議の開始指示を受け入れ、前記受け入れた会議開始の指示に応じて、他の参加者側のコンピュータへ電子会議の開始を通知する手順と、
他の参加者のコンピュータから受信された電子会議の開始通知を利用者に提示する手順と、
を実行させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ネットワークを介してデータを送受信して行われる電子会議を支援する装置に係り、特に聴覚障害者の利用における改良に関する。
【背景技術】
【０００２】
近年の情報技術の発展に伴い、実際に会合を持つことなく、ネットワークを介して映像や音声の信号を送受して個々の参加者のコンピュータ上で当該映像や音声を再生する、電子会議システムが普及してきている。ここで例えば複数の利用者が一斉に電子会議を行う場合、各利用者からの音声がミキシングされて再生される。
【０００３】
なお、音声認識装置を用いて、受信した音声情報に基づく文字情報を生成して表示し、併せて話者からのジェスチャーなどの非言語情報を提示できるようにしたシステムが特許文献１に開示されている。
【特許文献１】特開２００２−２４４８４１号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、上記従来の電子会議システム等では、聴覚障害者が利用する場合に、次のような課題が指摘されていた。
【０００５】
まず、個々の会議参加者がモニタのどの部分を見ているかまでは分らないのが一般的であるので、通常の会議であれば、誰かが発話中であるかが、周囲の参加者の動向から感得できるものの、電子会議においては、例えば発話したくとも、誰かが発話中であるか否かが分かりにくい。この事情は、特に音声のみの電子会議システムにおいては顕著となる。また、誰かが発話を開始していて、会議が開始されているか否かも分かりにくい。
【０００６】
本発明は上記実情に鑑みて為されたもので、聴覚障害を有する利用者にとっても、会議への参加をスムーズに行うことのできる電子会議支援装置を提供することを、その目的の一つとする。
【課題を解決するための手段】
【０００７】
上記従来例の問題点を解決するための本発明は、電子会議支援装置であって、会議の開始指示を受け入れる手段と、前記受け入れた会議開始の指示に応じて、他の参加者の電子会議支援装置へ電子会議の開始を通知する手段と、他の電子会議支援装置から受信された電子会議の開始通知を利用者に提示する手段と、を含むことを特徴としている。
【０００８】
また、上記従来例の問題点を解決するための本発明は、電子会議支援装置であって、発言に係る情報を受け入れる手段と、発言に係る情報を受け入れている間は、他の参加者の電子会議支援装置へ発言中である旨を通知する手段と、他の電子会議支援装置から発言中である旨が通知されたときに、他者が発言中である旨の情報を利用者に提示する手段と、を含むことを特徴としている。
【０００９】
さらに、上記従来例の問題点を解決するための本発明は、電子会議支援装置であって、発言を希望する情報を受け入れる手段と、発言を希望する情報を受け入れて、他の参加者の電子会議支援装置へ発言を希望する旨を通知する手段と、他の電子会議支援装置から発言を希望する旨が通知されたときに、他者が発言中である旨の情報を利用者に提示する手段と、を含むことを特徴としている。
【００１０】
また、本発明の一態様に係る電子会議支援方法は、コンピュータに、会議の開始指示を受け入れ、前記受け入れた会議開始の指示に応じて、他の参加者側のコンピュータへ電子会議の開始を通知する工程と、他の参加者のコンピュータから受信された電子会議の開始通知を利用者に提示する工程と、を実行させることを特徴としている。
【００１１】
さらに本発明の別の態様に係るプログラムは、コンピュータに、会議の開始指示を受け入れ、前記受け入れた会議開始の指示に応じて、他の参加者側のコンピュータへ電子会議の開始を通知する手順と、他の参加者のコンピュータから受信された電子会議の開始通知を利用者に提示する手順と、を実行させることを特徴としている。
【発明を実施するための最良の形態】
【００１２】
本発明の実施の形態について図面を参照しながら説明する。本発明の実施の形態に係る電子会議支援装置１は、図１に示すように、制御部１１と、記憶部１２と、操作部１３と、表示部１４と、マイク１５と、スピーカ１６と、通信部１７とを含んで構成されている。
【００１３】
制御部１１は、ＣＰＵ等であり、記憶部１２に格納されているプログラムに従って動作する。この制御部１１は、利用者の操作によって、会議の開始を表す信号を送信する処理や、マイク１５から音声の入力があったときに、発話中であることを表す信号を送信する処理などを実行する。この制御部１１の具体的な処理の内容例については、後に詳しく述べる。
【００１４】
記憶部１２は、ＲＡＭやＲＯＭ等の記憶素子、並びにハードディスク等、コンピュータ可読な記録媒体を含む。この記憶部１２には制御部１１によって実行されるプログラムが格納される。また、この記憶部１２は、制御部１１のワークメモリとしても動作する。本実施の形態では、この記憶部１２に、電子会議支援装置１の利用者を特定する情報（ユーザ名）が格納されている。
【００１５】
操作部１３は、キーボードやマウス等であり、利用者の指示操作を受け入れて、当該受け入れた指示操作の内容を制御部１１に出力する。表示部１４は、ディスプレイ等であり、制御部１１から入力される指示に従って情報を表示する。
【００１６】
マイク１５は、到来した音声をディジタルの音声信号に変換して制御部１１に出力する。スピーカ１６は、制御部１１から入力される指示に従って、音声信号に基づく音声を鳴動する。
【００１７】
通信部１７は、ネットワークカード等であり、制御部１１から入力される指示に従って、ネットワークを介して情報や信号を送出し、また、ネットワークを介して受信する信号や情報を制御部１１に出力する。
【００１８】
ここで本実施の形態の制御部１１の動作について説明する。本実施の形態の制御部１１は、電子会議システムのプログラムの実行を開始すると、表示部１４に、会議の開始／終了を指示するプルダウンメニュー（Ａ）と、音声認識のオン／オフを選択するメニュー（Ｂ）と、発言の状態を表すメニュー（Ｃ）とが表示される。また、音声認識の結果等を表示する発言表示部（Ｄ）が表示される。
【００１９】
また記憶部１２には、例えば予め通知された会議参加者の電子会議支援装置１のネットワークアドレスのリスト（参加者リスト）が保持されている。
【００２０】
制御部１１は当初、会議の開始／終了を指示するプルダウンメニュー（Ａ）は、「会議停止」の状態となっている。利用者が操作部１３を操作して、このプルダウンメニュー（Ａ）から「会議中」を選択すると、記憶部１２に格納されている参加者リストに含まれる各ネットワークアドレスへ、会議を開始する旨の信号を制御部１１が送信出力する。
【００２１】
また、会議を開始する旨の信号を受信した側の制御部１１は、当該会議の開始を表す信号が入力されると、プルダウンメニュー（Ａ）を「会議中」に変更して表示する。これにより、利用者は、会議が開始されたことを容易に知ることができる。
【００２２】
さらにこのとき、会議を開始する旨の信号を受信した側の制御部１１は、この信号を受信したタイミングで、音声認識の処理を開始し、音声認識がオンとなったことを表す表示をメニュー（Ｂ）にて行ってもよい。
【００２３】
利用者がマイク１５に対して発話した音声のデータは、制御部１１によって音声認識処理されて、認識結果の情報（発言文字列情報）が文字列の情報として、記憶部１２に格納されている参加者リストに含まれる各ネットワークアドレスへ送信される。このとき、発言文字列情報に、記憶部１２に格納されているユーザ名を付加して送信することとしてもよい。また、利用者がキーボード等、操作部１３を介して入力した文字列のデータは、発言文字列情報として記憶部１２に格納されている参加者リストに含まれる各ネットワークアドレスへ送信される。このときも、発言文字列情報に、記憶部１２に格納されているユーザ名を付加して送信することとしてもよい。
【００２４】
これらの情報を受信した側の制御部１１は、発言中のユーザ名と、発言文字列情報との入力を受けて、発言表示部（Ｄ）に当該ユーザ名と発言文字列情報とを表示する。例えば、ユーザ名が「Sato」であり、発言文字列情報が「ところで、あの件は、」であったとすると、制御部１１は、
「Sato: ところで、あの件は、」
と、いったように、ユーザ名と発言文字列情報とを関連づけ、かつ双方が区別できるように区切り文字（ここではコロン）を介して連接して表示する。
【００２５】
さらに、マイク１５を介して音声の入力を受けている間、制御部１１は、参加者リストに含まれる各ネットワークアドレスへ、発言の状態が、「発言中」である旨の信号を送出する。
【００２６】
また、マイク１５を介して音声の入力を受けていた制御部１１が、予め定められた時間以上の期間にわたり、マイク１５からの音声入力がない場合は、制御部１１は、参加者リストに含まれる各ネットワークアドレスへ、発言の状態が、「発言停止」である旨の信号を送出する。
【００２７】
他の電子会議支援装置１から、これらの信号を受信した側の制御部１１では、他の電子会議支援装置１を特定する情報（例えばネットワークアドレス）と、受信した信号に基づく発言の状態（「発言中」または「発言停止」）とを関連づけて、発言状態データベースとして記憶部１２に格納する（図３）。そして、制御部１１は、この記憶部１２に格納されている発言状態データベース内で、いずれかの発言状態が「発言中」であるときには、発言の状態を表すプルダウンメニュー（Ｃ）を「発言中」に設定する。また、この発言状態データベースに格納されている発言状態のうちすべての発言の状態が「発言停止」であるときには、発言の状態を表すプルダウンメニューを「発言停止」に設定する。
【００２８】
さらに制御部１１は、利用者が操作部１３を操作して、「発言停止」であったプルダウンメニュー（Ｃ）を、「発言中」に変更する指示操作を行ったとき（発言希望の要求が行われたとき）には、参加者リストに含まれる各ネットワークアドレスへ、発言の状態が、「発言中」である旨の信号を送出することとしてもよい。
【００２９】
この場合は、マイク１５又はキーボード等からの入力が、予め定められた時間以上の期間にわたってない場合に、制御部１１は、参加者リストに含まれる各ネットワークアドレスへ、発言の状態が、「発言停止」である旨の信号を送出するとともに、発言の状態を表すプルダウンメニュー（Ｃ）を「発言停止」に設定する。
【００３０】
従って、利用者は、他者が発言しているか否かを発言の状態を表すメニューを参照して知ることができ、また、発言をしたいときには、この発言の状態を表すプルダウンメニューを操作して発言を行いたい旨を他者に知らせることができる。
【００３１】
すなわち本実施の形態では、会議の開始／停止、他者の発言の有無、発言希望の旨などが、各参加者の電子会議支援装置１間で相互に送受され、画面上に表示される。これにより聴覚障害者の会議参加が支援される。
【００３２】
なお、音声認識を行うか否かを表すプルダウンメニュー（Ｂ）を「音声認識オフ」として、マイク１５で捉えられた音声について音声認識を行わないようにしてもよい。これにより例えば、自席にて会議に参加していた参加者が、かかってきた電話に出ている場合に、当該電話の音声が音声認識されて他の会議参加者に通知されてしまうことを防止できる。
【００３３】
また、この場合に制御部１１は、「音声認識オフ」が設定されてから、予め定めた認識再開確認期間が経過するまでに音声認識が再開されないときに、「音声認識」をオフとしている利用者に対して音声認識がオフである旨を通知してもよい。
【００３４】
また、ユーザ名など、利用者を特定する情報は、利用者が適宜変更できるようにしておくこととしてもよい。
【００３５】
さらに、ここまでの説明では、会議の開始／停止等が文字にて表示されることとしていたが、アイコン等、絵柄で表示するようにしても構わない。さらに、バイブレータ等、触覚、触力覚を提示できるマウス等を操作部１３において利用している場合、これらバイブレータ等を振動させるなどして、会議の開始／停止等の情報を提示してもよい。
【００３６】
本実施の形態によると、聴覚障害を有する利用者にとっても、会議への参加をスムーズに行うことができる。
【００３７】
また、ここでいう電子会議は、少なくとも一部の参加者が会議室等に会同して、一つのテーブルに着席して行ってもよい。この場合において、当該会同している参加者が着席しているテーブルの模式画像と、各参加者の着席位置を特定する情報とを、各電子会議支援装置１の記憶部１２に格納しておき、制御部１１が、「発言中」の利用者や、発言希望などを行った利用者の着席位置を、他の利用者の着席位置とは識別可能な態様で（例えば色を異ならせるなど）表示してもよい（図４）。
【００３８】
さらに、制御部１１は、音声認識の結果が誤りである旨の操作を利用者から受けて、その旨を表す情報を他の利用者の電子会議支援装置１へ送信してもよい。この場合、音声認識の結果が誤りである旨の情報を受信した電子会議支援装置１は、当該情報を表示する。これにより音声認識に誤りがあるとの認識を参加者間で共有することができる。
【図面の簡単な説明】
【００３９】
【図１】本発明の実施の形態に係る電子会議支援装置の構成例を表すブロック図である。
【図２】本発明の実施の形態に係る電子会議支援装置における画面表示例を表す説明図である。
【図３】本発明の実施の形態に係る電子会議支援装置において生成される発言状態データベースの例を表す説明図である。
【図４】本発明の実施の形態に係る電子会議支援装置における画面表示の別の例を表す説明図である。
【符号の説明】
【００４０】
１  電子会議支援装置、１１  制御部、１２  記憶部、１３  操作部、１４  表示部、１５  マイク、１６  スピーカ、１７  通信部。
【図１】
2007058681.tif 000003
【図２】
2007058681.tif 000004
【図３】
2007058681.tif 000005
【図４】
2007058681.tif 000006