(57)【要約】【課題】複数人の発言者が同時に発言することを防止することができる会議支援システム、会議支援方法、会議支援装置のプログラム、および端末のプログラムを提供することを目的とする。【解決手段】会議支援システムは、会議の複数の参加者それぞれが使用する端末と、会議支援装置と、を有する会議支援システムであって、端末は、発言を行うことを設定する操作部と、発言を行うこと示す情報を他の端末に報知する自己発言報知部と、を備える。【選択図】図１
2018174439.tif 000002
【特許請求の範囲】
【請求項１】
会議の複数の参加者それぞれが使用する端末と、会議支援装置と、を有する会議支援システムであって、
前記端末は、
発言を行うことを設定する操作部と、
前記発言を行うこと示す情報を他の前記端末に報知する自己発言報知部と、
を備える会議支援システム。
【請求項２】
会議の複数の参加者それぞれが使用する端末と、会議支援装置と、を有する会議支援システムであって、
前記会議支援装置は、
前記参加者の発言を行うこと示す情報を受信した端末以外からの前記発言を許可しない処理部と、を備え、
前記端末は、
前記発言を行うこと示す情報を設定する操作部と、
前記発言を行うこと示す情報を前記会議支援装置に送信する自己発言報知部と、
を備える会議支援システム。
【請求項３】
前記端末の自己発言報知部は、
前記発言の終了時に、前記発言が終了したことを示す情報を前記会議支援装置に送信する、請求項１または請求項２に記載の会議支援システム。
【請求項４】
前記会議支援装置の処理部は、
前記参加者の発言を行うこと示す情報を複数の前記端末から受信した場合、予め設定された優先順位に基づいて話者を設定する、請求項１から請求項３のいずれか１項に記載の会議支援システム。
【請求項５】
前記会議支援装置の処理部は、
前記参加者の発言を行うこと示す情報を受信後、他の前記端末から前記参加者の発言を行うこと示す情報を受信した場合、他の参加者が発言中であることの警告を行う、請求項１から請求項４のいずれか１項に記載の会議支援システム。
【請求項６】
発言を取得し、前記発言の内容が音声情報であるかテキスト情報であるか判別する取得部と、
前記会議支援装置は、前記発言の内容が音声情報の場合に前記音声情報を認識してテキスト情報に変換する音声認識部、を備える、請求項１から請求項５のいずれか１項に記載の会議支援システム。
【請求項７】
会議の複数の参加者それぞれが使用する端末を有する会議支援システムにおける会議支援方法であって、
前記端末の操作部が、発言を行うことを設定するステップと、
前記端末の自己発言報知部が、前記発言を行うこと示す情報を他の前記端末に報知するステップと、
を含む会議支援方法。
【請求項８】
会議の複数の参加者それぞれが使用する端末と、会議支援装置と、を有する会議支援システムにおける会議支援方法であって、
前記端末の操作部が、前記発言を行うこと示す情報を設定するステップと、
前記端末の自己発言報知部が、前記発言を行うこと示す情報を前記会議支援装置に送信するステップと、
前記会議支援装置の処理部が、前記参加者の発言を行うこと示す情報を受信した端末以外からの前記発言を許可しないステップと、
を含む会議支援方法。
【請求項９】
会議の複数の参加者それぞれが使用する端末と、会議支援装置と、を有する会議支援システムにおける前記会議支援装置のコンピュータに、
前記参加者の発言を行うこと示す情報を受信するステップと、
前記参加者の発言を行うこと示す情報を受信した端末以外からの前記参加者の発言を行うこと示す情報を受信が重複しているか否かを判別するステップと、
前記重複している場合に、前記参加者の発言を行うこと示す情報を受信した端末以外からの前記発言を許可しないステップと、
を実行させる会議支援装置のプログラム。
【請求項１０】
会議の複数の参加者それぞれが使用する端末と、会議支援装置と、を有する会議支援システムにおける前記端末のコンピュータに、
発言を行うこと示す情報を設定するステップと、
前記発言を行うこと示す情報を前記会議支援装置に送信するステップと、
を実行させる端末のプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、会議支援システム、会議支援方法、会議支援装置のプログラム、および端末のプログラムに関する。
【背景技術】
【０００２】
複数人が会議をする場合において、各発言者の発話内容をテキスト化して、発話内容をテキスト化して各利用者が所有する再生装置に表示することが提案されている（例えば特許文献１参照）。なお、特許文献１に記載の技術では、発話を話題毎に音声メモとして録音し、議事録作成者が、録音された音声メモを再生してテキスト化を行う。そして、特許文献１に記載の技術では、作成したテキストを他のテキストと関連付けて構造化して議事録を作成し、作成した議事録を再生装置で表示する。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開平８−１９４４９２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、複数人が同時に話し始めた場合、話者毎に発話内容をテキストとして表示することに困難性が生じ得る。従って、例えば聴覚障がい者等は、テキストとして表示された内容を見ても誰の発話かが分からなくなる可能性がある。
また、発言が入力されたテキストの場合、同時に複数のテキストが入力された場合、参加者は、表示されたテキストを見ても誰の発話かが分からなくなる可能性がある。
【０００５】
本発明は、上記の問題点に鑑みてなされたものであって、複数人の発言者が同時に発言することを防止することができる会議支援システム、会議支援方法、会議支援装置のプログラム、および端末のプログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
（１）上記目的を達成するため、本発明の一態様に係る会議支援システム１は、会議の複数の参加者それぞれが使用する端末２０と、会議支援装置３０と、を有する会議支援システムであって、前記端末は、発言を行うことを設定する操作部２０１と、前記発言を行うこと示す情報を他の前記端末に報知する自己発言報知部（処理部２０２、通信部２０４）と、を備える。
【０００７】
（２）上記目的を達成するため、本発明の一態様に係る会議支援システム１は、会議の複数の参加者それぞれが使用する端末２０と、会議支援装置３０と、を有する会議支援システムであって、前記会議支援装置は、前記参加者の発言を行うこと示す情報を受信した端末以外からの前記発言を許可しない処理部３１０と、を備え、前記端末は、前記発言を行うこと示す情報を設定する操作部２０１と、前記発言を行うこと示す情報を前記会議支援装置に送信する自己発言報知部（処理部２０２、通信部２０４）と、を備える。
【０００８】
（３）また、本発明の一態様に係る会議支援システムであって、前記端末の自己発言報知部は、前記発言の終了時に、前記発言が終了したことを示す情報を前記会議支援装置に送信するようにしてもよい。
【０００９】
（４）また、本発明の一態様に係る会議支援システムであって、前記会議支援装置の処理部は、前記参加者の発言を行うこと示す情報を複数の前記端末から受信した場合、予め設定された優先順位に基づいて話者を設定するようにしてもよい。
【００１０】
（５）また、本発明の一態様に係る会議支援システムであって、前記会議支援装置の処理部は、前記参加者の発言を行うこと示す情報を受信後、他の前記端末から前記参加者の発言を行うこと示す情報を受信した場合、他の参加者が発言中であることの警告を行うようにしてもよい。
【００１１】
（６）また、本発明の一態様に係る会議支援システムであって、発言を取得し、前記発言の内容が音声情報であるかテキスト情報であるか判別する取得部と、前記会議支援装置は、前記発言の内容が音声情報の場合に前記音声情報を認識してテキスト情報に変換する音声認識部、を備えるようにしてもよい。
【００１２】
（７）上記目的を達成するため、本発明の一態様に係る会議支援方法は、会議の複数の参加者それぞれが使用する端末を有する会議支援システムにおける会議支援方法であって、前記端末の操作部が、発言を行うことを設定するステップと、前記端末の自己発言報知部が、前記発言を行うこと示す情報を他の前記端末に報知するステップと、を含む。
【００１３】
（８）上記目的を達成するため、本発明の一態様に係る会議支援方法は、会議の複数の参加者それぞれが使用する端末と、会議支援装置と、を有する会議支援システムにおける会議支援方法であって、前記端末の操作部が、前記発言を行うこと示す情報を設定するステップと、前記端末の自己発言報知部が、前記発言を行うこと示す情報を前記会議支援装置に送信するステップと、前記会議支援装置の処理部が、前記参加者の発言を行うこと示す情報を受信した端末以外からの前記発言を許可しないステップと、を含む。
【００１４】
（９）上記目的を達成するため、本発明の一態様に係る会議支援装置のプログラムは、会議の複数の参加者それぞれが使用する端末と、会議支援装置と、を有する会議支援システムにおける前記会議支援装置のコンピュータに、前記参加者の発言を行うこと示す情報を受信するステップと、前記参加者の発言を行うこと示す情報を受信した端末以外からの前記参加者の発言を行うこと示す情報を受信が重複しているか否かを判別するステップと、前記重複している場合に、前記参加者の発言を行うこと示す情報を受信した端末以外からの前記発言を許可しないステップと、を実行させる。
【００１５】
（１０）上記目的を達成するため、本発明の一態様に係る端末のプログラムは、会議の複数の参加者それぞれが使用する端末と、会議支援装置と、を有する会議支援システムにおける前記端末のコンピュータに、発言を行うこと示す情報を設定するステップと、前記発言を行うこと示す情報を前記会議支援装置に送信するステップと、を実行させる。
【発明の効果】
【００１６】
（１）、（２）、（７）、（８）、（９）、（１０）によれば、発言する旨を報知するようにしたので、複数人の話者が同時に話すことを防止することができる。
（３）によれば、発話が終了したことを報知するようにしたので、発話が終了したことを他者に知らせることができる。
（４）によれば、複数人により発話開始が要請された場合には、予め設定された優先順位に基づいて話者を設定するようにしたので、複数人が同時に発話することを防止することができる。
（５）によれば、発話者が重複した場合に、警告を行うようにしたので、複数人が同時に発話することを防止することができる。
（６）によれば、発言がテキスト情報であっても、複数人の話者が同時に話すことを防止することができる。
【図面の簡単な説明】
【００１７】
【図１】第１実施形態に係る会議支援システムの構成例を示すブロック図である。
【図２】第１実施形態に係る端末の表示部上に表示される画像の例を示す図である。
【図３】第１実施形態に係る発話開始要請が重複した場合に端末の表示部上に表示される画像を示す例である。
【図４】第１実施形態に係る予め定められている優先順位の例を示す図である。
【図５】第１実施形態に係る会議支援システムの処理手順例のシーケンス図である。
【図６】第１実施形態に係る端末が行う処理手順例を示すフローチャートである。
【図７】第１実施形態に係る会議支援装置が行う処理手順例を示すフローチャートである。
【図８】第１実施形態に係る優先順位に基づいて発話が許可されなかった場合に端末の表示部上に表示される警告の例を示す図である。
【図９】第１実施形態に係る優先順位に基づいて発話が許可された場合に端末の表示部上に表示される警告の例を示す図である。
【図１０】第１実施形態に係る発話開始要請が重複した場合に優先順位に基づいて会議支援装置が行う処理手順例を示すフローチャートである。
【発明を実施するための形態】
【００１８】
以下、本発明の実施の形態について図面を参照しながら説明する。
【００１９】
まず、本実施形態の会議支援システムが使用される状況例を説明する。
本実施形態の会議支援システムは、２人以上が参加して行われる会議で用いられる。参加者のうち、発話が不自由な人が会議に参加していてもよい。発話可能な参加者は、参加者毎にマイクロフォンを装着する。また、参加者は、端末（スマートフォン、タブレット端末、パーソナルコンピュータ等）を所持している。会議支援システムは、参加者の発話した音声信号に対して音声認識、テキスト化して、各自の端末にテキストを表示させる。また、利用者は、発話を行うとき端末を操作してから発話を開始し、発話終了後に端末を操作する。端末は、発話の開始を示す発話開始要請と発話の終了を示す発話終了要請を会議支援装置に送信することで報知する。会議支援システムの会議支援装置は、端末から受信した発話開始要請と発話終了要請に基づいて、発話を許可、不許可を判別する。
【００２０】
［第１実施形態］
図１は、本実施形態に係る会議支援システム１の構成例を示すブロック図である。
まず、会議支援システム１の構成について説明する。
図１に示すように、会議支援システム１は、入力装置１０、端末２０、会議支援装置３０、音響モデル・辞書ＤＢ４０、および議事録・音声ログ記憶部５０を備える。また、端末２０は、端末２０−１、端末２０−２、・・・を備える。端末２０−１、端末２０−２のうち１つを特定しない場合は、端末２０という。
【００２１】
入力装置１０は、入力部１１−１、入力部１１−２、入力部１１−３、・・・を備える。入力部１１−１、入力部１１−２、入力部１１−３、・・・のうち１つを特定しない場合は、入力部１１という。
端末２０は、操作部２０１、処理部２０２（自己発言報知部）、表示部２０３、および通信部２０４（自己発言報知部）を備える。
会議支援装置３０は、取得部３０１、音声認識部３０２、テキスト変換部３０３（音声認識部）、テキスト修正部３０５、議事録作成部３０６、通信部３０７、認証部３０８、操作部３０９、処理部３１０、および表示部３１１を備える。
【００２２】
入力装置１０と会議支援装置３０とは、有線または無線によって接続されている。端末２０と会議支援装置３０とは、有線または無線によって接続されている。処理部３１０は、発言可否判定部３１０１を備える。
【００２３】
まず、入力装置１０について説明する。
入力装置１０は、利用者が発話した音声信号を会議支援装置３０に出力する。なお、入力装置１０は、マイクロフォンアレイであってもよい。この場合、入力装置１０は、それぞれ異なる位置に配置されたＰ個のマイクロフォンを有する。そして、入力装置１０は、収音した音からＰチャネル（Ｐは、２以上の整数）の音声信号を生成し、生成したＰチャネルの音声信号を会議支援装置３０に出力する。
【００２４】
入力部１１は、マイクロフォンである。入力部１１は、利用者の音声信号を収音し、収音した音声信号をアナログ信号からデジタル信号に変換して、デジタル信号に変換した音声信号を会議支援装置３０に出力する。なお、入力部１１は、アナログ信号の音声信号を会議支援装置３０に出力するようにしてもよい。なお、入力部１１は、音声信号を、有線のコードやケーブルを介して、会議支援装置３０に出力するようにしてもよく、無線で会議支援装置３０に送信するようにしてもよい。
【００２５】
次に、端末２０について説明する。
端末２０は、例えばスマートフォン、タブレット端末、パーソナルコンピュータ等である。端末２０は、音声出力部、モーションセンサー、ＧＰＳ（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｎｇ  Ｓｙｓｔｅｍ；全地球測位システム）等を備えていてもよい。
【００２６】
操作部２０１は、利用者の操作を検出し、検出した結果を処理部２０２に出力する。操作部２０１は、例えば表示部２０３上に設けられたタッチパネル式のセンサー、またはキーボードである。
【００２７】
処理部２０２は、操作部２０１が出力した出力した操作結果に応じて送信情報を生成し、生成した送信情報を通信部２０４に出力する。送信情報は、会議への参加希望を示す参加要請、会議からの退出希望を示す退出要請、発話開始を示す発話開始要請、発話終了を示す発話終了要請、過去の会議の議事録を再生する指示等のうちの１つである。なお、送信情報には、端末２０を識別するための識別情報が含まれている。このように、処理部２０２は、参加者が発話を開始する前に発話開始要請、発話を終了するときに発話終了要請を、通信部２０４を介して会議支援装置３０へ送信して報知する。
処理部２０２は、通信部２０４が出力するテキスト情報を取得し、取得したテキスト情報を画像データに変換し、変換した画像データを表示部２０３に出力する。なお、表示部２０３上に表示される画像については、図２、図３を用いて後述する。
【００２８】
表示部２０３は、処理部２０２が出力した画像データを表示する。表示部２０３は、例えば液晶表示装置、有機ＥＬ（エレクトロルミネッセンス）表示装置、電子インク表示装置等である。
【００２９】
通信部２０４は、テキスト情報または議事録の情報を会議支援装置３０から受信し、受信した受信情報を処理部２０２に出力する。通信部２０４は、処理部２０２が出力した指示情報を会議支援装置３０に送信する。
【００３０】
次に、音響モデル・辞書ＤＢ４０について説明する。
音響モデル・辞書ＤＢ４０には、例えば音響モデル、言語モデル、単語辞書等が格納されている。音響モデルとは、音の特徴量に基づくモデルであり、言語モデルとは、単語とその並び方の情報のモデルである。また、単語辞書とは、多数の語彙による辞書であり、例えば大語彙単語辞書である。なお、会議支援装置３０は、音声認識辞書１３に格納されていない単語等を、音響モデル・辞書ＤＢ４０に格納して更新するようにしてもよい。
【００３１】
次に、議事録・音声ログ記憶部５０について説明する。
議事録・音声ログ記憶部５０は、議事録（含む音声信号）を記憶する。
【００３２】
次に、会議支援装置３０について説明する。
会議支援装置３０は、例えばパーソナルコンピュータ、サーバ、スマートフォン、タブレット端末等のうちのいずれかである。なお、会議支援装置３０は、入力装置１０がマイクロフォンアレイの場合、音源定位部、音源分離部、および音源同定部をさらに備える。会議支援装置３０は、参加者によって発話された音声信号を、例えば所定の期間毎に音声認識してテキスト化する。そして、会議支援装置３０は、テキスト化した発話内容のテキスト情報を、参加者の端末２０それぞれに送信する。なお、会議支援装置３０は、現在発言中に話者に対応するテキストを発言済みのテキスト情報の表示と異なるように表示させるようにテキスト情報を修正する。また、会議支援装置３０は、発話前に発話開始要請を受信したとき、他の端末２０から発話開始要請を受信しているか否かに応じて、発話可否を判別する。発話を許可した場合、発話開始要請を指示情報として受信した端末２０に対応する入力部１１からの音声信号を取得する。なお、会議支援装置３０は、端末２０と入力部１１との対応関係を記憶している。発話終了後に発話終了要請を指示情報として端末２０から受信した場合、会議支援装置３０は、発話が終了したと判別し、その話者の音声信号の取得を終了する。
【００３３】
取得部３０１は、入力部１１が出力する音声信号を取得し、取得した音声信号を音声認識部３０２に出力する。なお、取得した音声信号がアナログ信号の場合、取得部３０１は、アナログ信号をデジタル信号に変換し、デジタル信号に変換した音声信号を音声認識部３０２に出力する。
【００３４】
音声認識部３０２は、入力部１１が複数の場合、入力部１１を使用する話者毎に音声認識を行う。
音声認識部３０２は、取得部３０１が出力する音声信号を取得する。音声認識部３０２は、取得部３０１が出力した音声信号から発話区間の音声信号を検出する。発話区間の検出は、例えば所定のしきい値以上の音声信号を発話区間として検出する。なお、音声認識部３０２は、発話区間の検出を周知の他の手法を用いて行ってもよい。または、音声認識部３０２は、端末２０が送信した重要コメントの発話開始を示す情報、重要コメントの発話終了を示す情報を用いて、発話区間を検出する。音声認識部３０２は、検出した発話区間の音声信号に対して、音響モデル・辞書ＤＢ４０を参照して、周知の手法を用いて音声認識を行う。なお、音声認識部３０２は、例えば特開２０１５−６４５５４号公報に開示されている手法等を用いて音声認識を行う。音声認識部３０２は、認識した認識結果と音声信号をテキスト変換部３０３に出力する。なお、音声認識部３０２は、認識結果と音声信号とを、例えば１文毎、または発話句間毎、または話者毎に対応つけて出力する。
【００３５】
テキスト変換部３０３は、音声認識部３０２が出力した認識結果をテキストに変換する。テキスト変換部３０３は、変換したテキスト情報と音声信号をテキスト修正部３０５に出力する。なお、テキスト変換部３０３は、「あー」、「えーと」、「えー」、「まあ」等の間投詞を削除してテキストに変換するようにしてもよい。
【００３６】
テキスト修正部３０５は、処理部３１０が出力した修正指示に応じて、テキスト変換部３０３が出力したテキスト情報の表示を、フォントの色を修正、フォントの大きさを修正、フォントの種類を修正、コメントに下線を追加、コメントにマーカーを付加等して修正する。テキスト修正部３０５は、テキスト変換部３０３が出力したテキスト情報、または修正したテキスト情報を処理部３１０に出力する。テキスト修正部３０５は、テキスト変換部３０３が出力したテキスト情報と音声信号を議事録作成部３０６に出力する。
【００３７】
議事録作成部３０６は、テキスト修正部３０５が出力したテキスト情報と音声信号に基づいて、発話者毎に分けて、議事録を作成する。議事録作成部３０６は、作成した議事録と対応する音声信号を議事録・音声ログ記憶部５０に記憶させる。なお、議事録作成部３０６は、「あー」、「えーと」、「えー」、「まあ」等の間投詞を削除して議事録を作成するようにしてもよい。
【００３８】
通信部３０７は、端末２０と情報の送受信を行う。端末２０から受信する情報には、参加要請、音声信号、指示情報（含む重要コメントであることを示す情報）、過去の会議の議事録を再生する指示等が含まれている。通信部３０７は、端末２０から受信した参加要請から、例えば、端末２０を識別するための識別情報を抽出し、抽出した識別情報を認証部３０８に出力する。識別情報は、例えば、端末２０のシリアル番号、ＭＡＣアドレス（Ｍｅｄｉａ  Ａｃｃｅｓｓ  Ｃｏｎｔｒｏｌ  ａｄｄｒｅｓｓ）、ＩＰ（Ｉｎｔｅｒｎｅｔ  Ｐｒｏｔｏｃｏｌ）アドレス等である。通信部３０７は、認証部３０８が通信参加を許可する指示を出力した場合、会議に参加要請した端末２０との通信を行う。通信部３０７は、認証部３０８が通信参加を許可しない指示を出力した場合、会議に参加要請した端末２０との通信を行わない。通信部３０７は、受信した情報から指示情報を抽出し、抽出した指示情報を処理部３１０に出力する。通信部３０７は、処理部３１０が出力したテキスト情報または修正済みのテキスト情報を、参加要請のあった端末２０に送信する。通信部３０７は、処理部３１０が出力した議事録の情報を、参加要請のあった端末２０に送信する。
【００３９】
認証部３０８は、通信部３０７が出力した識別情報を受け取り、通信を許可するか否か判別する。なお、会議支援装置３０は、例えば、会議への参加者が使用する端末２０の登録を受け付け、認証部３０８に登録しておく。認証部３０８は、判別結果に応じて、通信参加を許可する指示か、通信参加を許可しない指示を通信部３０７に出力する。
【００４０】
操作部３０９は、例えばキーボード、マウス、表示部３１１上に設けられているタッチパネルセンサー等である。操作部３０９は、利用者の操作結果を検出して、検出した操作結果を処理部３１０に出力する。
【００４１】
処理部３１０は、発言可否判定部３１０１が判別した結果に応じて、発話を許可するか許可しないかを示す情報を、通信部３０７を介して発話開始要請を送信した端末２０に送信する。なお、処理部３１０は、発話を許可する場合、発話を許可することを示す情報を、通信部３０７を介して発話開始要請を送信した端末２０に送信しないようにしてもよい。処理部３１０は、発話を許可する場合、許可した端末２０に対応付けられている入力部１１から音声信号を取得するように取得部３０１を制御する。
処理部３１０は、同時に複数の端末２０から発話開始要請を受信した場合、発言可否判定部３１０１の判別に応じて、発話を許可しないことを示す警告を表示するようにテキスト修正部３０５に修正指示を出力する。これにより、処理部３１０は、テキスト修正部３０５によって修正された警告を含むテキスト情報を、通信部３０７を介して発話開始要請を送信した全ての端末２０に送信することで報知する。なお、処理部３１０は、警告のみを端末２０に送信することで報知するようにしてもよい。
または、処理部３１０は、同時に複数の端末２０から発話開始要請を受信した場合、発言可否判定部３１０１の判別に応じて、優先順位に従って発話の許可が決定された端末２０に発話を許可することを示す情報を送信する。また、処理部３１０は、同時に複数の端末２０から発話開始要請を受信した場合、発言可否判定部３１０１の判別に応じて、優先順位に従って発話を許可しないことが決定された端末２０に発話を許可しないことを示す情報を送信する。
処理部３１０は、テキスト修正部３０５が出力したテキスト情報または修正済みのテキスト情報を通信部３０７に出力する。
処理部３１０は、指示情報に応じて議事録・音声ログ記憶部５０から議事録を読み出し、読み出した議事録の情報を通信部３０７に出力する。なお、議事録の情報には、話者を示す情報、テキスト修正部３０５が修正した結果を示す情報等が含まれている。
【００４２】
発言可否判定部３１０１は、通信部３０７が出力した指示情報に発話開始要請が含まれている場合、指示情報から識別情報を抽出する。発言可否判定部３１０１は、受信した発話開始要請に基づいて、発話の可否を判別する。発言可否判定部３１０１は、同時に複数の端末２０から発話開始要請を受信していない場合、抽出した識別情報に対応する端末２０の発話を許可する。発言可否判定部３１０１は、同時に複数の端末２０から発話開始要請を受信した場合、抽出した複数の識別情報に対応する端末２０それぞれの発話を許可しない。発言可否判定部３１０１は、通信部３０７が出力した指示情報に発話終了要請を受信するまで、発話開始要請を他の端末２０受信しても発話を許可しない。
同時に複数の端末２０から発話開始要請を受信した場合、発言可否判定部３１０１は、受信した全ての端末２０の発話を許可しない。または、同時に複数の端末２０から発話開始要請を受信した場合、発言可否判定部３１０１は、予め定められている優先順位に従って発話を許可する端末２０を決定する。
【００４３】
表示部３１１は、処理部３１０が出力した画像データを表示する。表示部３１１は、例えば液晶表示装置、有機ＥＬ表示装置、電子インク表示装置等である。
【００４４】
なお、入力装置１０がマイクロフォンアレイの場合、会議支援装置３０は、音源定位部、音源分離部、および音源同定部をさらに備える。この場合、会議支援装置３０は、取得部３０１が取得した音声信号に対して予め生成した伝達関数を用いて音源定位部が音源定位を行う。そして、会議支援装置３０は、音源定位部が定位して結果を用いて話者同定を行う。会議支援装置３０は、音源定位部が定位して結果を用いて、取得部３０１が取得した音声信号に対して音源分離を行う。そして、会議支援装置３０の音声認識部３０２は、分離された音声信号に対して発話区間の検出と音声認識を行う（例えば特開２０１７−９６５７号公報参照）。また、会議支援装置３０は、残響音抑圧処理を行うようにしてもよい。
【００４５】
また、会議支援装置３０は、テキスト変換部３０３が変換したテキスト情報に対して、さらに形態素解析、係り受け解析を行うようにしてもよい。
【００４６】
次に、端末２０の表示部２０３上に表示される画像の例を、図２を用いて説明する。
図２は、本実施形態に係る端末２０の表示部２０３上に表示される画像の例を示す図である。
【００４７】
まず、画像ｇ１０について説明する。
画像ｇ１０は、Ａさんが発話した後、Ｂさんが発話を行っているときに、端末２０の表示部２０３上に表示される画像例である。画像ｇ１０には、入室ボタンの画像ｇ１１、退出ボタンの画像ｇ１２、話しますボタンの画像ｇ１３、発話終了ボタンの画像ｇ１４、文字入力ボタンの画像ｇ１５、定型文入力ボタンの画像ｇ１６、絵文字入力ボタンの画像ｇ１７、Ａさんの発話のテキストの画像ｇ２１、およびＢさんの発話のテキストの画像ｇ２２が含まれている。
【００４８】
入室ボタンの画像ｇ１１は、参加者が会議に参加するときに選択するボタンの画像である。
退出ボタンの画像ｇ１２は、参加者が会議から退出、または会議が終了したときに選択するボタンの画像である。
話しますボタンの画像ｇ１３は、発言を開始するときに選択するボタンの画像である。
発話終了ボタンの画像ｇ１４は、発言を終了するときに選択するボタンの画像である。
【００４９】
文字入力ボタンの画像ｇ１５は、参加者が音声による発話ではなく、端末２０の操作部２０１を操作して文字入力するときに選択するボタンの画像である。
定型文入力ボタンの画像ｇ１６は、参加者が音声による発話ではなく、端末２０の操作部２０１を操作して定型分を入力するときに選択するボタンの画像である。なお、このボタンが選択されると、複数の定型文が選択され、参加者は表示された複数の定型文から選択する。なお、定型文とは、例えば、「お早うございます。」、「こんにちは。」、「今日は寒いですね。」、「今日は暑いですね。」、「お手洗いに行ってきてもいいでしょうか？」、「ここで、少し休憩しませんか？」等である。
絵文字入力ボタンの画像ｇ１７は、参加者が音声による発話ではなく、端末２０の操作部２０１を操作して絵文字入力するときに選択するボタンの画像である。
【００５０】
Ａさんの発話のテキストの画像ｇ２１は、Ａさんが発話した音声信号を音声認識部３０２、テキスト変換部３０３が処理した後のテキスト情報である。
Ｂさんの発話のテキストの画像ｇ２２は、Ｂさんが発話した音声信号を音声認識部３０２、テキスト変換部３０３が処理した後のテキスト情報である。
【００５１】
なお、図２に示す例は、Ｂさんが発話前に話しますボタンの画像ｇ１３を選択し、会議支援装置３０によって、Ｂさんの発話が許可され、Ｂさんが発話し、Ｂさんの発話テキスト化されて表示されている例である。
このため、会議支援装置３０の処理部３１０は、発話中のテキスト情報を、発話済みのテキスト情報の表示と異なるように修正する修正指示をテキスト修正部３０５に出力する。テキスト修正部３０５は、処理部３１０が出力する修正指示に応じて、Ｂさんの発話に対応するテキストを、発話済みのテキスト（画像ｇ２１）と異なるように、例えばフォントの色を修正（変更）、フォントの大きさを修正、下線を追加、マーカーを付与等する。画像ｇ２２は、Ｂさんの発言に対応するテキストにマーカーを付与してテキスト情報を修正した例である。
また、図２に示した例では、表示部２０３上に表示されるボタンの例を説明したが、これらのボタンは物理的なボタン（操作部２０１）であってもよい。
【００５２】
次に、発話開始要請が重複した場合に端末２０の表示部２０３上に表示される画像について説明する。
図３は、本実施形態に係る発話開始要請が重複した場合に端末２０の表示部２０３上に表示される画像を示す例である。
画像ｇ３０は、Ａさんが発話した後にＢさんが発話し、その後、参加者のうち少なくとも２人が同時に発話開始要請を行ったとき、端末２０それぞれの表示部２０３ぞれぞれの上に表示される画像例である。画像ｇ３０には、画像ｇ１０に加えて、警告の画像ｇ３１が含まれている。
【００５３】
図３に示す例では、発話開始要請が同時に送信されたため、会議支援装置３０の発言可否判定部３１０１は、重複しているため、要請した全ての参加者に発話を許可しない例である。このため、発言可否判定部３１０１は、テキスト修正部３０５に、警告を表示するようにテキスト情報を修正する修正指示を出力する。これにより、会議支援装置３０の処理部３１０は、警告を示す情報を、通信部３０７を介して、発話開始要請を送信した全ての端末２０に送信する。この結果、端末２０の表示部２０３上には、警告の画像ｇ３１が表示される。なお、警告の画像ｇ３１は、例えば「発話者が重複しています。一人の発話者に選定して下さい。」である。この表示が表示された端末２０それぞれの参加者は、誰が発話するか順番を、例えば話し合いで決定する。
これにより、本実施形態によれば、発言開始要請が重複した場合に警告を報知するようにしたので、発言の重複を防ぐことができる。
【００５４】
図３に示した例では、発話開始要請が重複した場合、警告を報知する例を示したが、会議支援装置３０は、予め定められている優先順位に基づいて、発話者を決定するようにしてもよい。
図４は、本実施形態に係る予め定められている優先順位の例を示す図である。
図４に示す例では、優先順位が１位に端末２０−２が設定され、優先順位が２位に端末２０−１が設定され、優先順位が３位に端末２０−３が設定されている。
なお、この設定を、例えば処理部３１０が記憶する。
【００５５】
次に、会議支援システム１の処理手順例を説明する。
図５は、本実施形態に係る会議支援システム１の処理手順例のシーケンス図である。
図５に示す例では、３人の参加者（利用者）が会議に参加している例である。参加者Ａは、端末２０−３の利用者であり、入力部１１−１を装着している。参加者Ｂは、端末２０−１の利用者であり、入力部１１−２を装着している。参加者Ｃは、端末２０−２の利用者であり、入力部１１を装着していない。例えば、参加者Ｂと参加者Ｃが難聴者等の聴覚障がい者であるとする。また、図５に示す例は、同時に発話開始要請を受信した場合、予め定められている優先順位に基づいて、発話者を決定する例である。
【００５６】
（ステップＳ１）利用者Ｂは、端末２０−１の操作部２０１を操作して入室ボタンの画像ｇ１１（図２）を選択して、会議に参加する。端末２０−１の処理部２０２は、操作部２０１によって入室ボタンの画像ｇ１１が選択された結果に応じて、参加要請を会議支援装置３０に送信する。
【００５７】
（ステップＳ２）参加者Ｃは、端末２０−２の操作部２０１を操作し入室ボタンの画像ｇ１１を選択して、会議に参加する。端末２０−２の処理部２０２は、操作部２０１によって入室ボタンの画像ｇ１１が選択された結果に応じて、参加要請を会議支援装置３０に送信する。
【００５８】
（ステップＳ３）参加者Ａは、端末２０−３の操作部２０１を操作し入室ボタンの画像ｇ１１を選択して、会議に参加する。端末２０−３の処理部２０２は、操作部２０１によって入室ボタンの画像ｇ１１が選択された結果に応じて、参加要請を会議支援装置３０に送信する。
【００５９】
（ステップＳ４）会議支援装置３０の通信部３０７は、端末２０−１と端末２０−２と端末２０−３それぞれが送信した参加要請を受信する。続けて、通信部３０７は、端末２０から受信した参加要請から、例えば、端末２０を識別するための識別情報を抽出する。続けて、会議支援装置３０の認証部３０８は、通信部３０７が出力した識別情報を受け取り、通信を許可するか否かの認証を行う。図５の例では、端末２０−１と端末２０−２と端末２０−３の参加を許可した例である。
【００６０】
（ステップＳ５）参加者Ａは、発話前に、端末２０−３の操作部２０１を操作し、話しますボタンの画像ｇ１３（図２）を選択する。端末２０−３の処理部２０２は、操作部２０１によって話しますボタンの画像ｇ１３が選択された結果に応じて、発話開始要請を会議支援装置３０に送信する。
【００６１】
（ステップＳ６）会議支援装置３０の発言可否判定部３１０１は、発言可否判定を行う。具体的には、発言可否判定部３１０１は、他の端末２０から発言開始要請を受信していなければ、すなわち他の話者が発話中でなければ発話を許可する。また、発言可否判定部３１０１は、他の端末２０から発言開始要請を受信していれば、すなわち他の話者が発話中であれば発話を許可しない。なお、処理部３１０は、発話を許可する場合に、発話を許可することを示す情報を端末２０に送信しないようにしてもよい。なお、発言可否判定部３１０１は、端末２０の識別を発言開始要請に含まれる識別情報を用いて行う。
【００６２】
（ステップＳ７）参加者Ａが発話を行う。入力部１１−１は、音声信号を会議支援装置３０に出力する。
（ステップＳ８）会議支援装置３０の音声認識部３０２は、入力部１１−１が出力した音声信号に対して音声認識処理を行う（音声認識処理）。
【００６３】
（ステップＳ９）会議支援装置３０のテキスト変換部３０３は、音声信号をテキストに変換する（テキスト変換処理）。
（ステップＳ１０）会議支援装置３０の処理部３１０は、通信部３０７を介してテキスト情報を端末２０−１と端末２０−２と端末２０−３それぞれに送信する。
【００６４】
（ステップＳ１１）端末２０−３の処理部２０２は、会議支援装置３０が送信したテキスト情報を、通信部２０４を介して受信し、受信したテキスト情報を端末２０−３の表示部２０３上に表示させる。
（ステップＳ１２）端末２０−２の処理部２０２は、会議支援装置３０が送信したテキスト情報を、通信部２０４を介して受信し、受信したテキスト情報を端末２０−２の表示部２０３上に表示させる。
（ステップＳ１３）端末２０−１の処理部２０２は、会議支援装置３０が送信したテキスト情報を、通信部２０４を介して受信し、受信したテキスト情報を端末２０−１の表示部２０３上に表示させる。
【００６５】
（ステップＳ１４）参加者Ａは、発話終了後に、端末２０−３の操作部２０１を操作し、発話終了ボタンの画像ｇ１４（図２）を選択する。端末２０−３の処理部２０２は、操作部２０１によって発話終了ボタンの画像ｇ１４が選択された結果に応じて、発話開始要請を会議支援装置３０に送信する。
【００６６】
（ステップＳ１５）参加者Ｂは、発話前に、端末２０−１の操作部２０１を操作し、話しますボタンの画像ｇ１３を選択する。端末２０−１の処理部２０２は、操作部２０１によって話しますボタンの画像ｇ１３が選択された結果に応じて、発話開始要請を会議支援装置３０に送信する。
【００６７】
（ステップＳ１６）参加者Ａは、発話前に、端末２０−３の操作部２０１を操作し、話しますボタンの画像ｇ１３を選択する。端末２０−３の処理部２０２は、操作部２０１によって話しますボタンの画像ｇ１３が選択された結果に応じて、発話開始要請を会議支援装置３０に送信する。
【００６８】
（ステップＳ１７）会議支援装置３０の発言可否判定部３１０１は、発言可否判定を行う。図５に示す例は、端末２０−１と端末２０−３から同時に発話開始要請を会議支援装置３０が受信した例である。このため、発言可否判定部３１０１は、予め定められている優先順位（図４）に基づいて、端末２０−１に発話を許可し、端末２０−３に発話を許可しないと判別する。
【００６９】
（ステップＳ１８）会議支援装置３０の処理部３１０は、発話許可を示す情報を、通信部３０７を介して端末２０−１に送信する。
（ステップＳ１９）会議支援装置３０の処理部３１０は、発話不許可を示す情報を、通信部３０７を介して端末２０−３に送信する。
【００７０】
（ステップＳ２０）参加者Ｂが発話を行う。入力部１１−２は、音声信号を会議支援装置３０に出力する。
以上で、会議支援システム１の処理を終了する。
【００７１】
これにより、本実施形態によれば、発言開始要請が重複した場合に予め定められた優先順位に基づいて発言の可否を判別して報知するようにしたので、発言の重複を防ぐことができる。
【００７２】
次に、端末２０が行う処理手順例を説明する。
図６は、本実施形態に係る端末２０が行う処理手順例を示すフローチャートである。
【００７３】
（ステップＳ１０１）処理部２０２は、操作部２０１が操作されて話しますボタンの画像ｇ１３（図２）が操作されたか否かを判別する。処理部２０２は、話しますボタンが操作されたと判別した場合（ステップＳ１０１；ＹＥＳ）、ステップＳ１０２の処理に進め、重要コメントボタンが操作されていないと判別した場合（ステップＳ１０１；ＮＯ）、ステップＳ１０１の処理を繰り返す。
【００７４】
（ステップＳ１０２）処理部２０２は、発話開始要請を含む指示情報を、会議支援装置３０に送信することで報知する。なお、発話開始要請には、端末２０の識別情報が含まれている。
【００７５】
（ステップＳ１０３）処理部２０２は、発話開始要請の送信に応じて、会議支援装置３０から発話許可を示す情報を、通信部３０７を介して受信したか否かを判別する。処理部２０２は、発話許可を示す情報を受信したと判別した場合（ステップＳ１０３；ＹＥＳ）、ステップＳ１０５の処理に進める。この場合、参加者は、発話を開始する。続けて、入力装置１０は、発話された音声信号を会議支援装置３０に出力する。または、処理部２０２は、発話許可を示す情報を受信していないと判別した場合（ステップＳ１０３；ＮＯ）、ステップＳ１０４の処理に進める。なお、処理部３１０は、発話開始要請を送信後、所定時間以内に、会議支援装置３０から発話を許可しないことを示す情報を受信しなかった場合にも発話許可を示す情報を受信したと判別するようにしてもよい。
【００７６】
（ステップＳ１０４）処理部２０２は、会議支援装置３０が送信した警告を、通信部３０７を介して受信する。続けて、処理部２０２は、受信した警告を表示部２０３上に表示させる。処理後、処理部２０２は、処理を終了する。
【００７７】
（ステップＳ１０５）処理部２０２は、操作部２０１が操作されて発話終了ボタンの画像ｇ１４（図２）が操作されたか否かを判別する。処理部２０２は、発話終了ボタンが操作されたと判別した場合（ステップＳ１０５；ＹＥＳ）、ステップＳ１０６の処理に進め、発話終了ボタンが操作されていないと判別した場合（ステップＳ１０５；ＮＯ）、ステップＳ１０５の処理を繰り返す。
【００７８】
（ステップＳ１０６）処理部２０２は、発話終了要請を含む指示情報を、会議支援装置３０に送信することで報知する。なお、発話終了要請には、端末２０の識別情報が含まれている。
（ステップＳ１０７）処理部２０２は、会議支援装置３０が送信したテキスト情報または修正後のテキスト情報を受信する。
（ステップＳ１０８）処理部２０２は、受信したテキスト情報または修正後のテキスト情報を表示部２０３上に表示させる。
以上で、端末２０の処理を終了する。
【００７９】
次に、会議支援装置３０が行う処理手順例を説明する。
図７は、本実施形態に係る会議支援装置３０が行う処理手順例を示すフローチャートである。なお、図７に示す例は、複数の端末２０から同時に発話開始要請を受信した場合に、警告を報知する場合の処理である。
【００８０】
（ステップＳ２０１）処理部３１０は、端末２０から発話開始要請を含む指示情報を受信したか否かを判別する。処理部３１０は、指示情報を受信していないと判別した場合（ステップＳ２０１；ＮＯ）、ステップＳ２０１の処理を繰り返し、指示情報を受信したと判別した場合（ステップＳ２０１；ＹＥＳ）、ステップＳ２０２に処理を進める。
【００８１】
（ステップＳ２０２）発言可否判定部３１０１は、通信部３０７が出力した指示情報に発話開始要請が含まれている場合、指示情報から識別情報を抽出する。続けて、発言可否判定部３１０１は、同時に複数の端末２０から発話開始要請を受信している、すなわち発言開始要請が重複しているか否かを判別する。発言可否判定部３１０１は、発言開始要請が重複していると判別した場合（ステップＳ２０２；ＹＥＳ）、ステップＳ２０３の処理に進め、発言開始要請が重複していないと判別した場合（ステップＳ２０２；ＮＯ）、ステップＳ２０５の処理に進める。
【００８２】
（ステップＳ２０３）発言可否判定部３１０１は、同時に複数の端末２０から発話開始要請を受信した場合、抽出した複数の識別情報に対応する端末２０それぞれの発話を許可しない。
（ステップＳ２０４）処理部３１０は、発言を許可しないことを示す情報と、警告を示す情報を、通信部３０７を介して発話開始要請を送信した端末２０に送信する。処理部３１０は、処理を終了する。
【００８３】
（ステップＳ２０５）発言可否判定部３１０１は、抽出した識別情報に対応する端末２０の発話を許可する。続けて、処理部３１０は、発言を許可することを示す情報を、通信部３０７を介して発話開始要請を送信した端末２０に送信する。
【００８４】
（ステップＳ２０６）取得部３０１は、抽出した識別情報に対応する入力部１１から音声信号を取得する。なお、処理部３１０は、端末２０と入力部１１との対応関係を記憶している。
【００８５】
（ステップＳ２０７）処理部３１０は、端末２０から発話終了要請を含む指示情報を受信したか否かを判別する。処理部３１０は、指示情報を受信していないと判別した場合（ステップＳ２０７；ＮＯ）、ステップＳ２０６に処理を戻し、指示情報を受信したと判別した場合（ステップＳ２０７；ＹＥＳ）、ステップＳ２０８に処理を進める。
【００８６】
（ステップＳ２０８）音声認識部３０２は、取得された音声信号に対して音声認識処理を行う。
（ステップＳ２０９）テキスト変換部３０３は、音声認識された結果に基づいて、発話内容をテキストに変換する（テキスト化）。処理後、テキスト変換部３０３は、ステップＳ２１０に処理を進める。
【００８７】
（ステップＳ２１０）処理部３１０は、テキスト情報または修正されたテキスト情報を、会議に参加している全ての端末２０に送信する。
以上で、会議支援装置３０が行う処理を終了する。
【００８８】
図３、図７では、発話開始要請が重複した場合に、発話開始要請を送信した全ての端末２０に警告を送信する例を説明したが、会議支援装置３０は、前述したように優先順位に基づいて、発話者を決定するようにしてもよい。
次に、優先順位に基づいて、発話者を決定する例を説明する。
【００８９】
図８は、本実施形態に係る優先順位に基づいて発話が許可されなかった場合に端末２０の表示部２０３上に表示される警告の例を示す図である。
図８の画像ｇ４０は、Ａさんの発話後にＢさんが発話し、その後、例えば端末２０−１の利用者が話しますボタンの画像ｇ１３を選択した例である。この例では、同時に他の端末２０−２からも発話開始要請が送信され、他の端末２０−２の優先順位が高かったため、他の端末２０−１に対して発話が許可されずに警告が報知された例でもある。この場合、画像ｇ４０のように、表示部２０３上には、警告の画像ｇ４１「発話者が重複しています。他の発話者の発話が終わってから、再度、話しますボタンを押して下さい。」が表示される。なお、警告の画像ｇ４１は一例であり、これに限られない。
【００９０】
図９は、本実施形態に係る優先順位に基づいて発話が許可された場合に端末２０の表示部２０３上に表示される警告の例を示す図である。
図９の画像ｇ５０は、例えば、図８に対して発話が許可された端末２０−２の表示部２０３上に表示される画像である。この例では、他の端末２０−１より端末２０−２の優先順位が高かったため、端末２０−２に対して発話が許可された例でもある。この場合、画像ｇ５０のように、表示部２０３上には、発話許可の画像ｇ５１「発話が許可されました。発話を開始して下さい。発話終了時に発話終了ボタンを押して下さい。」が表示される。なお、発話許可の画像ｇ５１は一例であり、これに限られない。
【００９１】
次に、発話開始要請が重複した場合に、優先順位に基づいて会議支援装置３０が行う処理手順例を説明する。
図１０は、本実施形態に係る発話開始要請が重複した場合に優先順位に基づいて会議支援装置３０が行う処理手順例を示すフローチャートである。なお、図７と同じ処理については、同じ符号を用いて説明を省略する。
【００９２】
（ステップＳ２０１〜ステップＳ２０２）処理部３１０と発言可否判定部３１０１は、ステップＳ２０１〜ステップＳ２０２の処理を行う。発言可否判定部３１０１は、発言開始要請が重複していると判別した場合（ステップＳ２０２；ＹＥＳ）、ステップＳ３０１の処理に進め、発言開始要請が重複していないと判別した場合（ステップＳ２０２；ＮＯ）、ステップＳ２０５の処理に進める。
【００９３】
（ステップＳ３０１）発言可否判定部３１０１は、予め定められている優先順位（例えば図４）に基づいて、発話の可否を決定する。
（ステップＳ３０２）発言可否判定部３１０１は、発話を許可すると決定したか否かを判別する。発言可否判定部３１０１は、発話を許可すると決定した場合（ステップＳ３０２；ＹＥＳ）、ステップＳ２０５の処理に進め、発話を許可しないと決定した場合（ステップＳ３０２；ＮＯ）、ステップＳ３０３の処理に進める。
【００９４】
（ステップＳ３０３）発言可否判定部３１０１は、同時に複数の端末２０から発話開始要請を受信した場合、抽出した複数の識別情報に対応する端末２０それぞれの発話を許可しない。
（ステップＳ３０４）処理部３１０は、発言を許可しないことを示す情報と、警告を示す情報を、通信部３０７を介して発話開始要請を送信した端末２０に送信する。処理部３１０は、処理を終了する。
なお、発話が許可された場合のステップＳ２０５〜ステップＳ２１０の処理は、図７と同様である。
【００９５】
なお、優先順位に基づく処理の場合であっても、端末２０の処理は図６で説明した処理と同様である。
【００９６】
以上、本実施形態では、図２、図３、図８、図９に示したように、話します（発言権）ボタンと発話終了ボタンを端末２０に設けた。そして、本実施形態では、話しますボタンが操作されたとき、会議支援装置３０は、発言権が重複していなければ発言を許可する（発言権を与える）ようにした。一方、本実施形態では、発言権が重複している場合、予め定められた優先順位（優先権）に基づいて発言する話者を決定するようにした。または、本実施形態では、発言権が重複している場合、発言を希望した全ての端末２０に警告を報知するようにした。
【００９７】
これにより、本実施形態によれば、自分が発言する旨を報知するようにしたので、複数人の話者が同時に話すことを防止することができる。本実施形態によれば、特に聴覚障がい者等が同時に発話され、その結果が端末２０上に表示されて認識が困難になることを防ぐことができる。
【００９８】
また、本実施形態によれば、発話が終了したことを報知するようにしたので、発話が終了したことを他者に知らせることができる。
また、本実施形態によれば、複数人により発話開始が要請された場合には、予め設定された優先順位に基づいて話者を設定するようにしたので、複数人が同時に発話することを防止することができる。
また、本実施形態によれば、発話者が重複した場合に、警告を行うようにしたので、複数人が同時に発話することを防止することができる。
このように、本実施形態によれば、複数人が同時に発話することを防ぐことができるので、話者毎に発話内容をテキストとして表示することができる。これにより、聴覚障がい者等は、テキストとして端末２０に表示された内容を見て誰の発話かが分かる。
【００９９】
なお、上述した例では、発話が日本語の場合、日本語にテキスト変換する例を説明したが、テキスト変換部３０３は、周知の翻訳手法を用いて、発話された言語と異なる言語のテキストに翻訳するようにしてもよい。この場合、端末２０それぞれに表示される言語は、端末２０の利用者が選択するようにしてもよい。例えば、端末２０−１の表示部２０３上には、日本語のテキスト情報が表示され、端末２０−２の表示部２０３には、英語のテキスト情報が表示されるようにしてもよい。
【０１００】
［第２実施形態］
第１実施形態では、取得部３０１が取得する信号が音声信号の例を説明したが、取得する情報がテキスト情報であってもよい。この場合について、図１を参照して説明する。
【０１０１】
入力部１１は、マイクロフォンまたはキーボード（タッチパネル式のキーボードを含む）である。入力部１１がマイクロフォンの場合、入力部１１は、参加者の音声信号を収音し、収音した音声信号をアナログ信号からデジタル信号に変換して、デジタル信号に変換した音声信号を会議支援装置３０に出力する。入力部１１がキーボードの場合、入力部１１は、参加者の操作を検出し、検出した結果のテキスト情報を会議支援装置３０に出力する。入力部１１がキーボードの場合、入力部１１は、端末２０の操作部２０１であってもよい。なお、入力部１１は、音声信号またはテキスト情報を、有線のコードやケーブルを介して、会議支援装置３０に出力するようにしてもよく、無線で会議支援装置３０に送信するようにしてもよい。入力部１１は、端末２０の操作部２０１の場合、参加者は、例えば図４に示したように、文字入力ボタンの画像ｇ１５、定型文入力ボタンの画像ｇ１６、絵文字入力ボタンの画像ｇ１７を選択して操作する。なお、文字入力ボタンの画像ｇ１５が選択された場合、端末２０の処理部２０２は、表示部２０３上にソフトウェアキーボードの画像を表示する。
【０１０２】
取得部３０１は、取得した情報が音声信号であるかテキスト情報であるか判別する。取得部３０１は、テキスト情報であると判別した場合、取得したテキスト情報を音声認識部３０２とテキスト変換部３０３を介してテキスト修正部３０５に出力する。
【０１０３】
本実施形態では、このようにテキスト情報が入力された場合であっても、そのテキスト情報を端末２０の表示部２０３上に表示させる。
これにより、本実施形態によれば、入力がテキスト情報であっても、第１実施形態と同様の効果を得ることができる。
【０１０４】
なお、本発明における会議支援システム１の全てまたは一部の機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することにより会議支援システム１が行う処理の全てまたは一部を行ってもよい。なお、ここでいう「コンピュータシステム」とは、ＯＳや周辺機器等のハードウェアを含むものとする。また、「コンピュータシステム」は、ホームページ提供環境（あるいは表示環境）を備えたＷＷＷシステムも含むものとする。また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ＲＯＭ、ＣＤ−ＲＯＭ等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶装置のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムが送信された場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリ（ＲＡＭ）のように、一定時間プログラムを保持しているものも含むものとする。
【０１０５】
また、上記プログラムは、このプログラムを記憶装置等に格納したコンピュータシステムから、伝送媒体を介して、あるいは、伝送媒体中の伝送波により他のコンピュータシステムに伝送されてもよい。ここで、プログラムを伝送する「伝送媒体」は、インターネット等のネットワーク（通信網）や電話回線等の通信回線（通信線）のように情報を伝送する機能を有する媒体のことをいう。また、上記プログラムは、前述した機能の一部を実現するためのものであってもよい。さらに、前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるもの、いわゆる差分ファイル（差分プログラム）であってもよい。
【符号の説明】
【０１０６】
１…会議支援システム、１０…入力装置、２０，２０−１，２０−２…端末、３０…会議支援装置、４０…音響モデル・辞書ＤＢ、５０…議事録・音声ログ記憶部、１１−１，１１−２，１１−３…入力部、２０１…操作部、２０２…処理部、２０３…表示部、２０４…通信部、３０１…取得部、３０２…音声認識部、３０３…テキスト変換部、３０５…テキスト修正部、３０６…議事録作成部、３０７…通信部、３０８…認証部、３０９…操作部、３１０…処理部、３１０１…発言可否判定部、３１１…表示部
【図１】
2018174439.tif 000003
【図２】
2018174439.tif 000004
【図３】
2018174439.tif 000005
【図４】
2018174439.tif 000006
【図５】
2018174439.tif 000007
【図６】
2018174439.tif 000008
【図７】
2018174439.tif 000009
【図８】
2018174439.tif 000010
【図９】
2018174439.tif 000011
【図１０】
2018174439.tif 000012