(57)【要約】【課題】  従来の会議システムは、撮像した映像データを複数の端末の少なくとも１つに表示し、入力音声をテキストデータに変換し、これを所定の議事録に記録し、記録した議事録を複数の端末に表示可能とすることができないという問題点があった。【解決手段】  音声入力手段と、表示部とを備えた会議端末と、少なくとも１つの撮像手段と、前記会議端末が通信回線を介して複数接続された映像会議システムにおいて、前記撮像手段が撮像した映像データを前記接続された複数の会議端末の少なくとも１つの会議端末の表示部に表示する映像表示手段と、前記音声入力手段に入力された音声をテキストデータに変換する音声変換手段と、該変換されたテキストデータを所定の議事録フォーマットに記録する音声テキスト記録手段と、該記録された議事録フォーマットを前記接続された複数の会議端末の表示部に表示可能とする議事録表示手段と、より構成されることを特徴とする。【選択図】  図１
2005295017.tif 000002
【特許請求の範囲】
【請求項１】
音声入力手段と、表示部とを備えた会議端末と、少なくとも１つの撮像手段と、
前記会議端末が通信回線を介して複数接続された映像会議システムにおいて、
前記撮像手段が撮像した映像データを前記接続された複数の会議端末の少なくとも１つの会議端末の表示部に表示する映像表示手段と、
前記音声入力手段に入力された音声をテキストデータに変換する音声変換手段と、
該変換されたテキストデータを所定の議事録フォーマットに記録する音声テキスト記録手段と、
該記録された議事録フォーマットを前記接続された複数の会議端末の表示部に表示可能とする議事録表示手段と、
より構成されることを特徴とする映像会議システム。
【請求項２】
前記音声テキスト記録手段は、当該音声が入力された会議端末の固有情報と共に記録することを特徴とする前記請求項１に記載の映像会議システム。
【請求項３】
前記会議端末は、会議参加者の登録を行うことにより当該会議端末の音声入力手段及び撮像手段を有効と判断する参加者登録手段を有し、
該参加者登録手段により有効と判断された会議端末の音声入力手段への音声入力を前記音声変換手段によりテキストデータに変換することを特徴とする前記請求項１または請求項２に記載の映像会議システム。
【請求項４】
前記会議端末の固有情報は、前記参加者登録手段により登録された会議参加者の固有情報であることを特徴とする前記請求項１乃至請求項３に記載の映像会議システム。
【請求項５】
前記撮像手段が撮像する映像データのうち、前記音声入力がされた会議端末近傍を前記通信回線に接続された複数の会議端末の各表示手段に強調して表示する強調表示手段を備えたことを特徴とする前記請求項１乃至請求項４に記載の映像会議システム。
【請求項６】
前記記録された議事録フォーマットを予め設定された情報端末または所定の手続により設定した情報端末に送信する議事録送信手段と、
該送信された議事録フォーマットを受信した前記情報端末は、当該議事録フォーマットにアクセスして当該情報端末の固有データを記録することにより当該議事録フォーマットを承認する議事録承認手段とを備えたことを特徴とする前記請求項１乃至請求項５に記載の映像会議システム。
【請求項７】
前記議事録フォーマットを予め設定された情報端末または所定の手続により設定した情報端末に送信する議事録送信手段と、
該送信された議事録フォーマットを受信した前記情報端末は、当該議事録フォーマットにアクセスして当該情報端末の固有データを記録することにより当該議事録フォーマットを該会議に出席した参加者、若しくは該関係者に送信することを特徴とする前記請求項１乃至請求項５に記載の映像会議システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、映像会議システムに関し、特に通信回線を介して接続されるカメラと表示装置を用いた映像会議システムに関するものである。
【背景技術】
【０００２】
近年、カメラ映像を用いた会議システムについては、各種のシステムが提案、構築されている。
例えば、特開平１０−１７８６２４号「テレビ会議システム」には、回線で接続された複数の端末装置間で音声及び画像を含む多重化データを送受信して、一方の端末装置で入力した画像及び音声を他の端末装置で出力するテレビ会議システムが提案されている。
【０００３】
また例えば、特開２００３−２５５９７９号「データ編集方法、データ編集装置、データ編集プログラム」には、会議中の会議音声及び映像情報を入力する会議音声・映像入力部と、この会議音声・映像入力部から入力された会議音声および映像情報を蓄積する会議音声・映像データベースと、入力された音声情報及び映像情報から音声議事録と、テキスト議事録と、映像インデクシングとを作成する会議録作成部とによって構成したデータ編集装置等が提案されている。
【０００４】
上述したように従来の映像会議システムに関する技術として、例えば特許文献１〜２等がある。
【０００５】
【特許文献１】特開平１０−１７８６２４号公報
【特許文献２】特開２００３−２５５９７９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
上述した従来の各種会議システムにおいては、カメラが撮像した映像データを通信回線に接続された複数の端末の少なくとも１つに表示し、マイクに入力された音声をテキストデータに変換し、このテキストデータを所定の議事録に記録し、この記録した議事録を通信回線に接続された複数の端末に表示可能とすることができないという問題点があった。
【０００７】
また、上述した従来の各種会議システムにおいては、所定の会議項目と会議時間を設定した議事録フォーマットを有し、カメラが撮像した映像データと共に議事録フォーマットを通信回線に接続された端末の少なくとも１つに表示し、且つ、計時手段に基づいて議事の進行に伴う時間の経過を示すタイマ表示を議事録フォーマットに行うことができないという問題点があった。
本発明は上記従来技術に鑑みて為されたもので、上記の問題点を解決することを目的とする。
【課題を解決するための手段】
【０００８】
上記従来の問題点を解決するため請求項１に記載の発明は、音声入力手段と、表示部とを備えた会議端末と、少なくとも１つの撮像手段と、前記会議端末が通信回線を介して複数接続された映像会議システムにおいて、前記撮像手段が撮像した映像データを前記接続された複数の会議端末の少なくとも１つの会議端末の表示部に表示する映像表示手段と、前記音声入力手段に入力された音声をテキストデータに変換する音声変換手段と、該変換されたテキストデータを所定の議事録フォーマットに記録する音声テキスト記録手段と、該記録された議事録フォーマットを前記接続された複数の会議端末の表示部に表示可能とする議事録表示手段と、より構成されることを特徴とする。
【０００９】
また、上記従来の問題点を解決するため請求項２に記載の発明は、前記請求項１に記載の映像会議システムであって、前記音声テキスト記録手段は、当該音声が入力された会議端末の固有情報と共に記録することを特徴とする。
【００１０】
また、上記従来の問題点を解決するため請求項３に記載の発明は、前記請求項１または請求項２に記載の映像会議システムであって、前記会議端末は、会議参加者の登録を行うことにより当該会議端末の音声入力手段及び撮像手段を有効と判断する参加者登録手段を有し、該参加者登録手段により有効と判断された会議端末の音声入力手段への音声入力を前記音声変換手段によりテキストデータに変換することを特徴とする。
【００１１】
また、上記従来の問題点を解決するため請求項４に記載の発明は、前記請求項１乃至請求項３に記載の映像会議システムであって、前記会議端末の固有情報は、前記参加者登録手段により登録された会議参加者の固有情報であることを特徴とする。
【００１２】
また、上記従来の問題点を解決するため請求項５に記載の発明は、前記請求項１乃至請求項４に記載の映像会議システムであって、前記撮像手段が撮像する映像データのうち、前記音声入力がされた会議端末近傍を前記通信回線に接続された複数の会議端末の各表示手段に強調して表示する強調表示手段を備えたことを特徴とする。
【００１３】
また、上記従来の問題点を解決するため請求項６に記載の発明は、前記請求項１乃至請求項５に記載の映像会議システムであって、前記記録された議事録フォーマットを予め設定された情報端末または所定の手続により設定した情報端末に送信する議事録送信手段と、該送信された議事録フォーマットを受信した前記情報端末は、当該議事録フォーマットにアクセスして当該情報端末の固有データを記録することにより当該議事録フォーマットを承認する議事録承認手段とを備えたことを特徴とする。
【００１４】
また、上記従来の問題点を解決するため請求項７に記載の発明は、前記請求項１乃至請求項５に記載の映像会議システムであって、前記議事録フォーマットを予め設定された情報端末または所定の手続により設定した情報端末に送信する議事録送信手段と、該送信された議事録フォーマットを受信した前記情報端末は、当該議事録フォーマットにアクセスして当該情報端末の固有データを記録することにより当該議事録フォーマットを該会議に出席した参加者、若しくは該関係者に送信することを特徴とする。
【発明の効果】
【００１５】
本発明により、カメラが撮像した映像データを通信回線に接続された複数の会議端末の少なくとも１つに表示し、マイクに入力された音声をテキストデータに変換し、このテキストデータを所定の議事録に記録し、この記録した議事録を通信回線に接続された複数の会議端末に表示可能とする映像会議システムを提供することができる。
【００１６】
また、本発明により、所定の会議項目と会議時間を設定した議事録フォーマットを有し、カメラが撮像した映像データと共に議事録フォーマットを通信回線に接続された複数の会議端末の少なくとも１つに表示し、且つ、計時手段に基づいて議事の進行に伴う時間の経過を示すタイマ表示を議事録フォーマットに行う映像会議システムを提供することができる。
【発明を実施するための最良の形態】
【００１７】
本発明の実施の形態について図面を参照しながら説明する。
図１は、本発明の実施の形態である映像会議システムのブロック図の第１実施例を示す。
会議室１０には、会議室全体を撮影するカメラ１３と、このカメラ１３で撮影した映像を表示する大型の表示装置１２が備えられ、また、会議への参加者毎に会議端末１１（１１−１、１１−２、１１−３、・・・、１１−ｎ）が備えられる。
そして、これらはネットワーク１８としてサーバ１４に接続される。
また、ネットワーク１８は他のネットワーク１９に接続された承認端末１５や他の会議端末１６に接続することで、これらのネットワーク１９に接続された情報端末も映像会議に参加することができる。
サーバ１４には、会議のための各種のデータベース（メモリテーブル）が記憶されており、会議が開催されると、議事録の作成、及び、議事進行の時間管理を行う。
【００１８】
会議が開催される場合、会議室１０内の各参加者に対して会議端末１１がそれぞれ設置され、各参加者全体をカメラ１３にて撮影し、この撮影した映像を表示装置１２に表示する。
サーバ１４は、ネットワーク１８を介して会議端末１１、カメラ１３、表示装置１２を制御し、例えば会議に使用する資料を予め記憶しておき、必要に応じて、撮影している会議室の映像から切り替えて、若しくは会議室の映像と共に表示装置１２に表示する。
【００１９】
また、ネットワーク１８は他のネットワーク１９に接続された承認端末１５に接続されて会議の内容をメール機能等により送信し、承認端末１５より承認データを受信（返信）することで会議の承認を得ることができる。
さらに、他のネットワーク１９に接続された他の会議端末１６に接続することで、この他の会議端末１６も映像会議に参加することができる。
【００２０】
図１１は、本発明の実施の形態である会議システムの概略イメージを示す。
この図１１は前述した図１のシステムブロック図を実際の会議を行う場合のイメージ図とした場合の実施例を示す。
会議室には、各々の会議参加者毎に会議端末１１（１１−１、１１−２、１１−３、・・・、１１−ｎ）が備えられており、各会議端末１１はモニタを備えたパソコンとカメラやマイクが備えられている。
また、会議室には大型の表示装置１２が備えられ、また、会議室全体を撮影するカメラ１３が備えられている。
そして、各会議端末１１、表示装置１２、カメラ１３、は、サーバ１４にネットワーク接続されており、またサーバ１４は他のネットワーク等と接続され、例えば、携帯電話ネットワークと接続されて、所定の携帯電話に当該会議の各種情報をメール送信し、若しくは各種情報をメール受信するシステムである。
ここで、本実施例における表示装置１２の表示画面例は、会議室全体を表示しつつ、発言者をポップアップ表示した場合の表示の一例を示すものである。
【００２１】
図８は、本発明の実施の形態である会議端末のブロック図の実施例を示し、図８（ａ）会議端末の第１実施例、図８（ｂ）会議端末の第２実施例、図８（ｃ）会議端末の第３実施例を示す。
図８（ａ）会議端末の第１実施例は、パソコンとカメラとスピーカとマイクと翻訳装置を備えた情報表示端末である。
会議に参加する場合は、カメラにて当該会議端末の操作者（すなわち会議の参加者）を撮影し、また、マイクにて当該参加者が発生する音声が入力される。
パソコンの表示部には、通常、サーバ１４を介して表示装置１２に表示される表示画面と同様の表示が為され、またパソコンのキー操作に応じて、会議のスケジュールや会議参加者の一覧を表示する。
例えば、会議端末１１−１の参加者が発言を行う場合、マイクに入力された音声が会議室に備えられたスピーカ（図７参照）や各会議端末のスピーカより出力され、また、当該会議端末１１−１の参加者の映像（すなわち会議端末１１−１のカメラが撮影している映像）を表示装置１２及び他の会議端末１１にポップアップ表示する。
翻訳装置は、例えば英和の機能を有する翻訳装置であり、参加者が英語により発言した場合に当該英語の音声を日本語の音声に翻訳した上で他の会議端末のスピーカなどより音声出力する装置である。
【００２２】
図８（ｂ）会議端末の第２実施例は、パソコンとマイクとを備えた情報表示端末である。
会議に参加する場合は、マイクにて当該会議端末の参加者が発生する音声が入力される。
パソコンの表示部には、通常、サーバ１４を介して表示装置１２に表示される表示画面と同様の表示が為され、またパソコンのキー操作に応じて、会議のスケジュールや会議参加者の一覧を表示する。
例えば、会議端末７１−１の参加者が発言を行う場合、マイクに入力された音声が会議室に備えられたスピーカ（図７参照）より出力され、また、当該会議端末７１−１の参加者の映像を表示装置１２及び他の会議端末１１にポップアップ表示する。
この場合、図７のカメラ７３２に示すような可動カメラが撮影している映像を、当該会議端末７１−１を使用する参加者の方にその撮影方向を可動させた上で撮影する。
なお、図８（ｂ）の会議端末には必要に応じて、図８（ａ）に示す、カメラやスピーカ、翻訳装置、若しくは後述する図８（ｃ）に示す、ＩＣカード読取部、を組み込んだ会議端末としても良い。
【００２３】
図８（ｃ）会議端末の第３実施例は、パソコンとマイクとＩＣカード読取部を備えた情報表示端末である。
この図８（ｃ）会議端末の第３実施例は、前述した図８（ｂ）の各機能の他、例えば図９の参加者９２に示すような参加者固有の情報を予めＩＣカードに記憶しておき、会議に参加する際に記憶している情報をダウンロードするものである。
なお、この図８（ｃ）の会議端末には必要に応じて、図８（ａ）に示す、カメラやスピーカ、翻訳装置、を組み込んだ会議端末としても良い。
【００２４】
図７は、本発明の実施の形態である映像会議システムのブロック図の第２実施例を示す。
会議室７０には、会議室全体を撮影するカメラ７３１と、会議室内の所望の場所を撮影するカメラ７３２と、これらのカメラ７３１、７３２で撮影した映像を表示する大型の表示装置７２が備えられ、また、会議への参加者毎に会議端末７１（７１−１、７１−２、７１−３、・・・、７１−ｎ）が備えられる。
そして、これらはネットワーク７８としてサーバ７４に接続される。
また、ネットワーク７８は他のネットワーク７９に接続された承認端末７５や他の会議端末７６に接続することで、これら他のネットワーク７９に接続された情報端末も映像会議に参加することができる。
サーバ７４には、会議のための各種のデータベース（メモリテーブル）が記憶されており、会議が開催されると、議事録の作成、及び、議事進行の時間管理を行う。
また、任意の会議端末７１のマイクより音声入力がされて、この音声を所定の言語に翻訳する場合の翻訳機能を備える。
【００２５】
会議が開催される場合、会議室７０内の各参加者に対して会議端末７１がそれぞれ設置され、各参加者全体をカメラ７３１にて撮影し、この撮影した映像を表示装置７２に表示する。
また、カメラ７３２は、任意の会議端末７１の参加者が発言を行う場合に当該参加者の方向を撮影するように可動して撮影し、この撮影した映像を表示装置７２に表示する。
なおカメラ７３２の可動は可動手段である雲台とカメラのズーム焦点機能等と組み合わせて可動する。
サーバ７４は、ネットワーク７８を介して会議端末７１、カメラ７３１、カメラ７３２、表示装置７２を制御し、例えば会議に使用する資料を予め記憶しておき、必要に応じて、撮影している会議室の映像から切り替えて、若しくは会議室の映像と共に表示装置７２に表示する。
【００２６】
また、ネットワーク７８は他のネットワーク７９に接続された承認端末７５に接続されて会議の内容をメール機能等により送信し、承認端末７５より承認データを受信（返信）することで会議の承認を得ることができる。
さらに、他のネットワーク７９に接続された他の会議端末７６に接続することで、この他の会議端末７６も映像会議に参加することができる。
【００２７】
図４は、本発明の実施の形態であるサーバに記憶された議事録設定データベースの実施例を示す。
議事録Ｎｏ（ナンバー）４１、会議名４２、日時４３、場所４４、参加者一覧コード４５、承認者４６、より構成され、さらに、会議名４２は議題４２１と内容４２２、承認者４６は承認者アドレス４６１と承認者名前４６２と承認日時４６３、とより構成される。
【００２８】
図５は、本発明の実施の形態であるサーバに記憶されたアジェンダデータベースの実施例を示す。
議事録Ｎｏ（ナンバー）５１、スケジュール５２、時間管理５３、承認５４、より構成され、さらに、スケジュール５２はスケジュールＮｏ（ナンバー）５２１とスケジュール内容５２２、時間管理５３は設定時間５３１と実時間５３２と進捗５３３と警告有無５３４、承認５４は承認者アドレス５４１と承認日時５４２、とより構成される。
【００２９】
図６は、本発明の実施の形態であるサーバに記憶された議事録内容データベースの実施例を示す。
議事録Ｎｏ（ナンバー）６１、スケジュールＮｏ（ナンバー）６２、議事内容コメント６３、発言者６４、責任者６５、期限６６、より構成され、さらに、発言者６４は参加者コード６４１とその要否６４２、責任者６５は参加者コード６５１とその要否６５２、とより構成される。
任意の議事内容コメント６３に対して、発言者６４は発言した参加者の参加者コード６４１とその発言者が発言したことを議事録に記載するか否かを要否６４２にて設定し、当該責任者６５は決定された責任者の参加者コード６５１とその責任そのものを要否６５２にて設定する。
【００３０】
図９は、本発明の実施の形態であるサーバに記憶された参加者データベースの実施例を示す。
参加者一覧９１、参加者９２、出欠席９３、より構成され、さらに、参加者一覧９１は参加者一覧コード９１１と議事録Ｎｏ（ナンバー）９１２、参加者９２は参加者コード９２１と参加者名前９２２と言語（国名）９２３と、出欠席９３は参加アドレス９３１と出欠席予定９３２と出欠席結果９３３と、とより構成される。
【００３１】
図４、図５、図６、図９の各データベースにおいて、会議までに少なくとも議事録Ｎｏ（４１、５１、６１、９１２）を予め設定（登録）しておく必要があり、設定の際には何れかのデータベースに対して設定を行うことで、各データベースにリンクされて各データベースのデータテーブルとして成立する。
またこれら各データベースにおいて、承認者アドレス４６１と承認者５４１と参加アドレス９３１はリンクしており、例えば、図４の承認者４６に設定する情報は図９の参加アドレス９３１のデータに基づいて、承認者４６２を参加者名前９２２より登録し、またその登録する際の時間をタイマ機能（図示せず）より取得して承認日時４６３を登録する。
またこれら各データベースにおいて、参加者コード６４１と９２１、参加者コード６５１と９２１、はそれぞれリンクしており、例えば任意の参加者が発言を行った場合に、当該参加者が使用する会議端末に設定されている図９の参加者コード９２１のデータに基づいて、図６の参加者コード６４１登録され、これを表示する場合には当該参加者コードに基づく参加者の名前９２２を表示させる。
なお、この参加者コード６４１と９２１、参加者コード６５１と９２１、でのそれぞれリンクは参加アドレス９３１に基づいてリンクされても良い。
またこれら各データベースにおいて、スケジュールＮｏ５２１と６２はリンクしている。
またこれら各データベースにおいて、参加者一覧コード４５と９１はリンクしている。
また、図４、図５、図６、図９の各データベースは、各々のメモリテーブル形式のリンクデータに基づいて、１つ、または、複数のデータベースとして各データを記憶することができる。
【００３２】
図２は、本発明の実施の形態である議事録の表示画面の実施例を示す。
領域２１は、会議の基本的事項が表示される領域であり、議題、日時、場所、出席者、内容、について、図４の当該会議の議事録Ｎｏに基づいて各々、議題４２１、日時４３、場所４４、参加者一覧コード４５、内容４２２、より取得（図２の領域２１のアンダライン部分）して表示する。
領域２３は、会議のスケジュールの項目が表示される領域であり、図５のスケジュール５２より取得して、現在会議が進行中の該当するスケジュールＮｏとスケジュール内容を表示する。
【００３３】
領域２４（２４−１、２４−２、・・・、２４−ｎ）は、会議での発言がされた場合の音声データをテキストデータに変換して図６の議事内容コメント６３に記憶し、この記憶されたテキストデータを取得して表示する。
ここで、議事内容コメント６３は、会議の議長や書記を行う会議端末からの操作により必要に応じてテキストデータの修正や変更等を行う。
【００３４】
領域２５（２５−１、２５−２、・・・、２５−ｎ）は、領域２４（２４−１、２４−２、・・・、２４−ｎ）と対を為しており、発言者を特定する表示を図６の参加者コード６４１に基づいて行う。
なお、図２では発言者の名前を表示するように、図６の参加者コード６４１にリンクした図９の参加者コード９２１に基づいて、参加者名前９２２を取得して表示している。
ここで領域２５は、会議の議長や書記を行う会議端末からの操作により発言者２５の表示を行うか否かを図６の要否６４２により設定することができる。
これは例えば、「鈴木二郎」が「では、中国進出について検討しましょう。」といった発言を行った場合、図６のスケジュールＮｏ６２「２．」に対応する議事内容コメント６３に発言した音声データをテキストデータに変換した「では、中国進出について検討しましょう」が記憶され、また発言した会議端末の特定により当該発言者の参加者コード６４「ａｂｃ００５５」が記憶される。
そして、会議の議長や書記を行う参加者による会議端末からの操作により、記憶したテキストデータを「中国進出について検討する。」と修正し、さらに、当該発言者６４の要否６４２欄を「否」と設定する。
したがって、図２においては、領域２４−２「中国進出について検討する。」、領域２５−２は表示無し（図２ではカッコ書きにて「（鈴木）」と記載）とすることができる。
【００３５】
領域２６は、会議の議長や書記を行う参加者による会議端末からの操作により、当該領域２４（すなわち、議事内容コメント６３）に対して、必要に応じて責任者や期限を入力することで、図６の責任者６５や期限６６を設定する。
【００３６】
領域２４−ｘ、及び、領域２５−ｘについては、前述した領域２４、及び、領域２５とほぼ同様に記憶登録や表示がされるが、領域２５−ｘの発言者欄に当該領域２４−ｘが「結論」であることを示す予め設定した所定のコードを入力することで、その所定のコードが図６の参加者コード６４１に登録されて、予め設定されたフォーマットである「結論：」と共に議事の内容の表示を行いつつ、図６の議事内容コメント６３にその内容が登録される。
【００３７】
領域２７は、会議の議事進行のスケジュールを簡易的に示す表示領域であり、図５のアジェンダデータベースより必要なデータを取得して表示する。
本実施例（図２の領域２７）による表示の場合、図５のスケジュールＮｏ５２１とスケジュール内容５２２と進捗５３３が表示されている場合を示す。
なお、現状の会議進行がスケジュールＮｏ５２１「２．」である場合は、その表示の行について、反転表示や点滅表示等の強調表示を行うことができる。
【００３８】
領域２９は、会議の議事進行の時間的な状況を簡易的に示す表示領域であり、図５のアジェンダデータベースの時間管理５３に基づいて表示される。
なお、領域２７や領域２９は、詳細な表示については図３に示すアジェンダの表示画面にて表示されるものであり、図２の議事録の表示画面においては必要に応じて表示されるようにしても良い。
【００３９】
領域２８−１は、承認者が承認端末１５（７５）より会議の途中にメール機能などによって指示内容（アドバイス）を送信した場合に、これをサーバ１４（７４）が受信し、図６の議事録内容データベースに記憶して、これを表示する。
この記憶を行う場合、図９の参加者アドレス９３１と送信された（受信した）メールのアドレスとを比較して、承認端末からの送信であることを認識し、図６の参加者コード６５１に当該参加アドレス９３１に対応する参加者コード９２１を記憶し、スケジュールＮｏ６２にはメール受信である旨を示すデータを記憶し、送信されたメールの内容を議事内容コメント６３に記憶する。
【００４０】
領域２８−２は、他のネットワーク１９（７９）に接続された会議端末１６（７６）より会議に参加している参加者が、会議の途中にメール機能などによってコメント等（アドバイス）を送信した場合に、これをサーバ１４（７４）が受信し、図６の議事録内容データベースに記憶して、これを表示する。
この記憶を行う場合、図９の参加者アドレス９３１と送信された（受信した）メールのアドレスとを比較して、他のネットワークを介した会議端末からの送信であることを認識し、図６の参加者コード６４１に当該参加アドレス９３１に対応する参加者コード９２１を記憶し、スケジュールＮｏ６２にはメール受信である旨を示すデータを記憶し、送信されたメールの内容を議事内容コメント６３に記憶する。
【００４１】
領域２２は、承認者が承認端末１５（７５）より会議終了後にメール機能などによって指示や承認の旨を示すデータを送信した場合に、これをサーバ１４（７４）が受信し、図４の議事録設定データベースの承認者４６に記憶する。
そして当該議事録を発行する際にこれを表示記録した議事録データとして各参加者へ配信し、若しくは、プリントアウトを行う。
なお、会議進行の区切り、例えば、図５のスケジュールＮｏ５２１毎に承認することもできる。
【００４２】
なお、図２の各領域は、議事録が表示された状態にて、表示画面上のデータを会議の議長や書記を行う参加者による会議端末からの操作により、修正や変更、追加等を行うことで、各領域に該当する各データベースの記憶部分に記憶、設定が為される。
【００４３】
図３は、本発明の実施の形態であるアジェンダの表示画面の実施例を示す。
領域３１は、会議の基本的事項が表示される領域であり、議題、日時、場所、出席者、内容、について、図４の当該会議の議事録Ｎｏに基づいて各々、議題４２１、日時４３、場所４４、参加者一覧コード４５、内容４２２、より取得（図３の領域３１のアンダライン部分）して表示する。
【００４４】
領域３４（３４−１、３４−２、・・・、３４−ｎ）は、会議の議事進行のスケジュールを示す表示領域であり、図５のアジェンダデータベースより必要なデータを取得して表示し、本実施例ではスケジュールＮｏ５２１とスケジュール内容５２２が表示されている。
また、領域３５（３５−１、３５−２、・・・、３５−ｎ）と領域３３（３３−１、３３−２、・・・、３３−ｎ）は、領域３４（３４−１、３４−２、・・・、３４−ｎ）と対を為しており、それぞれ図５のアジェンダデータベースの設定時間５３１、進捗５３３よりデータを取得して表示される。
なお、領域３３については、会議の議長や書記を行う参加者による会議端末からの操作により、当該スケジュールの開始時にその旨を示す入力を行うことで、本実施例に示す「進行中」が表示され、また図５の進捗５３３に記憶される。
また、当該スケジュールの終了時にその旨を示す入力を行うことで、本実施例に示す「終了」が表示され、また図５の進捗５３３に記憶される。
また、議事を行っていないスケジュールについては、図５の進捗５３３に「未着手」が予め初期設定されており、当該領域３３にその旨が表示される。
【００４５】
領域３６は、時計手段により現在の時刻を表示している。
ここで時計手段は、サーバ１４（７４）または任意の会議端末１１（７１）に備えられた時計機能、若しくは、ネットワーク１８（７８）に接続された時計機能等より現在の時刻を取得している。
なお、現状の会議進行のスケジュールＮｏ５２１に関する図５のデータベースの各データを表示する各領域、例えば、スケジュールＮｏ５２１「２．」である場合の各表示の領域３４−２、３３−２、３５−２について、反転表示や点滅表示等の強調表示を行うことができる。
【００４６】
領域３７−１、領域３７−２は設定した予定時間（すなわち図５の設定時間５３１）と、時計機能による実際の経過時間とに基づいて表示する。
本実施例においては、領域３７−１は時刻の表示、領域３７−２は進行状況をバー形式により表示している。
また、これら領域３７−１、３７−２は、会議全体の時間についての表示、若しくは、各スケジュール毎の時間についての表示、を切り替えて、または共に表示する。
会議全体の時間についての表示は、図５における当該会議の議事録Ｎｏ５１の各設定時間５３１の中より、開始時刻が一番早い時刻と終了時刻が一番遅い時刻を取得して、当該会議全体の予定された開始時刻及び終了時刻とする。
また、スケジュール毎の時間についての表示は、領域３４の中の該当するスケジュールを選択して所定の操作がされると、図５の該当する設定時間５３１の開始時刻と終了時刻が取得されて表示される。
なお、領域３７−１は、時刻の表示の他、設定時間帯を１００としたパーセント形式の表示やこれらを組合せ、または切り替えて表示しても良い。
なお、領域３７−２は、本実施例ではバー形式の表示により進行状況の視認性を良くしているが、さらに例えば、通常は灰色のバーにて表示し、終了予定５分前は青色のバー表示、終了予定５分経過後は黄色、終了予定１０分経過後は赤色の表示、というようにしても良い。
【００４７】
領域３９は、会議の議事進行の時間的な状況を簡易的に示す表示領域であり、図５のアジェンダデータベースの時間管理５３に基づいて表示される。
【００４８】
そして、領域３３、領域３５、領域３７、領域３９は、領域３６に表示される現在の時刻に基づいて、それぞれ必要な処理が為される。
例えば、領域３４−２「２．特定地域促販について」が現在議事進行中である場合、領域３５−２「１４：００〜１５：００」の設定時間と、領域３６の現在の時刻「１５：１０」が比較され、設定時間より１０分超過していることを認識し、領域３９にその旨として「警告：１０分超過、・・・」という表示が為される。
また、領域３３−２「進行中」や領域３５−２の設定時間（すなわち、予め設定した設定時間５３１、領域３７について、反転表示や点滅表示等の強調表示をすることができる。
【００４９】
また、領域３５は、アジェンダが表示された状態にて、表示画面上の設定時間を会議の議長や書記を行う参加者による会議端末からの操作により変更等を行うことで、会議時間の設定を変更することができ、その際、変更した設定時間が図５の設定時間５３１に更新登録される。
またこのような設定時間の変更を行ったことを示すデータを表示し、若しくは図５の時間管理５３に記憶することができる（図示せず）。
【００５０】
領域３２は、承認者が承認端末１５（７５）よりメール機能などによって指示や承認の旨を示すデータを送信した場合に、これをサーバ１４（７４）が受信し、図４の議事録設定データベースの承認者４６に記憶し、これを表示している。
また、会議進行の区切りである領域３４毎（すなわち、図５のスケジュールＮｏ５２１毎）に対応する当該領域３３の「終了」の旨について承認することもできる。
これは例えば、当該スケジュールについての会議は終了した旨を当該スケジュールの議事録の内容（図６の該当するスケジュールＮｏ６２、議事内容コメント６３、発言者６４、責任者６５、期限６６）と共に承認端末１５（７５）へ送信し、これを承認者が承認する旨の返信を行うことで、図５の承認５４に承認した承認者アドレス５４１と承認日時５４２として記憶される。
【００５１】
領域３８−１は、承認者が承認端末１５（７５）より予め会議の前までにメール機能などによって指示内容（アドバイス）を送信した場合に、これをサーバ１４（７４）が受信し、図５のアジェンダデータベースに記憶して、これを表示する。
この記憶を行う場合、図９の参加者アドレス９３１と送信された（受信した）メールのアドレスとを比較して、承認端末からの送信であることを認識し、図５の承認者アドレス５４１に記憶し、スケジュールＮｏ５２１にはメール受信である旨を示すデータを記憶し、送信されたメールの内容をスケジュール内容５２２に記憶する。
【００５２】
領域３８−２は、当該会議に参加することのできない参加者の会議端末１１（７１）や１６（７６）より、予め会議の前までにメール機能などによってコメント等（アドバイス）を送信した場合に、これをサーバ１４（７４）が受信し、図５のアジェンダデータベースに記憶して、これを表示する。
この記憶を行う場合、送信された（受信した）メールのアドレスを図５の承認者アドレス５４１に記憶し、スケジュールＮｏ５２１にはメール受信である旨を示すデータを記憶し、送信されたメールの内容をスケジュール内容５２２に記憶する。
【００５３】
図１０は、本発明の実施の形態である各種の表示画面の実施例を示し、図１０（ａ）は全体映像の表示例、図１０（ｂ）は発言者のポップアップ映像の表示例、図１０（ｃ）は全体映像と議事録の表示例、図１０（ｄ）は参加者一覧の表示例、図１０（ｅ）はアジェンダと議事録の表示例、図１０（ｆ）は各種資料や映像を組み合わせて表示する場合の表示例、を示す。
例えば、会議中の通常は、図１０（ａ）全体映像を表示装置または会議端末１１またはこれらの両方に表示しておき、発言者があった場合には図１０（ｂ）の発言者のポップアップ映像を会議室の全体映像に重ねて表示する。
このポップアップ映像の場合、発言者の映像と共に発言者の情報として予め登録している図９の参加者９１の情報を表示する。
また各表示画面の下欄にある「Ｆ１」〜「Ｆ６」はファンクションキーを示す例であり、例えば「Ｆ１」には議事録をポップアップ表示する「議事録」が対応して設定してあり、「Ｆ１」キーを押下することで図１０（ｃ）に示すような議事録の表示が全体映像と共に表示される。
【００５４】
ここで、ファンクションキー「Ｆ１」〜「Ｆ６」については、例えば現状表示している表示の形式により予め異なる機能を設定しておくことができ、さらに機能を示す名称（例えば「議事録」）をそのまま表示することができる。
これは例えば図１０（ａ）全体映像の場合には、「Ｆ１」を「議事録」（すなわち図１０（ｃ））、「Ｆ２」を「アジェンダ」、「Ｆ３」を「参加者一覧のサムネイル」（すなわち図１０（ｄ））、「Ｆ４」を「登録資料」、「Ｆ５」を「アジェンダと議事録」（すなわち図１０（ｅ））、「Ｆ６」を「リセット画面」というように設定する。
また、例えば図１０（ｄ）は参加者一覧の場合には、「Ｆ１」を「議事録」（すなわち図１０（ｃ））、「Ｆ２」を「アジェンダ」、「Ｆ３」を「参加者一覧の表」、「Ｆ４」を「サムネイルの拡大表示」、「Ｆ５」を「アジェンダと議事録」（すなわち図１０（ｅ））、「Ｆ６」を「リセット画面」というように設定する。
なお、ファンクションキーの表示は、各参加者個々に使用する会議端末１１の表示部には表示し、会議参加者全体に対する表示を行う表示装置１２には表示しなくとも良い。
この場合の表示装置１２は、例えば表示装置１２と連動した会議端末により、会議の議長や書記を担当する者が表示装置１２の表示切り替えを行うようにする。
また、各参加者個々に使用する会議端末１１は、各参加者の操作により各表示画面を適宜切り替えて各々表示し、前述した「Ｆ６」に対応する「リセット画面」によって、表示装置１２が現状表示している表示画面を表示する。
【００５５】
図１０（ｂ）や図１０（ｆ）に示すような発言者のポップアップ映像を表示する場合には幾つかの手段がある。
例えば、図８（ａ）のマイクの入力（オンオフ）スイッチ（図示せず）を、当該会議端末１１を使用する参加者がオンすることにより、当該会議端末１１のカメラが撮影する映像すなわち当該参加者をポップアップ表示するものである。
また例えば、図８（ａ）のマイクへの音声入力による音声レベルを検知することで、当該会議端末１１を使用する参加者が発言を行ったことを認識して、当該会議端末１１のカメラが撮影する映像をポップアップ表示するものである。
また例えば、図８（ａ）の各会議端末のカメラが撮影する画像データを解析する画像認識により、発言を行ったことを撮影している参加者の口の動きに応じて判断し、当該会議端末１１のカメラが撮影する映像をポップアップ表示するものである。
またこれらのマイクへの音声入力と画像認識とを組み合わせることで、参加者が発言したことをより正確に判断することができる。
ここで、図８（ｂ）の会議端末７１の場合には、前述したマイクの入力（オンオフ）スイッチ、若しくは、マイクへの音声入力による音声レベルを検知することで、図９に示す予め登録してある参加者９２のデータがポップアップ表示される。
この場合、当該参加者の映像データが図９の参加者コード９２１とリンクして予め登録されている場合には、当該参加者の映像データを表示することができる。
【００５６】
図１２は、本発明の実施の形態である議事録機能の動作フローチャートの実施例を示す。
会議の議長や書記等、所定の権限を持つ会議参加者が任意の会議端末からの操作により議事録フォーマットを選択する（ステップｓ３０１）。
選択したフォーマットに基づいて、例えば図４の議事録設定データベース及び図５のアジェンダデータベースに会議進行に関する各種の入力を行う（ステップｓ３０２）。
次に図４の参加者一覧コード４５に参加者に関するデータを入力する（ステップｓ３０３）。
この入力の際、図９の参加者データベースを参照すべき旨のデータを入力し、または、図９の参加者データベースより参加者のデータを取得することができる。
会議が開催されると、図２や図３を表示し、若しくは、表示できるように設定し、図６の議事録内容データベースに基づく議事録の作成を行う機能が動作して発言内容を記録する（ステップｓ３０４）。
また、図５のアジェンダデータベースに基づく時間管理が時計手段と連動して為される（ステップｓ３０４〜ステップｓ３０５）。
そして図３の領域３４の各スケジュール毎に、当該スケジュールが終了したか否かを、図３の領域３３に基づいて判断する（ステップｓ３０６）。
ここで、任意のスケジュールが終了すると次のスケジュールへ移行する（ステップｓ３０７）。
そして、ステップｓ３０４からステップｓ３０７までの動作を全部のスケジュールが終了するまで繰り返し行われ（ステップｓ３０８）、全部が終了すると終了時間を記録する。（ステップｓ３０９）
以上の動作により図２の議事録の表示画面に示すような議事録が作成され、必要な修正や編集等を行い（ステップｓ３１０）、当該議事録を配信し、またはプリントアウト等の出力を行うことができる（ステップｓ３１１）。
【００５７】
一方、前述したステップｓ３０４により記録している議事録の内容について、必要がある場合や予め設定した時間がある場合（ステップｓ３６１のＹ）、承認端末１５（７５）や他の会議端末１６（７６）に対して当該議事録の内容を送信する（ステップｓ３６２）。
承認端末１５（７５）や他の会議端末１６（７６）からの送信による受信、または、ステップｓ３６２の返信による受信がある場合は（ステップｓ２６３のＹ）、その受信した内容を議事録へ記録する（ステップｓ３０４）。
このような動作により図２の領域２８に示すような表示を行うことができる。
【００５８】
本発明の実施の形態によると、カメラが撮像した映像データを通信回線に接続された複数の会議端末の少なくとも１つに表示し、マイクに入力された音声をテキストデータに変換し、このテキストデータを所定の議事録に記録し、この記録した議事録を通信回線に接続された複数の会議端末に表示可能とする映像会議システムとすることができる。
【００５９】
また、本発明の実施の形態によると、所定の会議項目と会議時間を設定した議事録フォーマットを有し、カメラが撮像した映像データと共に議事録フォーマットを通信回線に接続された複数の会議端末の少なくとも１つに表示し、且つ、計時手段に基づいて議事の進行に伴う時間の経過を示すタイマ表示を議事録フォーマットに行う映像会議システムとすることができる。
【００６０】
さらに、本発明により、カメラが撮像した映像データを通信回線に接続された複数の会議端末の少なくとも１つに表示し、マイクに入力された音声をテキストデータに変換し、このテキストデータを所定の言語に翻訳し、この翻訳データとテキストデータとをリンクして所定の議事録フォーマットに記録し、この記録された議事録フォーマットを通信回線に接続された複数の会議端末に表示可能とする映像会議システムとすることができる。
【図面の簡単な説明】
【００６１】
【図１】本発明の実施の形態である映像会議システムのブロック図の第１実施例を示す。
【図２】本発明の実施の形態である議事録の表示画面の実施例を示す。
【図３】本発明の実施の形態であるアジェンダの表示画面の実施例を示す。
【図４】本発明の実施の形態であるサーバに記憶された議事録設定データベースの実施例を示す。
【図５】本発明の実施の形態であるサーバに記憶されたアジェンダデータベースの実施例を示す。
【図６】本発明の実施の形態であるサーバに記憶された議事録内容データベースの実施例を示す。
【図７】本発明の実施の形態である映像会議システムのブロック図の第２実施例を示す。
【図８】本発明の実施の形態である会議端末のブロック図の実施例を示し、（ａ）会議端末の第１実施例、（ｂ）会議端末の第２実施例、（ｃ）会議端末の第３実施例を示す。
【図９】本発明の実施の形態であるサーバに記憶された参加者データベースの実施例を示す。
【図１０】本発明の実施の形態である各種の表示画面の実施例を示し、（ａ）は全体映像の表示例、（ｂ）は発言者のポップアップ映像の表示例、（ｃ）は全体映像と議事録の表示例、（ｄ）は参加者一覧の表示例、（ｅ）はアジェンダと議事録の表示例、（ｆ）は各種資料や映像を組み合わせて表示する場合の表示例、を示す。
【図１１】本発明の実施の形態である会議システムの概略イメージを示す。
【図１２】本発明の実施の形態である議事録機能の動作フローチャートの実施例を示す。
【符号の説明】
【００６２】
１０、７０：会議室、１９、７９：他ネットワーク、
１１（１１−１、１１−２、・・・、１１−ｎ）、７１（７１−１、７１−２、・・・、７１−ｎ）：会議端末、
１２、７２：表示装置、  １３、７３：カメラ、  ７３１：カメラ（全体）、  ７３２：カメラ（可動）、  １４、７４：サーバ、  ７７：スピーカ、
１５、７５：承認端末、  １６、７６：会議端末（他ネットワーク接続）。
【図１】
2005295017.tif 000003
【図２】
2005295017.tif 000004
【図３】
2005295017.tif 000005
【図４】
2005295017.tif 000006
【図５】
2005295017.tif 000007
【図６】
2005295017.tif 000008
【図７】
2005295017.tif 000009
【図８】
2005295017.tif 000010
【図９】
2005295017.tif 000011
【図１０】
2005295017.tif 000012
【図１１】
2005295017.tif 000013
【図１２】
2005295017.tif 000014