(57)【要約】【課題】傍聴者が操作する通信端末への配信に要する負荷を軽減することで、簡易なハードウェアで構成することが可能な会議システムおよび会議端末装置を提供する。【解決手段】会議システムは、複数の発言者のうち主催者が操作する主催者端末Ｍと、他の発言者が操作する発言者端末Ａ１，Ａ２と、発言者端末Ａ１に縦続接続され、発言者端末Ａ１を介して主催者端末Ｍへ会議動画を送信する発言者端末Ａ３と、主催者端末Ｍ末からの会議動画を受信して同報配信する配信サーバＳＶと、傍聴者が操作して、配信サーバＳＶから同報配信される会議動画を受信して会議を傍聴する１以上の傍聴者端末Ｂとを備えている。主催者端末Ｍは、発言者端末Ａ１から送信された会議動画と、自らの会議動画とを合成し、発言者端末Ａ１および配信サーバＳＶへＩＰネットワークＮＷを介して送信する。配信サーバＳＶは、主催者端末Ｍから送信される会議動画を、傍聴者端末Ｂへ送信する。【選択図】図１３
2010093479.tif 000002
【特許請求の範囲】
【請求項１】
複数の発言者のうち一の発言者が操作する第１の通信端末と、他の発言者が操作する少なくとも１台の第２の通信端末と、前記第１の通信端末からの会議音声を受信して同報配信する配信サーバと、傍聴者が操作して、前記配信サーバから同報配信される会議音声を受信して会議を傍聴する１以上の第３の通信端末とが通信可能にネットワークに接続され、
前記第１の通信端末は、前記第２の通信端末から送信された会議音声と、自らの会議音声とを合成する合成手段と、前記合成手段で合成された会議音声を配信サーバおよび前記第２の通信端末に前記ネットワークを介して送信する送信手段とを備え、
前記配信サーバは、同報配信する送信先の第３の通信端末を記憶する記憶手段と、前記第１の通信端末から送信される会議音声を、前記記憶手段に記憶された送信先の第３の通信端末に対して前記ネットワークを介して送信する配信手段とを備えたことを特徴とする会議システム。
【請求項２】
前記第１の通信端末における前記合成手段は、会議音声に加えて映像を合成し、前記配信サーバにおける前記配信手段は、前記合成手段で合成された会議音声および映像を会議動画として配信することを特徴とする請求項１記載の会議システム。
【請求項３】
前記第３の通信端末は、ストリーミング再生手段を有し、前記配信サーバから配信される前記会議動画を前記ストリーミング再生手段により再生することを特徴とする請求項２記載の会議システム。
【請求項４】
前記配信サーバは、前記記憶手段に記憶された前記第３の通信端末に対して会議の開始を通知する通知手段を有することを特徴とする請求項１から３のいずれかの項に記載の会議システム。
【請求項５】
前記第１の通信端末は、会議に新たに加わろうとする第４の通信端末からの会議参加要求を受信すると、前記第２の通信端末に会議参加要求するよう指示し、
前記第２の通信端末は、前記第４の通信端末からの会議参加要求を受信すると通話を許可し、前記第４の通信端末からの会議音声と自らの音声とを合成して前記第１の通信端末へ送信することを特徴とする請求項１から４のいずれかの項に記載の会議システム。
【請求項６】
前記第１の通信端末は、前記第２の通信端末が会議から外れたときに、当該第２の通信端末が会議通話許可した第４の通信端末が存在する場合には、この第４の通信端末を第２の通信端末として会議を行うことを特徴とする請求項５記載の会議システム。
【請求項７】
前記第４の端末は、前記第２の通信端末に障害を検知したときに、前記第１の通信端末に障害発生を通知し、
前記第１の通信端末は、この第４の通信端末を第２の通信端末として会議を行うことを特徴とする請求項５記載の会議システム。
【請求項８】
前記第１の通信端末、前記第２の通信端末および前記第４の通信端末は、イントラネットで接続され、前記第１の通信端末、前記配信サーバおよび前記第３の通信端末は、インターネットで接続されていることを特徴とする請求項５から７のいずれかの項に記載の会議システム。
【請求項９】
前記第１の通信端末、前記第２の通信端末、前記第４の通信端末および前記配信サーバは、イントラネットで接続され、前記配信サーバと前記第３の通信端末は、インターネットで接続されていることを特徴とする請求項５から７のいずれかの項に記載の会議システム。
【請求項１０】
複数の発言者のうち一の発言者が操作する会議端末装置において、
他の発言者が操作する少なくとも１台の発言者端末から送信された会議音声と、自らの会議音声とを合成する合成手段と、
前記合成手段で合成された会議音声を、前記発言者端末へ送信すると共に、会議を傍聴する１以上の傍聴者端末へ同報配信する配信サーバへネットワークを介して送信する送信手段とを備えたことを特徴とする会議端末装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数の発言者が発言する会議を１以上の傍聴者が傍聴することが可能な会議システムおよび会議端末装置に関する。
【背景技術】
【０００２】
多地点に配置されている端末がネットワークに通信可能に接続され、それぞれの端末から送信される複数の発言者からの会議音声をサーバにて合成して、多地点の端末へ配信する会議システムが使用されるようになってきた。
【０００３】
例えば、特許文献１に記載の多地点会議システムでは、発言者グループに属する端末からの音声データをミキシングした音声データを生成する電話会議サーバと、前記電話会議サーバによりミキシングされた音声データを発言者グループと聴取者グループに属する端末に配信する音声配信サーバとを有したものである。
【特許文献１】特開２００５−２６９３４７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかし、特許文献１に記載の多地点会議システムでは、電話会議サーバにより合成された発言者グループの端末からの会議音声を、音声配信サーバが発言者グループに属する端末全部だけでなく、聴取者グループに属する端末全部までも会議音声を配信しているので、高速に音声処理したり、ネットワークに対して高速に配信したりするハードウェアが必要である。
【０００５】
そこで本発明は、傍聴者が操作する通信端末への配信に要する負荷を軽減することで、簡易なハードウェアで構成することが可能な会議システムおよび会議端末装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明は、複数の発言者のうち一の発言者が操作する第１の通信端末と、他の発言者が操作する少なくとも１台の第２の通信端末と、前記第１の通信端末からの会議音声を受信して同報配信する配信サーバと、傍聴者が操作して、前記配信サーバから同報配信される会議音声を受信して会議を傍聴する１以上の第３の通信端末とが通信可能にネットワークに接続され、前記第１の通信端末は、前記第２の通信端末から送信された会議音声と、自らの会議音声とを合成する合成手段と、前記合成手段で合成された会議音声を配信サーバおよび前記第２の通信端末に前記ネットワークを介して送信する送信手段とを備え、前記配信サーバは、同報配信する送信先の第３の通信端末を記憶する記憶手段と、前記第１の通信端末から送信される会議音声を、前記記憶手段に記憶された送信先の第３の通信端末に対して前記ネットワークを介して送信する配信手段とを備えたことを特徴とする。
【発明の効果】
【０００７】
本発明は、第１の通信端末が会議音声の合成と共に、第２の通信端末への送信までを行うことで、配信サーバに対して、傍聴者が操作する第３の通信端末への配信に要する負荷を軽減することで、簡易なハードウェアで構成することが可能である。
【発明を実施するための最良の形態】
【０００８】
本願の第１の発明は、複数の発言者のうち一の発言者が操作する第１の通信端末と、他の発言者が操作する少なくとも１台の第２の通信端末と、第１の通信端末からの会議音声を受信して同報配信する配信サーバと、傍聴者が操作して、配信サーバから同報配信される会議音声を受信して会議を傍聴する１以上の第３の通信端末とが通信可能にネットワークに接続され、第１の通信端末は、第２の通信端末から送信された会議音声と、自らの会議音声とを合成する合成手段と、合成手段で合成された会議音声を配信サーバおよび第２の通信端末にネットワークを介して送信する送信手段とを備え、配信サーバは、同報配信する送信先の第３の通信端末を記憶する記憶手段と、第１の通信端末から送信される会議音声を、記憶手段に記憶された送信先の第３の通信端末に対してネットワークを介して送信する配信手段とを備えたことを特徴としたものである。
【０００９】
第１の発明によれば、複数の発言者のうちの一の発言者が操作する第１の通信端末の合成手段が第２の通信端末から送信された会議音声と、自らの会議音声とを合成し、送信手段が合成された会議音声を配信サーバおよび第２の通信端末に送信するので、配信サーバは、記憶手段に記憶された送信先の第３の通信端末へ第１の通信端末から送信される会議音声を、配信手段より送信しているので、配信サーバは負荷を配信に要する負荷が軽い。従って、第１の通信端末が、第２の通信端末から送信された会議音声と、自らの会議音声とを合成し、合成された会議音声を第２の通信端末に送信する機能を備えていれば、送信先に配信サーバを加えるだけでよく、配信サーバは、第１の通信端末や、１台以上の第２の通信端末への配信は不要であり、傍聴者が操作する第３の通信端末へ配信するだけよいので、高い性能は必要ない。よって、本発明は、傍聴者が操作する第３の通信端末への配信に要する負荷を軽減することで、簡易なハードウェアで構成することが可能である。
【００１０】
本願の第２の発明は、第１の発明において、第１の通信端末における合成手段は、会議音声に加えて映像を合成し、配信サーバにおける配信手段は、合成手段で合成された会議音声および映像を会議音声／映像として配信することを特徴としたものである。第２の発明により、合成手段が会議音声に加えて映像を合成するので、第１の通信端末は音声のみならず映像も送信することができる。
【００１１】
本願の第３の発明は、第２の発明において、第３の通信端末は、ストリーミング再生手段を有し、配信サーバから配信される会議音声／映像をストリーミング再生手段により再生することを特徴としたものである。第３の発明により、第３の通信端末を操作する傍聴者は音声のみならず会議における映像も傍聴することができる。
【００１２】
本願の第４の発明は、第１から第３のいずれかの発明において、配信サーバは、記憶手段に記憶された第３の通信端末に対して会議の開始を通知する通知手段を有することを特徴としたものである。第３の発明により、第３の通信端末を操作する傍聴者は通知手段による通知で会議の開始を知ることができる。
【００１３】
本願の第５の発明は、第１から第４のいずれかの発明において、第１の通信端末は、会議に新たに加わろうとする第４の通信端末からの会議参加要求を受信すると、第２の通信端末に会議参加要求するよう指示し、第２の通信端末は、第４の通信端末からの会議参加要求を受信すると通話を許可し、第４の通信端末からの会議音声と自らの音声とを合成して第１の通信端末へ送信することを特徴としたものである。第５の発明により、第１の通信端末は、第４の通信端末が新たに会議に加わっても、第２の通信端末から送信されるからの会議音声と自らの音声とを合成すればよいので、会議音声の合成数が増加しない。
【００１４】
本願の第６の発明は、第５の発明において、第１の通信端末は、第２の通信端末が会議から外れたときに、当該第２の通信端末が会議通話許可した第４の通信端末が存在する場合には、この第４の通信端末を第２の通信端末として会議を行うことを特徴としたものである。第６の発明により、第１の通信端末は第４の通信端末からの会議音声と他の会議音声とを合成して第２の通信端末の代わりに第４の通信端末へ送信するので、第２の通信端末が会議を外れても、支障なく会議を継続することができる。
【００１５】
本願の第７の発明は、第５の発明において、第４の端末は、第２の通信端末に障害を検知したときに、第１の通信端末に障害発生を通知し、第１の通信端末は、この第４の通信端末を第２の通信端末として会議を行うことを特徴としたものである。第７の発明により、第１の通信端末は第４の通信端末からの会議音声と他の会議音声とを合成して第２の通信端末の代わりに第４の通信端末へ送信するので、第２の通信端末が障害で会議を継続できなくなって会議を外れても、支障なく会議を継続することができる。
【００１６】
本願の第８の発明は、第５から第７のいずれかの発明において、第１の通信端末、第２の通信端末および第４の通信端末は、イントラネットで接続され、第１の通信端末、配信サーバおよび第３の通信端末は、インターネットで接続されていることを特徴としたものである。第８の発明により、第１の通信端末、第２の通信端末および第４の通信端末は同じ企業内や施設内に配置することができ、配信サーバおよび第３の通信端末が、遠隔地にあってもインターネットを介して通信することができる。
【００１７】
本願の第９の発明は、第１の通信端末、第２の通信端末、第４の通信端末および配信サーバは、イントラネットで接続され、配信サーバと第３の通信端末は、インターネットで接続されていることを特徴としたものである。第９の発明により、第１の通信端末、第２の通信端末、第４の通信端末および配信サーバは同じ企業内や施設内に配置することができ、第３の通信端末は遠隔地にあってもインターネットを介して通信することができる。
【００１８】
本願の第１０の発明は、複数の発言者のうち一の発言者が操作する会議端末装置において、他の発言者が操作する少なくとも１台の発言者端末から送信された会議音声と、自らの会議音声とを合成する合成手段と、合成手段で合成された会議音声を、発言者端末へ送信すると共に、会議を傍聴する１以上の傍聴者端末へ同報配信する配信サーバへネットワークを介して送信する送信手段とを備えていることを特徴としたものである。第１０の発明により、第１の発明と同様に、本発明の会議端末装置が、発言者端末から送信された会議音声と、自らの会議音声とを合成し、合成された会議音声を発言者端末に送信する機能を備えていれば、送信先に配信サーバを加えるだけでよく、配信サーバは、本発明の会議端末装置や、１台以上の発言者端末への配信は不要であり、傍聴者が操作する傍聴者端末へ配信するだけよいので、高い性能は必要ない。よって、傍聴者が操作する傍聴者端末への配信に要する負荷を軽減することで、簡易なハードウェアで構成することが可能である。
【００１９】
（実施の形態）
本発明の実施の形態に係る会議システムを図面に基づいて説明する。図１は、本発明の実施の形態に係る会議システム全体の構成を示す図である。
【００２０】
図１に示すように会議システム１は、会議の出席者の音声や映像を混合（ミキシング）して会議音声／映像として配信するものである。会議システム１は、主催者となる出席者が操作する主催者端末Ｍ（第１の通信端末）と、会議で発言をする出席者が操作する発言者端末Ａ（Ａ１，Ａ２：第２の通信端末，Ａ３：第４の通信端末）と、配信サーバＳＶと、会議を傍聴する傍聴者が操作する傍聴者端末Ｂ（Ｂ１〜Ｂｎ：第３の通信端末）とが、ＩＰ（Ｉｎｔｅｒｎｅｔ  Ｐｒｏｔｏｃｏｌ）ネットワークＮＷを介して通信可能に接続されている。
【００２１】
本実施の形態では、会議端末装置として機能する主催者端末Ｍと、発言者端末Ａ１〜Ａ４は、企業内のイントラネットＮ１に接続され、配信サーバＳＶおよび傍聴者端末Ｂは、これらとインターネットＮ２を介して接続されている。以下、主催者端末Ｍ、発言者端末Ａおよび傍聴者端末Ｂを、単に「端末」と称することがある。
【００２２】
なお、図１においては、各端末や配信サーバＳＶとＩＰネットワークＮＷとを接続するためのハブや、ルータなどは図示していない。また、配信サーバＳＶがマルチキャストでＩＰパケットを送信する経路に配置されるマルチキャスト対応ルータも省略している。
（主催者端末Ｍの構成）
次に、主催者端末Ｍについて図２に基づいて説明する。図２は、図１に示す会議システムの会議端末装置として機能する主催者端末の構成を示すブロック図である。
【００２３】
主催者端末Ｍは、自らの会議音声および会議映像と、主催者端末Ｍに接続されたそれぞれの発言者端末Ａから送られてくる会議音声および会議映像を加えた音声および映像（以下、会議音声／映像とする）を合成して、それぞれの発言者端末Ａへ返送する。また主催者端末Ｍは前記合成された会議音声／映像を、傍聴者端末Ｂを操作する傍聴者に会議を傍聴させるために配信サーバＳＶへ送信する。主催者端末Ｍは、入出力部２と、ＡＤ／ＤＡ部３と、演算処理部４と、符号化部５と、復号化部６と、チャネルデータ処理部７と、パケット制御部８と、呼制御部９と、通信部１０と、情報格納部１１と、通信制御部１２とを備えている。
【００２４】
入出力部２は、出席者の音声（周囲の音も含む）や映像を取得して音声信号および映像信号としてＡＤ／ＤＡ部３へ出力したり、ＡＤ／ＤＡ部３からの音声信号および映像信号を再生したりする。入出力部２は、音声についてマイクおよびスピーカとすることができ、映像についてカメラおよびディスプレイとすることができる。
【００２５】
ＡＤ／ＤＡ部３は、入出力部２からのアナログ信号と、演算処理部４からのデジタル信号を相互に変換して、アナログ信号は入出力部２へ出力され、デジタル信号は非圧縮の線形データの音声・映像として演算処理部４へ出力される。
【００２６】
演算処理部４は、復号化部６から出力された他の端末からの音声・映像と、入出力部２からの音声・映像とをそれぞれ合成して符号化部５へ出力する合成手段として機能する。また、演算処理部４は、他の端末からの音声・映像を受信していないときは、入出力部２からの音声・映像を合成データとして符号化部５へ出力する。演算処理部４が音声を合成するときは、それぞれの音声に対して音声レベルを調整して合成される。映像を合成するときは、通信制御部１２からの制御により合成する数に応じて表示サイズ全体を分割して全体に収まるように合成される。例えば、主催者端末Ｍと発言者端末Ａ１との映像を合成する場合には、表示サイズの１／２ずつの大きさとしたものを左右に配置して一つの映像とする。
【００２７】
符号化部５は、入力された非圧縮の線形データに対して符号化することで、全体のデータ容量を圧縮した会議音声／映像を生成して、チャネルデータ処理部７へ出力する。符号化の方式は、音声データであれば、例えば、Ｇ．７１１とすることができる。また、映像データであれば、Ｈ．２６１，Ｈ．２６３，Ｈ．２６４とすることができるが、他の端末と通信可能なコーデックであれば採用することが可能である。
【００２８】
復号化部６は、チャネルデータ処理部７から出力された複数の出席者からの会議音声／映像を復号化して音声・映像として演算処理部４へ出力する。
【００２９】
チャネルデータ処理部７は、演算処理部４により合成され、符号化部５により符号化された会議音声／映像（圧縮データ）を、通信制御部１２から指定された送信先の通話チャネルごとに対応させてパケット制御部８へ出力する。また、チャネルデータ処理部７は、パケット制御部８からの会議音声／映像を、送信元の通話チャネルごとに対応させて復号化部６へ出力する。
【００３０】
パケット制御部８は、チャネルデータ処理部７からの符号化された会議音声／映像をフレーム単位に分割し、フレームとした音声データにヘッダ（コーデックタイプおよび通し番号（シーケンス番号）を含む）を付加してＲＴＰ（Ｒｅａｌ−ｔｉｍｅ  Ｔｒａｎｓｐｏｒｔ  Ｐｒｏｔｏｃｏｌ）パケットを生成して通信部１０を介してＩＰネットワークＮＷへ送信する。また、パケット制御部８は、通信部１０を介して受信したＲＴＰパケットから会議音声／映像を抽出してチャネルデータ処理部７へ出力する。
【００３１】
また、パケット制御部８は、呼制御部９からの呼制御メッセージをＩＰパケットとして送信したり、通信部１０からＩＰパケットから呼制御メッセージを抽出して呼制御部９へ出力したりする。
【００３２】
呼制御部９は、ＳＩＰ（Ｓｅｓｓｉｏｎ  Ｉｎｉｔｉａｔｉｏｎ  Ｐｒｏｔｏｃｏｌ）に基づいて通信相手への発呼、通信相手からの着呼、または通信相手との通話などの動作を制御する。
【００３３】
通信部１０は、ＩＰネットワークＮＷとのＩＰパケットの送受信を行うＩＥＥＥ８０２．３等のＬＡＮ  （Ｌｏｃａｌ  Ａｒｅａ  Ｎｅｔｗｏｒｋ）物理層インタフェースである。
【００３４】
情報格納部１１は、会議音声／映像の送信先である配信サーバＳＶのＩＰアドレスや、会議に参加している発言者端末ＡのＩＰアドレスなどの管理情報や、その他の様々な情報が記憶されるメモリである。
【００３５】
通信制御部１２は、主催者端末Ｍ全体の統括制御をする他、発言者端末Ａからの会議への参加要求に対する許可制御や、演算処理部４に対して合成の制御を行う。また、通信制御部１２は、会議に参加している発言者端末Ａを管理し、合成された会議音声／映像を参加している発言者端末Ａへ向けて送信するよう呼制御部９を介してパケット制御部８へ指示する。本実施の形態の主催者端末Ｍは、通信制御部１２と呼制御部９とパケット制御部８と通信部１０とで送信部が構成されている。
【００３６】
操作部１３は、電話番号を入力する数字キーや、各種の機能キーと、表示画面とを備えている。この操作部１３を操作して設定や会議音声／映像の開始などを指示する。通信制御部１２は、押下された操作部１３の機能キーに対応して各種の機能を実現している。
（発言者端末Ａの構成の説明）
次に、発言者端末Ａの構成を図３に基づいて説明する。図３は、図１に示す会議システムの出席者端末の構成を示すブロック図である。
【００３７】
なお、図３に示す発言者端末Ａの入出力部２、ＡＤ／ＤＡ部３、演算処理部４、符号化部５、復号化部６、チャネルデータ処理部７、パケット制御部８、呼制御部９、通信部１０および操作部１３は、図２に示す主催者端末Ｍの各構成と同じ機能であるため、同符号を付して説明を省略する。
【００３８】
発言者端末Ａは、他の発言者端末が接続されていない場合は自らの音声および映像を主催者端末Ｍへ送信する。また発言者端末Ａは、他の発言者端末が接続している場合は、自らの音声および映像に、連結された他の発言者端末からの音声および映像を合成して主催者端末Ｍへ送信する。この発言者端末Ａの情報格納部１１ｘには、自らの会議音声および映像または合成した会議音声／映像を送信する主催者端末ＭのＩＰアドレスが格納されている。
【００３９】
通信制御部１２ｘは、発言者端末Ａ全体を統括制御する他、主催者端末Ｍへの会議の参加要求の制御や、他の発言者端末Ａからの会議参加要求に対しての許可制御などを行っている。
（配信サーバＳＶの構成）
次に、配信サーバＳＶを、図４に基づいて説明する。図４は、図１に示す会議システムの配信サーバの構成を示すブロック図である。
【００４０】
なお、図４に示す配信サーバＳＶのパケット制御部８、呼制御部９および通信部１０は図２に示す主催者端末Ｍの各構成と同じ機能であるため、同符号を付して説明を省略する。
【００４１】
配信サーバＳＶにはマルチキャスト処理部１４と、チャネルコーデック部１５と、記憶装置１６とが設けられている。
【００４２】
マルチキャスト処理部１４は、複数の傍聴者端末Ｂをマルチキャストアドレスで指定し、マルチキャストアドレスに対して会議音声／映像をマルチキャスト送信する。
【００４３】
配信経路中のマルチキャスト対応ルータは、宛先に応じて会議音声／映像をコピーし、マルチキャストグループへ同報配信をする。このマルチキャスト送信は、ＩＧＭＰ（ｉｎｔｅｒｎｅｔ  ｇｒｏｕｐ  ｍａｎａｇｅｍｅｎｔ  ｐｒｏｔｏｃｏｌ）を使用してマルチキャストグループへ参加した傍聴者端末Ｂへ送信される。
【００４４】
チャネルコーデック部１５は、パケット損失補償（Ｐａｃｋｅｔ  Ｌｏｓｓ  Ｃｏｎｃｅａｌｍｅｎｔ）処理を行う。すなわち、チャネルコーデック部１５は、主催者端末Ｍや発言者端末Ａの符号化部５および復号化部６と同様な符号化および復号化の機能を備え、パケット制御部８からの会議音声／映像を復号化し、音声データおよび映像データが正常であるか否かをチェックする。データに異常が生じている場合、影響を低減できるようなデータに補間する。復号化され補間された音声・映像データは、記憶装置１６へ一旦格納される。チャネルコーデック部１５は、記憶装置１６へ一旦格納した音声・映像データを符号化し、マルチキャスト処理部１４へ渡す。記憶装置１６としては、リアルタイムで会議音声／映像を転送可能なように高速アクセス可能かつ大容量のハードディスク装置が使用される。
【００４５】
また、配信サーバＳＶには、情報格納部１１ｙと通信制御部１２ｙとが設けられている。情報格納部１１ｙには、配信サーバＳＶが配信する会議音声／映像の配信先である傍聴者端末Ｂ（Ｂ１〜Ｂｎ）のＩＰアドレスや、この傍聴者端末Ｂを操作する傍聴者の所属、氏名、電話番号、電子メールアドレスが含まれる情報が登録リストとして格納される記憶手段として機能する。
【００４６】
通信制御部１２ｙは、配信サーバＳＶ全体の統括制御をする他、主催者端末Ｍからのマルチキャスト要求に応じて傍聴者端末Ｂへ会議音声／映像を配信するようにマルチキャスト処理部１４へ指示する機能を備えている。また、通信制御部１２ｙは、傍聴者端末Ｂへ会議音声／映像を配信するときには事前に会議の開催を通知して傍聴者へ傍聴開始を促す通知手段として機能する。
（傍聴者端末Ｂの構成）
次に、傍聴者端末Ｂを、図５に基づいて説明する。図５は、図１に示す会議システムの傍聴者端末の構成を示すブロック図である。
【００４７】
図５に示す傍聴者端末Ｂのチャネルデータ処理部７、復号化部６、呼制御部９、通信部１０は、図２に示す主催者端末Ｍの各構成と同じ機能であるため、同符号を付して説明を省略する。また、傍聴者端末Ｂのチャネルデータ処理部７ｘとパケット制御部８ｘとは、図２に示す主催者端末Ｍのチャネルデータ処理部７およびパケット制御部８の一方向のみの機能を備えたものであるため説明を省略する。
【００４８】
傍聴者端末Ｂに設けられている出力部２ｘは、ＤＡ部３ｘからの会議の出席者の合成された音声・映像を再生するスピーカおよびディスプレイである。ＤＡ部３ｘは、ストリーミング処理部１７からのデジタル信号である非圧縮の線形データをアナログ信号に変換する。
【００４９】
ストリーミング処理部１７は、復号化部６から非圧縮の線形データをバファリングしながら、ＤＡ部３ｘに対してストリーミングデータとして出力するストリーミング再生手段として機能するものである。
【００５０】
情報格納部１１ｚには、様々な設定情報が格納されている。通信制御部１２ｚは、傍聴者端末Ｂ全体の資源管理などの統括的な制御をする他、配信サーバＳＶに対して会議音声／映像の配信を要求する。
（会議システムの動作および使用状態）
以上のように構成された本発明の実施の形態に係る会議システムの動作および使用状態を図６から図１８に基づいて説明する。
（傍聴者端末Ｂの登録）
まず傍聴者が、開催される会議を傍聴したい場合に行う配信要求の登録を、図６に基づいて説明する。図６は、傍聴者端末の登録を説明するためのシーケンス図である。なお、図６において、傍聴者は傍聴者端末Ｂの操作部１３を操作して配信サーバＳＶへ配信要求の登録を行っているが、他のパーソナルコンピュータから登録操作してもよい。
【００５１】
図６に示すように、傍聴者端末Ｂを操作する傍聴者は、傍聴者端末Ｂ上で動作する認証プログラムを起動して認証画面を表示させたり、配信サーバＳＶにウェブアクセスし、傍聴者端末Ｂで動作させたブラウザに配信サーバＳＶから送信された認証画面を表示させたりして、それぞれの傍聴者に割り当てられた識別情報（例えば、ユーザＩＤとパスワードなど）を入力する。傍聴者端末Ｂは、入力された識別情報を配信サーバＳＶへ送信する（ステップＳ１０）。
【００５２】
配信サーバＳＶは、傍聴者端末Ｂから送信された識別情報が、情報格納部１１ｙに格納された登録リストに含まれているか否かを判定する。この登録リストには、配信サーバＳＶへのアクセスおよび会議の傍聴が許可されている傍聴者に関する情報が登録されており、傍聴者の氏名、所属、電話番号、ユーザＩＤ、パスワード、傍聴者端末ＢのＩＰアドレス、配信の有効／無効フラグなどが含まれている。傍聴者端末Ｂに入力されたユーザＩＤおよびパスワード（識別情報）が、登録リストに含まれていれば、アクセス許可の通知を傍聴者端末Ｂへ送信する（ステップＳ１１）。なお、新規の傍聴者が認証を得たい場合には、新規の傍聴者は配信サーバＳＶに対して管理者権限を有する管理者に依頼しておく。管理者は傍聴者の認証のための識別情報を管理者権限のＩＤ・パスワードを用いて配信サーバにログインして、予め傍聴者から取得しておいた傍聴者に関する情報を登録する。これで、傍聴者は傍聴者端末Ｂを操作して傍聴可能な状態となる。
【００５３】
次に、配信サーバＳＶからのアクセス許可を受信した傍聴者端末Ｂは、開催された会議の傍聴を希望することを示す配信要求を送信する（ステップＳ１２）。
【００５４】
配信サーバＳＶは、配信要求が送信された傍聴者端末ＢのＩＰアドレスに関連付けられている配信の有効／無効フラグを有効とする傍聴者端末Ｂの登録を行う（ステップＳ１３）。
【００５５】
傍聴者端末Ｂの登録が完了すると、配信サーバＳＶは登録が完了したことを示す完了通知を傍聴者端末Ｂへ送信する（ステップＳ１４）。
【００５６】
完了通知を受信した傍聴者端末Ｂは、配信サーバＳＶがマルチキャストで会議音声／映像を配信する際の配信条件を示すマルチキャスト配信条件設定要求を送信する。このマルチキャスト配信条件設定要求は、例えば、会議音声の音質や、スロー再生など設定を配信条件として送信する（ステップＳ１５）。
【００５７】
配信サーバＳＶは、このマルチキャスト条件設定要求を受信すると、会議音声／映像をマルチキャスト送信する際の条件として情報格納部１１ｙに登録する（ステップＳ１６）。
【００５８】
そして、配信サーバＳＶは、傍聴者端末Ｂの登録が完了したことを示す完了の通知を傍聴者端末Ｂへ送信する（ステップＳ１７）。
（全体の流れ）
次に、主催者端末Ｍを操作する主催者と、発言者端末Ａ１を操作する出席者とが会議を行っている会議音声／映像を、傍聴者端末Ｂ（Ｂ１〜Ｂｎ）を操作する傍聴者が傍聴する一連の流れについて、図７および図８に基づいて説明する。図７は、会議システムによる会議の全体の流れを説明するためのシーケンス図、図８は、２者会議を行っている会議システムを示す図である。
【００５９】
なお、図７においては、発言者端末Ａ１と主催者端末Ｍとの間で、会議参加要求および会議通話許可のセッション確立を行う際に、本実施の形態では発言者端末Ａ１と主催者端末Ｍとが直接通信しているが、発言者端末Ａ１はＳＩＰサーバ（図示せず）を介して主催者端末Ｍとセッションを確立させるようにしてもよい。
【００６０】
会議で発言する出席者は、発言者端末Ａ１を操作して主催者端末Ｍへ会議参加要求を行う（ステップＳ２０）。この会議参加要求は、次のような動作で、発言者端末Ａ１から主催者端末Ｍへ送信される。
【００６１】
まず、発言者端末Ａ１では、通信制御部１２ｘが、操作部１３の会議参加要求の機能キーの押下を検知すると、情報格納部１１ｘに格納された主催者端末Ｍのアドレスを読み込み、呼制御部９へ会議参加要求の送信を指示する。呼制御部９は、主催者端末Ｍとのセッションを確立するために、パケット制御部８にＩＮＶＩＴＥメッセージの送信を指示する。パケット制御部８は、ＩＮＶＩＴＥメッセージをＩＰパケットとして通信部１０を介して主催者端末Ｍへ送信する。ＩＮＶＩＴＥメッセージには、発言者端末Ａ１と主催者端末Ｍとの間でＲＴＰパケットを交換するセッション確立のために必要なセッション情報であるＳＤＰ情報が含まれている。
【００６２】
主催者端末Ｍでは、通信部１０を介してＩＮＶＩＴＥメッセージのＩＰパケットをＩＰネットワークＮＷから受信すると、パケット制御部８により呼制御部９へＩＮＶＩＴＥメッセージが通知される。呼制御部９は、ＳＤＰ情報によりＲＴＰパケットの送信先のアドレスが発言者端末Ａ１であることが通信制御部１２へ通知される。また、呼制御部９は、このＩＮＶＩＴＥメッセージに対して、ＩＮＶＩＴＥメッセージが届いたことを示す１００Ｔｒｙｉｎｇメッセージをパケット制御部８へ出力する。パケット制御部８は、この１００ＴｒｙｉｎｇメッセージをＩＰパケットとして通信部１０を介して発言者端末Ａ１へ送信する。また、呼制御部９は、主催者端末Ｍで呼び出し音を鳴らすと共に、相手を呼び出し中であることを示す１８０Ｒｉｎｇｉｎｇメッセージをパケット制御部８へ出力することで、発言者端末Ａ１へ送信する。
【００６３】
主催者端末Ｍを操作する主催者が、会議参加要求を送信した相手を見て問題がない場合には、操作部１３のオフフックボタンを操作する。この操作により会議通話許可が発言者端末Ａ１へ送信される（ステップＳ２１）。この会議通話許可は、次のような動作で、主催者端末Ｍから発言者端末Ａ１へ送信される。
【００６４】
主催者端末Ｍでは、通信制御部１２がオフフックボタンの操作を検知すると、呼制御部９に対して会議通話許可を通知する。呼制御部９は、会議通話許可の通知により２００ＯＫメッセージを、ＩＰパケットとしてパケット制御部８へ出力することで、発言者端末Ａ１へ送信する。
【００６５】
発言者端末Ａ１では、２００ＯＫメッセージを受信したことを、呼制御部９から通信制御部１２ｘへ通知される。呼制御部９は、２００ＯＫメッセージに対して応答を示すＡＣＫメッセージをパケット制御部８により送信する。
【００６６】
主催者端末Ｍでは、このＡＣＫメッセージを受信したことで、発言者端末Ａ１との間でセッションが確立したことを認識する。セッションが確立したことで、通信制御部１２は、発言者端末Ａ１用の通信チャネルを確保したり、演算処理部４に対して自端末と発言者端末Ａ１との会議音声／映像を合成するための通話路を確保したりする。
【００６７】
主催者端末Ｍと発言者端末Ａ１との間で、セッションが確立すれば、会議通話が開始される（ステップＳ２２）。会議通話はＲＴＰパケットにより行われる。
【００６８】
発言者端末Ａ１を操作する出席者が発言した音声とその様子の映像は、発言者端末Ａ１の入出力部２から取得され、ＡＤ／ＤＡ部３により音声・映像として演算処理部４へ出力される。この場合、合成される他の音声・映像はないので、そのまま符号化部５へ出力される。符号化部５により符号化され圧縮された会議音声／映像は、チャネルデータ処理部７により主催者端末Ｍへの会議音声／映像としてパケット制御部８へ出力される。パケット制御部８は、この会議音声／映像を主催者端末ＭへのＲＴＰパケットとして通信部１０を介してＩＰネットワークＮＷへ送信する。
【００６９】
主催者端末Ｍでは、発言者端末Ａ１からのＲＴＰパケットが通信部１０を介して受信されると、パケット制御部８にて会議音声／映像が抽出されてチャネルデータ処理部７へ出力される。チャネルデータ処理部７では、発言者端末Ａ１からの会議音声／映像として管理されて、復号化部６へ出力される。また、復号化部６は、発言者端末Ａ１からの会議音声／映像を復号化し、非圧縮の線形データである音声データと映像データに戻す。
【００７０】
演算処理部４は、通信制御部１２からの制御により、主催者端末Ｍを操作する主催者と、発言者端末Ａ１を操作する出席者との２つの音声と映像を合成するように制御される。つまり、主催者が発言した音声とその様子の映像とを入出力部２により取得し、ＡＤ／ＤＡ部３により音声・映像としたものと、復号化部６から出力された発言者端末Ａ１からの音声・映像とが合成される。そして、合成された音声・映像は、一方は発言者端末Ａ１へ向けて符号化部５により符号化され、チャネルデータ処理部７およびパケット制御部８により会議音声／映像を含むＲＴＰパケットが生成されて通信部１０から送信される。他方では、ＡＤ／ＤＡ部３により合成された音声・映像が音声信号と映像信号に変換され、入出力部２のスピーカおよびディスプレイにより主催者および出席者の発言と映像を合成したものが再生される。
【００７１】
ここで、主催者が会議の内容を、他の関係者にも把握させておく必要があると感じると、操作部１３を操作して他の関係者に対して傍聴許可を与える（ステップＳ２３）。
【００７２】
この傍聴許可は、傍聴許可を与える操作部１３の機能キーの押下を検知した通信制御部１２は、配信サーバＳＶに向けてマルチキャストによる会議音声／映像の配信要求を、呼制御部９へ指示することによりパケット制御部８からマルチキャスト要求を示すＩＰパケットが送信される（ステップＳ２４）。
【００７３】
配信サーバＳＶでは、主催者端末Ｍからのマルチキャスト要求のＩＰパケットを、パケット制御部８および呼制御部９を介して受信した通信制御部１２ｙが、情報格納部１１ｙに格納された登録リストのうち、配信の有効／無効フラグが有効となっているものを読み込む（ステップＳ２５）。そして、配信サーバＳＶは、読み込んだ登録リストのうち、傍聴者の氏名、所属、電話番号を登録端末の情報として、主催者端末Ｍへ向けて送信する（ステップＳ２６）。
【００７４】
主催者端末Ｍでは、登録端末の情報を受信すると、通信制御部１２は操作部１３のディスプレイに表示する。主催者は、操作部１３のディスプレイに表示された登録端末の情報から傍聴者の一覧をチェックする（ステップＳ２７）。チェックした結果、問題がなければ、承認することを示す操作部１３の機能キーを押下する。この機能キーの押下を検知した通信制御部１２は、承認を示す通知を配信サーバＳＶへ送信する（ステップＳ２８）。
【００７５】
配信サーバＳＶでは、承認を示す通知がパケット制御部８および呼制御部９を介して受信され、通信制御部１２ｙに通知されると、登録リストに登録されている傍聴者端末Ｂに向けて会議開始を示す通知を送信する（ステップＳ２９）。
【００７６】
傍聴者端末Ｂでは、パケット制御部８および呼制御部９を介して会議開始を示す通知が受信され、通信制御部１２ｚに通知されると、操作部１３のディスプレイに会議開始を示すメッセージを、例えばポップアップウィンドウにより表示する。傍聴者は、操作部１３のディスプレイに表示された会議開始を示すメッセージを見て、会議が開催されることを認識することができる。傍聴者は、会議が開催されることを事前に促されるので、会議が開催されることを忘れていても、会議の最初から傍聴をすることができる。
【００７７】
傍聴者は、会議を傍聴する場合には操作部１３を操作する。この操作を検知した通信制御部１２ｚは、会議の傍聴の要求を示す通知をＩＰパケットとして配信サーバＳＶへ向けて送信する（ステップＳ３０）。また通信制御部１２ｚは、この会議の傍聴の要求を示す通知を配信サーバＳＶへ送信すると共に、この傍聴者端末Ｂが属するローカルグループのマルチキャスト対応ルータに対してマルチキャストグループに参加を要求することを示すホストメンバーシップレポート（ＩＧＭＰ  Ｊｏｉｎメッセージ）を送信する。このホストメンバーシップレポートを送信することで、傍聴者端末Ｂはマルチキャストグループに参加することができる。その後、主催者端末Ｍは配信サーバＳＶに向けて会議音声／映像のユニキャスト送信を開始する（ステップＳ３１ａ）。
【００７８】
配信サーバＳＶでは、主催者端末Ｍからユニキャストで送信される会議音声／映像を受信すると、パケット制御部８を介してチャネルコーデック部１５へ入力される。チャネルコーデック部１５は、会議音声／映像を復号化して非圧縮の線形データとした後、記憶装置１６に格納する。並行してチャネルコーデック部１５はパケット損失補償処理を行う。また、パケット損失補償処理を行わない場合、チャネルコーデック部１５は、会議音声／映像を復号化せずに、そのままのデータをマルチキャスト処理部１４へ出力する。
【００７９】
マルチキャスト処理部１４は、配送経路において配信サーバＳＶの直下に位置するマルチキャストに対応したルータ（図示せず）へ向けて会議音声／映像を送信するようパケット制御部８へ指示する。ルータは、この会議音声／映像の送信により傍聴者端末Ｂ（Ｂ１〜Ｂｎ）に向けてマルチキャスト送信を行う（ステップＳ３１ｂ）。
【００８０】
傍聴者端末Ｂでは、通信部１０を介して受信した会議音声／映像を、パケット制御部８によりＩＰパケットから抽出する。そしてチャネルデータ処理部７を経由して復号化部６により伸張して非圧縮の線形データへ変換して音声・映像を生成する。生成された音声・映像は、ストリーミング処理部１７にて所定容量分ほどバッファリングされる。そして所定容量となるとＤＡ部３ｘにて音声信号および映像信号に変換され、出力部２ｘのスピーカから音声が、ディスプレイから映像が再生される。図８に示すように主催者端末Ｍにより取得された主催者の音声および映像である会議音声／映像（ａ）と発言者端末Ａ１により取得された発言者の音声および映像である会議音声／映像（ｂ）とが、主催者端末Ｍにより会議音声／映像（ａ＋ｂ）として合成され、配信サーバＳＶにより配信されることで、傍聴者は会議の様子を傍聴することができる（ステップＳ３２）。
【００８１】
主催者および出席者による会議が終了すると、主催者端末Ｍか、または発言者端末Ａ１のいずれかの端末で、会議終了を示す操作部１３の機能キーを押下することで、会議相手へ会議終了を示す通知が送信される（ステップＳ３３）。
【００８２】
会議が終了したことにより主催者端末Ｍの通信制御部１２は、マルチキャスト終了の要求を示す通知を配信サーバＳＶへ送信する（ステップＳ３４）。
【００８３】
配信サーバＳＶでは、マルチキャスト終了の要求を示す通知を受信することで、了承したことを示すメッセージを主催者端末Ｍへ送信する（ステップＳ３５）と共に、マルチキャスト送信を中止する（ステップＳ３６）。
【００８４】
このように主催者端末Ｍは、発言者端末Ａから送信された会議音声／映像と、自らの音声・映像とを合成し、合成された会議音声／映像を、全ての発言者端末Ａに加えて配信サーバに送信するだけでよく、配信サーバＳＶは、主催者端末Ｍや、１台以上の発言者端末Ａへの配信は不要であり、傍聴者が操作する傍聴者端末Ｂへ配信するだけよいので、高い性能は必要ない。よって、傍聴者が操作する通信端末への配信に要する負荷を軽減することで、簡易なハードウェアで構成することが可能である。
（会議への参加）
次に、主催者端末Ｍと発言者端末Ａ１，Ａ２とが３者会議を行っているときに、更に発言者端末Ａ３が参加して４者会議を行う手順を、図９から図１３に基づいて説明する。図９は、３者会議を行っている会議システムを示す図、図１０は、３者会議から４者会議への移行を説明するためのシーケンス図、図１１は、発言者端末Ａ３が会議参加要求を主催者端末Ｍへ送信して会議に加わるときの会議システムを示す図、図１２は、主催者端末Ｍからの指示により発言者端末Ａ３が会議参加要求を再通知するときの会議システムを示す図、図１３は、４者会議を行っている会議システムを示す図である。
【００８５】
なお、本実施の形態では、主催者端末Ｍは最大２台の発言者端末Ａからの音声・映像を合成することができるものとする。
【００８６】
図９および図１０に示すように、まず、主催者端末Ｍを操作する主催者と、発言者端末Ａ１および発言者端末Ａ２を操作するそれぞれの発言者が会議を行っている。この場合、主催者端末Ｍは、自ら取得した会議音声／映像（ａ）発言者端末Ａ１からの会議音声／映像（ｂ）と、発言者端末Ａ２からの会議音声／映像（ｃ）と、主催者端末Ｍにより合成された会議音声／映像（ａ＋ｂ＋ｃ）は、配信サーバＳＶにより傍聴者端末Ｂ１〜Ｂｎへマルチキャストで配信されている。また、主催者端末Ｍにて合成された会議音声／映像（ａ＋ｂ＋ｃ）は、主催者端末Ｍにて再生される他、発言者端末Ａ１および発言者端末Ａ２へも配信され再生される（ステップＳ４０）。
【００８７】
そこへ発言者端末Ａ３を操作する発言者が会議へ参加を希望したとする。発言者は発言者端末Ａ３の操作部１３を操作して会議参加要求の入力を行う。この操作により図１１に示すように発言者端末Ａ３は会議参加要求を主催者端末Ｍへ送信する（ステップＳ４１）。
【００８８】
主催者端末Ｍでは、通信制御部１２が、現在、発言者端末Ａ１と発言者端末Ａ２との会議中であることにより接続台数が最大となっているので、これ以上の発言者端末Ａとの会議音声／映像の合成は不可であると判定する。この判定により通信制御部１２は、情報格納部１１から会議をしている発言者端末Ａを読み出し、そのうちの１台の発言者端末Ａを選択して、選択された発言者端末Ａに会議参加要求を送信するように指示を発言者端末Ａ３へ返信する。
【００８９】
本実施の形態では、図１２に示すように、発言者端末Ａ１が選択されたことにより、発言者端末Ａ１に会議参加要求を送信する指示の返信を発言者端末Ａ３へ通知している（ステップＳ４２）。主催者端末Ｍは、発言者端末Ａ３からの会議参加要求を受信することで、通信制御部１２が情報格納部１１に発言者端末Ａ１の配下に発言者端末Ａ３が接続していることを示す情報を格納する。
【００９０】
発言者端末Ａ３では、主催者端末Ｍからの返信により、会議参加要求を発言者端末Ａ１へ送信する（ステップＳ４３）。
【００９１】
発言者端末Ａ１では、現在、他の発言者端末Ａの接続はないので、会議通話許可の通知を発言者端末Ａ３へ送信する（ステップＳ４４）。これは、通信制御部１２ｘが現在接続している他の発言者端末Ａの台数と接続が許容できる台数とを比較して判定している。
【００９２】
発言者端末Ａ３では、発言者端末Ａ１からの会議通話許可の通知により自ら取得した音声および映像を会議音声／映像（ｄ）として、図１３に示すように発言者端末Ａ１へ送信する。４者会議では、発言者端末Ａ３と同様に自ら取得した音声および映像を会議音声／映像（ｃ）として主催者端末Ｍへ送信する発言者端末Ａ２と、発言者端末Ａ３と合成された会議音声／映像（ｂ＋ｄ）とを合成とした会議音声／映像（ａ＋ｂ＋ｃ＋ｄ）が配信サーバＳＶを介して傍聴者端末Ｂへ配信される。また、主催者端末Ｍにて合成された会議音声／映像（ａ＋ｂ＋ｃ＋ｄ）は、主催者端末Ｍにて再生される他、発言者端末Ａ１および発言者端末Ａ２へも配信され、発言者端末Ａ３へも発言者端末Ａ２を経由して配信される（ステップＳ４５）。
【００９３】
発言者端末Ａ３から会議音声／映像のＩＰパケットが発言者端末Ａ１の会議音声／映像と合成されて主催者端末Ｍへ送信されることで、物理的にはそれぞれの発言者端末ＡがネットワークＮＷに個々に接続され通信しているが、あたかも発言者端末Ａ３は主催者端末Ｍに発言者端末Ａ１を介在させて縦続接続されているように通信している。
【００９４】
この３者会議から４者会議への移行は、４者会議から更に他の発言者端末Ａの参加が加わる５者会議でも同様に行うことができる。この場合、発言者端末Ａの許容台数に応じて、新たな発言者端末Ａを発言者端末Ａ１に縦続接続させたり、発言者端末Ａ３へ縦続接続させたりすることができる。
【００９５】
このように発言者端末Ａを縦続接続することで、主催者端末Ｍは発言者端末Ａ３が新たに会議に加わっても、発言者端末Ａ１から送信されるからの会議音声／映像と自らの音声・映像とを合成すればよいので、会議音声の合成数が増加しない。従って、主催者端末Ｍの負荷を増加させることなく参加可能な発言者端末Ａを増やすことができる。
（会議からの退出）
次に、４者会議中に発言者端末Ａ１が会議から退出することで３者会議となる手順について、更に図１４に基づいて説明する。図１４は、発言者端末Ａ１が会議から退出して、４者会議から３者会議へ移行するときの状態を説明するためのシーケンス図である。
【００９６】
図１３に基づいて説明したように主催者端末Ｍに対して発言者端末Ａ１に発言者端末Ａ３が縦続接続していることで、主催者端末Ｍと、発言者端末Ａ１〜Ａ３とで４者会議を行っている（図１４に示すステップＳ５０）。そこへ発言者端末Ａ１を操作する発言者が会議からの退出を希望したとする。発言者は発言者端末Ａ１の操作部１３を操作して会議終了通知の入力を行う。この操作により発言者端末Ａ１は会議終了通知を、主催者端末Ｍと、発言者端末Ａ１へ直接会議音声／映像を送信している発言者端末Ａ３へ送信する（ステップＳ５１）。
【００９７】
主催者端末Ｍでは、発言者端末Ａ１からの会議終了通知により発言者端末Ａ１が会議から外れたことを認識することで、通信制御部１２は発言者端末Ａ１との会議のために確保していた資源を開放して会議を終了する（ステップＳ５２）。そして、発言者端末Ａ１へ会議音声／映像を送信していた発言者端末Ａ３へ会議通話許可を通知する（ステップＳ５３）。
【００９８】
発言者端末Ａ３では、発言者端末Ａ１からの会議終了通知と、主催者端末Ｍからの会議通話許可の通知により、今まで発言者端末Ａ１へ送信していた会議音声／映像を主催者端末Ｍへ直接送信することで、４者会議から図９に示す３者会議への移行が完了する（ステップＳ５４）。
【００９９】
４者会議では、発言者端末Ａ３の会議音声／映像を発言者端末Ａ１が自ら取得した音声・映像と共に主催者端末Ｍへ送信し、主催者端末Ｍが合成した会議音声／映像を発言者端末Ａ３へ発言者端末Ａ１を経由して送信したが、発言者端末Ａ１が会議から外れた３者会議では、発言者端末Ａ３が直接主催者端末Ｍへ送信し、主催者端末Ｍが発言者端末Ａ１に代わって発言者端末Ａ３へ送信している。これにより、主催者端末Ｍと発言者端末Ａ３との間に介在していた発言者端末Ａ１が会議から外れても、支障なく会議を継続することができる。
（発言者端末Ａの障害の発生）
次に、４者会議中に発言者端末Ａ１に障害が発生して発言者端末Ａ３からの会議音声／映像の中継ができなくなった場合に発言者端末Ａ１が外れて３者会議となる手順について、図１５から図１８に基づいて説明する。図１５は、発言者端末Ａ１の障害により４者会議から３者会議への移行するときの状態を説明するためのシーケンス図、図１６は、発言者端末Ａ１に障害が発生したときの会議システムを示す図、図１７は、下位の発言者端末Ａ３から上位の主催者端末Ｍへ障害発生を通知するときの会議システムを示す図、図１８は、３者会議へ復旧したときの会議システムを示す図である。
【０１００】
図１３に基づいて説明したように主催者端末Ｍに対して発言者端末Ａ１に発言者端末Ａ３が縦続接続していることで、主催者端末Ｍと、発言者端末Ａ１〜Ａ３とで４者会議を行っている（図１５に示すステップＳ６０）。
【０１０１】
図１６に示すように、発言者端末Ａ１に障害が発生して会議音声／映像の合成、もしくはＩＰパケットの受信または送信ができなくなったとする。従って、発言者端末Ａ２には、発言者端末Ａ２により取得された会議音声／映像（ｃ）と、主催者端末Ｍにより取得された会議音声／映像（ａ）とが合成された会議音声／映像（ａ＋ｂ）が、主催者端末Ｍから送信されているが、発言者端末Ａ３では会議音声／映像を受信することができない（ステップＳ６１）。
【０１０２】
発言者端末Ａ３では、通信制御部１２ｘが、所定時間経過しても発言者端末Ａ１からの会議音声／映像のＩＰパケットが送信されてこないことを検知した場合や、発言者端末Ａ１からのパケットに付加されたＦＣＳ（Ｆｒａｍｅ  Ｃｈｅｃｋ  Ｓｅｑｕｅｎｃｅ）などのチェックコードのエラーが多発していたり、パケットの抜けが多発していたりしていることを検知した場合に、発言者端末Ａ１の障害と判断する。発言者端末Ａ３の通信制御部１２ｘは、図１７に示すように、発言者端末Ａ１の障害を検知すると、主催者端末Ｍへ発言者端末Ａ１の障害検知の通知を送信する（ステップＳ６２）。
【０１０３】
主催者端末Ｍでは、発言者端末Ａ３からの障害検知の通知を受信すると、送信元である発言者端末Ａ３へ会議通話許可の通知を送信する（ステップＳ６３）。この通知には、発言者端末Ａ３が送信する会議音声／映像の送信先のアドレスも送信される。本実施の形態では、発言者端末Ａ１の上位の端末は主催者端末Ｍであるので、会議音声／映像の送信先のアドレスとして主催者端末ＭのＩＰアドレスを通知する。
【０１０４】
発言者端末Ａ３では、主催者端末Ｍからの会議通話許可の通知により、今まで発言者端末Ａ１へ送信していた会議音声／映像を主催者端末Ｍへ直接送信することで、図１８に示すように、主催者端末Ｍは、合成した会議音声／映像を発言者端末Ａ１ではなく、発言者端末Ａ３へ直接送信することで、４者会議から３者会議へ移行して、障害からの復旧が完了する（ステップＳ６４）。
【０１０５】
このように、４者会議では、発言者端末Ａ３の会議音声／映像を発言者端末Ａ１が自ら取得した音声・映像と共に主催者端末Ｍへ送信し、主催者端末Ｍが合成した会議音声／映像を発言者端末Ａ３へ発言者端末Ａ１を経由して送信していたが、発言者端末Ａ１に障害が発生して会議音声／映像の受け渡しができなくなると、発言者端末Ａ３が直接主催者端末Ｍへ送信し、主催者端末Ｍが発言者端末Ａ１に代わって発言者端末Ａ３へ送信するので、支障なく会議を継続することができる。
【０１０６】
本実施の形態では、発言者端末Ａ３のみが縦続接続された発言者端末Ａ１に障害が発生した場合を説明しているが、発言者端末Ａに他の発言者端末Ａが数段縦続されていても、同様の手順で復旧させることができる。具体的には、主催者端末Ｍから、障害が発生した発言者端末Ａの一段上位の発言者端末Ａのアドレスを送信先アドレスとして、障害が発生した発言者端末Ａの一段下位の発言者端末Ａに通知する。そうすることで、障害が発生した発言者端末Ａの一段下位の発言者端末Ａは、送信先アドレスへ会議音声／映像を送信するようにする。そして、一段上位の発言者端末Ａは会議音声／映像を送信している発言者端末Ａに向けて合成された会議音声／映像を送信する。このような手順とすることで、縦続接続された発言者端末Ａの途中で障害が発生しても問題なく会議を継続することができる。
【０１０７】
また、本実施の形態では、図１に示すように会議システム１は、主催者端末Ｍと、発言者端末Ａ１〜Ａ３とは、イントラネットＮ１で接続され、主催者端末Ｍと、配信サーバＳＶと傍聴者端末Ｂとは、インターネットＮ２で接続されていることで、主催者端末Ｍと、発言者端末Ａ１〜Ａ４とを同じ企業内や施設内に配置することができ、配信サーバＳＶおよび傍聴者端末Ｂが遠隔地にあってもインターネットＮ２を介して会議音声／映像を配信することができる。
【０１０８】
例えば、図１９に示す会議システム１ｘでは、主催者端末Ｍと、発言者端末Ａ１〜Ａ４の他にも配信サーバＳＶがイントラネットＮ１内に配置され、配信サーバＳＶと傍聴者端末ＢとインターネットＮ２を介して接続するように配置されている。このように配置されていることで、配信サーバＳＶは施設内のものが利用でき、傍聴者端末Ｂが遠隔地にあってもインターネットＮ２を介して会議音声／映像を配信することができる。
【０１０９】
なお、本実施の形態では、会議端末装置として機能する主催者端末Ｍは会議を主催する主催者が操作しているが、会議で発言する複数の発言者のうち一の発言者が操作できればよく、主催者以外の発言者が代わりに操作してもよい。
【産業上の利用可能性】
【０１１０】
本発明は、傍聴者が操作する通信端末への配信に要する負荷を軽減することで、簡易なハードウェアで構成することが可能なので、複数の発言者が発言する会議を１以上の傍聴者が傍聴することが可能な会議システムおよび会議端末装置に好適である。
【図面の簡単な説明】
【０１１１】
【図１】本発明の実施の形態に係る会議システム全体の構成を示す図
【図２】図１に示す会議システムの会議端末装置として機能する主催者端末の構成を示すブロック図
【図３】図１に示す会議システムの出席者端末の構成を示すブロック図
【図４】図１に示す会議システムの配信サーバの構成を示すブロック図
【図５】図１に示す会議システムの傍聴者端末の構成を示すブロック図
【図６】傍聴者端末の登録を説明するためのシーケンス図
【図７】会議システムによる会議の全体の流れを説明するためのシーケンス図
【図８】２者会議を行っている会議システムを示す図
【図９】３者会議を行っている会議システムを示す図
【図１０】３者会議から４者会議への移行を説明するためのシーケンス図
【図１１】発言者端末が会議参加要求を主催者端末へ送信して会議に加わるときの会議システムを示す図
【図１２】主催者端末からの指示により発言者端末が会議参加要求を再通知するときの会議システムを示す図
【図１３】４者会議を行っている会議システムを示す図
【図１４】発言者端末が会議から退出して、４者会議から３者会議へ移行するときの状態を説明するためのシーケンス図
【図１５】発言者端末の障害により４者会議から３者会議への移行するときの状態を説明するためのシーケンス図
【図１６】発言者端末に障害が発生したときの会議システムを示す図
【図１７】下位の発言者端末から上位の主催者端末へ障害発生を通知するときの会議システムを示す図
【図１８】３者会議へ復旧したときの会議システムを示す図
【図１９】本発明の他の実施の形態に係る会議システムを示す図
【符号の説明】
【０１１２】
Ａ，Ａ１〜Ａ３    発言者端末
Ｂ，Ｂ１〜Ｂｎ    傍聴者端末
Ｍ    主催者端末
Ｎ１    イントラネット
Ｎ２    インターネット
ＮＷ    ネットワーク
ＳＶ    配信サーバ
１，１ｘ    会議システム
２    入出力部
２ｘ    出力部
３    ＡＤ／ＤＡ部
３ｘ    ＤＡ部
４    演算処理部
５    符号化部
６    復号化部
７，７ｘ    チャネルデータ処理部
８，８ｘ    パケット制御部
９    呼制御部
１０    通信部
１１，１１ｘ，１１ｙ，１１ｚ    情報格納部
１２，１２ｘ，１２ｙ，１２ｚ    通信制御部
１３    操作部
１４    マルチキャスト処理部
１５    チャネルコーデック部
１６    記憶装置
１７    ストリーミング処理部
【図１】
2010093479.tif 000003
【図２】
2010093479.tif 000004
【図３】
2010093479.tif 000005
【図４】
2010093479.tif 000006
【図５】
2010093479.tif 000007
【図６】
2010093479.tif 000008
【図７】
2010093479.tif 000009
【図８】
2010093479.tif 000010
【図９】
2010093479.tif 000011
【図１０】
2010093479.tif 000012
【図１１】
2010093479.tif 000013
【図１２】
2010093479.tif 000014
【図１３】
2010093479.tif 000015
【図１４】
2010093479.tif 000016
【図１５】
2010093479.tif 000017
【図１６】
2010093479.tif 000018
【図１７】
2010093479.tif 000019
【図１８】
2010093479.tif 000020
【図１９】
2010093479.tif 000021