(57)【特許請求の範囲】
【請求項１】
１つあるいは複数のメディアを扱える複数の端末を収容する通信システムであって、
ユーザ毎に使用可能な端末を記憶するユーザ端末記憶手段と、
端末毎に使用可能なメディアまたは符号化方式を記憶する端末メディア記憶手段と、
あるユーザ端末から通信要求を受け付けると共に、前記ユーザ端末記憶手段と前記端末メディア記憶手段により、該通信要求を実現するために必要なこの通信に関与するユーザの各々が使用可能なメディアまたは符号化方式およびこれらを使用可能な端末を求め、該端末のうち該メディアまたは該符号化方式のうちの一部を使用可能な端末であって組み合わせることで前記通信要求を実現可能な複数の端末からなる端末の組を決定する決定手段と、
前記決定手段の決定内容に基づき、前記ユーザ端末の代わりにコール・コネクションの設定・解放を行うコール・コネクション制御手段とを備えることを特徴とする通信システム。
【請求項２】
請求項１記載のマルチメディア通信システムにおいて、
前記決定手段は、
ユーザが通信要求の中で指定したメディアまたは符号化方式と、発側ユーザが使用可能なメディアまたは符号化方式と、着側ユーザが使用可能なメディアまたは符号化方式とにより通信に使用するメディアまたは符号化方式を決定し、
前記決定した各々のメディアまたは符号化方式を使用するための発側ユーザが使用できる端末の組み合わせと、着側ユーザが使用できる端末の組み合わせとを決定する機能を有するものであることを特徴とする通信システム。
【請求項３】
請求項１記載のマルチメディア通信システムにおいて、
前記決定手段の決定結果で、通信に関わるユーザ間で通信可能なメディアまたは符号化方式及び端末の組み合わせが見つからなかった場合、通信を要求したユーザまたは端末に通信不可を通知する手段を持つことを特徴とする通信システム。
【請求項４】
請求項１記載のマルチメディア通信システムにおいて、
前記決定手段の決定結果、通信に関わるユーザ間で通信可能なメディアまたは符号化方式及び端末の組み合わせが一部のメディアまたは符号化方式についてのみ見つかった場合において、見つかった、あるいは見つからなかったメディアまたは符号化方式を、通信に要求したユーザまたは端末に通知する手段を備えることを特徴とする通信システム。
【請求項５】
請求項１記載のマルチメディア通信システムにおいて、
前記決定手段の決定結果、通信に関わるユーザ間で通信可能なメディアまたは符号化方式及び端末の組み合わせが一部のメディアまたは符号化方式についてのみ見つかった場合において、見つかったメディアまたは符号化方式についてのみコール・コネクションの設定・解放を行なう手段を設けることを特徴とする通信システム。
【請求項６】
請求項１記載のマルチメディア通信システムにおいて、
少なくともユーザの移動、或いは端末の電源ＯＮ／ＯＦＦ、或いは端末の加入者回線への接続／切断のいずれかにより、ユーザ毎に使用可能な端末の記憶内容を更新する前記ユーザ端末記憶手段を持つことを特徴とする通信システム。
【請求項７】
請求項１記載のマルチメディア通信システムにおいて、
少なくとも入出力装置の装着／脱却により端末毎に使用可能なメディアまたは符号化方式の記憶内容を更新する前記端末メディア記憶手段を持つことを特徴とする通信システム。
【請求項８】
請求項１記載のマルチメディア通信システムにおいて、
通信に用いることができる複数のメディア情報間でメディア変換を行うメディア変換手段と、
前記メディア変換手段に関し、変換するメディアまたは符号化方式の種別と、通信システム内での位置情報を記憶するメディア変換記憶手段とを持ち、
前記決定手段は、通信に参加するユーザ間で共通に使用できるメディアまたは符号化方式が存在しない場合に、第１のユーザが使用するメディアまたは符号化方式から１つ以上のメディア変換手段を介して第２のユーザの使用するメディアまたは符号化方式へ変換するメディア変換手段を探すために必要に応じて繰り返しメディア変換記憶手段を起動することで前記複数のユーザ間の通信にて各ユーザが使用するメディアまたは符号化方式とそのメディアまたは符号化方式を変換するメディア変換手段を決定する機能を有するものであることを特徴とする通信システム。
【請求項９】
請求項１記載のマルチメディア通信システムにおいて、
複数のメディア情報の演算処理を行なう多地点間メディア処理手段と、
前記多地点間メディア処理手段に関する情報として、メディア処理種別と、扱えるメディアまたは符号化方式と、通信システム内での位置情報とを記憶する多地点間メディア処理記憶手段とを備え、
前記決定手段は、通信要求の中で指定された通信形態と、通信に関与する各ユーザが使用するメディアまたは符号化方式とにより、必要に応じて、前記多地点間メディア処理手段を決定し、前記コール・コネクション制御手段は、前記通信形態に応じたトポロジーにて前記多地点間メディア処理手段と通信に使用する端末との間のコネクションの設定制御を行なうものであることを特徴とする通信システム。
【請求項１０】
複数のメディア情報間でメディア変換を行なう各種のメディア変換手段と、ユーザ毎の使用可能端末、端末毎の使用可能符号化方式をそれぞれ記憶する記憶手段とを設け、通信に関与するユーザを識別する情報とメディア種別を識別する情報とを含む通信要求に応じて、前記記憶手段により該ユーザを識別する情報で示される各ユーザの使用する端末を求め、得られた端末で使用可能な符号化方式を前記記憶手段の情報に基づいて求め、該通信に関与する各ユーザが該通信に使用する符号化方式のうちの一部を使用可能な端末であって組み合わせることで前記通信要求を実現可能な複数の端末からなる端末の組、およびメディア変換を行なうためのメディア変換手段を前記各種のメディア変換手段の中から決定し、これに基づいて前記通信要求を発した端末の代わりにコール・コネクションの設定を行なうようにすることを特徴とする通信システムの通信制御方法。
【請求項１１】
請求項１０の通信制御方法において、
複数のメディア情報間の演算処理を行なう各種の多地点間メディア処理手段を設けると共に、前記通信要求には通信形態を表す情報をさらに含め、これによって指定された通信形態に応じて、各種多地点間メディア処理手段の中から最適なものを決定し、前記符号化方式および端末の組合せ、および必要に応じて使用するメディア変換手段および決定された多地点間メディア処理手段の情報に基きコール・コネクションの設定を行なうようにすることを特徴とする通信システムの通信制御方法。
【請求項１２】
前記決定手段による決定の結果、通信に関わるユーザ間で通信可能な符号化方式及び端末の組み合わせが一部の符号化方式についてのみ見つかった場合、見つかった符号化方式についてのみコール・コネクションの設定・解放を行なうようにすることを特徴とする請求項１０記載の通信システムの通信制御方法。
【請求項１３】
１つあるいは複数のメディアを扱える複数の端末を収容する通信システムにおいて、
通信要求に応じて、１つまたは複数のメディアまたは符号化方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方を、通信に関与するユーザ間で調整して決定する調整手段を有することを特徴とする請求項１記載の通信システム。
【請求項１４】
１つあるいは複数のメディアを扱える複数の端末を収容する通信システムであって、
ユーザ毎に使用可能な端末を記憶するユーザ端末記憶手段と、
端末毎に使用可能なメディアまたは符号化方式を記憶する端末メディア記憶手段と、
ユーザによる、少なくとも通信を希望する一人以上の相手ユーザと複数のメディアに関する情報を含む通信要求の入力を受け付ける通信要求入力手段と、
前記通信要求に応じて、通信に関与するユーザの各々に対して、その通信要求の少なくとも一部を満たすために前記各ユーザが使用可能な、複数のメディアまたは符号化方式からなるメディアの組合せ、およびこれらを使用可能な複数の端末からなる端末の組合せを前記ユーザ端末記憶手段および端末メディア記憶手段のそれぞれの記憶内容に基づいて１つないしは複数組決定する候補決定手段と、
前記通信に関与する少なくとも一人のユーザに対する前記決定した複数のメディアの組合せの候補、および端末の組合せの候補を該ユーザまたは通信に関与する異なるユーザに通知し、該組合せの候補のいずれかを選択してその組合せによる通信を承認するか、あるいは通信要求の変更を希望するかの選択を、該通知を受けたユーザの入力により決定させるユーザ意図反映手段と、
この決定結果に基づいて前記ユーザの端末に代わってコール・コネクションを設定する設定手段とを備えることを特徴とする通信システム。
【請求項１５】
請求項１５記載の通信システムにおいて、
前記ユーザ意図反映手段によって通信要求の変更が選択された場合、変更内容のユーザによる入力を可能にするための通信要求変更手段を備えることを特徴とする通信システム。
【請求項１６】
請求項１５または１６いずれかに記載の通信システムにおいて、
前記ユーザ意図反映手段による複数ユーザの入力間で、不一致が生じたか、または生じる可能性のある場合、少なくとも２人以上の前記通信に関与するユーザ間で、前記組合せの候補の選択、ないしは通信要求の変更に関し調整することを可能にするためのユーザ間調整手段を備えることを特徴とする通信システム。
【請求項１７】
ネットワークに接続される複数の端末より構成される通信システムにおいて、
前記端末として、１つあるいは複数のメディアを取扱い可能な端末装置を使用すると共に、前記端末は、ユーザが、少なくとも通信を希望する一人以上の相手ユーザと複数のメディアに関する情報を含む通信要求を入力する通信要求入力手段と、
前記通信に関与する少なくとも一人のユーザに関して、該ユーザが通信要求発生時点でその通信要求の少なくとも一部を満たすために利用可能な複数のメディアの組合せ、およびこれらを使用可能な端末の組合せを該ユーザまたは通信に関与する異なるユーザに通知すると共に、該組合せのいずれかを選択してその組合せによる通信を承認するか、あるいは通信要求の変更を希望するかの選択を、該通知を受けたユーザの入力により決定させるユーザ意図反映手段と、
この決定結果に基づいて前記ユーザの端末に代わってコール・コネクションを設定する設定手段とを備えるものであることを特徴とする通信システム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明はマルチメディアサービスを実現するための通信システムに関する。
【０００２】
【従来の技術】
電子機器やコンピュータ技術および通信技術の発展に伴い、近年では音声のみならず画像（動画、静止画）やデータなど、様々なメディアの情報を端末間で授受することができるようになり、これらを自由に取り扱うことができるマルチメディアサービスが可能なった。
【０００３】
ところで、このようなサービスを利用するにあたって、様々なメディアを利用するには、相手方がそれに対応していなければならないことはいうまでもない。すなわち、複数のメディアからなる通信要求に対して、通信相手の使用する端末の有する機能の問題があり、全てのメディア扱える端末装置を備えている場合もあれば、電話端末のように音声だけしか利用できない場合もあり、あるいはＴＶ電話端末のように、動画像や静止画像と音声を扱える端末の場合もあり、あるいはファクシミリと電話等のように、画情報と音声が扱えるといった具合に、設置してある個々の端末によって扱える機能が様々である。
【０００４】
そして、個々の端末は、通信要求に含まれる複数のメディアの全てを扱えるわけではないが、各端末の機能を組み合わせることにより、通信要求に含まれる複数のメディアを扱うことができる場合がある。
【０００５】
従来はそのような状況において、通信要求に含まれる複数のメディアを満たした通信を行なうためには、通信要求を起動するユーザが所望のメディアを扱える相手の使用する端末が何であるかを認識し、それぞれの端末毎に接続要求を起動する必要があった。そのため、所望の通信を行なえるようにするまでの準備段階が大変であり、実用性に欠けるという問題があった。
【０００６】
【発明が解決しようとする課題】
このように、マルチメディアサービスを利用するにあたって、様々なメディアを利用するには、通信する相手方がそれに対応していなければならない。それは、複数のメディアからなる通信要求に対して、通信相手の使用する端末の有する機能が対応するか否かの問題であり、音声、画像、データの全てのメディア扱える端末装置を備えている場合もあれば、電話端末のように音声だけしか利用できない場合もあり、あるいはＴＶ電話端末のように、動画像や静止画像と音声を扱える端末の場合もあり、あるいはファクシミリと電話等のように、画情報と音声が扱えるといった具合に、設置してある個々の端末によって扱える機能が様々である。また、画像が扱えるといっても、扱える画像の形式が違うことも多く、また、扱えるデータや音声の方式が同じものとも限らない。
【０００７】
しかし、相手側に設置されている端末のうち、個々の端末は、通信要求に含まれる複数のメディアの全てを扱えるわけではないが、各端末の機能を組み合わせることにより、通信要求に含まれる複数のメディアを扱うことができる場合があり、このような場合、通信要求に含まれる複数のメディアを満たした通信を行なうためには、通信要求を起動するユーザが所望のメディアを扱える相手の使用する端末が何であるかを認識し、それぞれの端末毎に接続要求を起動する必要があった。そのため、所望の通信を行なえるようにするまでの準備段階が大変であり、実用性に欠けるという問題があった。
【０００８】
なお、音声端末とデータ端末とを用いて会議接続を行なう際に、会議開始のための一つの要求により、これら端末に対して接続を実現する方式として、特開昭６３‐１１４０号公報に示される技術があるが、当該方式では、音声とデータを組み合わせた会議の開始要求であることを示す特別番号の受信により、予め固定的に定められた音声端末とデータ端末とに対して接続を構成するものである。
【０００９】
そのため、汎用性に欠けることになり、組み合わせ接続の自由度の高いシステムとはいえない。
【００１０】
従って、発信時にユーザが指定したメディアに応じて、メディア処理能力の異なる相手側の複数の端末のうちの、必要なものの組み合わせを発信毎に決定し、それら端末の組合せに対して接続を実現することができるような組み合わせ接続の自由度の高いシステムの開発が嘱望されている。
【００１１】
そこでこの発明の目的とするところは、様々な複数メディアの組合せからなる通信要求を起動する際に、従来技術の問題点であった通信相手の使用する端末と、その端末が扱えるメディアをユーザが認識しなければならず、しかも複数メディアを複数端末の組み合せにて実現する場合には、それぞれの端末に対して通信要求を起動する必要があるという点を解決することにあり、発信時にユーザが指定したメディアに応じて、メディア処理能力の異なる相手側の複数の端末のうちの、必要なものの組み合わせを発信毎に自動的に決定し、それら端末の組合せに対しての接続を自動的に行なうことができるようにした通信システムおよび通信システムの通信制御方法を提供することにある。
【００１２】
また、本発明の他の目的は、複数のメディアの組合せからなる通信を、予め使用する端末を指定しないで要求して、該通信要求の複数のメディアを１つないしは複数端末の組合せで実現する場合に、ユーザの予期できない形での通信が実現されることを防止し、更に１人または複数のユーザの意図を反映した形で通信を実現することができるようにした通信システムおよび通信システムの通信制御方法を提供することにある。
【００１３】
【課題を解決するための手段】
上記目的を達成するために、本発明はつぎのようにする。
【００１４】
すなわち、第１には、本発明は、１つあるいは複数のメディアを扱える複数の端末を収容する通信システムにおいて、
ユーザ毎に使用可能な端末を記憶するユーザ端末記憶手段と、端末毎に使用可能なメディアまたはメディア実現方式を記憶する端末メディア記憶手段と、通信要求に応じて、通信に関与するユーザの各々に対して、前記ユーザ端末記憶手段と前記端末メディア記憶手段により、前記各ユーザが使用可能な１つまたは複数のメディアまたはメディア実現方式および１つ以上の端末からなる端末の組を決定する決定手段と、前記決定手段が決定したメディアおよび前記端末の組に基づき、コール・コネクションの設定・解放を行うコール・コネクション制御手段を設ける。
【００１５】
また、第２には、本発明は、前記第１の構成に、さらに、
ユーザが通信要求の中で指定したメディアまたはメディア実現方式と、発側ユーザが使用可能なメディアまたはメディア実現方式と、着側ユーザが使用可能なメディアまたはメディア実現方式とにより通信に使用するメディアまたはメディア実現方式を決定し、前記決定した各々のメディアまたはメディア実現方式を使用するための発側ユーザが使用できる端末の組み合わせと、着側ユーザが使用できる端末の組み合わせとを決定する機能を前記決定手段に付加する構成とする。
【００１６】
また、第３には、本発明は、前記第１の構成に、さらに、
前記決定手段の決定結果で、通信に関わるユーザ間で通信可能なメディアまたはメディア実現方式及び端末の組み合わせが見つからなかった場合、通信を要求したユーザまたは端末に通信不可を通知する手段を設ける構成とする。
【００１７】
また、第４には、本発明は、前記第１の構成に、さらに、
前記決定手段の決定結果で、通信に関わるユーザ間で通信可能なメディアまたはメディア実現方式及び端末の組み合わせが一部のメディアまたはメディア実現方式についてのみ見つかった場合、見つかった、あるいは見つからなかったメディアまたはメディア実現方式を、通信に要求したユーザまたは端末に通知する手段を持つ構成とする。
【００１８】
また、第５には、本発明は、前記第１の構成において、
前記決定手段の決定結果で、通信に関わるユーザ間で通信可能なメディアまたはメディア実現方式及び端末の組み合わせが一部のメディアまたはメディア実現方式についてのみ見つかった場合、見つかったメディアまたはメディア実現方式についてのみコール・コネクションの設定・解放を行なう構成とする。
【００１９】
また、第６には、本発明は、前記第１の構成に、さらに、
少なくともユーザの移動、或いは端末の電源ＯＮ／ＯＦＦ、或いは端末の加入者回線への接続／切断のいずれかにより、ユーザ毎に使用可能な端末の記憶内容を更新する前記ユーザ端末記憶手段を持つ構成とする。
【００２０】
また、第７には本発明は、前記第１の構成において、
少なくとも入出力装置の装着／脱却により端末毎に使用可能なメディアまたはメディア実現方式の記憶内容を更新する前記端末メディア記憶手段を持つ構成とする。
【００２１】
また、第８には、本発明は、前記第１の構成において、
通信に用いることができる複数のメディア情報間でメディア変換を行うメディア変換手段と、前記メディア変換手段に関する情報として変換するメディアまたはメディア実現方式の種別と、通信システム内での位置情報とを記憶するメディア変換記憶手段とを持ち、前記決定手段は、通信に参加するユーザ間で共通に使用できるメディアまたはメディア実現方式が存在しない場合に、第１のユーザが使用するメディアまたはメディア実現方式から１つ以上のメディア変換手段を接続して第２のユーザの使用するメディアまたはメディア実現方式へ至るメディア変換手段を探すために必要に応じて繰り返し、メディア変換記憶手段を起動することで前記複数のユーザ間の通信にて各ユーザが使用するメディアまたはメディア実現方式とそのメディアまたはメディア実現方式間を接続するメディア変換手段を決定する構成とする。
【００２２】
また、第９には、本発明は、前記第１の構成において、
複数のメディア情報の演算処理を行なう多地点間メディア処理手段と、前記多地点間メディア処理手段に関する情報としてメディア処理種別と扱えるメディアまたはメディア実現方式と通信システム内での位置情報を記憶するための多地点間メディア処理記憶手段とを持ち、前記決定手段は、通信要求の中で指定された通信形態と、通信に関与する各ユーザが使用するメディアまたはメディア実現方式とにより、必要に応じて、前記多地点間メディア処理手段を決定し、前記コール・コネクション制御手段は、前記通信形態に応じたトポロジーにて前記多地点間メディア処理手段と通信に使用する端末との間のコネクションの設定制御を行なうようにする構成とする。
【００２３】
また、第１０には、本発明においては、ユーザ毎の使用可能端末、端末毎の使用可能メディア実現方式をそれぞれ記憶する手段を予め設け、通信に関与するユーザを識別する情報とメディア種別を識別する情報とを含む通信要求に応じて、前記予め設けられたユーザ毎の使用可能端末を記憶する手段により通信に関与する各ユーザの使用する１つ以上の端末を求め、得られた端末の一部または全てについて、前記予め設けられた、端末と使用可能なメディア実現方式を記憶する手段により通信に関与する各ユーザの使用可能な１つ以上のメディア実現方式を求め、通信に関与する各ユーザが通信に使用する、一つ以上のメディア実現方式および端末の組合せ、および必要に応じて複数のメディア情報間でメディア変換を行なうメディア変換手段を決定し、前記メディア実現方式および端末の組合せ、および必要に応じて使用するメディア変換手段に基きコール・コネクションの設定を行なうようにする構成とする。
【００２４】
また、第１１には、本発明は、前記第１０の構成の発明において、通信要求には通信形態を表す情報がさらに含まれ、指定された通信形態に応じて、複数のメディア情報間の演算処理を行なう多地点間メディア処理手段をさらに決定し、前記メディア実現方式および端末の組合せ、および必要に応じて使用するメディア変換手段および多地点間メディア処理手段に基きコール・コネクションの設定を行なうようにする構成とする。
【００２５】
また、第１２には、本発明は、前記第１０の構成の発明において、前記決定手段の決定結果で、通信に関わるユーザ間で通信可能なメディア実現方式及び端末の組み合わせが一部のメディア実現方式についてのみ見つかった場合、見つかったメディア実現方式についてのみコール・コネクションの設定・解放を行なうようにする構成とする。
【００２６】
また、第１３には、本発明は、前記第１の構成の発明において、１つあるいは複数のメディアを扱える複数の端末を収容する通信システムにあっては、通信要求に応じて、１つまたは複数のメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方を、通信に関与するユーザ間で調整して決定する調整手段を設ける構成とする。
【００２７】
また、第１４には、本発明は、１つあるいは複数のメディアを扱える複数の端末を収容する通信システムにおいて、ユーザにより、少なくとも通信を希望する一人以上の相手ユーザと１つ以上のメディアに関する情報を含む通信要求を入力する第１の段階と、前記通信要求に応じて、１つまたは複数のメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方を、通信に関与するユーザ間で調整して決定する第２の段階と、前記決定したメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方が使用可能であれば、前記メディアの組合せまたは端末の組合せに対してコール・コネクションを設定する第３の段階とを有する。
【００２８】
また、第１５には、本発明は、１つあるいは複数のメディアを扱える複数の端末を収容する通信システムであって、ユーザによる、少なくとも通信を希望する一人以上の相手ユーザと１つ以上のメディアに関する情報を含む通信要求の入力を受け付ける通信要求入力手段と通信要求に応じて、通信に関与するユーザの各々に対して、その通信要求の少なくとも一部を満たすために前記各ユーザが使用可能な、１つまたは複数のメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方を１つないしは複数組決定する候補決定手段と、前記通信に関与する少なくとも一人のユーザに対する前記決定した１つまたは複数のメディアの組合せの候補、または端末の組合せの候補の少なくともいずれか一方を該ユーザまたは通信に関与する異なるユーザに通知し、該組合せの候補のいずれかを選択してその組合せによる通信を承認するか、あるいは通信要求の変更を希望するかの選択を、該通知を受けたユーザによる入力により決定させるユーザ意図反映手段と、この決定に基づきコール・コネクションを設定する設定手段とを備えることを特徴とする。
【００２９】
また好ましい例として第１６には、前記ユーザ意図反映手段によって通信要求の変更が選択された場合、変更内容のユーザによる入力を可能にする通信要求変更手段を持つ構成とする。
【００３０】
また好ましい例として第１７には、前記ユーザ意図反映手段による複数ユーザの入力間で、不一致が生じたまたは生じる可能性のある場合、少なくとも２人以上の前記通信に関与するユーザ間で、前記組合せの候補の選択、ないしは通信要求の変更に関し調整することを可能にする、ユーザ間調整手段を持つ構成とする。
【００３１】
第１８には、本発明は、ネットワークに接続され、１つあるいは複数のメディアを扱える端末装置として、ユーザが、少なくとも通信を希望する一人以上の相手ユーザと１つ以上のメディアに関する情報を含む通信要求を入力する通信要求入力手段と前記通信に関与する少なくとも一人のユーザに関して、該ユーザが通信要求発生時点でその通信要求の少なくとも一部を満たすために利用可能な１つまたは複数のメディアの組合せ、または端末の組合せの少なくともいずれか一方を該ユーザまたは通信に関与する異なるユーザに通知し、該組合せのいずれかを選択してその組合せによる通信を承認するか、あるいは通信要求の変更を希望するかの選択を、該通知を受けたユーザによる入力により決定させるユーザ意図反映手段と、この決定に基づきコール・コネクションを設定する設定手段とを備える構成とする。
【００３２】
【発明の実施の形態】
本発明は、発信時にユーザが指定したメディアに応じてメディア処理能力の異なり得る複数の端末の組み合わせを発信毎に決定し、それら端末の組合せに対して接続を実現する。
【００３３】
本発明は、通信システムにユーザ端末記憶手段、端末メディア記憶手段、決定手段、コール・コネクション制御手段を設け、決定手段がユーザからの通信要求に含まれる通信相手ユーザ、使用メディアまたはメディア実現方式に基づき前記ユーザ端末記憶手段および端末メディア記憶手段を使用して通信に使用可能なメディアまたはメディア実現方式および端末の組合せを決定し、決定したメディアまたはメディア実現方式および端末の組合せに対してコール・コネクションを設定・解放を行うことにより実現することができる。
【００３４】
ここに、ユーザ端末記憶手段とは、ユーザ毎に該ユーザの使用可能な端末の情報を記憶するものであり、ユーザを特定する識別子から当該ユーザの使用可能な端末を検索することが可能になっている。また、端末メディア記憶手段とは、端末毎に該端末にて使用可能なメディアまたはメディア実現方式を記憶するものであり、端末を特定する識別子から当該端末において使用可能なメディアまたはメディア実現方式を検索することが可能になっている。
【００３５】
また、決定手段とは、通信に参加する各ユーザに対して、前記ユーザ端末記憶手段および端末メディア記憶手段を使用して、使用可能な端末またはメディアの組合せを検索し、検索結果から実際に通信に使用する端末またはメディアの組合せを選択するものである。コール・コネクション制御手段は指定された端末間に指定されたメディアを伝送するためのコネクションを設定・解放するものである。以上の手段はいずれも例えば計算機によって実現することが可能である。
【００３６】
また本発明は、上記の構成に加えてメディア変換手段およびメディア変換記憶手段を設け、前記決定手段は、通信に参加するユーザ間で共通に使用可能なメディアまたはメディア実現方式が存在しない場合に、第１のユーザが使用するメディアまたはメディア実現方式から１つ以上のメディア変換手段を接続して第２のユーザの使用するメディアまたはメディア実現方式へ至るメディア変換手段を探すために必要に応じて繰り返しメディア変換記憶手段を起動することで前記複数のユーザ間の通信にて各ユーザが使用するメディアまたはメディア実現方式とそのメディアまたはメディア実現方式間を接続するメディア変換手段を決定し、決定したメディアまたはメディア実現方式および端末の組合せ、およびメディア変換手段に対してコール・コネクションを設定・解放を行うことにより実現することができる。
【００３７】
ここに、メディア変換手段は、異なった種類の複数のメディア情報間で一方から他方へあるいは相互にメディア種別またはメディア実現方式を変換する手段である。メディア変換記憶手段は、メディア変換手段毎に該メディア変換手段が変換処理を行うことが可能なメディアまたはメディア実現方式の種別と、接続時に用いられる宛先アドレスのような通信システム内での位置情報とを記憶し、メディア変換手段を特定する識別子から当該メディア変換手段が変換処理を行うことが可能なメディアまたはメディア実現方式の種別と、通信システム内での位置情報を検索可能なものである。
【００３８】
以上の手段はいずれも例えば計算機あるいは信号処理用プロセッサによって実現することが可能である。
【００３９】
また本発明は、通信システムにユーザ端末記憶手段、端末メディア記憶手段、決定手段、コール・コネクション制御手段、多地点間メディア処理手段および多地点間メディア処理記憶手段を設け、前記決定手段は、通信要求の中で指定された、例えば会議や放送のような通信形態と、通信に関与する各ユーザが使用するメディアまたはメディア実現方式とにより、必要に応じて、前記多地点間メディア処理手段を決定し、前記コール・コネクション制御手段は、前記通信形態に応じたトポロジーにて前記多地点間メディア処理手段と通信に使用する端末との間のコネクションの設定制御を行なうことにより実現することができる。
【００４０】
ここに、多地点間メディア処理手段は、１つの入力メディア情報あるいは複数の入力メディア情報間で複製あるいは合成あるいは加算のような演算処理を行って１つまたは複数のメディア情報を生成し、出力する手段である。
【００４１】
多地点間メディア処理記憶手段は、多地点間メディア処理手段毎に、メディア処理種別と、取扱可能なメディアまたはメディア実現方式の種別と、接続時に用いられる宛先アドレスのような通信システム内での位置情報とを記憶し、多地点間メディア処理手段を特定する識別子から当該多地点間メディア処理手段が実行可能なメディア処理種別と、取扱可能なメディアまたはメディア実現方式の種別と、通信システム内での位置情報とを検索可能に保持するものである。以上の手段はいずれも例えば計算機あるいは信号処理用プロセッサによって実現することが可能である。
【００４２】
また本発明は、通信システムにユーザ端末記憶手段、端末メディア記憶手段、決定手段、コール・コネクション制御手段および調整手段を設け、ユーザにより、少なくとも通信を希望する一人以上の相手ユーザと１つ以上のメディアに関する情報を含む通信要求を入力する第１の段階と、前記通信要求に応じて、１つまたは複数のメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方を、通信に関与するユーザ間で調整して決定する第２の段階と、前記決定したメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方が使用可能であれば、前記メディアの組合せまたは端末の組合せに対してコール・コネクションを設定する第３の段階とを設けることにより、実現することができる。
【００４３】
ここに、調整手段とは、一つまたは複数のメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方を、通信に関与するユーザ間で調整して決定する手段であり、例えばメディアまたはメディア実現方式の組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方についてのユーザからの要求を受け付け、受け付けた要求に基づき発着ユーザ間で共通に使用可能なメディアまたはメディア実現方式の組合せ、または一つ以上の端末からなる端末の組合せの少なくとも一方をユーザに提示することを必要に応じて繰り返し行うことにより、例えば計算機により実現することが可能である。
【００４４】
（第１の具体的な実施の態様）
本発明の第１の具体的な実施の態様について、その詳細をつぎに説明する。
【００４５】
図１に、本発明によるマルチメディア通信システムのハードウエアブロック構成図を示す。図中、２は通信網、３はユーザ端末記憶手段、４は端末メディア記憶手段、５は決定手段、６はコール・コネクション制御手段、８はメディア変換記憶手段、１０は多地点間メディア処理記憶手段、１２は調整手段、１０１〜１１４はそれぞれ端末であり、７０１、７０２はメディア変換手段、９０１〜９０３は多地点間メディア処理手段である。
【００４６】
これらのうち、メディア変換手段７０１，７０２は、音声および動画像の符号化方式を変換するものであり、多地点間メディア処理手段９０１〜９０３は音声および動画像による会議接続やマルチキャスト接続を行なうためのものである。
【００４７】
また、多地点間メディア処理記憶手段１０は多地点間メディア処理手段毎に、メディア処理種別と、取扱可能なメディアまたはメディア実現方式の種別と、接続時に用いられる宛先アドレスのような通信システム内での位置情報とを記憶し、多地点間メディア処理手段を特定する識別子から当該多地点間メディア処理手段が実行可能なメディア処理種別と、取扱可能なメディアまたはメディア実現方式の種別と、通信システム内での位置情報とを検索可能に保持するものである。
【００４８】
また、ユーザ端末記憶手段３はユーザ毎に該ユーザの使用可能な端末の情報を記憶するものであり、ユーザを特定する識別子から当該ユーザの使用可能な端末を検索することが可能になっているものである。
【００４９】
端末メディア記憶手段４は、端末毎に該端末にて使用可能なメディアまたはメディア実現方式を記憶するものであり、端末を特定する識別子から当該端末において使用可能なメディアまたはメディア実現方式を検索することが可能になっている。
【００５０】
決定手段５は、通信に参加する各ユーザに対して、前記ユーザ端末記憶手段４および端末メディア記憶手段を使用して、使用可能な端末またはメディアの組合せを検索し、検索結果から実際に通信に使用する端末またはメディアの組合せを選択するものである。すなわち、決定手段５は、端末メディア記憶手段４を参照し、ユーザが使用可能な端末は何であり、どのようなメディアを扱うことができて符号化方式が何であり、接続しようとする相手方のユーザの使用可能な端末が何で、使用する端末の組み合わせをどのようにするか、といったことを決定する機能を有するものである。
【００５１】
また、コール・コネクション制御手段６は指定された端末間に指定されたメディアを伝送するためのコネクションを設定・解放するものであって、決定手段５からの指示内容に従って、コール・コネクションを設定するものである。
【００５２】
メディア変換記憶手段８は通信網に接続されている各端末のメディア変換手段毎の機能情報等を記憶するものであり、メディア変換手段毎に、変換メディア（符号化方式も含む）種別およびアドレス（接続時の宛先）を記憶している。また、多地点間メディア処理手段１１３は１つの入力メディア情報あるいは複数の入力メディア情報間で複製あるいは合成あるいは加算のような演算処理を行って１つまたは複数のメディア情報を生成し、出力する手段である。
【００５３】
調整手段１２は、一つまたは複数のメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方を、通信に関与するユーザ間で調整して決定する機能を有するものである。また、多地点間メディア処理記憶手段１１４は、多地点間メディア処理手段１１３毎に、メディア処理種別と、取扱可能なメディアまたはメディア実現方式の種別と、接続時に用いられる宛先アドレスのような通信システム内での位置情報とを記憶し、多地点間メディア処理手段を特定する識別子から当該多地点間メディア処理手段１１３が実行可能なメディア処理種別と、取扱可能なメディアまたはメディア実現方式の種別と、通信システム内での位置情報とを検索可能に保持するものである。
【００５４】
前記各端末１０１〜１１４は通信網２を介して相互に接続されていて、それぞれ固有の端末ＩＤ（識別コード）を持つ。ここでは、各端末１０１〜１１４にはそれぞれ、端末１０１〜１１４に付した符号に因んで、端末１０１にはその端末ＩＤを“１０１”、端末１０２にはその端末ＩＤを“１０２”、端末１０３にはその端末ＩＤを“１０３”と云った具合に付与してあるものとする。
【００５５】
これら端末のうち、端末１０１は音声および動画像を扱うことが可能なマルチメディア端末であり、端末１０２および端末１０７は動画像を扱える計算機端末（パソコンやワークステーション等）であり、端末１０３，１０４，１０５，１０６は音声を扱える電話端末である。
【００５６】
端末１０８は音声および動画像を扱うことが可能な計算機端末である。また、端末１０９は前記の決定手段５、調整手段１２およびコール・コネクション制御手段６の機能を有する端末であり、端末１１０は前記のユーザ端末記憶手段３および端末メディア記憶手段４の機能を有する端末である。
【００５７】
また、端末１１１には音声および動画像の符号化方式を変換するメディア変換手段７０１，７０２があり、端末１１２は前記のメディア変換記憶手段８の機能を有するものである。
【００５８】
端末１１３は、音声および動画像による会議接続やマルチキャスト接続を行なうための多地点間メディア処理手段９０１〜９０３の機能を有する端末であり、端末１１４は多地点間メディア処理記憶手段１０の機能を有する端末である。
【００５９】
なお、ユーザ端末記憶手段３、端末メディア記憶手段４、決定手段５、コール・コネクション制御手段６、メディア変換手段７０１，７０２、メディア変換記憶手段８、多地点間メディア処理手段９０１〜９０３、多地点間メディア処理記憶手段１０、調整手段１２の各手段は、必ずしも計算機端末上に実現する必要はなく、これらの各手段の一部または全てを、交換機やサーバ装置のようなネットワーク設備に設ける構成としても良い。
【００６０】
図２にユーザ端末記憶手段３の記憶情報例を、また、図３に端末メディア記憶手段４の記憶情報例をそれぞれ示す。図２に示すように、ユーザ端末記憶手段３にはユーザ毎にそのユーザのＩＤ（識別コード）と、そのユーザのしよう可能な端末のＩＤが記憶されている。また、図３に示すように端末メディア記憶手段４には、端末毎のＩＤと、その端末のメディア種別が符号化方式の情報と共に記憶されている。
【００６１】
このような構成の第１の具体的な実施の態様にかかる本システムにおける各種の具体的動作例を説明する。はじめに、ユーザＡが音声および動画像によるユーザＢとの通信要求を起動した場合を例にとって第１の具体的動作例として説明する。
【００６２】
〔第１の具体的動作例〕
第１の具体的な実施の態様にかかる本システムにおける第１の具体的動作例として、ここでは端末ＩＤが“１０１”の端末を使用可能なユーザＡが、端末ＩＤが“１０２”，“１０３”，“１０４”の端末を使用可能なユーザＢに対して、音声および動画像によるユーザＢとの通信要求を起動した場合を例に説明する。端末ＩＤ“１０１”の端末１０１は、音声および動画像を扱うことが可能なマルチメディア端末であり、端末ＩＤ“１０２”の端末１０２は、動画像を扱える計算機端末（パソコンやワークステーション等）であり、端末ＩＤが“１０３”の端末１０３と、端末ＩＤが“１０４”の端末１０４は、音声を扱える電話端末である。本例におけるメッセージシーケンスを図４に示す。
【００６３】
この場合、まずはじめに通信要求元のユーザＡは通信要求において、通信相手としてユーザＢを、そして、使用メディアとして音声および動画像を指定して通信網２にこの通信要求を出す。すると、通信網２はこの通信要求を決定手段の機能を有する端末１０９に通知し、この端末１０９ではこの通信要求を自端末上の決定手段５に通知する（図４中メッセージＭ４０１）。
【００６４】
この通信要求を受けた決定手段５は、ユーザ端末記憶手段３を参照し（Ｍ４０２）、参照応答（Ｍ４０３）により、ユーザＡが端末１０１を、ユーザＢが端末１０２，１０３および１０４を、それぞれ使用可能であることを認識する。
【００６５】
次に決定手段５は端末１１０の端末メディア記憶手段４を参照し（Ｍ４０４）、端末メディア記憶手段４からの参照応答（Ｍ４０５）により、「ユーザＡが使用可能な端末１０１は、動画像および音声をそれぞれ符号化方式ｖ１およびａ１にて使用可能であり、ユーザＢが使用可能な端末１０２は動画像を符号化方式ｖ１にて、端末１０３は音声を符号化方式ａ１にて、端末１０４は音声を符号化方式ａ２にて、それぞれ使用可能である」ことを認識する。
【００６６】
この認識結果をもとに、決定手段５はユーザＢに対して通信要求を通知する（Ｍ４０６）。この通信要求により、ユーザＢ側からは承認通知（Ｍ４０７）が出される。
【００６７】
次に、決定手段５は前記通信要求に対するユーザＢからの承認通知（Ｍ４０７）を受けて、ユーザＡ側については、「音声符号化方式ａ１、動画像符号化方式ｖ１を扱える端末１０１」を使用し、ユーザＢ側については、「音声を扱うためには符号化方式ａ１を扱える端末１０３」を使用し、「動画像を扱うためには符号化方式ｖ１を扱える端末１０２」を使用することを決定し、この決定内容をコール・コネクション制御手段６に通知する（Ｍ４０８）。
【００６８】
すると、コール・コネクション制御手段６はこの決定手段５からの通知内容に従って、音声については端末１０１と端末１０３とを接続し、動画像については端末１０１と端末１０２とを接続するようにコール・コネクションを設定し、コール・コネクションの設定が正常に終了すると、決定手段５にコール・コネクション設定応答を通知する（Ｍ４０９）。
【００６９】
これを受けて決定手段５は通信開始をユーザＡ、ユーザＢに通知する（Ｍ４１０，Ｍ４１１）。
【００７０】
このようにして設定されたコネクションの設定状態を図５に示す。なお、図中１１はコネクションであり、ユーザＡ側については、音声符号化方式ａ１、動画像符号化方式ｖ１を扱える端末１０１を使用し、ユーザＢ側については、音声を扱うためには符号化方式ａ１を扱える端末１０３を使用して互いに音声符号化方式ａ１を使用したコネクション１１を形成し、また、動画像については、ユーザＢ側では動画像を扱うためには符号化方式ｖ１を扱える端末１０２を使用してユーザＡ側とは端末１０１と符号化方式ｖ１を使用したコネクション１１を形成して通信を行なうようにした様子を示している。
【００７１】
以上は、ユーザＡが音声および動画像によるユーザＢとの通信要求を起動した場合を例にとった動作例であった。
【００７２】
次に、ユーザＡが音声および動画像によるユーザＣとの通信要求を起動した場合を例にとって第２の具体的動作例を説明する。
【００７３】
〔第２の具体的動作例〕
第１の具体的な実施の態様にかかる本システムにおける第２の具体的動作例として、ここでは端末ＩＤが“１０１”の端末を使用可能なユーザＡが、端末ＩＤ“１０５”の端末を使用可能なユーザＣに対して、音声および動画像によるユーザＣとの通信要求を起動した場合を例に説明する。端末ＩＤが“１０１”の端末１０１は、音声および動画像を扱うことが可能なマルチメディア端末であり、端末ＩＤが“１０５”の端末１０５は、音声のみを扱える電話端末である。
【００７４】
本例におけるメッセージシーケンスを図６に示す。
【００７５】
音声および動画像によるユーザＣとの通信要求を起動する場合、ユーザＡは通信要求において、通信相手としてユーザＣを、使用メディアとして音声および動画像を指定する。
【００７６】
この通信要求は決定手段５に通知される（図６中メッセージＭ６０１）。すると決定手段５は、ユーザ端末記憶手段３の内容を参照し（Ｍ６０２）、その参照応答（Ｍ６０３）により、「ユーザＡが端末１０１を、また、ユーザＣが端末１０５を、それぞれ使用可能である」ことを認識する。
【００７７】
次に決定手段５は端末メディア記憶手段４を参照し（Ｍ６０４）、参照応答（Ｍ６０５）により、「ユーザＡが使用可能な端末１０１は、動画像および音声をそれぞれ符号化方式ｖ１およびａ１にて使用可能であり、ユーザＣが使用可能な端末１０５は音声を符号化方式ａ１にて使用可能である」ことを認識する。
【００７８】
その結果、決定手段５はユーザＡとユーザＣの間で共通に使用できるメディアは「符号化方式ａ１の音声のみ」であると判定する。
【００７９】
この認識結果をもとに決定手段５は、ユーザＣに対し、通信要求を通知する（Ｍ６０６）。
【００８０】
このようにしてユーザＣに対して、ユーザＡから音声と動画像による通信要求があると、決定手段５はどの端末が使用可能で、ユーザＡとユーザＣの間で共通に使用できるメディアは何かを判定し、その判定の結果から、そのうちの音声のみにより通信が可能であることを知って、音声のみによる通信を行なうことを通知することになる（Ｍ６０６）。そして、この通信要求に対するユーザＣからの承認通知（Ｍ６０７）を受けて、決定手段５はユーザＡに対しては音声のみにて接続が可能であることを通知する（（部分接続可能通知）Ｍ６０８）。
【００８１】
この通知に対して、ユーザＡは音声のみによる接続を要求し（Ｍ６０９）、これによって決定手段５は端末１０１と端末１０５との間を符号化方式ａ１の音声にて接続するようコール・コネクション制御手段６に指示する（Ｍ６１０）。
【００８２】
コール・コネクション制御手段６は通知内容に従って、コール・コネクションを設定し、コール・コネクションの設定が正常に終了すると、決定手段５にコール・コネクション設定応答を通知する（Ｍ６１１）。この通知を受けると、決定手段５は通信開始をユーザＡ、ユーザＣに通知する（Ｍ６１２，Ｍ６１３）。そして端末１０１と端末１０５との間での音声通信を可能にする。
【００８３】
このようにして設定されたコネクションの設定状態を図７に示す。図７においては、端末１０１と端末１０５との間で符号化方式ａ１を使用したコネクションが成立し、端末１０１と端末１０５との間で音声通信を行なうことができるようになった様子を示している。
【００８４】
以上の第２の具体的動作例は、ユーザＡが音声および動画像によるユーザＣとの通信要求を起動した場合の例であった。次に、ユーザＡが音声および動画像によるユーザＤとの通信要求を起動した場合を例にとって、第３の具体的動作例を説明する。
【００８５】
〔第３の具体的動作例〕
第１の具体的な実施の態様にかかる本システムにおける第３の具体的動作例として、ここでは端末ＩＤが“１０１”の端末を使用可能なユーザＡが、端末ＩＤ“１０６”，“１０７”の端末を使用可能なユーザＤに対して、音声および動画像による通信要求を起動した場合を例に説明する。端末ＩＤが“１０１”の端末１０１は、音声および動画像を扱うことが可能なマルチメディア端末であり、端末ＩＤが“１０６”の端末１０６は、音声のみを扱える電話端末であり、端末ＩＤが“１０７”の端末１０７は、動画像を扱える計算機端末（パソコンやワークステーション等）である。
【００８６】
ユーザＡが音声および動画像によるユーザＤとの通信要求を起動した場合の一例としてのメッセージシーケンスを図８に示す。
【００８７】
図８に従って説明する。ユーザＡは通信要求において、通信相手としてユーザＤを、また、使用メディアとして音声および動画像を指定したとする。
【００８８】
この通信要求は端末１０８上の決定手段５に通知される（図８中メッセージＭ８０１）。すると、決定手段５は、ユーザ端末記憶手段３を参照し（Ｍ８０２）、その参照応答（Ｍ８０３）により、ユーザＡが端末１０１を、ユーザＤが端末１０６および端末１０７を、それぞれ使用可能であることを認識する。
【００８９】
次に決定手段５は端末メディア記憶手段４を参照し（Ｍ８０４）、その参照応答（Ｍ８０５）により、「ユーザＡが使用可能な端末１０１は、動画像および音声をそれぞれ符号化方式ｖ１およびａ１にて使用可能」であり、「ユーザＤが使用可能な端末１０６は音声を符号化方式ａ２にて使用可能」であり、また、「ユーザＤが使用可能な端末１０７は、動画像を符号化方式ｖ２にて使用可能」であることを認識する。
【００９０】
その結果、決定手段５は、「ユーザＡとユーザＤの間で共通に使用できるメディアは存在しない」と判定し、メディア変換記憶手段１０を参照する（Ｍ８０６）。
【００９１】
図９にメディア変換記憶手段８の構成を示す。図に示すように、メディア変換記憶手段８は、メディア変換手段毎に、変換メディア（符号化方式も含む）種別およびアドレス（接続時の宛先）を記憶している。
【００９２】
メディア変換記憶手段８の参照応答（Ｍ８０７）により、メディア変換記憶手段８に記憶されているメディア変換手段のうち、メディア変換手段７０１および７０３を使用することにより、音声については、「符号化方式をａ１からａ２へ、また、ａ２からａ１へ相互変換」することが可能であり、動画像については、「符号化方式をｖ１からｖ２へ、また、ｖ２からｖ１へ相互変換」することが可能であり、その結果、これを利用すればユーザＡとユーザＤの各使用メディア間を相互に接続することが可能であることを認識する。
【００９３】
そして、この認識した内容に基づき、決定手段５はメディア変換手段９０１および９０３を選択することを決定する。
【００９４】
そこで、決定手段５はユーザＤに対して通信要求を通知する（Ｍ８０８）。決定手段５は前記通信要求に対するユーザＤからの承認通知（Ｍ８０９）を受けて、端末１０１とメディア変換手段９０１との間を、符号化方式ａ１の音声にて、そして、端末１０１とメディア変換手段９０３との間を符号化方式ｖ１の動画像にてそれぞれ接続し、また、メディア変換手段７０１と端末１０６との間を、符号化方式ａ２の音声にて、そして、メディア変換手段７０３と端末１０７との間を、符号化方式ｖ２の動画像にてそれぞれ接続するようコール・コネクション制御手段６に指示する（Ｍ８１０）。
【００９５】
コール・コネクション制御手段６は、決定手段５から指示された内容に従って、コール・コネクションを設定し、コール・コネクションの設定が正常に終了すると、決定手段５にコール・コネクションの設定応答を通知する（Ｍ８１１）。
【００９６】
これを受けて決定手段５は通信開始をユーザＡ、ユーザＤに通知する（Ｍ８１２，Ｍ８１３）。
【００９７】
このようにして設定されたコネクションの設定状態を図１０に示す。すなわち、音声通信用としては、端末１０１と端末１０６との間にメディア変換手段７０１を介して形成されるコネクション１１により、符号化方式ａ１とａ２の相互変換を利用した音声通信路が開設され、動画用としては端末１０１と端末１０７との間にメディア変換手段７０３を介して形成されるコネクション１１により、符号化方式ｖ１とｖ２の相互変換を利用した動画像授受の経路が開設され、端末１０１とメディア変換手段９０１との間を符号化方式ａ１の音声にて授受し、そして、端末１０１とメディア変換手段９０３との間を符号化方式ｖ１の動画像にて授受し、また、メディア変換手段７０１と端末１０６との間を、符号化方式ａ２の音声にて授受し、そして、メディア変換手段７０３と端末１０７との間を、符号化方式ｖ２の動画像にて授受する。
【００９８】
この結果、互いに符号化方式が異なる音声と動画を、ユーザＡとユーザＣとの間で授受することができるようになる。
【００９９】
以上の第３の具体的動作例は、ユーザＡが音声および動画像によるユーザＤに対しての通信要求を起動した場合の例であった。次に、ユーザＡが音声および動画像によるユーザＢ，Ｄとの会議通信を要求した場合を例にとって、第４の具体的動作例を説明する。
【０１００】
〔第４の具体的動作例〕
第１の具体的な実施の態様にかかる本システムにおける第４の具体的動作例として、ここでは端末ＩＤが“１０１”の端末を使用可能なユーザＡが、端末ＩＤ“１０２”，“１０３”，“１０４”の端末を使用可能なユーザＢと、端末ＩＤ“１０６”，“１０７”の端末を使用可能なユーザＤを対象に、会議通信を要求した場合を例に説明する。
【０１０１】
会議通信においては、音声および動画像による通信が必要である。端末ＩＤが“１０１”の端末１０１は、音声および動画像を扱うことが可能なマルチメディア端末であり、端末ＩＤ“１０２”の端末１０２は、動画像を扱える計算機端末（パソコンやワークステーション等）であり、端末ＩＤが“１０３”の端末１０３と、端末ＩＤが“１０４”の端末１０４は、音声を扱える電話端末である。
【０１０２】
また、端末ＩＤが“１０６”の端末１０６は、音声のみを扱える電話端末であり、端末ＩＤが“１０７”の端末１０７は、動画像を扱える計算機端末（パソコンやワークステーション等）である。
【０１０３】
ユーザＡが音声および動画像によるユーザＢ，Ｄとの会議通信を要求した場合を例にとって説明する。本実施例におけるメッセージシーケンスを図１１に示す。
【０１０４】
会議通信を要求するにあたって、ユーザＡは通信要求において、通信相手としてユーザＢ，ユーザＤを、使用メディアとして音声および動画像を、通信形態として会議を、それぞれ指定する。この通信要求は端末１０８上の決定手段５に通知される（図１１中メッセージＭ１１０１）。
【０１０５】
すると決定手段５は、ユーザ端末記憶手段３を参照し（Ｍ１１０２）、参照応答（Ｍ１１０３）により、ユーザＡが端末１０１を、ユーザＢが端末１０２，１０３および１０４を、ユーザＤが端末１０６を、それぞれ使用可能であることを認識する。
【０１０６】
次に決定手段５は端末メディア記憶手段４を参照し（Ｍ１１０４）、その参照応答（Ｍ１１０５）により、「ユーザＡが使用可能な端末１０１は、動画像および音声をそれぞれ符号化方式ｖ１およびａ１にて使用可能」であり、「ユーザＢが使用可能な端末１０２は動画像を符号化方式ｖ１にて、また、端末１０３は音声を符号化方式ａ１にて、そして、端末１０４は音声を符号化方式ａ２にて、それぞれ使用可能」であり、「ユーザＤが使用可能な端末１０６は音声を符号化方式ａ２にて、また、１０７は動画像を符号化方式ｖ２にてそれぞれ使用可能」であることを認識する。
【０１０７】
さらに、決定手段５は通信形態が会議通信であることを受けて、多地点間メディア処理記憶手段１０を参照する（Ｍ１１０６）。
【０１０８】
図１２に多地点間メディア処理記憶手段１０の構成を示す。ここに示すように、多地点間メディア処理記憶手段１０は、多地点間メディア処理手段毎に、メディア処理種別( 会議、放送など) 、取り扱い符号化方式およびアドレス（接続時の宛先）を記憶している。
【０１０９】
多地点間メディア処理記憶手段１０からの参照応答（Ｍ１１０７）により、決定手段５は多地点間メディア処理記憶手段１０に記憶される多地点間メディア処理手段のうち、「会議メディア処理をサポートする多地点間メディア処理手段であって、使用可能符号化方式がａ１およびｖ１であるもの」として、多地点間メディア処理手段９０１があることを知る。そして、決定手段５はこの多地点間メディア処理手段９０１を選択する。
【０１１０】
さらに、決定手段５は、多地点間メディア処理手段９０１と端末１０６，１０７とを接続するために、メディア変換記憶手段１０を参照し（Ｍ１１０８）、その参照応答（Ｍ１１０９）により、「音声符号化方式ａ１とａ２間」を変換するメディア変換手段としてメディア変換手段７０１があり、また、「動画像符号化方式ｖ１とｖ２間」を変換するメディア変換手段としてメディア変換手段７０３があることを知る。
【０１１１】
そして、決定手段５は「音声符号化方式ａ１とａ２間」、「動画像符号化方式ｖ１とｖ２間」をそれぞれ変換するメディア変換手段として、メディア変換手段７０１およびメディア変換手段７０３を選択する。
【０１１２】
これらの選択が終わると、決定手段５はユーザＢおよびユーザＤに対して通信要求を通知する（Ｍ１１１０，Ｍ１１１１）。ユーザＢおよびユーザＤからは通信要求に対する承認通知（Ｍ１１１２，Ｍ１１１３）が返される。
【０１１３】
決定手段５は、前記通信要求に対するユーザＢおよびユーザＤからの承認通知（Ｍ１１１２，Ｍ１１１３）を受けて、端末１０１と多地点間メディア処理手段９０１との間を符号化方式ａ１の音声および符号化方式ｖ１の動画像にて、また、端末１０２と多地点間メディア処理手段９０１との間を符号化方式ｖ１の動画像にて、そして、端末１０３と多地点間メディア処理手段９０１との間を符号化方式ａ１の音声にて、また、端末１０６とメディア変換手段７０１との間を符号化方式ａ２の音声にて、また、メディア変換手段７０１と多地点間メディア処理手段９０１との間を符号化方式ａ１の音声にて、また、端末１０７とメディア変換手段７０３との間を符号化方式ｖ２の動画像にて、そして、メディア変換手段７０３と多地点間メディア処理手段９０１との間を符号化方式ｖ１の動画像にて、それぞれ接続するようコール・コネクション制御手段６に指示する（Ｍ１１１４）。
【０１１４】
すると、コール・コネクション制御手段６は、決定手段５から指示された内容に従って、コール・コネクションを設定し、コール・コネクションの設定が正常に終了すると、決定手段５にコール・コネクションの設定応答を通知する（Ｍ１１１５）。これを受けて決定手段５は、通信開始をユーザＡ、ユーザＢ、ユーザＤに通知する（Ｍ１１１５，Ｍ１１１６，Ｍ１１１７）。
【０１１５】
このようにして設定されたコネクションの設定状態を図１３に示す。図では、端末１０１と多地点間メディア処理手段９０１との間を符号化方式ａ１の音声および符号化方式ｖ１の動画像にて授受するようにし、また、端末１０２と多地点間メディア処理手段９０１との間を符号化方式ｖ１の動画像にて授受するようにし、そして、端末１０３と多地点間メディア処理手段９０１との間を符号化方式ａ１の音声にて授受するようにし、また、端末１０６とメディア変換手段７０１との間を符号化方式ａ２の音声にて授受するようにし、また、メディア変換手段７０１と多地点間メディア処理手段９０１との間を符号化方式ａ１の音声にて授受するようにし、また、端末１０７とメディア変換手段７０３との間を符号化方式ｖ２の動画像にて授受するようにし、そして、メディア変換手段７０３と多地点間メディア処理手段９０１との間を符号化方式ｖ１の動画像にて授受するようにした様子が示されている。
【０１１６】
この結果、端末１０１と多地点間メディア処理手段９０１との間では符号化方式ａ１の音声と、符号化方式ｖ１の動画像が授受され、また、端末１０２と多地点間メディア処理手段９０１との間では符号化方式ｖ１の動画像が授受され、そして、端末１０３と多地点間メディア処理手段９０１との間では符号化方式ａ１の音声が授受され、また、端末１０６とメディア変換手段７０１との間では符号化方式ａ２の音声が授受され、また、メディア変換手段７０１と多地点間メディア処理手段９０１との間では符号化方式ａ１の音声が授受され、また、端末１０７とメディア変換手段７０３との間を符号化方式ｖ２の動画像が授受され、そして、メディア変換手段７０３と多地点間メディア処理手段９０１との間では符号化方式ｖ１の動画像が授受されて、ユーザ間での符号化方式の違いと端末の機能の違いを乗り越えた音声と動画像による会議通信ができることになる。
【０１１７】
以上の第４の具体的動作例は、ユーザ間での使用可能な端末の機能と符号化方式の違いを乗り越えての会議通信を可能にする例を説明した。次にユーザＡが音声および動画像によるユーザＥとの通信要求を起動した場合を例にとって第５の具体的動作例を説明する。
【０１１８】
〔第５の具体的動作例〕
第１の具体的な実施の態様にかかる本システムにおける第５の具体的動作例として、ここでは端末ＩＤが“１０１”の端末を使用可能なユーザＡが、端末ＩＤ“１０８”の端末を使用可能なユーザＥに対して、音声および動画像による通信要求を起動した場合を例にとって説明する。
【０１１９】
端末ＩＤが“１０１”の端末１０１は、音声および動画像を扱うことが可能なマルチメディア端末であり、端末ＩＤ“１０８”の端末１０８は、音声と動画像とを扱える端末である。しかし、端末１０１が動画像を符号化方式ｖ１で扱い、音声を符号化方式ａ１で扱うものであるのに対して、端末１０８は動画像および音声を単一の符号化方式に統合した符号化方式ａｖ１を扱うものとなっているとする。
【０１２０】
本例におけるメッセージシーケンスを図１４に示す。
【０１２１】
図１４に従って説明する。ユーザＡは通信要求において、通信相手としてユーザＥを、使用メディアとして音声および動画像を指定する。この通信要求は決定手段５に通知される（図１４中メッセージＭ１４０１）。これにより、決定手段５は、ユーザ端末記憶手段３を参照し（Ｍ１４０２）、その参照応答（Ｍ１４０３）により、ユーザＡが端末１０１を、ユーザＥが端末１０８を、それぞれ使用可能であることを認識する。
【０１２２】
次に決定手段５は端末メディア記憶手段４を参照し（Ｍ１４０４）、その参照応答（Ｍ１４０５）により、「ユーザＡが使用可能な端末１０１は、動画像および音声をそれぞれ符号化方式ｖ１およびａ１にて使用可能」であり、「ユーザＥが使用可能な端末１０８は、動画像および音声を単一の符号化方式に統合した符号化方式ａｖ１にて使用可能」であることを認識する。
【０１２３】
この認識の結果、ユーザＡ、ユーザＥの使用可能な符号化方式が異なることを知った決定手段５はメディア変換が可能か否かを調べるために、メディア変換記憶手段１０を参照する（Ｍ１４０６）。
【０１２４】
メディア変換記憶手段１０の構成は第３の具体的動作例で用いた図９と同一である。参照応答（Ｍ１４０７）により、決定手段５は、符号化方式ａ１、ｖ１と符号化方式ａｖ１との間を相互に変換することができるメディア変換手段が存在しないことを認識する。
【０１２５】
その結果、決定手段５は、ユーザＡとユーザＥとの間で相互接続可能な符号化方式が存在しないと判断し、ユーザＡに通信不可であることを通知する（Ｍ１４０８）。ゆえに、ユーザＡとユーザＥとの間では通信は成立しない。
【０１２６】
以上の第５の具体的動作例は扱える符号化方式が不一致で、符号化方式を変換することのできるメディア変換手段も存在しない場合の例を説明した。次にユーザの使用中端末をユーザ端末記憶手段３に自動的に反映させるための処理手順について第６の具体的動作例として説明する。
【０１２７】
〔第６の具体的動作例〕
第１の具体的な実施の態様にかかる本システムにおける第６の具体的動作例として、ユーザの使用中の端末をユーザ端末記憶手段３に自動的に反映させるための処理手順について説明する。端末が計算機端末である場合、そのユーザが当該計算機端末にログインする際に、ログイン手順によってユーザ端末記憶手段３を更新するようにシステムを構成する。
【０１２８】
例えば、ユーザＡは通常はマルチメディア端末である端末１０１を使用するが、他の計算機端末にもログインする場合があるとすると、ユーザ端末記憶手段３には通常はユーザＣに対応する端末として端末１０１が設定される。そして、ユーザＡが例えば端末１０７にログインした場合には、ログイン手順に伴い、端末１０７からユーザ端末記憶手段３にユーザＡの使用端末の変更が通知され、ユーザ端末記憶手段３のユーザＡに対応する端末が端末１０７に変更される。
【０１２９】
同様にユーザＡが端末１０７からログアウトすると、ログアウト手順に伴い、端末１０７からユーザ端末記憶手段３にユーザＡの使用端末の変更が通知され、ユーザ端末記憶手段３のユーザＡに対応する端末がデフォールトの端末１０１に変更される。
【０１３０】
なお、本例においては端末へのログイン／ログアウトにより、端末からユーザ端末記憶手段３へ使用端末の変更が通知される例を示したが、ユーザ端末記憶手段３が定期的に各端末へ、ユーザのログイン状況を問い合わせる構成とすることにより、使用端末を更新するようにしても良い。また、ユーザが端末を使用しているか否かは、必ずしもユーザのログイン状況によって更新するように構成する必要はなく、例えば端末の電源のＯＮ／ＯＦＦ、ユーザの位置情報、あるいは端末の加入者回線への接続/ 切断等を検出した結果によって更新するように構成してもよい。本実施例の方法によれば、ユーザがどの端末を使用中であるかという状態に基いて自動的にユーザ端末記憶手段を適切に更新することが可能となる。つぎに、端末のメディア入出力能力の有無を端末メディア記憶手段４に自動的に反映させるための処理手順を、第７の具体的動作例として説明する。
【０１３１】
〔第７の具体的動作例〕
第１の具体的な実施の態様にかかる本システムにおける第７の具体的動作例として、端末のメディア入出力能力の有無を端末メディア記憶手段４に自動的に反映させるための処理手順について説明する。
【０１３２】
計算機端末などにおいては、取り扱えるメディアの種類や内容は、どのような機能を有する入出力装置（インタフェース）が装着されているかにかかる。従って、現在どのような入出力装置が装着され、それが使用可能になっているかを管理する必要がある。
【０１３３】
この場合、端末毎に、その端末に対しての入出力装置が装着／脱却されると、当該端末上の入出力管理機能から端末メディア記憶手段４へ、使用メディアまたは符号化方式の追加／削除が通知されるようにシステムを構成しておく。
【０１３４】
例えば、端末１０７に音声入出力装置が装着され、音声情報の符号化／復号化を行ない、当該入出力装置を駆動するソフトウェア（ドライバ）が実装されると、該ソフトウェアまたは当該端末上の入出力管理機能から端末メディア記憶手段４へ使用符号化方式の追加登録要求が通知され、端末メディア記憶手段４が更新されるといったようにする。
【０１３５】
逆に、音声入出力装置が脱却された際には当該端末上の入出力管理機能が当該入出力装置の脱却を検出し、端末メディア記憶手段４に使用符号化方式の削除要求が通知され、端末メディア記憶手段４が更新されるようにする。
【０１３６】
この結果、例えば、端末１０７に音声入出力装置が装着され、音声情報の符号化／復号化を行ない、当該入出力装置を駆動するソフトウェアが実装されると、該ソフトウェアまたは当該端末上の入出力管理機能から端末メディア記憶手段４へ使用符号化方式の追加登録要求が通知され、端末メディア記憶手段４が更新され、音声入出力装置が脱却された際には当該端末上の入出力管理機能が当該入出力装置の脱却を検出し、端末メディア記憶手段４に使用符号化方式の削除要求が通知され、端末メディア記憶手段４が更新されることになる。
【０１３７】
つぎに、ユーザＡが音声および動画像によるユーザＤとの通信要求を起動した場合のもう一つの例について、第８の具体的動作例として説明する。
【０１３８】
〔第８の具体的動作例〕
第１の具体的な実施の態様にかかる本システムにおける第８の具体的動作例として、ユーザＡが音声および動画像によるユーザＤとの通信要求を起動した場合のもう一つの例について説明する。
【０１３９】
ユーザＡの使用可能な端末１０１は音声および動画像が扱える端末であり、ユーザＤの使用可能な端末１０６，１０７は前者が音声のみの電話端末、後者は動画を扱えるが音声は扱えない計算機端末である。
【０１４０】
本例におけるメッセージシーケンスを図１５に示す。本例では、一つまたは、複数のメディアまたは、メディア実現方式からなるメディアの組み合わせ、または、一つ以上の端末からなる端末の組み合わせの少なくとも一方を、通信に関与するユーザ間で調整して決定する機能を有する調整手段１２を使用する。
【０１４１】
図１５を参照して説明する。ユーザＡは通信要求において、通信相手としてユーザＤを、使用メディアとして音声および動画像を指定する。この通信要求は調整手段１２に通知される（図１５中メッセージＭ１５０１）。すると調整手段１２は、ユーザＤに対して、ユーザＡから通信要求が起動されたことを通知する（Ｍ１５０２）。
【０１４２】
この通知に対してユーザＤは、音声のみによる通信が可能であることを、この通信要求に対して応答する（Ｍ１５０３）。この応答を調整手段１２が受け取ると、当該調整手段１２はユーザＡからの通信要求とユーザＤからの通信要求とが異なるメディアの組合せであることを知る。そして、これにより、調整手段１２はユーザＡおよびユーザＤに対して、両者が共通に希望しているメディアである音声のみにて接続して良いかどうかを問い合わせる（Ｍ１５０４，Ｍ１５０５）。
【０１４３】
本例では、この問い合わせに対してユーザＡが承認するものとする。従って、ユーザＡはこの問い合わせに対して承認する旨を調整手段１２に通知する（Ｍ１５０６）。
【０１４４】
ユーザＤも当初要求したメディア通りであるので承認するとして調整手段１２に応答する（Ｍ１５０７）。
【０１４５】
なお、本例のユーザＤのように、各ユーザへの問い合わせ内容が、そのユーザの当初の要求通りである場合には問い合わせ、承認手順は省略しても良い。
【０１４６】
調整手段１２はユーザＡ，Ｄの双方から承認の応答を得たことにより、次にユーザ端末記憶手段３を参照し（Ｍ１５０８）、その参照応答（Ｍ１５０９）により、ユーザＡ側では端末１０１を、ユーザＤ側では端末１０６および端末１０７を、それぞれ使用可能であることを認識する。
【０１４７】
次に調整手段１２は端末メディア記憶手段４を参照し（Ｍ１５１０）、その参照応答（Ｍ１５１１）により、ユーザＡが使用可能な端末１０１は音声を符号化方式ａ１にて使用可能であり、ユーザＤが使用可能な端末１０６は音声を符号化方式ａ２にて使用可能であることを認識する。
【０１４８】
その結果、調整手段１２はユーザＡとユーザＤの間で共通に使用できる符号化方式は存在しないと判断し、メディア変換記憶手段１０を参照する（Ｍ１５１２）。メディア変換記憶手段１０の構成は第３の具体的動作で説明したものと同様である。
【０１４９】
メディア変換記憶手段１０の参照応答（Ｍ１５１３）により、調整手段１２はメディア変換記憶手段１０に記憶されているメディア変換手段のうち、メディア変換手段７０１を使用することにより、音声の符号化方式をａ１からａ２へ、ａ２からａ１へと変換することが可能であり、ユーザＡとユーザＤの間を音声メディアにて接続可能であることを認識する。
【０１５０】
そして、この認識結果に基づき当該音声の符号化方式の相互変換できるメディア変換手段であるメディア変換手段７０１を選択し、端末１０１とメディア変換手段７０１との間を符号化方式ａ１の音声にて、メディア変換手段７０１と端末１０６との間を符号化方式ａ２の音声にてそれぞれ接続するようコール・コネクション制御手段６に指示する（Ｍ１５１４）。
【０１５１】
コール・コネクション制御手段６は指示された内容に従ってコール・コネクションを設定し、コール・コネクションの設定が正常に終了すると、調整手段１２にコール・コネクションの設定応答を通知する（Ｍ１５１５）。
【０１５２】
これを受けて調整手段１２は通信開始をユーザＡ、ユーザＤに通知する（Ｍ１５１６，Ｍ１５１７）。
【０１５３】
このようにして設定されたコネクションの設定状態を図１６に示す。図では音声の符号化方式ａ１とａ２の相互変換できるメディア変換手段であるメディア変換手段７０１を介して、端末１０１とメディア変換手段７０１との間を符号化方式ａ１の音声にて、メディア変換手段７０１と端末１０６との間を符号化方式ａ２の音声にてそれぞれ接続して音声授受をするようにした様子が示されている。
【０１５４】
以上説明したように、第１の具体的な実施の態様によれば、複数メディアを含む通信を要求する際に、ユーザは一つの通信要求において、通信に参加するユーザ、使用するメディア、および必要に応じて通信形態を指定することにより、通信に参加する他のユーザの端末環境、使用可能符号化方式等を意識することなく、通信に参加するユーザ毎に適切な端末の組合せを選択し、選択した端末に対してコール・コネクションを設定することが可能となるという効果が得られる。
【０１５５】
以上は、相手方との関係で利用できるメディアをシステム側が自動的に選択して、コール・コネクションを設定するようにした例であった。次にこれを自動ではなく、ユーザに選択する余地を残した例を第２の具体的な実施の態様として説明する。
【０１５６】
（第２の具体的な実施の態様）
すなわち、ここでは本発明のもう一つの目的である、複数のメディアの組合せからなる通信を、予め使用する端末を指定しないで要求して、該通信要求の複数のメディアを１つないしは複数端末の組合せで実現する場合に、相手方との通信に利用可能なメディアを提示してユーザに選択させるようにして、ユーザの予期できない形での通信が実現されることを防止し、更に１人または複数のユーザの意図を反映した形で通信を実現する例を第２の具体的な実施の態様として説明する。
【０１５７】
そのためにここでは、１つあるいは複数のメディアを扱える複数の端末を収容する通信システムであって、ユーザによる、少なくとも通信を希望する一人以上の相手ユーザと１つ以上のメディアに関する情報を含む通信要求の入力を受け付ける通信要求入力手段と通信要求に応じて、通信に関与するユーザの各々に対して、その通信要求の少なくとも一部を満たすために前記各ユーザが使用可能な、１つまたは複数のメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方を１つないしは複数組決定する候補決定手段と、前記通信に関与する少なくとも一人のユーザに対する前記決定した１つまたは複数のメディアの組合せの候補、または端末の組合せの候補の少なくともいずれか一方を該ユーザまたは通信に関与する異なるユーザに通知し、該組合せの候補のいずれかを選択してその組合せによる通信を承認するか、あるいは通信要求の変更を希望するかの選択を、該通知を受けたユーザによる入力により決定させるユーザ意図反映手段と、この決定に基づきコール・コネクションを設定する設定手段とを備える構成とする。
【０１５８】
また好ましくは、前記ユーザ意図反映手段によって通信要求の変更が選択された場合、変更内容のユーザによる入力を可能にする通信要求変更手段を持つ構成とする。
【０１５９】
また好ましくは、前記ユーザ意図反映手段による複数ユーザの入力間で、不一致が生じたまたは生じる可能性のある場合、少なくとも２人以上の前記通信に関与するユーザ間で、前記組合せの候補の選択、ないしは通信要求の変更に関し調整することを可能にする、ユーザ間調整手段を備える構成とする。
【０１６０】
また、端末装置は、ネットワークに接続され、１つあるいは複数のメディアを扱える端末装置であって、ユーザが、少なくとも通信を希望する一人以上の相手ユーザと１つ以上のメディアに関する情報を含む通信要求を入力する通信要求入力手段と前記通信に関与する少なくとも一人のユーザに関して、該ユーザが通信要求発生時点でその通信要求の少なくとも一部を満たすために利用可能な１つまたは複数のメディアの組合せ、または端末の組合せの少なくともいずれか一方を該ユーザまたは通信に関与する異なるユーザに通知し、該組合せのいずれかを選択してその組合せによる通信を承認するか、あるいは通信要求の変更を希望するかの選択を、該通知を受けたユーザによる入力により決定させるユーザ意図反映手段と、この決定に基づきコール・コネクションを設定する設定手段とを設ける構成とする。
【０１６１】
図１７に第２の具体的な実施の態様としての通信システムの構成例をブロック図で示す。図において、１３００はユーザ端末記憶手段、１４００は端末メディア記憶手段、１５００は候補決定手段、１６００はコール・コネクション制御手段、１８００はメディア変換記憶手段、２３００は通信要求入力手段、２４００はユーザ意図反映手段、２５００はユーザ間調整手段、２６００は通信要求変更手段、３０００は多地点間メディア処理記憶手段である。
【０１６２】
これらのうち、通信要求入力手段２３００は、少なくとも通信を希望する一人以上の相手ユーザと１つ以上のメディアに関する情報を含む通信要求のユーザによる入力を受け付ける機能を有するものである。
【０１６３】
また、候補決定手段１５００は、通信要求に応じて通信に関与するユーザの各々に対して、その通信要求の少なくとも一部を満たすために前記各ユーザが使用可能な、１つまたは複数のメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方を１つないしは複数組の候補を決定する機能を有するものである。
【０１６４】
より具体的には、前記候補決定手段１５００は、通信に関与するユーザの各々に対して、ユーザ端末記憶手段１３００と端末メディア記憶手段１４００により、前記各ユーザが使用可能な１つまたは複数のメディアの組合せの候補、または端末の組合せ候補の少なくとも一方を決定する。
【０１６５】
更に、前記候補決定手段１５００は、通信に参加するユーザ間で共通に使用できるメディアまたはメディア実現方式が存在しない場合に、第１のユーザが使用するメディアまたはメディア実現方式から１つ以上のメディア変換手段を接続して第２のユーザの使用するメディア、またはメディア実現方式へ至るメディア変換手段を探すために必要に応じて繰り返しメディア変換記憶手段１８００を起動することで、前記複数のユーザ間の通信にて各ユーザが使用するメディアまたはメディア実現方式間を接続するメディア変換手段があるか否かに関する情報を得て、その情報を加味して候補を決定する方式としても良い。
【０１６６】
あるいは、前記候補決定手段１５００は、通信要求の中で指定された通信形態と、通信に関与する各ユーザが使用するメディアまたはメディア実現方式とにより、多地点間メディア処理記憶手段３０００を起動して、必要に応じて多地点間メディア処理手段を決定する方式としても良い。
【０１６７】
ユーザ意図反映手段２４００は、前記通信に関与する少なくとも一人のユーザに対する前記決定した１つまたは複数のメディアの組合せの候補、または端末の組合せの候補の少なくともいずれか一方を該ユーザまたは通信に関与する異なるユーザに通知し、該組合せの候補のいずれかを選択してその組合せによる通信を承認するか、あるいは通信要求の変更を希望するかの選択を、該通知を受けたユーザにより入力させ、決定させるものである。
【０１６８】
通信要求変更手段２６００は、通信要求の変更内容のユーザによる入力を可能にするものである。
【０１６９】
ユーザ間調整手段２５００は、前記ユーザ意図反映手段による複数ユーザの入力間で、不一致が生じたまたは生じる可能性のある場合、少なくとも２人以上の前記通信に関与するユーザ間で、前記組合せの候補の選択、ないしは通信要求の変更に関し調整することを可能にするものである。
【０１７０】
コール・コネクション制御手段１６００は、前記メディアの組合せの候補または端末の組合せの候補の中からの前記ユーザ意図反映手段によるユーザの選択に基づき、コール・コネクションの設定・開放を行なうものである。
【０１７１】
通信要求入力手段２３００、ユーザ意図反映手段２４００、ユーザ間調整手段２５００、通信要求変更手段２６００は、ユーザが利用する少なくとも１つの端末で使用できるユーザＩ／Ｆ（インタフェース）を介して、ユーザに情報を提供し、ユーザからの入力を受け付けるものである。
【０１７２】
ユーザＩ／Ｆは、例えばパソコン、ワークステーションの画面・キーボード・マウス、あるいは多機能電話の表示画面とダイヤル及びボタン、ないしは通常の電話のマイク・スピーカと交換機内に備えられた音声認識・合成機能を組み合わせたものなどである。前記各手段は、このようなユーザＩ／Ｆとそれを制御する機能により実現される。制御する機能の実体は、パソコン、ワークステーション、交換機に付加された制御用計算機などに記憶され、その上で実行されるプログラムである。
【０１７３】
図１８に本発明システムの処理の流れ図を示す。
【０１７４】
図に従って説明する。ユーザによる、少なくとも通信を希望する一人以上の相手ユーザと１つ以上のメディアに関する情報を含む通信要求の入力を受け付け（Ｓ１０１）、通信要求に応じて、通信に関与するユーザの各々に対して、その通信要求の少なくとも一部を満たすために前記各ユーザが使用可能な、１つまたは複数のメディアまたはメディア実現方式からなるメディアの組合せ、または１つ以上の端末からなる端末の組合せの少なくとも一方を１つないしは複数組の候補を決定する（Ｓ１０２）。
【０１７５】
そして、次に前記通信に関与する少なくとも一人のユーザに対する前記決定した１つまたは複数のメディアの組合せの候補、または端末の組合せの候補の少なくともいずれか一方を該ユーザまたは通信に関与する異なるユーザに通知し、該組合せの候補のいずれかを選択してその組合せによる通信を承認するか、あるいは通信要求の変更を希望するかの該ユーザによる選択を入力させる（Ｓ１０３）。
【０１７６】
更に、複数ユーザの入力間で、不一致が生じたまたは生じる可能性のある場合、少なくとも２人以上の前記通信に関与するユーザ間で、前記組合せの候補の選択、ないしは通信要求の変更に関し調整を行なう（Ｓ１０４）。
【０１７７】
更に、候補の選択でユーザ間の合意を見た場合（Ｓ１０５）、合意された端末の組合せまたはメディアの組合せに基づいてコールコネクションを設定し（Ｓ１０６）、通信要求の変更内容で合意を見た場合（Ｓ１０７）、再びＳ１０２以下の処理を実行する。
【０１７８】
このような第２の具体的な実施の態様について、より詳しく説明をする。
【０１７９】
（第２の具体的な実施の態様のより詳しい説明）
図１９に本発明の第２の具体的な実施の態様としてのマルチメディア通信システムの構成を示す。
【０１８０】
図１９は図１７に示した手段の具体的な装置への対応付けの一例であり、発明の趣旨を逸脱しない範囲でこれ以外の対応付けもあり得る。また、図１９は、主に制御面を記述した図１７の構成に加えて、情報の伝達、および伝達される情報の変換、合成または分離に関わる構成要素（ネットワーク１２００、メディア変換手段１７１１、多地点間メディア処理手段１９１１）を含んでいる。
【０１８１】
端末１１０１，１１０７は音声、動画、静止画、データを扱うことが可能なマルチメディア計算機端末、端末１１０２，１１０５はデータを扱える計算機端末であり、また、端末１１０３，１１０４，１１０６は音声、動画、静止画を扱うことができるＴＶ電話端末であり、端末１１０８は音声を扱うことが可能な電話端末である。
【０１８２】
これらの端末のうち、端末１１０１，１１０５，１１０７は通信要求入力手段（それぞれ２３０１，２３０５，２３０７）、ユーザ意図反映手段（それぞれ２４０１，２４０５，２４０７）、ユーザ間調整手段（それぞれ２５０１，２５０５，２５０７）、通信要求変更手段（それぞれ２６０１，２６０５，２６０７）を備える。
【０１８３】
サーバ装置１１０９はコール・コネクション制御手段１６０９、候補決定手段１５０９を実現する。サーバ装置１１１０は端末・メディア記憶手段１４１０、ユーザ・端末記憶手段１３１０を備える。端末・メディア記憶手段１４１０は、前記各端末が扱える上記のメディア、および各端末が各メディアをその時点で扱えるか否か（必要な資源が空いているか）の状態を記憶する。
【０１８４】
本システムにおいて、ユーザａは端末１１０１，１１０２および１１０３を、ユーザｂは端末１１０４および１１０５を、ユーザｃは端末１１０６を、そして、ユーザｄは端末１１０７および１１０８を利用可能であるとすると、ユーザ・端末記憶手段１３１０は、ユーザａが端末１１０１，１１０２および１１０３、ユーザｂは端末１１０４および１１０５、ユーザｃは端末１１０６、そして、ユーザｄは端末１１０７および１１０８を利用可能であることを記憶している。
【０１８５】
サーバ装置１１１１は多地点間マルチメディア処理手段１９１１、メディア変換手段１７１１を備える。端末１１１２は多地点間マルチメディア処理記憶手段３０１２、メディア変換記憶手段１８１２を備える。
【０１８６】
多地点間マルチメディア処理記憶手段３０１２は、多地点間マルチメディア処理手段１９１１がサーバ装置１１１１にあることを記憶し、メディア変換記憶手段１８１２はメディア変換手段１７１１がサーバ装置１１１１にあることを記憶する。なお、これらのサーバ装置１１０９，１１１０，１１１１および１１１２は、ユーザが直接利用する端末装置そのもの、またはユーザ側に設備される一部の端末装置をサーバとして運用しているものであっても構わないし、ネットワーク側に設備される交換機またはそれに付加される装置であっても構わない。
【０１８７】
このような構成の本システムの動作例をつぎに説明する。はじめに、ユーザａがユーザｂとの音声、動画像とデータによる通信を要求した場合を例にとって動作例１として説明する。
【０１８８】
〔動作例１〕
第２の具体的な実施の態様のより詳しい説明としてのマルチメディア通信システムにおいて、ユーザａがユーザｂとの音声、動画像とデータによる通信を要求した場合を例に動作例１として説明する。
【０１８９】
図２０は本動作例１において、通信要求入力時（図１８のＳ１０１）にユーザａに示される通信セッション制御画面例であり、図２０の如き通信セッション制御画面４０００が端末１１０１のディスプレイ画面の一部に表示される。この画面を利用することにより、この時点では端末１１０１の通信要求入力手段２３０１を動作させて通信要求入力をすることができることになる。
【０１９０】
すなわち、通信セッション制御画面４０００には、ユーザ追加ボタン４００２、ユーザ削除ボタン４００３、メディア追加ボタン４００４、メディア削除ボタン４００５が表示されており、ユーザａはユーザ追加ボタン４００２、ユーザ削除ボタン４００３を例えばマウスなどのポインティングデバイスを使用するなどして操作することにより、通信を希望するユーザを追加・削除し、メディア追加ボタン４００４、メディア削除ボタン４００５を操作することにより、通信を希望するメディアを追加・削除することができる。また、操作取り消しのためのキャンセルボタン４０１２、操作の確認のための確認ボタン４０１１がある。
【０１９１】
具体的な手順は、例えば、追加はボタンを押すと詳細なデータを入力するための新たな表示が現れ、削除は対象を指定してからボタンを押すといったものである。
【０１９２】
これらの通信要求の入力状況は、通信セッション制御画面４０００における画面中の通信セッション状態制御部４００１に表示される。図２０は本例の通信要求が全て設定された後の状態を示す。ユーザａは、キャンセルボタン４０１２により通信要求を取り消すこともできるが、ここでは確認ボタン４０１１により通信要求の入力完了を示した場合を想定する。
【０１９３】
入力された通信要求はサーバ装置１１０９の候補決定手段１５０９に通知される。候補決定手段１５０９は、サーバ装置１１１０のユーザ・端末記憶手段１３１０を参照し、ユーザａが端末１１０１、１１０２および１１０３を、ユーザｂが端末１１０４および１１０５を使用可能であることを認識する。
【０１９４】
次にサーバ装置１１０９の候補決定手段１５０９はサーバ装置１１１０の端末・メディア記憶手段１４１０を参照し、ユーザａが使用可能な端末１１０１は音声、静止画およびデータ、端末１１０２はデータ、端末１１０３は音声、動画像または静止画を、ユーザｂが使用可能な端末１１０４は音声、動画像または静止画、端末１１０５はデータを使用可能であることを認識する。
【０１９５】
ここで、端末１１０１は動画像を扱う能力を持っているが、この時点ではその能力を実現するための資源が別の目的で利用されているために、使用可能であるとは認識されない。
【０１９６】
候補決定手段１５０９は、ユーザａに対しては端末１１０２（計算機）によるデータ、端末１１０３（ＴＶ電話）による音声と動画像、端末１１０１（マルチメディア計算機）による音声とデータの提供、ユーザｂに対しては端末１１０４（ＴＶ電話）による音声と動画像、端末１１０５（計算機）によるデータの提供を候補として決定する（図１８のＳ１０２）。
【０１９７】
図２１は本例において候補の選択または通信要求変更入力時（図１８のＳ１０1）にユーザａに示される通信セッション制御部４００１であり、端末１１０１の画面の一部に表示される。この時点でユーザ意図反映手段２４０１として動作する。
【０１９８】
通信セッション状態表示部４００１は、候補決定手段１５０９から得たユーザａ側の上記の端末の組合せの候補およびメディアの組合せの候補の情報と、ユーザｂ側のメディアの組合せの候補を表示している。
【０１９９】
横に並んでいる端末が端末の組合せの候補である。ユーザｂ側の端末の組合せの候補を表示することはユーザａにとってそれほど重要でない場合が多いので、ここではメディアの提供の可能性のみを表示しているが、ユーザｂ側の端末の組合せの候補を表示しても良い。
【０２００】
また、単にユーザａ側の情報のみを表示し、ユーザｂ側の情報を全く表示しないことも、この実施例に示すようなシナリオにおいては意味を持つ。ユーザａは、端末１１０１（マルチメディア計算機）で音声、動画像およびデータを同時に扱えることを期待していたが、それが何らかの理由（例えば、上述のように動画を扱うために必要な資源がその時点で別の目的で利用されていた）で不可能であることを認識する。
【０２０１】
ユーザａは端末選択ボタン４００７により、自らが使用できる候補として挙げられた端末の組合せ（ＴＶ電話と計算機、ないしはマルチメディア計算機）、またはその一部（組合せ  −ＴＶ電話と計算機−  からＴＶ電話のみ）を選択することができる。
【０２０２】
更にメディア選択ボタン４００８によりメディア（音声、動画像、および／またはデータ）を選択することができる。単一の端末が複数のメディアを提供している場合、端末とメディアの両方を選択することで、その一部のみを選択することもできる（例えば、端末としてＴＶ電話とメディアとして音声を選ぶと、ＴＶ電話が音声のみを提供する）。
【０２０３】
ユーザａが予期した形での通信ができないことを認識したため、動画像に対する通信要求を静止画に対する要求に変更する場合も考えられる。このためにはメディア削除ボタン４００５を操作することにより動画像を削除し、メディア追加ボタン４００４を操作することにより静止画を追加するようにすれば良い。また、通信中止ボタン４００６を操作することにより通信を中止することもできる。
【０２０４】
すなわち、メディア追加ボタン、メディア削除ボタン、メンバ追加ボタン、メンバ削除ボタン、通信中止ボタンを表示して、これらボタンを必要に応じて利用することで、図２１の通信セッション制御画面４０００は通信要求変更手段２６０１の操作画面としても利用することができる。選択および通信要求の変更は、キャンセルボタン４０１２を操作することで取り消され、確認ボタン４０１１を操作することにより入力の完了が示される。
【０２０５】
本例のシナリオでは、ユーザｂからのユーザ意図の入力がないこと（入力の機会を与えていない）を想定しているため、ユーザａから入力された候補選択・通信要求変更は調整の必要なく（図１８のＳ１０４）、直ちに合意されたものとみなされ（図１８のＳ１０５またはＳ１０７）、候補が選択された場合はコール・コネクションを設定（図１８のＳ１０６）した後に処理を終え、通信要求が変更された場合は再びメディア・端末候補決定（図１８のＳ１０２）を行なう。通信が中止された場合は、何の合意も得られなかったものと見做され、そのまま処理が終了する。
【０２０６】
図２２は本動作例において、上述のように一旦、通信要求を変更した後の候補の選択または通信要求入力時（図１８のＳ１０３）にユーザａに示される通信セッション制御画面であり、図のような通信セッション制御画面４０００が端末１１０１のディスプレイ画面の一部に表示される。ここでユーザａが上述の方法でマルチメディア計算機を選択すれば、上述の手順の後にコール・コネクションが設定され（図１８のＳ１０６）マルチメディア計算機による通信が開始される。
【０２０７】
この結果、マルルチメディアサービスが可能な通信システムにおいて、複数のメディアの組合せからなる通信を、予め使用する端末を指定しないで要求して、該通信要求の複数のメディアを１つないしは複数端末の組合せで実現する場合に、相手方との通信に利用可能なメディアを提示してユーザに選択させるようにしたことにより、ユーザの予期できない形での通信が実現されることを防止し、更に１人または複数のユーザの意図を反映した形で通信を実現することができる。
【０２０８】
以上の動作例１は、ユーザａがユーザｂとの音声、動画像とデータによる通信を要求した場合の例であった。
【０２０９】
つぎに、ユーザａがユーザｃとの音声とデータによる通信を要求した場合を例に動作例２を説明する。
【０２１０】
〔動作例２〕
第２の具体的な実施の態様のより詳しい説明としてのマルチメディア通信システムにおいて、ユーザａがユーザｃとの音声とデータによる通信を要求した場合を例に動作例２として説明する。
【０２１１】
図２３は本例において通信要求入力時（図１８のＳ１０１）にユーザａに示される通信セッション制御画面の例であり、この通信セッション制御画面４０００が端末１１０１のディスプレイ画面の一部に表示される。この画面を利用することにより、この時点では端末１１０１は通信要求入力手段２３０１として動作する。ユーザａは動作例１と同様の方法で通信要求を入力する。
【０２１２】
図２３は本例の通信要求が全て設定された後の状態を示す。以下、確認ボタンにより通信要求の入力完了を示した場合を想定する。
【０２１３】
入力された通信要求はサーバ装置１１０９の候補決定手段１５０９に通知される。候補決定手段１５０９は、サーバ装置１１１０のユーザ・端末記憶手段１３１０を参照し、ユーザａが端末１１０１，１１０２および１１０３を、ユーザｃが端末１１０６を使用可能であることを認識する。
【０２１４】
次に候補決定手段１５０９はサーバ装置１１１０の端末・メディア記憶手段１４１０を参照し、ユーザａが使用可能な端末１１０１は音声、動画像、静止画およびデータ、端末１１０２はデータ、端末１１０３は音声、動画像または静止画を、ユーザｃが使用可能な端末１１０６は音声、動画像または静止画を使用可能であることを認識する。
【０２１５】
この認識結果より候補決定手段１５０９は、ユーザｃ側がデータを扱えないため、ユーザａ側でデータの提供をしても意味がないと判断し、ユーザａに対して端末１１０１（マルチメディア計算機）による音声、端末１１０３（ＴＶ電話）による音声の提供、ユーザｃに対して端末１１０６（ＴＶ電話）による音声の提供を候補として決定する。但し、ユーザａに端末１１０１（マルチメディア計算機）または端末１１０２（計算機）によりデータの提供ができることも示す（図１８のＳ１０２）。
【０２１６】
図２４は本例において候補の選択または通信要求変更入力時（図１８のＳ１０1 ）にユーザａに示される通信セッション制御画面であり、図に示すような通信セッション制御画面４０００が端末１１０１のディスプレイ画面の一部に表示される。この画面を利用することにより、この時点で端末１１０１はユーザ意図反映手段２４０１として動作する。
【０２１７】
先の動作例１が、ユーザａが自らのメディアまたは端末の候補に関する情報を得た結果としての操作に重点を置いたのに比べ、本例ではユーザａが相手であるユーザｃに関するメディアまたは端末の候補に関する情報を得た結果としての操作に重点をおいて説明する。
【０２１８】
通信セッション状態表示画面４００１は、ユーザａ側では利用できるがユーザｃ側で利用できないメディアを扱えるユーザａ側の端末も表示すること、およびユーザｃ側の情報を必ず表示することを除いて、前述の動作例１と同様に候補の情報を示す。ユーザａはユーザｃがデータを扱えないことを認識する。
【０２１９】
ユーザａはメディア選択ボタン４００８により音声のみを選択することができる。ユーザａの相手側であるユーザｃへの操作として、ユーザｃの端末としてＴＶ電話を明示的に表示している場合は、端末選択ボタン４００７によりユーザｃのＴＶ電話を選択することもできる。
【０２２０】
もちろん、動作例１と同様に、ユーザａがメディア削除ボタン４００５とメディア追加ボタン４００４の操作で、データに対する通信要求を静止画に対する通信要求に変更すること、通信中止ボタン４００６の操作で通信を中止することもできる。
【０２２１】
この場合、図２４の通信セッション制御画面４０００はこれを利用することで、通信要求変更手段２６０１として動作する。確認ボタン４０１１の操作により、選択または通信要求の変更の入力の完了が示されたとする。
【０２２２】
本例のシナリオでは、ユーザｃからのユーザ意図の入力がないこと（入力の機会を与えていない）を想定しているため、ユーザａから入力された候補選択・通信要求変更は調整の必要なく（図１８のＳ１０４）、直ちに合意されたものとみなされ（図１８のＳ１０５またはＳ１０７）、候補が選択された場合はコール・コネクションを設定（図１８のＳ１０６）した後に処理を終え、通信要求が変更された場合は再びメディア・端末候補決定（図１８のＳ１０２）を行なう。
【０２２３】
通信が中止された場合は、何の合意も得られなかったものとみなされ、そのまま処理が終了する。
【０２２４】
図２５は本例において、上述のように一旦、通信要求を変更した後の候補の選択または通信要求入力時（図１８のＳ１０１）にユーザａに示される通信セッション制御画面の例であり、図のような通信セッション制御画面４０００が、端末１１０１のディスプレイ画面の一部に表示される。
【０２２５】
ここでユーザａが上述の方法で自側端末としてマルチメディア計算機またはＴＶ電話を選択するか、メディアとして音声および／または静止画を選択すれば、上述の手順の後にコール・コネクションが設定され（図１８のＳ１０６）通信が開始される。
【０２２６】
この結果、マルチメディアサービスが可能な通信システムにおいて、複数のメディアの組合せからなる通信を、予め使用する端末を指定しないで要求して、該通信要求の複数のメディアを１つないしは複数端末の組合せで実現する場合に、相手方との通信に利用可能なメディアを提示してユーザに選択させるようにしたことにより、ユーザの予期できない形での通信が実現されることを防止し、更に１人または複数のユーザの意図を反映した形で通信を実現することができる。
【０２２７】
つぎに、ユーザａがユーザｄとの音声と動画像による通信を要求した場合を例にとって、着信側であるユーザｄの意図の反映、およびユーザａとユーザｄ間での調整に重点をおいた動作例を動作例３として説明する。
【０２２８】
〔動作例３〕
第２の具体的な実施の態様のより詳しい説明としてのマルチメディア通信システムにおいて、ユーザａがユーザｄとの音声と動画像による通信を要求した場合に、着信側であるユーザｄの意図の反映、およびユーザａとユーザｄ間での調整に重点をおいた例を動作例３として説明する。
【０２２９】
ユーザａは先の動作例１、動作例２に述べたと同様な方法で上記の通信要求を入力する（図１８のＳ１０１）。
【０２３０】
入力された通信要求は、サーバ装置１１０９の候補決定手段１５０９に通知される。すると候補決定手段１５０９は、サーバ装置１１１０のユーザ・端末記憶手段１３１０を参照し、ユーザａが端末１１０１、１１０２および１１０３を、そして、ユーザｄが端末１１０７および１１０８をそれぞれ使用可能であることを認識する。
【０２３１】
次に候補決定手段１５０９はサーバ装置１１１０の端末・メディア記憶手段１４１０を参照し、これによって、ユーザａが使用可能な端末１１０１は音声、動画像、静止画およびデータであり、端末１１０２はデータであり、端末１１０３は音声、動画像または静止画であることを認識し、また、ユーザｄが使用可能な端末１１０７は音声、動画像、静止画およびデータであり、端末１１０８は音声を使用可能であることを認識する。
【０２３２】
この認識により、次に候補決定手段１５０９は、ユーザａに対して端末１１０１（マルチメディア計算機）による音声および動画像、端末１１０３（ＴＶ電話）による音声および動画像の提供、ユーザｃに対して端末１１０７（マルチメディア計算機）による音声および動画像の提供を候補として決定する（図１８のＳ１０２）。
【０２３３】
この情報は動作例１、動作例２で説明したものと同様に、ユーザ意図反映手段２４０１によりユーザａにも示されるが、詳細は省略する。但し、ユーザａがＴＶ電話による音声と動画像の通信を選択したと仮定する。
【０２３４】
図２６は本例において候補の選択または通信要求変更入力時（図１８のＳ１０3 ）にユーザｄに示される通信セッション制御画面の例であり、図のような通信セッション制御画面４０００が端末１１０７のディスプレイ画面の一部に表示される。この画面を利用することにより、この時点で端末１１０７はユーザ意図反映手段２４０７として動作する。
【０２３５】
ユーザｄは通信セッション状態表示画面４００１の表示内容により、ユーザａが音声と動画像による通信を望んでおり、ユーザｄの側でマルチメディア計算機を選択すれば、その要求を満たすことができることを認識する。
【０２３６】
ユーザｄはマルチメディア計算機を選択することもできるが、ここではユーザｄがその時点で動画像による通信を望まない場合を想定し、端末選択ボタン４００７を使用して電話を選んだとする（図１８のＳ１０３）。
【０２３７】
ユーザａの選択結果（ＴＶ電話による音声と動画像）は端末１１０１のユーザ間調停手段２５０１に、ユーザｄの選択結果（電話による音声）は端末１１０７のユーザ間調整手段２５０７に渡される。これら２つのユーザ間調整手段２５０１，２５０７は、この結果を相互に交換し、それぞれユーザａとユーザｄの間の選択が一致しないことを認識する。そして、ユーザ間調整手段２５０７はユーザａに対して図２７に示す如き内容を、また、ユーザ間調停手段２５０１はユーザｄに対して図２８に示す如き内容を提示する。
【０２３８】
これらの図の通信セッション状態表示部４００１に示す内容は、各ユーザ毎に更に状態の表示が、「一致」、「自分（ユーザａまたはユーザｄ）」、「相手ユーザ（ユーザｄまたはユーザａ）」、「候補」に細分化されている。
【０２３９】
「一致」の並びは、調整に関わるユーザ間（つまりユーザａとユーザｄの間）での意見が一致している部分を示す。「自分」の並びは、この図が表示されているユーザ（図２７はユーザａ、図２８はユーザｄ）の要求または選択を示す。
【０２４０】
「相手ユーザ」の並びは、相手ユーザ（図２７はユーザｄ、図２８はユーザａ）の要求または選択を示す。「候補」の並びは、候補決定手段１５０９により候補として提示された端末またはメディアを示す。
【０２４１】
ユーザによって選択されたものは除いて表示しても良い。以下では、既に述べた方法でユーザａが動画像の要求を静止画の要求に変更した場合を想定する。
【０２４２】
この変更の結果、ユーザａに対するセッション制御部の表示は図２９のようになる。確認ボタン４０１１が押されることが変更内容の確定を意味するので、これを契機にこの変更はユーザ間調整手段２５０１からユーザ間調整手段２５０７にも伝えられる。
【０２４３】
この結果、ユーザｄに対するセッション制御画面４０００の表示は図３０のようになる。ユーザｄは、同意ボタン４００９を用いてこの通信要求の変更に対する同意、拒否ボタン４０１０を用いてこの変更に対する拒否を表明する。
【０２４４】
同意または拒否は、ユーザ間調整手段２５０７からユーザ間調整手段２５０１に伝えられる。拒否の場合には、同時に通信要求の別な形での変更を提案することもできる。以下では同意が得られたものと仮定する（図１８のＳ１０４）。
【０２４５】
この調整にはユーザａとユーザｄだけが関与しており、ユーザａの提案にユーザｄが同意したので、ユーザ調整手段２５０１およびユーザ調整手段２５０７は、これで調整は合意に至ったと判断する。更に場合分けすれば、ユーザａの提案は選択の変更ではなく、通信内容の変更であったため、候補の合意ではなく（図１８のＳ１０５）、通信変更内容が合意に至ったと判断する（図１８のＳ１０７）。
【０２４６】
変更された通信要求内容の候補決定手段１５０９への通知は、ユーザ間調整手段２５０１が行なっても、あるいはユーザ間調整手段２５０７が行なっても良い。候補決定手段１５０９は、上述したと同様な方法で、ユーザａに対して端末１１０１（マルチメディア計算機）による音声および静止画、端末１１０３（ＴＶ電話）による音声および静止画の提供、ユーザｃに対して端末１１０７（マルチメディア計算機）による音声および静止画の提供を候補として決定する（図１８のＳ１０２）。
【０２４７】
図３１および図３２は、上記の候補の決定の後、候補の選択または通信要求変更入力時（図１８のＳ１０３）に、それぞれユーザａおよびｄに示される通信セッション制御画面の例であり、図のような通信セッション制御画面４０００が表示される。
【０２４８】
ユーザａがＴＶ電話、ユーザｄがマルチメディア計算機を選択すれば（図１８のＳ１０３）、両者での一致が見られ（図１８のＳ１０４およびＳ１０５）、コール・コネクション制御手段１６０９により端末１１０３（ＴＶ電話）と端末１１０７（マルチメディア計算機）間にコール・コネクションが設定され（図１８のＳ１０６）、処理が終了する。
【０２４９】
別のケースとして、図２７がユーザａに表示されている時点で、ユーザａが端末としてＴＶ電話、メディアとして音声のみを選択した場合を考える。
【０２５０】
この選択の結果、ユーザａに対するセッション制御画面４０００の表示は図３３のようになる。確認ボタン４０１１が押されることが変更内容の確定を意味するので、これを契機にこの変更はユーザ間調整手段２５０１からユーザ間調整手段２５０７にも伝えられる。
【０２５１】
この結果、ユーザｄに対するセッション制御画面４０００の表示は図３４のようになる。ユーザｄは、同意ボタン４００９を用いて、この通信要求の変更に対する同意を表明する。同意は、ユーザ間調整手段２５０７からユーザ間調整手段２５０１に伝えられる（図１８のＳ１０４）。
【０２５２】
この調整にはユーザａとユーザｄだけが関与しており、ユーザａの提案にユーザｄが同意したので、ユーザ調整手段２５０１およびユーザ調整手段２５０７は、これで調整は合意に至ったと判断する。更に場合分けすれば、ユーザａの提案は選択の変更（図１８のＳ１０５）であったので、コール・コネクション制御手段１６０９がＴＶ電話１１０３とマルチメディア計算機１１０７間に音声のみのコール・コネクションを設定する（図１８のＳ１０６）。これで処理を終る。
【０２５３】
この結果、マルチメディアサービスが可能な通信システムにおいて、複数のメディアの組合せからなる通信を、予め使用する端末を指定しないで要求して、該通信要求の複数のメディアを１つないしは複数端末の組合せで実現する場合に、相手方との通信に利用可能なメディアを提示してユーザに選択させるようにしたことにより、ユーザの予期できない形での通信が実現されることを防止し、更に１人または複数のユーザの意図を反映した形で通信を実現することができる。
【０２５４】
次に、ユーザａがユーザｄとの音声と動画像による通信を要求し、ユーザｄがその通信にユーザｂの追加を提案した場合を例にとって、メディアに関連する通信要求ではなく、通信に参加するユーザに関する通信要求に重点をおいた動作例を動作例４として説明する。
【０２５５】
〔動作例４〕
第２の具体的な実施の態様のより詳しい説明としてのマルチメディア通信システムにおいて、ユーザａがユーザｄとの音声と動画像による通信を要求し、ユーザｄがその通信にユーザｂの追加を提案した場合を例にとり、メディアに関連する通信要求ではなく、通信に参加するユーザに関する通信要求に重点をおいた例を動作例４として次に説明する。
【０２５６】
図３５に至るまでの手順（図１８のＳ１０１、Ｓ１０２）は、前述の動作例３で説明した図２６に至るまでの手順と同様なので省略する。
【０２５７】
図３５は本例において候補の選択または通信要求変更入力時（図１８Ｓ１０３）にユーザｄに示される通信セッション制御画面の例であり、図に示されるような通信セッション制御画面４０００が、端末１１０７のディスプレイ画面の一部に表示される。この画面を利用することにより、この時点では端末１１０７はユーザ意図反映手段２４０７として動作する。
【０２５８】
ユーザｄは通信セッション制御画面４０００中における通信セッション状態表示部４００１の表示内容により、ユーザａが音声と動画像による通信を望んでおり、ユーザｄの側でマルチメディア計算機を選択すれば、その要求を満たすことができることを認識する。
【０２５９】
ここでは、ユーザｄが音声と動画像でユーザｂとも同時に通信するべきであると考えた場合を想定する。ユーザｄは、マルチメディア計算機を選択するのに加えて、ユーザ追加ボタン４００２を操作してユーザｂを追加することにより、通信要求の変更を提案する（図１８のＳ１０３）。
【０２６０】
ユーザａの選択結果（動作例３と同じ、ＴＶ電話による音声と動画像）は端末１１０１のユーザ間調停手段２５０１に、ユーザｄの選択結果（マルチメディア計算機による音声と動画像）と通信要求の変更（ユーザｂとの音声と動画像による通信の追加）は端末１１０７のユーザ間調整手段２５０７に渡される。
【０２６１】
これら２つのユーザ間調整手段２５０１，２５０７は、この結果を相互に交換し、それぞれユーザａとユーザｄの間の選択は一致するが、ユーザｄにより通信要求の変更が提案されていることを認識し、ユーザ間調整手段２５０７がユーザａに対して図３６、ユーザ間調停手段２５０１がユーザｄに対して図３７の如き画面を提示する。
【０２６２】
ここでは動作例３と異なり、ユーザａとユーザｄに関わる部分は一致しているため、セッション状態表示部４００１において、「一致」、「自分」、「相手ユーザ（ユーザｄまたはユーザａ）」、「候補」に細分化されるのは、ユーザｄによる提案に関わるユーザｂに関する情報のみである。
【０２６３】
これによりユーザａは、ユーザｂの通信への追加が提案されていることを認識する。ユーザａは、この提案を受け入れるなら同意ボタン４００９を操作することで同意を表明し、受け入れないなら拒否ボタン４０１０を操作することで拒否を表明することができる。
【０２６４】
提案を受け入れた場合、ユーザｂに対する図３６に示すセッション状態表示部４００１のユーザｂに関する「自分（ユーザａ）」の音声と動画像の欄が、「不明」から「有り」に変化し、提案を受け入れなかった場合、対応する欄が「無し」に変化する。この同意または拒否はユーザ間調整手段２５０１からユーザ間調整手段２５０７にも伝えられる。
【０２６５】
ユーザａが提案を受け入れた場合、ユーザｂに対する図３７のセッション状態表示部４００１のユーザｂに関する「相手ユーザ（ユーザａ）」の音声と動画像の欄が、「不明」から「有り」に変化し、後者の場合、対応する欄が「無し」に変化する。以下では同意が得られたものと仮定する（図１８のＳ１０４）。
【０２６６】
この調整にはユーザａとユーザｄだけが関与しており、ユーザｄの提案にユーザａが同意したので、ユーザ調整手段２５０１およびユーザ調整手段２５０７は、これで調整は合意に至ったと判断する。
【０２６７】
更に場合分けすれば、ユーザｄの提案は選択の変更ではなく、通信内容の変更であったため、候補の合意ではなく（図１８のＳ１０５）、通信変更内容が合意に至ったと判断する（図１８のＳ１０７）。
【０２６８】
変更された通信要求内容の候補選択手段１５０９への通知は、ユーザ調整手段２５０１が行なってもユーザ調整手段２５０７が行なっても良い。
【０２６９】
候補決定手段１５０９は、上述したと同様な方法で、新たなユーザｂに対して端末１１０４（ＴＶ電話）による音声と動画像の提供を候補として決定すると同時に、通信に関与するユーザが３人であることから多者間通信であることを認識する。そして、多地点間メディア処理記憶手段３０１２を参照して、音声と動画像の３者通信を実現する多地点間メディア処理手段１９１１を選択する（図１８のＳ１０２）。
【０２７０】
上記の候補の決定の後に、候補の選択または通信要求変更入力時（図１８のＳ１０３）に、ユーザａ、ユーザｂおよびユーザｄに対して、上記候補を示した通信セッション制御部４００１が提示されるが、既に何度も説明したものと本質的な違いはないので詳細は省略する。
【０２７１】
ユーザａとユーザｄは既に行なった選択を変えず、ユーザｂがＴＶ電話による音声と動画像の通信を受け入れて選択すれば（図１８のＳ１０３）、３者間での一致が見られ（図１８のＳ１０４およびＳ１０５）、コール・コネクション制御手段１６０９により端末１１０３（ＴＶ電話）、端末１１０４（ＴＶ電話）、端末１１０７（マルチメディア計算機）および多地点間メディア処理手段１９１１間にコール・コネクションが設定され（図１８のＳ１０６）、処理が終了する。
【０２７２】
一方、３者間で一致が見られなかった場合は、既に述べたのと同様な方法で候補選択・通信要求変更の調整を行なう（図１８のＳ１０４）が、説明は省略する。  この結果、マルチメディアサービスが可能な通信システムにおいて、複数のメディアの組合せからなる通信を、予め使用する端末を指定しないで要求して、該通信要求の複数のメディアを１つないしは複数端末の組合せで実現する場合に、ユーザの予期できない形での通信が実現されることを防止し、更に１人または複数のユーザの意図を反映した形で通信を実現することができる。
【０２７３】
以上のように、第２の具体的な実施の態様によれば、マルチメディアサービスが可能な通信システムにおいて、複数のメディアの組合せからなる通信を、予め使用する端末を指定しないで要求して、該通信要求の複数のメディアを１つないしは複数端末の組合せで実現する場合に、相手方との通信に利用可能なメディアを提示してユーザに選択させるようにしたことにより、ユーザの予期できない形での通信が実現されることを防止し、更に１人ないしは複数のユーザの意図を反映した形で通信を実現することができる通信システムおよび通信システムの通信制御方法を提供できるようになる。
【０２７４】
なお、本発明は上述した具体例に限定されることなく、種々変形して実施可能である。
【０２７５】
【発明の効果】
以上詳述したように、本発明によれば、複数メディアを含む通信を要求する際に、ユーザは一つの通信要求において、通信に参加するユーザ、使用するメディア、および必要に応じて通信形態を指定することにより、通信に参加する他のユーザの端末環境、使用可能符号化方式等を意識することなく、通信に参加するユーザ毎に適切な端末の組合せを選択し、選択した端末に対してコール・コネクションを設定することが可能となるという効果が得られる。
【０２７６】
また、複数のメディアの組合せからなる通信を、予め使用する端末を指定しないで要求して、該通信要求の複数のメディアを１つないしは複数端末の組合せで実現する場合に、ユーザの予期できない形での通信が実現されることを防止し、更に１人ないしは複数のユーザの意図を反映した形で通信を実現することができる。
【図面の簡単な説明】
【図１】本発明を説明するための図であって、本発明の第１の具体的な実施の態様において適用するマルチメディア通信システムの構成を表すブロック図。
【図２】本発明の第１の具体的な実施の態様におけるユーザ端末記憶手段の構成を表す図。
【図３】本発明の第１の具体的な実施の態様における端末メディア記憶手段の構成を表す図。
【図４】本発明の第１の具体的な実施の態様における第１の動作例としてのメッセージシーケンスを表す図。
【図５】本発明の第１の具体的な実施の態様における第１の動作例としての接続形態を表す図。
【図６】本発明の第１の具体的な実施の態様における第２の動作例としてのメッセージシーケンスを表す図。
【図７】本発明の第１の具体的な実施の態様における第２の動作例としての接続形態を表す図。
【図８】本発明の第１の具体的な実施の態様における第３の動作例としてのメッセージシーケンスを表す図。
【図９】本発明の第１の具体的な実施の態様におけるメディア変換記憶手段の構成例を表す図。
【図１０】本発明の第１の具体的な実施の態様における第３の動作例としての接続形態を表す図。
【図１１】本発明の第１の具体的な実施の態様における第４の動作例としてのメッセージシーケンスを表す図。
【図１２】本発明の第１の具体的な実施の態様における多地点間メディア処理記憶手段の構成例を表す図。
【図１３】本発明の第１の具体的な実施の態様における第４の動作例としての接続形態を表す図。
【図１４】本発明の第１の具体的な実施の態様における第５の動作例としてのメッセージシーケンスを表す図。
【図１５】本発明の第１の具体的な実施の態様における第８の動作例としてのメッセージシーケンスを表す図。
【図１６】本発明の第１の具体的な実施の態様における第８の動作例としての接続形態を表す図。
【図１７】本発明の第２の具体的な実施の態様の概要を説明するためのブロック図。
【図１８】図１７の概要の処理の流れを示す図。
【図１９】本発明を説明するための図であって、本発明の第２の具体的な実施の態様において適用するマルチメディア通信システムの構成例を示すブロック図。
【図２０】本発明の動作例１におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図２１】本発明の動作例１におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図２２】本発明の動作例１におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図２３】本発明の動作例２におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図２４】本発明の動作例２におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図２５】本発明の動作例２におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図２６】本発明の動作例３におけるユーザｄに対する通信セッション処理部の表示例を示す図。
【図２７】本発明の動作例３におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図２８】本発明の動作例３におけるユーザｄに対する通信セッション処理部の表示例を示す図。
【図２９】本発明の動作例３におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図３０】本発明の動作例３におけるユーザｄに対する通信セッション処理部の表示例を示す図。
【図３１】本発明の動作例３におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図３２】本発明の動作例３におけるユーザｄに対する通信セッション処理部の表示例を示す図。
【図３３】本発明の動作例４におけるユーザｄに対する通信セッション処理部の表示例を示す図。
【図３４】本発明の動作例４におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図３５】本発明の動作例４におけるユーザｄに対する通信セッション処理部の表示例を示す図。
【図３６】本発明の動作例４におけるユーザａに対する通信セッション処理部の表示例を示す図。
【図３７】本発明の動作例４におけるユーザｄに対する通信セッション処理部の表示例を示す図。
【符号の説明】
２…通信網
３…ユーザ端末記憶手段
４…端末メディア記憶手段
５…決定手段
６…コール・コネクション制御手段
８…メディア変換記憶手段
１０…多地点間メディア処理記憶手段
１１…コネクション
１２…調整手段
１０１〜１１４，１１０１〜１１０７…端末
７０１〜７０３…メディア変換手段
９０１〜９０３…多地点間メディア処理手段
１１０８〜１１１２…サーバ装置
１２００…ネットワーク
１３００，１３１０…ユーザ・端末記憶手段
１４００，１４１０…端末・メディア記憶手段
１５００，１５０９…候補決定手段
１６００，１６０９…コール・コネクション制御手段
１７１１…メディア変換手段
１８００，１８１２…メディア変換記憶手段
１９１１…多地点間メディア制御手段
２３００，２３０１，２３０５，２３０７…通信要求処理手段
２４００，２４０１，２４０５，２４０７…ユーザ意図反映手段
２５００，２５０１，２５０５，２５０７…ユーザ間調整手段
２６００，２６０１，２６０５，２６０７…通信要求変更手段
３０００，３０１２…多地点間メディア処理手段
４０００…通信セッション制御部
４００１…通信セッション状態表示部
４００２…ユーザ追加ボタン
４００３…ユーザ削除ボタン
４００４…メディア追加ボタン
４００５…メディア削除ボタン
４００６…通信中止ボタン
４００７…端末選択ボタン
４００８…メディア選択ボタン
４００９…同意ボタン
４０１０…拒否ボタン
４０１１…確認ボタン
４０１２…キャンセルボタン
【図１】
0003725209.tif 000002
【図２】
0003725209.tif 000003
【図３】
0003725209.tif 000004
【図４】
0003725209.tif 000005
【図５】
0003725209.tif 000006
【図６】
0003725209.tif 000007
【図７】
0003725209.tif 000008
【図８】
0003725209.tif 000009
【図９】
0003725209.tif 000010
【図１０】
0003725209.tif 000011
【図１１】
0003725209.tif 000012
【図１２】
0003725209.tif 000013
【図１３】
0003725209.tif 000014
【図１４】
0003725209.tif 000015
【図１５】
0003725209.tif 000016
【図１６】
0003725209.tif 000017
【図１７】
0003725209.tif 000018
【図１８】
0003725209.tif 000019
【図１９】
0003725209.tif 000020
【図２０】
0003725209.tif 000021
【図２１】
0003725209.tif 000022
【図２２】
0003725209.tif 000023
【図２３】
0003725209.tif 000024
【図２４】
0003725209.tif 000025
【図２５】
0003725209.tif 000026
【図２６】
0003725209.tif 000027
【図２７】
0003725209.tif 000028
【図２８】
0003725209.tif 000029
【図２９】
0003725209.tif 000030
【図３０】
0003725209.tif 000031
【図３１】
0003725209.tif 000032
【図３２】
0003725209.tif 000033
【図３３】
0003725209.tif 000034
【図３４】
0003725209.tif 000035
【図３５】
0003725209.tif 000036
【図３６】
0003725209.tif 000037
【図３７】
0003725209.tif 000038