(57)【要約】複数の通信端末との間で通信が可能な通信端末１００は、複数の通信端末からの画像データを受信する受信部１４と、受信部１４により受信した複数の通信端末からの画像データを表示する表示部１６と、表示部１６に表示した複数の通信端末の画像データのうち、少なくとも1つの画像データの選択を受け付ける入力部１７と、入力部１７により選択された画像データに対応する通信端末を、複数の通信端末との間で実行中の通信とは別の通信を行う相手として指定した旨の情報を、通信端末に送信するよう制御する制御部１９と、を備えている。
2008105429.tif 000002
【特許請求の範囲】
【請求項１】
複数の通信端末との間で通信が可能な通信端末において、
前記複数の通信端末からの画像データを受信する受信部と、
前記受信部により受信した前記複数の通信端末からの画像データを表示する表示部と、
前記表示部に表示した複数の通信端末の画像データのうち、少なくとも1つの画像データの選択を受け付ける入力部と、
前記入力部により選択された画像データに対応する前記通信端末を、前記複数の通信端末との間で実行中の通信とは別の通信を行う相手として指定した旨の情報を、前記通信端末に送信するよう制御する制御部と、
を備えることを特徴とする通信端末。
【請求項２】
前記別の通信を行う相手として指定した通信端末から当該指定に応じる旨の応答を前記受信部が受信すると、前記制御部は、前記指定した通信端末にのみ自端末の音声を送信するよう制御することを特徴とする、請求項1に記載の通信端末。
【請求項３】
前記別の通信を行う相手として指定した通信端末から当該指定に応じる旨の応答を前記受信部が受信すると、前記制御部は、前記自端末の画像データの送信を一時停止するよう制御することを特徴とする、請求項２に記載の通信端末。
【請求項４】
前記複数の通信端末との間で実行中の通信には、予め記憶している画像データを利用するよう制御することを特徴とする、請求項２に記載の通信端末。
【請求項５】
前記指定した旨の情報とは、前記通信端末を宛先として呼び出しを行うための情報にしたことを特徴とする請求項1に記載の通信端末。
【請求項６】
複数の通信端末との間で通信が可能な通信端末の制御方法であって、
前記複数の通信端末からの画像データを受信するステップと、
前記受信した前記複数の通信端末からの画像データを表示するステップと、
前記表示した複数の通信端末の画像データのうち、少なくとも1つの画像データの選択を受け付けるステップと、
前記選択された画像データに対応する前記通信端末を、前記複数の通信端末との問で実行中の通信とは別の通信を行う相手として指定した旨の情報を、前記通信端末に送信するように制御するステップと、
を含むことを特徴とする通信端末の制御方法。
【発明の詳細な説明】
【関連出願の相互参照】
【０００１】
本出願は、２００７年２月２７日に出願された日本国特許出願２００７−４７３２３号の優先権を主張するものであり、この先の出願の開示全体をここに参照のために取り込む。
【技術分野】
【０００２】
本発明は、複数の通信端末の間で通話が可能な通信端末、および該通信端末を制御する方法に関する。
【関連技術】
【０００３】
従来のテレビ会議システムには、図１０のシステム構成図に示すように、例えばＷＡＮなどに接続できる機能を備えた端末装置がある。これは、ＶｏＩＰプロトコルであるＨ３２３／Ｈ３２０を利用して、ＩＰネットワーク網やＩＳＤＮ網など経由して、音声データおよび画像データをサーバに転送して、サーバが各端末装置に映像を中継し、音声データを各端末装置に送信する。
【０００４】
特に、最近では、カメラを搭載した携帯電話のような、携帯可能な通信端末の性能および機能が著しく向上している。例えば特開２００２−３３５５０２号公報には、会議の参加者それぞれが、このような小型の携帯端末を用いて多地点テレビ電話を行う技術が開示されている。このような技術を応用することにより、各参加者は、それぞれ別の離れた場所にいても、多地点テレビ会議を行うことが可能である。
【発明の開示】
【０００５】
しかしながら、従来の多地点テレビ会議では、当該会議に参加している各通信端末全てを１つの通信のセッション（通信路）として管理しており、さらに各参加者がそれぞれ別地点にいることを想定して通信を行う。そのため、このような多地点テレビ会議では、実際に参加者が一堂に会して通常の会議を行う場合に一般的に行われていることができなくなるという問題が生じ得る。
【０００６】
即ち、実際に参加者が一堂に会する通常の会議であれば、例えば現在発言している会議参加者の発言内容に関して、会議に参加している自分の隣または近くにいる他の参加者に対して、小声で相談を持ちかけたり、あるいは耳打ちをしたりできる。このようなことは実際の会議では一般的にしばしば行われている行為である。しかしながら、多地点テレビ会議においては、参加者の発言内容は他の参加者全てに配信される。このため、例えばある参加者が、同僚である他の参加者の１人に相談を持ちかけたとしても、それは他の参加者全てに知られることになる。このような状況では、他の参加者には知られたくない内容の発言は一切できないことになり、会話および発言の内容は著しく制限される。
【０００７】
したがって、かかる事情に鑑みてなされた本発明の目的は、テレビ会議のような通信を行う通信端末において、注目する通信端末装置との間で、他の参加者には知られたくない秘匿の通信（以下、サブ通話と称する）ができる通信端末、通信制御装置、通信方法および通信制御方法を提供することにある。
【０００８】
上記目的を達成する第１の観点に係る通信端末の発明は、
複数の通信端末との間で通信が可能な通信端末において、
前記複数の通信端末からの画像データを受信する受信部と、
前記受信部により受信した前記複数の通信端末からの画像データを表示する表示部と、
前記表示部に表示した複数の通信端末の画像データのうち、少なくとも1つの画像データの選択を受け付ける入力部と、
前記入力部により選択された画像データに対応する前記通信端末を、前記複数の通信端末との間で実行中の通信とは別の通信を行う相手として指定した旨の情報を、前記通信端末に送信するよう制御する制御部と、
を備えることを特徴とするものである。
【０００９】
第２の観点に係る発明は、第１の観点に係る通信端末において、
前記別の通信を行う相手として指定した通信端末から当該指定に応じる旨の応答を前記受信部が受信すると、前記制御部は、前記指定した通信端末にのみ自端末の音声を送信するよう制御することを特徴とするものである。
【００１０】
第３の観点に係る発明は、第２の観点に係る通信端末において、
前記別の通信を行う相手として指定した通信端末から当該指定に応じる旨の応答を前記受信部が受信すると、前記制御部は、前記自端末の画像データの送信を一時停止するよう制御することを特徴とするものである。
【００１１】
第４の観点に係る発明は、第２の観点に係る通信端末において、
前記複数の通信端末との間で実行中の通信には、予め記憶している画像データを利用するよう制御することを特徴とするものである。
【００１２】
第５の観点に係る発明は、第１の観点に係る通信端末において、
前記指定した旨の情報とは、前記通信端末を宛先として呼び出しを行うための情報にしたことを特徴とするものである。
【００１３】
さらに、上記目的を達成する第６の観点に係る通信端末の制御方法の発明は、
複数の通信端末との間で通信が可能な通信端末の制御方法であって、
前記複数の通信端末からの画像データを受信するステップと、
前記受信した前記複数の通信端末からの画像データを表示するステップと、
前記表示した複数の通信端末の画像データのうち、少なくとも1つの画像データの選択を受け付けるステップと、
前記選択された画像データに対応する前記通信端末を、前記複数の通信端末との問で実行中の通信とは別の通信を行う相手として指定した旨の情報を、前記通信端末に送信するように制御するステップと、
を含むことを特徴とするものである。
【図面の簡単な説明】
【００１４】
【図１】第１実施の形態に係る携帯端末の概略構成を示すブロック図である。
【図２】第１実施の形態に係る通信制御装置の概略構成を示すブロック図である。
【図３】多地点テレビ会議を説明する概念図である。
【図４】多地点テレビ会議においてパケットの送受信を示す概念図である。
【図５】第１実施の形態に係る携帯端末の表示部の表示の例を表す図である。
【図６】多地点テレビ会議におけるサブ通話でパケットの送受信を説明する概念図である。
【図７】サブ通話中の携帯端末の表示部の表示の例を表す図である。
【図８】第２実施の形態に係る携帯端末の表示部の表示の例を表す図である。
【図９】第２実施の形態に係る携帯端末の表示部の表示の例を表す図である。
【図１０】従来のテレビ会議の概略構成を示す図である。
【発明を実施するための最良の形態】
【００１５】
以下、本発明の実施の形態について、図を参照して説明する。【００１６】
（第１実施の形態）
図１は、本発明の第１実施の形態に係る携帯端末１００の機能ブロック図であり、図２は、本実施の形態に係る通信制御装置２００の機能ブロック図である。この携帯端末１００は、本実施の形態においては通信端末である携帯電話として説明するが、例えばＰＤＡ（パーソナル・ディジタル・アシスタント）、パーソナルコンピュータ、またはテレビ会議の専用通信端末などとすることもできる。また、通信制御装置２００は、多地点からの通信端末とのやり取りを制御する、例えばＳＩＰサーバ(Session Initiation Protocol Server)とすることができる。【００１７】
図１に示す携帯端末１００は、この携帯端末１００を使用する会議参加者の画像を撮影することができるカメラ部１１と、この参加者の発言を音声として取り込むマイク１２とを備えている。また、携帯端末１００は、携帯端末１００の各種設定や参加者の画像データを記憶させて、必要に応じてこれらデータ等の読み出しをすることができる記憶部１３を備えている。携帯端末１００はまた、参加者の画像データおよび／または音声データを送受信するアンテナを有する送受信部１４と、送受信部１４が受信した音声データを出力するスピーカ１５と、送受信部１４が受信した画像データを表示する表示部１６とを備えている。さらに、携帯端末１００は、参加者の入力を受け付ける入力部１７と、イヤホンを接続することで音声をイヤホンから出力できるイヤホン接続部１８と、全体の動作を制御する制御部１９とを備えている。【００１８】
図２に示す通信制御装置２００は、通信端末からの画像データおよび音声データを、ＩＰネットワーク網または携帯電話網などを経て受信する受信部２１を備えている。また、通信制御装置２００は、受信部２１が受信した画像データを設定に従って適切に合成するなどの編集をすると共に、受信部２１が受信した音声データを設定に従って適切に取捨選択するなどの編集をして送信部２３に送信する合成部２２を備えている。さらに、通信制御装置２００は、合成部２２により編集された画像データおよび音声データを送信する送信部２３と、全体の動作を制御する制御部２４とを備えている。【００１９】
次に、図３〜７を参照して、本実施の形態に係る携帯端末１００および通信制御装置２００を用いた多地点テレビ電話の通信について説明する。【００２０】
図３は、例として、参加者Ａ，Ｂ，Ｃ，ＤおよびＥの５人が多地点テレビ電話によりテレビ会議を行う様子を概略的に示している。参加者Ａ，Ｃ，ＤおよびＥの４人は、それぞれ携帯端末１００を用意し、参加者Ｂは少なくとも携帯端末１００の機能を備えるパーソナルコンピュータを用意してある。ここでは説明の便宜上、参加者Ｂが用意したパーソナルコンピュータも携帯端末１００として示す。【００２１】
参加者Ａ，Ｃ，ＤおよびＥの携帯端末１００は、それぞれ、基地局を介して携帯電話網に接続し、さらに携帯電話網からＩＰネットワーク網などを経て通信制御装置２００に接続する。参加者Ｂのパーソナルコンピュータからなる携帯端末１００は、有線又は無線ＬＡＮ等を経て、インターネット網に接続された通信制御装置２００との間で通信路を確立する。各参加者の携帯端末１００の制御部１９は、各参加者の画像を各端末のカメラ部１１により取得し、さらに各参加者の音声をマイク１２により取得して、それぞれ得られた画像データおよび音声データを送受信部１４から通信制御装置２００にリアルタイムで送信するよう制御する。なお、図３に示すように、インターネット網と携帯電話網とは、ゲートウェイを介して接続される。呼接続の制御はＳＩＰサーバである通信制御装置２００を介して行われる。セッションが形成された後、通信に用いられるパケットは、このゲートウェイを経て、インターネット網および携帯電話網を介して送受信される。【００２２】
通信制御装置２００は、各参加者からの画像データを、それぞれの参加者の携帯端末に適したサイズに変更したり、画像の配置の構成を調整するなどの処理を行うと共に、各参加者からの音声を設定に基づいて編集した後に、参加者に配信する。こうすることで、各携帯端末によりテレビ会議に参加している参加者全員が、他の参加者全員の顔などの画像を見ることができ、さらに発言する参加者の音声を聞くこともできる。【００２３】
図４は、一例として、多地点テレビ会議で参加者Ａが発言する様子を示している。各参加者が多地点テレビ会議を行うためには、まず、各携帯端末１００は、多地点テレビ電話の通信を行うための通信路として、通信制御装置２００との間にセッション１を確立する。これにより、Ａ〜Ｅまでの各参加者は、多地点テレビ電話の通信を行えるようになる。【００２４】
上述したように、多地点テレビ会議に参加している参加者Ａ〜Ｅの５人の各携帯端末１００には、それぞれ携帯端末１００に搭載されるカメラ部１１が取得した画像データが全員分配信される。そのため、各参加者は、参加者全員の表情や様子などをそれぞれ視認することができる。しかしながら、参加者のうち２人以上が同時に発言をした場合の音声を参加者全員に配信してしまうと、各参加者は、その音声を１人ずつの音声として聞き取り、それを理解することは困難となる。したがって、本実施の形態では「発言権」という概念を設定し、参加者のうちの１人が発言権を有している間は、その参加者だけが他の携帯端末１００に音声データを送信することができるようにする。即ち、１人が発言権を有している間は、他の参加者が発言したとしても、その音声は他の参加者には届かないようにする。これは、通信制御装置２００にて、発言権を有する参加者が操作する携帯端末１００から受信する音声データのみを他の全携帯端末１００に配信し、発言権を有さない他の参加者が操作する携帯端末１００から受信する音声データは、合成部２２にて合成せずに破棄するか、受信部２１において受信しないように制御する等して実現する。【００２５】
この「発言権」については、例えば、会議参加者のうちの誰も発言権を有していない「フリー」の状態において、各携帯端末の操作により、最も早く「発言」を行うためのスイッチがオンにされた携帯端末が「発言権」を有するようにする。そして、当該「発言権」を有する携帯端末を操作する参加者の発言が完了したら、「発言」を行うためのスイッチをオフにする発言者の操作に応じて、この「発言権」を解除する。【００２６】
図４において、会議参加者Ａが発言する場合には、参加者Ａは、携帯端末１００を操作することにより、まず「発言権」を取得する。「発言権」が取得できたら、会議の全参加者の携帯端末１００からのスピーカ１５からは、参加者Ａの発言のみが聞こえるようになる。即ち、図示のように、参加者Ａの携帯端末１００は、参加者Ａの画像データおよび音声データを含むＩＰパケットを、配信先端末を端末Ｂ〜Ｅとして、通信制御装置２００に送信する。通信制御装置２００には、他の携帯端末１００からも、参加者Ｂ〜Ｅの画像データおよび音声データを含むＩＰパケット（図示せず）が送信されてくる。通信制御装置２００の制御部２４は、各携帯端末１００からの全参加者の画像データを、それぞれの参加者の携帯端末に適したサイズに変更したり、画像の配置の構成を調整するなどの処理を行って合成するよう合成部２２を制御する。しかしながら、音声データについては、制御部２４は、「発言権」を有する参加者Ａの音声データだけを先ほどの画像データに合成するよう合成部２２を制御する。この後、制御部２４は、合成された画像データおよび音声データを、ＩＰパケットに含めて各携帯端末１００に配信するよう送信部２３を制御する。それゆえ、各携帯端末１００には、参加者Ａの発言のみが配信され、他の参加者が何かを発言しても、その音声は各携帯端末１００に配信されない。【００２７】
この時、例えば参加者Ｅの携帯端末１００の表示部１６は、例えば図５（Ａ）のように、発言権を有する参加者Ａの画像を他の参加者と比べて大きく表示し、その周りに他の参加者を小さな画像で表示し、参加者Ａ〜Ｅの画像を画面分割して表示する。なお、当該携帯端末１００のユーザである参加者Ｅの画像は、例えば左下に表示して、さらに縁部の表示の色を変えたり、縁部を点線にするなどして他の参加者とは区別がつくようにできる。また、右上の空白の部分は、参加者Ａが発言権を有していない時に参加者Ａの画像が納まっていたスペースである。したがって、発言権が他の参加者に移ると、参加者Ａの画像を小さなサイズにして現在空白のスペースに戻し、新たに発言権を取得した参加者の画を大きく表示する。【００２８】
図６は、一例として、図４において、多地点テレビ会議で参加者Ａが発言している最中に、参加者ＥとＣがサブ通話を行う場合の通信を示す図である。【００２９】
参加者Ａが「発言権」を有して発言を行っている間は、各参加者は、他の参加者全員の画像を視認することはできるが、参加者Ａの音声しか聞くことができない。ここで、参加者Ｅが参加者Ｃに対して、他の参加者に知らせる必要のない、または他の参加者に知られては困る内容の通話がしたくなった場合について説明する。この場合、参加者Ａの発言が終了するのを待ってから、参加者Ｅが「発言権」を取得して発言すると、その発言内容は、他の参加者全員にも聞こえてしまう。【００３０】
そこで、本実施の形態による秘匿の通信であるサブ通話の開始に際し、参加者Ｅの入力部１７への操作に基づいて、制御部１９は、例えば図５（Ｂ）に示すようなメニュー画面を表示部１６に表示して、メニュー画面から「秘話通話誘い」の選択入力を受け付ける。ここでは、例として、サブ通話に誘う相手として、参加者の１人「Ｃさん」を選択する。この入力部１７への操作入力に基づいて、参加者Ｅの携帯端末１００の制御部１９は、通信制御装置２００に対して、参加者Ｃの携帯端末１００に、参加者Ｅの携帯端末１００とのサブ通話を許可するか否かを確認することを要求する確認要求を送信するよう送受信部１４を制御する。即ち、制御部１９は、送受信部１４を制御し、入力部１７への入力により選択された画像データに対応する携帯端末１００を、複数の携帯端末１００との間で実行中の通信とは別の通信であるサブ通話を行う相手として指定した旨の情報を、指定した相手の携帯端末１００に送信する。ここで言うサブ通話を行う相手として「指定した旨の情報」とは、この指定した携帯端末１００を宛先として呼び出しを行うための情報であり、具体的には、相手に通話を申し込むための呼び出し、つまり発呼を行うための情報である。【００３１】
この情報の信号を受信した通信制御装置２００は、参加者Ｃの携帯端末１００に対して、参加者Ｅからのサブ通話要求を許可するか否かの確認を取る。この時、例えば参加者Ｃの携帯端末１００は、表示部１６に、例えば図５（Ｃ）のようなポップアップ表示をすることができる。このポップアップ表示が出ることで、参加者Ｃは、参加者Ｅからサブ通話に招待されていることが分かる。【００３２】
参加者Ｅから誘われたサブ通話に参加者Ｃが参加するために、図５（Ｃ）において「Ｙｅｓ」が選択された場合には、参加者Ｃの携帯端末１００は、その旨を通信制御装置２００に通知する。すると、通信制御装置２００は、図６に示すように、元々のテレビ会議の通話に使用していた参加者Ａ〜Ｅが通信するセッション１の他に、新たな通信路として、参加者ＣおよびＥの端末間のセッション２を確立する。これにより、図６に破線で示すように、新たなセッション２を介して、参加者ＣおよびＥの端末間でＩＰパケットの交換（実際には双方向通信）ができる。したがって、このセッション２を用いて行う通話は、参加者ＣおよびＥ以外の参加者には聞こえない。【００３３】
このように参加者ＥおよびＣの間でサブ通話が行われている間は、参加者Ｅの携帯端末１００は、例えば図７（Ａ）に示すように、サブ通話の相手である参加者Ｃの画像を、表示部１６に他の参加者の画像よりも大きく表示する。このとき、図７（Ａ）に示すように、発言権を有する参加者が拡大表示される位置とは異なる位置に、サブ通話を行う相手の画像を拡大表示することで、サブ通話の相手と発言権を有する参加者との区別が明確になり、現在自らがサブ通話を行っていることが明確になる。図示の例では、発言権を有する参加者Ａの画像は、他の参加者と同じ大きさだが、例えば画像の縁部を他の参加者の画像とは異なるものにして際立たせるようにすることで、発言権を有することを示すようにできる。一方、サブ通話の相手である参加者Ｃの携帯端末１００は、例えば図７（Ｂ）に示すように、やはりサブ通話の相手である参加者Ｅの画像を、表示部１６に他の参加者の画像よりも大きく表示する。【００３４】
以上のようにすることで、発言権を有する参加者Ａが発言をしている最中でも、他の参加者は、互いにサブ通話を行うことにより、その他の参加者に通話の内容を聞かれない通話を行うことができる。さらに、サブ通話を行う参加者同士の声は、発言権を有する参加者の発言に重なってその他の参加者に聞こえることもない。そのため、発言権を有する参加者の発言を聞いている他の参加者が、サブ通話を迷惑に思うこともない。【００３５】
一方、参加者Ｅから参加者Ｃにサブ通話の誘いがあった際に（図５（Ｃ）参照）、参加者Ｃが「Ｎｏ」を選択したとする。この場合、通信制御装置２００は、参加者Ｃおよび参加者Ｅの端末間に新たなセッション２を確立しない。したがって、参加者Ｃの側でサブ通話の誘いを拒否することもできる。このようにすることで、お互いに合意があった時にのみ、サブ通話を開始できる。【００３６】
なお、参加者ＥおよびＣの間でサブ通話を行う際に、当該サブ通話の音量を、発言権を有する参加者Ａの発言と同じ音量にすると、発言権を有する参加者の発言とサブ通話の発言とが混ざってしまい、それぞれの通話が聞き取りにくくなる。したがって、発言権を有する参加者の発言の音量を、サブ通話の音量よりも相対的に小さく設定できるようにするのが好適である。例えば、図５（Ｄ）に示すように、テレビ会議の開始前またはサブ通話時などに、入力部１７の操作に基づいて、音量設定画面を表示部１６に表示して、サブ通話を行う時の音量を設定できるようにする。例えば、通常のテレビ電話の通話であるメイン通話の音量レベルを３に設定し、サブ通話の音量レベルは、メイン通話を行う時とは異なる音量レベル５に設定する。なお、この設定はサブ通話時における音量設定のため、サブ通話が終了すれば、サブ通話開始前の音量に戻るようにする。【００３７】
また、メイン通話の音量が最小、つまりミュートになるように設定すれば、サブ通話時にはサブ通話のみの音声が聞こえるようになり、サブ通話の音声のみに意識を集中させることもできる。【００３８】
さらに、携帯端末１００は、イヤホン接続部１８も備えている。このため、サブ通話を行う際には、携帯端末１００の設定により、イヤホン接続部１８に接続したイヤホンからサブ通話の音声を出力し、スピーカ１５から発言権を有する発言者の音声を出力できる。また、当然この逆の出力とすることもできる。このようにすれば、サブ通話の音声と、メイン通話の音声とを一層明瞭に聞き分けることが可能になる。また、イヤホンがステレオ音声に対応していれば、サブ通話とメイン通話それぞれの音声を、イヤホンの左右の音声に振り分けることも可能である。この場合には、例えば、ステレオイヤホン装着時のテレビ会議においてサブ通話を行う際には、サブ通話を行う参加者の音声は右耳のイヤホンから、また発言権を有する参加者の音声は左耳のイヤホンから聞くのが好適である。これは、右耳から聞く情報は、言語脳である左脳に繋がっており（神経が交差しているため）、右耳が言葉を理解し易い「聞き耳」である場合が多いという考察に基づく。この際にも、サブ通話とメイン通話とで、音量が異なる設定にしておけば、両通話の音声は一層聞き分け易くなる。【００３９】
本実施の形態による携帯端末１００および通信制御装置２００を利用すれば、各参加者は、任意の参加者の間で、その他の参加者に聞かれることなくサブ通話を行うことができる。しかしながら、各参加者の携帯端末１００の表示部１６は、全参加者の画像を表示する。そのため、発言権を有する者でない参加者の口元が動いている画像が他の参加者に見えてしまうと、サブ通信が行われていることが他の参加者に知れて、秘匿性が確保されない恐れがある。そこで、本実施の形態では、このような状況を回避するために、サブ通話を行っていることを他の参加者に知られにくくするための措置を講じる。このために、サブ通話を行う携帯端末１００および／または通信制御装置２００は、当該サブ通話をしている参加者の画像として、リアルタイムで取得する動画を用いずに、予め設定した他の画像を代用する。【００４０】
この処理においては、まず、参加者間でのサブ通話が開始された時点で、当該参加者の携帯端末１００の制御部１９は、自端末のカメラ部１１が撮影した画像データを通信制御装置２００にリアルタイムで送信するのを停止する。画像データの送信を停止すると、当該サブ通話を行っている参加者の画像はその他の参加者に配信されなくなるため、制御部１９は、通信制御装置２００に送信する画像データの代替として、予め記憶部１３に記憶されていた静止画像を送信する。または、制御部１９は、サブ通話開始にあたり画像データの送信を停止した際の最後の静止画像を送信してもよい。【００４１】
また、サブ通話の開始時に通信制御装置２００に送信する画像データの代替として、携帯端末１００の制御部１９は、予め携帯端末１００の記憶部１３に記憶されていた動画像を送信することもできる。あるいは、サブ通話開始にあたり、携帯端末１００の記憶部１３に記憶させておいた動画像（例えば、画像データの送信を停止した時点から遡って画像データ送信停止前の一定期間に取得した動画像）をくり返し送信することもできる。このような動画像を通信制御装置２００にくり返し送信すれば、静止画像を送るよりもさらに違和感の少ない画像を、サブ通話中に他の参加者に配信できる。【００４２】
さらに、このような処理を、携帯端末１００で行うのではなく、通信制御装置２００にて行うこともできる。この場合には、任意の参加者間でサブ通話の開始にあたり、参加者間で新たなセッションが確立されるまでの所定の一定時間、サブ通話の開始前に送信されていた参加者の動画像または静止画像を通信制御装置２００の制御部２４に記憶する。そして、参加者間で新たなセッションが確立した後、制御部２４は、この記憶した静止画像または動画像を、反復して他の参加者の携帯端末１００から送信された画像と合成して各携帯端末１００に送信するよう合成部２２および送信部２３を制御する。【００４３】
２人の参加者同士でサブ通話を行っている際に、さらに他の参加者を当該サブ通話に加えることを望む場合も想定される。この場合には、先にサブ通話を行っていた２人の参加者のうちどちらかが、サブ通話に加えたい他の参加者を指定してサブ通話の誘いを持ちかけるようにする。この誘いを受けた当該他の参加者がサブ通話の誘いを許可する入力に基づいて、この参加者を２者間のサブ通話のセッションに加える。これにより、テレビ会議とは別の新たな３人の参加者間でサブ通話ができる。この後は、元々サブ通話を行っていた２人の参加者または後から加わった参加者いずれかがサブ通話を解除する動作に基づき、２人の参加者間のサブ通話に戻す。【００４４】
具体的には、先にサブ通話を行っていた２人の参加者（例えば参加者ＣおよびＥ）のうちどちらかが、自らの携帯端末１００の表示部１６に表示されるメニュー画面上から、サブ通話に加えたい他の参加者（例えば参加者Ｄ）を、入力部１７を介して選択する。制御部１９は、送受信部１４を制御し、入力部１７を介して表示部１６上で選択された参加者Ｄの携帯端末１００に、参加者ＣおよびＥの携帯端末１００とのサブ通話を許可するか否か確認することを要求する確認要求を、通信制御装置２００に送信する。通信制御装置２００は、この確認要求を受信すると、参加者Ｄの携帯端末１００に対し、参加者ＣおよびＥの携帯端末１００とのサブ通話を許可するか否か確認する。通信制御装置２００からの確認に対し、参加者Ｄの携帯端末１００は、参加者ＣおよびＥとのサブ通話を許可するか否かをユーザに選択させ、許可することが選択された場合、その旨を通信制御装置２００に通知する。すると、通信制御装置２００は、参加者ＣおよびＥの携帯端末１００の間で確立されているサブ通話のセッションに、参加者Ｄの携帯端末１００を加える。【００４５】
これにより、テレビ会議を継続しながら、当該テレビ会議と並行して３人の参加者間でサブ通話ができる。この後は、元々サブ通話を行っていた２人（参加者ＣおよびＥ）の携帯端末１００または後から加わった者（参加者Ｄ）の携帯電話１００のいずれかからのサブ通話解除要求に基づき、通信制御装置２００は、確立されているサブ通話のセッションから、サブ通話解除要求を出した参加者の携帯端末１００を外し、２人の参加者のみによるサブ通話に戻す。【００４６】
なお、あまりに多くの参加者がサブ通話を行うと、発言権を有する参加者を中心とする本来のテレビ会議が意味を成さなくなる恐れもある。そのため、通信制御装置２００は、サブ通話のセッションに参加できる人数に制限をかけるようにしてもよい。【００４７】
また、２人の参加者がサブ通話を行っている際に、さらに他の参加者が、当該２人の参加者のうち一方にサブ通話の要求をする場合にも、上述したのと同様の動作により、３人の参加者間でサブ通話ができる。即ち、２人の参加者がサブ中にさらに他の参加者からサブ通話の要求を受けた場合、このサブ通話の要求を受けた参加者が許可する入力に基づいて、２者間のサブ通話のセッションにこのサブ通話を要求した参加者を加える。これにより、テレビ会議とは別に、３人の参加者間でサブ通話ができる。【００４８】
具体的には、２人の参加者（例えば参加者ＣおよびＥ）の携帯端末１００の間でサブ通話のセッションが確立されている場合に、いずれか一方（例えば参加者Ｃ）の携帯端末１００がさらに他の参加者（例えば参加者Ｄ）の携帯端末１００からサブ通話の要求を受け、当該要求に応じる（即ち、サブ通話を許可する）ことがユーザによって選択されると、参加者Ｃの携帯端末１００は、その旨を通信制御装置２００に通知する。すると、通信制御装置２００は、参加者ＣおよびＥの携帯端末１００の間で確立されているサブ通話のセッションに、参加者Ｄの携帯端末１００を加える。これにより、テレビ会議を継続しながら、当該テレビ会議と並行して３人の参加者間でサブ通話が可能になる。【００４９】
なお、この場合も、通信制御装置２００は、サブ通話のセッションに参加できる人数に制限をかけるようにしても良い。一方、サブ通話を行っている参加者に対しては、さらに他の参加者がサブ通話の指定をすることができない構成にもできる。【００５０】
このように３人以上の参加者でサブ通話を行う場合は、例えば、サブ通話を行う参加者の中で発言権を有する参加者の画像を大きく表示して、他のサブ通話参加者は、表示部１６上で画像の縁部の表示の色を変えたり、縁部を点線にするなどして他の参加者とは区別して表示するのが好適である。あるいは、（サブ通話でなく）通常のテレビ会議の通信で発言権を有する参加者の画像を大きく表示して、サブ通話を行う参加者は全て、画像の縁部の表示の色を変えたり縁部を点線にするなどして他の参加者とは区別して表示してもよい。【００５１】
（第２実施の形態）
次に、本発明の第２実施の形態に係る携帯端末１００および通信制御装置２００を使用するテレビ会議について説明する。第２実施の形態においても、テレビ会議のサブ通話そのものの概略は第１実施の形態と同様であるため、同じ説明は省略する。【００５２】
本実施の形態では、前記第１実施の形態において図１に示した携帯端末１００において、入力部１７を、表示部１６の前面に重畳させて設置したタッチパネルにより構成する。それ以外は、本実施の形態の携帯端末は、第１実施の形態で説明した携帯端末１００と機器構成上の大きな違いはない。本実施の形態に係る携帯端末１００では、テレビ会議の参加者が、指またはスタイラスペンのような入力デバイスを用いて、タッチパネルによる操作入力を行う。この際、参加者は、表示部１６に表示された選択項目に触れると、その対応箇所のタッチパネルに触れることになる。入力部１７は、触れられたタッチパネル上の位置を検知することで、選択項目に対応する信号を制御部１９に送信する。【００５３】
本実施の形態では、主として、テレビ会議におけるサブ通話の開始および終了処理が前述の第１実施の形態と異なる。したがって、これらの処理について、図８〜９を参照して説明する。【００５４】
説明の便宜のために、第１実施の形態と同様の状況を想定して説明する。即ち、参加者Ａが発言権を獲得して発言している最中に、参加者Ｅが、参加者Ｃに対してサブ通話を行うことを所望している場合を説明する。【００５５】
本実施の形態では、参加者がサブ通話を開始するにあたり、サブ通話の相手を指定する際の操作入力が、上述した第１実施の形態とは異なる。即ち、第１実施の形態では、表示部１６にメニュー画面を表示させたが、本実施の形態では、表示部１６上に分割表示された各参加者の画像の中から、サブ通話の開始を希望する相手の画像を参加者が直接ペン型デバイスまたは指などで触れる。例えば本例の場合、サブ通話を希望している参加者Ｅの携帯端末１００の制御部１９は、図８（Ａ）に示すように、発言権を有している参加者Ａの画像を表示部１６に大きく表示する。ここで、参加者Ｃとのサブ通話を希望する参加者Ｅの携帯端末１００は、図８（Ｂ）に示すように、タッチパネル上の参加者Ｃの画像部分を、参加者Ｅがペン型デバイスまたは指などでタッチすると、制御部１９は、このタッチパネルの入力に基づいて、参加者Ｃの画像の縁部を変化させたり画像を点滅させる。これにより、参加者Ｅは、サブ通話の相手として参加者Ｃを選択したことが容易に認識できる。【００５６】
このタッチパネルへの入力に基づいて、制御部１９は、通信制御装置２００を介して参加者Ｃの携帯端末１００に確認要求を出すよう送受信部１４を制御する。この確認要求とは、参加者Ｃの携帯端末１００がサブ通話を許可するか否かを確認する旨の要求である。【００５７】
参加者Ｃによるサブ通話の許可を待つ間、参加者Ｅの携帯端末１００の制御部１９は、図８（Ｂ）に示すように、サブ通話の相手として指定した参加者Ｃの画像に、他の参加者の画像との表示上の区別（画像の点滅、縁の装飾など）を付したままにする。仮に、参加者Ｅがタッチパネルで参加者Ｃを指定した動作が、参加者Ｅが意図しない操作ミス等によるものである場合、制御部１９は、参加者Ｃがサブ通話を許可する前であれば、参加者Ｃの画像が再度タッチされることにより、当該操作（サブ通話の要求）をキャンセルする。【００５８】
一方、参加者Ｃの携帯端末１００は、参加者Ｅからのサブ通話の要求を受ける前は、表示部１６に、図９（Ａ）に示すような表示をする。参加者Ｅからのサブ通話の要求を受けると、この携帯端末１００の制御部１９は、図９（Ｂ）に示すように、表示部１６に表示する参加者Ｅの画像の縁部を変化させたり画像を点滅させるなどの制御を行う。これにより、参加者Ｃは、参加者Ｅからのサブ通話が要求されていることが分かる。その後、図９（Ｃ）に示すように、参加者Ｃがサブ通話を要求している参加者Ｅの画像がペン型デバイスまたは指などでタッチされると、制御部１９は、参加者Ｅからのサブ通話要求を許可する。これにより、通信制御装置２００は、新たな通信路として、参加者ＣおよびＥの端末間のみでセッション２を確立する。したがって、参加者Ｃおよび参加者Ｅの端末間でサブ通話ができる。【００５９】
なお、参加者Ｃが、参加者Ｅとのサブ通話を望まない場合には、他の参加者の画像とは表示上の区別（画像の点滅、縁の装飾など）が付けられた参加者Ｅの画像をタッチせずにそのまま放置する。このように、サブ通話の要求が許可されなければ、通信制御装置２００は、参加者Ｃおよび参加者Ｅの端末間に新たなセッション２を確立せず、サブ通話を開始しない。この場合は、参加者Ｅの携帯端末１００にて、参加者Ｃの画像を再度タッチすることによるキャンセル操作を受け付けるか、あるいは通信制御装置２００によりタイムアウトの処理を取ることで、当該サブ通話を行わないようにする。したがって、お互いに合意があった時にのみサブ通話が開始されるようになる。【００６０】
また、参加者ＥおよびＣの間でサブ通話が開始された後、参加者Ｅまたは参加者Ｃのどちらかがサブ通話を終了する場合、図７（Ａ）または（Ｂ）に示すように、表示部１６に表示されたサブ通話の相手の画像に、参加者がペン型デバイスまたは指などでタッチすることにより、制御部１９は、送受信部１４を制御し、参加者Ｅと参加者Ｃとの間のサブ通話用セッションを切断する旨の要求を、通信制御装置２００に送信する。これにより、通信制御装置２００は参加者Ｅと参加者Ｃとの間のサブ通話用セッションを切断し、当該サブ通話は終了する。この後は、参加者ＥおよびＣの携帯端末１００は、それぞれ図８（Ａ）および図９（Ａ）のような画面になり、元のテレビ会議に戻る。【００６１】
本実施の形態において、２人の参加者がサブ通話を行っている時に、さらに別の参加者をサブ通話に加えたい場合、参加者ＣまたはＥは、当該２人の参加者のどちらか一方の携帯端末１００の表示部１６に表示された他の参加者の中から、所望の参加者の画像をタッチパネル上でタッチする。サブ通話の参加の誘いを受けた参加者の携帯端末１００は、サブ通話の誘いを要求してきた参加者の表示部１６に表示される画像を変化させることで、サブ通話の誘いを受けていることをその参加者に知らせる。サブ通話の誘いを受けた参加者が、サブ通話を要求してきた参加者の画像をタッチすると、制御部１９は、このサブ通話の要求を許可する。これにより、サブ通話の誘いを受けた参加者は、サブ通話に加わることができる。【００６２】
また、２人の参加者がサブ通話を行っている際に、当該２人の参加者のうち一方に対し、さらに他の参加者が、サブ通話に加わる要求をする場合、当該他の参加者の携帯端末１００は、表示部１６に表示されている参加者の画像がタッチパネル上でタッチされると、当該タッチされた参加者の携帯端末１００に対し、サブ通話に加わる要求を送信する。サブ通話に加わる要求を受けた（既にサブ通話中の）参加者の携帯端末１００は、表示部１６に表示するサブ通話に加わる要求をしてきた参加者の画像を変化させることで、他の参加者からサブ通話の要求を受けていることを既にサブ通話中の参加者に知らせる。サブ通話に加わる要求を受けた参加者の携帯端末１００は、サブ通話に加わる要求をしてきた参加者の画像がタッチパネル上でタッチされると、このサブ通話に加わる要求を許可する。この後、通信制御装置２００は、２者間のサブ通話のセッションにこのサブ通話に加わる要求をした参加者を加えて、テレビ会議を継続しながら当該テレビ会議と並行して３人の参加者間でサブ通話を行う。【００６３】
３人以上で行っているサブ通話を終了する場合、このサブ通話を行っている各参加者の携帯端末１００は、表示部１６に表示された各参加者自身の画像がタッチパネル上でタッチされると、当該サブ通話を脱して元のテレビ会議に戻る。また、２人でサブ通話を行っている時には、サブ通話の相手が表示部１６に大きく表示される。２人の参加者によるサブ通話を終了する場合、携帯端末１００は、表示部１６に表示された相手の画像または自分の画像がタッチパネル上でタッチされると、当該サブ通話を終了させて元のテレビ会議に戻る。【００６４】
本実施の形態によれば、タッチパネルの操作により、迅速かつ直感的に、確実にサブ通話の相手を選択することが可能であり、キー操作は不要である。したがって、発言権を有している参加者の発言内容について、サブ通話を用いることで、適時他の参加者に素早く確認や相談を行うことができる。またサブ通話が終了する際には即座にサブ通話を終了して元の会議に復帰することが可能である。さらにサブ通話の相手を視認しながら選択できるため、操作ミスをする恐れを著しく低減させることができる。またメニュー画面を表示させる必要もないため、テレビ会議中にメニュー画面の表示により参加者の画像が隠されてしまうということもなくなり、サブ通話の要求を受ける側も、画面上のポップアップ表示により参加者の画像が隠されてしまうということもない。【００６５】
なお、本発明は、上述した実施の形態にのみ限定されるものではなく、幾多の変更または変形が可能である。例えば、上述した各実施の形態では、画像データおよび音声データを用いたテレビ会議として説明したが、画像データを用いずに音声データのみを用いて、多地点電話会議においてサブ通話を行う構成に適用することもできる。【００６６】
また、上記第２実施の形態において、第１実施の形態と同様に、他の参加者からサブ通話の誘いがあった場合に、例えば、このサブ通話の誘いを受けた参加者の携帯端末１００の表示部１６に図５（Ｃ）のようなポップアップ表示をすることもできる。この場合、サブ通話の誘いに対する許否を参加者が「Ｙｅｓ」または「Ｎｏ」で選択する入力に基づいて、誘いを受けた参加者がその誘いを許可または拒否できるようにする。
【産業上の利用可能性】
【００６７】
本発明によれば、複数の通信端末で多地点テレビ会議の通信を行いつつ、当該テレビ会議に参加している少なくとも２人の参加者の間で、それ以外の会議参加者には通話内容を聞かれることのないサブ通話が可能になる。そのため、サブ通話を行う参加者は、他の参加者に知られることなく自由に通信を行うことができ、実際に参加者が集う会議に一層近い環境で円滑な会議運営を行うことが可能になる。
【図１】
2008105429.tif 000003
【図２】
2008105429.tif 000004
【図３】
2008105429.tif 000005
【図４】
2008105429.tif 000006
【図５】
2008105429.tif 000007
【図６】
2008105429.tif 000008
【図７】
2008105429.tif 000009
【図８】
2008105429.tif 000010
【図９】
2008105429.tif 000011
【図１０】
2008105429.tif 000012
【国際調査報告】
2008105429.tif 000013
2008105429.tif 000014