(57)【要約】【課題】視覚効果に影響のある操作をするときにそれと連動した連動した聴覚効果を持たせること、また、聴覚効果に影響のある操作をした場合にそれと連動した視覚効果を持たせることで操作に対する結果を認知しやすくすることにより利用者に対する負担を軽減させること。【解決手段】複数の端末装置を利用した遠隔会議システムであって、端末装置において特定参加者の音声の音量を変更可能とし、音量にあわせてその参加者の映像の大きさおよび色合いが変化する。【選択図】図１
2007243604.tif 000002
【特許請求の範囲】
【請求項１】
特定参加者の音声の音量を変更可能とし、音量にあわせてその参加者の映像の大きさおよび色合いが変化することを特徴とする端末装置。
【請求項２】
参加者の音声を画面中の参加者の映像の配置と連動させることを特徴とする請求項１記載の端末装置。
【請求項３】
複数の端末装置を利用した遠隔会議システムであって、
端末装置において特定参加者の音声の音量を変更可能とし、音量にあわせてその参加者の映像の大きさおよび色合いが変化することを特徴とする遠隔会議システム。
【請求項４】
参加者の音声を画面中の参加者の映像の配置と連動させることを特徴とする請求項３記載の遠隔会議システム。
【請求項５】
複数の端末装置を利用した遠隔会議方法であって、
端末装置において特定参加者の音声の音量を変更するステップと、
音量にあわせてその参加者の映像の大きさおよび色合いが変化するステップと
を有することを特徴とする遠隔会議方法。
【請求項６】
参加者の音声を画面中の参加者の映像の配置と連動させるステップを有することを特徴とする請求項５記載の遠隔会議方法。
【請求項７】
コンピュータに、請求項１または２に記載の機能を実現させることを特徴とするプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、本発明は遠隔会議システム（ＴＶ会議やコンピュータによるネットワーク経由の映像、音声付の会議など）の操作と視聴覚効果を連動させることで利用者の認知、判断、行動を支援する技術に関する。
【背景技術】
【０００２】
遠隔会議システムにおいては、個々の利用者は限られた情報のみで互いに意思疎通を図る必要があり、そのために利用中は集中力を要求されることとなり、結果として利用者に対して負担を強いることとなる。
【０００３】
ここで、音声処理モジュールは、各参加者の音声データを入力し、音声レベル測定手段は、各参加者の音声データから、各参加者の音声レベルを測定し、音声処理モジュールは、発言中の参加者について、その参加者を特定する情報と、音声レベルに関する情報とを画像処理モジュールに入力し、画像処理モジュールは、モニタに、発言中の参加者が、所定期間、その発言の音声レベルに応じた拡大率で表示されるようにする表示画面データを出力することで、臨場感のある遠隔会議を実現できるとともに、複数の参加者の間で議論が行われた場合にも、議論中の参加者の視認を容易とする技術が提案されている（例えば、特許文献１参照）。
【特許文献１】特開２００５−１５１００２号公報
【発明の開示】
【発明が解決しようとする課題】
【０００４】
しかしながら、情報を受け取る側(聞き手)においては自身の必要とする情報に集中するための手法として特定の相手の音声、映像を連動させて認知しやすくする効果を出す方法がなかった。また、情報を出す側(話し手)においても自身の発言を他利用者に対して、音声、映像を連動させて認知させやすくする効果を出す方法がなかった。特に、音声に合わせて映像の大きさだけでなく色合いも変化させることが困難であった。
【０００５】
本発明は、以上説明した事情に鑑みてなされたものであり、その目的は、利用者にとって、視覚効果に影響のある操作をするときにそれと連動した連動した聴覚効果を持たせることで操作に対する結果を認知しやすくすることにより利用者に対する負担を軽減させ、また、反対に聴覚効果に影響のある操作をした場合にそれと連動した視覚効果を持たせることでも同様の効果を得ることにある。
【課題を解決するための手段】
【０００６】
上記課題を解決するために、本発明は、特定参加者の音声の音量を変更可能とし、音量にあわせてその参加者の映像の大きさおよび色合いが変化する端末装置を提供する。
【０００７】
また、本発明は、複数の端末装置を利用した遠隔会議システムであって、
端末装置において特定参加者の音声の音量を変更可能とし、音量にあわせてその参加者の映像の大きさおよび色合いが変化する遠隔会議システムを提供する。
【０００８】
また、本発明は、複数の端末装置を利用した遠隔会議方法であって、
端末装置において特定参加者の音声の音量を変更するステップと、
音量にあわせてその参加者の映像の大きさおよび色合いが変化するステップと
を有する遠隔会議方法を提供する。
【発明の効果】
【０００９】
本発明によれば、利用者にとって、視覚効果に影響のある操作をするときにそれと連動した連動した聴覚効果を持たせることで操作に対する結果を認知しやすくすることにより利用者に対する負担を軽減させ、また、反対に聴覚効果に影響のある操作をした場合にそれと連動した視覚効果を持たせることでも同様の効果を得ることができる。
【発明を実施するための最良の形態】
【００１０】
以下、本発明の第１の実施の形態について図面を参照して詳細に説明する。
【００１１】
図１を参照すると、本実施の形態における遠隔会議システムは、利用者が遠隔会議システムを利用する場合、専用の端末を利用して他の利用者と映像、音声を視聴することができる。
【００１２】
このとき利用者の使う端末は専用の装置でも、コンピュータ上にソフトウェア的に遠隔会議システムを構成したものでもよい。
【００１３】
各端末は利用者自身の映像、音声を取得するためのカメラとマイクおよび他の利用者の映像、音声を出力するためそれぞれ１つ以上のモニタとスピーカで構成される。
【００１４】
次に、図面を参照して本実施の形態の動作について詳細に説明する。
【００１５】
まず、利用者は個々の端末を使って遠隔会議を開始する。このとき図１のように利用者１の映像と音声は利用者２、利用者３に伝わる一方で、利用者１は他の利用者(利用者２、利用者３の音声と映像を受信する。
【００１６】
ここで、利用者１が利用者３の音声をもっと大きく聞きたい場合、以下の３通りの方法がある。
【００１７】
（１）利用者１は自身のコントローラを使って利用者３の音声を大きく出力するように指定する。
【００１８】
（２）（１）の際音声の大きさに合わせて利用者１の端末に表示されている利用者３の映像の大きさを大きくし、また、同時表示されている他の利用者(図２の場合利用者２)の映像の大きさを小さくする。
【００１９】
立体音声については、自分自身で仮想的な位置関係も変更できる。すなわち、よく聞きたい人の映像を手前に引き出して、音声を大きくするといった操作が可能である。
【００２０】
画面上に表示された参加者の位置関係・大きさに応じて、どのように音量を変えるのかの具体例としては以下のものがある。
【００２１】
＊映像をＤｎＤで移動させることで音響効果を変動させる。
(案１)このとき画面のY軸方向が音量を、X軸が左右の位置を示すようにする
(案２)Ｘ／Ｙ軸方向で位置を、マウスのホイール回転で音量を変更するようにする
(案３)Ｘ／Ｙ軸方向で位置を、クリックを行うたびに、音量が相対的に変化する
(例えば、以下のように)
ユーザの操作       Ａの音量      Ｂの音量
-------------------------------------------------
５０％        ５０％
Ａをクリック        ７５％        ２５％
Ａをもう一回クリック      １００％          ０％
Ｂをクリック        ５０％        ５０％
Ｂをもう１回クリック        ２５％        ７５％
【００２２】
（３）（１）、（２）に加え、さらに利用者１の端末に表示されている利用者２の映像の色を薄くしたり、暗くすることで目立たないようにする(図２)。
【００２３】
音声を検出して、その検出結果に応じてどのように色を変えるのかに関する具体例としては、以下のものがある。
【００２４】
＊映像の透明度を検出結果に合わせて変動させる
→  検出レベルが低い場合  →  透明度を上げる(透けて見える)
→  検出レベルが高い場合  →  透明度を下げる(くっきり見える)
【００２５】
＊コントラストを検出結果に合わせて変動させる
→  検出レベルが低い場合  →  コントラストを下げる(白黒っぽく見える)
→  検出レベルが高い場合  →  コントラストを上げる(鮮やかに見える)
【００２６】
次に、本発明の第２の実施の形態について説明する。基本的な構成は第１の実施の形態と同様である。ただし、各利用者の使用するスピーカは立体音響を利用できるものとする。スピーカの個数は特に問わない。
【００２７】
次に、図面を参照して本実施の形態の動作について詳細に説明する。
【００２８】
利用者１の端末において、図３のように表示している状態ではスピーカからは利用者２の音声が左側から、利用者３の音声は右側から聞こえるようになる。ここで利用者１が以下のような操作をする。
【００２９】
利用者１の端末に表示されている利用者３を画面の左側に表示するようにする(図４)。
【００３０】
すると利用者１の端末で出力される利用者３の音声が左側にあるように聞こえる。
【００３１】
なお、利用者２の音声は今までどおり左側から聞こえるようにする。
【００３２】
次に、本発明の第３の実施の形態について説明する。基本的な構成は第１の実施の形態と同様である。ただし、各利用者の使用するスピーカは立体音響を利用できるものとする。スピーカの個数は特に問わない。
【００３３】
次に、図面を参照して本実施の形態の動作について詳細に説明する。
【００３４】
利用者１の端末で図３のような状態のときに、利用者２が他の利用者(利用者１、利用者２)に対して大きな音量で発言したい場合以下のようにする。
【００３５】
まず、利用者２は利用者２用コントローラを使ってより大きな音量で他のユーザに出力されるように指定する。
【００３６】
さらに、利用者２の映像が中央に表示されるようにする。
【００３７】
他の利用者、例えば、利用者１の端末では図５のように表示されるとともに利用者２の音声が大きく聞こえるようになる。
【００３８】
なお、上述する各実施の形態は、本発明の好適な実施の形態であり、本発明の要旨を逸脱しない範囲内において種々変更実施が可能である。例えば、上記の各実施の形態における利用者の使う端末の機能を実現するためのプログラムを装置に読込ませて実行することにより装置の機能を実現する処理を行ってもよい。さらに、そのプログラムは、コンピュータ読み取り可能な記録媒体であるＣＤ−ＲＯＭまたは光磁気ディスクなどを介して、または伝送媒体であるインターネット、電話回線などを介して伝送波により他のコンピュータシステムに伝送されてもよい。
【図面の簡単な説明】
【００３９】
【図１】本発明の実施の形態における遠隔会議システムの構成を示す図である。
【図２】端末の表示部に表示される画面の一例を示す図である。
【図３】端末の表示部に表示される画面の一例を示す図である。
【図４】端末の表示部に表示される画面の一例を示す図である。
【図５】端末の表示部に表示される画面の一例を示す図である。
【図１】
2007243604.tif 000003
【図２】
2007243604.tif 000004
【図３】
2007243604.tif 000005
【図４】
2007243604.tif 000006
【図５】
2007243604.tif 000007