(57)【要約】【課題】テレビ会議装置において、拠点数が多い場合でも、発言拠点からの映像データを視聴者に分かり易く表示すること。【解決手段】通信制御部１０３は、複数の他拠点の会議端末装置１０−２〜２４から、各々の映像データおよび音声データを受信する。映像・音声合成部１０５は、テレビ会議に参加する拠点の数に応じて画面レイアウトを決定し、画面レイアウトに従って、各拠点の映像データを合成した合成映像データを生成する。このとき、映像・音声合成部１０５は、音声データのレベルが閾値以上の各拠点の映像データの表示を、他の拠点の映像データの表示よりも強調されるように合成映像データを生成する。映像・音声出力制御部１０６は、合成映像データを、表示装置５００の画面に表示させる。【選択図】図１
2018056719.tif 000002
【特許請求の範囲】
【請求項１】
ホスト拠点に設けられ、複数の他拠点のテレビ会議装置と同時に接続可能なテレビ会議装置であって、
前記ホスト拠点を撮影して映像データを取得する映像入力部と、
前記ホスト拠点の音声を収音して音声データを取得する音声入力部と、
前記複数の他拠点の会議端末装置から、各々の映像データおよび音声データを受信する通信制御部と、
テレビ会議に参加する拠点の数に応じて画面レイアウトを決定し、前記画面レイアウトに従って前記各拠点の映像データを合成した合成映像データを生成して画面に表示させる表示制御部と、
を具備し、
前記音声データのレベルを検出するレベル検出部をさらに有し、
前記表示制御部は、
前記音声データのレベルが閾値以上の各拠点の映像データの表示を、他の拠点の映像データの表示よりも強調されるように合成映像データを生成する、
テレビ会議装置。
【請求項２】
前記表示制御部は、
前記音声データのレベルが閾値以上の各拠点の映像データの表示面積が、他の拠点の映像データの表示面積よりも大きくなるように合成映像データを生成する、
請求項１に記載のテレビ会議装置。
【請求項３】
前記表示制御部は、
前記音声データのレベルが閾値以上の各拠点の映像データの表示方法が、他の拠点の映像データの表示方法と異なるように合成映像データを生成する、
請求項１に記載のテレビ会議装置。
【請求項４】
前記表示制御部は、
前記音声データのレベルが閾値以上の各拠点の映像データの表示位置が変更されるように合成映像データを生成する、
請求項２に記載のテレビ会議装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、複数の拠点のそれぞれに設置された装置と同時接続可能なテレビ会議装置に関する。
【背景技術】
【０００２】
複数の拠点を繋いで遠隔会議を行うことができるテレビ会議システムが普及している。特許文献１には、３拠点の映像データを同時にモニタの画面に表示するテレビ会議装置が記載されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１２−２３１４２８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
また、近年、多くの拠点（例えば、２４拠点）と同時に接続できるテレビ会議装置が開発されている。
【０００５】
各拠点からの映像データを、同一面積の領域に表示させると、拠点数が多い場合に、各映像データの表示面積が小さくなるので、視聴者には、発言を行った参加者が居る拠点（以下、「発言拠点」という）の映像データが分かり難くなってしまう。
【０００６】
本発明の目的は、拠点数が多い場合でも、発言拠点からの映像データを視聴者に分かり易く表示することができるテレビ会議装置を提供することである。
【課題を解決するための手段】
【０００７】
本発明のテレビ会議装置は、ホスト拠点に設けられ、複数の他拠点のテレビ会議装置と同時に接続可能なテレビ会議装置であって、前記ホスト拠点を撮影して映像データを取得する映像入力部と、前記ホスト拠点の音声を収音して音声データを取得する音声入力部と、前記複数の他拠点の会議端末装置から、各々の映像データおよび音声データを受信する通信制御部と、テレビ会議に参加する拠点の数に応じて画面レイアウトを決定し、前記画面レイアウトに従って前記各拠点の映像データを合成した合成映像データを生成して画面に表示させる表示制御部と、を具備し、前記音声データのレベルを検出するレベル検出部をさらに有し、前記表示制御部は、前記音声データのレベルが閾値以上の各拠点の映像データの表示を、他の拠点の映像データの表示よりも強調されるように合成映像データを生成する。
【発明の効果】
【０００８】
本発明によれば、拠点数が多い場合でも、発言拠点からの映像データを視聴者に分かり易く表示することができる。
【図面の簡単な説明】
【０００９】
【図１】本発明の実施の形態１に係るテレビ会議装置の構成を示すブロック図
【図２】本発明の実施の形態１に係るテレビ会議装置の状態の遷移を示す状態遷移図
【図３】本発明の実施の形態１に係るテレビ会議装置の動作を示すフロー図
【図４】本発明の実施の形態１に係るテレビ会議装置の画面レイアウトの制御動作を示すフロー図
【図５】本発明の実施の形態１に係るテレビ会議装置の画面に表示される合成映像データの画面レイアウトの一例を示す図
【図６】本発明の実施の形態２に係るテレビ会議装置の画面に表示される合成映像データの画面レイアウトの一例を示す図
【図７】本発明の実施の形態３に係るテレビ会議装置の画面に表示される合成映像データの画面レイアウトの一例を示す図
【図８】本発明のバリエーションに係るテレビ会議装置の画面に表示される合成映像データの画面レイアウトの一例を示す図
【発明を実施するための形態】
【００１０】
以下、図面を適宜参照して、本発明の実施の形態につき、詳細に説明する。なお、以下では、同時に接続できる拠点数が２４であるテレビ会議システムを例に説明する。
【００１１】
（実施の形態１）
＜テレビ会議装置の構成および接続関係＞
まず、本発明の実施の形態１に係るテレビ会議装置１０の構成および接続関係について、図１を用いて詳細に説明する。
【００１２】
各拠点には、それぞれ、テレビ会議装置１０が設置されている。ホスト拠点（多拠点接続装置（ＭＣＵ）、拠点番号１）のテレビ会議装置１０−１は、他の拠点（拠点番号２〜２４）のそれぞれに設置された各テレビ会議装置１０−２〜２４と、ネットワーク２０を介して接続し、音声データ及び映像データの送信／受信を行う。ネットワーク２０は、典型的にはインターネットである。
【００１３】
テレビ会議装置１０−１は、本体装置１００、ユーザ操作入力装置２００、映像入力装置３００、音声入力装置４００および表示装置５００から構成されている。
【００１４】
本体装置１００は、ユーザ操作入力装置２００、映像入力装置３００、音声入力装置４００および表示装置５００と接続している。
【００１５】
ユーザ操作入力装置２００は、ユーザによる拠点を選択する操作を検出し、選択された拠点を示す選択拠点情報を含む信号を有線又は無線により本体装置１００に送信する。ユーザ操作入力装置２００は、典型的にはリモコン又はタッチパネルである。
【００１６】
映像入力装置３００は、本体装置１００が設置されている拠点を撮影して得られた映像データを本体装置１００に出力する。なお、映像入力装置３００が出力する映像データには、カメラが撮像した映像データの他に、ＰＣに保存された映像データ、ＤＶＤプレーヤにより再生された映像データ等がある。
【００１７】
音声入力装置４００は、本体装置１００が設置されている拠点の音声を収音して得られた音声データ等を本体装置１００に出力する。なお、音声入力装置４００が出力する音声データには、マイクが収音した音声データの他に、ＰＣに保存された映像データとセットの音声データ、ＤＶＤプレーヤにより再生された映像データとセットの音声データ等がある。
【００１８】
表示装置５００は、本体装置１００から出力された映像データを画面に表示すると共に、本体装置１００から出力された音声データを図示しないスピーカから出力する。
【００１９】
本体装置１００は、ユーザ指示受信部１０１と、会議制御部１０２と、通信制御部１０３と、映像・音声符号化／復号部１０４と、映像・音声合成部１０５と、映像・音声出力制御部１０６と、静止画保持部１０７と、映像入力制御部１０８と、音声入力制御部１０９と、から主に構成される。なお、映像・音声合成部１０５と映像・音声出力制御部１０６とにより、表示制御部が構成される。
【００２０】
ユーザ指示受信部１０１は、ユーザ操作入力装置２００から送信された信号を受信し、受信信号に含まれている選択拠点情報を抽出し、会議制御部１０２に出力する。選択拠点情報には、テレビ会議に参加する各拠点の発信先情報（ＩＰアドレスあるいはＩＳＤＮ番号）が含まれる。
【００２１】
会議制御部１０２は、ユーザ指示受信部１０１から入力した選択拠点情報に基づいて、通信制御部１０３と、映像・音声符号化／復号部１０４と、映像・音声合成部１０５と、におけるデータの入出力のタイミングを制御する。また、会議制御部１０２は、ユーザ指示受信部１０１から入力した選択拠点情報を映像・音声合成部１０５に出力する。また、会議制御部１０２は、選択拠点情報に基づいて、通信制御部１０３における発信処理及び呼の確立処理を制御すると共に、映像データを受信したか否かを監視する。
【００２２】
通信制御部１０３は、会議制御部１０２の制御に従ったタイミングで動作する。通信制御部１０３は、他のテレビ会議装置１０−２〜２４との間で呼を確立する。そして、通信制御部１０３は、呼を確立した後、他のテレビ会議装置１０−２〜２４が送信した映像データ及び音声データを、ネットワーク２０を介して受信し、映像・音声符号化／復号部１０４に出力する。また、通信制御部１０３は、呼を確立した後、映像・音声符号化／復号部１０４から入力した映像データ及び音声データを、ネットワーク２０を介して他のテレビ会議装置１０−２〜２４に送信する。なお、通信制御部１０３は、所定の通信プロトコルに従って動作する。通信プロトコルは、典型的にはＳＩＰ又はＨ．３２３である。
【００２３】
映像・音声符号化／復号部１０４は、会議制御部１０２の制御に従ったタイミングで動作する。映像・音声符号化／復号部１０４は、映像・音声合成部１０５から入力した映像データ、および、音声入力制御部１０９から入力した音声データを符号化して通信制御部１０３に出力する。また、映像・音声符号化／復号部１０４は、通信制御部１０３から入力した他のテレビ会議装置１０−２〜２４からの映像データおよび音声データを復号して映像・音声合成部１０５に出力する。
【００２４】
また、映像・音声符号化／復号部１０４は、各テレビ会議装置１０−１〜２４の音声データのレベルを検出し、検出結果を映像・音声合成部１０５に出力する（レベル検出部）。
【００２５】
映像・音声合成部１０５は、会議制御部１０２の制御に従ったタイミングで動作する。映像・音声合成部１０５は、映像・音声符号化／復号部１０４から入力した他のテレビ会議装置１０−２〜２４からの映像データと、映像入力制御部１０８から入力した映像データと、に基づいて、会議制御部１０２から入力した選択拠点情報の拠点数に応じて、複数の映像データを合成した合成映像データを生成し、映像・音声出力制御部１０６に出力する。なお、映像・音声合成部１０５は、各テレビ会議装置１０−２〜２４から映像データを受信するまでの間、静止画保持部１０７に保持された静止画が表示されるように合成映像データを生成する。
【００２６】
また、映像・音声合成部１０５は、映像・音声符号化／復号部１０４から入力した他のテレビ会議装置１０−２〜２４からの音声データと、音声入力制御部１０９から入力した音声データを合成した合成音声データを生成し、映像・音声出力制御部１０６に出力する。また、映像・音声合成部１０５は、映像入力制御部１０８から入力した映像データを映像・音声符号化／復号部１０４に出力する。
【００２７】
また、映像・音声合成部１０５は、音声データレベルの検出結果に応じて発言拠点を認定し、発言拠点の映像データを強調表示するように合成映像データを変更する。
【００２８】
映像・音声出力制御部１０６は、映像・音声合成部１０５から入力した合成映像データを表示装置５００の画面に表示させると共に、合成音声データを表示装置５００のスピーカから音声として出力させる。
【００２９】
静止画保持部１０７は、他のテレビ会議装置１０−２〜２４から映像データを受信するまでの期間において、所定の静止画を表示装置５００の画面に表示させるための静止画データを予め保持している。
【００３０】
映像入力制御部１０８は、映像入力装置３００から入力した映像データを映像・音声合成部１０５に出力する。
【００３１】
音声入力制御部１０９は、音声入力装置４００から入力した音声データを映像・音声符号化／復号部１０４および映像・音声合成部１０５に出力する。
【００３２】
＜テレビ会議装置の接続状態の遷移＞
次に、テレビ会議装置１０−１の接続状態の遷移について、図２を用いて詳細に説明する。
【００３３】
テレビ会議装置１０−１は、電源ＯＮとなることにより動作を開始する。テレビ会議装置１０−１は、電源ＯＮされた直後では非通信状態である（Ｓ１）。
【００３４】
テレビ会議装置１０−１は、非通信状態（Ｓ１）において、他の１つのテレビ会議装置１０−ｉ（ｉは２から２４のいずれかの整数）と接続することにより、テレビ会議装置１０−ｉと一対一の通信状態（１：１通信状態）になる（Ｓ２）。そして、テレビ会議装置１０−１は、１：１通信状態（Ｓ２）において、通信状態であるテレビ会議装置１０−ｉとの接続を切断すると非通信状態になる（Ｓ１）。なお、テレビ会議装置１０−１は、非通信状態（Ｓ１）において、電源ＯＦＦとなることにより動作を終了する。
【００３５】
また、テレビ会議装置１０−１は、１：１通信状態（Ｓ２）から、さらに他のテレビ会議装置１０−ｊ（ｊはｉ以外の２から２４のいずれかの整数）と接続することにより、複数の拠点のテレビ会議装置１０−ｉ、ｊと通信状態（ＭＣＵ通信状態）になる（Ｓ３）。
【００３６】
そして、テレビ会議装置１０−１は、通信状態にあるテレビ会議装置１０−ｊとの接続を切断すれば一対一の通信状態になり（Ｓ２）、さらに通信状態にあるテレビ会議装置１０−ｉとの接続を切断すれば非通信状態になる（Ｓ１）。
【００３７】
また、テレビ会議装置１０−１は、非通信状態（Ｓ１）において、他の全てのテレビ会議装置１０−２〜２４に対して一斉に発信することにより他の全てのテレビ会議装置１０−２〜２４と通信状態（ＭＣＵ通信状態）になる（Ｓ３）。そして、テレビ会議装置１０は、他の全てのテレビ会議装置１０−２〜２４との接続を一斉に切断すれば非通信状態になる（Ｓ１）。
【００３８】
一斉に発信する方法としては、ユーザが発信時に発信先をテレビ会議装置１０−１に手入力する方法、又は、テレビ会議装置１０−１に予め記憶させておいた複数の発信先情報を登録したリストをユーザに選択させる方法等が考えられる。また、発信先を特定する方法としては、ＩＰアドレス、電話番号又は識別コード等が考えられる。
【００３９】
＜テレビ会議装置の動作＞
次に、テレビ会議装置１０−１の動作について、図３を用いて詳細に説明する。なお、図３は、テレビ会議装置１０−１が、他の全てのテレビ会議装置１０−２〜２４に対して一斉に発信する場合のフローである。
【００４０】
まず、ユーザ指示受信部１０１が、ユーザ操作入力装置２００から信号を受信し、受信した信号に含まれる選択拠点情報を抽出して会議制御部１０２に出力する。
【００４１】
会議制御部１０２は、選択拠点情報のＮ（Ｎは１以上の整数、図３ではＮ＝２３）拠点のそれぞれに設置されたテレビ会議装置１０−２〜２４に一斉発信を行うように通信制御部１０３を制御する。これにより、通信制御部１０３は、選択拠点のテレビ会議装置１０−２〜２４に一斉発信を行う（Ｓ１１）。具体的には、会議制御部１０２は、選択拠点情報が複数の発信先情報を記録した１つのリストの情報である場合、そのリストに登録されている発信先情報の発信先の数により拠点数Ｎを認識することができる。
【００４２】
また、映像・音声合成部１０５は、会議制御部１０２から入力した選択拠点情報に基づいて画面レイアウトを決定する（Ｓ１２）。
【００４３】
また、通信制御部１０３は、他の拠点の各テレビ会議装置１０−２〜２４との間で呼を確立する（Ｓ１３）。
【００４４】
次に、映像・音声合成部１０５は、映像入力制御部１０８から入力したテレビ会議装置１０−１の映像データ、および、他のテレビ会議装置１０−２〜２４の映像データのそれぞれが、画面レイアウトの、対応する分割領域に表示されるように合成映像データを生成する。そして、映像・音声出力制御部１０６が、映像・音声合成部１０５から入力した初期合成映像データを表示装置５００の画面に表示させる（Ｓ１４）（図５（ａ）、図６（ａ）参照）。なお、他の各テレビ会議装置１０−２〜２４から映像データを受信するまでは、対応する分割領域に静止画データが表示される。
【００４５】
次に、映像・音声合成部１０５は、発言拠点の映像データを強調するための強調表示制御動作（Ｓ１５）を行う。
【００４６】
以下、本実施の形態のテレビ会議装置１０−１における、強調表示制御動作（Ｓ１５）の詳細について図４を用いて説明する。
【００４７】
まず、映像・音声符号化／復号部１０４が、各テレビ会議装置１０−１〜２４の音声データのレベルを検出し、検出結果を映像・音声合成部１０５に出力する（Ｓ２１）。
【００４８】
映像・音声合成部１０５は、音声データのレベルが閾値以上の場合に発言があったと認識する。そして、映像・音声合成部１０５は、新たな発言拠点があったか否かを判定する（Ｓ２２）。
【００４９】
新たな発言拠点があった場合（Ｓ２２：ＹＥＳ）、映像・音声合成部１０５は、当該発言拠点について個別タイマをスタートさせる（Ｓ２３）。また、映像・音声合成部１０５は、当該発言拠点の映像データが強調表示されるように合成映像データを生成する。そして、映像・音声出力制御部１０６は、映像・音声合成部１０５から入力した新たな合成映像データを表示装置５００の画面に表示させる（Ｓ２４）。その後、フローはＳ２１に戻る。
【００５０】
一方、新たな発言拠点がなかった場合（Ｓ２２：ＮＯ）、映像・音声合成部１０５は、既存の発言拠点が追加の発言を行ったか否かを判定する（Ｓ２５）。
【００５１】
そして、既存の発言拠点が追加の発言を行った場合（Ｓ２５：ＹＥＳ）、映像・音声合成部１０５は、個別タイマをリスタートさせる（Ｓ２６）。その後、フローはＳ２１に戻る。
【００５２】
一方、既存の発言拠点が追加の発言を行わなかった場合（Ｓ２５：ＮＯ）、映像・音声合成部１０５は、個別タイマが満了した（所定時間Ｔを計時した）か否かを判定する（Ｓ２７）。
【００５３】
個別タイマが満了した場合（Ｓ２７：ＹＥＳ）、映像・音声合成部１０５は、当該発言拠点の強調表示を解除した合成映像データを生成する。そして、映像・音声出力制御部１０６は、映像・音声合成部１０５から入力した新たな更新合成映像データを表示装置５００の画面に表示させる（Ｓ２８）。その後、フローはＳ２１に戻る。
【００５４】
個別タイマが満了していない場合（Ｓ２７：ＮＯ）、フローはＳ２１に戻る。
【００５５】
＜画面レイアウトの具体例＞
次に、映像・音声合成部１０５による合成映像データの画面レイアウトの具体例について、図５を用いて詳細に説明する。なお、図５において、画面内の各領域に記された数字は拠点番号に対応する。例えば、「１」と記された領域には、拠点番号１のテレビ会議装置１０−１で撮像された映像データが表示される。
【００５６】
図５（ａ）に示すように、合成映像データは、（Ｎ＋１）個以上（図５（ａ）では２４個）に分割された各領域に、対応する拠点の映像データ（あるいは静止画データ）が表示されるようにレイアウトされる。
【００５７】
図５（ａ）に示した合成映像データを表示した状態で、拠点番号１９の参加者が新たに発言を行った場合、テレビ会議装置１０−１は、図５（ｂ）に示すように、当該発言拠点（拠点番号１８）の映像データの表示領域を拡大させるように合成映像データを変更する。発言拠点の映像データの表示領域を拡大させることにより、発言拠点が強調される。
【００５８】
その後、さらに、拠点番号１２の参加者が新たに発言を行った場合、テレビ会議装置１０−１は、図５（ｃ）に示すように、全ての発言拠点（拠点番号１２、１９）の映像データの表示領域を拡大させるように合成映像データを変更する。
【００５９】
＜効果＞
このように、本実施の形態では、発言拠点の映像データの表示面積が、他の拠点の映像データの表示面積よりも大きくなるように合成映像データを生成する。これにより、拠点数が多い場合でも、発言拠点からの映像データを視聴者に分かり易く表示することができる。
【００６０】
（実施の形態２）
強調表示制御として、上記実施の形態１では、発言拠点の映像データの表示領域を拡大させる場合について説明したが、実施の形態２では、発言拠点の映像データの表示方法を変更させる場合について説明する。
【００６１】
なお、本実施の形態のテレビ会議装置１０の構成および接続関係は、実施の形態１で説明した図１に示したものと同一であるので、その説明を省略する。また、本実施の形態のテレビ会議装置１０−１の動作は、実施の形態１で説明した図３、図４に示したものと同一であるので、その説明を省略する。
【００６２】
＜画面レイアウトの具体例＞
次に、映像・音声合成部１０５による合成映像データの画面レイアウトの具体例について、図６を用いて詳細に説明する。なお、図６において、画面内の各領域に記された数字は拠点番号に対応する。例えば、「１」と記された領域には、拠点番号１のテレビ会議装置１０−１で撮像された映像データが表示される。
【００６３】
図６（ａ）に示すように、合成映像データは、（Ｎ＋１）個以上（図６（ａ）では２４個）に分割された各領域に、対応する拠点の映像データ（あるいは静止画データ）が表示されるようにレイアウトされる。このとき、各拠点の映像データの左肩部分には、対応する拠点のＩＰアドレスや拠点名称などの拠点情報が表示される。なお、図６では説明の簡単化のため全て"site"と図示している。以降、映像データの”site”は、拠点情報を示すものとする。
【００６４】
図６（ａ）に示した合成映像データを表示した状態で、拠点番号１９の参加者が新たに発言を行った場合、テレビ会議装置１０−１は、図６（ｂ）に示すように、当該発言拠点（拠点番号１８）の映像データの"site"の表示方法を変更した合成映像データを生成する。発言拠点の映像データの一部の表示方法を変更することにより、発言拠点が強調される。なお、表示方法の変更のパターンとして、図６（ｂ）のように反転させるものや、色を変化させるものがある。
【００６５】
その後、さらに、拠点番号１２の参加者が新たに発言を行った場合、テレビ会議装置１０−１は、図６（ｃ）に示すように、全ての発言拠点（拠点番号１２、１９）の映像データの"site"の表示を変更した合成映像データを生成する。
【００６６】
＜効果＞
このように、本実施の形態では、発言拠点の映像データの表示方法が、他の拠点の映像データの表示方法と異なるように合成映像データを生成する。これにより、拠点数が多い場合でも、発言拠点からの映像データを視聴者に分かり易く表示することができる。
【００６７】
（実施の形態３）
強調表示制御として、上記実施の形態１では、発言拠点の映像データの表示領域を拡大させる場合について説明したが、実施の形態３では、発言拠点の映像データの表示領域を拡大させるとともに、表示位置を変更させる場合について説明する。
【００６８】
なお、本実施の形態のテレビ会議装置１０の構成および接続関係は、実施の形態１で説明した図１に示したものと同一であるので、その説明を省略する。また、本実施の形態のテレビ会議装置１０−１の動作は、実施の形態１で説明した図３、図４に示したものと同一であるので、その説明を省略する。
【００６９】
＜画面レイアウトの具体例＞
次に、映像・音声合成部１０５による合成映像データの画面レイアウトの具体例について、図７を用いて詳細に説明する。なお、図７において、画面内の各領域に記された数字は拠点番号に対応する。例えば、「１」と記された領域には、拠点番号１のテレビ会議装置１０−１で撮像された映像データが表示される。
【００７０】
図５（ａ）に示した合成映像データを表示した状態で、拠点番号１の参加者が新たに発言を行った場合、テレビ会議装置１０−１は、図７（ａ）に示すように、当該発言拠点（拠点番号１）の映像データの表示領域を拡大させるとともに、表示位置を変更するように合成映像データを変更する。
【００７１】
その後、さらに、拠点番号１９の参加者が新たに発言を行った場合、テレビ会議装置１０−１は、図７（ｂ）に示すように、全ての発言拠点（拠点番号１、１９）の映像データの表示領域を拡大させるとともに、表示位置を変更するように合成映像データを変更する。
【００７２】
その後、さらに、拠点番号２０の参加者が新たに発言を行った場合、テレビ会議装置１０−１は、図７（ｃ）に示すように、全ての発言拠点（拠点番号１、１９、２０）の映像データの表示領域を拡大させるとともに、表示位置を変更するように合成映像データを変更する。
【００７３】
その後、さらに、拠点番号３の参加者が新たに発言を行った場合、テレビ会議装置１０−１は、図７（ｄ）に示すように、全ての発言拠点（拠点番号１、１９、２０、３）の映像データの表示領域を拡大させるとともに、表示位置を変更するように合成映像データを変更する。
【００７４】
＜効果＞
このように、本実施の形態では、発言拠点の映像データの表示面積が、他の拠点の映像データの表示面積よりも大きくなり、かつ、発言拠点の映像データの表示位置が変更されるように合成映像データを生成する。これにより、拠点数が多い場合でも、発言拠点からの映像データを視聴者に分かり易く表示することができる。
【００７５】
（バリエーション）
本発明では、主として発言を行う参加者が居る発言拠点と、基本的に発言を行わず傍聴のみを行う参加者が居る傍聴拠点とが予め決められている場合に、図８（ａ）に示すように、発言拠点（図８（ａ）では拠点番号１、２、３、４）の映像データの表示面積を傍聴拠点の映像データの表示面積よりも大きくする等、発言拠点の映像データを常に強調表示するようにしてもよい。
【００７６】
さらに、図８（ｂ）に示すように、傍聴拠点の参加者が質問等の発言を行った場合、当該傍聴拠点（図８（ｂ）では拠点番号１７）の映像データの表示面積を他の傍聴拠点の映像データの表示面積よりも大きくする等、当該傍聴拠点の映像データを強調表示するようにしてもよい。
【００７７】
なお、本発明は、部材の種類、配置、個数等は前述の実施の形態に限定されるものではなく、その構成要素を同等の作用効果を奏するものに適宜置換する等、発明の要旨を逸脱しない範囲で適宜変更可能である。
【００７８】
具体的には、上記の実施の形態では、映像を表示するまでに静止画を表示する場合について説明したが、本発明はこれに限られず、静止画以外のメッセージ等の文字情報を表示する、あるいは、黒画面のままとするようにしてもよい。
【００７９】
また、上記の実施の形態では、同時に接続できる拠点数が２４であるテレビ会議システムを例に説明したが、本発明は同時に接続できる拠点数に制限は無い。
【００８０】
また、本発明では、ユーザの設定により、表示用の映像データと送信用の映像データとを別個に生成することができる。例えば、映像入力制御部１０８から出力された映像データを表示用の映像データとし、映像・音声合成部１０５で合成された映像データを送信用の映像データとすることができる。
【産業上の利用可能性】
【００８１】
本発明は、ホスト拠点に設けられ、ホスト拠点と異なる複数の拠点の相手装置と同時に接続可能なテレビ会議装置に用いるに好適である。
【符号の説明】
【００８２】
１０  テレビ会議装置
１００  本体装置
１０１  ユーザ指示受信部
１０２  会議制御部
１０３  通信制御部
１０４  映像・音声符号化／復号部
１０５  映像・音声合成部
１０６  映像・音声出力制御部
１０７  静止画保持部
１０８  映像入力制御部
１０９  音声入力制御部
２００  ユーザ操作入力装置
３００  映像入力装置
４００  音声入力装置
５００  表示装置
【図１】
2018056719.tif 000003
【図２】
2018056719.tif 000004
【図３】
2018056719.tif 000005
【図４】
2018056719.tif 000006
【図５】
2018056719.tif 000007
【図６】
2018056719.tif 000008
【図７】
2018056719.tif 000009
【図８】
2018056719.tif 000010
【手続補正書】
【提出日】平成29年3月24日(2017.3.24)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
ホスト拠点に設けられ、複数の他拠点のテレビ会議装置と同時に接続可能なテレビ会議装置であって、
前記ホスト拠点を撮影して映像データを取得する映像入力部と、
前記ホスト拠点の音声を収音して音声データを取得する音声入力部と、
前記複数の他拠点の会議端末装置から、各々の映像データおよび音声データを受信する通信制御部と、
テレビ会議に参加する拠点の数に応じて画面レイアウトを決定し、前記画面レイアウトに従って前記各拠点の映像データを合成した合成映像データを生成して画面に表示させる表示制御部と、
を具備し、
前記音声データのレベルを検出するレベル検出部をさらに有し、
前記表示制御部は、
主として発言を行う参加者が居る発言拠点と、基本的に発言を行わず傍聴のみを行う参加者が居る傍聴拠点とが予め決められている場合に、前記発言拠点の映像データの表示面積が、前記傍観拠点の映像データの表示面積よりも大きくなるように合成映像データを生成し、
前記音声データのレベルが閾値以上となった前記傍観拠点の映像データの表示面積を、他の前記傍観拠点の映像データの表示面積よりも大きく、かつ、前記発言拠点の映像データの表示面積よりも小さくなるように合成映像データを生成する、
テレビ会議装置。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
本発明のテレビ会議装置は、ホスト拠点に設けられ、複数の他拠点のテレビ会議装置と同時に接続可能なテレビ会議装置であって、前記ホスト拠点を撮影して映像データを取得する映像入力部と、前記ホスト拠点の音声を収音して音声データを取得する音声入力部と、前記複数の他拠点の会議端末装置から、各々の映像データおよび音声データを受信する通信制御部と、テレビ会議に参加する拠点の数に応じて画面レイアウトを決定し、前記画面レイアウトに従って前記各拠点の映像データを合成した合成映像データを生成して画面に表示させる表示制御部と、を具備し、前記音声データのレベルを検出するレベル検出部をさらに有し、前記表示制御部は、主として発言を行う参加者が居る発言拠点と、基本的に発言を行わず傍聴のみを行う参加者が居る傍聴拠点とが予め決められている場合に、前記発言拠点の映像データの表示面積が、前記傍観拠点の映像データの表示面積よりも大きくなるように合成映像データを生成し、前記音声データのレベルが閾値以上となった前記傍観拠点の映像データの表示面積を、他の前記傍観拠点の映像データの表示面積よりも大きく、かつ、前記発言拠点の映像データの表示面積よりも小さくなるように合成映像データを生成する。
【手続補正書】
【提出日】平成29年5月18日(2017.5.18)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
ホスト拠点に設けられ、複数の他拠点のテレビ会議装置と同時に接続可能なテレビ会議装置であって、
前記ホスト拠点を撮影して映像データを取得する映像入力部と、
前記ホスト拠点の音声を収音して音声データを取得する音声入力部と、
前記複数の他拠点の会議端末装置から、各々の映像データおよび音声データを受信する通信制御部と、
テレビ会議に参加する拠点の数に応じて画面レイアウトを決定し、前記画面レイアウトに従って前記各拠点の映像データを合成した合成映像データを生成して画面に表示させる表示制御部と、
を具備し、
前記音声データのレベルを検出するレベル検出部をさらに有し、
前記表示制御部は、
主として発言を行う参加者が居る発言拠点と、基本的に発言を行わず傍聴のみを行う参加者が居る傍聴拠点とが予め決められている場合に、前記発言拠点の映像データの表示面積が、前記傍聴拠点の映像データの表示面積よりも大きくなるように合成映像データを生成し、
前記音声データのレベルが閾値以上となった前記傍聴拠点の映像データの表示面積を、他の前記傍聴拠点の映像データの表示面積よりも大きく、かつ、前記発言拠点の映像データの表示面積よりも小さくなるように合成映像データを生成する、
テレビ会議装置。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
本発明のテレビ会議装置は、ホスト拠点に設けられ、複数の他拠点のテレビ会議装置と同時に接続可能なテレビ会議装置であって、前記ホスト拠点を撮影して映像データを取得する映像入力部と、前記ホスト拠点の音声を収音して音声データを取得する音声入力部と、前記複数の他拠点の会議端末装置から、各々の映像データおよび音声データを受信する通信制御部と、テレビ会議に参加する拠点の数に応じて画面レイアウトを決定し、前記画面レイアウトに従って前記各拠点の映像データを合成した合成映像データを生成して画面に表示させる表示制御部と、を具備し、前記音声データのレベルを検出するレベル検出部をさらに有し、前記表示制御部は、主として発言を行う参加者が居る発言拠点と、基本的に発言を行わず傍聴のみを行う参加者が居る傍聴拠点とが予め決められている場合に、前記発言拠点の映像データの表示面積が、前記傍聴拠点の映像データの表示面積よりも大きくなるように合成映像データを生成し、前記音声データのレベルが閾値以上となった前記傍聴拠点の映像データの表示面積を、他の前記傍聴拠点の映像データの表示面積よりも大きく、かつ、前記発言拠点の映像データの表示面積よりも小さくなるように合成映像データを生成する。