(57)【要約】【課題】遠隔会議において、音声品質のリアルタイムでの確認を実現するＴＶ会議装置を提供すること。【解決手段】ＴＶ会議装置は、音声の明瞭度スコアを算出する音声分析装置と、画面に表示する映像信号に、音声の明瞭度スコアを可視化して合成する映像生成装置とを有し、求められた音声の明瞭度スコアを可視化して画面の一部に可視化して常時表示させることにより、相手側に伝えられる音声情報の品質を会議中リアルタイムでモニタリングする機能を備える。【選択図】図１
2012134936.tif 000002
【特許請求の範囲】
【請求項１】
情報入出力デバイスと、
相手側から受け取った圧縮データをデコードするデコーダと、
相手側に送る圧縮データ作成するエンコーダと、
音声のデジタルデータをアナログ信号に変換するＤ／Ａ変換装置と、
マイクから収録された音声のアナログ信号をデジタルデータに変換するＡ／Ｄ変換装置と、
音響エコーやノイズを除去するためのエコー／ノイズ除去装置と、
音声の明瞭度スコアを算出する音声分析装置と、
画面に表示する映像信号に、前記音声の明瞭度スコアを可視化して合成する映像生成装置とを有し、
求められた前記音声の明瞭度スコアを可視化して画面の一部に可視化して常時表示させることにより、相手側に伝えられる音声情報の品質を会議中リアルタイムでモニタリングする機能を設けたことを特徴とするＴＶ会議装置。
【請求項２】
前記音声の明瞭度の指標として、無音声区間の平均パワーと有音声区間の短時間パワーとの比を元に計算される値を使用することを特徴とする請求項１記載のＴＶ会議装置。
【請求項３】
前記音声の明瞭度スコアの画面表示として、スケールバーによる表示モード、７セグ風の数値表示モード、および、それら両方を用いた表示モードの３通りのうちの少なくとも１つのデザインでの表示を可能にし、ユーザの好みで切り替えられるようにしたことを特徴とする請求項１または２記載のＴＶ会議装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ＴＶ会議システムにおける音声品質の技術に関する。
【背景技術】
【０００２】
自分側の発話者の音声を収録するためのマイク、および相手側の音声を再生するためのスピーカをそれぞれ用意し、ネットワーク回線を通して互いの音声をやりとりすることで遠隔地間での会議を可能にする電話会議やテレビ会議用の音声入出力装置では、マイクに入力される会議開催場所における様々な雑音の影響を低減するためのノイズサプレッサー（ＮＳ）や、スピーカから再生された相手側の音声が自分側のマイクを経て再度相手側にフィードバックされてしまうことで発生する音響エコーを除去するための音響エコーキャンセラー（ＡＥＣ）などの音響処理技術を利用することで明瞭性の高い音声通信を行う方法が既に知られている。
ここで、ノイズサブレッサーとは、「周波数帯域での時間変化が少ない定常的なノイズ（空調の音や周辺機器のファン音など）に対して、その帯域の音量を絞り込んで聴感上目立たなくするためのエフェクター」である。
【０００３】
また、マイクから収録された音声データは、音声コーデックによって一旦エンコードしてデータ量を削減した後で相手側に送信し、相手側の装置でデコードして再生するという一連の処理を行うことによって、通信回線に流れるデータ量を削減し、安定した通信を実現する方法も既に知られている。
【０００４】
特許文献１には、テレビ会議システムにケーブルで接続される様々な周辺機器の煩雑さを解消する目的で、音声入出力機能を本体に内蔵し、収録される音声品質を向上させるためにマイクのみを本体からケーブルにて引き出し可能にする機器の構成が開示されている。
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、今までのＴＶ会議装置では、自分側の音声が最終的に相手側にどのような品質で伝わっているかを簡単に確認することができないという問題があった。
テレビ会議での映像品質と音声品質について、それぞれの確認手段について考えてみる。
【０００６】
映像の場合、相手にクリアな情報を伝えるためには、参加者の配置とカメラの位置や向きを適切に設定して、参加者全員がカメラの画角内に完全に納まるよう、事前に調整を行う必要がある。こうした調整を行うためには、相手側の映像が表示されているモニタやスクリーンの一部に自分の側のカメラ映像を表示させておけば良く、これによってリアルタイムで映り具合を確認することができる。従って、もしも不具合があれば、会議の開始前にその映像を確認しながらカメラの位置や向き、会議出席者の配置などを調節することが可能である。
【０００７】
一方、音声の場合は、騒音源や参加者とマイクの位置関係やスピーカとマイクの位置関係によって収録される発話者の音声のレベルやＮＳ処理、ＡＥＣ処理の効果などが大きく左右されるため、クリアで明瞭な音声を伝えるためにはそれらの配置を適切に調整する必要がある。特に小型で携帯性に優れたポータブルなＴＶ会議システムを考えた場合には、会議開催場所の形状や音響特性、参加者の人数や座席配置などが毎回変化するため、このような調整をその都度実施する必要がある。
【０００８】
しかし、音声の場合、映像のように収録されたデータの品質を手軽に確認するための手段がないため、実際には会議中に相手側から音声品質の不具合を指摘されてはじめて気づき、その時点で（一時的に会議を中断して）調整が行われる場合が多い。これによって円滑な会議の進行が妨げられるという問題があった。
【０００９】
こうした問題を解決する手段として、音声入出力装置内に音声データを蓄積可能な保存装置を設け、ユーザーの要求に応じて保存装置内に保存された音声を自分の側のスピーカから再生することで、相手側で再生されるであろう音声の品質を事前に確認する方法も考えられる。しかしこの方法でも、ユーザーが品質確認のための操作を明示的に行う必要があり、品質確認中はたとえ会議中であったとしてもスピーカから再生される音声は自分側で録音された音声となるため、実際にその確認を会議中に行うことは円滑な会議を妨げてしまうおそれがある。従ってこの方法での音声品質確認は会議の開始前に行うことになり、映像品質のように会議中にリアルタイムで確認することが難しいという問題が残っていた。
【００１０】
上記の特許文献１でも、ポータブルな遠隔会議システムにおいて、マイクやスピーカの設置を柔軟にして音質の向上を図っているに過ぎなく、上記の設置状況が本当に適切なものであるかを自ら判断する手段が無いという問題は解消できていない。
【００１１】
本発明の目的は、遠隔会議において、音声品質のリアルタイムでの確認を実現するＴＶ会議装置を提供することにある。
【課題を解決するための手段】
【００１２】
請求項１に記載の発明は、情報入出力デバイスと、相手側から受け取った圧縮データをデコードするデコーダと、相手側に送る圧縮データ作成するエンコーダと、音声のデジタルデータをアナログ信号に変換するＤ／Ａ変換装置と、マイクから収録された音声のアナログ信号をデジタルデータに変換するＡ／Ｄ変換装置と、音響エコーやノイズを除去するためのエコー／ノイズ除去装置と、音声の明瞭度スコアを算出する音声分析装置と、画面に表示する映像信号に、音声の明瞭度スコアを可視化して合成する映像生成装置とを有し、求められた音声の明瞭度スコアを可視化して画面の一部に可視化して常時表示させることにより、相手側に伝えられる音声情報の品質を会議中リアルタイムでモニタリングする機能を設けたことを特徴とするＴＶ会議装置である。
【００１３】
請求項２に記載の発明は、請求項１記載のＴＶ会議装置において、音声の明瞭度の指標として、無音声区間の平均パワーと有音声区間の短時間パワーとの比を元に計算される値を使用することを特徴とする。
【００１４】
請求項３に記載の発明は、請求項１または２記載のＴＶ会議装置において、音声の明瞭度スコアの画面表示として、スケールバーによる表示モード、７セグ風の数値表示モード、および、それら両方を用いた表示モードの３通りのうちの少なくとも１つのデザインでの表示を可能にし、ユーザーの好みで切り替えられるようにしたことを特徴とする。
【発明の効果】
【００１５】
本発明によれば、自分側で収録された音声の品質を会議中にリアルタイムで簡単にチェックすることができる。
【図面の簡単な説明】
【００１６】
【図１】本実施の形態のＴＶ会議装置のブロック図である。
【図２】音声明瞭度スコアの算出アルゴリズムの一例を示すフローチャートである。
【図３】音声明瞭度スコアの表示例を示す図である。
【発明を実施するための形態】
【００１７】
本発明の実施の形態を説明する。
本発明は、ＴＶ会議装置に際して、以下の特徴を有する。
要するに、ＴＶ会議装置内にマイクから収録された音声データを分析する音声分析装置を設け、自分側のマイクによって収録され、ノイズサプレッサーや音響エコーキャンセラー等の音響処理を施した後のデータに対して、音声の明瞭性の指標となるパラメータを算出し、映像を表示する画面の一部にその指標を可視化して表示することで、自分の側で収録された音声の品質を、ユーザーが会議中に常時リアルタイムにモニタリングすることができる仕組みを実現することが特徴になっている。
【００１８】
音声明瞭性の指標となるパラメータとして使用するのは、例えば無音声区間の平均パワーと音声区間の平均パワーの比などが考えられる。これを実現するために、音声分析装置において、まず無音声区間と有音声区間をそれぞれ抽出し、無音声区間の短時間平均パワー（Ｐｎ）、および有音声区間の短時間平均パワー（Ｐｓ）をそれぞれ計算する。次に（Ｐｎ）と（Ｐｓ）との比に基づくスコアを求め、これを画面上に可視化表示して会議参加者に提示する。
【００１９】
会議参加者は、このスコアに基づいてマイクの位置が適切か否かをリアルタイムでモニタリングすることができ、そのスコアが低い場合にも、「誰が発言した場合にスコアが低いのか」を簡単に知ることができる。従って、(１)その発言者に多少大きな声で話すように促す、(２)その発言者の座席をマイクに近づける、(３)マイクの位置をその発言者の方向に移動する、など、状況に応じた対策を行うことができる。
【００２０】
上記記載の本発明の特徴について、以下の図面を用いて詳細に解説する。
【００２１】
図１はＴＶ会議装置のブロック図である（特に音声入出力装置の部分を中心に説明したもの。映像信号の処理に関しては一部省略されている要素あり）。
【００２２】
ＴＶ会議装置は、情報入出力デバイス（マイク、スピーカ、カメラ、画面）と、相手側から受け取った圧縮データをデコードするための「デコーダ」と、相手側に送る圧縮データ作成するための「エンコーダ」と、音声のデジタルデータをアナログ信号に変換する「Ｄ／Ａ変換装置」と、マイクから収録された音声のアナログ信号をデジタルデータ（ＰＣＭ形式）に変換する「Ａ／Ｄ変換装置」と、音響エコーやノイズを除去するための「エコー除去／ノイズ除去装置」と、音声の明瞭度スコアを算出する「音声分析装置」と、画面に表示する映像信号に、声の明瞭度スコアを可視化して合成する「映像生成装置」と、を備えて構成されている。
【００２３】
図２は、音声明瞭度スコアの算出アルゴリズムの一例を示すフローチャートである。
【００２４】
図２を参照すると、まず、Ｓ２０１で、以下の変数を規定する。
フレーム（数十ミリ秒程度）単位で有音と無音を識別するためのスレッショルド値Ｔｈを予め定めた値で初期化する（この値は、Ｐｎのβ倍として逐次更新される）。
現在の時刻（フレーム番号）を時刻ｔとする。
無音声区間の平均パワーをＰｎとする（この値は、暗騒音などの環境変化に対応できるよう、更新重み係数αを用いて逐次最新の値に更新される）。
有音声区間の短時間パワーをＰｓとする。
αはＰｎの更新係数で、０＜α≦１の範囲の値である
βはＴｈの更新係数で、Ｐｎに対する倍率を表す値である。
【００２５】
次に、Ｓ２０２で、時刻ｔのフレームに対する短時間パワーＰｔを求める。
【００２６】
ＰｔがＴｈ以上の場合（Ｓ２０３／Ｙｅｓ）はそのフレームを有音声区間、そうでない場合（Ｓ２０３／Ｎｏ）は無音声区間と判断する。
【００２７】
無音声区間の場合には、Ｐｔの値を用いてＰｎを更新する（Ｓ２０４）。
有音声区間の場合には、Ｐｔの値をＰｓとする（Ｓ２０５）。
【００２８】
ＰｓとＰｎの値から明瞭度スコアＳを計算する（Ｓ２０６）。一例として“Ｓ＝１００＊(１−Ｐｎ／Ｐｓ)”という計算式を用いた場合には、Ｐｎに比べてＰｓの値が大きいほど（明瞭性が高いほど）漸近的に１００に近づくようなスコアを得ることができる。
【００２９】
図３は音声明瞭度スコアの表示例を示す図である。
【００３０】
図３の左側はスケールバーで表示したものであり、また、右側は７セグ風の数字で表示したものである。なお、図には示していないが、両者を併用することも可能である。
【００３１】
なお、上述する各実施の形態は、本発明の好適な実施の形態であり、本発明の要旨を逸脱しない範囲内において種々変更実施が可能である。
【先行技術文献】
【特許文献】
【００３２】
【特許文献１】特開平９−４６６７０号公報
【図１】
2012134936.tif 000003
【図２】
2012134936.tif 000004
【図３】
2012134936.tif 000005