(57)【要約】【課題】ノイズとしての会議外音声を区別することができる装置、方法およびプログラムを提供する。【解決手段】分離部１０９２は、ノイズ低減部１０９１から受け取った音データに対して、音データに含まれる発話者ごとの音声データに分離し、判定部１０９３は、分離部１０９２から受け取った発話者ごとの音声データを、会議音声のデータであるか会議外音声のデータであるかを判定し、音声変換部１０９４は、判定部１０９３から受け取った会議外音声の音声データに対して、音圧レベルを減衰させた音に音声変換、または、音声として聞き取れないような音データに音声変換する。【選択図】図５
2015219316.tif 000002
【特許請求の範囲】
【請求項１】
音を集音する集音手段と、
前記集音手段により集音された音の音データを、発話者ごとの音声データに分離する分離手段と、
前記音声データの特徴量に基づいて、該音声データが会議音声のデータであるか会議外音声のデータであるかを判定する判定手段と、
を備えた装置。
【請求項２】
前記判定手段により前記会議外音声のデータであると判定された前記音声データを非音声音データに変換する変換手段を、さらに備えた請求項１に記載の装置。
【請求項３】
前記判定手段により前記会議音声のデータであると判定された前記音声データと、前記変換手段により変換された前記非音声音データとを合成する合成手段を、さらに備えた請求項２に記載の装置。
【請求項４】
前記判定手段は、前記特徴量に対する閾値判定を行うことにより、前記音声データが前記会議音声のデータであるか前記会議外音声のデータであるかを判定する請求項１〜３のいずれか一項に記載の装置。
【請求項５】
前記特徴量は、前記音声データの音圧レベルであり、
前記判定手段は、前記閾値判定として、前記音声データの前記音圧レベルが第１閾値未満である場合、該音声データが前記会議外音声のデータであると判定する請求項４に記載の装置。
【請求項６】
前記特徴量は、前記音声データの周波数成分のうち所定の周波数未満の周波数成分の比率であり、
前記判定手段は、前記閾値判定として、前記音声データの前記比率が第２閾値以上である場合、該音声データが前記会議外音声のデータであると判定する請求項４に記載の装置。
【請求項７】
前記特徴量は、前記音声データの音圧レベル、および該音圧データの周波数成分のうち所定の周波数未満の周波数成分の比率であり、
前記判定手段は、前記閾値判定として、前記音声データの前記音圧レベルが第１閾値以上である場合、かつ、該音声データの前記比率が第２閾値未満である場合、該音声データが前記会議音声のデータであると判定する請求項４に記載の装置。
【請求項８】
前記変換手段は、前記会議外音声のデータを減衰させ、または、該会議外音声データにホワイトノイズを重ねることによって前記非音声音データに変換する請求項２または３に記載の装置。
【請求項９】
音を集音する集音ステップと、
集音した音の音データを、発話者ごとの音声データに分離する分離ステップと、
前記音声データの特徴量に基づいて、該音声データが会議音声のデータであるか会議外音声のデータであるかを判定する判定ステップと、
を有する方法。
【請求項１０】
コンピュータを、
集音手段により集音された音の音データを、発話者ごとの音声データに分離する分離手段と、
前記音声データの特徴量に基づいて、該音声データが会議音声のデータであるか会議外音声のデータであるかを判定する判定手段と、
として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、装置、方法およびプログラムに関する。
【背景技術】
【０００２】
近年、音声会議において、ノイズキャンセラまたはノイズサプレッサにより周囲のノイズを低減させて会議音声のみを相手先に送話することによって、送話する音声の音質を向上させ、音声会議を行いやすい環境を提供する音声会議装置が提供されてきている。
【０００３】
上述のようなノイズを低減する技術として、周囲の雑音を集音するマイクロフォンから信号処理回路までの配線に重畳するノイズを小さくして、効果的な雑音除去を行うことができるノイズキャンセラが提案されている（特許文献１参照）。
【発明の概要】
【発明が解決しようとする課題】
【０００４】
一方、近年では会議環境がオープンスペース化され、閉じられていない会議スペース等で会議が行われることが多くなり、周囲のノイズとして、定常的に発生しているノイズの他に、会議スペース以外の場所からの話し声が集音されて相手先に送話される。すなわち、会議スペースに設置された音声会議装置では、参加者の音声である会議音声以外の会議外音声までもが集音され、相手先に送話されてしまい、その会議外音声は、意味を持つノイズとなるので、聞こえるべき会議音声が聞き取りにくくなってしまう。上述の特許文献１に記載された技術では、人間の話し声（音声）ではない定常的に発生しているノイズを区別し、低減することは可能であるが、会議の参加者ではない者が発する会議外音声を区別することはできないという問題点があった。
【課題を解決するための手段】
【０００５】
上述した課題を解決し、目的を達成するために、本発明は、音を集音する集音手段と、前記集音手段により集音された音の音データを、発話者ごとの音声データに分離する分離手段と、前記音声データの特徴量に基づいて、該音声データが会議音声のデータであるか会議外音声のデータであるかを判定する判定手段と、を備えたことを特徴とする。
【発明の効果】
【０００６】
本発明によれば、ノイズとしての会議外音声を区別することができる。
【図面の簡単な説明】
【０００７】
【図１】図１は、実施の形態に係る音声会議システムの全体構成の一例を示す図である。
【図２】図２は、音声会議中の会議スペースに会議外音声が入り込む状態の一例を示す図である。
【図３】図３は、マイクロフォンに集音される会議音声およびノイズの種類を説明する図である。
【図４】図４は、実施の形態に係る音声会議装置のハードウェア構成の一例を示す図である。
【図５】図５は、実施の形態に係る音声会議装置の音声処理部のブロック構成の一例を示す図である。
【図６】図６は、実施の形態に係る音声会議装置の音声処理動作の一例を示すフローチャートである。
【図７】図７は、音声会議装置の音声処理動作によってノイズが低減されることを説明する図である。
【発明を実施するための形態】
【０００８】
（音声会議システムの全体構成）
図１は、実施の形態に係る音声会議システムの全体構成の一例を示す図である。図１を参照しながら、本実施の形態に係る音声会議システム１の全体構成について説明する。
【０００９】
図１に示すように、本実施の形態に係る音声会議システム１は、音声会議装置１０ａと音声会議装置１０ｂとが、通信ネットワーク２を介して接続されている。
【００１０】
音声会議装置１０ａ、１０ｂは、互いに別の会議スペースに設置されており、各会議スペースにおける会議の参加者の音声である会議音声を集音して、通信ネットワーク２を介して互いに音データとして送受信する装置である。音声会議装置１０ａは、図１に示すように、実際には、集音する音としては会議音声のみではなく、周囲のノイズである会議の参加者以外の音声である会議外音声、および、定常的または非定常的なノイズ等を集音することになる。なお、音声会議装置１０ａ、１０ｂを、区別なく呼称する場合、または、総称する場合、単に「音声会議装置１０」というものとする。また、図１では、２台の音声会議装置１０が通信ネットワーク２を介して接続された構成を示しているが、これに限定されるものではなく、３台以上の音声会議装置１０が通信ネットワーク２を介して互いに接続されるものとしてもよい。
【００１１】
（音声会議装置により集音される音について）
図２は、音声会議中の会議スペースに会議外音声が入り込む状態の一例を示す図である。図３は、マイクロフォンに集音される会議音声およびノイズの種類を説明する図である。図２および３を参照しながら、会議スペースでの音声会議中に音声会議装置１０により集音される音について説明する。
【００１２】
図２では、複数の会議スペースが配置された会議空間の例が示されている。図２の例では、４つの会議スペース３０ａ〜３０ｄが配設されており、そのうち会議スペース３０ａ、３０ｂと、会議スペース３０ｃ、３０ｄとは、通路２０を挟んで配設されている。以下、図２に示すように、会議スペース３０ａにおいて音声会議装置１０を利用した音声会議が行われているものとして説明する。
【００１３】
図２および３に示すように、会議スペース３０ａは、壁４０ａで会議スペース３０ｂと仕切られており、壁４０ｂで通路２０と仕切られている。しかし、壁４０ａ、４０ｂが遮音性の低い素材で完全に人が発する音声を遮ることができない場合、または、壁４０ａ、４０ｂにより天井まで仕切られておらず、会議スペース３０ａが会議スペース３０ａまたは通路２０と連通している場合、以下の問題がある。すなわち、図２、３に示すように、会議スペース３０ｂに複数の人が存在し、他の会議が行われている場合等に、その話し声である音声が壁４０ａを通過して、または会議スペース３０ａ、３０ｂの連通部分を通して、会議スペース３０ａに入り込む。また、図２、３に示すように、通路２０に人が存在し、複数人で話をしている場合、または、会議スペース３０ａから離れた参加者が他の用件の対応のため携帯電話で話をしている場合等に、その話し声である音声が壁４０ｂを通過して、または会議スペース３０ａと通路２０との連通部分を通して、会議スペース３０ａに入り込む。
【００１４】
上述のように、壁４０ａを介して会議スペース３０ａに入り込んだ音声は、図３に示すように、会議スペース３０ａで行われている会議に参加している参加者６０ａ〜６０ｄが発する会議音声７０と関係のない会議外音声（以下、会議外音声７２と称する）である。また、同様に、壁４０ｂを介して会議スペース３０ａに入り込んだ音声は、図３に示すように、会議音声７０と関係のない会議外音声（以下、会議外音声７３と称する）である。これらの会議外音声７２、７３は、会議スペース３０ａで行われている会議では必要のない音声であり、ノイズとして作用する。また、ノイズとしては、会議外音声７２、７３のような音声の他に、定常的または非定常的に発生するノイズがある。定常的または非定常的に発生するノイズとしては、例えば、エアコンの音、パソコン等の機器のファンの音、会議スペース３０ａに設置された窓等から入り込む乗り物の走行音、またはパソコン等の操作音等が挙げられ、図３ではノイズ７１として示している。
【００１５】
また、会議スペース３０ａに設置された音声会議装置１０のマイクロフォン１１３（後述の図４参照）は、図３の点線で示す集音可能な一定の範囲（以下、集音範囲５０と称する）がある。この集音範囲５０内で発生した音は、すべてマイクロフォン１１３によって集音されることになる。図３に示すように、参加者６０ａ〜６０ｄが発する会議音声７０は、集音範囲５０に含まれるのでマイクロフォン１１３により集音される。また、ノイズ７１は、その発生源が集音範囲５０に含まれる場合、マイクロフォン１１３により集音される。また、会議スペース３０ｂおよび通路２０（図２参照）でそれぞれ発生した会議外音声７２、７３の発生源が集音範囲５０に含まれる場合、会議外音声７２、７３は、マイクロフォン１１３により集音されることになる。
【００１６】
図３に示す例では、上述のように、音声会議装置１０のマイクロフォン１１３によって、会議音声７０、ノイズ７１および会議外音声７２、７３が集音される状態を示している。このうち、マイクロフォン１１３により集音されたノイズ７１は、会議音声７０と共に音声会議の相手先に送話されると、会議音声７０を聞き取りにくくする。また、マイクロフォン１１３により集音された会議外音声７２、７３は、会議音声７０と共に音声会議の相手先に送話されると、意味を持つノイズとして作用するので、聞こえるべき会議音声７０がより聞き取りにくくする。したがって、ノイズ７１および会議外音声７２、７３は、会議音声７０を聞き取りにくくするノイズとして作用するので、適切に低減させる必要がある。以下、これらのノイズ、特に会議外音声７２、７３を低減する本実施の形態に係る音声会議装置１０の構成および動作について説明する。
【００１７】
なお、図３に示す集音範囲５０は、マイクロフォン１１３により集音される目安の範囲を示すものである。したがって、音の発生源が集音範囲５０に含まれていないと集音されないという趣旨ではなく、非常に大きな音等は、発生源が集音範囲５０外であってもマイクロフォン１１３により集音される可能性がある。
【００１８】
（音声会議装置のハードウェア構成）
図４は、実施の形態に係る音声会議装置のハードウェア構成の一例を示す図である。図４を参照しながら、本実施の形態に係る音声会議装置１０のハードウェア構成について説明する。なお、図４に示す音声会議装置１０の構成は、特に、音声および画像を送受信するビデオ会議装置を例にして示した構成である。
【００１９】
図４に示すように、本実施の形態に係る音声会議装置１０は、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）１０１と、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）１０２と、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）１０３と、記憶部１０４と、操作部１０５と、ネットワークＩ／Ｆ１０６と、画像Ｉ／Ｆ１０７と、音声Ｉ／Ｆ１０８と、音声処理部１０９と、ディスプレイＩ／Ｆ１１０と、カメラ１１２と、マイクロフォン１１３（集音手段）と、スピーカ１１４と、を備えている。このうち、ＣＰＵ１０１、ＲＯＭ１０２、ＲＡＭ１０３、記憶部１０４、操作部１０５、ネットワークＩ／Ｆ１０６、画像Ｉ／Ｆ１０７、音声Ｉ／Ｆ１０８、音声処理部１０９、およびディスプレイＩ／Ｆ１１０は、互いに通信可能となるようにバス１１１により接続されている。
【００２０】
ＣＰＵ１０１は、音声会議装置１０全体の動作を制御する装置である。ＲＯＭ１０２は、音声会議装置１０用のプログラムを記憶する不揮発性の記憶装置である。ＲＡＭ１０３は、ＣＰＵ１０１のワークエリアとして使用される揮発性の記憶装置である。
【００２１】
記憶部１０４は、画像データおよび音データ等のコンテンツデータ、ならびに各種アプリケーションプログラムのソフトウェア等の各種データを記憶している外部記憶装置である。記憶部１０４は、例えば、ＨＤＤ（Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）、またはフラッシュメモリを用いたＳＳＤ（Ｓｏｌｉｄ  Ｓｔａｔｅ  Ｄｒｉｖｅ）等である。
【００２２】
操作部１０５は、コンテンツデータ等の各種データの送信先となる他の音声会議装置１０の選択操作等を行う操作機器である。操作部１０５は、例えば、マウス、テンキー、キーボードまたはタッチデバイス等である。
【００２３】
ネットワークＩ／Ｆ１０６は、通信ネットワーク２を利用してコンテンツデータ等の各種データを他の音声会議装置１０に通信するためのインターフェースである。画像Ｉ／Ｆ１０７は、ＣＰＵ１０１の制御に従って、音声会議の参加者等の被写体を撮像して画像データを得るカメラ１１２から画像データを受信するためのインターフェースである。音声Ｉ／Ｆ１０８は、ＣＰＵ１０１の制御に従って、音を入力するマイクロフォン１１３および音を出力するスピーカ１１４との間で音データの入出力を処理するインターフェースである。
【００２４】
音声処理部１０９は、マイクロフォン１１３により集音され、音声Ｉ／Ｆ１０８により受信した音データに対して、ノイズを低減する音声処理をする処理部である。音声処理部１０９の音声処理動作の詳細については、後述する。
【００２５】
ディスプレイＩ／Ｆ１１０は、ＣＰＵ１０１の制御に従って、外付けのディスプレイ１２０または内蔵ディスプレイに画像データを送信するためのインターフェースである。
【００２６】
カメラ１１２は、被写体からの光を、光学系を通して、固体撮像素子に撮像させて電気信号に変換する撮像装置である。固体撮像素子としては、例えば、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）またはＣＣＤ（Ｃｈａｒｇｅ  Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）等が用いられる。
【００２７】
マイクロフォン１１３は、周囲の音を集音してアナログ形式の音データを音声Ｉ／Ｆ１０８に送信する集音機器である。スピーカ１１４は、外部機器からネットワークＩ／Ｆ１０６等を介して入力された音データを、さらに音声Ｉ／Ｆ１０８を介して、音として出力する機器である。
【００２８】
ディスプレイ１２０は、各種アプリケーションの画像等、または、音声会議の一例であるビデオ会議が行われる場合には、相手先の被写体の画像を表示する表示装置である。ディスプレイ１２０は、例えば、ＣＲＴ（Ｃａｔｈｏｄｅ  Ｒａｙ  Ｔｕｂｅ）ディスプレイ、ＬＣＤ（Ｌｉｑｕｉｄ  Ｃｒｙｓｔａｌ  Ｄｉｓｐｌａｙ：液晶ディスプレイ）、または有機ＥＬ（Ｏｒｇａｎｉｃ  Ｅｌｅｃｔｒｏ−Ｌｕｍｉｎｅｓｃｅｎｃｅ）ディスプレイ等である。ディスプレイ１２０は、ケーブル１２１によってディスプレイＩ／Ｆ１１０に接続される。ケーブル１２１は、アナログＲＧＢ（ＶＧＡ）信号用のケーブル、コンポーネントビデオ用のケーブル、または、ＨＤＭＩ（登録商標）（Ｈｉｇｈ−Ｄｅｆｉｎｉｔｉｏｎ  Ｍｕｌｔｉｍｅｄｉａ  Ｉｎｔｅｒｆａｃｅ）もしくはＤＶＩ（Ｄｉｇｉｔａｌ  Ｖｉｄｅｏ  Ｉｎｔｅｒａｃｔｉｖｅ）信号用のケーブル等である。
【００２９】
音声会議装置１０は、以上のようなハードウェア構成となっている。例えば、上述の図１に示す音声会議システム１においてビデオ会議が行われる場合、以下のような動作で、自分側（音声会議装置１０ａ）から相手先（音声会議装置１０ｂ）に音データおよび画像データが送信される。まず、画像データについては、音声会議装置１０ａのカメラ１１２により撮像された画像データが、各種の画像処理を実行された後に、ネットワークＩ／Ｆ１０６および通信ネットワーク２を介して、相手先である音声会議装置１０ｂに送信される。音声会議装置１０ｂは、ネットワークＩ／Ｆ１０６を介して画像データを受信し、ディスプレイＩ／Ｆ１１０を介して、ディスプレイ１２０に画像データに基づく画像を表示させる。音声会議装置１０ｂのカメラ１１２により撮像された画像データに基づく画像が、音声会議装置１０ａのディスプレイ１２０に表示される動作も同様である。
【００３０】
次に、音データについては、音声会議装置１０ａのマイクロフォン１１３により周囲の音を集音して生成された音データが、音声Ｉ／Ｆ１０８を介して音声処理部１０９に送られる。音データは、音声処理部１０９によって、後述するノイズを低減する音声処理が実行され、ネットワークＩ／Ｆ１０６および通信ネットワーク２を介して、相手先である音声会議装置１０ｂに送信される。音声会議装置１０ｂは、ネットワークＩ／Ｆ１０６を介して音データを受信し、音声Ｉ／Ｆ１０８を介して、スピーカ１１４に音（後述する合成音声）として出力させる。音声会議装置１０ｂのマイクロフォン１１３により集音された音データが、音声会議装置１０ａのスピーカ１１４から出力される動作も同様である。
【００３１】
なお、音声会議システム１において音声会議の一例であるビデオ会議が行われる場合の動作の概要を説明したが、行われる会議がビデオ会議であることに限定されるものではない。すなわち、画像および音声を利用するビデオ会議ではなく、音声のみを利用する音声会議であってもよい。この場合においては、音声会議装置１０は、カメラ１１２を備えている必要はなく、ディスプレイ１２０が接続されている必要もない。また、上述の動作は、音声会議システムに限定されず、電話、ＩＰ（Ｉｎｅｔｅｒｎｅｔ  Ｐｒｏｔｏｃｏｌ）電話、または録音システム等のように、外部からの音声が支障となるようなシステムに適用することができる。
【００３２】
（音声処理部のブロック構成）
図５は、実施の形態に係る音声会議装置の音声処理部のブロック構成の一例を示す図である。図５を参照しながら、音声処理部１０９の機能ブロックの構成について説明する。
【００３３】
図５に示すように、音声会議装置１０の音声処理部１０９は、ノイズ低減部１０９１と、分離部１０９２（分離手段）と、判定部１０９３（判定手段）と、音声変換部１０９４（変換手段）と、ミキシング部１０９５（合成手段）とを備えている。
【００３４】
ノイズ低減部１０９１は、マイクロフォン１１３により集音され、音声Ｉ／Ｆ１０８により受信された音データに対して、上述の図３に示したように、定常的または非定常的に発生するノイズであるノイズ７１を減衰（低減）させる処理部である。なお、マイクロフォン１１３により集音される音は、ノイズ７１の他、図３で上述したように、会議音声７０および会議外音声７２、７３等である。
【００３５】
分離部１０９２は、ノイズ低減部１０９１によりノイズ７１が低減された音データに対して、例えば、独立成分分析の方法を用いて、音データに含まれる発話者ごとの音声データに分離する処理部である。ここで、発話者としては、上述の図３の例では、音声会議に参加して会議音声７０を発する参加者６０ａ〜６０ｄ、ならびに、会議スペース３０ａでの音声会議に参加していない会議外音声７２を発する会議スペース３０ｂに存在する者、および会議外音声７３を発する通路２０に存在する者が挙げられる。
【００３６】
判定部１０９３は、分離部１０９２により発話者ごとに分離された音声データを、会議音声のデータであるか会議外音声のデータであるかを判定する処理部である。判定部１０９３による判定動作の詳細については、後述する。
【００３７】
音声変換部１０９４は、判定部１０９３により会議外音声と判定された音声データを減衰、または、音声として聞き取れない音に変換する処理部である。
【００３８】
ミキシング部１０９５は、判定部１０９３により会議音声と判定された音声データと、音声変換部１０９４により変換された音データとを合成し、合成音声のデータを生成する処理部である。
【００３９】
なお、ノイズ低減部１０９１、分離部１０９２、判定部１０９３、音声変換部１０９４およびミキシング部１０９５の一部または全部は、ソフトウェアであるプログラムではなく、ハードウェア回路によって実現されてもよい。また、図５に示した音声処理部１０９の機能ブロック、すなわち、ノイズ低減部１０９１、分離部１０９２、判定部１０９３、音声変換部１０９４およびミキシング部１０９５は、機能を概念的に示したものであって、このような構成に限定されるものではない。
【００４０】
（ノイズを低減する音声処理）
図６は、実施の形態に係る音声会議装置の音声処理動作の一例を示すフローチャートである。図７は、音声会議装置の音声処理動作によってノイズが低減されることを説明する図である。図６および７を参照しながら、本実施の形態に係る音声会議装置１０の音声処理部１０９におけるノイズを低減する音声処理の動作について説明する。なお、以下の音声処理の説明においては、上述の図２および３に示すように、会議スペース３０ａでは音声会議装置１０が設置され、音声会議が行われている状態を例に説明する。さらに、会議スペース３０ｂにおいて別の会議が行われ、かつ、通路２０に人が存在して話をしている状態であるものとする。また、会議スペース３０ａに設置された音声会議装置１０は、図１に示すように、通信ネットワーク２を介して、別の場所に設置された別の音声会議装置１０と通信可能なように設置されているものとする。
【００４１】
＜ステップＳ１１＞
音声会議が行われている会議スペース３０ａにおいて、音声会議装置１０のマイクロフォン１１３は、参加者６０ａ〜６０ｄが発する会議音声７０を集音する。また、マイクロフォン１１３は、会議スペース３０ａの隣の会議スペース３０ｂで行われている別の会議における話し声である会議外音声７２を、壁４０ａ（図３参照）越しに集音する。また、マイクロフォン１１３は、通路２０に存在する人が発する音声である会議外音声７３を、壁４０ｂ（図３参照）越しに集音する。さらに、マイクロフォン１１３は、音声のノイズとしての会議外音声７２、７３以外に、定常的または非定常的に発生するノイズであるノイズ７１を集音する。マイクロフォン１１３は、集音した音のデータを、音声Ｉ／Ｆ１０８を介して、音声処理部１０９に送信する。そして、ステップＳ１２へ進む。
【００４２】
＜ステップＳ１２＞
音声処理部１０９のノイズ低減部１０９１は、マイクロフォン１１３から送信された音データのうち、ノイズ７１の成分を減衰（低減）させる。ノイズ低減部１０９１は、ノイズ７１を減衰（低減）させた音データを分離部１０９２に渡す。そして、ステップＳ１３へ進む。
【００４３】
このノイズ低減部１０９１の処理により、図７に示すノイズ７１ａ（点線）のように、マイクロフォン１１３で集音された音データのうち、定常的または非定常的に発生するノイズを低減することができる。
【００４４】
＜ステップＳ１３＞
音声処理部１０９の分離部１０９２は、ノイズ低減部１０９１から受け取った音データに対して、例えば、独立成分分析の方法を用いて、音データに含まれる発話者ごとの音声データに分離する。分離部１０９２は、分離した発話者ごとの音声データを判定部１０９３に渡す。そして、ステップＳ１４へ進む。
【００４５】
＜ステップＳ１４＞
音声処理部１０９の判定部１０９３は、分離部１０９２から受け取った発話者ごとの音声データを、会議音声のデータであるか会議外音声のデータであるかを判定する。そのために、判定部１０９３は、まず、分離部１０９２から受け取った発話者ごとの音声データの特徴量の一例である音圧レベルが、所定の第１閾値以上であるか否かを判定する。音圧レベルが第１閾値以上である場合（ステップＳ１４：Ｙｅｓ）、ステップＳ１５へ進み、音圧レベルが第１閾値未満である場合（ステップＳ１４：Ｎｏ）、ステップＳ１７へ進む。すなわち、判定部１０９３は、音声会議装置１０の仕様に基づいた集音範囲により第１閾値を設定し、音声データの音圧レベルがこの第１閾値未満である場合、その音声データが集音範囲外から発せられた会議外音声のものであると判定する。
【００４６】
なお、判定部１０９３が、音声データを会議音声のデータであるか会議外音声のデータであるかを判定する方法としては、上述の方法に限定されるものではない。例えば、判定部１０９３は、音声データのうち最も音圧レベルの高い音声データを会議音声のものであるとして、その音声データの音圧レベルから所定量以上低い音圧レベルである音声データを、会議外音声のものであると判定してもよい。
【００４７】
＜ステップＳ１５＞
判定部１０９３は、さらに、分離部１０９２から受け取った発話者ごとの音声データの周波数特性に対して判定を行う。具体的には、判定部１０９３は、受け取った音声データをＦＦＴ（Ｆａｓｔ  Ｆｏｕｒｉｅｒ  Ｔｒａｎｓｆｏｒｍ）によって周波数成分に変換する。そして、判定部１０９３は、高い周波数成分を有する音声は壁等の遮蔽物により減衰することを利用し、判定する音声データの特徴量の一例である周波数成分のうち低周波数成分の比率が第２閾値以上であるか否かを判定する。このとき、例えば、音声データの周波数成分のうち所定の周波数未満の周波数成分を「低周波数成分」とすればよい。音声データの低周波数成分の比率が第２閾値以上である場合（ステップＳ１５：Ｙｅｓ）、ステップＳ１７へ進み、低周波数成分の比率が第２閾値未満である場合（ステップＳ１５：Ｎｏ）、ステップＳ１６へ進む。すなわち、判定部１０９３は、音声データの低周波数成分の比率が第２閾値以上である場合、その音声データは、壁越しの音声、すなわち会議外音声のものであると判定する。
【００４８】
すなわち、判定部１０９３は、ステップＳ１４およびＳ１５において、分離部１０９２から受け取った音声データを、その特徴量に基づいて会議音声のデータであるか会議外音声のデータであるかを判定している。具体的には、判定部１０９３は、音声データの音圧レベル、および音声データの周波数成分のうち低周波数成分の比率を特徴量とし、その特徴量に対して閾値判定を行うことにより、音声データが会議音声のデータであるか会議外音声のデータであるかを判定している。このように、判定部１０９３は、音声データが会議音声のデータであるのか、会議外音声のデータであるのかを区別することができるので、必要に応じて会議音声のみの音データにしたり、会議外音声のデータを低減処理したりすることが可能となる。
【００４９】
＜ステップＳ１６＞
判定部１０９３は、分離部１０９２により分離された音声データのうち、音圧レベルが第１閾値以上であり、かつ、周波数成分のうち低周波数成分の比率が第２閾値未満である音声データを、会議音声の音声データであると判定する。判定部１０９３は、会議音声と判定した音声データをミキシング部１０９５に渡す。そして、ステップＳ１９へ進む。
【００５０】
＜ステップＳ１７＞
判定部１０９３は、分離部１０９２により分離された音声データのうち、音圧レベルが第１閾値未満、または、周波数成分のうち低周波数成分の比率が第２閾値以上である音声データを、会議外音声の音声データであると判定する。判定部１０９３は、会議外音声と判定した音声データを音声変換部１０９４へ渡す。そして、ステップＳ１８へ進む。
【００５１】
＜ステップＳ１８＞
音声処理部１０９の音声変換部１０９４は、判定部１０９３から受け取った会議外音声の音声データに対して、音圧レベルを減衰させた音に音声変換、または、音声として聞き取れないような音データに音声変換する。ここで、音圧レベルを減衰した音データ、または音声として聞き取れないような音データに音声変換されたデータをまとめて「非音声音データ」というものとする。音声変換部１０９４は、非音声音データを生成する方法として、例えば、会議外音声の音声データにホワイトノイズを重ねることによって音声として聞き取りにくくするという方法がある。音声変換部１０９４は、生成した非音声音データをミキシング部１０９５に渡す。そして、ステップＳ１９へ進む。
【００５２】
判定部１０９３および音声変換部１０９４は、分離部１０９２により分離された音声データごとに、上述のステップＳ１４〜Ｓ１８の処理を実行する。この判定部１０９３および音声変換部１０９４の処理により、図７に示す会議外音声７２ａ、７３ａ（点線）のように、マイクロフォン１１３で集音された音データのうち、音声会議とは無関係の音声であって、会議音声に対してノイズとなる会議外音声を低減することができる。
【００５３】
＜ステップＳ１９＞
音声処理部１０９のミキシング部１０９５は、判定部１０９３から受け取った会議音声の音声データと、音声変換部１０９４から受け取った非音声音データとを合成し、合成音声の音データを生成する。ミキシング部１０９５は、合成音声の音データを、ネットワークＩ／Ｆ１０６に送信する。そして、ステップＳ２０へ進む。
【００５４】
＜ステップＳ２０＞
ネットワークＩ／Ｆ１０６は、ミキシング部１０９５から受信した合成音声の音データを、通信ネットワーク２を介して、音声会議の相手先である別の音声会議装置１０に送信（送話）する。
【００５５】
以上のような動作によって、集音された音データに対してノイズを低減する音声処理が実行される。
【００５６】
なお、ステップＳ１４、Ｓ１５の処理について、ステップＳ１４の処理後にステップＳ１５の処理を実行することを規定するものではなく、いずれの処理を先に実行するものとしてもよい。また、ステップＳ１９において、ミキシング部１０９５により会議音声の音声データが、非音声音データと合成されているが、必ずしも、非音声音データと合成する必要はなく、会議音声の音声データのみを送話するものとしてもよい。ただし、会議音声の音声データと、音声として聞き取れない程度の非音声音データとを合成することによって、音声会議としての臨場感を醸し出すことができる。
【００５７】
以上の動作のように、本実施の形態に係る音声会議装置１０は、マイクロフォン１１３により集音した音データに対して、分離部１０９２により発話者ごとの音声データに分離し、判定部１０９３により、分離した音声データの特徴量に対して閾値判定を行うものとしている。さらに、閾値判定の結果、会議外音声と判定された音声データに対して、音声変換部１０９４により、音声として聞き取れない程度の非音声音データに変換するものとしている。これによって、マイクロフォン１１３に集音される音データのうち、会議とは無関係の会議外音声を効果的に低減することができ、会議音声を聞き取りやすくすることが可能となり、音声会議の質を向上することができる。
【００５８】
また、マイクロフォン１１３により集音され、判定部１０９３により分離された音声データの特徴量としての音圧レベルに対して、閾値判定を行うことによって、分離された音声データが集音範囲外から発せられた会議外音声であるか否かを判定するものとしている。これによって、会議の参加者が存在する範囲と擬制できる集音範囲の外部の音声に対して精度よく会議外音声と判定することができ、このノイズとしての会議外音声を低減することができる。
【００５９】
また、マイクロフォン１１３により集音され、判定部１０９３により分離された音声データの特徴としての周波数成分における低周波数成分の比率に対して、閾値判定を行うものとしている。そして、分離された音声データが、音声会議が行われている会議スペース以外のスペース（図２に示す通路２０および会議スペース３０ｂ等）から発せられた会議外音声であるか否かを判定するものとしている。これによって、音声会議が行われている会議スペース以外のスペースから発せられた音声に対して精度よく会議外音声と判定することができ、このノイズとしての会議外音声を低減することができる。
【００６０】
本実施の形態は、次に示される捉え方が可能である。すなわち、本実施の形態に係る音声会議装置１０は、音を集音するマイクロフォン１１３と、マイクロフォン１１３により集音された音の音データを、発話者ごとの音声データに分離する分離部１０９２と、音声データの特徴量に基づいて、その音声データが会議音声のデータであるか会議外音声のデータであるかを判定する判定部１０９３と、を備える。これにより、会議音声か会議外音声かの区別をつけることができる。
【００６１】
また、本実施の形態に係る音声会議装置１０は、判定部１０９３により会議外音声のデータであると判定された音声データを非音声音データに音声変換する音声変換部１０９４を、さらに備える。これにより、会議外音声のデータを効果的に低減させることができる。
【００６２】
また、本実施の形態に係る音声会議装置１０は、判定部１０９３により会議音声のデータであると判定された音声データと、音声変換部１０９４により音声変換された非音声音データとを合成するミキシング部１０９５を、さらに備える。これにより、会議の臨場感等を生じさせることができる。
【００６３】
また、本実施の形態に係る音声会議装置１０は、判定部１０９３が、特徴量に対する閾値判定を行うことにより、音声データが会議音声のデータであるか会議外音声のデータであるかを判定する。これにより、会議外音声のデータを的確に区別することができる。
【００６４】
また、本実施の形態に係る音声会議装置１０は、特徴量が、音声データの音圧レベルであり、判定部１０９３が、閾値判定として、音声データの音圧レベルが第１閾値未満である場合、その音声データが会議外音声のデータであると判定する。これにより、会議外音声のデータを的確に区別することができる。
【００６５】
また、本実施の形態に係る音声会議装置１０は、特徴量が、音声データの周波数成分のうち所定の周波数未満の周波数成分の比率であり、判定部１０９３が、閾値判定として、音声データの周波数成分のうち所定の周波数未満の周波数成分の比率が第２閾値以上である場合、その音声データが会議外音声のデータであると判定する。これにより、会議外音声のデータを的確に区別することができる。
【００６６】
また、本実施の形態に係る音声会議装置１０は、特徴量が、音声データの音圧レベル、およびその音圧データの周波数成分のうち所定の周波数未満の周波数成分の比率であり、判定部１０９３が、閾値判定として、音声データの音圧レベルが第１閾値以上である場合、かつ、その音声データの周波数成分のうち所定の周波数未満の周波数成分の比率が第２閾値未満である場合、その音声データが会議音声のデータであると判定する。これにより、会議外音声のデータを的確に区別することができる。
【００６７】
また、本実施の形態に係る音声会議装置１０は、音声変換部１０９４が、会議外音声のデータを減衰させ、または、その会議外音声データにホワイトノイズを重ねることによって非音声音データに音声変換する。これにより、会議の臨場感等を生じさせることができる。
【００６８】
また、本実施の形態に係る音声会議方法は、音を集音する集音ステップと、集音した音の音データを、発話者ごとの音声データに分離する分離ステップと、音声データの特徴量に基づいて、その音声データが会議音声のデータであるか会議外音声のデータであるかを判定する判定ステップと、会議外音声のデータであると判定した音声データを非音声音データに音声変換する変換ステップと、を有する。
【００６９】
また、本実施の形態に係るプログラムは、コンピュータを、マイクロフォン１１３により集音された音の音データを、発話者ごとの音声データに分離する分離部１０９２と、音声データの特徴量に基づいて、その音声データが会議音声のデータであるか会議外音声のデータであるかを判定する判定部１０９３と、判定部１０９３により会議外音声のデータであると判定された音声データを非音声音データに音声変換する音声変換部１０９４と、として機能させる。
【符号の説明】
【００７０】
１  音声会議システム
２  通信ネットワーク
１０、１０ａ、１０ｂ  音声会議装置
２０  通路
３０ａ〜３０ｄ  会議スペース
４０ａ、４０ｂ  壁
５０  集音範囲
６０ａ〜６０ｄ  参加者
７０  会議音声
７１、７１ａ  ノイズ
７２、７２ａ、７３、７３ａ  会議外音声
１０１  ＣＰＵ
１０２  ＲＯＭ
１０３  ＲＡＭ
１０４  記憶部
１０５  操作部
１０６  ネットワークＩ／Ｆ
１０７  画像Ｉ／Ｆ
１０８  音声Ｉ／Ｆ
１０９  音声処理部
１１０  ディスプレイＩ／Ｆ
１１１  バス
１１２  カメラ
１１３  マイクロフォン
１１４  スピーカ
１２０  ディスプレイ
１２１  ケーブル
１０９１  ノイズ低減部
１０９２  分離部
１０９３  判定部
１０９４  音声変換部
１０９５  ミキシング部
【先行技術文献】
【特許文献】
【００７１】
【特許文献１】特開２００８−３５３５６号公報
【図１】
2015219316.tif 000003
【図２】
2015219316.tif 000004
【図３】
2015219316.tif 000005
【図４】
2015219316.tif 000006
【図５】
2015219316.tif 000007
【図６】
2015219316.tif 000008
【図７】
2015219316.tif 000009