(57)【要約】【課題】異なる地点間で対話をする者同士の声が聞こえやすく、円滑なコミュニケーションを図ること。【解決手段】異なる地点Ｘ、Ｙの間においてコミュニケーションをとっている対話者Ａ、Ｂの位置を判定し、その判定結果に基づいて、当該位置の音声に対するマイクロフォン１０４Ｃ、２０４Ａの感度を変更する動作、又は当該位置に対してスピーカー１０５Ｃ、２０５Ａから出力される音声を大きくする動作の少なくとも何れかの動作を実行する。【選択図】図３
2009060220.tif 000002
【特許請求の範囲】
【請求項１】
ネットワークを介して異なる地点間のコミュニケーションを可能とするコミュニケーションシステムであって、
話者を撮影するカメラと、
当該カメラにより撮影した画像を映し出すディスプレイと、
話者の音声を音声信号に変換するマイクロフォンと、
当該マイクロフォンにより変換された音声信号を外部に出力するスピーカーと、
コミュニケーションシステム内の動作を制御する制御部と、を有し、
前記制御部は、異なる地点間においてコミュニケーションをとっている対話者の位置を判定し、その判定結果に基づいて、前記位置の音声に対する前記マイクロフォンの感度を変更する動作、又は前記位置に対して前記スピーカーから出力される音声を大きくする動作の少なくとも何れかの動作を実行することを特徴とするコミュニケーションシステム。
【請求項２】
前記制御部は、話者の顔の方向に基づき前記ディスプレイ上の対話先領域を検出し、各々の前記地点において検出された前記対話先領域を照合されることにより、前記位置を判定する請求項１に記載のコミュニケーションシステム。
【請求項３】
前記制御部は、話者の視線の方向に基づき前記ディスプレイ上の対話先領域を検出し、各々の前記地点において検出された前記対話先領域を照合されることにより、前記位置を判定する請求項１に記載のコミュニケーションシステム。
【請求項４】
前記制御部は、話者から発せられる音声の方向に基づき前記ディスプレイ上の対話先領域を検出し、各々の前記地点において検出された前記対話先領域を照合されることにより、前記位置を判定する請求項１に記載のコミュニケーションシステム。
【請求項５】
前記制御部は、話者が選択した前記ディスプレイ上の選択箇所に基づき、前記位置を判定する請求項１に記載のコミュニケーションシステム。
【請求項６】
前記制御部は、前記マイクロフォンに入力された対話相手の名前に関する音声情報から前記対話相手の顔情報を抽出し、その抽出した顔情報と前記カメラにより撮影した画像を照合させて前記位置を判定する請求項１に記載のコミュニケーションシステム。
【請求項７】
話者を撮影するカメラと、
当該カメラにより撮影した画像を映し出すディスプレイと、
話者の音声を音声信号に変換するマイクロフォンと、
当該マイクロフォンにより変換された音声信号を外部に出力するスピーカーと、
を有するコミュニケーションシステムに対し、コンピュータを利用して異なる地点間のコミュニケーションを可能とするコミュニケーションプログラムであって、
異なる地点間においてコミュニケーションをとっている対話者の位置を判定する判定工程と、
当該判定工程により判定した判定結果に基づいて、前記位置の音声に対する前記マイクロフォンの感度を変更する動作、又は前記位置に対して前記スピーカーから出力される音声を大きくする動作の少なくとも何れかの動作を実行する動作工程と、
をコンピュータに実行させることを特徴とするコミュニケーションプログラム。
【請求項８】
前記判定工程は、話者の顔の方向に基づき前記ディスプレイ上の対話先領域を検出し、各々の前記地点において検出された前記対話先領域を照合されることにより、前記位置を判定する請求項７に記載のコミュニケーションプログラム。
【請求項９】
前記判定工程は、話者の視線の方向に基づき前記ディスプレイ上の対話先領域を検出し、各々の前記地点において検出された前記対話先領域を照合されることにより、前記位置を判定する請求項７に記載のコミュニケーションプログラム。
【請求項１０】
前記判定工程は、話者から発せられる音声の方向に基づき前記ディスプレイ上の対話先領域を検出し、各々の前記地点において検出された前記対話先領域を照合されることにより、前記位置を判定する請求項７に記載のコミュニケーションプログラム。
【請求項１１】
前記判定工程は、話者が選択した前記ディスプレイ上の選択箇所に基づき、前記位置を判定する請求項７に記載のコミュニケーションプログラム。
【請求項１２】
前記判定工程は、前記マイクロフォンに入力された対話相手の名前に関する音声情報から前記対話相手の顔情報を抽出し、その抽出した顔情報と前記カメラにより撮影した画像を照合させて前記位置を判定する請求項７に記載のコミュニケーションプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ネットワークを介して異なる地点間のコミュニケーションを可能とするコミュニケーションシステム及びコミュニケーションプログラムに関するものである。
【背景技術】
【０００２】
ネットワークを介して異なる地点間のコミュニケーションを可能とするコミュニケーションシステムは、ブロードバンドに代表される通信回線容量の増大や、当該システム内のコンピュータの高性能化等により日々進歩してきている。コミュニケーションシステムとして高画質のカラー画像を音声とともにリアルタイムで双方向に通信するものがあり、例えば、ビジネス分野におけるテレビ会議システムでは、等身大に表示された複数の相手と臨場感をもって会話ができるものがある。双方向で通信可能なテレビ会議システムとして特許文献１に記載の技術がある。特許文献１に記載のテレビ会議システムでは、各々の会議場所に集合した参加者がディスプレイやマイクロフォンを通じて対話することが可能である。
【特許文献１】特表２００１−５１７３９５号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
ところで、テレビ会議システムでは複数の参加者が共通する議題に対して会話を行うため、他の参加者の声がコミュニケーション上、障害とならない。
【０００４】
しかし、遠隔のオフィス間を大画面のディスプレイ等を利用して常時接続しているようなコミュニケーションシステムでは、オフィスに在籍する複数の者が互いに異なる者と同時に会話をする場合がある。この際に対話相手とは異なる者から発せられる音声が障害となり、対話相手の音声が聞こえなかったり、聞こえずらい場合があり、円滑なコミュニケーションを図ることが出来ない。
【０００５】
そこで、本発明の目的は、異なる地点間で対話をする者同士の声が聞こえやすいコミュニケーションシステム及びコミュニケーションプログラムを提供することにある。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明に係るコミュニケーションシステムは、
ネットワークを介して異なる地点間のコミュニケーションを可能とするコミュニケーションシステムであって、
話者を撮影するカメラと、
当該カメラにより撮影した画像を映し出すディスプレイと、
話者の音声を音声信号に変換するマイクロフォンと、
当該マイクロフォンにより変換された音声信号を外部に出力するスピーカーと、
コミュニケーションシステム内の動作を制御する制御部と、を有し、
前記制御部は、異なる地点間においてコミュニケーションをとっている対話者の位置を判定し、その判定結果に基づいて、前記位置の音声に対する前記マイクロフォンの感度を変更する動作、又は前記位置に対して前記スピーカーから出力される音声を大きくする動作の少なくとも何れかの動作を実行することを特徴とするものである。
【０００７】
また、本発明に係るコミュニケーションプログラムは、
話者を撮影するカメラと、
当該カメラにより撮影した画像を映し出すディスプレイと、
話者の音声を音声信号に変換するマイクロフォンと、
当該マイクロフォンにより変換された音声信号を外部に出力するスピーカーと、
を有するコミュニケーションシステムに対し、コンピュータを利用して異なる地点間のコミュニケーションを可能とするコミュニケーションプログラムであって、
異なる地点間においてコミュニケーションをとっている対話者の位置を判定する判定工程と、
当該判定工程により判定した判定結果に基づいて、前記位置の音声に対する前記マイクロフォンの感度を変更する動作、又は前記位置に対して前記スピーカーから出力される音声を大きくする動作の少なくとも何れかの動作を実行する動作工程と、
をコンピュータに実行させることを特徴とするものである。
【発明の効果】
【０００８】
本発明に係るコミュニケーションシステム及びコミュニケーションプログラムによれば、異なる地点間で対話をする者同士の声が聞こえやすく、円滑なコミュニケーションを図ることが出来る。
【発明を実施するための最良の形態】
【０００９】
図１は本発明に係るコミュニケーションシステムの概略図である。
【００１０】
異なる地点にある居室Ｘと居室Ｙはネットワーク３を経由して接続されており、双方向のコミュニケーションが可能となっている。
【００１１】
居室Ｘにはディスプレイ１０２が設置されており、居室Ｙにはディスプレイ２０２が設置されている。ディスプレイ１０２には居室Ｙの映像が映し出され、ディスプレイ２０２には居室Ｘの映像が映し出される。例えば居室Ｘに在籍する「Ａ」という人物は、居室Ｙに在籍する「Ｂ」という人物と図１に示すコミュニケーションシステムを利用して対話することが出来る。
【００１２】
図２は本発明に係るコミュニケーションシステムのブロック図であり、代表的な制御構成を示している。
【００１３】
居室Ｘには対話システム１が設置されており、居室Ｙには対話システム２が設置されている。対話システム１と対話システム２がネットワーク３を介して接続されて全体としてのコミュニケーションシステムが成り立っている。対話システム１と対話システム２は同様の構成になっているため、対話システム１に基づいて各構成を説明する。
【００１４】
対話システム１はＰＣ１０１、ディスプレイ１０２、カメラ１０３、マイクロフォン１０４、スピーカー１０５から構成されている。対話システム２へ信号を送信したり、対話システム２から信号を受信したりすることはＰＣ（コンピュータ）１０１によって行われる。またディスプレイ１０２やスピーカー１０３等はＰＣ１０１に接続されており、所定のプログラムによってＰＣ１０１がディスプレイ１０２やスピーカー１０３等の動作を制御する。
【００１５】
ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）１０１ＡはＰＣ（コンピュータ）１０１全体の動作を制御するものであり、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）１０１ＢやＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）１０１Ｃ等に接続されている。このＣＰＵ１０１Ａは、ＲＯＭ１０１Ｂに格納されている各種制御プログラムを読み出してＲＡＭ１０１Ｃに展開し、各部の動作を制御する。また、ＣＰＵ１０１Ａは、ＲＡＭ１０１Ｃに展開したプログラムに従って各種処理を実行し、その処理結果をＲＡＭ１０１Ｃに格納する。そして、ＲＡＭ１０１Ｃに格納した処理結果を所定の保存先に保存させる。尚、本実施形態においては、ＣＰＵ１０１ＡはＲＯＭ１０１Ｂ及びＲＡＭ１０１Ｃと協働することにより制御部を構成する。
【００１６】
ＲＯＭ１０１Ｂは、プログラムやデータ等を予め記憶しており、この記録媒体は磁気的、光学的記録媒体、若しくは半導体メモリで構成されている。
【００１７】
ＲＡＭ１０１Ｃは、ＣＰＵ１０１Ａによって実行される各種制御プログラムによって処理されたデータ等を一時的に記憶するワークエリアを形成する。
【００１８】
ＨＤＤ（Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）１０１Ｄは、所定のデータを記憶する機能を有する。磁性体を塗布または蒸着した金属のディスクを一定の間隔で何枚も重ね合わせた構造となっており、これをモータで高速に回転させて磁気ヘッドを近づけてデータを読み書きする。本発明に係るコミュニケーションプログラムはＨＤＤ１０１Ｄに記憶されている（コミュニケーションプログラムはＰＣ２０１のＨＤＤにも記憶されている）。
【００１９】
ディスプレイ１０２は居室Ｙの映像や居室Ｙに所属する人物の映像を映し出すものであり、映し出される映像は対話システム２におけるカメラ２０３によって撮影されたものである。ディスプレイ１０２は臨場感を高めるために高解像度の大画面であることが好ましい。
【００２０】
カメラ１０３は、居室Ｘや居室Ｘに所属する人物を撮影し、ネットワーク３を介して、撮影した映像を対話システム２に配信するものである。
【００２１】
マイクロフォン１０４は居室Ｘで発生する音声を収集し、マイクロフォン１０４で収集した音声はネットワーク３を介して、対話システム２におけるスピーカー２０５に配信される。マイクロフォン１０４は最低２チャンネル以上必要であり、臨場感を高めるためにステレオマイクロフォンであることが好ましい。
【００２２】
スピーカー１０５は居室Ｙで発せられた音声を居室Ｘにおいて提供するものであり、最低２チャンネル以上が必要である。スピーカー１０５はディスプレイ１０２に内蔵されていても良いし、ディスプレイ１０２と別体であっても良い。
【００２３】
次に図２で説明したコミュニケーションシステムを利用し、対話者の位置を判定してスピーカーから出力される音声等を調整し、コミュニケーションをとる動作について説明する。例えば、居室Ｘに在籍する「Ａ」という人物と、居室Ｙに在籍する「Ｂ」という人物が、図３に示すようなディスプレイに対する位置関係で対話をしている状態を想定して具体的に説明する。
【００２４】
図３で示すように、居室Ｘにおけるカメラ１０３はディスプレイ１０２の中央且つ上方に設置されており、居室Ｙにおけるカメラ２０３はディスプレイ２０２の中央且つ上方に設置されている。ディスプレイ１０２は３つの領域α、β、γに区別されており、各々の領域にマイクロフォンとスピーカーが設置されている（例えば、ディスプレイ上のα領域に対してはマイクロフォン１０４Ａとスピーカー１０５Ａが設置されている）。居室Ｙにおけるディスプレイ２０２もディスプレイ１０２と同様に３つの領域α、β、γに区別されており、各々の領域にマイクロフォンとスピーカーが設置されている。なお、ディスプレイ１０２及びディスプレイ２０２の３つの領域は例示であり、複数の領域に分かれていればよい。
【００２５】
居室Ｙにおけるカメラ２０３で撮影された映像は居室Ｘのディスプレイ１０２に映し出され、居室Ｙに居る人物Ｂはディスプレイ１０２のγ領域に映し出される。従って、ディスプレイ１０２に映し出されている人物Ｂに対して正面に位置するほうが対話がしやすいため、人物Ｂと対話をしている人物Ａはディスプレイ１０２のγ領域の前に位置している。同じように、ディスプレイ２０２に映し出されている人物Ａに対して正面に位置するほうが対話がしやすいため、人物Ａと対話をしている人物Ｂはディスプレイ２０２のα領域の前に位置している。
【００２６】
このような状態で居室Ｘに在籍する人物Ａと、居室Ｙに在籍する人物Ｂが他の人の声に邪魔されず、円滑に対話を行う方法を図４において説明する。
【００２７】
図４は話者の顔の方向に基づき対話者の位置を判定して音声を調整する動作を説明するフローチャート図である。
【００２８】
まず、対話システム１又は対話システム２はマイクロフォンにより人の音声を検知したかどうかを判断する（ステップＳ１）。人の音声をマイクロフォンにより検知することにより対話が開始されたと判断できるため、まず最初に当該判断動作を行う。なお、当該判断動作は対話が開始されたことを判断できれば良いため、人の音声を検知する方法に限らず、例えば対話する際に対話システム１又は対話システム２における所定のボタンが対話者によって押されたか否かを判断するようにしても良い。
【００２９】
ステップＳ１において人の音声を検知すると（ステップＳ１；Ｙｅｓ）、スピーカー等の音量調整をするため、まずディスプレイの前に居る人物を特定する（ステップＳ２）。図３の例でいれば、ディスプレイ１０２の前に人物Ａが居て、ディスプレイ２０２の前に人物Ｂが居るため、カメラ１０３及びカメラ２０３によって撮影された画像をもとに人物Ａ及び人物Ｂが特定される。
【００３０】
次に特定された人物の顔の方向に基づき、ディスプレイ上の対話先領域を検出する（ステップＳ３）。顔の方向はカメラ１０３、２０３により撮影した画像における人物の顔から検出する。具体的な検出方法は、例えば人物の左目、右目、口、肌領域の画像幅のパラメータを算出し、予め記憶されているルックアップテーブルと比較して検出する方法（例えば特開２０００−９７６７６号公報記載の技術）である。顔の方向が検出されると、ディスプレイ上のどの領域を見ていることになるのかを検出する。図３に示す例でいえば、居室Ｘにおいて、ディスプレイ１０２におけるγ領域（人物Ｂが映し出されている領域）に対して人物Ａの顔の方向が向いているため、ディスプレイ１０２においてγ領域を対話先領域とみなす。一方、居室Ｙにおいて、ディスプレイ２０２におけるα領域（人物Ａが映し出されている領域）に対して人物Ｂの顔の方向が向いているため、ディスプレイ２０２におけるα領域を対話先領域とみなす。
【００３１】
そして、ステップＳ３においてディスプレイ１０２上の対話先領域とディスプレイ２０２上の対話先領域を照合し、居室Ｘと居室Ｙとの間で対話をしている対話者の位置を判定する（判定工程としてのステップＳ４）。この判定は居室ＸにおけるＰＣ１０１、又は居室ＹにおけるＰＣ２０１の何れかにおいて行われる。
【００３２】
図３に示す例でいれば、ステップＳ３においてディスプレイ１０２におけるγ領域とディスプレイ２０２のα領域が対話先領域と検出されており、各々のディスプレイに映し出されている映像と、その映像を見ている人物の顔の方向が一致するため、居室Ｘと居室Ｙにおける対話が成立しているものと判断出来る。同じようにディスプレイ１０２におけるβ領域とディスプレイ２０２のβ領域が対話先領域とされた場合、ディスプレイ１０２におけるα領域とディスプレイ２０２のγ領域が対話先領域とされた場合、居室Ｘと居室Ｙにおける対話が成立しているものと判断出来る。
【００３３】
図３では、対話者は人物Ａと人物Ｂであり、その対話者の位置はディスプレイ１０２におけるγ領域（人物Ａが居る位置）、人物Ｂに関してはディスプレイ２０２におけるα領域（人物Ｂが居る位置）であると判定する。
【００３４】
ステップＳ４において対話者の位置が判定されると、対話者が居る領域のマイクロフォンにおいて音声感度を高くするように変更し（動作工程としてのステップＳ５）、また対話者が居る領域のスピーカーにおいて、会話相手の音声を大きく出力する（動作工程としてのステップＳ６）。
【００３５】
図３に示す例でいえば、居室Ｘにおけるγ領域（人物Ａが居る位置）のマイクロフォン１０４Ｃの音声感度を変更して人物Ａの音声を十分に拾うようにし、居室Ｙにおけるα領域（人物Ｂが居る位置）のマイクロフォン２０４Ａの音声感度を変更して人物Ｂの音声を十分に拾うようにする。また、居室Ｘにおけるγ領域のスピーカー１０５Ｃにおいて、人物Ｂの音声を大きく出力し、居室Ｙにおけるα領域のスピーカー１０４Ａにおいて、人物Ａの音声を大きく出力する。なお、マイクロフォンの音声感度を変更し、且つスピーカーの出力値を大きくするのではなく、少なくとも何れか一方の動作を行うようにしても良い。また、図３に示すようなマイクロフォンやスピーカーを複数設置する形態ではなく、マイクロフォンとスピーカーを一つずつ設置し、対話者の位置の音声に対するマイクロフォンの感度を変更したり、対話者の位置に対してスピーカーから出力される音声を大きくするようにしてもよい。
【００３６】
以上図３及び図４で説明したように、対話者の位置を判定し、その判定結果に基づいてマイクロフォンやスピーカーにより音声を調整すれば、対話者以外の者がしゃべっていても、その者の音声が障害になることなく、対話をする者同士の声が聞こえやすくなり、円滑にコミュニケーションをとることが出来る。
【００３７】
また、別の方法として、話者の視線の方向に基づき対話者の位置を判定することも考えられ、この点を図５及び図６を用いて説明する。図３とは異なり、居室Ｘに在籍する人物Ａ及び人物Ｃと、居室Ｙに在籍する人物Ｂが図５に示すようなディスプレイに対する位置関係で２対１で対話をしている状態を想定して具体的に説明する。
【００３８】
図６におけるステップＳ１１〜Ｓ１２、Ｓ１４〜Ｓ１６は、図３におけるステップＳ１〜Ｓ２、Ｓ４〜Ｓ６と同様である。図６のステップＳ１３では特定された人物の視線の方向に基づき、ディスプレイ上の対話先領域を検出する。人物の視線の方向は、カメラ１０３、２０３により撮影した画像における人物の目の動きから検出する（例えば特開２０００−１４６５５３号公報記載の技術）。
【００３９】
図５に示す例でいえば、居室Ｘにおいて、ディスプレイ１０２におけるγ領域（人物Ｂが映し出されている領域）に対して人物Ａ及び人物Ｃの視線が向いているため、ディスプレイ１０２においてγ領域を対話先領域とみなす。一方、居室Ｙにおいて、ディスプレイ２０２におけるα領域（人物Ａが映し出されている領域）とβ領域（人物Ｃが映し出されている領域）に対して人物Ｂの視線が向いているため、ディスプレイ２０２におけるα領域とβ領域を対話先領域とみなす。
【００４０】
ステップＳ１３における検出が終了すると、ディスプレイ１０２上の対話先領域とディスプレイ２０２上の対話先領域を照合し、居室Ｘと居室Ｙとの間で対話をしている対話者の位置を判定する（ステップＳ１４）。そしてその判定結果に基づいて、対話者が居る領域のマイクロフォンにおいて音声感度を高くするように変更したり（ステップＳ１５）、また対話者が居る領域のスピーカーにおいて、会話相手の音声を大きく出力する（ステップＳ１６）。
【００４１】
図６に示す例でいえば、居室Ｘにおけるβ領域（人物Ｃが居る位置）のマイクロフォン１０４Ｂとγ領域（人物Ａが居る位置）のマイクロフォン１０４Ｃの音声感度を変更して人物Ａ及び人物Ｃの音声を十分に拾うようにし、居室Ｙにおけるα領域（人物Ｂが居る位置）のマイクロフォン２０４Ａの音声感度を変更して人物Ｂの音声を十分に拾うようにする。また、居室Ｘにおけるβ領域のスピーカー１０５Ｂとγ領域のスピーカー１０５Ｃにおいて、人物Ｂの音声を大きく出力し、居室Ｙにおけるα領域のスピーカー１０４Ａにおいて、人物Ａの音声を大きく出力する。
【００４２】
このように人物の視線の方向に基づいて対話者の位置を判定し、その判定結果に基づいてマイクロフォンやスピーカーにより音声を調整すれば、対話者以外の者がしゃべっていても、その者の音声が障害になることなく、対話をする者同士の声が聞こえやすくなり、円滑にコミュニケーションをとることが出来る。
【００４３】
また、図７のフローチャート図におけるステップＳ２３に示すように話者から発せられる音声の方向に基づき、ディスプレイ上の対話先領域を検出してもよい。具体的な検出方法は、マイクロフォンから入力される音声の周波数分析をすることにより検出する方法（例えば特開平９−２５１２９９号公報記載の技術）である。なお、図７におけるステップＳ２１〜Ｓ２２、Ｓ２４〜Ｓ２６は、図３におけるステップＳ１〜Ｓ２、Ｓ４〜Ｓ６と同様である。
【００４４】
また、図８のフローチャート図で示すように話者がディスプレイ上で選択した箇所に基づき、ディスプレイ上の対話領域を決定してもよい。
【００４５】
居室Ｘと居室Ｙにおいて対話を行う場合、ディスプレイ上で対話する相手をユーザーが選択するようにする。例えば、ディスプレイ１０２や２０２において「対話する相手をディスプレイ上で選択してください」という表示を出して、ユーザーに選択するよう促す。
【００４６】
図８におけるステップＳ３１においてディスプレイ上で対話する相手がユーザーによって選択されたかどうか判断する。ディスプレイ上での選択があった場合に、ディスプレイの選択箇所が対話する相手がいる領域であると判断し、その選択箇所に基づき対話先領域を決定する（ステップＳ３２）。ディスプレイの選択箇所の座標を把握することにより、どこの領域が選択箇所であるか判断することが出来る。ステップＳ３２において対話者の位置を判定すると、図４等で説明した動作と同様に対話者が居る領域のマイクロフォンにおいて音声感度を高くするように変更したり（ステップＳ３４）、また対話者が居る領域のスピーカーにおいて、会話相手の音声を大きく出力する（ステップＳ３５）。
【００４７】
また、図９のフローチャート図で示すように、マイクロフォンに入力された対話相手の名前に関する音声情報から対話相手の顔情報を抽出し、その抽出した顔情報とカメラにより撮影した画像を照合させて対話者の位置を判定してもよい。
【００４８】
まず、マイクロフォンにおいて会話相手の名前の呼び掛けがあるかどうか検出する（ステップＳ４１）。そして名前の呼び掛けがある場合に、呼び掛けられた名前を音声認識し（ステップＳ４２）、音声認識した名前情報から顔情報を抽出する（ステップＳ４３）。
【００４９】
名前の音声認識は、マイクロフォンにより入力された音声信号の波長等を分析することにより入力された音声を認識するものである。顔情報を抽出は、名前と顔情報の関係が規定されたデータベースを参照することにより行う。
【００５０】
顔情報が抽出されると、抽出した顔情報に基づき該当する人物が居る領域を特定する（ステップＳ４４）。カメラにより撮影した画像から人物の顔を抽出し、目や口の位置情報をステップＳ４３で抽出した顔情報と照合し、該当する人物が居る領域を特定する。
【００５１】
そして、該当する人物が居る領域を特定した後は、特定した領域を対話者が居る位置と判定し（ステップＳ４５）、対話者が居る領域のマイクロフォンにおいて音声感度を高くするように変更したり（ステップＳ４６）、また対話者が居る領域のスピーカーにおいて、会話相手の音声を大きく出力する（ステップＳ４７）。
【００５２】
以上図６〜図９で説明したように、話者の顔の方向に限らず、話者の視線の方向、話者から発せられる音声の方向、話者が選択したディスプレイ上の選択箇所等に基づいて、対話者の位置を判定し、その判定結果に基づいてマイクロフォンの音声感度を変更したり、スピーカーの音量を調整することで、他人の音声が障害になることなく対話をする者同士の声が聞こえやすくなる。
【００５３】
なお、本発明の実施の形態を図面によって説明してきたが、本発明は当該実施の形態に限定されるものではなく、本発明の要旨を逸脱しない範囲における変更や追加があっても本発明に含まれる。
【００５４】
図３や図５において、例えば対話者と判定しずらい者がいる場合は対話者とみなし、その者に対してマイクロフォンにおいて音声感度を高くするように変更したり、スピーカーにおいて会話相手の音声を大きく出力するようにしてもよい。
【図面の簡単な説明】
【００５５】
【図１】コミュニケーションシステムの概略図である。
【図２】コミュニケーションシステムのブロック図である。
【図３】居室Ｘにおける人物Ａと居室Ｙにおける人物Ｂが会話をしている状態を示す説明図である。
【図４】話者の顔の方向に基づき対話者の位置を判定して音声を調整する動作を説明するフローチャート図である。
【図５】居室Ｘにおける人物Ａ及び人物Ｃと居室Ｙにおける人物Ｂが会話をしている状態を示す説明図である。
【図６】話者の視線の方向に基づき対話者の位置を判定して音声を調整する動作を説明するフローチャート図である。
【図７】話者から発せられる音声の方向に基づき対話者の位置を判定して音声を調整する動作を説明するフローチャート図である。
【図８】話者が選択したディスプレイ上の選択箇所に基づき対話者の位置を判定して音声を調整する動作を説明するフローチャート図である。
【図９】対話相手の名前に関する音声情報や顔情報に基づき対話者の位置を判定して音声を調整する動作を説明するフローチャート図である。
【符号の説明】
【００５６】
１、２  対話システム
１０１、２０１  ＰＣ
１０２、２０２  ディスプレイ
１０３、２０３  カメラ
１０４、２０４  マイクロフォン
１０５、２０５  スピーカー
１０１Ａ、２０１Ａ  ＣＰＵ
１０１Ｂ、２０１Ｂ  ＲＯＭ
１０１Ｃ、２０１Ｃ  ＲＡＭ
１０１Ｄ、２０１Ｄ  ＨＤＤ
【図１】
2009060220.tif 000003
【図２】
2009060220.tif 000004
【図３】
2009060220.tif 000005
【図４】
2009060220.tif 000006
【図５】
2009060220.tif 000007
【図６】
2009060220.tif 000008
【図７】
2009060220.tif 000009
【図８】
2009060220.tif 000010
【図９】
2009060220.tif 000011