(57)【特許請求の範囲】
【請求項１】
集音した音声信号を加工し、この加工した音声信号を装用者の外耳道に放出する聴覚補助装置において、
音声信号を集音する複数のマイクロホンと、
各マイクロホンで集音された音声信号の時間差から該音声信号の音源方向を推定し、推定結果である第１の推定方向を得るとともに、各マイクロホンで集音された音声信号のパワーレベルから該音声信号の音源方向を推定し、推定結果である第２の推定方向を得る音源方向推定手段と、
前記音源方向推定手段により推定された前記第１、および第２の推定方向の差に基づいて、該第１、および第２の推定方向の正当性を判定する正当性判定手段と、
前記正当性判定手段が前記第１、および第２の推定方向について正当性があると判定した場合に、該第１、および第２の推定方向に基づいて各マイクロホンで集音された音声信号の音源方向を決定し、この音源方向を指示する音源方向指示手段と、を備えたことを特徴とする聴覚補助装置。
【請求項２】
前記音源方向推定手段は、各マイクロホンで集音された音声信号について、予め定められた帯域毎に前記第１、および第２の推定方向を得る手段であり、
前記正当性判定手段は、前記帯域毎に前記第１、および第２の推定方向の正当性を判定する手段であり、
さらに、前記音源方向指示手段は、前記正当性判定手段により前記第１、および第２の推定方向に正当性があると判定された帯域毎に音源方向を決定し、ここで決定した各帯域の音源方向から、各マイクロホンで集音された音声信号の音源方向を最終的に決定する手段であることを特徴とする請求項１に記載の聴覚補助装置。
【請求項３】
前記音源方向推定手段は、各マイクロホンで集音された音声信号のパワーレベルが定常のノイズレベルを越えたタイミングで推定した前記第１、および第２の推定方向を得る手段であることを特徴とする請求項１または２に記載の聴覚補助装置。
【請求項４】
前記音源方向指示手段は、装用者の視覚、聴覚、触覚、嗅覚、または、味覚のいずれかに刺激を与えて決定した音源方向を指示する手段であることを特徴とする請求項１、２、または、３に記載の聴覚補助装置。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
この発明は、老齢化等により聴覚機能が低下した者や、難聴者等の聴力障害者の聴覚機能を補償する聴覚補助装置に関する。
【０００２】
【従来の技術】
従来より、老齢化等により聴覚機能が低下した者や、難聴者等の聴力障害者の聴覚機能を補償するものとして補聴器が使用されている。
最近では、マイクロホンで集音した音声信号を増幅したり周波数特性を加工するだけでなく、音声信号を時間軸上で伸長する話速変換処理を行うものも提案されており、老齢化等により音声識別臨界速度（語音を識別することのできる最大の話速）が低下した者の聴覚機能も補償できるようになってきている。
【０００３】
【発明が解決しようとする課題】
ところで、人は音声信号を左右の耳で聞いて、左右の耳で聞き取った音声信号の違い（時間的ずれや音声パワーの違い等）から音源方向を認識している。しかしながら、従来の補聴器は、１つのマイクロホンで集音した音声信号を加工し、この加工した音声信号を装用者の外耳道に放出するものであった。また、音声信号がどの方向から到来するかは定かではないため、補聴器には無指向性のマイクロホンが使用されている。したがって、レシーバから放出される音声信号を聴いて、この音声信号の音源方向を認識することはできなかった。このため、補聴器の装用者は、他人の発話した音声を聴くと、最初に発話者のいる方向（音源方向）を探し回ることになり、発話者がみつかるまで音声を聴くことに対して集中できなかった。また、人は他人の発話した音声を聴いたときに、この音声の内容を理解する情報として発話者の表情等の視覚により得た情報も利用している。しかし、補聴器の装用者は、発話者がみつかるまで視覚による発話者の表情等の情報を得ることはできない。したがって、補聴器の装用者は自分の聴いた音声の内容を理解することが困難になる。すなわち、補聴器を装用することにより、音声自体は聞き取りやすくなるが、その内容の理解度は低下してしまい、結果的に低下した装用者の聴覚機能が補償されていないという問題があった。
【０００４】
この発明の目的は、装用者に音源方向を知らしめることにより、装用者が発話者を探し回る必要を無くすとともに、音声に対する内容の理解度を向上させることにより低下した装用者の聴覚機能を補償することのできる聴覚補助装置を提供することにある。
【０００５】
【課題を解決するための手段】
請求項１に記載した発明は、集音した音声信号を加工し、この加工した音声信号を装用者の外耳道に放出する聴覚補助装置において、
音声信号を集音する複数のマイクロホンと、
各マイクロホンで集音された音声信号の時間差から該音声信号の音源方向を推定し、推定結果である第１の推定方向を得るとともに、各マイクロホンで集音された音声信号のパワーレベルから該音声信号の音源方向を推定し、推定結果である第２の推定方向を得る音源方向推定手段と、
前記音源方向推定手段により推定された前記第１、および第２の推定方向の差に基づいて、該第１、および第２の推定方向の正当性を判定する正当性判定手段と、
前記正当性判定手段が前記第１、および第２の推定方向について正当性があると判定した場合に、該第１、および第２の推定方向に基づいて各マイクロホンで集音された音声信号の音源方向を決定し、この音源方向を指示する音源方向指示手段と、を備えたことを特徴とする。
【０００６】
この構成では、マイクロホンで集音された音声信号が加工され、この加工された音声信号が装用者の外耳道に放出される。また、音声信号は複数のマイクロホンで集音されており、音源方向推定手段が各マイクロホンで集音された音声信号について、その時間差から音源方向を推定した第１の推定方向、およびパワーレベルから音源方向を推定した第２の推定方向を得る。正当性判定手段が、第１の推定方向と、第２の推定方向と、の差に基づいて、音源方向推定手段により推定された第１、および第２の推定方向の正当性を判定する。例えば、各マイクロホンで集音された音声信号について推定された第１の推定方向と、第２の推定方向と、が略一致していれば正当性があると判定する。この判定において、第１、および第２の推定方向に正当性があると判定されると、音源方向指示手段が該第１、および第２の推定方向に基づいて各マイクロホンで集音された音声信号の音源方向を決定し、ここで決定した音源方向を指示する。したがって、装用者は自分の聴いている音声信号の音源方向を簡単に認識することができる。このため、装用者は音源方向（発話者）を探し回る必要がなくなり、音声を聴くことに対する集中度が向上するとともに、視覚により発話者の表情等の情報も得ることができる。よって、装用者の音声に対する内容の理解度を向上させることができ、装用者の低下した聴覚機能を補償することができる。また、音源方向指示手段が、装用者に対して誤った音源方向を指示し、装用者を惑わせて内容の理解度を低下させるのを防止できる。
【０００７】
請求項２に記載した発明は、前記音源方向推定手段は、各マイクロホンで集音された音声信号について、予め定められた帯域毎に前記第１、および第２の推定方向を得る手段であり、
前記正当性判定手段は、前記帯域毎に前記第１、および第２の推定方向の正当性を判定する手段であり、
さらに、前記音源方向指示手段は、前記正当性判定手段により前記第１、および第２の推定方向に正当性があると判定された帯域毎に音源方向を決定し、ここで決定した各帯域の音源方向から、各マイクロホンで集音された音声信号の音源方向を最終的に決定する手段であることを特徴とする。
【０００８】
この構成では、各マイクロホンで集音された音声信号について、予め定められた帯域毎に、音源方向推定手段が第１、および第２の推定方向を得る。また、正当性判定手段が、帯域毎に第１、および第２の推定方向の正当性を判定する。そして、音源方向指示手段が、第１、および第２の推定方向に正当性があると判定された帯域毎に、音源方向を決定し、ここで決定した各帯域の音源方向から、各マイクロホンで集音された音声信号の音源方向を最終的に決定する。したがって、各マイクロホンで集音された音声信号の音源方向の推定精度を一層向上させることができる。
【０００９】
請求項３に記載した発明は、前記音源方向推定手段は、各マイクロホンで集音された音声信号のパワーレベルが定常のノイズレベルを越えたタイミングで推定した前記第１、および第２の推定方向を得る手段であることを特徴とする。
【００１０】
この構成では、集音された音声信号のパワーレベルが定常のノイズレベルを越えたタイミングで前記第１、および第２の推定方向が推定される。ここで、マイクロホンで集音された音声信号に反射音が殆ど含まれないタイミングは、発せられた音声信号の先頭を集音した時である。すなわち、音声信号のパワーレベルが定常ノイズレベルを越えたタイミングである。したがって、反射音による影響を小さくして、音源方向の推定精度を向上させることができる。
【００１１】
請求項４に記載した発明は、前記音源方向指示手段は、装用者の視覚、聴覚、触覚、嗅覚、または、味覚のいずれかに刺激を与えて決定した音源方向を指示する手段であることを特徴とする。
【００１２】
この構成では、装用者の視覚、聴覚、触覚、嗅覚、または、味覚（五感）のいずれかに刺激を与え、音源方向を指示するようにした。
【００１３】
【発明の実施の形態】
図１は、この発明の実施形態である補聴器の構成を示すブロック図である。この実施形態の補聴器は、装用者の左右の耳穴にそれぞれ装着（挿入）される装耳部１Ｒ、１Ｌを備えている。各装耳部１Ｒ、１Ｌには、音声信号を集音するマイクロホン１１Ｒ、１１Ｌと、後述する信号処理部２で信号処理（加工）された音声信号を空気振動に変換して装用者の外耳道に放出するレシーバ１２Ｒ、１２Ｌと、が設けられている。マイクロホン１１Ｒ、１１Ｌは、空気中を伝搬してくる音声信号を集音し、これを電気信号に変換して信号処理部２に入力する。
【００１４】
マイクロホン１１Ｒ（１１Ｌ）から出力された音声信号は、前置増幅器２１Ｒ（２１Ｌ）で増幅され、アンチエリアシングフィルタ２２Ｒ（２２Ｌ）でサンプリング周波数の１／２を越える高域成分がカットされる。そして、Ａ／Ｄ変換器２３Ｒ（２３Ｌ）でディジタル信号に変換され、信号処理部２４Ｒ（２４Ｌ）に入力される。信号処理部２４Ｒ（２４Ｌ）は、この入力された音声信号（ディジタル信号）に対して、周波数特性の加工や、音声信号を時間軸上で伸長する話速変換処理等を行う。なお、メモリ２９には音声信号を一時的に記憶させる記憶エリア等が設けられている。信号処理部２４Ｒ（２４Ｌ）で加工された音声信号は、Ｄ／Ａ変換器２５Ｒ（２５Ｌ）に入力され、アナログ信号に変換される。アナログ信号に変換された音声信号は、スムージングフィルタ２６Ｒ（２６Ｌ）に入力される。スムージングフィルタ２６Ｒ（２６Ｌ）は、Ｄ／Ａ変換の際に発生する折り返しノイズを除去するために設けられたローパスフィルタである。スムージングフィルタ２６Ｒ（２６Ｌ）でフィルタリングされた音声信号は、増幅器２７Ｒ（２７Ｌ）で装用者の可聴できるレベルに増幅され、レシーバ１２Ｒ（１２Ｌ）に入力される。レシーバ１２Ｒ（１２Ｌ）が、この入力された音声信号を空気振動に変換し、これを装用者の外耳道に放出する。
【００１５】
このように、この実施形態の補聴器は、マイクロホン１１Ｒ、１１Ｌ毎に集音された音声信号を加工し、これを装用者に聴かせるようにしている。また、マイクロホン１１Ｒ、１１Ｌは、補聴器を装用した装用者の左右の耳の近傍にそれぞれ位置するように装耳部１Ｒ、１Ｌに設けている。したがって、レシーバ１２Ｒ、Ｌから出力される音声信号には、時間的ずれやパワーレベルの違い等が存在しており、聴覚機能の低下が比較的小さい装用者であれば音源方向を認識することができる。また、聴覚機能の低下が大きい装用者は、フィッティング手段により（推定した音源方向に基づいてレシーバ１２Ｒ、１２Ｌから出力する信号を強調することにより）聴覚機能を補間しておけば方向を認識することが可能となっている。
【００１６】
また、信号処理部２には、Ａ／Ｄ変換器２３Ｒ、２３Ｌでディジタル信号に変換された音声信号を取り込んで音源方向を推定する音源方向推定部２８と、音源方向推定部２８で推定された音源方向を無線信号で出力する送信部３０と、を備えている。なお、メモリ２９は、音源方向推定部２８のワーキングエリアとしても利用される。また、信号処理部２は装耳部１Ｒ、１Ｌと信号線で接続されている。また、信号処理部２は装用者の胸ポケットに収納できるカード形状であり、表面にアンテナを構成し、このアンテナより推定した音源方向を無線信号で出力する。
【００１７】
さらに、この実施形態の補聴器は、上記した装耳部１および信号処理部２に加えて音源方向指示部３を備えている。音源方向指示部３には、送信部３０から出力された無線信号を受信する受信部３１と、受信部３１で受信した音源方向を表示させる表示部３２と、受信部３１および表示部３２の動作を制御する制御部３３を備えている。音源方向指示部３は、図２（Ａ）に示すように表示部３２を表面に設けており、矢印で音源方向を指示するように構成している。なお、図２（Ｂ）に示すように複数のＬＥＤを円周状に配置した表示部３２とし、推定された音源方向に対応するＬＥＤを点灯させて指示するものとしてもよい。
【００１８】
以下、音源方向推定部２８の処理について詳細に説明する。図３は、音源方向推定部の処理を示すフローチャートである。音源方向推定部２８には、上記したように２つのマイクロホン１１Ｒ、１１Ｌで集音された音声信号がＡ／Ｄ変換器２３Ｒ、２３Ｌでディジタル信号に変換され、入力されている。音源方向推定部２８は、Ａ／Ｄ変換器２３Ｒ、２３Ｌから入力された音声信号の音声パワーＰＲ、ＰＬをそれぞれ算出する（ｎ１）。そして、音声パワーＰＲ、ＰＬの大きい方が閾値を越えているかどうかを判定する（ｎ２〜ｎ４）。ここで、閾値としては音声信号の無い状態でマイクロホン１１Ｒ、１１Ｌで集音される定常ノイズレベルを設定している。すなわち、マイクロホン１１Ｒ、１１Ｌで音声信号が集音されているかどうかを判定している。
【００１９】
マイクロホン１１Ｒ、１１Ｌで音声信号が集音されていないと判定した場合（音声パワーＰＲ、ＰＬが共に閾値を越えていない場合）、ｎ１に戻って上記した処理を繰り返す。一方、マイクロホン１１Ｒ、１１Ｌで音声信号が集音されていると判定した場合（音声パワーＰＲ、ＰＬの少なくとも一方が閾値を越えている場合）、各マイクロホン１１Ｒ、１１Ｌで集音された音声信号の音源方向を推定する音源方向推定処理を行う（ｎ５）。ｎ５における音源方向推定処理の詳細については、後述する。音源方向推定部２８により音源方向が推定されると、送信部３０がこの推定された音源方向を無線信号で出力する（ｎ６）。なお、送信部３０は、推定された音源方向を８ビットのシリアルデータで表し、これをベースバンド変調して信号処理部２の表面に設けられているアンテナ（不図示）から送信する。
【００２０】
次に、ｎ５における音源方向推定処理について詳細に説明する。図４は音源方向推定処理を示すフローチャートである。音源方向推定部２８では、Ａ／Ｄ変換器２３Ｒ、２３Ｌからそれぞれ入力される音声信号をバンドパスフィルタブロックでフィルタリングしている。バンドパスフィルタブロックとしては、例えば、中心周波数１００Ｈｚ〜８ｋＨｚ、帯域幅１０Ｈｚ〜２００Ｈｚ（ここでは１００Ｈｚとした。）のものを使用すれば適当である。音源方向推定部２８は、バンドパスフィルタブロックでフィルタリングされた帯域毎にマイクロホン１１Ｒ、１１Ｌで集音された音声信号の位相差（時間ずれ）を求めるとともに、２つのマイクロホン１１Ｒ、１１Ｌで集音された音声信号のパワーレベルの比を求める（ｎ１１、ｎ１２）。ここで、マイクロホン１１Ｒ、１１Ｌで集音された音声信号の位相差は、音声パワーＰＲ、ＰＬが上記閾値＋設定値Ａとなったときのタイミングで判定する。設定値Ａは事前に設定されている。また、マイクロホン１１Ｒ、１１Ｌで集音された音声信号のパワーレベルの比は、音声パワーＰＲ、ＰＬが上記閾値となったときのタイミングで判定する。このタイミングは、発せられた音声信号の先頭を集音したタイミングからある設定値（時間）後のタイミングであり、マイクロホンで集音された音声信号に反射音が殆ど含まれていない。したがって、マイクロホン１１Ｒ、１１Ｌで集音された音声信号のパワーレベルの比を反射音による影響が小さい状態で算出することができる。音源方向推定部２８は、ｎ１１およびｎ１２で求めた位相差とパワーレベルの比からそれぞれ音源方向を推定する（ｎ１３、ｎ１４）。なお、メモリ２８には、位相差と音源方向（角度）とを対応させたデータおよびパワーレベルの比と音源方向（角度）とを対応させたデータが記憶されている。ｎ１３ではｎ１１で求めた位相差に対する音源方向を読み出し、ｎ１４ではｎ１２で求めたパワーレベルの比に対する音源方向を読み出す。そして、位相差から推定した音源方向とパワーレベルの比から推定した音源方向との角度差が１０度未満であるかどうかを判定する（ｎ１５）。ここで角度差が１０度以上であると上記した処理で推定された音源方向に正当性が無いと判定し、これを無効データとして破棄する。一方、角度差が１０度未満であればここで推定された音源方向については正当性が有る有効なデータと判定し、これをメモリ２８に記憶させる（ｎ１６）。ここで、メモリ２８に記憶させる音源方向は、ｎ１４においてパワーレベルの比から推定した音源方向である。なお、ｎ１３において位相差から推定した音源方向としてもよいし、また、パワーレベルの比と位相差から推定された音源方向の中間（平均値）としてもよい。そして、バンドパスフィルタブロックでフィルタリングされた全ての帯域に対して上記したｎ１１〜ｎ１６の処理を完了すると（ｎ１７）、ｎ１６でメモリ２８に記憶させた帯域毎の音源方向から、最終的な音源方向を推定する（ｎ１８）。ｎ１８では、ｎ１６でメモリ２８に記憶させた音源方向（角度）の中で、最も多く記憶されている音源方向を最終的な音源方向とする。すなわち、最終的な音源方向は、有効とした音源方向の多数決により決定される。なお、有効とした音源方向の平均値や偏差から最終的な音源方向を決定するようにしてもよい。また、使用状態により許容角度差１０度を２０度や３０度としてもよい。
【００２１】
ｎ６で送信部３０から出力された音源方向（無線信号）は、音源方向指示部３の受信部３１で受信される。制御部３３は、受信部３１で信号処理部２から送信されてきた音源方向を受信すると、音源方向を表示部３２に矢印で表示させる。したがって、補聴器の装用者は、この表示された矢印によって音源方向を認識することができる。このため、装用者は音源方向（発話者）を探し回る必要がなくなり、発話されている音声を聴くことに対する集中度が向上する。また、発話者の表情等の視覚による情報も得ることができる。これにより、装用者に音声の内容を容易に理解させることができる。すなわち、装用者の低下した聴覚機能を確実に補償することができる。また、帯域毎の音源方向を推定した際に正当性のないものを無効とし、且つ、上記したように反射音による影響等も小さくしているため、音源方向の推定精度を向上させることができ、装用者に誤った音源方向を指示して、装用者を戸惑わせるという問題も生じない。
【００２２】
なお、この実施形態では、音声信号を集音するマイクロホン１１Ｒ、１１Ｌを２つとしたが、マイクロホンの個数は３つでもそれ以上でもよく、また、マイクロホンの個数が多いほど推定される音源方向の精度も向上する。
【００２３】
また、図５に示すように、上記した実施形態における装耳部１と音源方向指示部３をメガネに取り付けて構成してもよい。図に示すようにフレームの左右の耳に掛ける部分に、マイクロホン１１Ｒ、１１Ｌおよびレシーバ１２Ｒ、１２Ｌが取り付けられている。また、レンズ４２Ｒ、４２Ｌはハーフミラーであり、レンズ４２Ｒ、４２Ｌの上方に投光部４１Ｒ、４１Ｌを設けている。投光部４１Ｒ、４１Ｌが、上記した実施形態における音源方向指示部３に相当する。なお、図示していないが、信号処理部２は、マイクロホン１１Ｒ、１１Ｌおよびレシーバ１２Ｒ、１２Ｌと信号線で接続され、装用者の胸ポケット等に入れられている。
【００２４】
この実施形態の補聴器も、信号処理部２が上記した実施形態と同様にマイクロホン１１Ｒ、１１Ｌで集音された音声信号の位相差およびパワーレベルの比から音源方向を推定し、これを無線信号で出力する。投光部４１Ｒ、４１Ｌが、この無線信号を受信し、レンズ４２Ｒ、４２Ｌ上に音源方向を光学的に表示する。したがって、装用者は図５（Ｂ）に示すように投光部４１Ｒ、４１Ｌによりレンズ４２Ｒ、４２Ｌ上に表示された音源方向を確認することができる。また、レンズ４２Ｒ、４２Ｌをハーフミラーとしたことにより、装用者が表示されている音源方向を見やすい。なお、レンズ４２Ｒ、４２Ｌは全面をハーフミラーとせずに、投光部４１Ｒ、４１Ｌが音源方向を表示する部分だけコーティングしたものであってもよい。
【００２５】
また、図５に示すメガネのフレーム内部や表面に上記した実施形態における信号処理部２も取り付け、メガネと補聴器とが一体化された構成としてもよい。この場合には、装耳部１、信号処理部２および投光部４１Ｒ、４１Ｌを信号線で接続することができる（推定した音源方向を無線信号ではなく、信号線を介して投光部４１Ｒ、４１Ｌに入力することができる。）。
【００２６】
また、上記した実施形態における音源方向指示部３を図６に示す振動発生装置５０としてもよい。振動発生装置５０は、装用者の左右の肩に１枚ずつ貼られる。振動発生装置５０には、受信部５１、電源部５２、制御部５３、振動部５４が設けられている。受信部５１は、信号処理部２から出力された音源方向（無線信号）を受信する。制御部５３は、この受信した音源方向に基づいて振動部５４を振動させる。この振動によって、装用者に音源方向を認識させる。具体的には、推定された音源方向が左側であれば、左の肩に貼られた振動発生装置５０の振動部５４を振動させる。このとき、右の肩に貼られた振動発生装置５０の振動部５４は振動させない。一方、推定された音源方向が右側であれば、右の肩に貼られた振動発生装置５０の振動部５４を振動させ、左の肩に貼られた振動発生装置５０の振動部５４は振動させない。また、振動部５４の振動の強弱によって、詳細な音源方向を指示する。例えば、音源方向が装用者の正面に近いほど振動部５４の振動を弱くし、正面からずれている角度が大きいほど振動を強くする。
【００２７】
また、図６に示した振動発生装置５０に代えて図７に示す電圧発生装置６０を装用者の両肩に張りつけるようにしてもよい。この場合には、制御部６３が受信部６１で受信した推定された音源方向に基づいて電圧発生部６４で発生させる電圧を制御し、装用者に音源方向を認識させる。なお、６２は電源部である。
【００２８】
このように、振動発生器５０または電圧発生装置６０により装用者の触覚を刺激して音源方向を認識させることもできる。また、この場合には装用者の肩凝りをほぐす効果も生じる。
【００２９】
また、音源方向指示部３を図８に示す香り合成装置７０としてもよい。この香り合成装置７０は、信号処理部２で推定された音源方向（無線信号）を受信する受信部７１と、特定の香りのする香り原料Ａ、Ｂを保存した香り原料保存部７２、７３と、香り原料保存部７２、７３に保存されている香り原料を混合して合成する香り合成部７４と、香り合成部７４で合成された香りを気化して吐き出す吐出部７５と、全体の動作を制御する制御部７６と、を備えている。
【００３０】
この香り合成装置７０も、受信部７１が信号処理部２から出力された音源方向（無線信号）を受信する。制御部７６は、この受信した音源方向に基づいて、香り原料Ａと香り原料Ｂとの混合比を算出し、香り合成部７４においてこの算出した混合比で香り原料保存部７２、７３に保存されている香り原料Ａと香り原料Ｂとを混合する。そして、吐出部７５がこれを気化して吐き出す。例えば、推定された音源方向が左側であれば香り原料Ａの混合比を大きくし、逆に推定された音源方向が右側であれば香り原料Ｂの混合比を大きくする。このように、装用者の臭覚を刺激し、装用者に音源方向を認識させることもできる。
【００３１】
また、音源方向指示部３を図９に示す食品合成装置８０としてもよい。この食品合成装置８０は、信号処理部２で推定された音源方向（無線信号）を受信する受信部８１と、特定の味のする食品原料Ａ、Ｂを保存した食品原料保存部８２、８３と、食品原料保存部８２、８３に保存されている食品原料を混合して合成する食品合成部８４と、食品合成部８４で合成された食品を装用者の口内に吐き出す吐出部８５と、全体の動作を制御する制御部８６と、を備えている。
【００３２】
この食品合成装置８０も、受信部８１で信号処理部２から出力された音源方向（無線信号）を受信する。制御部８６は、この受信した音源方向に基づいて、食品原料Ａと食品原料Ｂとの混合比を算出し、食品合成部８４においてこの算出した混合比で食品原料保存部８２、８３に保存されている食品原料Ａと食品原料Ｂとを混合する。そして、吐出部８５からこの合成した食品を装用者の口内に吐き出す。例えば、推定された音源方向が左側であれば食品原料Ａの混合比を大きくし、逆に推定された音源方向が右側であれば食品原料Ｂの混合比を大きくする。このように、装用者の味覚を刺激し、装用者に音源方向を認識させることもできる。
【００３３】
また、音源方向推定部２８で推定した音源方向に基づいて、レシーバ１２Ｒ、１２Ｌから出力する音声信号の強弱や時間的ずれを強調して出力するようにしてもよい。例えば、推定された音源方向が左側であればレシーバ１２Ｌから出力される音声信号を大きくし、逆に推定された音源方向が右側であればレシーバ１２Ｒから出力される音声信号を大きくするようにしてもよい。このようにすれば、音源方向指示部３を不要にすることができ、補聴器のコストダウンにもつながる。
【００３４】
なお、推定された音源方向に対してレシーバ１２Ｒ、１２Ｌから出力する音声信号を強調する度合いを示す係数等は予め設定しておけばよい。また、このような係数に対して時定数を持たせれば、装用者が音源方向を認識した後までも音源方向によってレシーバ１２Ｒ、１２Ｌから放出される音声信号が強調されつづけることを禁止できる。
【００３５】
【発明の効果】
以上のように、装用者に自分の聴いている音声信号の音源方向を簡単に認識させることができる。このため、装用者は音源方向（発話者）を探し回る必要がなくなり、音声を聴くことに対する集中度が向上するとともに、視覚により発話者の表情等の情報も得ることができる。よって、装用者の音声に対する内容の理解度を向上させることができ、装用者の低下した聴覚機能を補償することができる。
【００３６】
また、装用者に誤った音源方向を知らせ、装用者を惑わせて内容の理解度を低下させるという問題を防止することができる。
【００３７】
また、反射音による影響を抑え、音源方向の推定精度を向上できる。
【図面の簡単な説明】
【図１】この発明の実施形態である補聴器の構成を示すブロック図である。
【図２】音源方向指示部の外観を示す図である。
【図３】音源方向推定部の処理を示すフローチャートである。
【図４】音源方向推定処理を示すフローチャートである。
【図５】装耳部および音源方向指示部をメガネに構成した例を示す図である。
【図６】振動発生装置の構成を示す図である。
【図７】電圧発生装置の構成を示す図である。
【図８】香り合成装置の構成を示す図である。
【図９】食品合成装置の構成を示す図である。
【符号の説明】
１−装耳部
２−信号処理部
３−音源方向指示部
１１Ｒ、１１Ｌ−マイクロホン
１２Ｒ、１２Ｌ−レシーバ
２８−音源方向推定部
【図１】
0003948066.tif 000002
【図２】
0003948066.tif 000003
【図３】
0003948066.tif 000004
【図４】
0003948066.tif 000005
【図５】
0003948066.tif 000006
【図６】
0003948066.tif 000007
【図７】
0003948066.tif 000008
【図８】
0003948066.tif 000009
【図９】
0003948066.tif 000010