(57)【要約】【課題】利用者の操作作業を介在させずに、複数の音声入力手段が搭載された車両において、音声認識の感度を従来技術よりも向上させる。【解決手段】車両における複数箇所にそれぞれ搭載される複数の音声入力手段１，２と、音声信号に対する言語情報について保持する音声辞書部７と、音声入力手段１，２を通じて入力された音声信号についての音声認識を、該音声辞書部を参照することにより行なう音声認識部６と、上記車両内における乗員又は該車両外部の人員の状態、又は上記車両の状態について検出する状態検出部４と、状態検出部４における検出結果に応じて、複数の音声入力手段１，２の動作状態および音声辞書部７における認識候補の設定状態のうちのいずれか一方又は双方を切り替える切り替え制御部５と、をそなえる。【選択図】図１
2007298592.tif 000002
【特許請求の範囲】
【請求項１】
車両における複数箇所にそれぞれ搭載される複数の音声入力手段と、
音声信号に対する言語情報について保持する音声辞書部と、
該音声入力手段を通じて入力された音声信号についての音声認識を、該音声辞書部を参照することにより行なう音声認識部と、
上記車両内における乗員又は該車両外部の人員の状態、又は上記車両の状態について検出する状態検出部と、
該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちのいずれか一方又は双方を切り替える切り替え制御部と、をそなえて構成されたことを特徴とする、音声処理装置。
【請求項２】
該複数の音声入力手段として、上記車両の外部における音声を集音する外部音声入力手段と、上記車両の室内における音声を集音する室内音声入力手段と、をそなえるとともに、
該状態検出部が、上記車両のシートへの乗員の着座を検出する着座検出部をそなえ、
かつ、該切り替え制御部が、
該着座検出部からの検出結果に基づき、該着座検出部において上記乗員の着座を検出するまでは、該外部音声入力手段および該室内音声入力手段のうちで該外部音声入力手段からの音声信号を該音声認識部へ出力する一方、該着座検出部において上記乗員の着座を検出すると、該外部音声入力手段および該室内音声入力手段のうちで該室内音声入力手段からの音声信号を該音声認識部へ出力すべく、該複数の音声入力手段の動作状態を切り替えるとともに、
該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることを特徴とする、請求項１記載の音声処理装置。
【請求項３】
該状態検出部が、該車両の施錠および施錠解除の状態を検出する施錠状態検出部を更にそなえ、
かつ、該切り替え制御部が、
該施錠状態検出部での検出結果に基づいて、該車両の施錠状態においては、車両外部のいたずら検知用の言語群を優先して認識候補とする一方、
該施錠状態検出部および該着座検出部での検出結果に基づいて、該車両の施錠解除状態であって該着座検出部において上記乗員の着座を検出するまでは、該音声辞書部における認識候補の設定状態を、乗車サポートのための言語群を優先して認識候補とし、該着座検出部において上記乗員の着座を検出すると、車載機器操作用の言語群を優先して認識候補とすべく、該音声辞書部における認識候補の設定状態を切り替えることを特徴とする、請求項２記載の音声処理装置。
【請求項４】
該切り替え制御部は、上記車両内における乗員又は該車両外部の人員の状態、又は上記車両の状態に応じて、認識候補とすべき言語群に優先度の重み付けの付与により、該音声辞書部における認識候補の設定状態を切り替えることを特徴とする、請求項１〜３のいずれか１項記載の音声処理装置。
【請求項５】
該音声辞書部は、上記車両内における乗員又は該車両外部の人員の状態、又は上記車両の状態に応じて、認識候補とすべき言語群をそれぞれ記憶する複数種類の辞書部をそなえ、
該切り替え制御部は、該状態検出部での検出結果に基づいて、該複数種類の辞書部のうちで、該音声認識部での音声認識において参照すべき辞書部を切り替えることにより、該音声辞書部における認識候補の設定状態を切り替えることを特徴とする、請求項１〜３のいずれか１項記載の音声処理装置。
【請求項６】
上記車両の室内の複数箇所に該音声入力手段がそなえられるとともに、
該状態検出部が、上記車両のシートに着座した乗員の顔向きを検出する顔向き検出部をそなえ、
かつ、該切り替え制御部が、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちの双方を切り替えるべく、
該顔向き検出部での検出結果に基づいて、該室内に複数箇所そなえられた音声入力手段の動作状態を切り替えるとともに、
該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることを特徴とする、請求項１〜５のいずれか１項記載の音声処理装置。
【請求項７】
上記車両の室内の複数箇所に該音声入力手段がそなえられるとともに、
該状態検出部が、上記車両のシートに着座した乗員の体重を検出する体重検出部をそなえ、
かつ、該切り替え制御部が、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちの双方を切り替えるべく、
該体重検出部での検出結果に基づいて、該音声入力手段の動作状態を切り替えるとともに、
該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることを特徴とする、請求項１〜５のいずれか１項記載の音声処理装置。
【請求項８】
上記車両の室内の複数箇所に該音声入力手段がそなえられるとともに、
該状態検出部が、上記車両の車速を検出する車速検出部をそなえ、
かつ、該切り替え制御部が、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちの双方を切り替えるべく、
該車速検出部での検出結果に基づいて、該音声入力手段の動作状態を切り替えるとともに、
該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることを特徴とする、請求項１〜５のいずれか１項記載の音声処理装置。
【請求項９】
上記車両の室内の複数箇所に該音声入力手段がそなえられるとともに、
該状態検出部が、上記乗員が着座しているシートの向きを検出するシート向き検出部をそなえ、
かつ、該切り替え制御部が、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちの双方を切り替えるべく、
該シート向き検出部での検出結果に基づいて、該音声入力手段の動作状態を切り替えるとともに、
該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることを特徴とする、請求項１〜５のいずれか１項記載の音声処理装置。
【請求項１０】
上記車両の室内の複数箇所に該音声入力手段がそなえられるとともに、
該状態検出部が、上記乗員の口が動いたことを検出する口動き検出部をそなえ、
かつ、該切り替え制御部が、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちの双方を切り替えるべく、
該口動き検出部での検出結果に基づいて、該口が動いたことが検出された乗員の乗車位置に応じて、該室内に複数箇所にそなえられた音声入力手段の動作状態を切り替えるとともに、
該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることを特徴とする、請求項１〜５のいずれか１項記載の音声処理装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、音声認識に基づいて車両設備における各種操作を行なう際に用いて好適の、音声処理装置に
関するものである。
【背景技術】
【０００２】
近年、車両設備について操作を行なう場合に、操作者が発した音声を、操作についての言語命令として認識するとともに、認識した言語命令に応じた操作がなされるようにして、利用者の操作作業を削減するシステムについての開発が進められている。
たとえば、以下の特許文献１においては、マイクロフォンからの音声信号をもとにドアの施錠・解錠等のコマンドを認識して車両制御を行なう技術について記載されている。そして、この特許文献１にて記載された技術においては、利用者の使い勝手のため、車室内・外にそれぞれ１又は複数のマイクロフォンをそなえることで、使用者が車両の外からでも中からでも音声を入力できるようにしている。
【特許文献１】特開２０００−８０８２８号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかしながら、上述の特許文献１に記載された技術においては、複数のマイクロフォンを同時使用する場合には、利用者がいる位置からの集音効率（又は集音の感度）の良好な位置に搭載されたマイクロフォンだけでなく、利用者の位置からの集音効率の比較的低い位置に搭載されたマイクロフォンからの音声信号を入力されるようになる。この場合においては音声認識を行なう機能部においては、入力される音声信号の信号対雑音比（Ｓ／Ｎ比）を向上させることに支障を来たし、結果として音声信号の認識性能の向上に支障を来すことになるという課題がある。
【０００４】
また、この特許文献１には、スイッチ操作によりマイクロフォンを動作させる技術についても記載されているが、音声入力手段自身の動作のために操作が必要となるものであり、利用者の操作作業を増やしてしまうという課題もある。
本発明は、このような課題に鑑み創案されたもので、利用者の操作作業を介在させずに、複数の音声入力手段が搭載された車両において、音声認識の感度を従来技術よりも向上させることを目的とする。
【課題を解決するための手段】
【０００５】
このため、本発明の音声処理装置は、車両における複数箇所にそれぞれ搭載される複数の音声入力手段と、音声信号に対する言語情報について保持する音声辞書部と、該音声入力手段を通じて入力された音声信号についての音声認識を、該音声辞書部を参照することにより行なう音声認識部と、上記車両内における乗員又は該車両外部の人員の状態、又は上記車両の状態について検出する状態検出部と、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちのいずれか一方又は双方を切り替える切り替え制御部と、をそなえて構成されたことを特徴としている。
【０００６】
この場合においては、好ましくは、該複数の音声入力手段として、上記車両の外部における音声を集音する外部音声入力手段と、上記車両の室内における音声を集音する室内音声入力手段と、をそなえるとともに、該状態検出部が、上記車両のシートへの乗員の着座を検出する着座検出部をそなえ、かつ、該切り替え制御部が、該着座検出部からの検出結果に基づき、該着座検出部において上記乗員の着座を検出するまでは、該外部音声入力手段および該室内音声入力手段のうちで該外部音声入力手段からの音声信号を該音声認識部へ出力する一方、該着座検出部において上記乗員の着座を検出すると、該外部音声入力手段および該室内音声入力手段のうちで該室内音声入力手段からの音声信号を該音声認識部へ出力すべく、該複数の音声入力手段の動作状態を切り替えるとともに、該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることとしてもよい。
【０００７】
また、該状態検出部が、該車両の施錠および施錠解除の状態を検出する施錠状態検出部を更にそなえ、かつ、該切り替え制御部が、該施錠状態検出部での検出結果に基づいて、該車両の施錠状態においては、車両外部のいたずら検知用の言語群を優先して認識候補とする一方、該施錠状態検出部および該着座検出部での検出結果に基づいて、該車両の施錠解除状態であって該着座検出部において上記乗員の着座を検出するまでは、該音声辞書部における認識候補の設定状態を、乗車サポートのための言語群を優先して認識候補とし、該着座検出部において上記乗員の着座を検出すると、車載機器操作用の言語群を優先して認識候補とすべく、該音声辞書部における認識候補の設定状態を切り替えることもできる。
【０００８】
さらに、該切り替え制御部は、上記車両内における乗員又は該車両外部の人員の状態、又は上記車両の状態に応じて、認識候補とすべき言語群に優先度の重み付けの付与により、該音声辞書部における認識候補の設定状態を切り替えることとしてもよい。
また、該音声辞書部は、上記車両内における乗員又は該車両外部の人員の状態、又は上記車両の状態に応じて、認識候補とすべき言語群をそれぞれ記憶する複数種類の辞書部をそなえ、該切り替え制御部は、該状態検出部での検出結果に基づいて、該複数種類の辞書部のうちで、該音声認識部での音声認識において参照すべき辞書部を切り替えることにより、該音声辞書部における認識候補の設定状態を切り替えることもできる。
【０００９】
さらに、上記車両の室内の複数箇所に該音声入力手段がそなえられるとともに、該状態検出部が、上記車両のシートに着座した乗員の顔向きを検出する顔向き検出部をそなえ、かつ、該切り替え制御部が、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちの双方を切り替えるべく、該顔向き検出部での検出結果に基づいて、該室内に複数箇所そなえられた音声入力手段の動作状態を切り替えるとともに、該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることとしてもよい。
【００１０】
また、上記車両の室内の複数箇所に該音声入力手段がそなえられるとともに、該状態検出部が、上記車両のシートに着座した乗員の体重を検出する体重検出部をそなえ、かつ、該切り替え制御部が、該体重検出部での検出結果に基づいて、該音声入力手段の動作状態を切り替えるとともに、該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることもできる。
【００１１】
さらに、上記車両の室内の複数箇所に該音声入力手段がそなえられるとともに、該状態検出部が、上記車両の車速を検出する車速検出部をそなえ、かつ、該切り替え制御部が、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちの双方を切り替えるべく、該車速検出部での検出結果に基づいて、該音声入力手段の動作状態を切り替えるとともに、該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることとしてもよい。
【００１２】
また、上記車両の室内の複数箇所に該音声入力手段がそなえられるとともに、該状態検出部が、上記乗員が着座しているシートの向きを検出するシート向き検出部をそなえ、かつ、該切り替え制御部が、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちの双方を切り替えるべく、該シート向き検出部での検出結果に基づいて、該音声入力手段の動作状態を切り替えるとともに、該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることもできる。
【００１３】
さらに、上記車両の室内の複数箇所に該音声入力手段がそなえられるとともに、該状態検出部が、上記乗員の口が動いたことを検出する口動き検出部をそなえ、かつ、該切り替え制御部が、該状態検出部における検出結果に応じて、該複数の音声入力手段の動作状態および該音声辞書部における認識候補の設定状態のうちの双方を切り替えるべく、該口動き検出部での検出結果に基づいて、該口が動いたことが検出された乗員の乗車位置に応じて、該室内に複数箇所にそなえられた音声入力手段の動作状態を切り替えるとともに、該音声入力手段の切り替え制御に連動して、該音声辞書部における認識候補の設定状態を切り替えることとしてもよい。
【発明の効果】
【００１４】
上述したように、本発明によれば、切り替え制御部により、センサ情報判定部における検出結果に応じて、マイクの動作状態および音声辞書部における認識候補の設定状態を切り替えることができるので、利用者の操作作業を介在させずに、複数のマイクが搭載された車両において、音声認識の感度を従来技術よりも向上させることができる利点がある。
【発明を実施するための最良の形態】
【００１５】
以下、図面を参照することにより、本発明の実施の形態について説明する。
なお、上述の本願発明の目的のほか、他の技術的課題，その技術的課題を解決する手段及び作用効果についても、以下の実施の形態による開示によって明らかとなる。
〔Ａ〕本発明の一実施形態の説明
図１は本発明の一実施形態にかかる音声処理装置１０を示すブロック図である。この図１に示す音声処理装置１０は、車両９に搭載されて、車両９の利用者の発した音声信号を取り込むとともに、この音声により、車両９の設備を操作するためのコマンドを認識することができるようになっている。即ち、認識された音声によるコマンド（音声コマンド）に応じて、車両９についての各種設備の制御を行なうことができるようになっている。
【００１６】
ここで、この図１に示す音声処理装置１０は、車両９における複数箇所にそれぞれ搭載される複数の（図１中では２個の）音声入力手段としてのマイク１，２とともに、センサ部３，センサ情報判定部４，切り替え制御部５，音声認識エンジン６および音声辞書部７をそなえている。
ここで、マイク１は、車両９の外部における音声を集音する外部音声入力手段としての車外用マイクであり、マイク２は、車両９の室内における音声を集音する室内音声入力手段としての車内用マイクである。図１中においては、これらのマイク１，２は１個ずつそなえられているが、本発明によれば、適宜複数箇所にそれぞれ搭載することとしてもよい。例えば、車内用のマイク１については、例えば図８に示すマイク１−１，１−２のように、座席位置ごとに設けることとしたり、図９に示すマイク１１〜１３のように、同一座席内でも高さ等が異なる位置に分けて配置したりして、乗員の座席位置、座高や顔の向き等によらずに音声認識に必要なレベルの音声を集音できるようにしてもよい。
【００１７】
なお、本実施形態においては、車両９の外部におけるマイク１は、車両９内に人員が乗っていない状態においては、常時電源が供給されて、車両９の外部音声を集音することができるようになっている。
また、カメラ８は、車両９の室内における各座席に座っている乗員ごとに口の動きを監視するものであって、乗員の口が動いたことを検出する口動き検出部を構成する。例えば図８に示すように、車両９における各座席に対応して複数個設置することができるようになっている。尚、図８中、８−１は運転席用のカメラ、８−２は後部右側座席用のカメラ、１−１は運転席用のマイク、１−２は後部右側座席用のマイクである。
【００１８】
また、センサ部３は、車両９にそなえられたシートごとに乗員の着座による荷重を検出するための信号を出力する荷重センサ３ａ，車両９における施錠状態および解錠状態を検出するための信号を出力する施錠／解錠センサ３ｂ，車両９におけるドアの開状態および閉状態を検出するための信号を出力するドア開閉センサ３ｃ，その他図示しないブレーキ、エンジンの作動状態や走行状態等を検出するための信号を出力するセンサをそなえている。特に、荷重センサ３ａは、車両９のシートへの乗員の着座を検出する着座検出部であり、施錠／解錠センサ３ｃは、車両９の施錠および施錠解除の状態を検出する施錠状態検出部である。
【００１９】
また、センサ情報判定部４は、人員が音声コマンドにより各種操作を行なう際の当該利用シチュエーション（利用シーン）を、センサ部３から入力される信号や、マイク１，２からの音声信号や、車両９の室内における座席ごとの乗員の口の動きを監視するカメラ８からの監視情報に基づいて判定するものである。
具体的には、センサ情報判定部４においては、荷重センサ３ａで検出された各シートの荷重検出結果をもとに、着座している乗員位置について検出するようになっている。そして、上述の施錠／解錠センサ３ｂおよびドア開閉センサ３ｃからの各検出情報とともに、マイク１，２からの音声信号およびカメラ８からの監視情報についても入力されて、これらのセンサ３ａ〜３ｃ，マイク１，２からの音声信号およびカメラ８からの監視情報をもとに、車両９の状態について検出する。
【００２０】
すなわち、センサ情報判定部４においては、施錠／解錠センサ３ｂ，ドア開閉センサ３ｃ，その他のセンサからの信号に基づいて、車両９の状態についても検出するようになっている。更に、荷重センサ３ａ，施錠／解錠センサ３ｂおよびドア開閉センサ３ｃからの検出信号に基づいて、車両９内に乗っている人員の有無について検出するとともに、車両９内に人員が乗っていない場合には、マイク１からの音声信号をもとに車両９外部の人員の状態を検出するようになっている。
【００２１】
加えて、車両９に人員が乗っている場合には、荷重センサ３ａからの検出信号をもとに乗員の着座位置状態について検出し、カメラ８の監視情報に基づいて各乗員の口の動き、即ち発声動作を検出することができる。
したがって、上述のセンサ情報判定部４により、車両９内における乗員又は車両９外部の人員の状態、又は上記車両の状態について検出する状態検出部を構成する。
【００２２】
また、音声辞書部７は、音声コマンドの音声波形モデルに対するテキスト情報等の言語（語彙）データを保持するものであり、音声認識エンジン６は、マイク１，２を通じて入力された音声信号についての音声認識を、音声辞書部７の内容を参照することにより行なうものであり、音声認識部として機能する。換言すれば、音声辞書部７は、音声認識エンジン６において認識可能な語彙を蓄積するものである。
【００２３】
たとえば、利用者により車外から「開け」等の言葉が発声された場合において、マイク１においてこれを集音した音声信号が音声認識エンジン６に入力される。そして、音声認識エンジン６では、音声辞書部７に入力されている語彙のうちで、利用者から発声された言葉「開け」をなす音声信号波形に最も近い音声信号波形を検索し、検索結果を音声認識結果として出力する。
【００２４】
すなわち、入力された音声信号波形と、音声辞書部７に記憶されている語彙についての音声波形モデルと、の近似度合いを距離として算出し、算出した距離が所定距離より小さいものについて認識結果として出力する。この音声認識処理においては、算出した距離が最小のものを認識結果として出力することとしてもよいし、算出した距離があらかじめ設定された所定距離よりも小さいいくつかの候補を出力するとともに、これらのうちのいずれかを操作コマンドとして利用者に選択させるようにしてもよい。
【００２５】
さらに、切り替え制御部５は、状態検出部をなすセンサ情報判定部４における検出結果に応じて、複数のマイク１，２の動作状態および音声辞書部７における認識候補の設定状態のうちのいずれか一方又は双方を切り替えるものである。具体的には、荷重センサ３ａからの検出結果に基づき、荷重センサ３ａにおいて上記乗員の着座を検出するまでは、マイク１からの音声信号を音声認識エンジン６へ出力する一方、荷重センサ３ａにおいて乗員の着座を検出すると、マイク２からの音声信号を音声認識エンジン６へ出力すべく、マイク１，２の動作状態を切り替えるようになっている。
【００２６】
すなわち、集音対象となる人員が存在する位置をセンサ情報判定部４において検出した上で、当該人員が存在する位置からの集音効率が良好なマイク１，２のみを動作状態とし、他のマイクについては動作停止状態とすることができる。即ち、利用シーンに合わせて自動で入力対象のマイク１，２を切り替えることで、使用するマイクを利用者に意識させることなく、音声認識エンジン６への音声信号のＳ／Ｎ比を向上させることができるので、音声認識エンジン６においては高い認識性能を確保することができる。
【００２７】
さらに、切り替え制御部５においては、音声辞書部７における認識候補の設定状態について切り替え制御を行なう行なうことができるようになっている。即ち、切り替え制御部５において、音声辞書部７に記憶されている音声コマンドのうちで、センサ情報判定部４において検出した人員が存在する位置から、当該位置の人員が発する可能性の高い音声コマンドを、優先度の高い認識候補として設定すべく音声認識エンジン６を制御することができるようになっている。
【００２８】
また、上述のマイク１，２の切り替え制御に連動して、音声辞書部７における認識候補の設定状態について切り替えることもできるようになっている。
前述したように、音声認識エンジン６においては、マイク１又はマイク２で集音された音声信号を切り替え制御部５を介して入力されると、この音声信号の波形と、音声辞書部７において記憶されている各音声信号波形モデルとの近似度を距離として算出し、最も近似度の高い言語データを認識結果として出力するようになっている。このとき、切り替え制御部５においては、センサ情報判定部４において検出される車両９の状態および人員の状態に応じて、音声認識エンジン６に切り替え制御信号を出力することにより、音声認識エンジン６において参照する音声辞書部７における語彙範囲の設定を切り替えることができるようになっている。
【００２９】
すなわち、音声認識エンジン６においては、切り替え制御部５からの切り替え制御信号をもとに、（センサ情報判定部４において検出される）人員または車両９の状態に応じて、当該人員が発声する可能性の高い音声コマンドについては、算出される距離の値が少なくなる重みを付与しておくことができる。このような重み付けを付与しておくことで、当該状況において人員から発せられる可能性の高い音声コマンドに対する認識精度を向上させることができる。
【００３０】
この重み付けとしては、例えば、音声認識エンジン６において、上述の入力音声信号の波形と、当該人員が発する可能性の高い音声コマンドをあらわす音声信号波形モデルとの近似度を表す距離の算出に際して、あらかじめ算出結果となる距離を減らすような値を設定しておくことにより行なう。
たとえば、車両９の車内に人員が存在しないような場合には、車外の人員からの音声コマンドが認識対象に限定される場面であり、このような場合には、ドアを開けること等の、主として車両９への乗車サポートを目的とした音声コマンドが車外の人員から発せられる可能性が高い反面、車内のナビゲーション装置や、オーディオ機器等の、車内の機器の操作を目的とした音声コマンドについては発せられる可能性が低い。
【００３１】
したがって、このような場面においては、切り替え制御部５からの切り替え制御信号により、音声辞書部７に格納する語彙のうちで、車外の人員から発せられる可能性の高い乗車サポートを目的とした音声コマンドをあらわす語彙を検索対象となるように音声認識エンジン６が設定される。
また、車両９の車内に人員が存在し走行中にあるような場合には、乗車サポートを目的とした音声コマンドが発せられる可能性は低く、車内の機器の操作を目的とした音声コマンドが発せられる可能性が高い。このような場合には、切り替え制御部５からの切り替え制御信号により、音声辞書部７に格納する語彙のうちで、車内の人員から発せられる可能性の高い車内の機器の操作を目的とした音声コマンドをあらわす語彙を検索対象となるように音声認識エンジン６が設定される。
【００３２】
さらに、車内に乗車している人員の位置によっても、上述の重み付け等により、検索対象となる語彙を切り替えて設定することも可能である。例えば、運転席に人員が乗車している場合には、ナビゲーション装置についての操作を目的とする音声コマンドを他のカテゴリのコマンドに優先して検索するようにしたり、助手席に人員が乗車している場合には、テレビジョンその他オーディオ機器についての操作を目的とした音声コマンドを表す語彙を他のカテゴリのコマンドに優先して検索するようにしたり、後部座席に人員が乗車している場合には、空調設備についての操作を目的とする音声コマンドを他のカテゴリのコマンドに優先して検索したりしてもよい。
【００３３】
これにより、音声認識エンジン６においては、センサ情報判定部４において検出される利用シチュエーションに応じて、人員から発せられる可能性の高い音声コマンド群を音声辞書部７の検索対象言語群としてあらかじめ設定しておくことで、認識精度を格段に向上させることができるようになる。
なお、音声認識エンジン６においては、当該人員が発する可能性の高い音声コマンドについての辞書データ群を、センサ情報判定部４からの判定結果に応じてアドレスにより管理することで、切り替え制御部５からの切り替え制御信号に応じて検索対象の切り替えを行なうこととしてもよい。
【００３４】
この場合においては、音声辞書部７は、上記車両９内における乗員又は車両９外部の人員の状態、又は車両９の状態に応じて、認識候補とすべき言語群をそれぞれ記憶する複数種類の辞書部により構成されて、切り替え制御部５は、センサ情報判定部４での検出結果に基づいて、複数種類の辞書部のうちで、音声認識エンジン６での音声認識において参照すべき辞書部を切り替えることにより、音声辞書部７における認識候補の設定状態を切り替える。
【００３５】
上述のごとく構成された音声処理装置１０の動作を、図２，図３および図５に示すフローチャートを用いて説明する。図２は、切り替え制御部５において、入力音声信号を音声認識エンジン６へ供給するためのマイク１，２の切り替えとともに、音声辞書部７における認識候補の設定状態を切り替える動作について説明するための図である。
まず、車両９が駐車状態にあり、内部において人員が乗車しておらず、施錠がされている場合においては（図７のシーン［１］参照）、切り替え制御部５により、車内用マイク２についてはオフとされる一方車外用マイク１についてはオンとされて必要最小限の電力消費とするとともに、音声認識エンジン６においては、車外において発生される音声についての音声認識を行なうようになっている。このとき、音声認識エンジン６においては、切り替え制御部５からの切り替え制御信号に基づいて、辞書データについての重み付け等の設定を切り替えることにより、音声辞書部７において記憶されるデータのうちで、前述のいたずら等の不正検知用の言語群である辞書データを検索対照として用いる（ステップＡ１）。
【００３６】
これにより、音声認識エンジン６においては、車両９に対してなされるいたずら等の不正が行われている場合に、これを車外マイク２の音声信号から認識することができるようになっている。そして、この音声認識エンジン６においていたずら等の不正が行われていることを認識した場合には（ステップＡ２のＹＥＳルート）、図示しない通信機能により車両９の所有者の携帯電話等に連絡をとることができる（ステップＡ３）。これにより、所有者不在時においても車両９の監視を行なうことができるので、車両のセキュリティの向上を図ることができる。
【００３７】
また、駐車状態にある車両９の施錠が解除されたことを施錠／解錠センサ３ｃからの信号を通じセンサ情報判定部４で検出すると（ステップＡ２のＮＯルートからステップＡ４のＹＥＳルート）、解錠操作を行なった人員からは続いて乗車サポート用の音声コマンドを表す言葉が発せられる可能性が高い。そこで、切り替え制御部５では、音声認識エンジン６に対して切り替え制御信号を出力することにより、音声認識エンジン６において検索を行なう対象となる辞書データを、乗車サポートを目的とするコマンドをあらわす語彙群のデータ、即ち乗車サポート用の辞書データを検索対象としている（ステップＡ５）。
【００３８】
そして、車外の人員から例えば言葉「ドアＯＰＥＮ」等のドアを開けるための音声コマンドが発声された場合には、音声辞書部７における検索対象語彙が絞られているので、音声認識エンジン６においては高い認識精度で音声コマンドを認識することができる。これにより、図示しないドア開閉機構を通じて自動でドアを開けることができる（ステップＡ６のＹＥＳルートからステップＡ７）。
【００３９】
また、上述のごとく音声コマンドによりドアを開けた場合、または車外の人員が音声コマンドによらずに手動でドアを開けた場合においては、センサ情報判定部４においては、荷重センサ３ａからの検出信号に基づいて、座席に人員が着座したか否かを判定する（ステップＡ７から、またはステップＡ６のＮＯルートからステップＡ８）。そして、切り替え制御部５においては、センサ情報判定部４からの上述の判定結果を受けて、マイク１，２および音声辞書部７における検索対象となるデータを切り替えている。
【００４０】
すなわち、座席に人員が座るまでは、音声認識エンジン６では上述の乗車サポート用の辞書データを検索対象としているが（ステップＡ８のＮＯルート）、座席に人員が座ったあとは（図７のシーン［２］参照）、切り替え制御部５ではマイク１，２の状態を切り替えるとともに、音声認識エンジン６において検索を行なう対象となる辞書データを切り替える（ステップＡ８のＹＥＳルートからステップＡ９）。
【００４１】
具体的には、切り替え制御部５では、車外用マイク１をオンとし車内用マイク２をオフとしている設定から、車外用マイク１をオフとし車内用マイク２をオンとする設定に切り替えるとともに、音声認識エンジン６に切り替え制御信号を出力することにより、ナビゲーション装置等の車載機器操作用のコマンドをあらわす語彙データを検索対象の辞書データに切り替える。
【００４２】
換言すれば、施錠／解錠センサ３ｃおよび荷重センサ３ａでの検出結果たる信号に基づいて、センサ情報判定部４で車両９の施錠解除状態であって乗員の着座を検出するまでは、音声辞書部７における認識候補の設定状態を、乗車サポートのための言語群を優先して認識候補とし、センサ情報判定部４で乗員の着座を検出すると、車載機器操作用の言語群を優先して認識候補とすべく、音声辞書部７における認識候補の設定状態を切り替える。
【００４３】
上述したように、乗員が車外にいる場合と車内にいる場合とで、重み付けの付与により、音声辞書部７での検索対象の辞書データを切り替えているが、音声辞書部７に付与されているアドレス等によって切り替える構成とすれば、車内用と車外用とで独立した音声辞書部を構成することができ、このようにすれば、同一の語彙によっても操作の異なるコマンドとすることも可能になる。例えば、車外にいるときに「オープン」と発声した場合にはドアが開くようにする一方、車内にいるときに「オープン」と発声した場合には窓が開くようにすることができるようになる。
【００４４】
ところで、音声コマンドを発声する乗員の着座位置に応じて、さらに図３に示すように検索対象の辞書データを切り替えることができる。即ち、カメラ８による車内の乗員の口の動きについての監視情報に基づいて、車内の座席のいずれかに座っている乗員が音声コマンドを発声した場合においては（ステップＢ１のＹＥＳルート）、センサ情報判定部４において音声コマンドを発した乗員の座席位置を特定するとともに、切り替え制御部５では、その乗員が座っている座席位置に応じて検索対象の辞書データを切り替える（ステップＢ２〜Ｂ６）。
【００４５】
このとき、センサ情報判定部４においては、発声を行なった乗員の座席位置の特定を行なうには、上述のカメラ８からの監視情報とともに、座席ごとに設置されているマイク１からの音圧レベルについても併用することもできる。このような乗員の口の動きがない場合においては、音声認識エンジン６では動作を止めておくこともできるので、リソース消費あるいは電力消費を抑制させることができる。
【００４６】
ここで、発声した乗員の座席位置が運転席である場合には（ステップＢ２の“運手席”ルート）、切り替え制御部５では、マイク１をオンとしマイク２をオフとする。特に座席ごとにマイク１が設置されている場合には、運転席の乗員の発声を集音するために設置されたマイク１からの音声信号を音声認識エンジン６に供給する（ステップＢ３）。
そして、運転席からの音声コマンドとして可能性の高いカテゴリのものを優先して検索対象とすべく切り替え制御信号を音声認識エンジン６に出力する。このとき、例えば図４に示すように、「目的地設定」、「住所」あるいは「電話番号」などのナビゲーション装置の操作のためのコマンド等を、運転席優先とすべき認識語彙として重みを付与するため、パラメータを音声認識エンジン６に設定する（ステップＢ３）。これにより、音声認識エンジン６による認識結果としては（ステップＢ４）、重みが付与された認識語彙に検索対象を絞ることができるので、認識の確からしさを向上させている。
【００４７】
同様に、発声した乗員の座席位置が助手席である場合には（ステップＢ２の“助手席”ルート）、切り替え制御部５では、マイク１をオンとしマイク２をオフとする。特に座席ごとにマイク１が設置されている場合には、助手席の乗員の発声を集音するために設置されたマイク１からの音声信号を音声認識エンジン６に供給する。
そして、助手席からの音声コマンドとして可能性の高いカテゴリのものを優先して検索対象とすべく切り替え制御信号を音声認識エンジン６に出力する。このとき、例えば図４に示すように、「４チャンネル」、「６チャンネル」あるいは「シークアップ」などのテレビジョン装置の操作のためのコマンド等を、助手席優先とすべき認識語彙として重みを付与するため、パラメータを音声認識エンジン６に設定する（ステップＢ５）。
【００４８】
さらに、発声した乗員の座席位置が後部座席である場合には（ステップＢ２の“後部座席”ルート）、切り替え制御部５では、マイク１をオンとしマイク２をオフとする。特に座席ごとにマイク１が設置されている場合には、後部座席の乗員の発声を集音するために設置されたマイク１からの音声信号を音声認識エンジン６に供給する。
そして、後部座席からの音声コマンドとして可能性の高いカテゴリのものを優先して検索対象とすべく切り替え制御信号を音声認識エンジン６に出力する。このとき、例えば図４に示すように、「２５度」、「２８度」あるいは「風量アップ」などのテレビジョン装置の操作のためのコマンド等を、助手席優先とすべき認識語彙として重みを付与するため、パラメータを音声認識エンジン６に設定する（ステップＢ６）。
【００４９】
ここで、上述の音声認識エンジン６においては、優先度の高い音声コマンドに対して図５に示すように重み付けが付与される。即ち、マイク１を通じて入力された音声信号が切り替え制御部５から入力されて、このマイク１からの音声信号についての音声認識を行なう旨の指示を受けると（ステップＣ１のＹＥＳルート）、音声認識エンジン６での音声認識処理が行なわれる。
【００５０】
このとき、当該切り替え制御部５からの切り替え制御信号による重み付け設定指示がある場合には、その内容に応じて検索対象とする辞書データを切り替える（ステップＣ２のＹＥＳルートからステップＣ３）。即ち、切り替え制御部５からの切り替え制御信号には、重み付け設定指示をすべき辞書データを構成する認識語彙についてのＩＤ（Identifier）情報とともに、重みとなる値についての情報（例えば図６に示す「−１００」等）を含めることができる。
【００５１】
この場合においては、切り替え制御部５では、図６に示すように、座席位置の乗員に対応して、優先すべき認識語彙群のＩＤおよび重みとなる値についての情報をパラメータ設定ファイルとして管理しておくことができる。そして、切り替え制御部５では、センサ情報判定部４からの信号により、音声コマンドを発した乗員の座席位置が特定された場合には、該当座席位置の乗員からの発声に対する音声認識処理のために、対応するパラメータ設定ファイルの情報を切り替え制御信号に含めて音声認識エンジン６に出力する。
【００５２】
そして、音声認識エンジン６においては、切り替え制御信号をパラメータ設定ファイルとして入力されて、このパラメータ設定ファイルに含まれる認識語彙についてのＩＤ情報および重みとなる値に従って、入力音声信号波形と検索対象語彙についての波形モデルとの近似度を示す距離の算出を行ない、近似度の高い（即ち距離の値の小さい）認識語彙を認識結果として出力するのである（ステップＣ４）。
【００５３】
また、当該切り替え制御部５からの切り替え制御信号による重み付け設定指示がない場合には、音声認識エンジン６においては、音声辞書部７における辞書データには重み付けを付与せずに、辞書データをなす全ての検索対象語彙についての波形モデルと、入力音声信号波形との距離の算出を通じて、認識結果を出力する（ステップＣ２のＮＯルートからステップＣ４）。
【００５４】
このように、本発明の一実施形態にかかる音声処理装置１０によれば、切り替え制御部５により、センサ情報判定部４における検出結果に応じて、マイク１，２の動作状態および音声辞書部７における認識候補の設定状態を切り替えることができるので、利用者の操作作業を介在させずに、複数のマイク１，２が搭載された車両９において、音声認識の感度を従来技術よりも向上させることができる利点がある。
【００５５】
〔Ｂ〕その他
上述した実施形態にかかわらず、本発明の趣旨を逸脱しない範囲において種々変形して実施することができる。
たとえば、図９に示すようにマイク１１〜１３のように、同一座席内でも高さ等が異なる位置に分けて配置する場合においても、カメラ８での監視情報を通じセンサ情報判定部４において乗員の顔向き判定することで、切り替え制御部５では、マイク１１〜１３のうちの動作状態とするのに最適なマイクを選択することができる。さらには、顔の向きに応じて、音声認識エンジン６での認識候補を切り替えることで、顔向きから注意が向けられている操作対象機器についての音声コマンドに検索対象を絞ることもできる。この場合においては、カメラ８は、車両９のシートに着座した乗員の顔向きを検出する顔向き検出部を構成する。
【００５６】
また、この図９に示すようなマイク１１〜１３の配置とする場合において、センサ情報判定部４では、図１０に示すように、荷重センサ３ａで検出される荷重値に応じて、乗員の身長を推定することで、切り替え制御部５では、この荷重値に応じて動作状態とすべきマイク１１〜１３を選択的に切り替えることもできる。
さらに、センサ部３として上記車両の車速を検出する車速センサ（車速検出部）を備えることとし、切り替え制御部５において、車速センサでの検出信号に基づくセンサ情報判定部４からの検出結果に基づいて、マイク１，２の動作状態を切り替えるとともに、マイク１，２の切り替え制御に連動して、音声辞書部７における認識候補の設定状態を切り替えることとしてもよい。このようにすれば、走行中は車外のマイク２をオフとし車内のマイク１をオンとするとともに、停止中は車外のマイク２をオンとして、省電力化を図ることができる。
【００５７】
また、上記乗員が着座しているシートの向きを検出するシート向き検出部としてのセンサをそなえることとすれば、切り替え制御部５においては、シート向き検出部としてのセンサでの検出結果に基づいて、室内に複数備えられたマイク１の動作状態を切り替えるとともに、マイク１の切り替え制御に連動して、音声辞書部における認識候補の設定状態を切り替えることとしてもよい。
【００５８】
この場合においては、例えばシートがドアの向きを向いている場合には、乗員の注意はセンターコンソールにある車載機器、例えばナビゲーション装置等には向いていないと想定できるので、ナビゲーション装置の操作のための音声コマンドについては検索対象から除外し、シートやドアの制御のための音声コマンドについて優先的に検索対象とする。これにより検索対象の語彙を絞ることができるので、上述の本実施形態の場合と同様の利点がある。
【００５９】
さらに、上述の本実施形態においては、解錠するまでの音声認識エンジン６の処理は適宜省略することもできる。このようにすれば、リソースの消費、電力消費を抑制させることができる。
また、窓の開閉中を検出するセンサをそなえることとすれば、開閉中の任意の発生により窓の開閉動作を停止させることができ、乗員の保護を更に厚くすることができる。
【００６０】
また、上述した実施形態の開示により、本発明の装置を製造することは可能である。
【図面の簡単な説明】
【００６１】
【図１】本発明の一実施形態における音声処理装置を示す機能ブロック図である。
【図２】本発明の一実施形態における音声処理装置の動作を説明するためのフローチャートである。
【図３】本発明の一実施形態における音声処理装置の動作を説明するためのフローチャートである。
【図４】本発明の一実施形態における音声処理装置での認識語彙の切り替えについて説明するための図である。
【図５】本発明の一実施形態における音声処理装置の動作を説明するためのフローチャートである。
【図６】本発明の一実施形態における音声処理装置での認識語彙の切り替えについて説明するための図である。
【図７】本発明の一実施形態における音声処理装置の動作を説明するための図である。
【図８】本発明の一実施形態にかかる音声処理装置のカメラおよびマイクの配置例を示す図である。
【図９】本発明の一実施形態にかかる音声処理装置のカメラおよびマイクの配置例を示す図である。
【図１０】本発明の一実施形態における音声処理装置の動作を説明するための図である。
【符号の説明】
【００６２】
１，１−１，１−２，２，１１〜１３    マイク（音声入力手段）
３    センサ部（状態検出部）
３ａ    荷重センサ
３ｂ    施錠／解錠センサ
３ｃ    ドア開閉センサ
４    センサ情報判定部（状態検出部）
５    切り替え制御部
６    音声認識エンジン（音声認識部）
７    音声辞書部
８，８−１，８−２    カメラ
９    車両
１０    音声処理装置
【図１】
2007298592.tif 000003
【図２】
2007298592.tif 000004
【図３】
2007298592.tif 000005
【図４】
2007298592.tif 000006
【図５】
2007298592.tif 000007
【図６】
2007298592.tif 000008
【図７】
2007298592.tif 000009
【図８】
2007298592.tif 000010
【図９】
2007298592.tif 000011
【図１０】
2007298592.tif 000012