(57)【要約】  本発明は、会話の非参加者に配慮しつつ、参加者が会話しやすいよう車室内の音場を制御することを目的とする。本発明の音場制御装置は、車両の乗員の着座位置を検出する乗員検出部（１１）と、乗員の中から車両の車室内で行われた会話の発話者と受話者を参加者として検出する参加者検出部（１４）と、車室内で会話が行われると、参加者の着座位置と参加者ではない乗員である非参加者の着座位置とに基づき、車室内に設けられた複数のスピーカ（２２）による音場を制御する音場制御部（１５）と、を備える。
2020016927.tif 000002
【特許請求の範囲】
【請求項１】
車両の乗員の着座位置を検出する乗員検出部と、
前記乗員の中から前記車両の車室内で行われた会話の発話者と受話者を参加者として検出する参加者検出部と、
前記車室内で会話が行われると、前記参加者の着座位置と前記参加者ではない前記乗員である非参加者の着座位置とに基づき、前記車室内に設けられた複数のスピーカによる音場を制御する音場制御部と、を備える、
音場制御装置。
【請求項２】
前記音場制御部は、制御前に比べて、前記音場による前記非参加者の着座位置における音量が小さくなることなく、前記音場による前記参加者の着座位置における音量が小さくなるように、前記音場を制御する、
請求項１に記載の音場制御装置。
【請求項３】
複数の前記スピーカは前記車両の着座位置に対応して設けられており、
前記音場制御部は、前記参加者の着座位置に対応する前記スピーカの音量を前記非参加者の着座位置に対応する前記スピーカの音量より小さくする、
請求項１に記載の音場制御装置。
【請求項４】
前記参加者検出部は、現在または過去の所定期間内に前記車室内で行われた会話の発話者と受話者を前記参加者として検出する、
請求項１に記載の音場制御装置。
【請求項５】
前記参加者検出部は、前記発話者の視線の先に着座する乗員を、前記受話者である前記参加者として検出する、
請求項４に記載の音場制御装置。
【請求項６】
前記参加者検出部は、前記乗員とキーワードが対応付けられた個人情報を参照し、前記発話者が発話したキーワードに対応する前記乗員を前記受話者である前記参加者として検出する、
請求項１に記載の音場制御装置。
【請求項７】
前記乗員が歌唱していることを検出する歌唱検出部をさらに備え、
前記参加者検出部は、歌唱している前記乗員を前記参加者として検出しない、
請求項１に記載の音場制御装置。
【請求項８】
前記参加者検出部は、前記乗員の身体の動きに基づき、前記受話者である前記参加者の検出を行う、
請求項１に記載の音場制御装置。
【請求項９】
前記参加者検出部は、前記音場制御部による音場制御後の前記乗員の表情に基づき、前記参加者の検出結果を更新する、
請求項１に記載の音場制御装置。
【請求項１０】
車両の乗員の着座位置を検出し、
前記乗員の中から前記車両の車室内で行われた会話の発話者と受話者を参加者として検出し、
前記車室内で会話が行われると、前記参加者の着座位置と前記参加者ではない前記乗員である非参加者の着座位置とに基づき、前記車室内に設けられた複数のスピーカによる音場を制御する、
音場制御方法。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、車室内の音場制御に関する。
【背景技術】
【０００２】
特許文献１には、車両の乗員の会話を検出し、検出結果に応じてスピーカの音量を調整する技術が開示されている。この技術では、車室内の撮影映像から乗員の口の動きを認識することにより発話者の座席を特定する。そして、オーディオの音量を下げると共に、発話者の座席の近傍のスピーカの音量を下げる制御が行われる。これにより、車両全体において発話者の発話が聞き取りやすくなる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１０−２３６３９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかし、特許文献１の技術は、会話に参加していない乗員を考慮しないため、会話に参加せずオーディオコンテンツ等を楽しんでいる乗員にとっても、オーディオコンテンツ等の音量が小さくなってしまい、コンテンツ聴収の利便性が損なわれてしまうという問題がある。【０００５】
本発明は、上記の問題点を解決するためになされたものであり、会話の非参加者に配慮しつつ、会話者が会話しやすいよう車室内のスピーカによる音場を制御することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の音場制御装置は、車両の乗員の着座位置を検出する乗員検出部と、乗員の中から車両の車室内で行われた会話の発話者と受話者を参加者として検出する参加者検出部と、車室内で会話が行われると、参加者の着座位置と参加者ではない乗員である非参加者の着座位置とに基づき、車室内に設けられた複数のスピーカによる音場を制御する音場制御部と、を備える。【０００７】
本発明の音場制御方法は、車両の乗員の着座位置を検出し、乗員の中から車両の車室内で行われた会話の発話者と受話者を参加者として検出し、車室内で会話が行われると、参加者の着座位置と参加者ではない乗員である非参加者の着座位置とに基づき、車室内に設けられた複数のスピーカによる音場を制御する。
【発明の効果】
【０００８】
本発明によれば、会話の参加者の着座位置と非参加者の着座位置とに基づき車室内の音場が制御されるため、非参加者に配慮しつつ、参加者が会話をしやすいよう車室内の音場を制御することができる。本発明の目的、特徴、態様、および利点は、以下の詳細な説明と添付図面とによって、より明白となる。
【図面の簡単な説明】
【０００９】
【図１】実施の形態１の音場制御装置の構成を示すブロック図である。
【図２】実施の形態１の音場制御装置の構成図である。
【図３】実施の形態１の音場制御装置の動作を示すフローチャートである。
【図４】実施の形態２の音場制御装置の構成を示すブロック図である。
【図５】実施の形態２の音場制御装置の動作を示すフローチャートである。
【図６】実施の形態３の音場制御装置の構成を示すブロック図である。
【図７】実施の形態４の音場制御装置の構成を示すブロック図である。
【図８】実施の形態４の音場制御装置の発話者検出部の構成を示すブロック図である。
【図９】音場制御装置のハードウェア構成を示す図である。
【図１０】音場制御装置のハードウェア構成を示す図である。
【図１１】車両とサーバによる実施の形態２の音場制御装置の構成を示すブロック図である。
【発明を実施するための形態】
【００１０】
＜Ａ．実施の形態１＞
＜Ａ−１．構成＞
図１は、実施の形態１の音場制御装置１０１の構成を示すブロック図である。音場制御装置１０１は、乗員検出部１１、発話者検出部１２Ａ、受話者検出部１３、参加者検出部１４および音場制御部１５を備えている。
【００１１】
音場制御装置１０１は、音響装置２１と接続され、これを利用可能に構成されている。音響装置２１は、例えばラジオ放送などのオーディオコンテンツを再生または受信する装置であり、スピーカ２２からこれらのオーディオコンテンツの音声を出力する。音響装置２１とスピーカ２２は車両に搭載されており、音場制御装置１０１はスピーカ２２による車両の室内の音場を制御するものである。
【００１２】
なお、本明細書で「車両に搭載された装置」とは、恒常的に搭載されるもののほか、取り外し可能であり必要に応じて車両に持ち込まれて使用されるものを含む。
【００１３】
図２は、車両の構成を示している。音場制御装置１０１が音場を制御する車両には、複数のスピーカ２２が設置されている。図２では、運転席、助手席、および後部左座席に乗員３０Ａ，３０Ｂ，３０Ｃが着座しており、車両の前方右側にスピーカ２２ＦＲ、前方左側にスピーカ２２ＦＬ、後方右側にスピーカ２２ＢＲ、後方左側にスピーカ２２ＢＬが設置されている様子を示している。しかし、スピーカ２２の数と設置場所はこれに限らない。スピーカ２２は、車室内の音場を制御するため少なくとも複数設置されていれば良い。また、車両にはマイクロフォン２３、カメラ２４および外部センサ２５が搭載されており、これらは参加者を検出するための装置である。
【００１４】
乗員検出部１１は、乗員の着座位置を検出するために、カメラ２４および外部センサ２５を用いる。具体的には、乗員検出部１１は、カメラ２４による車室内の撮影画像を解析することにより、乗員の着座位置を検出する。
【００１５】
外部センサ２５は、乗員の着座位置を検出するためのセンサであり、例えば車両の座席の座面または背もたれに設置された圧力センサである。あるいは、外部センサ２５は距離センサである。これらのセンサの検出情報を用いて、乗員検出部１１は乗員の着座位置を把握することができる。
【００１６】
発話者検出部１２Ａは、マイクロフォン２３とカメラ２４を用いて、発話者の着座位置を検出する。具体的には、発話者検出部１２Ａは、車室内の異なる２か所に設置されたマイクロフォン２３が発話音声を検知するタイミングのずれから、マイクロフォン２３に対する発話方向を取得し、当該発話方向と乗員の着座位置とを照合して、発話者の着座位置を検出する。あるいは、発話者検出部１２Ａは、カメラ２４による車室内の撮影画像から、乗員の口の動きを検出し、マイクロフォン２３で取得した発話音声に同期した口の動きをしている乗員を発話者と特定する。
【００１７】
受話者検出部１３は、マイクロフォン２３とカメラ２４を用いて、受話者の着座位置を検出する。具体的には、カメラ２４による車室内の撮影画像から、乗員の顔の動きを検出し、マイクロフォン２３で取得した発話音声に同期して頷いている乗員を受話者と特定する。このように、受話者検出部１３は、乗員の身体の動きに基づき、受話者の検出を行っても良い。あるいは、受話者検出部１３は発話者検出部１２Ａから発話者の着座位置を取得し、カメラ２４の撮影画像から発話者の視線を識別する。そして、発話者の視線方向に着座している乗員を受話者と特定しても良い。このとき、受話者検出部１３は、発話者がミラーに視線を向けている場合には、ミラー越しに発話者の視線の先に着座している乗員を受話者と特定することも可能である。
【００１８】
参加者検出部１４は、発話者検出部１２Ａから発話者の着座位置の情報を取得し、受話者検出部１３から受話者の着座位置の情報を取得し、発話者と受話者の両方を参加者とする。また、参加者検出部１４は乗員検出部１１から各乗員の着座位置の情報を取得し、受話者以外の乗員を非参加者とする。そして、参加者検出部１４は参加者の着座位置と非参加者の着座位置を音場制御部１５に出力する。
【００１９】
なお、上記では、参加者を検出する方法として、マイクロフォン２３、カメラ２４および外部センサ２５を用いる方法を説明したが、必ずしもこれらの全てを用いなければならないわけではない。例えば、発話者検出部１２Ａはカメラ２４の撮影映像のみから発話者を検出しても良いし、受話者検出部１３も同様にカメラ２４の撮影映像のみから受話者を検出しても良い。
【００２０】
音場制御部１５は、参加者検出部１４から会話の参加者の着座位置の情報を取得し、これに基づきスピーカ２２による車室内の音場を制御する。音場制御部１５は、制御前に比べて、音場による非参加者の着座位置における可聴域の音量が小さくなることなく、音場による前記参加者の着座位置における可聴域の音量が小さくなるように、音場を制御する。この音場制御により、非参加者にとってはスピーカ２２から出力されるコンテンツの音量が小さくならないため、コンテンツの聴収が妨げられない一方で、参加者にとってはスピーカ２２から出力されるコンテンツの音量が小さくなるため、会話相手の音声が聞き取りやすくなり、会話がしやすくなる。
【００２１】
＜Ａ−２．動作＞
図３は、音場制御装置１０１の動作を示すフローチャートである。図３のフローは、例えば音響装置２１がスピーカ２２からの音声出力を行うと同時に開始する。まず、乗員検出部１１は、図１に図示しない車両のドアセンサ等から、ドアの開閉情報を取得し、ドアが開閉したか否かを判断する（ステップＳ１０１）。ドアの開閉とは、ドアが開いた後に閉じることである。ドアの開閉がなければ乗員検出部１１はステップＳ１０１を繰り返す。ドアの開閉があれば、乗員検出部１１は乗員の着座位置を検出する（ステップＳ１０２）。次に、発話者検出部１２Ａがマイクロフォン２３の検出信号を基に、車室内で発話が行われているかを判断する（ステップＳ１０３）。
【００２２】
ステップＳ１０３で発話がある場合、参加者検出部１４は参加者の着座位置を検出する（ステップＳ１０４）。本ステップでは具体的には、発話者検出部１２Ａが発話者の着座位置を検出し、受話者検出部１３が受話者の着座位置を検出し、それぞれ着座位置の情報を参加者検出部１４に出力する。そして、参加者検出部１４が発話者と受話者を会話の参加者として、その着座位置の情報を把握すると共に、参加者でない乗員の着座位置を非参加者の着座位置として把握する。
【００２３】
ステップＳ１０４で参加者を検出した後、あるいはステップＳ１０３で発話がない場合、音場制御装置１０１の処理はステップＳ１０５に移る。ステップＳ１０５では、音場制御部１５が参加者の着座位置に応じた音声出力制御を行う。具体的には、発話が行われておらず参加者が存在しない場合には、音場制御部１５は音場制御を行わない。従って、スピーカ２２はデフォルトの音場を車室内に形成する。一方、発話が行われている場合には、音場制御部１５は参加者検出部１４から参加者の着座位置の情報と非参加者の着座位置の情報を取得し、これらに基づき音場制御を行う。
【００２４】
この音場制御により、車室内の音場が各着座位置に与える音量は、制御前に比べて、非参加者の着座位置においては小さくなることなく、参加者の着座位置においては小さくなる。図２の例で、会話が行われていない場合、音場制御部１５は特段の音場制御を行わないため、スピーカ２２ＦＬ，２２ＦＲ，２２ＢＬ，２２ＢＲは均等な音量でコンテンツを出力する。そのため、乗員３０Ａ，３０Ｂ，３０Ｃはそれぞれ等しい音量でコンテンツを聴収する。一方、乗員３０Ａ，３０Ｃが会話の参加者で、乗員３０Ｂが非参加者である場合、音場制御部１５は、スピーカ２２ＦＬの音量をそのままに保ちつつ、スピーカ２２ＦＲ，２２ＢＬの音量を小さくする。このように、スピーカ２２が車両の各着座位置に対応して設けられている場合には、参加者の着座位置に対応するスピーカ２２の音量を、非参加者の着座位置に対応するスピーカ２２の音量より小さくすることが可能である。これにより、会話に参加していない乗員３０Ｂは、音場制御前と同じ音量でコンテンツを聴収することができる。また、会話に参加している乗員３０Ａ，３０Ｃがスピーカ２２ＦＲ，２２ＢＬから徴収するコンテンツの音量は小さくなるため、乗員３０Ａ，３０Ｃは互いの発話音声を聞き取りやすく、会話を円滑に行うことができる。
【００２５】
上記では音場制御の一例を示したが、他の音場制御を行っても良い。音場制御部１５は、非参加者の着座位置における音量を小さくすることなく、参加者の着座位置における音量が大きくなるように、音場制御を行えばよい。なお、上記で述べている音量とは、可聴域の音量である。
【００２６】
＜Ａ−３．変形例＞
上記では、参加者の検出結果に基づき音場制御部１５が音場制御を行うことについて説明した。参加者検出部１４は、音場制御部１５が音場制御を行った後、乗員の反応を基に参加者の検出結果を更新しても良い。具体的には、参加者検出部１４は、カメラ２４の撮影画像から音場制御後の乗員の表情を解析し、乗員が不快な表情をしている場合には、参加者の検出結果を逆にして更新する。例えば、音場制御装置１０１は、図２の乗員３０Ｂを参加者と検出して音場制御を行ったところ、乗員３０Ｂは実際には非参加者であり、スピーカ２２ＦＬの音量が小さくなったため不快な表情をしたとする。この場合、参加者検出部１４は、乗員３０Ｂを非参加者に更新し、音場制御部１５はスピーカ２２ＦＬの音量がデフォルトの音量まで大きくなるように、音場制御を更新する。
【００２７】
＜Ａ−４．効果＞
実施の形態１の音場制御装置１０１は、車両の乗員の着座位置を検出する乗員検出部１１と、乗員の中から車両の車室内で行われた会話の発話者と受話者を参加者として検出する参加者検出部１４と、車室内で会話が行われると、参加者の着座位置と参加者ではない乗員である非参加者の着座位置とに基づき、車室内に設けられた複数のスピーカ２２による音場を制御する音場制御部１５と、を備える。従って、音場制御装置１０１によれば、非参加者のコンテンツ等の聴収を妨げることなく、会話がしやすいように車室内の音場を制御することができる。
【００２８】
また、音場制御部１５は、制御前に比べて、音場による非参加者の着座位置における音量が小さくなることなく、音場による参加者の着座位置における音量が小さくなるように、音場を制御する。従って、音場制御装置１０１によれば、非参加者のコンテンツ等の聴収を妨げることなく、会話がしやすいように車室内の音場を制御することができる。
【００２９】
また、複数のスピーカ２２は車両の着座位置に対応して設けられている場合には、音場制御部１５は、参加者の着座位置に対応するスピーカの音量を非参加者の着座位置に対応するスピーカ２２の音量より小さくすることにより、非参加者のコンテンツ等の聴収を妨げることなく、会話がしやすいように車室内の音場を制御することができる。
【００３０】
また、参加者検出部１４は、音場制御部１５による音場制御後の乗員の表情に基づき、参加者の検出結果を更新する。この検出結果の更新に応じて音場制御を更新することにより、参加者の検出に誤りがある場合には修正が行われる。
【００３１】
＜Ｂ．実施の形態２＞
＜Ｂ−１．構成＞
図４は、実施の形態２の音場制御装置１０２の構成を示すブロック図である。音場制御装置１０２は、実施の形態１の音場制御装置１０１の構成に加えて発話者等登録部１６を備えている。発話者等登録部１６以外の音場制御装置１０２の構成は、音場制御装置１０１と同様である。音場制御装置１０２は、現在の会話の発話者と受話者だけでなく、過去の会話の発話者と受話者も参加者として認識することを特徴とする。
【００３２】
発話者検出部１２Ａは発話者の着座位置を検出すると、その情報を参加者検出部１４に出力する他、検出時刻の情報と共に発話者等登録部１６に登録する。また、受話者検出部１３は受話者の着座位置を検出すると、その情報を参加者検出部１４に出力する他、検出時刻の情報と共に発話者等登録部１６に登録する。参加者検出部１４は、発話者検出部１２Ａと受話者検出部１３から取得した現在の会話の発話者と受話者を参加者に設定すると共に、発話者等登録部１６に登録された過去の所定期間内、例えば過去１分以内の会話における発話者と受話者を参加者に設定する。
【００３３】
＜Ｂ−２．動作＞
図５は、音場制御装置１０２の動作を示すフローチャートである。図５のフローは、例えば音響装置２１がスピーカ２２からの音声出力を行うと同時に開始する。ステップＳ２０１からステップＳ２０４は、図３に示す実施の形態１のフローのステップＳ１０１からステップＳ１０４と同様であるため、それらの説明を省略する。ステップＳ２０３でＮｏの場合、またはステップＳ２０４の後、参加者検出部１４は発話者等登録部１６の登録情報を参照し、過去所定期間内、例えば過去１分以内に他の発話が有るか否かを判断する（ステップＳ２０５）。過去１分以内の発話について、発話者と受話者の着座位置の情報が発話者等登録部１６に登録されている場合には、ステップＳ２０５でＹｅｓとなり、参加者検出部１４は過去１分以内の発話の発話者と受話者を参加者に含める（ステップＳ２０６）。
【００３４】
過去１分以内の発話について、発話者と受話者の着座位置の情報が発話者等登録部１６に登録されていなければ、ステップＳ２０６は省略される。
【００３５】
次に、音場制御部１５が参加者の着座位置に応じた音場制御を行う（ステップＳ２０７）。ステップＳ２０７は、図３に示した実施の形態１のフローのステップＳ１０５と同様であるため、詳細な説明は省略する。
【００３６】
＜Ｂ−３．効果＞
実施の形態２の音場制御装置１０２では、参加者検出部１４は、現在または過去の所定期間内に車室内で行われた会話の発話者と受話者を参加者として検出する。従って、そのため、会話をやめた乗員に対しても、所定期間、例えば１分程度の間は、会話がしやすい音場制御が行われるため、会話を再開しやすくなる。
【００３７】
＜Ｃ．実施の形態３＞
＜Ｃ−１．構成＞
図６は、実施の形態３の音場制御装置１０３の構成を示すブロック図である。音場制御装置１０３は、実施の形態２の音場制御装置１０２の構成に加えて乗員登録部１７を備えている。乗員登録部１７以外の音場制御装置１０３の構成は、音場制御装置１０２と同様である。音場制御装置１０３は、予め乗員登録部１７に登録された乗員のキーワードを基に受話者を特定することを特徴とする。
【００３８】
乗員登録部１７には、乗員を個別に識別するためのキーワードが登録されている。このキーワードは、例えば乗員の氏名またはニックネームなどである。これらのキーワードは、図６に図示しないキーボードまたはタッチパネル等の入力装置を用いて乗員自身が予め入力し、乗員登録部１７に登録される。
【００３９】
受話者検出部１３は、マイクロフォン２３が検出した発話者の発話音声中に、乗員登録部１７に登録されたキーワードが含まれるか否かを判断する。発話音声中にキーワードが含まれる場合、受話者検出部１３は当該キーワードに対応する乗員を受話者として特定する。従って、参加者検出部１４は、発話者が発話したキーワードに対応する乗員を受話者である参加者として検出する。
【００４０】
＜Ｃ−２．効果＞
実施の形態３の音場制御装置１０３では、参加者検出部は、乗員とキーワードが対応付けられた個人情報を参照し、発話者が発話したキーワードに対応する乗員を受話者である参加者として検出する。従って、音場制御装置１０３によれば、発話者の視線の動きから受話者を特定できない場合、または受話者の挙動が明確でない場合でも、発話音声に含まれるキーワードから受話者を特定することが可能である。
【００４１】
＜Ｄ．実施の形態４＞
＜Ｄ−１．構成＞
図７は、実施の形態４の音場制御装置１０４の構成を示すブロック図である。音場制御装置１０４は、実施の形態３の音場制御装置１０３の構成において、発話者検出部１２Ａに代えて発話者検出部１２Ｂを備えている。音場制御装置１０４は、乗員が音響装置２１の再生コンテンツにあわせて歌唱している場合に、当該歌唱を会話の発話と区別することを特徴とする。
【００４２】
図８は、発話者検出部１２Ｂの構成を示すブロック図である。発話者検出部１２Ｂは、音程検出部１２１、顔認識部１２２および相関判断部１２３を備えている。発話者検出部１２Ｂは、発話者検出部１２Ａと同様に音声を発している乗員の着座位置を検出するが、当該乗員を発話者と決定する前に当該乗員に対して以下の処理を行う。
【００４３】
音程検出部１２１は、マイクロフォン２３から乗員の音声を取得し、当該音声の音程を検出して、相関判断部１２３に出力する。相関判断部１２３は、音響装置２１から再生コンテンツの音声信号を取得し、再生コンテンツと乗員の音声の音程の相関を判断する。音程の相関とは、周波数帯域の相関である。顔認識部１２２は、カメラ２４の撮影画像から乗員の顔の表情または口の動きを解析し、解析結果を相関判断部１２３に出力する。相関判断部１２３は、再生コンテンツと発話者の顔の表情または口の動きの相関を判断する。例えば、発話者が一定のテンポで顔を上下している場合、そのテンポが再生コンテンツのテンポと一致していれば、両者の相関は高い。また、口の動きが再生コンテンツの間奏パートで乗員の口が動いている場合、両者の相関は低い。相関判断部１２３は、乗員の音声の音程と顔の表情等が再生コンテンツと相関があると判断すると、当該乗員は再生コンテンツに合わせて歌唱していると判断し、発話者とは判断しない。このように、相関判断部１２３は乗員が歌唱していることを検出する歌唱検出部として機能する。一方、相関判断部１２３は、乗員の音声の音程と顔の表情等が再生コンテンツと相関がないと判断すると、当該乗員は再生コンテンツに合わせた歌唱ではなく会話の発話を行っていると判断し、発話者と判断する。
【００４４】
＜Ｄ−２．効果＞
音場制御装置１０４の発話者検出部１２Ｂは、乗員が歌唱していることを検出する歌唱検出部である相関判断部１２３を備え、参加者検出部１４は、歌唱している乗員を参加者として検出しない。従って、音場制御装置１０４によれば、スピーカ２２から再生されるコンテンツに合わせて歌唱している乗員を発話者と誤検出し、当該乗員に対してスピーカ２２から聞こえる音量を小さくする音場制御が行うことを、防ぐことができる。
【００４５】
＜Ｅ．ハードウェア構成＞
上述した音場制御装置１０１−１０４における、乗員検出部１１、発話者検出部１２Ａ，１２Ｂ、受話者検出部１３、参加者検出部１４、音場制御部１５、発話者等登録部１６、および乗員登録部１７（以下、「乗員検出部１１等」）は、図９に示す処理回路８１により実現される。すなわち、処理回路８１は、乗員検出部１１等を備える。処理回路８１には、専用のハードウェアが適用されても良いし、メモリに格納されるプログラムを実行するプロセッサが適用されても良い。プロセッサは、例えば中央処理装置、処理装置、演算装置、マイクロプロセッサ、マイクロコンピュータ、ＤＳＰ（Digital Signal Processor）等である。
【００４６】
乗員検出部１１、発話者検出部１２Ａ，１２Ｂ、受話者検出部１３、参加者検出部１４は、マイクロフォン２３、カメラ２４、および外部センサ２５から情報を取得し、乗員登録部１７には入力装置等からキーワードが入力される。また、音場制御部１５は音場の制御指示を音響装置２１に行う。これらの情報の入出力は、図９に示す入出力インタフェース８４により実現される。すなわち、音場制御装置１０１−１０４は、処理回路８１と入出力インタフェース８４により実現する。
【００４７】
処理回路８１が専用のハードウェアである場合、処理回路８１は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field-Programmable Gate Array）、またはこれらを組み合わせたものが該当する。乗員検出部１１等の各部の機能それぞれは、複数の処理回路８１で実現されてもよいし、各部の機能をまとめて一つの処理回路で実現されてもよい。
【００４８】
処理回路８１がプロセッサである場合、乗員検出部１１等の機能は、ソフトウェア等（ソフトウェア、ファームウェアまたはソフトウェアとファームウェア）との組み合わせにより実現される。ソフトウェア等はプログラムとして記述され、メモリに格納される。図１０に示すように、処理回路８１に適用されるプロセッサ８２は、メモリ８３に記憶されたプログラムを読み出して実行することにより、各部の機能を実現する。すなわち、音場制御装置１０１−１０４は、処理回路８１により実行されるときに、車両の乗員の着座位置を検出するステップと、乗員の中から車両の車室内で行われた会話の発話者と受話者を参加者として検出するステップと、車室内で会話が行われると、参加者の着座位置と参加者ではない乗員である非参加者の着座位置とに基づき、車室内に設けられた複数のスピーカ２２による音場を制御するステップと、が結果的に実行されることになるプログラムを格納するためのメモリ８３を備える。換言すれば、このプログラムは、乗員検出部１１等の手順や方法をコンピュータに実行させるものであるともいえる。ここで、メモリ８３には、例えば、ＲＡＭ（Random Access Memory）、ＲＯＭ（Read Only Memory）、フラッシュメモリ、ＥＰＲＯＭ（Erasable Programmable Read Only Memory）、ＥＥＰＲＯＭ（Electrically Erasable Programmable Read Only Memory）などの、不揮発性または揮発性の半導体メモリ、ＨＤＤ（Hard Disk Drive）、磁気ディスク、フレキシブルディスク、光ディスク、コンパクトディスク、ミニディスク、ＤＶＤ（Digital Versatile Disk）及びそのドライブ装置等、または、今後使用されるあらゆる記憶媒体であってもよい。
【００４９】
以上、乗員検出部１１等の各機能が、ハードウェア及びソフトウェア等のいずれか一方で実現される構成について説明した。しかしこれに限ったものではなく、乗員検出部１１等の一部を専用のハードウェアで実現し、別の一部をソフトウェア等で実現する構成であってもよい。例えば、乗員検出部１１については専用のハードウェアとしての処理回路でその機能を実現し、それ以外についてはプロセッサ８２としての処理回路８１がメモリ８３に格納されたプログラムを読み出して実行することによってその機能を実現することが可能である。
【００５０】
以上のように、処理回路は、ハードウェア、ソフトウェア等、またはこれらの組み合わせによって、上述の各機能を実現することができる。なお、発話者等登録部１６と乗員登録部１７は、メモリ８３から構成されるが、それらは単一のメモリ８３から構成されてもよいし、それぞれが個別のメモリから構成されてもよい。
【００５１】
また、上記では音場制御装置１０１−１０４は車載装置として構成される他、車載装置、ＰＮＤ（Portable Navigation Device）、通信端末（例えば携帯電話、スマートフォン、およびタブレットなどの携帯端末）、およびこれらにインストールされるアプリケーションの機能、並びにサーバなどを適宜に組み合わせてシステムにも適用することができる。この場合、以上で説明した音場制御装置１０１−１０４の各機能または各構成要素は、システムを構築する各機器に分散して配置されてもよいし、いずれかの機器に集中して配置されてもよい。図１１には、音場制御装置１０２が車両ＶとサーバＳにより構成される例を示している。図１１の例では、乗員検出部１１、発話者検出部１２Ａ，受話者検出部１３、音場制御部１５、音響装置２１およびスピーカ２２が車両Ｖに配置され、参加者検出部１４と発話者等登録部１６がサーバＳに配置されている。
【００５２】
なお、本発明は、その発明の範囲内において、各実施の形態を自由に組み合わせたり、各実施の形態を適宜、変形、省略したりすることが可能である。この発明は詳細に説明されたが、上記した説明は、すべての態様において、例示であって、この発明がそれに限定されるものではない。例示されていない無数の変形例が、この発明の範囲から外れることなく想定され得るものと解される。
【符号の説明】
【００５３】
１１  乗員検出部、１２Ａ，１２Ｂ  発話者検出部、１３  受話者検出部、１４  参加者検出部、１５  音場制御部、１６  発話者等登録部、１７  乗員登録部、２１  音響装置、２２，２２ＢＬ，２２ＢＲ，２２ＦＬ，２２ＦＲ  スピーカ、２３  マイクロフォン、２４  カメラ、２５  外部センサ、３０Ａ，３０Ｂ，３０Ｃ  乗員、８１  処理回路、８２  プロセッサ、８３  メモリ、８４  入出力インタフェース、１０１，１０２，１０３，１０４  音場制御装置、１２１  音程検出部、１２２  顔認識部、１２３  相関判断部。
【図１】
2020016927.tif 000003
【図２】
2020016927.tif 000004
【図３】
2020016927.tif 000005
【図４】
2020016927.tif 000006
【図５】
2020016927.tif 000007
【図６】
2020016927.tif 000008
【図７】
2020016927.tif 000009
【図８】
2020016927.tif 000010
【図９】
2020016927.tif 000011
【図１０】
2020016927.tif 000012
【図１１】
2020016927.tif 000013
【手続補正書】
【提出日】令和2年7月28日(2020.7.28)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
車両の乗員の着座位置を検出する乗員検出部と、
前記乗員の中から前記車両の車室内で行われた会話の発話者と受話者を参加者として検出する参加者検出部と、
前記車室内で会話が行われると、前記参加者の着座位置と前記参加者ではない前記乗員である非参加者の着座位置とに基づき、前記車室内に設けられた複数のスピーカによる音場を制御する音場制御部と、を備え、
前記参加者検出部は、前記乗員の身体の動きに基づき、前記受話者である前記参加者の検出を行う、
音場制御装置。
【請求項２】
前記音場制御部は、制御前に比べて、前記音場による前記非参加者の着座位置における音量が小さくなることなく、前記音場による前記参加者の着座位置における音量が小さくなるように、前記音場を制御する、
請求項１に記載の音場制御装置。
【請求項３】
複数の前記スピーカは前記車両の着座位置に対応して設けられており、
前記音場制御部は、前記参加者の着座位置に対応する前記スピーカの音量を前記非参加者の着座位置に対応する前記スピーカの音量より小さくする、
請求項１に記載の音場制御装置。
【請求項４】
前記参加者検出部は、現在または過去の所定期間内に前記車室内で行われた会話の発話者と受話者を前記参加者として検出する、
請求項１に記載の音場制御装置。
【請求項５】
前記参加者検出部は、前記発話者の視線の先に着座する乗員を、前記受話者である前記参加者として検出する、
請求項４に記載の音場制御装置。
【請求項６】
前記参加者検出部は、前記乗員とキーワードが対応付けられた個人情報を参照し、前記発話者が発話したキーワードに対応する前記乗員を前記受話者である前記参加者として検出する、
請求項１に記載の音場制御装置。
【請求項７】
前記乗員が歌唱していることを検出する歌唱検出部をさらに備え、
前記参加者検出部は、歌唱している前記乗員を前記参加者として検出しない、
請求項１に記載の音場制御装置。
【請求項８】
前記参加者検出部は、前記音場制御部による音場制御後の前記乗員の表情に基づき、前記参加者の検出結果を更新する、
請求項１に記載の音場制御装置。
【請求項９】
前記参加者検出部は、過去の所定期間内に前記車室内で行われた会話の発話者と受話者を前記参加者として検出する、
請求項４に記載の音場制御装置。
【請求項１０】
前記参加者検出部は、前記音場制御部による音場制御後の前記乗員の表情を解析し、不快な表情をしている前記乗員を検出した場合に、不快な表情をしている前記乗員についての前記参加者の検出結果を逆にして更新する、
請求項８に記載の音場制御装置。
【請求項１１】
前記参加者検出部は、前記発話者の発話音声に同期した前記身体の動作を行う前記乗員を前記受話者である前記参加者として検出する、
請求項１から請求項１０のいずれか１項に記載の音場制御装置。
【請求項１２】
前記参加者検出部は、ミラー越しに前記発話者の視線の先に着座する乗員を、前記受話者である前記参加者として検出する、
請求項５に記載の音場制御装置。
【請求項１３】
車両の乗員の着座位置を検出し、
前記乗員の中から前記車両の車室内で行われた会話の発話者と受話者を参加者として検出し、
前記車室内で会話が行われると、前記参加者の着座位置と前記参加者ではない前記乗員である非参加者の着座位置とに基づき、前記車室内に設けられた複数のスピーカによる音場を制御し、
前記乗員の身体の動きに基づき、前記受話者である前記参加者の検出を行う、
音場制御方法。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【０００６】
本発明の音場制御装置は、車両の乗員の着座位置を検出する乗員検出部と、乗員の中から車両の車室内で行われた会話の発話者と受話者を参加者として検出する参加者検出部と、車室内で会話が行われると、参加者の着座位置と参加者ではない乗員である非参加者の着座位置とに基づき、車室内に設けられた複数のスピーカによる音場を制御する音場制御部と、を備え、参加者検出部は、前記乗員の身体の動きに基づき、前記受話者である前記参加者の検出を行う。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
本発明の音場制御方法は、車両の乗員の着座位置を検出し、乗員の中から車両の車室内で行われた会話の発話者と受話者を参加者として検出し、車室内で会話が行われると、参加者の着座位置と参加者ではない乗員である非参加者の着座位置とに基づき、車室内に設けられた複数のスピーカによる音場を制御し、前記乗員の身体の動きに基づき、前記受話者である前記参加者の検出を行う。
【国際調査報告】
2020016927.tif 000014
2020016927.tif 000015