(57)【要約】【課題】乗員が車両走行中にとる姿勢のまま、姿勢を変えることなく、音声出力装置から出力される音声の音響調整を行うことができる音響制御装置１を提供する。【解決手段】音響制御装置１は、車両内の乗員を撮影する撮像装置３１から画像情報を取得する画像情報取得部１１と、画像情報取得部１１が取得した画像情報を解析してジェスチャ入力を判定するジェスチャ判定部１３と、ジェスチャ判定部１３が判定したジェスチャ入力に基づいて音響制御を行うための音響制御情報を生成する音響制御情報生成部１４と、を備えた。【選択図】図１
2019199234.tif 000002
【特許請求の範囲】
【請求項１】
車両内の乗員を撮影する撮像装置から画像情報を取得する画像情報取得部と、
前記画像情報取得部が取得した前記画像情報を解析してジェスチャ入力を判定するジェスチャ判定部と、
前記ジェスチャ判定部が判定した前記ジェスチャ入力に基づいて音響制御を行うための音響制御情報を生成する音響制御情報生成部と、
を備えたこと
を特徴とする音響制御装置。
【請求項２】
前記ジェスチャ判定部は、前記ジェスチャ入力を行った手が左右いずれの手であるかを判定し、
前記音響制御情報生成部は、前記ジェスチャ判定部が判定した手に対応した音声出力装置を選択すると共に、選択された前記音声出力装置における前記音響制御を行うための前記音響制御情報を生成すること
を特徴とする請求項１記載の音響制御装置。
【請求項３】
前記ジェスチャ判定部は、前記ジェスチャ入力を行った手又は指が指し示す方向を判定し、
前記音響制御情報生成部は、前記ジェスチャ判定部が判定した手又は指が指し示す方向に対応した音声出力装置を選択し、選択された前記音声出力装置における前記音響制御を行うための前記音響制御情報を生成すること
を特徴とする請求項１記載の音響制御装置。
【請求項４】
前記音響制御情報生成部は、選択された前記音声出力装置が出力する音声の音量制御を行うための情報を含む前記音響制御情報を生成すること
を特徴とする請求項２又は請求項３に記載の音響制御装置。
【請求項５】
前記音響制御情報生成部は、選択された前記音声出力装置が出力する音声の遅延期間制御を行うための情報を含む前記音響制御情報を生成すること
を特徴とする請求項２又は請求項３に記載の音響制御装置。
【請求項６】
前記音響制御情報生成部が前記音響制御情報を生成するか否かを切り替えるモード設定部を備え、
前記音響制御情報生成部は、前記音響制御情報生成部が前記モード設定部により前記音響制御情報を生成するモードに設定されている場合のみ、前記音響制御情報を生成すること
を特徴とする請求項１から請求項５のうちいずれか１項に記載の音響制御装置。
【請求項７】
請求項１から請求項６のうちいずれか１項に記載の音響制御装置を備えた車載用音響装置。
【請求項８】
コンピュータに、
車両内の乗員を撮影する撮像装置から画像情報を取得する画像情報取得機能と、
前記画像情報取得機能により取得された前記画像情報を解析してジェスチャ入力を判定するジェスチャ判定機能と、
前記ジェスチャ判定機能により判定された前記ジェスチャ入力に基づいて音響制御を行うための音響制御情報を生成する音響制御情報生成機能と、
を実現させるための音響制御プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、音響制御装置、車載用音響装置、及び、音響制御プログラムに関するものである。
【背景技術】
【０００２】
車両内の音声出力装置は、運転者等の乗員に対して左右非対称な位置に設置されており、乗員が音楽等の音声を理想的な音質で聴くためには、音声出力装置から出力される音声を音響調整する必要がある。また、乗員ごとに乗員の体格、姿勢等が異なるため、音声出力装置に対する乗員の頭部位置が乗員ごとに異なる。このため、音声出力装置から出力される音声は、乗員に合わせて、適宜音響調整されることが望ましい。
【０００３】
車両内の音声出力装置から出力される音声を音響調整する技術に関して、例えば、特許文献１には、車内には、座席及び音源となるスピーカとが左右均等となる位置に設けられると共に、ＤＳＰで遅延量及びゲインが補正され、一方の座席で聴取したときに最適な聴取位置となる左右のパラメータがメモリに記憶され、そして、他方の聴取位置で聴取する場合には、メモリに記憶されていた左右のパラメータが入れ換えられ、これにより、新たなパラメータを入力せずに、他方の座席で聴取したときに最適な聴取位置となる左右のパラメータが簡単に設定できる車載用のオーディオ機器が開示されている。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平１０−３４１５００号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、特許文献１に記載の技術は、座席ごとに予めパラメータを設定しておくものである。したがって、乗員の体格及び姿勢により頭部位置が変化した場合、オーディオ機器を直接操作して音響調整する必要がある。ところが、オーディオ機器を直接操作して音響調整する場合、音響調整中の乗員の頭部位置は、車両走行中の乗員の頭部位置と異なるため、音響調整する乗員は、実際に車両走行中に音声を聴く姿勢のまま音響調整することができない。このため、乗員は、最適な音質に至るまで、音響調整の姿勢と車両走行中の姿勢とを何度も繰り返して音響調整を行う必要があるという問題があった。
【０００６】
この発明は、上述の問題点を解決するためのもので、乗員が車両走行中にとる姿勢のまま、姿勢を変えることなく、音声出力装置から出力される音声の音響調整を行うことができる音響制御装置を提供することを目的としている。
【課題を解決するための手段】
【０００７】
この発明に係る音響制御装置は、車両内の乗員を撮影する撮像装置から画像情報を取得する画像情報取得部と、画像情報取得部が取得した画像情報を解析してジェスチャ入力を判定するジェスチャ判定部と、ジェスチャ判定部が判定したジェスチャ入力に基づいて音響制御を行うための音響制御情報を生成する音響制御情報生成部と、を備えたものである。
【発明の効果】
【０００８】
この発明によれば、乗員が車両走行中にとる姿勢のまま、姿勢を変えることなく、音声出力装置から出力される音声の音響調整を行うことができる。
【図面の簡単な説明】
【０００９】
【図１】図１は、実施の形態１に係る音響制御装置が適用された車載用音響システムの構成を示すブロック図である。
【図２】図２Ａ、図２Ｂは実施の形態１に係る音響制御装置のハードウェア構成の一例を示す図である。
【図３】図３は、実施の形態１に係る音響制御装置の処理を説明するフローチャートである。
【図４】図４は、実施の形態１の変形例に係る音響制御装置の処理を説明するフローチャートである。
【図５】図５は、実施の形態２に係る音響制御装置が適用された車載用音響システムの構成を示すブロック図である。
【図６】図６は、実施の形態２に係る音響制御装置の処理を説明するフローチャートである。
【図７】図７は、実施の形態２の変形例に係る音響制御装置の処理を説明するフローチャートである。
【発明を実施するための形態】
【００１０】
以下、この発明の実施の形態について、図面を参照しながら詳細に説明する。
【００１１】
実施の形態１．
実施の形態１に係る音響制御装置１は、一例として、車両に搭載された車載用音響システム３に適用されるものとして、以下説明する。
【００１２】
図１は、実施の形態１に係る音響制御装置１が適用された車載用音響システム３の構成を示すブロック図である。
図１を用いて、実施の形態１に係る音響制御装置１が適用された車載用音響システム３の構成を説明する。
【００１３】
車載用音響システム３は、音響制御装置１、車載用音響装置２、撮像装置３１、パターンデータベース３２、第１音声出力装置３３、第２音声出力装置３４、タッチパネル３５、及び、表示装置３６を備える。
【００１４】
撮像装置３１は、ＣＣＤ（Ｃｈａｒｇｅ−Ｃｏｕｐｌｅｄ  Ｄｅｖｉｃｅ）、ＣＭＯＳ（Ｃｏｍｐｌｅｍｅｎｔａｒｙ  Ｍｅｔａｌ  Ｏｘｉｄｅ  Ｓｅｍｉｃｏｎｄｕｃｔｏｒ）等のイメージセンサを用いたカメラである。撮像装置３１は、車両内の乗員を撮影し、撮影した画像を画像情報として後述する音響制御装置１に出力する。
撮像装置３１は、運転者の身体状態の推定に用いられるドライバモニタリングシステム用のカメラ、車両内の映像を記録するドライブレコーダ用のカメラ等、のカメラであってもよい。撮像装置３１は、車内の乗員、特に、車内の乗員の手、指等の形状及び動きを撮影できるものであれば、これらに限定されるものではない。
パターンデータベース３２は、ジェスチャのパターン情報を記憶する記憶装置であり、後述する音響制御装置１からの要求に応じて、音響制御装置１にジェスチャのパターン情報を提供する。パターンデータベース３２は、後述するパターン情報取得部１２がジェスチャのパターン情報を取得できればよく、車両内に搭載されているものとは限らない。例えば、パターンデータベース３２は、クラウド上に存在し、パターン情報取得部１２がインターネット、公衆回線等の公衆ネットワーク等を介してパターンデータベース３２からジェスチャのパターン情報を取得してもよい。
【００１５】
第１音声出力装置３３及び第２音声出力装置３４は、スピーカ等の音声出力装置である。第１音声出力装置３３及び第２音声出力装置３４は、後述する車載用音響装置２から受信したアナログ信号により振動子を振動させることで音声を出力する。
この実施の形態では、一例として、第１音声出力装置３３は、車両内の運転席付近に設置された音声出力装置であり、また、第２音声出力装置３４は、車両内の助手席付近に設置された音声出力装置であるものとする。
表示装置３６は、液晶ディスプレイ、有機エレクトロルミネッセンスディスプレイ等のディスプレイである。表示装置３６は、後述する車載用音響装置２の表示制御部２５が出力した映像信号を受信し表示する、
タッチパネル３５は、後述する車載用音響装置２に操作入力を行う操作入力装置である。タッチパネル３５は、表示装置３６の表示面に重ねられた透明な部材により構成された操作入力用のタッチセンサを有する。タッチパネル３５は、表示装置３６に表示された画像を仮想的に操作するための操作入力手段として作用する。
【００１６】
音響制御装置１は、画像情報取得部１１、パターン情報取得部１２、ジェスチャ判定部１３、及び、音響制御情報生成部１４を備える。
画像情報取得部１１は、撮像装置３１から画像情報を取得する。画像情報は、例えば、ＪＰＥＧ（Ｊｏｉｎｔ  Ｐｈｏｔｏｇｒａｐｈｉｃ  Ｅｘｐｅｒｔｓ  Ｇｒｏｕｐ）方式等のデジタル画像データである。画像情報は、音響制御装置１が認識可能な画像データ形式であれば、ＪＰＥＧ方式に限定されるものではない。
パターン情報取得部１２は、パターンデータベース３２からジェスチャのパターン情報を取得する。
【００１７】
ジェスチャ判定部１３は、画像情報取得部１１が取得した画像情報を解析して乗員が行ったジェスチャ入力を判定する。
ジェスチャ判定部１３は、公知の画像解析技術を用いて、画像情報から乗員が成した手及び指の形状、手及び指の形状の変化、手及び指の位置の変化等の特徴情報を抽出する。ジェスチャ判定部１３は、画像情報から抽出した特徴情報と、パターン情報取得部１２が取得したジェスチャのパターン情報とを比較することで、ジェスチャ入力を判定する。
ジェスチャ入力は、例えば、第１音声出力装置３３及び第２音声出力装置３４のいずれかの音声出力装置を選択する音声出力装置選択入力、音声出力装置選択入力により選択された音声出力装置から出力される音声の音質を変更する音質変更入力、音響調整モードを開始又は終了するモード切替入力等である。
音響制御情報生成部１４は、ジェスチャ判定部１３が判定したジェスチャ入力に基づいて音響制御を行うための音響制御情報を生成し、後述する車載用音響装置２に出力する。
【００１８】
車載用音響装置２は、音声再生部２１、音響制御情報取得部２２、音声出力制御部２３、操作受付部２４、及び、表示制御部２５を備える。
音声再生部２１は、例えば車載用音響装置２外にある記憶装置（図示せず）から取得した音声データを再生して音声信号を出力する。
音響制御情報取得部２２は、音響制御装置１の音響制御情報生成部１４が生成した音響制御情報を取得する。
音声出力制御部２３は、音響制御情報取得部２２が取得した音響制御情報に基づいて、音声再生部２１から取得した音声信号を音響調整し、第１音声出力装置３３及び第２音声出力装置３４にアナログ信号を送信する。
【００１９】
操作受付部２４は、操作入力装置から乗員による操作入力を受け付ける。この実施の形態において、操作入力装置は、タッチパネル３５であるものとして説明するが、操作入力装置は、操作受付部２４が乗員による操作入力を受け付けることが可能であれば、これに限定されるものではない。例えば、操作入力装置は、押しボタンスイッチ等のスイッチでも構わない。
操作受付部２４は、取得する音声データの選択、音声データの再生開始及び停止等の乗員による操作入力を受け付ける。
【００２０】
表示制御部２５は、取得する音声データの選択画面、再生中の音声データに関する情報、音響制御情報等を表示装置３６に表示するための表示制御を行う。表示制御部２５は、映像信号を表示装置３６に出力する。
【００２１】
図２Ａ及び図２Ｂは、実施の形態１に係る音響制御装置１のハードウェア構成の一例を示す図である。
【００２２】
実施の形態１において、画像情報取得部１１、パターン情報取得部１２、ジェスチャ判定部１３、及び、音響制御情報生成部１４の各機能は、処理回路２０１により実現される。すなわち、音響制御装置１は、画像情報取得部１１及びパターン情報取得部１２で取得した画像情報及びジェスチャのパターン情報に基づいて、音響制御情報生成部１４で生成された音響制御情報を車載用音響装置２に出力するための処理回路２０１を備える。
処理回路２０１は、図２Ａに示すように専用のハードウェアであっても、図２Ｂに示すようにメモリ２０５に格納されるプログラムを実行するＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）２０６であっても良い。
【００２３】
処理回路２０１が専用のハードウェアである場合、処理回路２０１は、例えば、単一回路、複合回路、プログラム化したプロセッサ、並列プログラム化したプロセッサ、ＡＳＩＣ（Ａｐｐｌｉｃａｔｉｏｎ  Ｓｐｅｃｉｆｉｃ  Ｉｎｔｅｇｒａｔｅｄ  Ｃｉｒｃｕｉｔ）、ＦＰＧＡ（Ｆｉｅｌｄ−Ｐｒｏｇｒａｍｍａｂｌｅ  Ｇａｔｅ  Ａｒｒａｙ）、又はこれらを組み合わせたものが該当する。
【００２４】
処理回路２０１がＣＰＵ２０６の場合、画像情報取得部１１、パターン情報取得部１２、ジェスチャ判定部１３、及び、音響制御情報生成部１４の各機能は、ソフトウェア、ファームウェア、又は、ソフトウェアとファームウェアとの組み合わせにより実現される。すなわち、画像情報取得部１１、パターン情報取得部１２、ジェスチャ判定部１３、及び、音響制御情報生成部１４は、ＨＤＤ（Ｈａｒｄ  Ｄｉｓｋ  Ｄｒｉｖｅ）２０２、メモリ２０５等に記憶されたプログラムを実行するＣＰＵ２０６、又はシステムＬＳＩ（Ｌａｒｇｅ−Ｓｃａｌｅ  Ｉｎｔｅｇｒａｔｉｏｎ）等の処理回路により実現される。また、ＨＤＤ２０２、又はメモリ２０５等に記憶されたプログラムは、画像情報取得部１１、パターン情報取得部１２、ジェスチャ判定部１３、及び、音響制御情報生成部１４における各機能、すなわち、画像情報取得機能、パターン情報取得機能、ジェスチャ判定機能、及び、音響制御情報生成機能をコンピュータに実行させるものであるとも言える。ここで、メモリ２０５とは、例えば、ＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、フラッシュメモリ、ＥＰＲＯＭ（Ｅｒａｓａｂｌｅ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ  Ｅｒａｓａｂｌｅ  Ｐｒｏｇｒａｍｍａｂｌｅ  Ｒｅａｄ−Ｏｎｌｙ  Ｍｅｍｏｒｙ）等の、不揮発性もしくは揮発性の半導体メモリ、磁気ディスク、フレキシブルディスク、光ディスク、コンパクトディスク、ミニディスク、又はＤＶＤ（Ｄｉｇｉｔａｌ  Ｖｅｒｓａｔｉｌｅ  Ｄｉｓｃ）等が該当する。
【００２５】
なお、画像情報取得部１１、パターン情報取得部１２、ジェスチャ判定部１３、及び、音響制御情報生成部１４の各機能について、一部を専用のハードウェアで実現し、一部をソフトウェア又はファームウェアで実現するようにしても良い。例えば、画像情報取得部１１及びパターン情報取得部１２については、専用のハードウェアとしての処理回路２０１でその機能を実現し、ジェスチャ判定部１３及び音響制御情報生成部１４については、処理回路がメモリ２０５に格納されたプログラムを読み出して実行することによってその機能を実現することができる。
また、音響制御装置１は、撮像装置３１、パターンデータベース３２、車載用音響装置２等との通信を行うための、入力インタフェース装置２０３及び出力インタフェース装置２０４を有する。
なお、以上の説明では、音響制御装置１のハードウェア構成について、図２Ｂに示すように、ＨＤＤ２０２を使用するものとして説明したが、ＨＤＤ２０２に代えて、ＳＳＤ（Ｓｏｌｉｄ  Ｓｔａｔｅ  Ｄｒｉｖｅ）を使用するものであっても良い。
【００２６】
ジェスチャ判定部１３及び音響制御情報生成部１４について、更に詳細に説明する。
ジェスチャ判定部１３は、ジェスチャ入力を行った手が左右いずれの手であるかを判定する。音響制御情報生成部１４は、ジェスチャ判定部１３が判定した手に対応した音声出力装置を選択すると共に、選択された音声出力装置における音響制御を行うための音響制御情報を生成する。
例えば、車両が直進方向に向かって右側にハンドルを備えた車両において、ジェスチャ判定部１３が右手によるジェスチャ入力であると判定した場合、音響制御情報生成部１４は、運転席付近に設置された第１音声出力装置３３における音響制御を行うための音響制御情報を生成する。逆に、例えば、ジェスチャ判定部１３が左手によるジェスチャ入力であると判定した場合、音響制御情報生成部１４は、助手席付近に設置された第２音声出力装置３４における音響制御を行うための音響制御情報を生成する。
【００２７】
音響制御情報生成部１４は、ジェスチャ判定部１３の判定により選択された音声出力装置が出力する音声の音量制御を行うための情報を含む音響制御情報を生成する。
音声出力装置が出力する音声の音量制御を行うジェスチャ入力のパターンは、例えば、ジェスチャ入力する手及び指の形状と、手の動作とにより判定される。例えば、音量を上げるためのジェスチャ入力のパターンは、親指を上に立てたまま手を閉じ、その手を上下させる動作である。例えば、音量を下げるためのジェスチャ入力のパターンは、人差し指の指先を下に向けたまま手を閉じ、その手を上下させる動作である。
ジェスチャ判定部１３が音量制御する操作であると判定するジェスチャ入力は、パターンデータベース３２に記憶されたジェスチャのパターン情報等、予め決められたパターンにより、一意に決定されるものであれば、上述の方法に限定されるものではない。例えば、手のひらを上又は下に向けたまま、その手を上下させる動作であっても構わない。
このように構成すると、実施の形態１に係る音響制御装置１は、例えば、音響調整を行う乗員が運転者である場合、左右非対称な位置ある音声出力装置のうち、運転者から遠く、音量が小さく感じる第２音声出力装置３４の音量を適宜上げることができる。
【００２８】
音響制御情報生成部１４は、ジェスチャ判定部１３の判定により選択された音声出力装置が出力する音声の遅延期間制御を行うための情報を含む音響制御情報を生成する。
音声出力装置が出力する音声の遅延時間を制御するジェスチャ入力のパターンは、例えば、手のひらを上又は下に向けたまま、人差し指から小指までの４本の指を屈伸させる動作である。例えば、遅延時間を短くするためのジェスチャ入力のパターンは、手のひらを上に向けたまま、人差し指から小指までの４本の指を屈伸させる動作である。逆に、例えば、遅延時間を長くするためのジェスチャ入力のパターンは、手のひらを下に向けたまま、人差し指から小指までの４本の指を屈伸させる動作である。
ジェスチャ判定部１３が遅延時間を制御する操作であると判定するジェスチャ入力は、パターンデータベース３２に記憶されたジェスチャのパターン情報等、予め決められたパターンにより、一意に決定されるものであれば、上述の方法に限定されるものではない。例えば、ジェスチャ判定部１３の判定により選択された音声出力装置を手で手繰り寄せる動作、ジェスチャ判定部１３の判定により選択された音声出力装置を手で押し除ける動作等、であっても構わない。
このように構成すると、実施の形態１に係る音響制御装置１は、例えば、音響調整を行う乗員が運転者である場合、左右非対称な位置ある音声出力装置のうち、運転者から近く、音声が早く聴こえる第１音声出力装置３３の音声発生を適宜遅延させることができる。
【００２９】
動作について説明する。
図３は、実施の形態１に係る音響制御装置１の処理を説明するフローチャートである。音響制御装置１は、当該フローチャートに示した処理を繰り返し実行する。
以下、実施の形態１に係る音響制御装置１の処理を、当該フローチャートを用いて説明する。
【００３０】
まず、画像情報取得部１１が、上述のとおり、車両内の乗員を撮影する撮像装置３１から画像情報を取得する（ステップＳＴ１）。
次に、パターン情報取得部１２が、上述のとおり、パターンデータベース３２からジェスチャのパターン情報を取得する（ステップＳＴ２）。
次に、ジェスチャ判定部１３が、上述のとおり、画像情報を解析してジェスチャ入力が有効なジェスチャ入力であるか否かを判定する（ステップＳＴ３）。
有効なジェスチャ入力でない場合（ステップＳＴ３：ＮＯ）、音響制御装置１は、処理を終了し、ステップＳＴ１の処理に戻る。
有効なジェスチャ入力である場合（ステップＳＴ３：ＹＥＳ）、音響制御情報生成部１４は、上述のとおり、ジェスチャ判定部１３が判定したジェスチャ入力に基づいて、音響制御を行うための音響制御情報を生成する（ステップＳＴ４）。
次に、音響制御情報生成部１４は、生成した音響制御情報を車載用音響装置２に出力して（ステップＳＴ５）、音響制御装置１は、処理を終了し、ステップＳＴ１の処理に戻る。
なお、ステップＳＴ２の処理は、１度だけ処理されればよいため、上述のフローチャートが繰り返し処理された際には処理が省略されるようにしても構わない。
【００３１】
以上のように、音響制御装置１は、車両内の乗員を撮影する撮像装置３１から画像情報を取得する画像情報取得部１１と、画像情報取得部１１が取得した画像情報を解析してジェスチャ入力を判定するジェスチャ判定部１３と、ジェスチャ判定部１３が判定したジェスチャ入力に基づいて音響制御を行うための音響制御情報を生成する音響制御情報生成部１４と、を備えた。
このように構成することで、乗員が車両走行中にとる姿勢のまま、姿勢を変えることなく、音響制御装置１から出力される音声の音響調整を行うことができる。
【００３２】
実施の形態１の変形例について説明する。
実施の形態１の変形例の説明において、これまでの実施の形態の説明と重複する説明は省略する。
【００３３】
実施の形態１に係る音響制御装置１におけるジェスチャ判定部１３は、ジェスチャ入力を行った手が左右いずれの手であるかを判定し、音響制御情報生成部１４は、ジェスチャ判定部１３が判定した手に対応した音声出力装置を選択すると共に、選択された音声出力装置における音響制御を行うための音響制御情報を生成するものであった。
これに対して、実施の形態１の変形例に係る音響制御装置１におけるジェスチャ判定部１３は、まず、ジェスチャ入力を行った手又は指が指し示す方向を判定することで、音響制御する音声出力装置が選択される。次に、音響制御情報生成部１４は、既に音声出力装置が選択されている場合に、ジェスチャ判定部１３が判定した音響制御を行うためのジェスチャ入力に基づいて、ジェスチャ判定部１３の判定により選択された音声出力装置における音響制御を行うための音響制御情報を生成する。
【００３４】
音響制御情報生成部１４は、ジェスチャ判定部１３が判定した音響制御を行うためのジェスチャ入力に基づいて、音響制御を行うための音響制御情報を生成する際に、未だ音響制御する音声出力装置が選択されていない場合、例えば、音響制御を行うためのジェスチャ入力を無効にする。音響制御を行うための音響制御情報を生成する際に、未だ音響制御する音声出力装置が選択されていない場合における、上述の音響制御情報生成部１４の動作は一例に過ぎない。例えば、音響制御情報生成部１４は、このような場合において、全ての音声出力装置の音響制御を行うための音響制御情報を生成するようにしてもよい。更に、音響制御情報生成部１４が全ての音声出力装置の音響制御を行うための音響制御情報を生成する場合、音響制御情報生成部１４は、例えば、全ての音声出力装置が出力する音声の音量制御を行うための情報を含む音響制御情報については生成するが、遅延期間制御を行うための情報を含む音響制御情報については生成しない等、選択的に音響制御情報を生成しても構わない。
【００３５】
ジェスチャ判定部１３が音響制御する音声出力装置を判定するジェスチャ入力は、一例として、ジェスチャ入力を行った手又は指が指し示す方向により判定する例を示したが、パターンデータベース３２に記憶されたジェスチャのパターン情報等、予め決められたパターンにより、一意に音響制御する音声出力装置が選択されるものであれば、上述の方法に限定されるものではない。
【００３６】
動作について説明する。
図４は、実施の形態１の変形例に係る音響制御装置１の処理を説明するフローチャートである。音響制御装置１は、当該フローチャートに示した処理を繰り返し実行する。
以下、実施の形態１の変形例に係る音響制御装置１の処理を、当該フローチャートを用いて説明する。
【００３７】
まず、画像情報取得部１１が、上述のとおり、車両内の乗員を撮影する撮像装置３１から画像情報を取得する（ステップＳＴ１１）。
次に、パターン情報取得部１２が、上述のとおり、パターンデータベース３２からジェスチャのパターン情報を取得する（ステップＳＴ１２）。
次に、ジェスチャ判定部１３が、上述のとおり、画像情報を解析してジェスチャ入力が有効なジェスチャ入力であるか否かを判定する（ステップＳＴ１３）。
有効なジェスチャ入力でない場合（ステップＳＴ１３：ＮＯ）、音響制御装置１は、処理を終了し、ステップＳＴ１１の処理に戻る。
有効なジェスチャ入力である場合（ステップＳＴ１３：ＹＥＳ）、ジェスチャ入力は、上述のとおり、音響制御する音声出力装置を選択するためのジェスチャ入力であるか否かを判定する（ステップＳＴ１４）。
【００３８】
音響制御する音声出力装置を選択するためのジェスチャ入力である場合（ステップＳＴ１４：ＹＥＳ）、音響制御装置１は、ジェスチャ判定部１３の判定により選択された音声出力装置の情報を保持して（ステップＳＴ１８）、音響制御装置１は、処理を終了し、ステップＳＴ１１の処理に戻る。
音響制御する音声出力装置を選択するためのジェスチャ入力でない場合（ステップＳＴ１４：ＮＯ）、既に音響制御する音声出力装置が選択されているか否か判定する（ステップＳＴ１５）。
未だ音響制御する音声出力装置が選択されていない場合（ステップＳＴ１５：ＮＯ）、音響制御装置１は、処理を終了し、ステップＳＴ１１の処理に戻る。
既に音響制御する音声出力装置が選択されている場合（ステップＳＴ１５：ＹＥＳ）、音響制御情報生成部１４は、上述のとおり、ジェスチャ判定部１３が判定したジェスチャ入力に基づいて、選択されている音声出力装置の音響制御を行うための音響制御情報を生成する（ステップＳＴ１６）。
次に、音響制御情報生成部１４は、生成した音響制御情報を車載用音響装置２に出力して（ステップＳＴ１７）、音響制御装置１は、処理を終了し、ステップＳＴ１１の処理に戻る。
なお、ステップＳＴ１２の処理は、１度だけ処理されればよいため、上述のフローチャートが繰り返し処理された際には処理が省略されるようにしても構わない。
【００３９】
以上のように構成することで、乗員が車両走行中にとる姿勢のまま、姿勢を変えることなく、音響制御装置１から出力される音声の音響調整を行うことができる。
【００４０】
実施の形態２．
実施の形態２に係る音響制御装置１は、一例として、車両に搭載された車載用音響システム３に適用されるものとして、以下説明する。
実施の形態２の説明において、これまでの実施の形態の説明と重複する説明は省略する。
【００４１】
図５は、実施の形態２に係る音響制御装置１が適用された車載用音響システム３の構成を示すブロック図である。
図５を用いて、実施の形態２に係る音響制御装置１が適用された車載用音響システム３の構成を説明する。
実施の形態２に係る音響制御装置１の構成は、実施の形態１に係る音響制御装置１の構成と比較して、モード設定部１５が追加された構成である。
【００４２】
なお、実施の形態２において、モード設定部１５の機能は、画像情報取得部１１、パターン情報取得部１２、ジェスチャ判定部１３、及び、音響制御情報生成部１４の各機能と共に、実施の形態１において図２Ａ及び図２Ｂに一例を示したハードウェア構成における処理回路２０１により、実施の形態１と同様に実現される。
【００４３】
モード設定部１５は、音響制御情報生成部１４が音響制御情報を生成するか否かのモードを切り替える。モード設定部１５は、例えば、音響調整モードを開始又は終了するための音響調整モード切替情報を操作受付部２４から取得し、音響制御情報生成部１４のモードを切り替える。
音響制御情報生成部１４は、音響制御情報生成部１４が音響制御情報を生成するモードに設定されている場合のみ、音響制御情報を生成する。
【００４４】
動作について説明する。
図６は、実施の形態２に係る音響制御装置１の処理を説明するフローチャートである。音響制御装置１は、当該フローチャートに示した処理を繰り返し実行する。
以下、実施の形態２に係る音響制御装置１の処理を、当該フローチャートを用いて説明する。
【００４５】
まず、画像情報取得部１１が、上述のとおり、車両内の乗員を撮影する撮像装置３１から画像情報を取得する（ステップＳＴ２１）。
次に、パターン情報取得部１２が、上述のとおり、パターンデータベース３２からジェスチャのパターン情報を取得する（ステップＳＴ２２）。
次に、ジェスチャ判定部１３が、上述のとおり、画像情報を解析してジェスチャ入力が有効なジェスチャ入力であるか否かを判定する（ステップＳＴ２３）。
有効なジェスチャ入力でない場合（ステップＳＴ２３：ＮＯ）、音響制御装置１は、処理を終了し、ステップＳＴ２１の処理に戻る。
有効なジェスチャ入力である場合（ステップＳＴ２３：ＹＥＳ）、音響制御情報生成部１４は、設定されているモードが音響調整モードか否かを判定する（ステップＳＴ２４）。
モードが音響調整モードでなかった場合（ステップＳＴ２４：ＮＯ）、音響制御装置１は、処理を終了し、ステップＳＴ２１の処理に戻る。
モードが音響調整モードであった場合（ステップＳＴ２４：ＹＥＳ）、音響制御情報生成部１４は、上述のとおり、ジェスチャ判定部１３が判定したジェスチャ入力に基づいて音響制御を行うための音響制御情報を生成する（ステップＳＴ２５）。
次に、音響制御情報生成部１４は、生成した音響制御情報を車載用音響装置２に出力して（ステップＳＴ２６）、音響制御装置１は、処理を終了し、ステップＳＴ２１の処理に戻る。
なお、ステップＳＴ２２の処理は、１度だけ処理されればよいため、上述のフローチャートが繰り返し処理された際には処理が省略されるようにしても構わない。
【００４６】
以上のように構成することで、乗員が意図しないジェスチャ入力が判定されることを抑止しつつ、乗員が車両走行中にとる姿勢のまま、姿勢を変えることなく、音響制御装置１から出力される音声の音響調整を行うことができる。
【００４７】
実施の形態２の変形例について説明する。
実施の形態２の変形例の説明において、これまでの実施の形態の説明と重複する説明は省略する。
【００４８】
実施の形態２に係る音響制御装置１におけるモード設定部１５は、音響調整モードを開始又は終了するための音響調整モード切替情報を操作受付部２４から取得し、音響制御情報生成部１４のモードを切り替えるものであった。
これに対して、実施の形態２の変形例に係る音響制御装置１におけるモード設定部１５は、ジェスチャ判定部１３が判定した音響調整モードを開始又は終了するためのモード切替入力に基づいて、音響制御情報生成部１４のモードを切り替えるものである。
モード切替入力におけるジェスチャ入力は、例えば、予め決められた期間、手を左右に振るジェスチャ等により行う。ジェスチャ判定部１３がモード切替入力を判定するジェスチャ入力は、パターンデータベース３２に記憶されたジェスチャのパターン情報等、予め決められたパターンにより、一意に判定するできるものであれば、上述の方法に限定されるものではない。
【００４９】
動作について説明する。
図７は、実施の形態２の変形例に係る音響制御装置１の処理を説明するフローチャートである。音響制御装置１は、当該フローチャートに示した処理を繰り返し実行する。
以下、実施の形態２の変形例に係る音響制御装置１の処理を、当該フローチャートを用いて説明する。
【００５０】
まず、画像情報取得部１１が、上述のとおり、車両内の乗員を撮影する撮像装置３１から画像情報を取得する（ステップＳＴ３１）。
次に、パターン情報取得部１２が、上述のとおり、パターンデータベース３２からジェスチャのパターン情報を取得する（ステップＳＴ３２）。
次に、ジェスチャ判定部１３が、上述のとおり、画像情報を解析してジェスチャ入力が有効なジェスチャ入力であるか否かを判定する（ステップＳＴ３３）。
有効なジェスチャ入力でない場合（ステップＳＴ３３：ＮＯ）、音響制御装置１は、処理を終了し、ステップＳＴ３１の処理に戻る。
有効なジェスチャ入力である場合（ステップＳＴ３３：ＹＥＳ）、ジェスチャ判定部１３は、ジェスチャ入力が音響調整モードへの切り替えを行うモード切替入力か否かを判定する（ステップＳＴ３４）。
【００５１】
ジェスチャ入力が音響調整モードへの切り替えを行うモード切替入力であった場合（ステップＳＴ３４：ＹＥＳ）、モード設定部１５は、音響制御情報生成部１４を音響調整モードに設定し（ステップＳＴ３８）、音響制御装置１は、処理を終了し、ステップＳＴ３１の処理に戻る。
ジェスチャ入力が音響調整モードへの切り替えを行うモード切替入力でなかった場合（ステップＳＴ３４：ＮＯ）、音響制御情報生成部１４は、設定されているモードが音響調整モードか否かを判定する（ステップＳＴ３５）。
モードが音響調整モードでなかった場合（ステップＳＴ３５：ＮＯ）、音響制御装置１は、処理を終了し、ステップＳＴ３１の処理に戻る。
モードが音響調整モードであった場合（ステップＳＴ３５：ＹＥＳ）、音響制御情報生成部１４は、上述のとおり、ジェスチャ判定部１３が判定したジェスチャ入力に基づいて音響制御を行うための音響制御情報を生成する（ステップＳＴ３６）。
次に、音響制御情報生成部１４は、生成した音響制御情報を車載用音響装置２に出力して（ステップＳＴ３７）、音響制御装置１は、処理を終了し、ステップＳＴ３１の処理に戻る。
なお、ステップＳＴ３２の処理は、１度だけ処理されればよいため、上述のフローチャートが繰り返し処理された際には処理が省略されるようにしても構わない。
【００５２】
以上のように構成することで、音響制御装置１は、タッチパネル３５からモード切替に関する情報を取得することなく、ジェスチャ入力のみでモードの切り替えを行うことが可能となり、乗員が意図しないジェスチャ入力が判定されることを抑止しつつ、乗員が車両走行中にとる姿勢のまま、姿勢を変えることなく、音響制御装置１から出力される音声の音響調整を行うことができる。
【００５３】
これまで説明した実施の形態１及び実施の形態１の変形例に係る音響制御装置１において、ジェスチャ判定部１３は、左右の手によるジェスチャ入力を同時に判定し、音響制御情報生成部１４は、ジェスチャ判定部１３が判定したそれぞれの手に対応した音声出力装置における音響制御を行うための音響制御情報を生成しても構わない。
【００５４】
また、これまで説明した実施の形態２及び実施の形態２の変形例に係る音響制御装置１において、ジェスチャ判定部１３は、左手又は左手の指が指し示した音声出力装置と、右手又は右手の指が指し示した音声出力装置とを指し示したそれぞれ手のジェスチャ入力を同時に判定し、音響制御情報生成部１４は、ジェスチャ判定部１３が判定したそれぞれの手に対応した音声出力装置における音響制御を行うための音響制御情報を生成しても構わない。
【００５５】
また、これまでの実施の形態に係る音響制御装置１において、車載用音響システム３が第１音声出力装置３３及び第２音声出力装置３４の２個の音声出力装置を備えた構成について説明したが、これに限定されるものではない。音声出力装置は、ジェスチャ判定部１３が音響制御する音声出力装置を指定するジェスチャ入力を判定可能であれば、３個以上であっても構わない。音声出力装置は、例えば、車両内における前後左右の四隅にそれぞれ設置された４個の音声出力装置であってもよい。また、音声出力装置は、例えば、車両内における左右にそれぞれ複数設置された高音用音声出力装置及び低音用音声出力装置であっても構わない。
【００５６】
また、これまでの実施の形態に係る音響制御装置１において、ジェスチャ判定部１３が判定した音声出力装置を乗員が音響調整している間、音響制御情報生成部１４は、ジェスチャ判定部１３の判定により選択された音声出力装置からのみ音声出力が行われるように音響制御情報を生成しても構わない。
【００５７】
また、これまでの実施の形態に係る音響制御装置１において、音響制御情報生成部１４は、ジェスチャ判定部１３の判定により選択された音声出力装置以外の音響調整を行う音響制御情報を生成しても構わない。更にこの場合、乗員が音響調整している間、音響制御情報生成部１４は、ジェスチャ判定部１３の判定により選択された音声出力装置から音声出力が行われないような音響制御情報を生成しても構わない。
【００５８】
また、これまでの実施の形態に係る音響制御装置１において、音響制御は、音量及び遅延時間に関する音響制御を例にとって説明したが、これに限定されるものではない。例えば、高音又は低音の音量に関する音響制御等であっても構わない。
【００５９】
また、これまでの実施の形態に係る音響制御装置１において、ジェスチャ判定部１３は、左方にある音声出力装置の音響調整後の設定値と、左方にある音声出力装置の音響調整後の設定値とを入れ替えるジェスチャ入力を判定し、音響制御情報生成部１４は、ジェスチャ判定部１３が判定したジェスチャ入力に基づいて、左右の音声出力装置の音響調整後の設定値を入れ替えるための音響制御情報を生成しても構わない。
このような構成を備えることで、例えば、助手席側で調整を行い、運転席側と設定を入れ替えることができ、ジェスチャ入力が不慣れな運転手に代わり、他の乗員が音響調整を行うことが可能になる。
【００６０】
また、これまでの実施の形態に係る音響制御装置１の説明において、音響制御装置１が車載用音響システム３に適用された例を示したが、この限りではない。例えば、音響制御装置１を車載用音響装置２に適用し、音響制御装置１を備えた車載用音響装置２を構成することも可能である。
【００６１】
なお、この発明はその発明の範囲内において、各実施の形態の自由な組み合わせ、あるいは各実施の形態の任意の構成要素の変形、もしくは各実施の形態において任意の構成要素の省略ができる。
【符号の説明】
【００６２】
１  音響制御装置、２  車載用音響装置、３  車載用音響システム、１１  画像情報取得部、１２  パターン情報取得部、１３  ジェスチャ判定部、１４  音響制御情報生成部、１５  モード設定部、２１  音声再生部、２２  音響制御情報取得部、２３  音声出力制御部、２４  操作受付部、２５  表示制御部、３１  撮像装置、３２  パターンデータベース、３３  第１音声出力装置、３４  第２音声出力装置、３５  タッチパネル、３６  表示装置、２０１  処理回路、２０２  ＨＤＤ、２０３  入力インタフェース装置、２０４  出力インタフェース装置、２０５  メモリ、２０６  ＣＰＵ。
【図１】
2019199234.tif 000003
【図２】
2019199234.tif 000004
【図３】
2019199234.tif 000005
【図４】
2019199234.tif 000006
【図５】
2019199234.tif 000007
【図６】
2019199234.tif 000008
【図７】
2019199234.tif 000009