(57)【要約】【課題】自動車の車内環境を自動的にユーザの活動に好適な環境に調整する「車内環境調整システム」を提供する。【解決手段】ユーザ状態認識部１２は、自動車の座席に着座したユーザの姿勢、視線方向、挙動等を認識する。ユーザ活動推定部１４は、ユーザ状態認識部１２が認識したユーザの姿勢、視線方向、挙動等の状態より、ユーザが行っている活動を推定する。そして、車内環境制御部１４は、ユーザの車内環境が、ユーザ活動推定部１４が推定した当該ユーザの活動に好適な環境となるように、車載情報システム２や、車内照明システム３等の、自動車に搭載されている自動車の車内環境に関わる各種システムの動作を制御して、当該ユーザの車内環境を調整する。【選択図】図１
2020090158.tif 000002
【特許請求の範囲】
【請求項１】
車内環境に関わる動作を行う車載機器を備えた自動車の車内環境を調整する車内環境調整システムであって、
前記自動車の座席に着座したユーザを撮影するカメラと、
前記カメラで撮影した映像から、ユーザの姿勢と挙動の少なくとも一方を含むユーザの状態を認識するユーザ状態認識手段と、
前記ユーザ状態認識手段が認識したユーザの状態から、ユーザが行っている活動を推定するユーザ活動推定手段と、
前記ユーザ活動推定手段が推定した活動に応じて、前記車載機器の動作を制御する、車内環境制御手段とを有することを特徴とする車内環境調整システム。
【請求項２】
請求項１記載の車内環境調整システムであって、
前記車載機器は、車内を照明する照明機器を含み、
前記ユーザ活動推定手段が推定する活動は、ユーザが手元で作業を行う活動を含み、
前記車内環境制御手段は、少なくとも夜間に、前記ユーザ活動推定手段がユーザが行っている活動として、ユーザが手元で作業を行う活動を推定したときに前記照明機器を点灯することを特徴とする車内環境調整システム。
【請求項３】
請求項１記載の車内環境調整システムであって、
前記車載機器は、音声を出力する音声出力機器を含み、
前記ユーザ活動推定手段が推定する活動は、ユーザが移動電話機能を備えたモバイル装置を用いて通話を行う活動を含み、
前記車内環境制御手段は、前記ユーザ活動推定手段がユーザが行っている活動として、ユーザが移動電話機能を備えたモバイル装置を用いて通話を行う活動を推定したときに前記音声出力機器の出力音量を低下することを特徴とする車内環境調整システム。
【請求項４】
請求項１記載の車内環境調整システムであって、
前記車載機器は、映像を表示する映像表示機器を含み、
前記ユーザ活動推定手段が推定する活動は、ユーザがモバイル装置の画面を注視する活動を含み、
前記車内環境制御手段は、少なくとも夜間に、前記ユーザ活動推定手段がユーザが行っている活動として、ユーザがモバイル装置の画面を注視する活動を推定したときに前記映像表示機器の表示輝度を低下することを特徴とする車内環境調整システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、自動車の車内環境をユーザが行っている活動に好適な環境に調整する技術に関するものである。
【背景技術】
【０００２】
自動車の車内環境をユーザが行っている活動に好適な環境に調整する技術としては、携帯電話装置を用いた通話開始時に携帯電話装置から車載システムに要求を発行し、要求を受けた車載システムにおいて、車載オーディオ機器の出力音量や自動車の窓の開閉状態を制御する技術が知られている（たとえば、特許文献１）。
【０００３】
また、本発明に関連する技術としては、カメラで撮影したユーザの映像を解析して、ユーザの姿勢や挙動を認識する技術が知られている（たとえば、特許文献２）。
また、カメラで撮影したユーザの映像を解析して、ユーザによって予め定めたコマンド入力用のジェスチャが行われたことを検出して、コマンドの入力を受け付けるジェスチャ入力の技術も知られている（たとえば、特許文献３）。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００９-    ４８２３号公報
【特許文献２】特開平１１  -１２８５３４号公報
【特許文献３】特開２０１１-２５３２９２号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
自動車に搭乗したユーザは、車内において様々な活動を行うが、各活動に好適な照明環境や音響環境等の車内環境は活動の種類毎に異なる。
そして、このために、ユーザが活動を当該活動に好適な車内環境で行いたい場合には、ユーザ自身がジェスチャ入力等により、車内環境を調整する操作を行って車内環境を所望の環境に調整する煩雑な作業を行う必要があった。
【０００６】
そこで、本発明は、ユーザの煩雑な操作を必要とすることなし、自動車の車内環境をユーザが行っている活動に好適な環境に調整できる車内環境調整システムを提供することを課題とする
【課題を解決するための手段】
【０００７】
前記課題達成のために、本発明は、車内環境に関わる動作を行う車載機器を備えた自動車の車内環境を調整する車内環境調整システムを、前記自動車の座席に着座したユーザを撮影するカメラと、前記カメラで撮影した映像から、ユーザの姿勢と挙動の少なくとも一方を含むユーザの状態を認識するユーザ状態認識手段と、前記ユーザ状態認識手段が認識したユーザの状態から、ユーザが行っている活動を推定するユーザ活動推定手段と、前記ユーザ活動推定手段が推定した活動に応じて、前記車載機器の動作を制御する、車内環境制御手段とを含めて構成したものである。
【０００８】
ここで、このような車内環境調整システムは、前記車載機器を、車内を照明する照明機器を含むものとし、前記ユーザ活動推定手段が推定する活動を、ユーザが手元で作業を行う活動を含むものとし、前記車内環境制御手段において、少なくとも夜間に、前記ユーザ活動推定手段がユーザが行っている活動として、ユーザが手元で作業を行う活動を推定したときに前記照明機器を点灯するように構成してもよい。
【０００９】
または、このような車内環境調整システムは、前記車載機器を、音声を出力する音声出力機器を含むものとし、前記ユーザ活動推定手段が推定する活動を、ユーザが移動電話機能を備えたモバイル装置を用いて通話を行う活動を含むものとし、前記車内環境制御手段において、前記ユーザ活動推定手段がユーザが行っている活動として、ユーザが移動電話機能を備えたモバイル装置を用いて通話を行う活動を推定したときに前記音声出力機器の出力音量を低下するように構成してもよい。
【００１０】
または、このような車内環境調整システムは、前記車載機器を、映像を表示する映像表示機器を含むものとし、前記ユーザ活動推定手段が推定する活動を、ユーザがモバイル装置の画面を注視する活動を含むものとし、前記車内環境制御手段において、少なくとも夜間に、前記ユーザ活動推定手段がユーザが行っている活動として、ユーザがモバイル装置の画面を注視する活動を推定したときに前記映像表示機器の表示輝度を低下するように構成してもよい。
【００１１】
以上のような車内環境調整システムによれば、ユーザの行っている活動に応じて、当該活動がし易いように、自動的に、車内環境を調整することができる。
【発明の効果】
【００１２】
以上のように、本発明によれば、ユーザの煩雑な操作を必要とすることなし、自動車の車内環境をユーザが行っている活動に好適な環境に調整できる車内環境調整システムを提供することができる。
【図面の簡単な説明】
【００１３】
【図１】本発明の実施形態に係る車内環境調整システムの構成を示すブロック図である。
【図２】本発明の実施形態に係る車内環境調整システムのカメラ、照明灯、ディスプレイ、スピーカの配置を示す図である。
【図３】本発明の実施形態に係る車内環境制御処理を示すフリーチャートである。
【図４】本発明の実施形態において認識するユーザの姿勢、挙動を示す図である。
【発明を実施するための形態】
【００１４】
以下、本発明の実施形態について説明する。
図１に、本実施形態に係る車内環境調整システムの構成を示す。
図示するように、車内環境調整システム１は、複数のカメラ１１、ユーザ状態認識部１２、ユーザ活動推定部１４、車内環境制御部１４とを備えている。
また、車内環境調整システム１の車内環境制御部１４は、ディスプレイ２１やスピーカ２２を用いて映像やオーディオの出力を行う、カーナビゲーション装置やカーオーディオ装置等の車載情報システム２や、自動車の車内の複数の照明灯３１を用いた車内照明を行う車内照明システム３等の、自動車に搭載されている自動車の車内環境に関わる動作を行う各種システムと接続している。
【００１５】
次に、車内環境調整システム１の複数のカメラ１１の各々は、たとえば、図２ａに示すように自動車の各座席に対応して設けられており、各カメラ１１は対応する座席に着座したユーザの身体全体を撮影する。なお、カメラ１１としては、夜間においてもユーザを明瞭に撮影することができるように、近赤外線カメラを用いることが好ましい。また、近赤外線カメラと共に、対応する座席に着座したユーザを近赤外光で照明する近赤外線照明を設けるようにしてもよい。
【００１６】
また、複数の照明灯３１の各々は、たとえば、図２ａに示すように自動車の各座席に対応して設けられており、各照明灯３１は対応する座席に着座したユーザの周辺を照明する。
【００１７】
また、ディスプレイ２１は、たとえば、図２ｂに示すように自動車のダッシュパネルなどに配置されており、各スピーカ２２は、たとえば、図２ｂに示すように、フロント、リアの左右のドア内などに配置されている。
【００１８】
図１に戻り、車内環境調整システム１のユーザ状態認識部１２は、自動車の座席毎に、当該座席に対応するカメラ１１の撮影した映像を解析して、当該座席に着座したユーザの姿勢、視線方向、挙動等の状態を認識する。
【００１９】
そして、車内環境調整システム１のユーザ活動推定部１４は、ユーザ状態認識部１２が認識した各座席に着座したユーザの姿勢、視線方向、挙動等の状態より、ユーザが行っている活動を推定する。
【００２０】
そして、車内環境制御部１４は、各ユーザの車内環境が、ユーザ活動推定部１４が推定した当該ユーザの活動に好適な環境となるように、車載情報システム２や、車内照明システム３等の、自動車に搭載されている自動車の車内環境に関わる動作を行う各種システムの動作を制御して、当該ユーザの車内環境を調整する。
【００２１】
ここで、ユーザの活動に好適な環境となるよう車内環境を調整するために、車内環境制御部１４が行う車内環境制御処理の一例を図３に示す。
ここで、車内環境制御部１４は、自動車の各座席に各々対応する複数の車内環境制御処理を並行して行う。
図３に示すように、車内環境制御部１４は各車内環境制御処理において、当該車内環境制御処理に対応する座席のユーザを対象ユーザとして、ユーザ活動推定部１４による対象ユーザのモバイル通話活動の推定の発生と（ステップ３０２）、ユーザ活動推定部１４による対象ユーザのモバイル注視活動の推定の発生と（ステップ３０４）、ユーザ活動推定部１４による対象ユーザの手元作業活動の推定の発生と（ステップ３０６）を監視する。
【００２２】
ここで、モバイル通話活動とは、スマートフォンなどの通話機能を備えたモバイル端末で通話を行う活動であり、ユーザ活動推定部１４は、たとえば、ユーザ状態認識部１２が、図４ａに示すように、対象ユーザが片手を耳元に掲げた姿勢を所定期間以上維持している挙動を検出したときに、対象ユーザのモバイル通話活動を推定する。
【００２３】
また、モバイル注視活動とは、スマートフォンなどのモバイル端末の画面を注視する活動であり、モバイル注視活動は、ユーザが、モバイル端末のWebブラウザや動画プレイヤによって表示されるコンテンツを視るとき等に行われる。そして、ユーザ活動推定部１４は、たとえば、ユーザ状態認識部１２が、図４ｂに示すように、対象ユーザが片手もしくは両手を顔の前方に掲げ、顔を掲げた手の方向に向けている姿勢を所定期間以上維持している挙動を検出したときに、対象ユーザのモバイル注視活動を推定する。
【００２４】
また、手元作業活動とは、バックの中身を探したり、手元の本を読んだりするなど、手元にあるものを対象として操作する活動であり、ユーザ活動推定部１４は、たとえば、ユーザ状態認識部１２が、図４ｃに示すように、対象ユーザが片手もしくは両手を、膝もしくは腿の上もしくはやや上方で所定期間中に所定回数以上、繰り返し動かす挙動を検出したときに、対象ユーザの、手元作業活動を推定する。
【００２５】
さて、図３に戻り、対象ユーザのモバイル通話活動の推定が発生したならば（ステップ３０２）、車載情報システム２のスピーカ２２への出力音量を、予め定めた比較的小さい音量の値である低音量値に変更させる（ステップ３０８）。
【００２６】
そして、ユーザ活動推定部１４によって対象ユーザのモバイル通話活動が推定されなくなったならば（ステップ３１０）、全てのユーザについてモバイル通話活動が推定されていないかどうかを調べ（ステップ３１２）、いずれかのユーザについてモバイル通話活動が推定されている場合には、そのままステップ３０２、３０４、３０６の監視に戻る。
【００２７】
一方、全てのユーザについてモバイル通話活動が推定されていない場合には（ステップ３１２）、車載情報システム２に、スピーカ２２の出力音量を、車載情報システム２が出力音量を低音量値に変更する前の音量に復帰させ（ステップ３１４）、ステップ３０２、３０４、３０６の監視に戻る。
【００２８】
また、対象ユーザのモバイル注視活動の推定が発生したならば（ステップ３０４）、現在が夜間であるかどうかを調べ（ステップ３１６）、夜間でなければ、そのままステップ３０２、３０４、３０６の監視に戻る。
【００２９】
一方、現在が夜間であれば（ステップ３１６）、車載情報システム２のディスプレイ２１への映像の表示輝度を、予め定めた比較的暗い輝度の値である低輝度値に変更させる（ステップ３１８）。
【００３０】
そして、ユーザ活動推定部１４によって対象ユーザのモバイル注視活動が推定されなくなったならば（ステップ３２０）、全てのユーザについてモバイル注視活動が推定されていないかどうかを調べ（ステップ３２２）、いずれかのユーザについてモバイル注視活動が推定されている場合には、そのままステップ３０２、３０４、３０６の監視に戻る。
【００３１】
一方、全てのユーザについてモバイル注視活動が推定されていない場合には（ステップ３２２）、車載情報システム２に、ディスプレイ２１への映像の表示輝度を、車載情報システム２が表示輝度を低輝度値に変更する前の輝度に復帰させ（ステップ３２４）、ステップ３０２、３０４、３０６の監視に戻る。
【００３２】
また、対象ユーザの手元作業活動の推定が発生したならば（ステップ３０６）、現在が夜間であるかどうかを調べ（ステップ３２６）、夜間でなければ、そのままステップ３０２、３０４、３０６の監視に戻る。
【００３３】
一方、現在が夜間であれば（ステップ３２６）、対象ユーザの周辺を照明する照明灯３１を車内照明システム３に点灯させる（ステップ３２８）。
そして、ユーザ活動推定部１４によって対象ユーザの手元作業活動が推定されなくなるのを待って（ステップ３３０）、対象ユーザの周辺を照明する照明灯３１を車内照明システム３に消灯させ（ステップ３３２）、ステップ３０２、３０４、３０６の監視に戻る。
【００３４】
以上、車内環境制御部１４が行う車内環境制御処理について説明した。
このような車内環境制御処理によれば、ユーザが、スマートフォンなどの通話機能を備えたモバイル端末で通話を行うときには、通話の邪魔とならないように、自動的に、車載情報システム２のスピーカ２２への出力音量を小さくすることができる。また、ユーザが、夜間に、スマートフォンなどのモバイル端末のWebブラウザや動画プレイヤで、ビジュアルを含むコンテンツを視るときには、コンテンツに集中できるように、自動的に、車載情報システム２のディスプレイ２１の表示輝度を暗くすることができる。また、ユーザが、夜間に、バックの中身を探したり、手元の本を読んだりするなど、手元で作業するときには、自動的に、作業が容易となるように、ユーザの周辺を照明することができる。
【００３５】
以上、本発明の実施形態について説明した。
なお、以上の実施形態では、車内環境制御処理において、ユーザの車内環境の調整のために、ディスプレイ２１の表示輝度や、スピーカ２２からの出力音量や、照明の有無などを制御する場合を例にとり説明したが、車内環境制御処理においては、ユーザの車内環境の調整として、これら以外の車内環境に関わる動作を行う車載機器の動作の制御を行うようにしてもよい。
【００３６】
また、以上の実施形態では、ユーザ活動推定部１４において、モバイル通話活動、モバイル注視活動、手元作業活動を推定し、車内環境制御部１４において、推定された活動に応じて車内環境を調整する場合を例にとり説明したが、これは、ユーザ活動推定部１４において、ユーザの他の活動を推定し、車内環境制御処理において、推定した当該他の活動に応じてユーザの車内環境の調整を行うようにしてよい。
【００３７】
また、以上の実施形態では、自動車の座席毎にカメラ１１を設けたが、これは、複数の座席について各々設けたカメラ１１の代わりに、当該複数の座席のユーザをまとめて撮影する広角のカメラ１１を設けるようにしてもよい。
【００３８】
また、以上の実施形態では、自動車の全座席を対象として、各座席のユーザの車内環境を調整したが、これは、一部の座席のみを対象として、対象とした座席のユーザの車内環境の調整を行うようにしてよい。
【符号の説明】
【００３９】
１…車内環境調整システム、２…車載情報システム、３…車内照明システム、１１…カメラ、１２…ユーザ状態認識部、１４…ユーザ活動推定部、１４…車内環境制御部、２１…ディスプレイ、２２…スピーカ、３１…照明灯。
【図１】
2020090158.tif 000003
【図２】
2020090158.tif 000004
【図３】
2020090158.tif 000005
【図４】
2020090158.tif 000006