(57)【要約】【課題】操作性を向上させることができる車両用操作システムを提供すること。【解決手段】車両用操作システム（１）は、車両内に配置され、車両の乗員の操作を受け付ける操作部（１２）を含む操作ユニット（１０）と、車両の乗員が前記操作部に対して行う機械的な操作とは異なる操作に基づいて、複数の特定機器（１３０、１５０、１５２）の中から操作対象となる対象特定機器を決定する決定部と、前記操作部に対して車両の乗員が行った機械的な操作に基づいて、前記対象特定機器を制御する機器制御部（１６０、１７６）とを備える。【選択図】図３
2019214344.tif 000002
【特許請求の範囲】
【請求項１】
車両内に配置され、車両の乗員の操作を受け付ける操作部を含む操作ユニットと、
車両の乗員が前記操作部に対して行う機械的な操作とは異なる操作に基づいて、複数の特定機器の中から操作対象となる対象特定機器を決定する決定部と、
前記操作部に対して車両の乗員が行った機械的な操作に基づいて、前記対象特定機器を制御する機器制御部と、
を備える車両用操作システム。
【請求項２】
前記決定部により決定された対象特定機器を制御する制御モードを設定するモード設定部を、更に備え、
前記機器制御部は、前記モード設定部により設定された制御モードと、前記操作部に対して車両の乗員が行った機械的な操作に基づいて、前記対象特定機器を制御する、
請求項１に記載の車両用操作システム。
【請求項３】
前記異なる操作は、車両の乗員によるジェスチャー、発話、または前記操作部に設けられたタッチパネルに対する接触操作である、
請求項１または２に記載の車両用操作システム。
【請求項４】
前記機械的な操作とは、揺動操作、押圧操作、および回転操作の少なくとも何れかの操作である、
請求項１から３のうちいずれか１項に記載の車両用操作システム。
【請求項５】
前記機器制御部は、前記操作部に設けられたタッチパネルに対する入力操作に基づいて、前記対象特定機器を制御する、
請求項１から４のうちいずれか１項に記載の車両用操作システム。
【請求項６】
前記機器制御部は、前記機械的な第１操作に基づいて前記決定部により決定された複数の同一種別の対象特定機器のうちから制御対象の対象特定機器を設定し、第１操作の後に行われた前記機械的な第２操作に基づいて、設定した対象特定機器の制御量を制御する、
請求項１から５のうちいずれか１項に記載の車両用操作システム。
【請求項７】
前記第２操作は前記第１操作が行われた状態で行われる操作である、
請求項６に記載の車両用操作システム。
【請求項８】
前記車両は、複数の同一種別の前記特定機器を備え
前記操作部は、前記決定部に決定された複数の同一種別の対象特定機器のうち、いずれの対象特定機器を選択するかをガイドする情報を表示させる第１表示部を含む、
請求項１から７のうちいずれか１項に記載の車両用操作システム。
【請求項９】
前記第１表示部は、前記操作部に設けられる、
請求項８に記載の車両用操作システム。
【請求項１０】
前記決定部は、前記ジェスチャーに基づいて前記対象特定機器を決定する決定モードと、前記発話に基づいて前記対象特定機器を決定する決定モードとを切替可能である、
請求項３に記載の車両用操作システム。
【請求項１１】
前記決定部の決定結果を車両の乗員に回答する回答部を備える、
請求項１から１０のうちいずれか１項に記載の車両用操作システム。
【請求項１２】
車両内に配置され、車両の乗員の操作を受け付ける操作部を含む操作ユニットと、
車両の乗員が前記操作部に対して行う機械的な特定操作と、前記特定操作とは異なる機械的でない特定操作とのうち一方の操作である第１特定操作に基づいて、複数の特定機器の中から操作対象となる対象特定機器を決定する決定部と、
車両の乗員が前記操作部に対して行う機械的な特定操作と、前記特定操作とは異なる機械的でない特定操作とのうち、前記第１特定操作とは異なる第２特定操作に基づいて、前記対象特定機器を制御する機器制御部と、
を備える車両用操作システム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、車両用操作システムに関する。
【背景技術】
【０００２】
車両用操作装置として、複数の車載機器の中から操作対象となる車載機器（以下、対象機器という。）を選択する選択操作と、選択された車載機器の動作態様（例えば、機能の設定、調整等）を設定する設定操作と、を一括して行う構成が知られている。
【０００３】
例えば下記特許文献１には、例えばインストルメントパネル上に配置されたジョイスティック形ノブ及びロータリノブと、ジョイスティック形ノブ及びロータリノブを中心として円弧状に配列された選択スイッチと、を有する構成が開示されている。選択スイッチは、車載機器に対応して個別に設けられている。
この構成によれば、選択スイッチにより対象機器の選択操作を行った後、ジョイスティック形ノブ及びロータリノブにより対象機器の設定操作を行うことで、車載機器を所望の動作態様で動作させる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開２００２−１８９５６０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかしながら、上述した従来技術は、選択操作及び設定操作の双方をスイッチやノブの機械的な操作により行う構成である。そのため、対象機器に所望の機能を正確に実行させるには、手元を確認しながら行う必要がある。その結果、乗員の目線移動が多くなり、操作性を向上させる点で未だ改善の余地があった。
【０００６】
本発明は、操作性を向上させることができる車両用操作システムを提供することを目的とする。
【課題を解決するための手段】
【０００７】
この発明に係る車両用操作システムは、以下の構成を採用した。
（１）：この発明の一態様に係る車両用操作システムは、車両内に配置され、車両の乗員の操作を受け付ける操作部を含む操作ユニットと、車両の乗員が前記操作部に対して行う機械的な操作とは異なる操作に基づいて、複数の特定機器の中から操作対象となる対象特定機器を決定する決定部と、前記操作部に対して車両の乗員が行った機械的な操作に基づいて、前記対象特定機器を制御する機器制御部とを備える。
【０００８】
（２）：上記（１）の態様において、前記決定部により決定された対象特定機器を制御する制御モードを設定するモード設定部を、更に備え、前記機器制御部は、前記モード設定部により設定された制御モードと、前記操作部に対して車両の乗員が行った機械的な操作に基づいて、前記対象特定機器を制御するものである。
【０００９】
（３）：上記（１）または（２）の態様において、前記異なる操作は、車両の乗員によるジェスチャー、発話、または前記操作部に設けられたタッチパネルに対する接触操作であるものである。
【００１０】
（４）：上記（１）から（３）のいずれかの態様において、前記機械的な操作とは、揺動操作、押圧操作、および回転操作の少なくとも何れかの操作であるものである。
【００１１】
（５）：上記（１）から（４）のいずれかの態様において、前記機器制御部は、前記操作部に設けられたタッチパネルに対する入力操作に基づいて、前記対象特定機器を制御するものである。
【００１２】
（６）：上記（１）から（５）のいずれかの態様において、前記機器制御部は、前記機械的な第１操作に基づいて前記決定部により決定された複数の同一種別の対象特定機器のうちから制御対象の対象特定機器を設定し、第１操作の後に行われた前記機械的な第２操作に基づいて、設定した対象特定機器の制御量を制御するものである。
【００１３】
（７）：上記（６）の態様において、前記第２操作は前記第１操作が行われた状態で行われる操作であるものである。
【００１４】
（８）：上記（１）から（７）のいずれかの態様において、前記車両は、複数の同一種別の前記特定機器を備え、前記操作部は、前記決定部に決定された複数の同一種別の対象特定機器のうち、いずれの対象特定機器を選択するかをガイドする情報を表示させる第１表示部を含むものである。
【００１５】
（９）：上記（８）の態様において、前記第１表示部は、前記操作部に設けられるものである。
【００１６】
（１０）：上記（３）の態様において、前記決定部は、前記ジェスチャーに基づいて前記対象特定機器を決定する決定モードと、前記発話に基づいて前記対象特定機器を決定する決定モードとを切替可能であるものである。
【００１７】
（１１）：上記（１）から（１０）のいずれかの態様において、前記決定部の決定結果を車両の乗員に回答する回答部を備えるものである。
【００１８】
（１２）：この発明の一態様に係る車両用操作システムは、車両内に配置され、車両の乗員の操作を受け付ける操作部を含む操作ユニットと、車両の乗員が前記操作部に対して行う機械的な特定操作と、前記特定操作とは異なる機械的でない特定操作とのうち一方の操作である第１特定操作に基づいて、複数の特定機器の中から操作対象となる対象特定機器を決定する決定部と、車両の乗員が前記操作部に対して行う機械的な特定操作と、前記特定操作とは異なる機械的でない特定操作とのうち、前記第１特定操作とは異なる第２特定操作に基づいて、前記対象特定機器を制御する機器制御部とを備えるものである。
【発明の効果】
【００１９】
上記（１）〜（３）、（５）、（１２）の態様によれば、操作性を向上させることができる。具体的には、車両の乗員は、視線を動かさずに機器を操作することができる。
【００２０】
上記（４）、（６）、（７）の態様によれば、操作者が想像する文脈と手の動作を合致させた操作が可能となる。
【００２１】
上記（８）、（９）の態様によれば、車両の乗員は、制御内容と操作態様とを確認したい場合、容易に確認することができる。
【００２２】
上記（１０）の態様によれば、車両の乗員のニーズに応じて特定機器を指定する方法を設定することができる。
【００２３】
上記（１１）の態様によれば、音声や画面表示により制御対象の情報が通知されるため、意図した制御対象であるかを容易に認識することができる。この結果、意図しない制御態様を制御することを抑制することができる。
【図面の簡単な説明】
【００２４】
【図１】制御システムに含まれる操作ユニット１０が設けられた車室内の様子および操作ユニット１０の斜視図の一例を示す図である。
【図２】操作部１４および第２表示部１８の平面図である。
【図３】制御部１６０を含む車両の機能構成の一例を示す図である。
【図４】行動情報１８２の内容の一例を示す図である。
【図５】モード情報１８４は、制御モードと、操作ユニット１０に対する操作内容と、対象特定機器の制御内容とが互いに対応付けられた情報である。
【図６】制御部１６０を中心に実行される処理の流れの一例を示すフローチャートである。
【図７】操作ユニット１０がオン状態およびオフ状態に制御される場面の一例を示す図である。
【図８】ワイパユニット１３２が制御される場面の一例を示す図である。
【図９】シートユニット１３４が制御される場面の一例を示す図である。
【図１０】ドライブモードについて説明するための図である。
【図１１】ドライブモードが設定された際の表示態様の一例を示す図である。
【図１２】ワイパモードについて説明するための図である。
【図１３】ライトモードについて説明するための図である。
【図１４】ウインドモードについて説明するための図である。
【図１５】エアコンモードについて説明するための図である。
【図１６】オーディオモードについて説明するための図である。
【図１７】シートモードについて説明するための図である。
【図１８】実施形態の制御部１６０のハードウェア構成の一例を示す図である。
【発明を実施するための形態】
【００２５】
以下、本発明の実施形態を図面に基づいて説明する。以下、必要に応じてＸＹＺ座標を用いて説明する。例えば、Ｘ方向は、車両Ｍの中心軸方向であり、Ｙ方向は、車両Ｍの幅方向であり、Ｚ方向は車両Ｍの上下方向である。また、平面図において、プラスＸ方向を上方向、マイナスＸ方向を下方向、プラスＹ方向を右方向、マイナスＹ方向を左方向、マイナスＺ方向を奥方向と称する場合がある。
【００２６】
図１は、制御システムに含まれる操作ユニット１０が設けられた車室内の様子および操作ユニット１０の斜視図の一例を示す図である。操作ユニット１０は、車両Ｍにおいて、操作者の手が届きやすい場所（例えば、インストルメントパネル２）に配設されている。なお、操作ユニット１０は、例えば、センターコンソール３などに配設されていてもよい。
【００２７】
操作ユニット１０は、例えばインストルメントパネル２の内側に設けられたベース部に支持されている。操作ユニット１０は、ベース部から立設された操作軸１２と、操作軸の先端部に取り付けられた操作部１４と、を有している。操作部１４は、例えばドーム状（半球状）に形成されている。但し、操作部１４の形状は、操作者が把持可能な構成であれば適宜変更が可能である。
【００２８】
操作ユニット１０は、操作者が操作部１４を介した機械的な操作が可能となっている。本実施形態において、操作ユニット１０には、例えば傾動機構、押圧機構および回転機構（いずれも不図示）が搭載されている。傾動機構は、例えばベース部に設けられた球面軸受を備えている。傾動機構は、操作ユニット１０の操作軸１２を前後左右方向に傾動可能に支持している。本実施形態において、操作ユニット１０は、基準位置から前後左右の複数のポジションに傾動可能とされている。
【００２９】
具体的に、操作ユニット１０は、基準位置に対して上下方向に傾動した位置や、上下方向に傾動した位置から左右方向に傾動した位置、基準位置から左側に傾けた状態で前後に傾動した位置、基準位置から右側に傾けた状態で前後に傾動した位置等に傾動可能とされている。
【００３０】
押圧機構は、支持軸に対して操作部１４を上方に付勢する付勢部材を備えている。押圧機構は、操作部１４の押圧操作に伴い、操作軸１２に対して操作部１４をプラスマイナスＺ方向に動作させる。回転機構は、支持軸に対して操作部１４を支持軸の軸線回りに回転可能に支持している。なお、操作ユニット１０は、少なくとも揺動操作や押圧操作時の操作力が付与されていない状態において、付勢部材（不図示）等の付勢力によって基準位置に保持されることが好ましい（いわゆる、モーメンタリ式）。
【００３１】
このように、本実施形態の操作ユニット１０は、揺動（傾動）操作や押圧操作、回転操作等が可能となっている。但し、傾動機構や押圧機構、回転機構は、上述した構成に限らず、種々の構成を採用することが可能である。また、操作ユニット１０の操作態様は、上述した操作のうち少なくとも何れかの操作が可能であってもよく、上述した操作以外の操作が可能であってもよい。
【００３２】
図２は、操作部１４および第２表示部１８の平面図である。図２に示すように、操作ユニット１０は、第１表示部１６と第２表示部１８とを有する。第１表示部１６は、操作部１４の表面に配設されている。第１表示部１６は、例えば液晶ディスプレイや有機ＥＬディスプレイ等である。また、第１表示部１６は、タッチパネル機能を有する表示部であり、後述する第１受付部２０が重畳されている。第１表示部１６には、対象機器を動作させるための操作階層のうち、第１階層の選択項目等が表示される。第１階層の選択項目としては、例えば対象機器の動作モードや動作位置等が挙げられる。
【００３３】
第２表示部１８は、操作部１４を取り囲むＣ字状に配設されている。第２表示部１８には、例えば上述した第１階層で選択した選択項目の中で、所望の機能や設定値を選択する第２階層が表示される。なお、本実施形態では、インストルメントパネル２の表面のうち、第２表示部１８の両端部間に位置する部分には、ＩＧ（イグニッション）ボタンやハザードボタンが配設されている。但し、ＩＧボタンやハザードボタンは、インストルメントパネル２以外の部分に配設されていてもよい。
【００３４】
図３は、制御部１６０を含む車両の機能構成の一例を示す図である。車両Ｍは、例えば、操作ユニット１０と、カメラ１００と、マイク１１０と、スピーカ１２０と、車載機器１３０と、ＥＣＵ１５０と、駆動部１５２と、制御部１６０とを備える。操作ユニット１０は、例えば、上述した機能構成に加え、更に第１受付部２０と、第２受付部２２と、ユニット制御部２４とを備える。第１受付部２０は、第１表示部１６に対して行われた操作位置と操作内容とを検知し、検知結果をユニット制御部２４に出力する。
【００３５】
第２受付部２２は、操作ユニット１０の操作部１４に対して機械的に行われた操作（例えば、揺動操作（スライド操作）、押圧操作、回転操作）を受付け、受付け結果をユニット制御部２４に出力する。ユニット制御部２４は、第１受付部２０および第２受付部２２の出力結果を制御部１６０に送信する。また、ユニット制御部２４は、制御部１６０の指示内容に基づいて、第１表示部１６や第２表示部１８を制御する。
【００３６】
カメラ１００は、車室内において、例えば天井等の車室内の乗員を撮像可能な位置に設けられている。カメラ１００には、例えばＣＣＤ（Charge・Coupled・Device）やＣＭＯＳ（Complementary・Metal・Oxide・Semiconductor）等の固体撮像素子を利用したデジタルカメラが用いられている。
【００３７】
マイク１１０は、車室内において例えばインストルメントパネル２等に設けられている。マイク１１０は、車両の乗員の発話を収集する。スピーカ１２０は、車室内において例えばインストルメントパネル２等に設けられている。スピーカ１２０は、制御部１６０の指示に基づいて、情報を出力する。
【００３８】
車載機器１３０は、例えば、ワイパユニット１３２や、シートユニット１３４、ライトユニット１３６、ウインドユニット１３８、エアコンユニット１４０、オーディオユニット１４２等を含む。上記の各ユニットは、駆動部や駆動部を制御する制御部（ＥＣＵ；Electronic Control Unit）を備える。各ユニットの制御部は、制御部１６０の指示に基づいて、自ユニットを制御する。ワイパユニット１３２は、例えば、ワイパやワイパを駆動させる駆動部、駆動部を制御するＥＣＵ等を備え、シートユニット１３４は、例えば、シートや、シートの背もたれを前後に駆動させる駆動部、シートをＸ方向にスライドさせる駆動部、これらの駆動部を制御部するＥＣＵ等を備える。ライトユニット１３６は、フロントライトやリアライト、これらのライトを制御するＥＣＵ等を備える。
【００３９】
また、ウインドユニット１３８は、車両のドア等に設けられたウインドを開閉する駆動部や駆動部を制御するＥＣＵ等を備え、エアコンユニット１４０は、熱交換器や熱交換器およびエアコンの吹き出し口から送風される風量を制御するＥＣＵ等を備える。また、オーディオユニット１４２は、オーディオのモード（ＡＭラジオ、ＦＭラジオの電波を受信するモード）やスピーカ１２０に音を出力させる音量、放送局の選局の制御を行うＥＣＵ等を備える。
【００４０】
なお、車載機器は、例えば上記のユニットの他に、例えばナビゲーション装置やチルト・テレスコ装置、光源装置等であってもよい。
【００４１】
ＥＣＵ１５０は、例えば、駆動部１５２およびトランスミッションを制御するＥＣＵである。ＥＣＵ１５０は、制御部１６０によって設定された駆動部の制御モードに基づいて駆動部１５２およびトランスミッション（シフトポジション）を制御する。駆動部１５２は、エンジン等（またはモータ等）の動力源やトランスミッションを含む。なお、本実施形態の車両の動力源はエンジンであるものとする。
【００４２】
制御部１６０は、例えば、画像処理部１６２と、音声処理部１６４と、切替部１６６と、決定部１６８と、回答部１７０と、モード設定部１７２と、表示制御部１７４と、機器制御部１７６とを備える。これらの機能部は、例えば、ＣＰＵ（Central Processing Unit）などのハードウェアプロセッサがプログラム（ソフトウェア）を実行することにより実現される。また、これらの構成要素のうち一部または全部は、ＬＳＩ（Large Scale Integration）やＡＳＩＣ（Application Specific Integrated Circuit）、ＦＰＧＡ（Field-Programmable Gate Array）、ＧＰＵ（Graphics Processing Unit）などのハードウェア（回路部；circuitryを含む）によって実現されてもよいし、ソフトウェアとハードウェアの協働によって実現されてもよい。プログラムは、予め制御部ユニットのＨＤＤやフラッシュメモリなどの記憶装置に格納されていてもよいし、ＤＶＤやＣＤ−ＲＯＭなどの着脱可能な記憶媒体に格納されており、記憶媒体がドライブ装置に装着されることで制御ユニットのＨＤＤやフラッシュメモリにインストールされてもよい。記憶部１８０は、ＲＯＭ（Read Only Memory）やＲＡＭ（Random Access Memory）、ＨＤＤ（Hard Disk Drive）、フラッシュメモリ等で実現される。記憶部１８０には、例えば、行動情報１８２と、モード情報１８４とが記憶されている。これらの情報の詳細については後述する。
【００４３】
画像処理部１６２は、カメラ１００により撮像された画像を解析し、車両の乗員が所定のジェスチャーを行っているか否かを判定する。例えば、画像処理部１６２は、所定のジェスチャーに対応する画像処理結果（例えばエッジなどの特徴量の分布）が記憶された対応情報を参照し、所定のジェスチャーがされたか否かの判定を判定する。画像処理部１６２が処理を実行するモードを「画像処理モード」と称する。
【００４４】
音声処理部１６４は、マイク１１０により収集たれた音声を解析し、車両の乗員が所定の発話を行ったか否かを判定する。例えば、音声処理部１６４は、所定の発話に対応する音声処理結果（例えば音のスペクトラム）が記憶された対応情報を参照し、所定の発話がされたか否かの判定を判定する。音声処理部１６４が処理を実行するモードを「音声処理モード」と称する。
【００４５】
切替部１６６は、例えば、対象特定機器を決定する処理において、画像処理モードを実行するか、音声処理モードを実行するか、これらのモードの双方を実行するかを切り替える。切替部１６６は、乗員による操作ユニット１０の操作や、不図示の操作部の操作、モード切替のジェスチャー（または発話）等によって切替を行う。この場合、画像処理部１６２が、モード切替のジェスチャーが行われているか否かを判定し、判定結果に基づいて、モードの切替を行う。また、切替部１６６は、対象特定機器を決定する処理において、画像処理モード、音声処理モード、および第１表示部１６に対する接触操作モードのうち、いずれを実行するかを切り替えてもよい。接触操作モードとは、制御部１６０が、タッチパネルである第１表示部１６に対して所定の接触操作（タッチ操作やフリック操作、スワイプ操作など）が行われたと判定した場合に、対象特定機器を決定するモードである。
【００４６】
決定部１６８は、車両の乗員が操作部１４を機械的に動かす操作とは異なる操作（例えばジェスチャーや発話による操作、第１表示部１６に対する接触操作）に基づいて、複数の特定機器の中から操作対象となる対象特定機器を決定する。特定機器とは、例えば、車載機器１３０に含まれる機器、ＥＣＵ１５０、および駆動部１５２のうち一部または全部である。
【００４７】
決定部１６８は、画像処理部１６２により所定のジェスチャーが行われたと判定された場合、ジェスチャーの種別の情報を取得し、行動情報１８２を参照して、ジェスチャーの種別に対応付けられた対象特定機器および制御モードを決定する。また、決定部１６８は、音声処理部１６４により所定の発話が行われたと判定された場合、発話の種別の情報を取得し、行動情報１８２を参照して、発話の種別に対応付けられた対象特定機器および制御モードを決定する。決定部１６８は、接触操作が行われたと判定された場合、接触操作の種別の情報を取得し、行動情報１８２を参照して、接触操作の種別に対応付けられた対象特定機器および制御モードを決定する。
【００４８】
図４は、行動情報１８２の内容の一例を示す図である。行動情報１８２は、ジェスチャーの種別と、ジェスチャーによって指定される機器と、制御モードとが互いに対応付けられた情報である。また、行動情報１８２は、発話の種別と、発話によって指定される機器と、制御モードとが互いに対応付けられた情報である。更に、行動情報１８２は、接触操作の種別と、接触操作によって指定される機器と、制御モードとが互いに対応付けられた情報である。
【００４９】
回答部１７０は、決定部１６８により決定された対象特定機器の情報をスピーカに出力させる。また、回答部１７０は、複数の同一種別の対象特定機器のうち、どの特定機器（どの位置の特定機器）が制御対象に設定されたかを示す情報をスピーカに出力させてもよい。例えば、フロント側のワイパや、運転席が指定されたことを示す情報がスピーカに出力される。また、回答部は、音声に代えて（加えて）、車両に設けられた表示部に設定された制御対象の情報や、指定された特定機器の情報を表示させてもよい。
【００５０】
モード設定部１７２は、決定された制御モードで対象特定機器を制御するために、制御モードを切り替えたり、制御モードを設定したりする。
【００５１】
表示制御部１７４は、モード設定部１７２によって設定された（または切り替えられた）制御モードに基づいて、操作ユニット１０の第１表示部１６または第２表示部１８の表示態様を制御する。
【００５２】
機器制御部１７６は、操作部に対して車両の乗員が行った機械的な操作に基づいて、対象特定機器を制御する。機器制御部１７６は、モード情報１８４を参照して、対象特定機器を制御する。機械制御部１７６は、第１受付部２０の受付結果に基づいて、対象特定機器を制御してもよい。すなわち、機器制御部１７６は、タッチパネルに対して行われた接触操作に基づいて対象特定機器を制御してもよい。
【００５３】
図５は、モード情報１８４は、制御モードと、操作ユニット１０に対する操作内容と、対象特定機器の制御内容とが互いに対応付けられた情報である。例えば、制御モード「０１」において、ウインカが作動している際に操作ユニット１０の操作部の位置が基準位置で奥方向に押下された場合、ウインカがオフ状態に制御されることがモード情報１８４に規定されている。また、制御モード「０１」において、基準位置から上方向に操作部１４がスライド操作された場合、シフトがドライブレンジに設定されることがモード情報１８４に規定されている。モード情報１８４の詳細については後述する。また、モード情報１８４には、制御モードに対して、第１表示部１６または第２表示部１８に表示させる表示態様の情報が、操作内容ごとに対応付けられている。表示制御部１７４は、モード情報１８４と、操作の内容とに基づいて、第１表示部１６または第２表示部１８の表示態様を制御する。
【００５４】
［フローチャート］
図６は、制御部１６０を中心に実行される処理の流れの一例を示すフローチャートである。なお、本フローチャートでは、一例としてジェスチャーに基づいて、対象特定機器を特定するものとして説明するが、音声、または接触操作によって対象特定機器を特定されてもよい。
【００５５】
まず、操作ユニット１０がオフ状態において、制御部１６０は、操作ユニット１０がオン状態になったか否かを判定する（ステップＳ１００）。操作ユニット１０がオン状態になると、画像処理部１６２が、カメラ１００により撮像された画像を取得し、取得した画像を解析する画像処理を実行する（ステップＳ１０２）。そして、画像処理部１６２は、車両の乗員が所定のジェスチャーを行っているか否かを判定する（ステップＳ１０４）。
車両の乗員が所定のジェスチャーを行っていない場合、ステップＳ１０２の処理に戻る。
【００５６】
車両の乗員が所定のジェスチャーを行っている場合、決定部１６８は、行動情報１８２を参照して、ジェスチャーの種別に対応付けられた対象特定機器および制御モードを決定する（ステップＳ１０６）。そして、モード設定部１７２が、制御モードを設定する。次に、回答部１７０が、決定部１６８により決定された対象特定機器の情報をスピーカに出力させる（ステップＳ１０８）。次に、制御部１６０は、対象特定機器を制御するための、車両の乗員による操作ユニット１０に対する操作を受け付けたか否かを判定する（ステップＳ１１０）。
【００５７】
操作ユニット１０に対する操作を受け付けた場合、機器制御部１７６が、操作ユニット１０に対する操作に応じて、対象特定機器を制御する（ステップＳ１１２）。また、表示制御部１７４が、操作ユニット１０に対する操作に応じて、操作ユニット１０の第１表示部１６または第２表示部１８の表示態様を制御する。次に、制御部１６０が、対象特定機器に対する制御を終了するか否かを判定する（ステップＳ１１４）。特定対象機器に対する制御を終了しないと判定した場合、ステップＳ１１０の処理に戻り、特定対象機器に対する制御を終了すると判定した場合（例えば、所定時間の間、操作部１４が操作されない状態が継続した場合）、本フローチャートの１ルーチンの処理は終了する。
【００５８】
上述した処理により、乗員は、音声やジェスチャー等で制御対象の特定機器を特定し、操作部１４に対する操作によって、特定機器を制御することができるため、操作性が向上する。
【００５９】
［具体例（１）］
図７は、操作ユニット１０がオン状態およびオフ状態に制御される場面の一例を示す図である。図７（１）に示すように、操作ユニット１０がオフ状態において、第２表示部１８の領域ＡＲ１をタッチするようなジェスチャーが行われると（電源をオン状態にする意思表示が行われると）、制御部１６０は、図７（２）に示すように操作ユニット１０の電源をオン状態に制御する。そして、第１表示部１６に所定の情報が表示される。例えば、制御モード「０１（ドライブモード）」に制御モードが設定され、図７（３）に示すように、第１表示部１６および第２表示部１８に制御モード「０１」の表示態様が表示される。
【００６０】
図７（４）に示すように、第２表示部１８の領域ＡＲ１をタッチするようなジェスチャーが行われ（電源をオフ状態にする意思表示が行われ）、更に図７（５）に示すように操作ユニット１０の電源をオフ状態にするジェスチャーを車両の乗員が行うと、第１表示部１６に操作ユニット１０をオフ状態にすることを示す情報が表示される。そして、制御部１６０は、図７（６）に示すように操作ユニット１０の電源をオフ状態に制御する。
【００６１】
上述したように、ジェスチャーや音声、接触操作によって、操作ユニット１０をオン状態またはオフ状態に制御することができるため、車両の乗員の利便性が向上する。
【００６２】
［具体例（２）］
図８は、ワイパユニット１３２が制御される場面の一例を示す図である。図８（１）に示すように、ワイパユニット１３２を指定するフリック操作が第１表示部１６に対して行われると（またはワイパユニット１３２を指定する発話、またはジェスチャーが行われると）、図８（２）に示すように、制御モードはワイパユニット１３２を制御するための制御モードに設定される。そして、第１表示部１６および第２表示部１８にワイパユニット１３２の制御モードに応じた表示態様が表示される。
【００６３】
例えば、第１表示部１６には、制御位置（フロント側またはリア側）を設定することをガイドする表示が表示される。具体的には、第１表示部１６には、上方向にスライド操作されるとフロント側が設定され、下方向にスライド操作されるとリア側が設定されることを示す情報が表示される。また、第２表示部１８には、右方向に回転操作すると制御量が大きくなり、左方向に回転操作すると制御量が小さくなることを示す情報が表示される。
【００６４】
例えば、図８（３）に示すように、操作部１４が上方向にスライド操作されると、制御部１６０は、フロント側のワイパを制御対象に設定する。この状態において、図８（４）に示すように、操作部１４が右方向に回転操作されると、制御部１６０は、フロント側のワイパを動かす速度を基準速度よりも速くするように制御する。
【００６５】
また、例えば、図８（５）に示すように、図８（２）の状態から操作部１４が下方向にスライド操作されると、制御部１６０は、リア側のワイパを制御対象に設定する。この状態において、図８（６）に示すように、操作部１４が左方向に回転操作されると、制御部１６０は、フロント側のワイパを動かす速度を基準速度よりも遅くし、所定の度合以上、操作部１４が左方向に回転操作されると、ワイパの動作を停止させる。
【００６６】
上述したように、ジェスチャーや音声、接触操作によって、制御対象が設定され、スライド（第１操作）によって制御位置を決定した後に、回転操作（第２操作）によって制御量を制御することができる。車両の乗員は、操作の文脈に沿って、容易に制御対象を制御することができるため、操作性が向上する。
【００６７】
［具体例（３）］
図９は、シートユニット１３４が制御される場面の一例を示す図である。図９（１）に示すように、シートユニット１３４を指定するフリック操作が第１表示部１６に対して行われると、図９（２）に示すように、制御モードはシートユニット１３４を制御するためのモードに設定される。そして、第１表示部１６および第２表示部１８にシートユニット１３４の制御モードに応じた表示態様が表示される。具体的には、第１表示部１６には、右方向にスライド操作されると運転席が設定され、左方向にスライド操作されると助手席が設定されることを示す情報が表示される。更に、右方向または左方向にスライド操作された状態で、上方向または下方向にスライド操作されると設定された制御対象が制御されることを示す情報が、第１表示部１６に表示される。また、第２表示部１８には、対象特定機器の情報が表示される。
【００６８】
例えば、図９（３）に示すように、操作部１４が右方向にスライド操作されると、制御部１６０は、運転席を制御対象に設定する。この状態において、図９（４）に示すように、操作部１４が上方向にスライド操作されると、制御部１６０は、運転席の背もたれを前に倒すように運転席を制御する。また、図９（４）において、制御内容の情報（制御内容はリクライニングであることを示す情報）が第１表示部１６に表示される。
【００６９】
また、例えば、図９（５）に示すように、図９（２）の状態において、操作部１４を左方向にスライド操作されると、制御部１６０は、助手席を制御対象に設定する。この状態において、操作部１４が奥方向（マイナスＺ方向）に押下され、図９（６）に示すように、操作部１４が下方向にスライド操作されると、制御部１６０は、助手席のシートを車両の後方にスライドさせる。なお、操作部１４が左方向にスライド操作されると、制御内容の情報（制御内容はスライドであることを示す情報）が第１表示部１６に表示される。
【００７０】
上述したように、ジェスチャーや音声、接触操作によって、制御対象が設定され、スライド（第１操作）によって制御位置を決定した後に、上記のスライド操作とは異なる方向のスライド操作（第２操作）によって制御量を制御することができる。車両の乗員は、操作の文脈に沿って、容易に制御対象を制御することができるため、操作性が向上する。
【００７１】
［制御モード］
以下、各制御モードの一例について説明する。
【００７２】
（ドライブモード）
図１０は、ドライブモードについて説明するための図である。ドライブモードでは、ウインカがオン状態において、操作部１４が基準位置で奥方向に押下されると、制御部１６０はウインカをオフ状態に制御する。ウインカがオフ状態において、操作部１４が基準位置で奥方向に押下されると、制御部１６０はライト（前照灯）をパッシングさせる制御を行う。
【００７３】
操作部１４が基準位置から上方向にスライド操作されると、制御部１６０は、シフト位置をドライブレンジに設定し、この状態において、操作部１４が右方向に回転操作されると、制御部１６０はドライブモードをパワードライブモードに設定し、操作部１４が左方向に回転操作されると、制御部１６０はドライブモードをエコドライブモードに設定する。パワードライブモードは、エコモードよりも加速性を重視したドライブモードであり、エコドライブモードは、パワードライブモードよりも燃費性を重視したドライブモードである。なお、基準位置において操作部１４が回転操作されることでパワードライブモードまたはエコドライブモードが設定されてもよい。
【００７４】
なお、パワードライブモードに設定された場合、図１１の右図に示すように、第１表示部１６は、パワードライブモードに応じて表示態様に制御され、エコドライブモードに設定された場合、図１１の左図に示すように、第１表示部１６は、エコドライブモードに応じて表示態様に制御される。操作部１４が基準位置から下方向にスライド操作されると、制御部１６０は、シフトをバックレンジに設定する。
【００７５】
操作部１４が基準位置から右方向にスライド操作されると、制御部１６０は、右ウインカを指定し、この状態において、操作部１４が上方向にスライド操作されると、制御部１６０は、指定した右ウインカを所定時間（例えば３秒）点滅させる。操作部１４が基準位置から左方向にスライド操作されると、制御部１６０は、左ウインカを指定し、この状態において、操作部１４が上方向にスライド操作されると、制御部１６０は、指定した左ウインカを所定時間（例えば３秒）点滅させる。
【００７６】
（ワイパモード）
図１２は、ワイパモードについて説明するための図である。ワイパモードでは、ワイパがオン状態において、操作部１４が基準位置で奥方向に押下されると、制御部１６０はワイパをオフ状態に制御する。操作部１４が基準位置から上方向にスライド操作されると、制御部１６０は、フロント側のワイパを制御対象に設定し、操作部１４が基準位置から下方向にスライド操作されると、制御部１６０は、リア側のワイパを制御対象に設定する。操作部１４が上方向または下方向にスライド操作された状態において、操作部１４が右方向に回転操作されると、制御対象のワイパを動かす速度を基準速度よりも速くするようにワイパを制御し、操作部１４が左方向に回転操作されると、制御部１６０は、制御対象のワイパを動かす速度を基準速度よりも遅くするようにワイパを制御し、所定の度合以上、操作部１４が左方向に回転操作されると、ワイパの動作を停止させる。
【００７７】
（ライトモード）
図１３は、ライトモードについて説明するための図である。ライトモードでは、操作部１４が基準位置で奥方向に所定時間以内に２回押下されると、制御部１６０はライトをパッシングさせるように制御する。操作部１４が基準位置から上方向にスライド操作されると、制御部１６０は、フロント側のライトを制御対象に設定し、オートハイモードでライトを制御する。オートハイモードは、例えば、基本的にハイビームが照射され、前方に先行車や対向車等を検知した場合にロービームが照射されるモードである。なお、操作部１４が基準位置において奥方向に押下された状態で、基準位置から上方向にスライド操作されると、制御部１６０は、ハイビームを照射させるようにライトを制御する。
【００７８】
操作部１４が基準位置から下方向にスライド操作されると、制御部１６０は、リア側のライトを制御対象に設定し、オートローモードでライトを制御する。オートローモードは、例えば、基本的にロービームが照射され、先行車や対向車が存在せず且つ前方の明るさが所定度合以下である場合にハイビームが照射されるモードである。なお、操作部１４が基準位置において奥方向に押下された状態で、基準位置から下方向にスライド操作されると、制御部１６０は、ロービームを照射させるようにライトを制御する。
【００７９】
また、操作部１４が基準位置にある状態、或いは基準位置から上方向または基準位置から下方向に操作部１４がスライド操作された状態において、操作部１４が右方向に回転操作されると、ライトが照射する光量が大きくなり、操作部１４が左方向に回転操作されると、ライトが照射する光量が小さくなるように制御される。
【００８０】
（ウインドモード）
図１４は、ウインドモードについて説明するための図である。ウインドモードでは、車両の各ウインドが閉止している状態で操作部１４が基準位置で奥方向に所定時間以内に２回押下されると、制御部１６０が、各ウインドを全開に制御し、車両の各ウインドが開放している状態で操作部１４が基準位置で奥方向に所定時間以内に２回押下されると、制御部１６０が、各ウインドを全閉に制御する。また、上記の制御（全開放または全閉止の制御）中において、操作部１４が基準位置で奥方向に１回押下されると、制御部１６０は制御を停止する。
【００８１】
操作部１４が基準位置から右方向にスライド操作されると、制御部１６０は、右側のウインドを制御対象に設定し、その位置から操作部１４が上方向にスライド操作されると、制御部１６０は、フロント側のウインドを制御対象に設定し、その位置から操作部１４が下方向にスライド操作されると、制御部１６０は、リア側のウインドを制御対象に設定する。そして、制御対象のウインドが設定された位置（フロント側またはリア側、右側または左側）において、操作部１４が奥方向に押下されると、ウインドが開放されている状態ではウインドが閉止するように制御される、ウインドが閉止されている状態ではウインドが開放するように制御される。
【００８２】
（エアコンモード）
図１５は、エアコンモードについて説明するための図である。エアコンモードでは、エアコンがオン状態において操作部１４が基準位置で奥方向に押下されると、制御部１６０はエアコンをオフ状態に制御する。操作部１４が基準位置から上方向にスライド操作されると、制御部１６０は、エアコンを暖房モードに設定し、その状態において操作部１４が、右方向にスライド操作されると内気循環モードに設定され、左方向にスライド操作されると外気循環モードに設定される。
【００８３】
操作部１４が基準位置から下方向にスライド操作されると、制御部１６０は、エアコンを冷房モードに設定し、その状態において操作部１４が、右方向にスライド操作されると内気循環モードに設定され、左方向にスライド操作されると外気循環モードに設定される。なお、操作部１４が基準位置の状態で、右方向に回転操作されると内気循環モードに設定され、左方向に回転操作されると外気循環モードに設定されてもよい。
【００８４】
操作部１４が基準位置から右方向にスライド操作されると、制御部１６０は、運転席側の送風量を調整することを設定し、その位置から上方向にスライド操作されると、制御部１６０は、顔方向の送風量を調整することを設定し、その位置から操作部１４が下方向にスライド操作されると、制御部１６０は、足元の送風量を調整することを設定する。操作部１４が基準位置から左方向にスライド操作されると、制御部１６０は、助手席側の送風量を調整することを設定し、その位置から上方向にスライド操作されると、制御部１６０は、顔方向の送風量を調整することを設定し、その位置から操作部１４が下方向にスライド操作されると、制御部１６０は、足元の送風量を調整することを設定する。
【００８５】
（オーディオモード）
図１６は、オーディオモードについて説明するための図である。オーディオモードでは、オーディオがオン状態において操作部１４が基準位置で奥方向に押下されると、制御部１６０はオーディオをオフ状態に制御する。操作部１４が基準位置から上方向にスライド操作されると、制御部１６０は、選局のための周波数をプラス方向に制御し、操作部１４が基準位置から下方向にスライド操作されると、制御部１６０は、選局のための周波数をマイナス方向に制御する。
【００８６】
また、操作部１４が基準位置から右方向にスライド操作され、且つ上方向に制御されると、制御部１６０は、ＡＭを聴取するためのＡＭモードに設定し、操作部１４が基準位置から右方向にスライド操作され、且つ下方向に制御されると、制御部１６０は、ＦＭを聴取するためのＦＭモードに設定する。また、操作部１４が基準位置から左方向にスライド操作され、且つ上方向に制御されると、制御部１６０は、ブルートゥース（Bluetooth（登録商標））通信するためのモードに設定し、操作部１４が基準位置から右方向にスライド操作され、且つ下方向に制御されると、制御部１６０は、上記とは異なるモードにオーディオを設定する。
【００８７】
（シートモード）
図１７は、シートモードについて説明するための図である。シートモードでは、操作部１４が基準位置で奥方向に押下されると、制御部１６０はスライドモードを設定する。スライドモードは、シートの底部をスライドさせるための制御を行うモードである。操作部１４が基準位置から右方向にスライド操作されると、制御部１６０は、運転席を制御対象に設定し、この位置から操作部１４が上方向にスライド操作されると運転席の背もたれが前方に制御され、この位置から操作部１４が下方向にスライド操作されると運転席の背もたれが後方に制御される。なお、スライドモードが設定されている場合は、この位置から操作部１４が上方向にスライド操作されると運転席の底部が前方にスライドするように制御され、この位置から操作部１４が下方向にスライド操作されると運転席の底部が後方にスライドするように制御される。また、操作部１４が基準位置から左方向にスライド操作されると、制御部１６０は、助手席を制御対象に設定し、上記と同等の制御を行う。
【００８８】
なお、上述した例では、制御部１６０は、ジェスチャーや音声によって対象特定機器を決定し、操作部１４に対する機械的な操作によって、対象特定機器のうち制御する特定機器の位置（フロント側やリア側などの位置）を特定し、特定した対象特定機器を制御するものとしたが、これに代えて、操作部１４に対する機械的な操作によって、対象特定機器を決定し、ジェスチャーや音声によって対象特定機器のうち制御する特定機器の位置（フロント側やリア側などの位置）を特定し、特定した対象特定機器を制御してもよい。すなわち、車両の乗員が前記操作部に対して行う機械的な特定操作と、前記特定操作とは異なる機械的でない特定操作とのうち一方の操作である第１特定操作に基づいて、複数の特定機器の中から操作対象となる対象特定機器を決定し、車両の乗員が前記操作部に対して行う機械的な特定操作と、前記特定操作とは異なる機械的でない特定操作とのうち、前記第１特定操作とは異なる第２特定操作に基づいて、前記対象特定機器を制御してもよい。
【００８９】
［ハードウェア構成］
図１８は、実施形態の制御部１６０のハードウェア構成の一例を示す図である。図示するように、制御部１６０は、通信コントローラ１６０−１、ＣＰＵ１６０−２、ワーキングメモリとして使用されるＲＡＭ（Random Access Memory）１６０−３、ブートプログラムなどを格納するＲＯＭ（Read Only Memory）１６０−４、フラッシュメモリやＨＤＤ（Hard Disk Drive）などの記憶装置１６０−５、ドライブ装置１６０−６などが、内部バスあるいは専用通信線によって相互に接続された構成となっている。通信コントローラ１６０−１は、制御部１６０以外の構成要素との通信を行う。記憶装置１６０−５には、ＣＰＵ１６０−２が実行するプログラム１６０−５ａが格納されている。このプログラムは、ＤＭＡ（Direct Memory Access）コントローラ（不図示）などによってＲＡＭ１６０−３に展開されて、ＣＰＵ１６０−２によって実行される。これによって、画像処理部１６２、音声処理部１６４、切替部１６６、決定部１６８、回答部１７０、モード設定部１７２、表示制御部１７４、および機器制御部１７６のうち一部または全部が実現される。
【００９０】
以上説明した実施形態によれば、車両用操作システム１は、車両内に配置され、車両の乗員の操作を受け付ける操作部１４を含む操作ユニット１０と、車両の乗員が操作部１４に対して行う機械的な操作とは異なる操作（ジェスチャー、発話、接触操作）に基づいて、複数の特定機器の中から操作対象となる対象特定機器を決定する決定部１６８と、操作部１４に対して車両の乗員が行った機械的な操作に基づいて、対象特定機器を制御する機器制御部１７６とを備えることにより、操作性を向上させることができる。
【００９１】
以上、本発明を実施するための形態について実施形態を用いて説明したが、本発明はこうした実施形態に何等限定されるものではなく、本発明の要旨を逸脱しない範囲内において種々の変形及び置換を加えることができる。
【符号の説明】
【００９２】
１‥車両用操作システム、１０‥操作ユニット、１４‥操作部、１６‥第１表示部、１８‥第２表示部、１００‥カメラ、１１０‥マイク、１３０‥車載機器、１６０‥制御部、
１６２‥画像処理部、１６４‥音声処理部、１６６‥切替部、１６８‥決定部、１７０‥回答部、１７２‥モード設定部、１７４‥表示制御部、１７６‥機器制御部、１８０‥記憶部、１８２‥行動情報、１８４‥モード情報
【図１】
2019214344.tif 000003
【図２】
2019214344.tif 000004
【図３】
2019214344.tif 000005
【図４】
2019214344.tif 000006
【図５】
2019214344.tif 000007
【図６】
2019214344.tif 000008
【図７】
2019214344.tif 000009
【図８】
2019214344.tif 000010
【図９】
2019214344.tif 000011
【図１０】
2019214344.tif 000012
【図１１】
2019214344.tif 000013
【図１２】
2019214344.tif 000014
【図１３】
2019214344.tif 000015
【図１４】
2019214344.tif 000016
【図１５】
2019214344.tif 000017
【図１６】
2019214344.tif 000018
【図１７】
2019214344.tif 000019
【図１８】
2019214344.tif 000020