(57)【要約】【課題】車両のユーザーにとって使い勝手がよく、直観的にコンテンツを得ることができる車載ユーザーインターフェース装置を提供する。【解決手段】コンテンツを記憶した記憶装置と、車室の座席間の空間に、複数のコンテンツを立体画像として分散配置して表示する表示装置３０と、表示装置３０が立体画像を表示可能な表示領域３１内におけるユーザーの手の動作を検出する動作検出手段と、複数の立体画像のうち動作により選択された立体画像を、動作に追随させて表示装置３０に表示させる表示制御手段と、を備える。【選択図】図５
2019086911.tif 000002
【特許請求の範囲】
【請求項１】
所定のコンテンツを記憶した記憶装置と、
車室の座席間の空間に、複数の前記コンテンツを立体画像として分散配置して表示する表示装置と、
前記表示装置が前記立体画像を表示可能な表示領域内におけるユーザーの手の動作を検出する動作検出手段と、
複数の前記立体画像のうち前記動作により選択された前記立体画像を、前記動作に追随させて前記表示装置に表示させる表示制御手段と、を備える
ことを特徴とする車載ユーザーインターフェース装置。
【請求項２】
請求項１に記載の車載ユーザーインターフェース装置であって、
前記表示装置に対する乗員の位置を検出する乗員位置検出手段を備え、
前記表示制御手段は、前記立体画像を前記乗員の位置に向けて表示する
ことを特徴とする車載ユーザーインターフェース装置。
【請求項３】
請求項１又は請求項２に記載の車載ユーザーインターフェース装置において、
前記表示制御手段は、前記立体画像に手が接した動作を検出したとき前記立体画像を複製し、複製された前記立体画像を手の動作に追随させて表示する
ことを特徴とする車載ユーザーインターフェース装置。
【請求項４】
請求項１から請求項３の何れか一項に記載の車載ユーザーインターフェース装置において、
ユーザーの音声を検出する音声認識手段を備え、
前記表示制御手段は、検出された音声に関連するコンテンツを前記記憶装置から検索する
ことを特徴とする車載ユーザーインターフェース装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、様々なコンテンツを立体映像として空間に表示し、その立体映像の周囲におけるユーザーの手の動きに応じて立体映像を変化させる車載ユーザーインターフェース装置に関する。
【背景技術】
【０００２】
従来、液晶パネルなどの表示装置を用いた車載表示装置が知られている（例えば、特許文献１参照）。このような車載表示装置は、空調装置など車両に備わる各種装置に関する情報を表示するだけではなく、車両周辺の施設に関する情報なども表示することができる。
【０００３】
このように車両のユーザーに提示する情報は多種多様となっているため、ユーザーに分かりやすく表示するための様々な工夫がなされている。例えば、複数の情報を三次元的に画面に表示し、ユーザーの操作に基づいて表示位置などを変化させている。
【０００４】
しかしながら、表示装置の表示範囲は、多数の情報を表示するには限界があり、ユーザーにとって見難いものとなってしまう。また、ユーザーの操作によって情報を見やすい位置に表示させるとしても、そのために必要な操作が複数ステップを踏む必要があるなど、煩雑になってしまう。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２０１３−８４０７０号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
本発明は、このような事情に鑑みてなされたものであり、車両のユーザーにとって使い勝手がよく、直観的にコンテンツを得ることができる車載ユーザーインターフェース装置を提供することを目的とする。
【課題を解決するための手段】
【０００７】
上記課題を解決する本発明の第１の態様は、所定のコンテンツを記憶した記憶装置と、車室の座席間の空間に、複数の前記コンテンツを立体画像として分散配置して表示する表示装置と、前記表示装置が前記立体画像を表示可能な表示領域内におけるユーザーの手の動作を検出する動作検出手段と、複数の前記立体画像のうち前記動作により選択された前記立体画像を、前記動作に追随させて前記表示装置に表示させる表示制御手段と、を備えることを特徴とする車載ユーザーインターフェース装置にある。
【０００８】
第１の態様では、ユーザーが立体画像に直接触れ、見やすい位置に移動させたり、見やすく拡大させるなど、直観的なユーザーインターフェースが実現される。
【０００９】
本発明の第２の態様は、第１の態様に記載の車載ユーザーインターフェース装置であって、前記表示装置に対する乗員の位置を検出する乗員位置検出手段を備え、前記表示制御手段は、前記立体画像を前記乗員の位置に向けて表示することを特徴とする車載ユーザーインターフェース装置にある。
【００１０】
第２の態様では、乗員の位置に向けて立体画像を表示することができる。これにより、乗員に対して、立体画像をより一層見やすく表示させることができる。
【００１１】
本発明の第３の態様は、第１又は第２の態様に記載の車載ユーザーインターフェース装置において、前記表示制御手段は、前記立体画像に手が接した動作を検出したとき前記立体画像を複製し、複製された前記立体画像を手の動作に追随させて表示することを特徴とする車載ユーザーインターフェース装置にある。
【００１２】
第３の態様では、立体画像を手の動作に応じてコピーして表示することができる。これにより、複数の乗員同士で一つの立体画像を取り合うことなく、その立体画像を手元で閲覧することができる。
【００１３】
本発明の第４の態様は、第１から第３の何れか一つの態様に記載の車載ユーザーインターフェース装置において、ユーザーの音声を検出する音声認識手段を備え、前記表示制御手段は、検出された音声に関連するコンテンツを前記記憶装置から検索することを特徴とする車載ユーザーインターフェース装置にある。
【００１４】
第４の態様では、所望するコンテンツを素早く簡単に表示することができる。
【発明の効果】
【００１５】
本発明によれば、車両のユーザーにとって使い勝手がよく、直観的にコンテンツを得ることができる車載ユーザーインターフェース装置が提供される。
【図面の簡単な説明】
【００１６】
【図１】車載ユーザーインターフェース装置の概略平面図である。
【図２】表示装置及びモーションセンサーを示す斜視図である。
【図３】車載ユーザーインターフェース装置のブロック図である。
【図４】コンテンツを表した立体画像の例を示す図である。
【図５】表示装置により表示されるコンテンツの立体画像の斜視図である。
【図６】車載装置を設定するための立体画像を示す平面図である。
【図７】複数の乗員による車載ユーザーインターフェース装置の利用形態を示す平面図である。
【発明を実施するための形態】
【００１７】
以下、本発明を実施するための形態について説明する。なお、実施形態の説明は例示であり、本発明は以下の説明に限定されない。
【００１８】
〈実施形態１〉
図１は車載ユーザーインターフェース装置の概略平面図であり、図２は表示装置及びモーションセンサーを示す斜視図である。車両１の前後方向をＸ方向とし、車幅方向をＹ方向とし、高さ方向をＺ方向とする。以後の図においても同様である。
【００１９】
図１に示すように、車両１の車室４には、前席（運転席及び助手席）を構成する２つの前席シート２（２Ａ，２Ｂ）と、後席を構成する２つの後席シート３（３Ａ，３Ｂ）とが配置されている。
【００２０】
前席シート２は、鉛直軸（Ｚ軸）回りで回動自在に設けられている。つまり前席シート２は、車両前方を向く前向き位置と、車両後方を向いて後席シート３と対面する後ろ向き位置と、の間で回動自在に設けられている。
【００２１】
また、前席シート２及び後席シート３は、いわゆる電動シートであり、電動モータ等によりシートを車両１の前後方向でスライド移動するスライド装置（図示せず）を備えている。さらに、前席シート２は、電動モータ等によりシートを回動させる回動装置（図示せず）を備えている。スライド装置及び回動装置の構成は、特に限定されず、既存の構成を採用すればよい。このため、スライド装置及び回動装置についての詳細な説明は省略する。
【００２２】
前席シート２に着座するユーザー（以下、乗員）は、所定のスイッチを操作することによりスライド装置及び回動装置を適宜作動させ、前席シート２を所望の配置とすることができる。また後席シート３に着座する乗員は、所定のスイッチを操作することにより、スライド装置を適宜作動させ、後席シート３を車両の前後方向で所望の位置にスライド移動させることができる。
【００２３】
車両１は、ドライバーが不要な完全自動運転が可能なものとする。このため、助手席側の前席シート２Ｂだけでなく、運転席側の前席シート２Ａも回動装置により前向き位置と対面位置との間で回動するように構成されている。
【００２４】
図１及び図２に示すように、車室４には、表示装置３０、及びモーションセンサー４０を備える車載ユーザーインターフェース装置１０が搭載されている。
【００２５】
表示装置３０は、立体画像を空間に表示する装置である。このような表示装置としては、立体画像を空間に表示させる公知の装置を採用することができる。
【００２６】
例えば、霧を散布してこれをスクリーンとし、そのスクリーンに映像を投影することで画像を空中に表示する表示装置を用いることができる。
【００２７】
他にも、レンズや凹面鏡を用いて、空中に立体映像を結像する表示装置を用いることができる。また、二次元の映像を表示可能なディスプレイと、当該ディスプレイの前に微小レンズを並べたレンズアレイを配置し、レンズアレイにより空中に結像させる表示装置を用いることができる。また、二次元の映像を表示可能なディスプレイと、微小なミラーに入射する光を一つの光線とみなし、多くのミラーによりそれらの光線を制御して結像作用を実現する透過型ミラーアレイ結像素子とを用いた表示装置を用いることができる。さらには、スクリーンの回転等に基づく走査により三次元的に光点を配置できる体積型三次元ディスプレイを用いることができる。
【００２８】
何れの方式の表示装置にしても、空中に表示させた立体画像は、全周囲からの観察が可能である。
【００２９】
このような表示装置３０は、車室４のほぼ中央において、前席シート２及び後席シート３に囲まれるように配置されている。そして、表示装置３０は上方の空間に立体画像を表示するように配置されている。表示装置３０が立体画像を表示することが可能な領域を表示領域３１と称する。また、表示領域３１には、（Ｘ，Ｙ、Ｚ）の三次元座標が定義されており、三次元座標を指定して立体画像を表示することが可能となっている。
【００３０】
本実施形態では、車室４の各座席間（前席シート２及び後席シート３の間）に、直方体状の領域が表示領域３１となっている。したがって、前席シート２及び後席シート３の何れの座席に着席しても、表示領域３１に表示された立体画像を見ることができる。
【００３１】
モーションセンサー４０は、乗員の手の動作を検出するための装置であり、具体的には、赤外線を発光し、その赤外線が検出対象物で反射した反射光を撮像して画像を形成する装置である。モーションセンサー４０が乗員の手を検出することが可能な領域を検出領域４１と称する。この検出領域４１は、表示領域３１を含む領域となっている。つまり、乗員が検出領域４１に手を入れたときには、モーションセンサー４０により手の動作が画像として得られる。
【００３２】
また、図３に示すように、車両１には、記憶装置１１、制御装置２０及びマイク５０が搭載されている。
【００３３】
記憶装置１１は、所定のコンテンツを記憶している。コンテンツとは、車両１に関する様々な情報である。例えば、車載機器の名称、車載機器に関連した設定項目、車両１の周辺や車両１が走行しようとする経路上にある施設に関する情報などである。
【００３４】
車載機器としては、ナビゲーションシステム、ラジオ、オーディオ機器、空調装置などである。車載機器に関連した設定項目としては、ナビゲーションシステムの場合は経路や目的地が挙げられる。同様に、ラジオの場合は音量やラジオ局であり、空調装置の場合は運転モード（暖房、冷房、送風など）、温度、風量であり、オーディオ機器であれば音量や再生、停止、早送りなどである。
このように記憶装置１１には、車載機器に関する様々な情報や、周辺施設などに関するコンテンツが記憶されている。
【００３５】
なお、コンテンツは、車両１に搭載された記憶装置１１に記憶されたものに限らない。コンテンツは、遠隔の記憶装置に記憶されていてもよい。この場合、コンテンツを記憶した記憶装置を備えるサーバ装置を設け、車両１との間で無線通信を可能とする。そして、車両１から無線通信を介してキーワードがサーバ装置に送信されたとき、サーバ装置がキーワードに対応するコンテンツを記憶装置から検索し、車両１に送信する。このようにして、車両１は遠隔の記憶装置１１からコンテンツを得るようにしてもよい。
【００３６】
制御装置２０は、ＥＣＵ（Electronic Control Unit）であり、ＣＰＵ、制御プログラムなどを格納・記憶するＲＯＭ、制御プログラムの作動領域としてのＲＡＭ、各種データを書き換え可能に保持するＥＥＰＲＯＭ、周辺回路等とのインターフェースをとるインターフェース部などを含んで構成される。制御装置２０は、車両１の各部とインターフェース部を介して接続され、それら各部との間で情報の授受を行い、各部の制御を行う。
【００３７】
また、制御装置２０は、検出部２１、音声認識部２２、及び表示制御部２３を備えている。これらの各部は、制御装置２０のＣＰＵが制御プログラムを実行することによって実現されている。
【００３８】
検出部２１は、モーションセンサー４０から取得した画像を解析し、乗員の手の位置、及び動作を検出する。手の位置は、例えば、表示領域３１の原点を基準とした三次元座標である。なお、モーションセンサー４０及び検出部２１は、請求項に記載する動作検出手段に該当する。
【００３９】
画像の解析に基づく手の位置及び動作の検出は公知技術であるので、詳細な説明は省略するが、検出部２１は、次のような手の動作を検出することができる。
【００４０】
例えば、検出部２１は、握った状態の手、開いた状態の手、又は指さした状態の手など手の形状を検出することができる。また、水平にした状態の手、又は垂直にした状態の手など手の向きを検出することができる。その他にも、モーションセンサー４０からの距離や位置も検出できるようになっている。そして、検出部２１は、このような手の状態の変化から手の動作を検出する。例えば、手の動作として、フリック動作、スライド動作、ポイント動作、ピンチ動作を判定する。
【００４１】
フリック動作は、手首を中心として指先を左右又は上下に振る動きである。
スライド動作は、手全体を上下方向、左右方向に移動させる動きである。
ポイント動作は、指の一部、例えば人差し指を伸ばし、他の指を曲げた状態で手を上下方向又は左右方向に移動させる動きである。
ピンチ動作は、指を二本伸ばした状態で、その二本の指先が接近又は離隔する動きである。二本の指先が近接するピンチ動作をピンチイン動作、二本の指先が離隔するピンチ動作をピンチアウト動作とも称する。
【００４２】
音声認識部２２は、マイク５０から取得した音声を解析し、乗員が発した音声の単語等の認識を行う。さらに、音声認識部２２は、マイク５０から取得した音声を解析し、その音声の発信源の位置、つまり、乗員の位置を検出する。このような音声認識及び乗員の位置の検出は、公知の音声解析技術により行うことができる。なお、マイク５０及び音声認識部２２は、請求項に記載する乗員位置検出手段及び音声認識手段に該当する。なお、乗員位置検出手段は、このような音声認識によるものに限定されず、例えば、カメラで撮像した車室内の画像を解析することで乗員の位置を検出する装置であってもよい。
【００４３】
表示制御部２３は、コンテンツを立体画像として表示装置３０に表示させる制御を行う表示制御手段の一例である。表示制御部２３は、記憶装置１１からコンテンツを読み出し、表示装置３０で表示可能なデータ形式にして、表示装置３０に当該コンテンツを表示させる。
【００４４】
図４は、コンテンツを表した立体画像の例を示す図である。図４（ａ）は立体画像Ａを一方側から見た斜視図、図４（ｂ）は立体画像Ａを反対側から見た斜視図（図４（ａ）の立体画像ＡをＺ軸周りに１８０度回転させた図）であり、図４（ｃ）は立体画像Ｂの斜視図である。立体画像Ａは不透明（反対側が透けて見えない）な立方体状の立体画像であり、立体画像Ｂは、半透明（反対側が透けて見える）な球体状の立体画像である。
【００４５】
これらの立体画像Ａ、立体画像Ｂには、コンテンツが表示されている。例えば、図４（ａ）に示すように、立体画像Ａの一方側の各面には、「○○ランド」という施設に関する新着情報や、当該施設の周辺地図が表示されている。また、図４（ｂ）に示すように、立体画像Ａの反対側の各面には、当該施設の周辺天気や、当該施設のＳＨＯＰ情報（商品情報）が表示されている。
【００４６】
図４（ｃ）に示すように、立体画像Ｂには、球面に沿って、「○○ランド」という施設に関する新着情報（文字の一部が裏面側に回り込み、正面側から透けて見える）が表示されている。
【００４７】
上述したように、立体画像Ａ、立体画像Ｂには、コンテンツが表示されていたが、コンテンツを呼び出すための別のコンテンツ（サムネール画像など）が表示されていてもよい。例えば、詳細は後述するが、乗員が立体画像Ａの「地図」と表示された面に触れたとき、「○○ランド」の地図が表示された別の立体画像を表示装置３０に表示させてもよい。
【００４８】
さらに、立体画像は、車載機器を操作するためのコンテンツを表してもよい。例えば、そのようなコンテンツとして、空調装置の温度調整をするための上向き・下向きの矢印や、プラス・マイナスの記号などを立体画像として表示してもよい。後述するように、そのような立体画像が乗員により上方へ移動させられたとき、空調の温度を上げるように制御する。こういった制御のためのユーザーインターフェースとして立体画像が用いられてもよい。
【００４９】
図４に例示した立体画像を表示する位置や、向き、動きについて説明する。
表示制御部２３は、記憶装置１１からコンテンツを読み出し、表示装置３０に表示させる。例えば、表示制御部２３は、複数のコンテンツの立体画像Ａ〜Ｇを表示装置３０に表示させる。
【００５０】
表示制御部２３は、まず、表示するコンテンツを決定する。例えば、予め定められたコンテンツを記憶装置１１から読み出す。または、表示制御部２３は、マイク５０及び音声認識部２２により認識した乗員の音声をキーワードとして、そのキーワードに関連するコンテンツを記憶装置１１から検索する。
【００５１】
例えば、表示制御部２３は、予め定められたコンテンツとして、記憶装置１１から、ナビゲーションシステム、ラジオ、テレビ、オーディオ機器、空調装置、速度や燃料の残量などの車両情報、車両の周辺施設に関するコンテンツを読み取る。
【００５２】
図５は、表示装置により表示されるコンテンツの立体画像の斜視図である。
図５（ａ）に示すように、表示制御部２３は、記憶装置１１から読み取ったコンテンツを個々の立体画像Ａ〜Ｇとして表示させる。例えば、立体画像Ａの各面には、ナビゲーションシステムに関するコンテンツ、例えば、ある面には現在位置や目的地、他の面には周辺地図を表示するなどである。その他の立体画像Ｂ〜Ｇについても、各面に様々なコンテンツを表示させる。
【００５３】
表示制御部２３は、複数の立体画像Ａ〜Ｇを分散配置する。具体的には、表示制御部２３は、表示領域３１に、個々の立体画像Ａ〜Ｇが重ならないように座標を決定し、その座標に立体画像Ａ〜Ｇを表示させる。これらの立体画像Ａ〜Ｇは、常に一定の位置に表示してもよいし、乗員の動作に基づいて表示する位置を変えてもよい。
【００５４】
例えば、表示制御部２３は、複数の立体画像Ａ〜Ｇを、一つのリング３２上に所定間隔を空けて均等に配置させ、表示領域３１に表示させる。
【００５５】
また、立体画像Ａ〜Ｇが乗員の視線Ｌ上に重ならないようにすることが好ましい。このような視線Ｌとしては、前席シート２、後席シート３、平均的な乗員の目の位置、表示領域３１の位置に基づいて定めることができる。
【００５６】
乗員の視線Ｌを三次元空間において仮想的に形成し、その視線Ｌ上には２つ以上の立体画像が配置されないように、各立体画像の三次元座標を計算する。本実施形態では、乗員は最大４名であるので、４本の視線Ｌを仮想的に形成し、各視線Ｌには２つ以上の立体画像が配置されないように、各立体画像の三次元座標を計算する。
これにより、乗員にとって、立体画像同士が重ならないので、複数の立体画像の視認性が向上する。
【００５７】
また、表示領域３１に表示された立体画像Ａ〜Ｇは、回転してもよい。例えば、表示制御部２３は、各立体画像Ａ〜ＧをＺ軸周りに回転させる。これにより、乗員は、着席した状態で立体画像Ａ〜Ｇの各側面を視認することができる。さらに、立体画像Ａ〜Ｇは、リング３２の円周に沿って移動してもよい。各立体画像Ａ〜Ｇが時間の経過と共に乗員側へ近づくので、立体画像の視認性が向上する。もちろん、立体画像の回転や移動の態様は上述したものに限られない。
【００５８】
さらに、表示制御部２３は、複数の立体画像のうち、乗員の動作により選択された立体画像を、乗員の動作に追随させて表示装置３０に表示させる。
【００５９】
表示制御部２３は、検出部２１より得られた乗員の手の座標から一定範囲内に、立体画像があるかを判定する。手の座標から一定範囲内に立体画像があると判定された場合、その立体画像が乗員により選択されたとする。図５（ａ）の例では、立体画像Ａが乗員に選択されたと判定される。他にも、立体画像から一定の範囲内でポイント動作を検出した場合に立体画像が選択されたと判定してもよい。
【００６０】
なお、立体画像が選択された状態において、特定の動作（例えば、一定速度以上で手が立体画像Ａから離れるような動作）を検出したとき、立体画像の選択が解除されたと判定する。
【００６１】
乗員の動作に追随させて立体画像を表示させるとは、上述したフリック動作、スライド動作、ポイント動作、ピンチ動作に対応して立体画像の座標位置、大きさ、向きを変更したり、立体画像に表示する内容を変更することをいう。
【００６２】
例えば、図５（ａ）のように手が立体画像Ａをつまんだ状態からピンチアウト動作を検出したときは、図５（ｂ）に示すように、立体画像Ａを拡大表示する。このようにピンチアウト動作という対象物を拡大するような動作に対応して、立体画像Ａが拡大される。これにより、「立体画像Ａを拡大して見たい」という要求を、直観的な動作で実現することができる。
【００６３】
他にも、特に図示しないが、各動作に対応した立体画像の表示を行うことができる。
例えば、手が立体画像をつまんだ状態からピンチイン動作を検出したときは、立体画像を縮小表示する。このようにピンチイン動作という対象物を縮小するような動作に対応して、立体画像が縮小される。これにより、「立体画像を縮小して、他の立体画像を見やすくしたい」という要求を、直観的な動作で実現することができる。
【００６４】
また、手が立体画像を選択した状態からスライド動作やフリック動作を検出したときは、立体画像をその手の位置にあわせて移動させる。このようにスライド動作という対象物を移動させるような動作に対応して、立体画像が移動される。これにより、「立体画像を移動したい」という要求を、直観的な動作で実現することができる。
【００６５】
さらに、手が立体画像に対するポイント動作を検出したときは、その立体画像に関連するコンテンツを検索し、そのコンテンツを別の立体画像として表示させてもよい。例えば、図４（ａ）に示した立体画像Ａの「新着情報」を表示した側面に対してポイント動作が検出されたら、その新着情報の詳細に関するコンテンツを、別の立体画像として表示するようにしてもよい。これにより「立体画像に表示されたコンテンツの詳細を知りたい」という要求を、直観的な動作で実現することができる。
【００６６】
このような乗員の手の動作に追随させて立体画像を表示する際には、コンテンツに応じて、所定の処理を実行してもよい。
【００６７】
図６は、車載装置を設定するための立体画像を示す平面図である。
図６（ａ）には、例えば、空調装置の温度設定に関するコンテンツが立体画像Ｈとして表示領域３１に表示されている。上方向へのフリック動作が検出されたときには、表示制御部２３は、立体画像Ｈを上方へ移動させると共に、空調装置に温度を例えば１℃上げさせる制御を行う。同様に、下方向へのフリック動作が検出されたときには、表示制御部２３は、立体画像Ｈを下方へ移動させると共に、空調装置に温度を例えば１℃下げさせる制御を行う。表示制御部２３は、温度の設定後に、立体画像Ｈをもとの位置に戻す。このようにして、「空調の温度を上げる又は下げる」という要求を、直観的な動作で実現することができる。
【００６８】
また図６（ｂ）には、例えば、ラジオの選局設定に関するコンテンツが立体画像Ｉとして表示領域３１に表示されている。左方向へのフリック動作が検出されたときには、表示制御部２３は、立体画像Ｉを左方向へ移動させると共に、現在選局されている放送局よりも低い周波数を用いる放送局に変更する。同様に、右方向へのフリック動作が検出されたときには、表示制御部２３は、立体画像Ｉを右方向へ移動させると共に、現在選局されている放送局よりも高い周波数を用いる放送局に変更する。このようにして、「ラジオの選局を行う」という要求を、直観的な動作で実現することができる。
【００６９】
他にも、立体画像を、空調装置の風量、空調装置の運転モード（暖房、冷房、送風など）の切り替え、テレビの音量・選局、オーディオ機器の音量・再生・停止・早送りをするためのユーザーインターフェースとし、立体画像に対して特定の動作が検出されたときに、風量等を変更するようにしてもよい。
【００７０】
さらに、表示制御部２３は、乗員の音声が発せられた方向へ向けて立体画像を表示してもよい。
【００７１】
図７は、複数の乗員による車載ユーザーインターフェース装置の利用形態を示す平面図である。上述したように、音声認識部２２は、音声の発信源の位置（乗員の位置）を検出する。同図の例では、前席シート２Ａ及び前席シート２Ｂに着席した乗員が、それぞれ「天気」「○○ランド」と発生したとする。この場合、音声認識部２２は、前席シート２Ａ及び前席シート２Ｂが音声の発信源であると検出する。
【００７２】
表示制御部２３は、複数の立体画像の中から、乗員が発した音声に関連するコンテンツを表す立体画像を検索する。表示制御部２３は、「○○ランド」「天気」に対応した立体画像Ｃ、及び立体画像Ｄを記憶装置１１から検索する。
【００７３】
次に、表示制御部２３は、それらの発信源の位置へ向けて立体画像Ｃ及び立体画像Ｄを向ける。具体的には、立体画像の主方向Ｍを予め定義しておく。例えば、立方体状の立体画像であれば、一側面の法線を主方向とし、球体状の立体画像であれば、Ｚ軸に直交する任意の方向を主方向とする。
【００７４】
そして、表示制御部２３は、主方向Ｍが音声の発信源に向くように立体画像Ｃ、立体画像Ｄを表示させる。さらには、表示制御部２３は、立体画像Ｃ、立体画像Ｄを発声した乗員へ向けて移動及び拡大させてもよい。
【００７５】
このように、複数の立体画像のうち、乗員の発した音声に関連するコンテンツを表す立体画像Ｃ、立体画像Ｄのみを乗員に見えやすく表示させることができる。
【００７６】
さらに、表示制御部２３は、乗員の動作に基づいて立体画像を移動や回転させるだけではなく、コピーしてもよい。
【００７７】
例えば、後席シート３Ａ及び後席シート３Ｂの乗員がそれぞれ立体画像Ａ及び立体画像Ｂを選択し、その後、手を引くようなスライド動作を行ったとする。表示制御部２３は、スライド動作を検出したとき、選択されていた立体画像Ａ及び立体画像Ｂをコピーして立体画像Ａ’、立体画像Ｂ’を生成する。そして、表示制御部２３は、これらの立体画像Ａ’及び立体画像Ｂ’をスライド動作に追随させて移動させる。つまり、乗員が立体画像Ａに触れて手前に引くと、立体画像Ａ’が乗員の手元に追随して移動するように表示される。
【００７８】
このように、一つの立体画像Ａが乗員の手元に立体画像Ａ’としてコピーされるので、その乗員にとって立体画像Ａ’を見やすくすることができる。また、立体画像Ａはもとの位置に残るので、その他の乗員も、立体画像Ａを手元にコピーして見ることができる。すなわち、複数の乗員同士で一つの立体画像を取り合うことなく、その立体画像を手元で閲覧することができる。
【００７９】
以上に説明したように、車載ユーザーインターフェース装置１０は、乗員の手の動作を検出し、この動作に追随するようにコンテンツを立体画像として表示装置３０に表示することができる。これにより、乗員が立体画像に直接触れ、見やすい位置に移動させたり、見やすく拡大させるなど、直観的なユーザーインターフェースが実現される。
【００８０】
また、車載ユーザーインターフェース装置１０は、乗員の音声の発信源に向けて立体画像を表示することができる。これにより、乗員に対して、立体画像をより一層見やすく表示させることができる。
【００８１】
また、車載ユーザーインターフェース装置１０は、立体画像を手の動作に応じてコピーして表示することができる。これにより、複数の乗員同士で一つの立体画像を取り合うことなく、その立体画像を手元で閲覧することができる。
【００８２】
また、車載ユーザーインターフェース装置１０は、乗員が発した音声に関連するコンテンツを検索して、これを立体画像として表示することができる。これにより、所望するコンテンツを素早く簡単に表示することができる。
【００８３】
なお、本発明の実施形態について説明したが、勿論、本発明は、上述の実施形態に限定されるものではなく、本発明の趣旨から逸脱しない範囲内で、構成の付加、省略、置換、およびその他の変更が可能である。
【符号の説明】
【００８４】
１…車両、２…前席シート（座席）、３…後席シート（座席）、４…車室、１０…車載ユーザーインターフェース装置、１１…記憶装置、２０…制御装置、２１…検出部（動作検出手段）、２２…音声認識部（乗員位置検出手段）、２３…表示制御部、３０…表示装置、３１…表示領域、４０…モーションセンサー（動作検出手段）、４１…検出領域、５０…マイク（乗員位置検出手段）
【図１】
2019086911.tif 000003
【図２】
2019086911.tif 000004
【図３】
2019086911.tif 000005
【図４】
2019086911.tif 000006
【図５】
2019086911.tif 000007
【図６】
2019086911.tif 000008
【図７】
2019086911.tif 000009