(57)【特許請求の範囲】
【請求項１】
表示部と、
操作部と前記操作部における操作指を認識する認識部を含むポインティングデバイスと、
前記ポインティングデバイスを用いて、選択操作が可能な複数の選択対象を含む操作画面を前記表示部に表示させる表示制御部であって、前記認識部により認識された操作指の前記操作部における位置に応じて、前記複数の選択対象の中から一の選択対象を選択するカーソルを移動させる、又は、前記操作画面上の所定軸に沿って配置される前記複数の選択対象をスクロールさせる表示制御部を備え、
前記表示制御部は、前記操作画面上の所定範囲に亘って、オブジェクト又はオブジェクト群を表示させると共に、前記認識部により前記操作指が認識されている場合、前記認識部により前記操作指が認識されていない場合に対して、前記オブジェクトの一部分の形状を変化させる、又は、前記オブジェクト群の一部分により形成される形状を変化させる、
車両用表示装置。
【請求項２】
前記表示制御部は、前記認識部により認識された前記操作指が前記操作部上で移動した場合、前記オブジェクトの中で形状を変化させた一部分を前記操作指の移動方向に沿って移動させる、又は、前記オブジェクト群の中で形成される形状を変化させた一部分を前記操作指の移動方向に沿って移動させる、
請求項１に記載の車両用表示装置。
【請求項３】
前記表示制御部は、前記複数の選択対象を含む前景画像と、前記オブジェクト又は前記オブジェクト群を含む背景画像を合成して前記操作画面を生成する、
請求項１又は２に記載の車両用表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、操作画面を表示する車両用表示装置に関する。
【背景技術】
【０００２】
従来から、操作部におけるユーザの指（以下、「操作指」と称する）の位置を認識するポインティングデバイスを用いて、車載機器の各種操作が可能な画面（操作画面）を表示する車両用表示装置が知られている（例えば、特許文献１参照）。
【０００３】
特許文献１では、ユーザがポインティングデバイスの操作部に接触した上で、所定量以上のスライド操作を行うと、操作部における操作指の位置を認識し、操作指の位置情報に基づき、操作画面上のアイコンを選択するカーソルを移動させる技術が開示されている。
【０００４】
また、ポインティングデバイスの操作部における操作指の移動に応じて、操作画面上の複数の選択対象（例えば、リスト）をスクロールさせる技術も一般に知られている。
【先行技術文献】
【特許文献】
【０００５】
【特許文献１】特開２００４−３４５５４９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００６】
しかしながら、車両の振動等により操作部から操作指が少しでも外れてしまうと、ポインティングデバイスが操作指を認識できなくなる可能性がある。その際、ユーザは、操作指を動かしてみない限り、ポインティングデバイスが操作指を認識し、操作画面の操作ができる状態なのか、ポインティングデバイスが操作指を認識しておらず、操作画面の操作ができない状態なのかを判断できない。即ち、ユーザは、カーソルの移動やリスト等のスクロールが実行されることを確認しない限り、ポインティングデバイスによる操作画面の操作が可能な状態であるか否かを判断することができない。
【０００７】
そこで、上記課題に鑑み、ポインティングデバイスによる操作画面の操作が可能な状態であるか否かをユーザが容易に判断することが可能な車両用表示装置を提供することを目的とする。
【課題を解決するための手段】
【０００８】
上記目的を達成するため、本発明の第１態様では、
表示部と、
操作部と前記操作部における操作指を認識する認識部を含むポインティングデバイスと、
前記ポインティングデバイスを用いて、選択操作が可能な複数の選択対象を含む操作画面を前記表示部に表示させる表示制御部であって、前記認識部により認識された操作指の前記操作部における位置に応じて、前記複数の選択対象の中から一の選択対象を選択するカーソルを移動させる、又は、前記操作画面上の所定軸に沿って配置される前記複数の選択対象をスクロールさせる表示制御部を備え、
前記表示制御部は、前記操作画面上の所定範囲に亘って、オブジェクト又はオブジェクト群を表示させると共に、前記認識部により前記操作指が認識されている場合、前記認識部により前記操作指が認識されていない場合に対して、前記オブジェクトの一部分の形状を変化させる、又は、前記オブジェクト群の一部分により形成される形状を変化させる、
車両用表示装置が提供される。
【０００９】
本発明の第１態様によれば、ポインティングデバイス（認識部）により操作指が認識されている場合、操作画面上に表示されるオブジェクト或いはオブジェクト群の一部分の形状が、ポインティングデバイス（認識部）により操作指が認識されていない場合に対して、変化する。そのため、ユーザは、操作画面上のオブジェクト或いはオブジェクト群の形状の部分的な変化の有無を視認することにより、ポインティングデバイスによる操作画面の操作が可能な状態であるか否かを容易に判断することができる。
【００１０】
また、本発明の第２態様では、
前記表示制御部は、前記認識部により認識された前記操作指が前記操作部上で移動した場合、前記オブジェクトの中で形状を変化させた一部分を前記操作指の移動方向に沿って移動させる、又は、前記オブジェクト群の中で形成される形状を変化させた一部分を前記操作指の移動方向に沿って移動させる、
車両用表示装置が提供される。
【００１１】
本発明の第２態様によれば、ポインティングデバイス（認識部）により認識された操作指が移動した場合、オブジェクト或いはオブジェクト群の中で形状を変化させた一部分が操作指の移動方向に沿って移動していく。例えば、操作指を移動させている最中に、車両の振動等により操作部から操作指が外れてしまう場合も有り得る。このような場合に、ユーザは、形状が変化したオブジェクト或いはオブジェクト群の一部分が操作指の移動方向に沿って移動しているか否かを視認することにより、ポインティングデバイスによるカーソルの移動操作やリスト等のスクロール操作が適切に継続できるか否かを容易に判断することができる。
【００１２】
また、本発明の第３態様では、
前記表示制御部は、前記複数の選択対象を含む前景画像と、前記オブジェクト又は前記オブジェクト群を含む背景画像を合成して前記操作画面を生成する、
車両用表示装置が提供される。
【００１３】
本発明の第３態様によれば、オブジェクト或いはオブジェクト群は、前景として表示される複数の選択対象（複数のアイコンや複数の項目から構成されるリスト）等の背景として表示される。そのため、オブジェクト群の表示態様の変化等により、複数の選択対象や複数の選択対象の選択状態を表すカーソル等が見えにくくなるような事態の発生を抑制することができる。
【発明の効果】
【００１４】
本実施の形態によれば、ポインティングデバイスによる操作画面の操作が可能な状態であるか否かをユーザが容易に判断することが可能な車両用表示装置を提供することができる。
【図面の簡単な説明】
【００１５】
【図１】表示装置の構成の一例を概略的に示すブロック図である。
【図２】表示装置（ポインティングデバイス及びディスプレイ）の車載態様の一例を示す図である。
【図３】第１実施形態に係る表示装置による操作画面の一例を示す図である。
【図４】第１実施形態に係る表示装置による操作画面の一例を示す図である。
【図５】第１実施形態に係る表示装置による操作画面の一例を示す図である。
【図６】第１実施形態に係る表示装置による操作画面の他の例を示す図である。
【図７】第１実施形態に係る表示装置による操作画面の他の例を示す図である。
【図８】第１実施形態に係る表示装置による操作画面の他の例を示す図である。
【図９】第１実施形態に係る表示装置による操作画面の更に他の例を示す図である。
【図１０】第２実施形態に係る表示装置による操作画面の一例を示す図である。
【図１１】第２実施形態に係る表示装置による操作画面の一例を示す図である。
【図１２】第２実施形態に係る表示装置による操作画面の一例を示す図である。
【発明を実施するための形態】
【００１６】
以下、図面を参照して発明を実施するための形態について説明する。
【００１７】
［第１実施形態］
図１は、本実施形態に係る表示装置１の構成の一例を概略的に示すブロック図である。表示装置１は、ポインティングデバイス１０、ＥＣＵ（Electronic Control Unit）２０、ディスプレイ３０を含む。表示装置１は、例えば、車両に搭載され、ポインティングデバイス１０を用いて、選択操作が可能な複数の選択対象（複数のアイコン等）を含む画面（操作画面）をディスプレイ３０に表示させる。以下、「車両」は、特に断わらない限り、表示装置１が搭載される車両を指す。
【００１８】
ポインティングデバイス１０は、操作画面上の位置を指定する入力装置であり、例えば、タッチパッドである。ポインティングデバイス１０は、操作部１１、認識部１２を含む。
【００１９】
操作部１１は、ポインティングデバイス１０において、ユーザ（例えば、車両の運転者等の乗員）により指（操作指）で操作される部位である。例えば、操作部１１は、タッチパッドにおけるタッチ操作面である。
【００２０】
認識部１２は、操作部１１における操作指を認識する。例えば、認識部１２は、タッチパッドにおける静電パッドである。静電パッドは、例えば、平面上のＸ方向、Ｙ方向のそれぞれに絶縁体を挟んで電極（静電センサ）が直線状に延在する構造を有し、これらの電極の検出信号（電極に蓄えられる電荷の変化量に対応する信号）を出力する。認識部１２は、ユーザによる操作状態に関する信号（例えば、静電パッドが出力する検出信号。以下、「状態信号」と称する）をＥＣＵ２０に逐次（即ち、所定周期毎に）出力する。認識部１２は、例えば、操作部１１で予め規定されるｘ−ｙ座標系における各座標（ｘ座標及びｙ座標）に対応する状態信号を出力する。
【００２１】
尚、ポインティングデバイス１０は、操作部１１と、操作部１１における操作指を認識する認識部１２を含む態様であれば、タッチパッド等に限定されない。例えば、ポインティングデバイス１０は、予め規定される操作空間（操作部１１の一例）と、カメラで撮像された操作空間の画像に基づき、操作空間上における操作指の位置を認識する処理装置（認識部１２の一例）を含むジェスチャー認識デバイスであってもよい。
【００２２】
ポインティングデバイス１０は、車室内の適切な場所に設けられ、好ましくは、運転者が操作しやすい位置、具体的には、運転姿勢を保持しながら手が届く位置に配置されるとよい。例えば、図２（表示装置１の車載態様の一例を示す図）に示すように、ポインティングデバイス１０（本例では、タッチパッド）は、コンソールボックスまたはその周辺に配置されてよい。
【００２３】
ＥＣＵ２０は、ディスプレイ３０に操作画面を表示させる表示制御部の一例であり、操作画面を生成する処理を行う電子制御ユニットである。ＥＣＵ２０は、操作画面上において、認識部１２により認識された操作指の操作部１１における位置に応じて、複数の選択対象の中から一の選択対象を選択するカーソルを移動させる。ＥＣＵ２０は、例えば、マイクロコンピュータを中心に構成され、ＲＯＭに格納される各種プログラムをＣＰＵ上で実行することにより各種制御処理を実現する。ＥＣＵ２０は、ＣＰＵ上で１つ以上のプログラムを実行することにより実現される機能部として、状態受信部２１、前景画像生成部２２、背景画像生成部２３、合成処理部２４を含む。また、ＥＣＵ２０は、不揮発性の内部メモリに予め規定された記憶領域としての記憶部２９を含む。
【００２４】
状態受信部２１は、ポインティングデバイス１０から所定周期毎に入力される状態信号を受信する処理を行う。状態受信部２１は、受信した状態信号を前景画像生成部２２及び背景画像生成部２３に送信する。
【００２５】
前景画像生成部２２は、ポインティングデバイス１０を用いて、選択操作が可能な複数の選択対象（アイコン等の複数の対象部品）と、複数の選択対象の中から一の選択対象を選択するためのカーソルを含む操作画面の前景画像を生成する。カーソルは、アイコン等の対象部品を強調して表示することにより、選択されている対象部品を示す。例えば、カーソルは、選択されている対象部品を他の対象部品より輝度を高くする、選択されている対象部品の色を他の対象部品の色と変えて表示する、選択されている対象部品を枠で囲む等の態様で表示される。
【００２６】
前景画像生成部２２は、状態受信部２１から受信した状態信号に基づき、カーソル位置（即ち、複数の対象部品のうちの何れが選択された状態にするか）を決定する。具体的には、まず、前景画像生成部２２は、状態信号に対応した操作画面上の位置を算出する。前景画像生成部２２は、例えば、状態信号に基づくポインティングデバイス１０のｘ座標及びｙ座標の変化量と、操作画面上のｘ座標及びｙ座標の変化量と、を対応づける第１の対応関係情報を記憶部２９に予め格納しておく。これにより、前景画像生成部２２は、当該第１の対応関係情報に基づき、ポインティングデバイス１０における操作に対応する、操作画面上のｘ座標及びｙ座標の変化量を算出することができる。そして、前景画像生成部２２は、操作画面上のｘ座標及びｙ座標の初期値（表示装置１の起動時におけるカーソルの初期位置を表す代表座標）を基準として、操作画面上のｘ座標及びｙ座標をポインティングデバイス１０から逐次入力される状態信号に応じて、逐次更新することができる。
【００２７】
続いて、前景画像生成部２２は、算出した操作画面上の位置に応じて、カーソルの位置を決定する。例えば、操作画面上の位置に対して、操作画面上のカーソルの位置（例えば、カーソルの図心の座標）を対応付ける第２の対応関係情報を記憶部２９に予め格納しておく。これにより、前景画像生成部２２は、当該第２の対応関係情報に基づき、操作画面上におけるカーソルの位置（ｘ座標及びｙ座標）を決定することができる。そして、前景画像生成部２２は、予め規定された位置にアイコン等の複数の対象部品を配置すると共に、決定した操作画面上の位置（即ち、決定した操作画面上の位置と同じ位置に配置される一の対象部品上）にカーソルを配置する態様で、前景画像を生成する。
【００２８】
背景画像生成部２３は、操作画面上の所定範囲（例えば、複数の対象部品が配置される操作画面上の範囲を含む範囲）に亘って配置されるグラフィックオブジェクト、或いは、多数のグラフィックオブジェクト（個別オブジェクト）の集合であるグラフィックオブジェクト群を含む操作画面の背景画像を生成する。例えば、グラフィックオブジェクトは、操作画面上の所定範囲に亘って配置される、水面を模擬した曲面状のサーフェスオブジェクトであってよい。また、例えば、グラフィックオブジェクト群は、操作画面上の所定範囲に亘って配置される、多数の粒子状のグラフィックオブジェクト（個別オブジェクト）の集合であってよい。
【００２９】
背景画像生成部２３は、前景画像生成部２２と同様に、例えば、第１の対応関係情報に基づき、状態受信部２１から受信した状態信号に対応した操作画面上の位置を算出する。
【００３０】
また、背景画像生成部２３は、状態受信部２１から受信した状態信号に基づき、ポインティングデバイス１０（認識部１２）が操作指を認識しているか否かを判定する。即ち、ポインティングデバイス１０がタッチパッドの場合、背景画像生成部２３は、タッチパッドにユーザの指が接触しているか否かを判定する。また、ポインティングデバイス１０がジェスチャー認識デバイスの場合、背景画像生成部２３は、操作空間上にユーザの指が掲げられているか否かを判定する。
【００３１】
そして、背景画像生成部２３は、ポインティングデバイス１０（認識部１２）が操作指を認識していないと判定した場合、予め規定された表示態様のグラフィックオブジェクト或いはグラフィックオブジェクト群を含む背景画像を生成する。好ましくは、グラフィックオブジェクト或いはグラフィックオブジェクト群の全体で、視覚的にユーザの注意を引くような差異を含まない、予め規定された表示態様のグラフィックオブジェクト或いはグラフィックオブジェクトを含む背景画像が生成されるとよい。
【００３２】
一方、背景画像生成部２３は、ポインティングデバイス１０（認識部１２）が操作指を認識していると判定した場合、グラフィックオブジェクトの一部分を、グラフィックオブジェクトの他の部分と異なる表示態様にする、或いは、グラフィックオブジェクト群の一部分を、グラフィックオブジェクト群の他の部分と異なる表示態様にする。具体的には、操作画面上の位置に対して、背景画像内のグラフィックオブジェクト或いはグラフィックオブジェクトの一部分を対応づけた、第３の対応関係情報を予め規定し、記憶部２９に格納しておく。背景画像生成部２３は、当該第３の対応関係情報に基づき、算出した操作画面上の位置に対応する、背景画像内のグラフィックオブジェクト或いはグラフィックオブジェクト群の一部分を決定する。そして、背景画像生成部２３は、決定したグラフィックオブジェクトの一部分を、グラフィックオブジェクトの他の部分と異なる表示態様にした、或いは、グラフィックオブジェクト群の一部分を、グラフィックオブジェクト群の他の部分と異なる表示態様にした背景画像を生成する。"異なる表示態様"とは、操作画面を見たユーザが容易に認識可能な差異を有する表示態様を指す。"異なる表示態様"には、色が異なる表示態様、輝度が異なる表示態様、大きさや形状が異なる表示態様（具体的には、グラフィックオブジェクト群の一部分に相当する個別のオブジェクトの形や大きさが、他の個別のオブジェクトの形や大きさと異なる表示態様）、変位量（背景画像内の仮想的な３次元空間における変位量を含む）が異なる表示態様等が含まれうる。背景画像生成部２３により生成される背景画像の詳細については、後述する。
【００３３】
合成処理部２４は、前景画像生成部２２が生成した前景画像と背景画像生成部２３が生成した背景画像を合成する処理を行い、操作画面を生成する。そして、合成処理部２４は、生成した操作画面を含む指令信号をディスプレイ３０に送信する。これにより、ディスプレイ３０に操作画面を表示させることができる。
【００３４】
記憶部２９には、ポインティングデバイス１０におけるｘ−ｙ座標（ｘ座標及びｙ座標）の変化量と、操作画面上のｘ−ｙ座標（ｘ座標及びｙ座標）の変化量との対応関係を規定する第１の対応関係情報が予め格納される。また、記憶部２９には、操作画面上の位置（ｘ座標及びｙ座標）と、操作画面上のカーソルの位置との対応関係を規定する第２の対応関係情報が予め格納される。また、記憶部２９には、操作画面上の位置に対して、背景画像内のグラフィックオブジェクト或いはグラフィックオブジェクト群の一部分を対応づけた、第３の対応関係情報が予め格納される。
【００３５】
ディスプレイ３０は、例えば、ポインティングデバイス１０に対して遠隔位置に配置され、ＥＣＵ２０（合成処理部２４）からの指令信号に応じて、ポインティングデバイス１０により操作可能な操作画面を表示する。ディスプレイ３０は、車室内の適切な位置、即ち、ユーザ（運転者）により視認が容易な位置に配置される。例えば、図２に示すように、インストルメントパネルの中央部に配置されてよい。また、ＨＵＤ（ヘッドアップディスプレイ）のように、ユーザの視野に直接、操作画面を表示する表示手段であってもよい。
【００３６】
次に、図３〜図５を参照して、本実施形態に係る表示装置１、具体的には、前景画像生成部２２、背景画像生成部２３、及び合成処理部２４により生成され、ディスプレイ３０に表示される操作画面の一例について説明する。
【００３７】
図３〜図５は、本実施形態に係る表示装置１（具体的には、前景画像生成部２２、背景画像生成部２３、及び合成処理部２４）による操作画面の一例を示す図である。図３は、ポインティングデバイス１０（認識部１２）が操作指を認識していない場合における前景画像４０ａ（図３（ａ））、背景画像４０ｂ（図３（ｂ））、及び操作画面４０（図３（ｃ））を示す図である。また、図４、図５は、ポインティングデバイス１０（認識部１２）が操作指を認識している場合の前景画像４０ａ（図４（ａ）、図４（ｂ））、背景画像４０ｂ（図４（ｂ）、図５（ｂ））、及び操作画面４０（図４（ｃ）、図５（ｃ））を示す図である。具体的には、図４は、図３に示す状態（ポインティングデバイス１０（認識部１２）が操作指を認識しない状態）から操作指を認識する状態に遷移した際の前景画像４０ａ（図４（ａ））、背景画像４０ｂ（図４（ｂ））、及び操作画面４０（図４（ｃ））を示す図である。また、図５は、図４に示す状態から認識部１２が認識した操作指の移動が開始された後の前景画像４０ａ（図５（ａ））、背景画像４０ｂ（図５（ｂ））、及び操作画面４０（図５（ｃ））を示す図である。
【００３８】
まず、図３（ａ）〜（ｃ）を参照して、ポインティングデバイス１０（認識部１２）が操作指を認識していない場合の操作画面４０について説明する。
【００３９】
図３（ａ）に示すように、前景画像４０ａは、選択対象であるアイコン４１〜４５と、アイコン４１〜４５のうちの何れかを選択するカーソル４６を含む。アイコン４１は、車両に搭載される空調装置の操作画面に移行するためのスイッチ部品である。アイコン４２は、電話を掛ける操作画面に移行するためのスイッチ部品である。アイコン４３は、車両に搭載されるナビゲーション装置の操作画面に移行するためのスイッチ部品である。アイコン４４は、車両に搭載されるオーディオ装置の操作画面に移行するためのスイッチ部品である。アイコン４５は、例えば、表示装置１における各種設定を行うための操作画面に移行するためのスイッチ部品である。操作画面４０におけるアイコン４１〜４５の位置は予め規定されており、アイコン４１〜４５は、前景画像４０ａ（即ち、操作画面４０）の上下方向の中央よりもやや下の位置において、左端部から右端部にかけて、順に並べられている。カーソル４６は、アイコン４１〜４５の何れかが選択された状態であることを強調するため、本例では、選択されたアイコン４１〜４５の何れかを枠で囲む態様が採用される。
【００４０】
前景画像生成部２２は、状態受信部２１から受信した状態信号に基づき、前景画像４０ａ（即ち、操作画面４０）上におけるカーソル４６の位置を決定する。そして、前景画像生成部２２は、アイコン４１〜４５を予め規定された位置に配置すると共に、決定した位置（具体的には、アイコン４１〜４５の何れかと同じ位置）にカーソル４６を配置した操作画面４０の前景画像４０ａを生成する。図３の状態では、ポインティングデバイス１０（認識部１２）が操作指を認識していないため、カーソル４６の位置は、カーソル４６の移動操作の終了時における位置、或いは、カーソル４６の予め規定された初期位置になる。本例の場合、図３（ａ）に示すように、カーソル４６は、アイコン４１と同じ位置（即ち、アイコン４１の上）に配置され、アイコン４１が選択された状態になっている。
【００４１】
また、図３（ｂ）に示すように、背景画像４０ｂは、多数の粒子状のグラフィックオブジェクト（以下、単に「粒子」と称する）により構成されるグラフィックオブジェクト群（以下、「オブジェクト群」と称する）４７を含む。オブジェクト群４７は、背景画像４０ｂ（即ち、操作画面４０）の下端部において、操作画面４０の所定範囲に亘って、具体的には、操作画面４０の左右方向におけるカーソル４６の移動範囲に亘って、構成要素である粒子を左右一列に並べる態様で配置されている。背景画像生成部２３は、ポインティングデバイス１０（認識部１２）が操作指を認識していないと判定すると、予め規定された表示態様、即ち、本例の場合、粒子が左右一列に並んだ表示態様のオブジェクト群４７を含む背景画像４０ｂを生成する。
【００４２】
そして、合成処理部２４は、図３（ａ）の前景画像４０ａと図３（ｂ）の背景画像４０ｂを合成して、操作画面４０を生成する。図３（ｃ）に示すように、操作画面４０は、上下方向の中央よりやや下方において、左右に亘り一列に並べて配置されるアイコン４１〜４５と、アイコン４１と同じ位置（即ち、アイコン４１の上）に配置されるカーソル４６を含む。また、操作画面４０は、その更に下方において、左右に亘り一例に並べて配置される粒子により構成されるオブジェクト群４７を含む。
【００４３】
続いて、図４（ａ）〜（ｃ）を参照して、ポインティングデバイス１０（認識部１２）が操作指を認識しない状態から操作指を認識する状態に遷移した際の操作画面４０について説明する。
【００４４】
図４（ａ）に示すように、図３（ｃ）に示す操作画面４０の状態からポインティングデバイス１０（認識部１２）が操作指を認識する状態に遷移した際、カーソル４６の位置には未だ変更が無いため、前景画像生成部２２は、図３（ａ）と同様の前景画像４０ａを生成する。
【００４５】
また、背景画像生成部２３は、状態受信部２１からの状態信号に基づき、ポインティングデバイス１０（認識部１２）が操作指を認識していると判定すると、図４（ｂ）に示すように、状態信号に対応した操作画面４０上の位置に対応付けられた、オブジェクト群４７の一部分である粒子４７ａを、オブジェクト群４７の他の部分の粒子と異なる表示態様にした背景画像４０ｂを生成する。具体的には、粒子４７ａは、オブジェクト群４７内の他の粒子に対して、上下方向（ｘ軸方向）で大きく変位している。
【００４６】
そして、合成処理部２４は、図４（ａ）の前景画像４０ａと、図４（ｂ）の背景画像４０ｂを合成して、操作画面４０を生成する。図４（ｃ）に示すように、操作画面４０は、上下方向の中央よりやや下方において、左右に亘り一列に並べて配置されるアイコン４１〜４５と、アイコン４１と同じ位置（即ち、アイコン４１の上）に配置されるカーソル４６を含む。また、操作画面４０は、その更に下方において、粒子４７ａがオブジェクト群４７の他の粒子に対して大きく上下方向に変位した態様で、左右に亘り配置されたオブジェクト群４７を含む。本例では、粒子４７ａは、状態受信部２１（ポインティングデバイス１０）からの状態信号に対応した操作画面４０上の左右位置を中心とする５つの粒子により構成され、カーソル４６が選択するアイコン４１に背景として一部重複する態様で表示されている。また、粒子４７ａに含まれる各粒子の上下方向の変位量は、異なっている。具体的には、粒子４７ａのうち、状態信号に対応した操作画面４０上の左右位置に最も近い粒子の上下方向の変位量が最も大きく、状態信号に対応した操作画面４０上の左右位置から離れるにつれて、粒子の上下方向の変位量が小さくなっている。
【００４７】
このように、ポインティングデバイス１０（認識部１２）により操作指が認識されている場合、オブジェクト群４７の一部分（粒子４７ａ）をオブジェクト群４７の他の部分と異なる表示態様にする。具体的には、ポインティングデバイス１０からの状態信号に対応した操作画面４０上の位置（換言すれば、カーソル４６の位置）に対応付けられた、オブジェクト群４７の粒子４７ａを、オブジェクト群４７の他の粒子と異なる表示態様にする。これにより、ユーザは、操作画面４０上の操作状態をより容易に把握することができる。例えば、車両の振動等によりユーザの操作指が操作部１１から外れてしまう場合が有り得る。その際、ユーザは、粒子４７ａが上下方向で変位（隆起）していることを認識することにより、ポインティングデバイス１０による操作画面の操作が可能な状態であるか（具体的には、操作可能な状態が継続しているか）否かを容易に判断することができる。また、ユーザは、操作画面４０上のカーソル４６と略同じ左右位置において、粒子４７ａが上下方向で変位（隆起）したことを視認することにより、ポインティングデバイス１０を用いた操作開始時におけるカーソル４６の位置（の目安）を容易に把握することができる。特に、ユーザが車両の運転者である場合、ディスプレイ３０を注視することができない。これに対して、オブジェクト群４７の一部分である粒子４７ａを上下方向で隆起させることにより、ユーザは、ディスプレイ３０を注視せずとも、ポインティングデバイス１０による操作画面４０の操作が可能な状態であるか否かや、カーソル４６の位置等を把握し易くなる。また、粒子４７ａは、アイコン４１〜４５やカーソル４６の背景として表示されるため、粒子４７ａが上下方向で隆起したとしても、アイコン４１〜４５やカーソル４６が見えにくくなる事態の発生を抑制することができる。
【００４８】
続いて、図５（ａ）〜（ｃ）を参照して、認識部１２が認識した操作指の移動が開始された後の操作画面４０について説明する。
【００４９】
尚、図４に示す状態から図５に示す状態に移行する際、ユーザは、操作部１１において、操作指を右方向に移動させて、カーソル４６を右方向に移動させる操作を行っている。
【００５０】
図５（ａ）に示すように、操作部１１における操作指の移動に応じて、図４（ａ）の状態からカーソル４６の位置が更新されている。具体的には、前景画像生成部２２は、状態受信部２１からの状態信号に基づき、カーソル４６の位置を、アイコン４１の右側に隣接するアイコン４２と同じ位置（即ち、アイコン４２の上）に決定（変更）して、図５（ａ）に示す前景画像４０ａを生成する。
【００５１】
また、背景画像生成部２３は、図４（ｂ）の場合と同様、状態受信部２１からの状態信号に基づき、ポインティングデバイス１０（認識部１２）が操作指を認識していると判定すると、図５（ｂ）に示すように、状態信号に対応した操作画面４０上の位置に対応付けられた、オブジェクト群４７の一部分である粒子４７ｂを、オブジェクト群４７の他の粒子と異なる表示態様にした背景画像４０ｂを生成する。このとき、操作部１１における操作指の移動に応じて、オブジェクト群４７のうちの上下方向で隆起する一部分を構成する粒子が、粒子４７ａから粒子４７ｂに移り変わっている。具体的には、粒子４７ｂは、粒子４７ａよりも右側に配置され、操作部１１における操作指の移動方向に沿ってオブジェクト群４７のうちの上下方向で隆起する一部分を構成する粒子が右方向に移り変わっている。即ち、上述した記憶部２９に格納される第３の対応関係情報は、状態受信部２１からの状態信号に対応した操作画面４０上の位置の移動に追従して、オブジェクト群４７のうちの上下方向に隆起する一部分を構成する粒子が同じ方向に移り変わっていくように設定される。
【００５２】
そして、合成処理部２４は、図５（ａ）の前景画像４０ａと、図５（ｂ）の背景画像４０ｂを合成して、操作画面４０を生成する。図５（ｃ）に示すように、操作画面４０は、上下方向の中央よりやや下方において、左右に亘り一列に並べて配置されるアイコン４１〜４５と、アイコン４２と同じ位置（即ち、アイコン４２の上）に配置されるカーソル４６を含む。また、操作画面４０は、その更に下方において、粒子４７ｂが他の粒子に対して大きく上下方向に変位した態様で、左右に亘り並べて配置されたオブジェクト群４７を含む。本例では、粒子４７ｂは、状態受信部２１（ポインティングデバイス１０）からの状態信号に対応した操作画面４０上の左右位置を中心とする５つの粒子により構成され、カーソル４６が選択するアイコン４２に背景として一部重複する態様で表示されている。
【００５３】
このように、ポインティングデバイス１０（認識部１２）により認識された操作指が操作部１１上で移動した場合、オブジェクト群４７の中で異なる表示態様の一部分を操作指の移動方向に沿って移動させる。具体的には、状態受信部２１（ポインティングデバイス１０）からの状態信号に対応した操作画面４０上の位置の移動に追従して、オブジェクト群４７の中で、異なる表示態様（上下方向で隆起した態様）で表示される一部の粒子（粒子４７ａ，４７ｂ）が同じ方向に移り変わっていく（図５（ｃ）の白抜き矢印）。例えば、操作指を操作部１１上で移動させている最中に、車両の振動等により操作部１１から操作指が外れてしまう場合も有り得る。このような場合に、ユーザは、オブジェクト群４７における異なる表示態様の一部分が操作指の移動方向に沿って移動しているか（移り変わっているか）否かを視認することにより、ポインティングデバイス１０によるカーソル４６の移動操作が適切に継続できるか否かを容易に判断することができる。また、ユーザは、オブジェクト群４７のうちの異なる表示態様で表示される一部分を構成する粒子の移り変わる方向を見て、操作画面４０上におけるカーソル４６の移動方向を容易に把握することができる。
【００５４】
尚、本例では、多数の粒子を左右方向に並べて構成されるオブジェクト群４７を用いたが、例えば、オブジェクト群４７における各粒子を結合し、一つのグラフィックオブジェクトにしてもよい。かかる場合、ポインティングデバイス１０（認識部１２）が操作指を認識しない状態から操作指を認識する状態に遷移すると、粒子４７ａに相当するグラフィックオブジェクトの一部分が上下方向に隆起する。そして、ポインティングデバイス１０により認識された操作指の移動に応じて、上下方向に隆起するグラフィックオブジェクトの一部分が粒子４７ａに相当する部分から粒子４７ｂに相当する部分に移り変わる（即ち、操作指の移動方向に沿って移動する）。かかる変形例においても、本例と同様の作用・効果を得ることができる。
【００５５】
また、本例では、"異なる表示態様"として、グラフィックオブジェクト群の一部分（粒子４７ａ，４７ｂ）を、グラフィックオブジェクト群の他の部分に対して、大きく変位させる（上下方向に隆起させる）態様を採用したが、当該態様には限定されない。以下、図６〜図８を参照して、"異なる表示態様"の他の例を含む操作画面５０について説明する。
【００５６】
図６〜図８は、本実施形態に係る表示装置１（具体的には、前景画像生成部２２、背景画像生成部２３、及び合成処理部２４）による操作画面の他の例を示す図である。図６は、ポインティングデバイス１０（認識部１２）が操作指を認識していない場合における前景画像５０ａ（図６（ａ））、背景画像５０ｂ（図６（ｂ））、及び操作画面５０（図６（ｃ））を示す図である。また、図７、図８は、ポインティングデバイス１０（認識部１２）が操作指を認識している場合の前景画像５０ａ（図７（ａ）、図７（ｂ））、背景画像５０ｂ（図７（ｂ）、図８（ｂ））、及び操作画面５０（図７（ｃ）、図８（ｃ））を示す図である。具体的には、図７は、図６に示す状態（ポインティングデバイス１０（認識部１２）が操作指を認識しない状態）から操作指を認識する状態に遷移した際の前景画像５０ａ（図７（ａ））、背景画像５０ｂ（図７（ｂ））、及び操作画面５０（図７（ｃ））を示す図である。また、図８は、図７に示す状態から認識部１２が認識した操作指の移動が開始された後の前景画像５０ａ（図８（ａ））、背景画像５０ｂ（図８（ｂ））、及び操作画面５０（図８（ｃ））を示す図である。
【００５７】
まず、図６（ａ）〜（ｃ）を参照して、カーソル５６の移動操作が行われていない場合の操作画面５０について説明する。
【００５８】
図６（ａ）に示すように、前景画像５０ａは、選択対象である楽曲５１〜５５と、楽曲５１〜５５のうちの何れかを選択するカーソル５６を含む。ポインティングデバイス１０を用いて、楽曲５１〜５５の何れかをカーソル５６で選択することにより、車両に搭載されるオーディオ装置の所定の音源（例えば、ＣＤ等）から楽曲５１〜５５の何れかを再生することができる。操作画面５０における楽曲５１〜５５の位置は予め規定されており、楽曲５１〜５５は、前景画像５０ａ（即ち、操作画面５０）の左端部の除く左右方向の範囲において、上端部から下端部にかけて、順に並べられている。カーソル５６は、楽曲５１〜５５のうちの何れかが選択された状態であることを強調するため、本例では、選択された楽曲５１〜５５の何れかを枠で囲む態様が採用される。
【００５９】
前景画像生成部２２は、状態受信部２１から受信した状態信号に基づき、前景画像５０ａ（即ち、操作画面５０）上におけるカーソル５６の位置を決定する。そして、前景画像生成部２２は、楽曲５１〜５５を予め規定された位置に配置すると共に、決定した位置（具体的には、楽曲５１〜５５の何れかと同じ位置）にカーソル５６を配置した操作画面５０の前景画像５０ａを生成する。図６の状態では、ポインティングデバイス１０（認識部１２）が操作指を認識していないため、カーソル５６の位置は、前回のカーソル５６の移動操作の終了時における位置、或いは、カーソル５６の予め規定された初期位置になる。本例の場合、図６（ａ）に示すように、カーソル５６は、楽曲５２と同じ位置（即ち、楽曲５２の上）に配置され、楽曲５２が選択された状態になっている。
【００６０】
また、図６（ｂ）に示すように、背景画像５０ｂは、多数の粒子状のグラフィックオブジェクト（以下、単に「粒子」と称する）により構成されるグラフィックオブジェクト群（以下、「オブジェクト群」と称する）５７を含む。オブジェクト群５７は、背景画像５０ｂ（即ち、操作画面５０）の所定範囲に亘って、具体的には、操作画面５０の上下方向及び左右方向の全体に亘って、構成要素である粒子を上下左右に等間隔で並べて配置されている。背景画像生成部２３は、ポインティングデバイス１０（認識部１２）が操作指を認識していないと判定すると、予め規定された表示態様、即ち、本例の場合、同じ色の粒子が上下左右に等間隔で並んだ表示態様のオブジェクト群５７を含む背景画像５０ｂを生成する。
【００６１】
そして、合成処理部２４は、図６（ａ）の前景画像５０ａと図６（ｂ）の背景画像５０ｂを合成して、操作画面５０を生成する。図６（ｃ）に示すように、操作画面５０は、上下方向で並べて配置される楽曲５１〜５５と、楽曲５２と同じ位置（即ち、楽曲５２の上）に配置されるカーソル５６を含む。また、操作画面５０は、背景として、全体に亘り上下左右に等間隔で配置される同じ色の粒子により構成されるオブジェクト群５７を含む。
【００６２】
続いて、図７（ａ）〜（ｃ）を参照して、ポインティングデバイス１０（認識部１２）が操作指を認識しない状態から操作指を認識する状態に遷移した際の操作画面５０について説明する。
【００６３】
図７（ａ）に示すように、図６（ｃ）に示す操作画面５０の状態からポインティングデバイス１０（認識部１２）が操作指を認識する状態に遷移した際、カーソル５６の位置には未だ変更が無いため、前景画像生成部２２は、図６（ａ）と同様の前景画像５０ａを生成する。
【００６４】
また、背景画像生成部２３は、状態受信部２１からの状態信号に基づき、ポインティングデバイス１０（認識部１２）が操作指を認識していると判定すると、図７（ｂ）に示すように、状態信号に対応した操作画面５０上の位置に対応付けられた、オブジェクト群５７の一部分である粒子５７ａを、オブジェクト群５７の他の部分の粒子と異なる表示態様にした背景画像５０ｂを生成する。具体的には、粒子５７ａは、オブジェクト群５７に含まれる粒子のうち、状態信号に対応した操作画面５０上の上下位置付近の２列分の粒子であり、オブジェクト群５７内の他の粒子に対して、色が異なっている。
【００６５】
そして、合成処理部２４は、図７（ａ）の前景画像５０ａと、図７（ｂ）の背景画像５０ｂを合成して、操作画面５０を生成する。図７（ｃ）に示すように、操作画面５０は、上下方向で並べて配置される楽曲５１〜５５と、楽曲５２と同じ位置（即ち、楽曲５２の上）に配置されるカーソル５６を含む。また、操作画面５０は、背景として、全体に亘り上下左右に等間隔で配置される粒子により構成されるオブジェクト群５７を含み、オブジェクト群５７の一部分を構成する粒子５７ａの色が、オブジェクト群５７の他の部分を構成する粒子の色と異なる態様で表示される。本例では、粒子５７ａは、状態受信部２１（ポインティングデバイス１０）からの状態信号に対応した操作画面５０上の上下位置を中心とする２列分の粒子により構成され、カーソル５６が選択する楽曲５２に背景として一部重複する態様で表示されている。
【００６６】
このように、ポインティングデバイス１０（認識部１２）により操作指が認識されている場合、オブジェクト群４７の一部分（粒子４７ａ）をオブジェクト群４７の他の部分と異なる表示態様にする。具体的には、ポインティングデバイス１０からの状態信号に対応した操作画面５０上の位置に対応付けられた、オブジェクト群５７の粒子５７ａを、オブジェクト群５７の他の粒子と異なる表示態様にすることにより、図３〜図５に示す実施例と同様の作用・効果を得ることができる。具体的には、ユーザは、オブジェクト群５７の中での一部の粒子５７ａの色の変化を認識することにより、ポインティングデバイス１０による操作画面５０の操作が可能な状態であるか（具体的には、操作可能な状態が継続しているか）否かを容易に判断することができる。また、ユーザは、操作画面５０上のカーソル５６と略同じ上下位置において、一部の粒子５７ａの色の変化を認識することにより、ポインティングデバイス１０を用いた操作開始時におけるカーソル５６の位置（の目安）を容易に把握することができる。また、粒子５７ａは、楽曲５１〜５５やカーソル５６の背景として表示されるため、粒子５７ａの色が変化したとしても、楽曲５１〜５５やカーソル５６が見えにくくなる事態の発生を抑制することができる。
【００６７】
続いて、図８（ａ）〜（ｃ）を参照して、認識部１２が認識した操作指の移動が開始された後の操作画面５０について説明する。
【００６８】
尚、図７に示す状態から図８に示す状態に移行する際、ユーザは、操作部１１において、操作指を下方向に移動させて、カーソル５６を下方向に移動させる操作を行っている。
【００６９】
図８（ａ）に示すように、操作部１１における操作指の移動に応じて、図７（ａ）の状態からカーソル５６の位置が更新されている。具体的には、前景画像生成部２２は、状態受信部２１からの状態信号に基づき、カーソル５６の位置を、楽曲５２の下に隣接する楽曲５３と同じ位置（即ち、楽曲５３の上）に決定（変更）して、図８（ａ）に示す前景画像５０ａを生成する。
【００７０】
また、背景画像生成部２３は、図７（ｂ）の場合と同様、状態受信部２１からの状態信号に基づき、ポインティングデバイス１０（認識部１２）が操作指を認識していると判定すると、図８（ｂ）に示すように、状態信号に対応した操作画面５０上の位置に対応付けられた、オブジェクト群５７の一部分である粒子５７ｂを、オブジェクト群５７の他の粒子と異なる表示態様にした背景画像５０ｂを生成する。このとき、操作部１１における操作指の移動に応じて、オブジェクト群５７のうちの色が異なる一部分を構成する粒子が、粒子５７ａから粒子５７ｂに移り変わっている。具体的には、粒子５７ｂは、粒子５７ａよりも下側に配置され、操作部１１における操作指の移動方向に沿って、オブジェクト群５７のうちの色の異なる一部分を構成する粒子が下方向に移り変わっている。即ち、上述した記憶部２９に格納される第３の対応関係情報は、状態受信部２１からの状態信号に対応した操作画面５０上の位置の移動に追従して、オブジェクト群５７のうちの色が異なる一部分を構成する粒子が同じ方向に移り変わっていくように設定される。
【００７１】
そして、合成処理部２４は、図８（ａ）の前景画像５０ａと、図８（ｂ）の背景画像５０ｂを合成して、操作画面５０を生成する。図８（ｃ）に示すように、操作画面５０は、上下方向で並べて配置される楽曲５１〜５５と、楽曲５３と同じ位置（即ち、楽曲５３の上）に配置されるカーソル５６を含む。また、操作画面５０は、背景として、全体に亘り上下左右に等間隔で配置される粒子により構成されるオブジェクト群５７を含み、オブジェクト群５７の一部の粒子５７ｂの色が、他の粒子の色と異なる態様で表示される。本例では、粒子５７ｂは、状態受信部２１（ポインティングデバイス１０）からの状態信号に対応した操作画面５０上の上下位置を中心とする２列分の粒子により構成され、カーソル５６が選択する楽曲５３に背景として一部重複する態様で表示されている。
【００７２】
このように、ポインティングデバイス１０（認識部１２）により認識された操作指が操作部１１上で移動した場合、オブジェクト群４７の中で異なる表示態様の一部分を操作指の移動方向に沿って移動させる。具体的には、状態受信部２１（ポインティングデバイス１０）から状態信号に対応した操作画面５０上の位置の移動に追従して、オブジェクト群５７の中で、異なる表示態様（他の粒子と色が異なる態様）で表示される一部分を構成する粒子（粒子５７ａ，５７ｂ）が同じ方向に移り変わっていく（図８（ｃ）の白抜き矢印）。従って、図３〜図５に示す実施例と同様の作用・効果を得ることができる。具体的には、ユーザは、オブジェクト群５７における異なる表示態様の一部分が操作指の移動方向に沿って移動しているか（移り変わっているか）否かを視認することにより、ポインティングデバイス１０によるカーソル５６の移動操作が適切に継続できるか否かを容易に判断することができる。また、ユーザは、オブジェクト群５７における異なる表示態様の一部分の移り変わる方向を見て、操作画面５０上におけるカーソル５６の移動方向を容易に把握することができる。
【００７３】
尚、本例では、多数の粒子を上下左右に等間隔で並べて構成されるオブジェクト群５７を用いたが、例えば、オブジェクト群５７の各粒子が配置される範囲を覆う平面状のグラフィックオブジェクト（平面オブジェクト）が用いられてもよい。かかる場合、ポインティングデバイス１０（認識部１２）が操作指を認識しない状態から操作指を認識する状態に遷移すると、粒子５７ａに相当する平面オブジェクトの一部分の色が変化する。そして、ポインティングデバイス１０により認識された操作指の移動に応じて、色が異なる平面オブジェクトの一部分が粒子５７ａに相当する部分から粒子５７ｂに相当する部分に移り変わっていく。かかる変形例においても、本例と同様の作用・効果を得ることができる。
【００７４】
また、本例では、２次元で配置されるグラフィックオブジェクト群を用いたが、背景画像５０ｂ内に仮想的な３次元空間を設定し、当該３次元空間上に配置されるグラフィックオブジェクト群を用いてもよい。以下、図９を参照して、仮想的な３次元空間上に配置されたグラフィックオブジェクト群を含む操作画面について説明する。
【００７５】
図９は、本実施形態に係る表示装置１（具体的には、前景画像生成部２２、背景画像生成部２３、及び合成処理部２４）による操作画面の更に他の例を示す図である。図９（ａ）は、ポインティングデバイス１０（認識部１２）が操作指を認識していない場合における操作画面６０を示す図である。また、図９（ｂ），（ｃ）は、ポインティングデバイス１０（認識部１２）が操作指を認識している場合の操作画面６０を示す図である。具体的には、図９（ｂ）は、図９（ａ）に示す状態（ポインティングデバイス１０（認識部１２）が操作指を認識しない状態）から操作指を認識する状態に遷移した際の操作画面６０を示す図である。また、図９（ｃ）は、図９（ｂ）に示す状態から認識部１２が認識した操作指の移動が開始された後の操作画面６０を示す図である。
【００７６】
尚、図９（ｂ）に示す状態から図９（ｃ）に示す状態に移行する際、ユーザは、操作部１１において、操作指を右方向に移動させて、カーソル６８を右方向に移動させる操作を行っている。
【００７７】
図９（ａ）に示すように、操作画面６０は、前景画像の構成要素として、選択対象であるアイコン６１〜６７と、アイコン６１〜６７のうちの何れかを選択するカーソル６８を含む。アイコン６１〜６７は、操作画面６０の下端部において、左から右に向けて順に並べられている。図９（ａ）の状態では、ポインティングデバイス１０（認識部１２）が操作指を認識していないため、カーソル６８の位置は、前回のカーソル６８の移動操作の終了時における位置、或いは、カーソル６８の予め規定された初期位置になる。本例の場合、カーソル６８は、アイコン６４と同じ位置（即ち、アイコン６４の上）に配置され、アイコン６４が選択された状態になっている。
【００７８】
また、図９（ａ）に示すように、操作画面６０は、背景画像の構成要素として、操作画面６０内の仮想的な３次元空間上に配置されたグラフィックオブジェクト群（以下、単に「オブジェクト群」と称する）６９を含む。オブジェクト群６９は、所定の規則に従い、仮想的な３次元空間上に配置された多数の粒子状のグラフィックオブジェクト（以下、単に「粒子」と称する）により構成され、操作画面６０の左端部から右端部（左右方向に移動するカーソル６８の移動範囲を含む範囲）に亘って配置される。
【００７９】
図９（ａ）の状態からポインティングデバイス１０（認識部１２）が操作指を認識する状態に遷移した際、図９（ｂ）に示すように、状態信号に対応した操作画面６０上の位置に対応付けられた、オブジェクト群６９の一部分を構成する粒子６９ａが他の粒子に対して、異なる表示態様で表示される。具体的には、オブジェクト群６９の一部分である粒子６９ａは、オブジェクト群の他の部分の粒子に対して、仮想的な３次元空間上で所定方向に変位（隆起）し、背景として、カーソル６８が選択するアイコン６４に一部重複する態様で表示される。これにより、図３〜図５及び図６〜図８に示す実施例と同様に、ユーザは、操作画面６０上の操作状態をより容易に把握することができる。即ち、ユーザは、オブジェクト群６９の一部分を構成する粒子６９ａの隆起を見て、ポインティングデバイス１０による操作画面４０の操作が可能な状態であるか否かや、カーソル６８の位置等を把握し易くなる。
【００８０】
また、図９（ｂ）の状態から認識部１２が認識した操作指の移動が開始されると、図９（ｃ）に示すように、操作部１１における操作指の移動に応じて、カーソル６８が右方向に移動し、アイコン６５と同じ位置（即ち、アイコン６５の上）に配置される。また、操作部１１における操作指の移動に応じて、状態信号に対応した操作画面６０上の位置が右方向に移動するため、オブジェクト群６９のうちの異なる表示態様の一部分を構成する粒子が、粒子６９ａから粒子６９ｂに移り変わっている。即ち、操作部１１における操作指の移動方向に沿って、オブジェクト群６９のうちの隆起する一部分を構成する粒子が右方向に移り変わっている。これにより、図３〜図５及び図６〜図８に示す実施例と同様の作用・効果を得ることができる。具体的には、ユーザは、オブジェクト群６９における異なる表示態様の一部分が操作指の移動方向に沿って移動しているか（移り変わっているか）否かを視認することにより、ポインティングデバイス１０によるカーソル６８の移動操作が適切に継続できるか否かを容易に判断することができる。また、ユーザは、異なる表示態様の一部分を構成する粒子の移り変わる方向を見て、操作画面６０上におけるカーソル４６の移動方向を容易に把握することができる。
【００８１】
また、本例では、仮想定な３次元空間上にオブジェクト群６９を配置することにより、操作画面６０における意匠面での演出を行うことができる。
【００８２】
尚、本例では、多数の粒子を仮想的な３次元空間上に並べて構成されるオブジェクト群６９を用いたが、例えば、オブジェクト群６９における各粒子を結合する形で形成される一つのグラフィックオブジェクト（サーフェス）を用いてもよい。かかる場合、ポインティングデバイス１０（認識部１２）が操作指を認識しない状態から操作指を認識する状態に遷移すると、粒子６９ａに相当するサーフェスの一部分が仮想的な３次元空間上で隆起する。そして、ポインティングデバイス１０により認識された操作指の移動に応じて、仮想的な３次元空間上で隆起するサーフェスの一部分が粒子６９ａに相当する部分から粒子６９ｂに相当する部分に移り変わる。かかる変形例においても、本例と同様の作用・効果を得ることができる。
【００８３】
［第２実施形態］
次いで、第２実施形態について説明する。
【００８４】
本実施形態に係る表示装置１は、ポインティングデバイス１０を用いて、選択操作が可能な複数の選択対象（スクロール可能なリストを構成する複数の項目等）を含む操作画面をディスプレイ３０に表示する。具体的には、本実施形態に係る表示装置１は、操作画面上の所定軸に沿って配置され、ポインティングデバイス１０を用いて、該所定軸の方向にスクロール操作が可能な複数の選択対象（リストを構成する複数の項目等）を含む操作画面をディスプレイ３０に表示する点において、第１実施形態と異なる。以下、第１実施形態と異なる部分を中心に説明を行う。
【００８５】
本実施形態に係る表示装置１の構成は、第１実施形態と同様、図１で表される。
【００８６】
ＥＣＵ２０は、ディスプレイ３０に操作画面を表示させる表示制御部の他の例であり、操作画面を生成する処理を行う電子制御ユニットである。ＥＣＵ２０は、認識部１２により認識された操作指の操作部１１における位置に応じて、操作画面上の所定軸に沿って配置される複数の選択対象（リストを構成する複数の項目等）をスクロールさせる。ＥＣＵ２０は、第１実施形態と同様、状態受信部２１、前景画像生成部２２、背景画像生成部２３、合成処理部２４、記憶部２９を含む。
【００８７】
前景画像生成部２２は、状態受信部２１（ポインティングデバイス１０）からの状態信号に対応したスクロール操作の内容に応じて、操作画面上における複数の選択対象（リストを構成する複数の項目等）の配置を決定する。そして、前景画像生成部２２は、複数の選択対象のうちの少なくとも一部の選択対象を含む操作画面の前景画像を生成する。通常、ポインティングデバイス１０を用いたスクロール操作により選択可能な複数の選択対象の数（リストを構成する項目の個数）は、操作画面上に表示可能な選択対象の個数よりも多いからである。
【００８８】
具体的には、前景画像生成部２２は、状態受信部２１から受信した状態信号に基づき、リスト（を構成する複数の選択対象）等のスクロール量やスクロール方向等を決定する。例えば、前景画像生成部２２は、状態信号に基づき、スクロール操作の内容（スクロール操作の種別等）を確認する。例えば、ポインティングデバイス１０がタッチパッドの場合、スクロール操作の種別として、"ドラッグ（なぞり）"によるスクロール操作と、"フリック"によるスクロール操作がある。"ドラッグ"によるスクロール操作は、タッチパッドの操作面に指を接触させたまま、比較的低速で指を移動させる操作である。一方、"フリック"によるスクロール操作は、タッチパッドの操作面をスクロール操作の方向に指で弾く態様で、比較的高速で指を移動させる操作である。前景画像生成部２２は、例えば、状態受信部２１から受信した状態信号に基づくタッチパッドのｘ座標及びｙ座標の変化量が所定の閾値以上であるか否かにより、"ドラッグ"によるスクロール操作か"フリック"によるスクロール操作かを判定することができる。前景画像生成部２２は、"ドラッグ"によるスクロール操作であると判定した場合、状態信号に基づくタッチパッドのｘ座標及びｙ座標の変化量に基づき、スクロール量とスクロール方向を決定する。例えば、タッチパッドのｘ座標及びｙ座標の変化量に対して、スクロール量及びスクロール方向を対応付けた第４の対応関係情報を記憶部２９に予め格納しておく。これにより、前景画像生成部２２は、第４の対応関係情報に基づき、スクロール量とスクロール方向を決定することができる。一方、前景画像生成部２２は、"フリック"によるスクロール操作であるを判定した場合、"フリック"によるスクロール操作に対して予め規定された所定値をスクロール量として決定すると共に、状態信号に基づくタッチパッドのｘ座標及びｙ座標の変化量に基づき、スクロール方向を決定する。
【００８９】
そして、前景画像生成部２２は、決定したスクロール量及びスクロール方向に応じて、選択対象の配置を決定し、複数の選択対象（リストを構成する複数の項目）のうちの少なくとも一部の選択対象を含む操作画面の前景画像を生成する。
【００９０】
尚、ポインティングデバイス１０がジェスチャー認識デバイスである場合についても、ジェスチャーの速度に応じて、タッチパッドの場合における"ドラッグ"によるスクロール操作と"フリック"によるスクロール操作に対応する種別を設けることができる。
【００９１】
背景画像生成部２３は、第１実施形態と同様、操作画面上の所定範囲に亘って配置されるグラフィックオブジェクト或いは多数のグラフィックオブジェクト（個別オブジェクト）の集合であるグラフィックオブジェクト群を含む操作画面の背景画像を生成する。
【００９２】
背景画像生成部２３は、第１実施形態と同様、状態受信部２１から受信した状態信号に基づき、ポインティングデバイス１０（認識部１２）が操作指を認識しているか否かを判定する。
【００９３】
背景画像生成部２３は、第１実施形態と同様、ポインティングデバイス１０（認識部１２）が操作指を認識していないと判定した場合、予め規定された表示態様のグラフィックオブジェクト或いはグラフィックオブジェクト群を含む背景画像を生成する。好ましくは、グラフィックオブジェクト或いはグラフィックオブジェクト群の全体で、視覚的にユーザの注意を引くような差異を含まない、予め規定された表示態様のグラフィックオブジェクト或いはグラフィックオブジェクトを含む背景画像が生成されるとよい。
【００９４】
一方、背景画像生成部２３は、第１実施形態と同様、ポインティングデバイス１０（認識部１２）が操作指を認識していると判定した場合、グラフィックオブジェクトの一部分を、グラフィックオブジェクトの他の部分と異なる表示態様にする、或いは、グラフィックオブジェクト群の一部分を、グラフィックオブジェクト群の他の部分と異なる表示態様にする。そして、背景画像生成部２３は、スクロール操作の内容（スクロール操作の種別等）に応じて、グラフィックオブジェクト或いはグラフィックオブジェクト群のうちの異なる表示態様の一部分をスクロール操作と同じ方向に移り変わらせる（移動させる）。
【００９５】
背景画像生成部２３は、例えば、前景画像生成部２２と同様に、状態受信部２１から受信する状態信号に基づき、スクロール操作の内容（スクロール操作の種別等）を確認する。そして、背景画像生成部２３は、"ドラッグ"によるスクロール操作であると判定した場合、第４の対応関係情報に基づき、スクロール量及びスクロール方向を決定する。一方、背景画像生成部２３は、"フリック"によるスクロール操作であると判定した場合、前景画像生成部２２と同様、"フリック"によるスクロール操作に対して予め規定された所定値をスクロール量として決定すると共に、状態信号に基づくタッチパッドのｘ座標及びｙ座標の変化量に基づき、スクロール方向を決定する。そして、背景画像生成部２３は、決定したスクロール量及びスクロール方向に応じて、グラフィックオブジェクト或いはグラフィックオブジェクト群のうちの異なる表示態様の一部分を、スクロール操作の内容に対応した期間で、スクロール操作と同じ方向に移り変わらせる（移動させる）態様の背景画像を生成する。背景画像生成部２３により生成される背景画像の詳細について後述する。
【００９６】
尚、"スクロール操作の内容に対応した期間"とは、スクロール操作の内容（スクロール操作の種別）に対応して予め規定される期間である。例えば、"ドラッグ"によるスクロール操作の場合、スクロール操作が継続している期間（即ち、認識部１２が操作指を認識している期間）であってよい。また、"フリック"によるスクロール操作の場合、指の接触期間（即ち、認識部１２が操作指を認識している期間）が短いため、"フリック"によるスクロール操作に対して予め規定された期間を設定する。例えば、"フリック"によるスクロール操作では、複数の操作対象（リストを構成する複数の項目）が比較的速くスクロールするため、比較的短い期間であってよい。
【００９７】
次に、図１０〜図１２を参照して、本実施形態に係る表示装置１、具体的には、前景画像生成部２２、背景画像生成部２３、及び合成処理部２４による操作画面の一例について説明する。
【００９８】
図１０〜図１２は、本実施形態に係る表示装置１（具体的には、前景画像生成部２２、背景画像生成部２３、及び合成処理部２４）による操作画面の一例を示す図である。図１０は、ポインティングデバイス１０（認識部１２）が操作指を認識していない場合における前景画像７０ａ（図１０（ａ））、背景画像７０ｂ（図１０（ｂ））、及び操作画面７０（図１０（ｃ））を示す図である。また、図１１、図１２は、ポインティングデバイス１０（認識部１２）が操作指を認識している場合の前景画像７０ａ（図１１（ａ）、図１１（ｂ））、背景画像７０ｂ（図１１（ｂ）、図１２（ｂ））、及び操作画面７０（図１１（ｃ）、図１２（ｃ））を示す図である。具体的には、図１１は、図１０に示す状態（ポインティングデバイス１０（認識部１２）が操作指を認識しない状態）から操作指を認識する状態に遷移した際の前景画像７０ａ（図１１（ａ））、背景画像７０ｂ（図１１（ｂ））、及び操作画面７０（図１１（ｃ））を示す図である。また、図１２は、図１１に示す状態から認識部１２が認識した操作指の移動が開始された後の前景画像７０ａ（図１２（ａ））、背景画像７０ｂ（図１２（ｂ））、及び操作画面７０（図１２（ｃ））を示す図である。
【００９９】
尚、楽曲リスト７１には、操作画面７０に表示可能な楽曲数（５曲）よりも多い複数（２６曲）の楽曲７１Ａ〜７１Ｚが含まれる。
【０１００】
まず、図１０（ａ）〜（ｃ）を参照して、ポインティングデバイス１０（認識部１２）が操作指を認識していない場合の操作画面７０について説明する。
【０１０１】
図１０（ａ）に示すように、前景画像７０ａは、楽曲リスト７１に含まれる一部の楽曲７１Ａ〜７１Ｅと、楽曲リスト７１に含まれる楽曲７１Ａ〜７１Ｚのうちの何れかを選択する、固定されたカーソル７６を含む。楽曲リスト７１をスクロール操作し、楽曲７１Ａ〜７１Ｚの何れかをカーソル７６の位置に合わせることにより、車両に搭載されるオーディオ装置の所定の音源（例えば、ＣＤ等）から楽曲７１Ａ〜７１Ｚの何れかを再生することができる。楽曲７１Ａ〜７１Ｅは、前景画像７０ａ（即ち、操作画面７０）の左端部の除く左右方向の範囲において、上端部から下端部にかけて、順に並べられている。また、カーソル７６は、前景画像７０ａ（即ち、操作画面７０）の左端部を除く左右方向の範囲における下端部に固定されている。図１０の状態では、カーソル７６と、楽曲７１Ｅが同じ位置に配置されており（カーソル７６が楽曲７１Ｅ上に配置されており）、楽曲７１Ｅが選択された状態になっている。
【０１０２】
また、図１０（ｂ）に示すように、背景画像７０ｂは、多数の粒子状のグラフィックオブジェクト（以下、単に「粒子」と称する）により構成されるグラフィックオブジェクト群（以下、「オブジェクト群」と称する）７７を含む。オブジェクト群７７は、背景画像７０ｂ（即ち、操作画面７０）の所定範囲に亘って、具体的には、操作画面７０の上下方向及び左右方向の全体に亘って、構成要素である粒子を上下左右に等間隔で並べて配置されている。背景画像生成部２３は、ポインティングデバイス１０（認識部１２）が操作指を認識していないと判定すると、予め規定された表示態様、即ち、本例の場合、同じ色の粒子が上下左右に等間隔で並んだ表示態様のオブジェクト群７７を含む背景画像７０ｂを生成する。
【０１０３】
そして、合成処理部２４は、図１０（ａ）の前景画像７０ａと図１０（ｂ）の背景画像７０ｂを合成して、操作画面７０を生成する。図１０（ｃ）に示すように、操作画面７０は、上下方向で並べて配置される楽曲リスト７１の一部である楽曲７１Ａ〜７１Ｅと、楽曲７１Ｅと同じ位置（即ち、楽曲７１Ｅの上）に配置されるカーソル７６を含む。また、操作画面７０は、背景として、全体に亘り上下左右に等間隔で配置される同じ色の粒子により構成されるオブジェクト群７７を含む。
【０１０４】
続いて、図１１（ａ）〜（ｃ）を参照して、ポインティングデバイス１０（認識部１２）が操作指を認識しない状態から操作指を認識する状態に遷移した際の操作画面７０について説明する。
【０１０５】
尚、本例におけるスクロール操作の方向、即ち、操作部１１における操作指の移動方向は、下方向である。
【０１０６】
図１１（ａ）に示すように、図１０（ｃ）に示す操作画面７０の状態からポインティングデバイス１０（認識部１２）が操作指を認識する状態に遷移した際、未だ楽曲リスト７１のスクロールは開始されていないため、前景画像生成部２２は、図１０（ａ）と同様の前景画像５０ａを生成する。
【０１０７】
また、背景画像生成部２３は、状態受信部２１からの状態信号に基づき、ポインティングデバイス１０（認識部１２）が操作指を認識していると判定すると、図１１（ｂ）に示すように、オブジェクト群７７の一部分を構成する粒子７７ａを、オブジェクト群７７の他の粒子と異なる表示態様にした背景画像７０ｂを生成する。具体的には、粒子７７ａは、オブジェクト群７７に含まれる粒子のうち、操作画面７０の上端部に位置する２列分の粒子であり、オブジェクト群７７のうちの他の粒子に対して、色が異なっている。
【０１０８】
そして、合成処理部２４は、図１１（ａ）の前景画像７０ａと、図１１（ｂ）の背景画像７０ｂを合成して、操作画面７０を生成する。図１１（ｃ）に示すように、操作画面７０は、上下方向で並べて配置される楽曲リスト７１の一部である楽曲７１Ａ〜７１Ｅと、楽曲７１Ｅと同じ位置（即ち、楽曲７１Ｅの上）に配置されるカーソル７６を含む。また、操作画面７０は、背景として、全体に亘り上下左右に等間隔で配置される粒子により構成されるオブジェクト群７７を含み、オブジェクト群７７の一部分を構成する粒子７７ａの色が、他の粒子の色と異なる態様で表示される。本例では、粒子７７ａは、操作画面７０の上端部に位置する２列分の粒子により構成されている。
【０１０９】
このように、ポインティングデバイス１０（認識部１２）により操作指が認識されている場合、オブジェクト群７７の一部分（粒子７７ａ）を、オブジェクト群７７の他の部分（他の粒子）と異なる表示態様にする。これにより、ユーザは、操作画面における操作状態をより容易に把握することができる。具体的には、ユーザは、オブジェクト群７７の中での一部の粒子７７ａの色の変化を認識することにより、ポインティングデバイス１０による操作画面５０の操作が可能な状態であるか（具体的には、操作可能な状態が継続しているか）否かを容易に判断することができる。また、ユーザは、オブジェクト群７７の中での一部の粒子７７ａの色の変化を認識することにより、ポインティングデバイス１０を用いた操作に応じて、楽曲リスト７１のスクロールが行われていることを容易に把握することができる。
【０１１０】
続いて、図１２（ａ）〜（ｃ）を参照して、認識部１２が認識した操作指の移動が開始された後の操作画面７０について説明する。
【０１１１】
図１２（ａ）に示すように、操作部１１における操作指の移動に応じて、図１１（ａ）の状態から表示される楽曲が更新されている。具体的には、楽曲リスト７１が下方向にスクロールすることにより、前景画像７０ａには、楽曲７１Ａ，７１Ｂが含まれなくなり、代わりに、楽曲７１Ｙ、７１Ｚが含まれるようになる。図１２の状態では、カーソル７６と、楽曲７１Ｃが同じ位置に配置されており（カーソル７６が楽曲７１Ｃ上に配置されており）、楽曲７１Ｃが選択された状態になっている。
【０１１２】
また、背景画像生成部２３は、図１２（ｂ）に示すように、オブジェクト群７７の一部部分を構成する粒子７７ｂを、オブジェクト群７７の他の粒子と異なる表示態様にした背景画像７０ｂを生成する。このとき、操作部１１における操作指の移動に応じて、オブジェクト群７７のうちの色が異なる一部の粒子が、粒子７７ａから粒子７７ｂに移り変わっている。具体的には、粒子７７ｂは、粒子７７ａよりも下側に配置され、操作部１１における操作指の移動方向に沿って、オブジェクト群７７のうちの色が異なる一部分を構成する粒子が下方向に移り変わっている。
【０１１３】
そして、合成処理部２４は、図１２（ａ）の前景画像７０ａと、図１２（ｂ）の背景画像７０ｂを合成して、操作画面７０を生成する。図１２（ｃ）に示すように、操作画面７０は、上下方向で並べて配置される楽曲リスト７１の一部である楽曲７１Ｙ，７１Ｚ及び楽曲７１Ａ〜７１Ｃと、楽曲７１Ｃと同じ位置（即ち、楽曲７１Ｃの上）に配置されるカーソル７６を含む。また、操作画面７０は、背景として、全体に亘り上下左右に等間隔で配置される粒子により構成されるオブジェクト群７７を含み、オブジェクト群７７の一部分を構成する粒子７７ｂの色が、オブジェクト群７７の他の粒子の色と異なる態様で表示される。本例では、粒子７７ｂは、オブジェクト群７７のうちの操作画面７０の上下方向における中央付近に位置する２列分の粒子により構成されている。
【０１１４】
このように、ポインティングデバイス１０（認識部１２）により認識された操作指が操作部１１上で移動した場合、オブジェクト群７７の中で、異なる表示態様（他の粒子と色が異なる態様）で表示される一部分を構成する粒子（粒子７７ａ，７７ｂ）が操作指の移動方向（下方向）に沿って移り変わっていく（図１２（ｃ）の白抜き矢印）。従って、ユーザは、オブジェクト群７７における異なる表示態様の一部分が操作指の移動方向に沿って移動しているか（移り変わっているか）否かを視認することにより、ポインティングデバイス１０による楽曲リスト７１のスクロール操作が適切に継続できるか否かを容易に判断することができる。また、ユーザは、背景として表示されるオブジェクト群の全体の中で、異なる表示態様で表示される一部分を構成する粒子の移り変わる方向を見て、ポインティングデバイス１０を用いた操作に応じて、操作画面７０上で行われているスクロールの方向を容易に把握することができる。
【０１１５】
尚、本例では、多数の粒子を上下左右に等間隔で並べて構成されるオブジェクト群７７を用いたが、例えば、オブジェクト群７７の各粒子が配置される範囲を覆う平面状のグラフィックオブジェクト（平面オブジェクト）が用いられてもよい。かかる場合、ポインティングデバイス１０（認識部１２）が操作指を認識しない状態から操作指を認識する状態に遷移すると、粒子７７ａに相当する平面オブジェクトの一部分の色が変化する。そして、ポインティングデバイス１０により認識された操作指の移動に応じて、色が異なる平面オブジェクトの一部分が粒子７７ａに相当する部分から粒子７７ｂに相当する部分に移り変わっていく。かかる変形例においても、本例と同様の作用・効果を得ることができる。
【０１１６】
また、本例では、操作画面上に平面配置されるグラフィックオブジェクト群を用いたが、背景画像７０ｂ内に仮想的な３次元空間を設定し、当該３次元空間上に配置されるグラフィックオブジェクト或いはグラフィックオブジェクト群を用いてもよい。かかる変形例においても、本例と同様の作用・効果を得ることができる。
【０１１７】
以上、本発明を実施するための形態について詳述したが、本発明はかかる特定の実施形態に限定されるものではなく、特許請求の範囲に記載された本発明の要旨の範囲内において、種々の変形・変更が可能である。
【符号の説明】
【０１１８】
１  表示装置
１０    ポインティングデバイス
１１    操作部
１２    認識部
２０    ＥＣＵ（表示制御部）
２１    状態受信部
２２    前景画像生成部
２３    背景画像生成部
２４    合成処理部
２９    記憶部
３０    ディスプレイ（表示部）
４０    操作画面
４０ａ    前景画像
４０ｂ    背景画像
４１〜４５    アイコン（複数の選択対象）
４６    カーソル
４７        グラフィックオブジェクト群（オブジェクト群）
４７ａ，４７ｂ    粒子（オブジェクト群の一部分）
５０    操作画面
５０ａ    前景画像
５０ｂ    背景画像
５１〜５５    楽曲（複数の選択対象）
５６    カーソル
５７    グラフィックオブジェクト群（オブジェクト群）
５７ａ，５７ｂ    粒子（オブジェクト群の一部分）
６０    操作画面
６１〜６７    アイコン（複数の選択対象）
６８    カーソル
６９    グラフィックオブジェクト群（オブジェクト群）
６９ａ，６９ｂ    粒子（オブジェクト群の一部分）
７０    操作画面
７０ａ    前景画像
７０ｂ    背景画像
７１    楽曲リスト
７１Ａ〜７１Ｚ    楽曲（複数の選択対象）
７６    カーソル
７７    グラフィックオブジェクト群（オブジェクト群）
７７ａ，７７ｂ    粒子（オブジェクト群の一部分）
【図１】
0006390657.tif 000002
【図２】
0006390657.tif 000003
【図３】
0006390657.tif 000004
【図４】
0006390657.tif 000005
【図５】
0006390657.tif 000006
【図６】
0006390657.tif 000007
【図７】
0006390657.tif 000008
【図８】
0006390657.tif 000009
【図９】
0006390657.tif 000010
【図１０】
0006390657.tif 000011
【図１１】
0006390657.tif 000012
【図１２】
0006390657.tif 000013