(57)【要約】【課題】ステアリングを把持した状態で、スイッチと視線入力を組み合わせて、車両に搭載された電子機器の操作を行うことができる視線入力装置を提供する。【解決手段】この視線入力装置１は、主に、車両３の車体に設けられた表示部１６と、車体に対して回転操作されるステアリング３４に設けられ、なされた操作に基づいて操作信号を出力するスイッチ１０と、スイッチ１０を操作する操作者を撮像する撮像部としてのカメラ１２と、カメラ１２が撮像した撮像画像に基づいて操作者の視線を検出し、視線と表示部１６の画面１６０を含む平面１６１とが交わる座標を算出する視線検出部１４２と、スイッチ１０から出力された操作信号、及び視線検出部１４２により算出された座標に基づいて予め定められた処理を行う処理部１４３と、を備えて概略構成されている。【選択図】図１
2013143012.tif 000002
【特許請求の範囲】
【請求項１】
車体に設けられた表示部と、
前記車体に対して回転操作されるステアリングに設けられ、なされた操作に基づいて操作信号を出力する操作部と、
前記操作部を操作する操作者を撮像する撮像部と、
前記撮像部が撮像した撮像画像に基づいて前記操作者の視線を検出し、前記視線と前記表示部の画面を含む平面とが交わる座標を算出する視線検出部と、
前記操作部から出力された前記操作信号、及び前記視線検出部により算出された前記座標に基づいて予め定められた処理を行う処理部と、
を備えた視線入力装置。
【請求項２】
前記処理部は、前記座標が前記表示部の前記画面内に存在するときは、前記予め定められた処理として第１の処理を行い、前記画面内に存在しないときは、前記予め定められた処理として第２の処理を行う請求項１に記載の視線入力装置。
【請求項３】
前記処理部は、前記第１の処理として、前記表示部の前記画面に表示された画像のスクロール、又は前記画像の倍率の変更、を実行させる請求項２に記載の視線入力装置。
【請求項４】
前記処理部は、前記第２の処理として、前記操作部が操作された時点において操作可能な機能を一覧で表示する一覧画像を前記表示部に表示させる請求項２に記載の視線入力装置。
【請求項５】
前記処理部は、前記座標が、前記一覧画像に含まれる少なくとも１つの選択可能な画像の領域内に存在する状態で前記操作部の操作がなされると、この選択決定された選択可能な画像の階層に続く階層に属する画像を前記表示部に表示させる請求項４に記載の視線入力装置。
【請求項６】
さらに、複数の表示部を備え、
前記処理部は、前記座標が前記複数の表示部のいずれかの画面内に存在するときは対応する表示部に応じた前記予め定められた処理を行う請求項２乃至５のいずれか１項に記載の視線入力装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、視線入力装置に関する。
【背景技術】
【０００２】
従来の技術として、視線検出で一時的に操作の種類を選択しておき、実際の動作は、指示ボタンスイッチの押下げにより指示する情報端末が知られている（例えば、特許文献１参照。）。
【０００３】
この情報端末は、指示ボタンスイッチの押下げにより、実際の動作の開始、終了が指示されるので、指示操作を確実に行うことができる。
【先行技術文献】
【特許文献】
【０００４】
【特許文献１】特開平７−２４４５５６号公報
【発明の概要】
【発明が解決しようとする課題】
【０００５】
しかし、従来の情報端末は、車両に搭載された場合、情報端末の本体に指示ボタンスイッチが配置されているため、操作者は、ステアリングから手を離して操作しなければならず、また、視線が一時的に指示ボタンスイッチ方向に移動するため、視線の測定に外乱が生じ、正確な視線の算出に支障が出る可能性があり、車載用途には不向きである。
【０００６】
従って、本発明の目的は、ステアリングを把持した状態で、スイッチと視線入力を組み合わせて、車両に搭載された電子機器の操作を行うことができる視線入力装置を提供することにある。
【課題を解決するための手段】
【０００７】
本発明の一態様は、車体に設けられた表示部と、車体に対して回転操作されるステアリングに設けられ、なされた操作に基づいて操作信号を出力する操作部と、操作部を操作する操作者を撮像する撮像部と、撮像部が撮像した撮像画像に基づいて操作者の視線を検出し、視線と表示部の画面を含む平面とが交わる座標を算出する視線検出部と、操作部から出力された操作信号、及び視線検出部により算出された座標に基づいて予め定められた処理を行う処理部と、を備えた視線入力装置を提供する。
【発明の効果】
【０００８】
本発明によれば、ステアリングを把持した状態で、スイッチと視線入力を組み合わせて、車両に搭載された電子機器の操作を行うことができる。
【図面の簡単な説明】
【０００９】
【図１】図１（ａ）は、第１の実施の形態に係る視線入力装置が搭載された車両内部の概略図であり、（ｂ）は、視線入力装置のブロック図である。
【図２】図２（ａ）は、第１の実施の形態に係る操作者の目の検出を説明するための眼球周りの模式図であり、（ｂ）は、検出点を算出するためのシステムを説明するための模式図である。
【図３】図３（ａ）〜（ｄ）は、第１の実施の形態に係る視線入力装置の第１の処理を説明するための概略図である。
【図４】図４（ａ）〜（ｃ）は、第１の実施の形態に係る視線入力装置の第２の処理を説明するための概略図である。
【図５】図５は、第１の実施の形態に係る視線入力装置の動作を説明するためのフローチャートである。
【図６】図６は、第１の実施の形態に係る視線入力装置の第１の処理を説明するためのフローチャートである。
【図７】図７は、第１の実施の形態に係る視線入力装置の第２の処理を説明するためのフローチャートである。
【発明を実施するための形態】
【００１０】
（実施の形態の要約）
実施の形態に係る視線入力装置は、車体に設けられた表示部と、車体に対して回転操作されるステアリングに設けられ、なされた操作に基づいて操作信号を出力する操作部と、操作部を操作する操作者を撮像する撮像部と、撮像部が撮像した撮像画像に基づいて操作者の視線を検出し、視線と表示部の画面を含む平面とが交わる座標を算出する視線検出部と、操作部から出力された操作信号、及び視線検出部により算出された座標に基づいて予め定められた処理を行う処理部と、を備える。
【００１１】
[第１の実施の形態]
（視線入力装置１の構成）
図１（ａ）は、第１の実施の形態に係る視線入力装置が搭載された車両内部の概略図であり、（ｂ）は、視線入力装置のブロック図である。なお、以下の各実施の形態に係る各図において、部品と部品との比率は、実際の比率とは異なる場合がある。
【００１２】
本実施の形態に係る視線入力装置１は、例えば、車両３に搭載された電子機器に電気的に接続されている。この視線入力装置１は、例えば、操作者の視線と、スイッチ１０の操作と、を組み合わせることにより、表示部１６に表示された画像のスクロール、表示された画像の倍率の変更、及び操作可能な機能の一覧の表示等の予め定められた処理を実行するものである。
【００１３】
視線入力装置１は、主に、車両３の車体に設けられた表示部１６と、車体に対して回転操作されるステアリング３４に設けられ、なされた操作に基づいて操作信号を出力する操作部としてのスイッチ１０と、スイッチ１０を操作する操作者を撮像する撮像部としてのカメラ１２と、カメラ１２が撮像した撮像画像に基づいて操作者の視線を検出し、視線と表示部１６の画面１６０を含む平面１６１とが交わる座標を算出する視線検出部１４２と、スイッチ１０から出力された操作信号、及び視線検出部１４２により算出された座標に基づいて予め定められた処理を行う処理部１４３と、を備えて概略構成されている。
【００１４】
また、視線入力装置１は、例えば、ＥＣＵ（Electronic Control Unit）１４と、メモリ１８と、通信部２０と、を備えている。
【００１５】
（スイッチ１０の構成）
スイッチ１０は、例えば、図１（ａ）に示すように、操作者がステアリング３４を把持した状態で操作可能なステアリング３４の裏側に設けられる。このスイッチ１０は、例えば、押し込むことでオン、オフを示す操作信号を出力するように構成された周知のボタンスイッチである。
【００１６】
（カメラ１２の構成）
カメラ１２は、例えば、ＣＣＤイメージセンサ（Charge Coupled Device）、ＣＭＯＳ（Complementary Metal Oxide Semiconductor）イメージセンサ等の半導体素子を用いた撮像装置である。
【００１７】
このカメラ１２は、例えば、図１（ａ）に示すように、車両３のステアリングシャフトを覆うコラムカバー３２に設置される。具体的には、カメラ１２は、コラムカバー３２の上部で、ステアリング３４のリングの間から操作者の顔が撮像可能な位置に配置される。また、このカメラ１２は、例えば、近赤外線を操作者の顔に照射して撮像するように構成されている。
【００１８】
（ＥＣＵ１４の構成）
ＥＣＵ１４は、例えば、記憶されたプログラムに従って、取得したデータに演算、加工等を行うＣＰＵ（Central Processing Unit）、半導体メモリであるＲＡＭ（Random Access Memory）及びＲＯＭ（Read Only Memory）等から構成されるマイクロコンピュータである。このＲＯＭには、例えば、視線検出部１４２及び処理部１４３等が動作するためのプログラムが格納されている。また、ＲＡＭは、例えば、一時的に演算結果等を格納する記憶領域として用いられる。なお、ＲＡＭは、例えば、メモリ１８として用いられても良い。
【００１９】
このＥＣＵ１４は、例えば、図１（ｂ）に示すように、制御部１４０と、表示制御部１４１と、視線検出部１４２と、処理部１４３と、を備えて概略構成されている。
【００２０】
制御部１４０は、例えば、視線入力装置１の各部の動作を制御するものである。表示制御部１４１は、例えば、表示部１６を制御するものである。また、制御部１４０は、例えば、操作信号に基づいて操作情報を生成し、生成された操作情報を、通信部２０を介して接続された電子機器に送信する。なお、視線検出部１４２及び処理部１４３については、後述する。
【００２１】
（表示部１６の構成）
表示部１６は、例えば、図１（ａ）に示すように、運転席と助手席の間のインストルメントパネル３０に配置されている。
【００２２】
この表示部１６は、例えば、ＴＦＴ（Thin Film Transistor）等の液晶ディスプレイを用いて構成されている。
【００２３】
また、車両３は、例えば、図１（ａ）に示すように、メータパネルに配置されたサブディスプレイ１６ａと、フロントガラスに投影されるヘッドアップディスプレイ１６ｂと、を備えている。表示部１６は、例えば、これらのディスプレイであっても良く、配置及び形状等には限定されない。
【００２４】
（メモリ１８の構成）
メモリ１８は、例えば、半導体メモリであり、表示部１６に表示させる第１の画像情報１８０、及び第２の画像情報１８１を格納している。
【００２５】
（通信部２０の構成）
通信部２０は、例えば、車両３に搭載された電子機器と電気的に接続されている。また、通信部２０は、例えば、第１の画像情報１８０、及び第２の画像情報１８１等の画像情報を電気的に接続された電子機器から取得する。この第１の画像情報１８０は、例えば、表示部１６に表示させる画像の情報であり、異なる階層の画像情報を含んでいる。ここで、階層とは、例えば、最初に表示部１６に表示されたメニューを選択すると、選択されたメニューの中にさらにメニューがあるような状態を示している。
【００２６】
また、通信部２０は、例えば、車両のＥＣＵから車両３の走行状態を示す走行情報を取得するように構成されている。処理部１４３は、例えば、この走行情報に基づいて車両３が走行中であるのか否かを判断する。つまり、処理部１４３は、例えば、走行情報に基づいて車両３が走行中で、検出点の座標が画面１６０内に存在しない状態でスイッチ１０が操作されると、走行中に操作可能な機能の一覧を表示部１６に表示させるように構成されている。
【００２７】
（視線検出部１４２の構成）
図２（ａ）は、第１の実施の形態に係る操作者の目の検出を説明するための眼球周りの模式図であり、（ｂ）は、検出点を算出するためのシステムを説明するための模式図である。本実施の形態に係る視線検出の方法は、一例として、プルキニエ像４２を用いた周知の方法を用いる。
【００２８】
視線検出部１４２は、例えば、近赤外線を眼球４に照射し、角膜表面での反射光（プルキニエ像４２）及び瞳孔４０の位置から視線４４と表示部１６の画面１６０を含む平面１６１との交点である検出点を算出するように構成されている。なお、この平面１６１の面積は、例えば、視線検出部１４２の処理速度が著しく低下しない程度に設定されることが好ましい。
【００２９】
具体的には、視線検出部１４２は、取り込んだ画像１２０を類似輝度の領域別にセグメント化し、セグメント化された各領域の中から瞳孔領域を領域形状からパターンマッチング法等を用いて決定する。
【００３０】
次に、視線検出部１４２は、瞳孔の輪郭集合に対して誤差二乗和最小による楕円近似を行って楕円中心を求める。
【００３１】
次に、視線検出部１４２は、求めた楕円中心から一定範囲内を対象としてプルキニエ像４２の検出を行う。このプルキニエ像４２の中心座標は、得られた領域の重心である。
【００３２】
次に、視線検出部１４２は、得られた瞳孔４０及びプルキニエ像４２から視線４４の算出を行う。以下では、この算出について説明する。
【００３３】
図２（ｂ）に示す画像座標系（ＸｂＹｂ座標系）における座標は、例えば、世界座標系（ＸＹＺ系座標）のＺ座標が既知であるとき、画像座標系の座標を世界座標系の座標に変換することが可能となる。また、カメラ座標系（ｘａｙａｚａ座標系）における角膜曲率中心をプルキニエ像４２から求める。そして、視線検出部１４２は、カメラ座標系における角膜曲率中心と瞳孔中心の座標を算出し、各座標を世界座標系の座標に座標変換して世界座標系における視線ベクトルを求める。視線検出部１４２は、この視線ベクトルを平面１６１に射影することで、平面１６１上の検出点の座標を求めている。なお、視線検出の方法は、上記の例に限定されず、目の位置や顔の回転角度等から検出点を算出する方法等の周知の方法が適用可能である。
【００３４】
（処理部１４３の構成）
図３（ａ）〜（ｄ）は、第１の実施の形態に係る視線入力装置の第１の処理を説明するための概略図である。図４（ａ）〜（ｃ）は、第１の実施の形態に係る視線入力装置の第２の処理を説明するための概略図である。
【００３５】
処理部１４３は、例えば、スイッチ１０から出力された操作信号、及び視線検出部１４２により算出された座標に基づいて、座標が表示部１６の画面１６０内に存在するときは第１の処理を行い、画面１６０内に存在しないときは第２の処理を行うように構成されている。
【００３６】
この第１の処理とは、検出点の座標が画面１６０内に存在するとき、一例として、その検出点の座標に基づいて、車両３に搭載されたカーナビゲーション装置から出力された画像情報に応じた地図画像のスクロール、又はその地図画像の倍率を変更する処理である。また、第２の処理とは、検出点の座標が画面１６０内に存在しないとき、一例として、その時点において操作可能な機能を一覧で表示する処理である。以下では、まず、第１の処理について説明する。
【００３７】
処理部１４３は、一例として、図３（ａ）に示すように、画面１６０を９つの領域Ａ〜領域Ｉに分割する。処理部１４３は、検出点、言い換えるなら、検出点の座標に応じて表示されるポインタ１６２が存在する領域に応じて処理を判定するように構成されている。
【００３８】
具体的には、領域Ａにポインタ１６２が存在し、スイッチ１０が操作されたとき、例えば、図３（ａ）に示す矢印Ａ方向に地図画像が移動する。領域Ｂにポインタ１６２が存在し、スイッチ１０が操作されたとき、例えば、図３（ａ）に示す矢印Ｂ方向に地図画像が移動する。領域Ｃにポインタ１６２が存在し、スイッチ１０が操作されたとき、例えば、図３（ａ）に示す矢印Ｃ方向に地図画像が移動する。領域Ｄにポインタ１６２が存在し、スイッチ１０が操作されたとき、例えば、図３（ａ）に示す矢印Ｄ方向に地図画像が移動する。領域Ｅにポインタ１６２が存在し、スイッチ１０が操作されたとき、例えば、図３（ａ）に示す矢印Ｅ方向に地図画像が移動する。領域Ｆにポインタ１６２が存在し、スイッチ１０が操作されたとき、例えば、図３（ａ）に示す矢印Ｆ方向に地図画像が移動する。領域Ｇにポインタ１６２が存在し、スイッチ１０が操作されたとき、例えば、図３（ａ）に示す矢印Ｇ方向に地図画像が移動する。領域Ｈにポインタ１６２が存在し、スイッチ１０が操作されたとき、例えば、図３（ａ）に示す矢印Ｈ方向に地図画像が移動する。
【００３９】
ここで、領域Ｉにポインタ１６２が存在し、スイッチ１０が操作されたときは、一例として、地図画像の倍率の変更の処理が行われる。具体的には、例えば、領域Ｉにポインタ１６２が存在するとき、スイッチ１０が長押しされると、操作が継続している間、地図画像は拡大され続け、スイッチ１０がダブルクリックされた後に長押しされると、操作が継続している間、地図画像は縮小され続ける。なお、長押しとは、例えば、スイッチ１０を予め定められた時間以上押し続ける操作である。また、ダブルクリックとは、例えば、スイッチ１０を予め定められた間隔よりも短い間隔で２回操作することである。続いて、以下では、第２の処理について説明する。
【００４０】
具体的には、処理部１４３は、例えば、第２の処理として、画面１６０内に検出点の座標が存在しない状態でスイッチ１０が操作されたことを示す操作信号を取得すると、メモリ１８に格納された第２の画像情報１８１を取得し、表示部１６に表示させるように構成されている。この第２の画像情報１８１は、一例として、走行中であっても操作可能な機能の情報等を含んで構成されている。
【００４１】
表示制御部１４１は、例えば、図４（ａ）に示すように、この第１の画像情報１８０に基づいて一覧画像である第１の画像１６３を表示部１６に表示させる。この第１の画像１６３は、一例として、図４（ａ）に示すように、選択可能な画像であるアイコン１６０ａ〜アイコン１６０ｄを含んで構成されている。このアイコン１６０ａ〜アイコン１６０ｄは、一例として、運転中の操作者に許可されている機能を示す第１の階層に属している。また、アイコン１６０ｂが選択されることにより続いて表示される第２の画像１６４は、例えば、第１の階層の次の階層である第２の階層に属するアイコン１６０ｅ及びアイコン１６０ｆを含んで構成されている。なお、選択決定とは、例えば、ポインタ１６２を画像の領域内に移動させた後、スイッチ１０を操作する動作を示している。なお、以下では、選択決定されたアイコン１６０ｂの階層が第２の画像１６４として表示されているが、他のアイコンのそれぞれにも階層が存在しても良い。
【００４２】
以下に、本実施の形態に関する動作を、各図を参照しながら図５〜図７に示すフローチャートに従って説明する。
【００４３】
（動作）
視線入力装置１のカメラ１２は、電源が投入されると、所定の周期で操作者の顔を撮像する（Ｓ１）。この所定の周期は、例えば、視線入力装置１に入力するクロック信号の周期に基づいている。
【００４４】
次に、視線検出部１４２は、カメラ１２から取得した画像情報に基づいて検出点の座標を算出する（Ｓ２）。
【００４５】
次に、処理部１４３は、検出点の座標が画面１６０内に存在するか否か判定する。処理部１４３が、検出点の座標が画面１６０内に存在すると判定すると（Ｓ３：Ｙｅｓ）、制御部１４０は、図３（ａ）に示すように、表示制御部１４１を制御してポインタ１６２を画面１６０に表示させる（Ｓ４）。
【００４６】
次に、処理部１４３は、スイッチ１０の操作が行われたとき（Ｓ５：Ｙｅｓ）、第１の処理を行う（Ｓ６）。
【００４７】
ここで、ステップ３において、処理部１４３は、検出点の座標が画面１６０内に存在しないと判定した後（Ｓ３：Ｎｏ）、スイッチ１０の操作が行われると（Ｓ７：Ｙｅｓ）、第２の処理を行う（Ｓ８）。
【００４８】
また、ステップ５において、処理部１４３は、スイッチ１０の操作が行われないとき（Ｓ５：Ｎｏ）、動作をステップ１に戻す。このステップ１からステップ５までの動作が繰り返し行われることで、検出点の座標が画面１６０内にある限り、ポインタ１６２が、検出点の座標に基づいて移動するように見える。図３（ｂ）では、領域Ｇに存在したポインタ１６２が、視線の移動に伴って領域Ａに移動した様子を図示している。
【００４９】
また、ステップ７において、処理部１４３は、スイッチ１０の操作が行われないとき（Ｓ７：Ｎｏ）、動作をステップ１に戻す。続いて、以下では、図６のフローチャートに従いながら第１の処理について説明する。
【００５０】
処理部１４３は、スイッチ１０が操作された時点で、ポインタ１６２が領域Ｉ以外の領域に存在するとき（Ｓ９：Ｙｅｓ）、操作が継続している間、ポインタ１６２の位置に応じて地図画像をスクロールし（Ｓ１０）、第１の処理を終了する。図３（ｃ）に示すポインタ１６２は、領域Ａに存在するので、処理部１４３は、図３（ｃ）及び（ｄ）に示すように、矢印Ａ方向に地図画像をスクロールする。
【００５１】
また、処理部１４３は、スイッチ１０が操作された時点で、ポインタ１６２が領域Ｉに存在するとき（Ｓ９：Ｎｏ）、スイッチ１０の操作の種類に基づいて地図画像の拡大又は縮小を行って（Ｓ１１）、第１の処理を終了する。このスイッチ１０の操作の種類とは、一例として、上述の長押しする操作と、ダブルクリックの後に長押しする操作である。
【００５２】
ここで、地図画像の倍率の変更は、地図画像の中央に位置する領域Ｉにポインタ１６２が存在するときであったが、これに限定されず、例えば、スイッチ１０の操作の種類によって、スクロールと倍率の変更を切り替えても良い。一例として、視線入力装置１は、スイッチ１０が長押しされたときは、スクロールを行い、ダブルクリックされたときは、ポインタ１６２が存在する領域を中心として拡大又は縮小が行われるように構成されても良い。
【００５３】
続いて、以下では、図７のフローチャートに従いながら第２の処理について説明する。なお、以下では、操作可能な機能の一覧に関する第１の階層及び第２の階層までの表示について説明するが、階層は用途に応じてさらに複数でも良い。また、以下では、車両３が走行中であるときの第２の処理について説明する。従って、処理部１４３は、例えば、走行情報に基づいて走行中であると判断しているものとする。
【００５４】
ステップ１２において、処理部１４３は、メモリ１８から第２の画像情報１８１を取得して、表示制御部１４１を介して表示部１６に第１の階層に応じた第１の画像１６３を表示させる（Ｓ１２）。
【００５５】
ここで、この第１の画像１６３は、例えば、図４（ａ）に示すように、アイコン１６０ａ〜アイコン１６０ｄを含む第２の画像情報１８１に基づいて表示される第１の階層の画像である。
【００５６】
次に、視線検出部１４２は、カメラ１２から取得した画像情報に基づいて検出点の座標を算出する（Ｓ１３）。
【００５７】
次に、処理部１４３が、表示部１６の画面１６０内に検出点の座標が存在すると判定すると（Ｓ１４：Ｙｅｓ）、制御部１４０は、図４（ｂ）に示すように、表示制御部１４１を制御して表示部１６にポインタ１６２を表示させる（Ｓ１５）。
【００５８】
次に、処理部１４３は、視線４４の移動に伴って移動したポインタ１６２がアイコン１６０ｂを選択し、さらに、スイッチ１０が操作されたとき（Ｓ１６：Ｙｅｓ）、ポインタ１６２が選択していたアイコン１６０ｂの下の階層、すなわち、図４（ｃ）に示す第２の階層の第２の画像１６４を、表示制御部１４１を介して表示部１６に表示させ（Ｓ１７）、第２の処理を終了する。操作者が、さらに、下の階層を表示させたい場合は、アイコン１６０ｅ又はアイコン１６０ｆを選択決定することにより表示部１６に表示させることができる。
【００５９】
ここで、ステップ１４において、処理部１４３が、表示部１６の画面１６０内に検出点の座標が存在しないと判定すると（Ｓ１４：Ｎｏ）、ステップ１３に戻る。
【００６０】
また、ステップ１６において、処理部１４３は、アイコンの選択決定が行われなかったとき（Ｓ１６：Ｎｏ）、ステップ１３に戻る。このステップ１３からステップ１６までの動作が繰り返し行われることで、検出点の座標が画面１６０内にある限り、ポインタ１６２が、検出点の座標に基づいて移動するように見える。
【００６１】
（第１の実施の形態の効果）
本実施の形態に係る視線入力装置１は、スイッチ１０と視線入力とを組み合わせることにより、地図画像のスクロール、及び地図画像の倍率の変更等の予め定められた処理を容易に行うことができ、操作性が向上する。
【００６２】
また、視線入力装置１は、ステアリング３４を把持した状態で、スイッチ１０と視線入力を組み合わせて、車両３に搭載された電子機器の操作を行うことができる。具体的には、スイッチ１０が車体側にある場合、運転者は、ステアリング３４から手を離してスイッチ１０を操作しなければならない。しかし、本実施の形態に係る視線入力装置１のスイッチ１０は、ステアリング３４に配置されているので、ステアリング３４を把持した状態で操作が可能なので操作負荷が低減され、また、スイッチ１０を探すための視線移動が無いため、視線４４の測定が正確に行われ、精度良く検出点の算出を行うことができる。
【００６３】
また、視線入力装置１は、スイッチ１０がステアリング３４の裏側に配置されているので、操作者がステアリング３４を把持した状態で容易に操作可能である。ステアリング３４の表側に配置されたスイッチは、例えば、誤操作を防止する観点から、ステアリング３４を把持した状態では操作しにくい位置に配置される。本実施の形態に係る視線入力装置１は、視線入力との組み合わせにより、電子機器の操作を行うため、単独でスイッチ１０が操作されたとしても表示部１６を見ていないとスクロールが実行されないので、誤操作が防止される。従って、視線入力装置１は、操作し易い位置にスイッチ１０が配置されている。さらに、スイッチ１０は、ステアリング３４の裏側に配置されるので、ステアリング３４に搭載されている既存のスイッチの機能や配置に影響を与えることがない。
【００６４】
また、スイッチ１０は、車両３の車体側に設けられた場合、操作者は、一時的にでもステアリング３４から手を離してスイッチ１０を操作しなければならず、また、車体側に設けられたスイッチ１０に一時的に視線が移動するので、視線の測定に影響がある。
【００６５】
しかし、本実施の形態に係るスイッチ１０は、容易に操作が可能なステアリング３４に設けられているので、ステアリング３４から手を離す必要がなく、また、スイッチ１０に視線を移動する必要がないので、視線の測定を安定して行うことができる。従って、視線入力装置１は、視線の測定が安定しているので、正確な視線の検出を行うことができる。
【００６６】
また、視線入力装置１は、スイッチ１０が操作された時点において操作可能な機能の一覧が表示部１６に表示されるので、１つ階層を飛ばして操作することができる。つまり、車両３が走行している場合、運転者に許可されない機能がある。従来、運転者が許可されている機能を知るためには、機能の一覧を表示させる必要があった。しかし、本実施の形態では、スイッチ１０の操作、及び走行情報により、運転中に許可されている機能の一覧が表示されるので、１つ階層を飛ばして操作することができ、操作負荷が低減される。
【００６７】
また、スイッチ１０の操作により、機能の一覧を表示することができ、また、スイッチ１０と組み合わせた視線入力を行うことができることで、操作負荷が低減されるので、運転中に許可される機能を増やすことが可能となる。
【００６８】
［第２の実施の形態］
第２の実施の形態は、表示部が複数存在する点で、第１の実施の形態と異なっている。なお、以下の実施の形態において、第１の実施の形態と同じ機能及び構成を有する部分については、第１の実施の形態と同じ符号を付し、その説明は省略するものとする。
【００６９】
本実施の形態に係る視線入力装置１は、例えば、複数の表示部を備え、座標が複数の表示部のいずれかの画面内に存在するときは対応する表示部に応じた予め定められた処理を行うように構成されている。
【００７０】
この複数の表示部とは、例えば、図１（ａ）に示すように、表示部１６、サブディスプレイ１６ａ及びヘッドアップディスプレイ１６ｂである。
【００７１】
また、視線入力装置１は、例えば、検出点の座標がいずれの表示部の画面内に存在しない状態で、スイッチ１０が操作されたとき、それぞれの表示部に、その表示部が接続された電子機器の走行中に許可された機能の一覧を表示するように構成しても良い。
【００７２】
（第２の実施の形態の効果）
本実施の形態に係る視線入力装置１は、ステアリング３４を把持した状態で、スイッチ１０と視線入力を組み合わせて、車両３に搭載された複数の電子機器の操作を行うことができる。
【００７３】
つまり、例えば、表示部が１つであるとき、複数の電子機器を操作するため、表示を切り替える必要がある。しかし、本実施の形態に係る視線入力装置１は、複数の表示部を備えているので、表示を切り替えることなく、複数の電子機器の操作を行うことができる。
【００７４】
なお、上記の各実施の形態に係る変形例として、視線入力装置１は、スイッチ１０の操作により、操作者のお気に入りの機能を表示させる構成としても良い。
【００７５】
また、上記の各実施の形態に係る変形例として、操作される電子機器がオーディオ装置である場合、ステアリング３４に搭載されたオーディオ装置用のスイッチを、スイッチ１０として用いることが可能である。
【００７６】
以上、本発明のいくつかの実施の形態及び変形例を説明したが、これらの実施の形態及び変形例は、一例に過ぎず、特許請求の範囲に係る発明を限定するものではない。これら新規な実施の形態及び変形例は、その他の様々な形態で実施されることが可能であり、本発明の要旨を逸脱しない範囲で、種々の省略、置き換え、変更等を行うことができる。また、これら実施の形態及び変形例の中で説明した特徴の組合せの全てが発明の課題を解決するための手段に必須であるとは限らない。さらに、これら実施の形態及び変形例は、発明の範囲及び要旨に含まれるとともに、特許請求の範囲に記載された発明とその均等の範囲に含まれる。
【符号の説明】
【００７７】
１…視線入力装置
３…車両
４…眼球
１０…スイッチ
１２…カメラ
１６…表示部
１６ａ…サブディスプレイ
１６ｂ…ヘッドアップディスプレイ
１８…メモリ
２０…通信部
３０…インストルメントパネル
３２…コラムカバー
３４…ステアリング
４０…瞳孔
４２…プルキニエ像
４４…視線
１２０…画像
１４０…制御部
１４１…表示制御部
１４２…視線検出部
１４３…処理部
１６０…画面
１６０ａ〜１６０ｆ…アイコン
１６１…平面
１６２…ポインタ
１６３…第１の画像
１６４…第２の画像
１８０…第１の画像情報
１８１…第２の画像情報
【図１】
2013143012.tif 000003
【図２】
2013143012.tif 000004
【図３】
2013143012.tif 000005
【図４】
2013143012.tif 000006
【図５】
2013143012.tif 000007
【図６】
2013143012.tif 000008
【図７】
2013143012.tif 000009