(57)【要約】【課題】操作者の視線検出に対する較正を容易に実行する。【解決手段】較正処理部２３は、操作検知部２２の検知結果、つまり車載機器１２に対する運転者による操作の有無および操作内容に応じて、予め各操作内容に応じて設定された所定の位置情報を取得し、取得した位置情報と、視線検出部２１により検出された運転者の視線に係る位置情報（例えば、視線の対象位置等）との差異が所定値未満であるか否かを判定する。この判定結果が「ＹＥＳ」の場合には、この差異に応じて眼球センサ１１の検出値を較正する。一方、この判定結果が「ＮＯ」の場合には、運転者の視線方向が車載機器１２に対する運転者による操作とは無関係であると判断して、較正の実行を禁止する。【選択図】図１
2007259931.tif 000002
【特許請求の範囲】
【請求項１】
乗員の視線を検出する視線検出手段と、
車載機器に対する乗員の操作を検出する操作検出手段と、
前記操作検出手段により検出された前記車載機器に対する乗員の操作と、前記車載機器の位置情報とに基づき前記視線検出手段による検出値を較正する較正手段と
を備えることを特徴とする視線検出装置。
【請求項２】
前記較正手段は、前記操作検出手段により検出された乗員の操作の操作対象である前記車載機器の位置情報と、前記視線検出手段による検出値に応じた位置情報との差異が所定値以上である場合には、前記検出値の較正を禁止することを特徴とする請求項１に記載の視線検出装置。
【発明の詳細な説明】
【技術分野】
【０００１】
この発明は、視線検出装置に関する。
【背景技術】
【０００２】
従来、例えば車両の運転者の網膜反射像および角膜反射像および顔面の画像に基づき、運転者の視線方向を検出する装置が知られている（例えば、特許文献１参照）。
【特許文献１】特開平８−２９７０１９号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
ところで、上記従来技術の一例に係る装置において、視線方向に対する較正を行う場合には、例えば運転者に対して、予め設定された所定位置を注視させた状態で視線方向を検出したり、例えば予め複数の人体の体型から統計的に算出した較正値によって較正を行う方法が知られている。
しかしながら、例えば運転者に対して所定位置を注視させて較正を行う場合には、較正を行うためだけの特別な入力操作や視線の移動等の動作が運転者毎に必要となり、例えば複数の運転者が交互に交代しながら運転する場合には、運転者の交代毎に較正処理が実行されることから、煩雑な手間がかかるという問題が生じる。
また、例えば統計的に算出した較正値によって較正を行う場合には、複数の運転者毎に対する誤差を低減することができないという問題が生じる。
本発明は上記事情に鑑みてなされたもので、操作者の視線検出に対する較正を容易に実行することが可能な視線検出装置を提供することを目的としている。
【課題を解決するための手段】
【０００４】
上記課題を解決して係る目的を達成するために、請求項１に記載の本発明の視線検出装置は、乗員の視線を検出する視線検出手段（例えば、実施の形態での眼球センサ１１および視線検出部２１）と、車載機器（例えば、実施の形態での車載機器１２）に対する乗員の操作を検出する操作検出手段（例えば、実施の形態での操作検知部２２）と、前記操作検出手段により検出された前記車載機器に対する乗員の操作と、前記車載機器の位置情報とに基づき前記視線検出手段による検出値を較正する較正手段（例えば、実施の形態での較正処理部２３）とを備えることを特徴としている。
【０００５】
上記の視線検出装置によれば、例えば視線検出手段の較正のために運転者による特別な操作を必要とせずに、運転者による一連の運転操作に応じて容易に、かつ効率良く、精度の良い較正を行うことができ、運転者が煩わしさを感じてしまうことを防止することができる。
【０００６】
さらに、請求項２に記載の本発明の視線検出装置は、前記較正手段は、前記操作検出手段により検出された乗員の操作の操作対象である前記車載機器の位置情報と、前記視線検出手段による検出値に応じた位置情報との差異が所定値以上である場合には、前記検出値の較正を禁止することを特徴としている。
【０００７】
上記の視線検出装置によれば、較正の処理に対する信頼性を向上させることができる。
【発明の効果】
【０００８】
以上説明したように、本発明の視線検出装置によれば、運転者による一連の運転操作に応じて容易に、かつ効率良く、精度の良い較正を行うことができ、運転者が煩わしさを感じてしまうことを防止することができる。
さらに、請求項２に記載の本発明の視線検出装置によれば、較正の処理に対する信頼性を向上させることができる。
【発明を実施するための最良の形態】
【０００９】
以下、本発明の一実施形態に係る視線検出装置について添付図面を参照しながら説明する。
本実施の形態による視線検出装置１０は、例えば図１に示すように、眼球センサ１１と、車載機器１２と、制御装置１３とを備えて構成されている。
【００１０】
眼球センサ１１は、例えば図２に示すように、車室内のルームミラーから運転者側にずれた位置等の少なくとも運転者の眼球を撮像可能な位置に設けられ、例えば可視光領域や赤外線領域にて撮像可能なＣＣＤカメラやＣＭＯＳカメラ等からなる眼球用カメラ１１ａと眼球画像処理部１１ｂとを備えて構成されている。
この眼球用カメラ１１ａは、例えば可視光領域で撮像可能であれば、乗員の顔や眼球から反射された可視光を撮像し、例えば赤外線領域で撮像可能であれば、適宜の赤外線投光器（図示略）から運転者の眼球に向けて照射された赤外線の反射を撮像する。
眼球画像処理部１１ｂは、眼球用カメラ１１ａの撮像により得られた可視光画像または赤外線画像に対して、例えばフィルタリングや二値化処理等の所定の画像処理を行い、二次元配列の画素からなる画像データを生成して制御装置１３へ出力する。
【００１１】
車載機器１２は、例えば図２に示すナビゲーション装置１２ａや電動ドアミラー１２ｂやルームミラー１２ｃ等であって、運転者による操作時に運転者の視線の対象位置が所定位置に設定される可能性が相対的に高い機器とされている。
【００１２】
制御装置１３は、例えば視線検出部２１と、操作検知部２２と、較正処理部２３とを備えて構成されている。
視線検出部２１は、眼球センサ１１から入力される画像データに対して、先ず、運転者の顔や眼球を検知対象物とした所定の認識処理を行い、この認識結果に基づき、運転者の眼球の位置および運転者の視線ベクトル（視線方向）および視線の対象位置を検出する。
【００１３】
操作検知部２２は、車載機器１２に対する運転者による操作の有無および操作内容を検知する。
較正処理部２３は、視線検出部２１により検出された運転者の視線ベクトル（視線方向）および視線の対象位置と、操作検知部２２の検知結果とに基づき、眼球センサ１１の検出値を較正する。
【００１４】
例えば、較正処理部２３は、操作検知部２２の検知結果、つまり車載機器１２に対する運転者による操作の有無および操作内容に応じて、予め各操作内容に応じて設定された所定の位置情報（例えば図２に示す、ナビゲーション装置１２ａに具備される操作ボタン等の操作部位の位置や、例えば図２に示す電動ドアミラー１２ｂやルームミラー１２ｃの位置等）を取得し、取得した位置情報と、車載機器１２に対する運転者の操作入力が検出されたタイミングで視線検出部２１により検出された運転者の視線に係る位置情報（例えば、視線の対象位置等）との差異が所定値未満であるか否かを判定する。なお、ここでは、例えば視線検出部２１により検出された視線ベクトル（視線方向）ｆ（ａ）と、予め各操作内容に応じて設定された所定の方向Ｇとの差異が所定値β未満であるか否かを判定してもよい。
そして、この判定結果が「ＹＥＳ」の場合には、この差異に応じて眼球センサ１１の検出値を較正する。
一方、この判定結果が「ＮＯ」の場合には、運転者の視線方向が車載機器１２に対する運転者による操作とは無関係であると判断して、較正の実行を禁止する。
【００１５】
例えば視線方向ｆ（ａ）と、各操作内容に応じた所定の方向Ｇとの差異（｜Ｇ−ｆ（ａ）｜）が所定値β以下である場合には、下記数式（１）に基づき、視線検出部２１の検出結果である視線方向ｆ（ａ）に対する所定のパラメータａ（例えば、眼球の半径等）が補正される。なお、下記数式（１）においては、適宜の係数αと、任意の自然数ｋと、補正前のパラメータａ（ｋ）＝ａとに基づき、補正後のパラメータａ（ｋ＋１）が算出されるようになっている。
【００１６】
【数１】
2007259931.tif 000003
【００１７】
例えば、車載機器１２として、図２に示すナビゲーション装置１２ａが設定された場合には、先ず、運転者による操作入力を検出するナビゲーション装置１２ａの各種の操作ボタン等から出力される信号が操作検知部２２により検知される。そして、較正処理部２３は、操作検知部２２の検出結果に応じて、予め設定された所定の位置情報を取得する。このナビゲーション装置１２ａに対する操作時には、運転者は、例えばナビゲーション装置１２ａの表示画面上の所定位置等を注視し続ける可能性が相対的に高いことから、精度の良い較正が可能となる。
【００１８】
また、例えば車載機器１２として、図２に示す電動ドアミラー１２ｂが設定された場合には、先ず、運転者による操作入力を検出する電動ドアミラー１２ｂの各種の操作ボタン等から出力される信号が操作検知部２２により検知される。そして、較正処理部２３は、操作検知部２２の検出結果に応じて、予め設定された所定の位置情報を取得する。これら左右の各ドアミラーの角度調整時に運転者が各ドアミラーを注視しない可能性は極めて低く、しかも、相対的に座標位置の差が大きい左右の各ドアミラーに対する２点でのデータによって精度の良い較正が可能となる。
【００１９】
また、例えば車載機器１２として、図２に示すルームミラー１２ｃが設定された場合には、先ず、予めルームミラー１２ｃに具備されて運転者による操作（例えば、ルームミラー１２ｃに対する操作指の接触や、ルームミラー１２ｃの変位等）を検出する適宜のセンサから出力される検出信号が操作検知部２２により検知される。そして、較正処理部２３は、操作検知部２２の検出結果に応じて、予め設定された所定の位置情報を取得する。このルームミラー１２ｃの角度調整時に運転者がルームミラー１２ｃを注視しない可能性は極めて低いことから、精度の良い較正が可能となる。
【００２０】
本実施の形態による視線検出装置１０は上記構成を備えており、次に、この視線検出装置１０の動作について説明する。
【００２１】
先ず、例えば図３に示すステップＳ０１においては、眼球センサ１１から出力される画像データを取得する。
次に、ステップＳ０２においては、取得した画像データに基づき、運転者の視線を検出する。
そして、ステップＳ０３においては、運転者が所定の注視対象機器、例えばナビゲーション装置１２ａや電動ドアミラー１２ｂやルームミラー１２ｃ等であって、運転者による操作時に運転者の視線の対象位置が所定位置に設定される可能性が相対的に高い機器を操作しているか否かを判定する。
この判定結果が「ＮＯ」の場合には、一連の処理を終了する。
一方、この判定結果が「ＹＥＳ」の場合には、ステップＳ０４に進む。
【００２２】
そして、ステップＳ０４においては、例えば視線検出部２１により検出された視線ベクトル（視線方向）ｆ（ａ）と、予め各操作内容に応じて設定された所定の方向Ｇとの差異が所定値β未満であるか否かを判定する。
この判定結果が「ＮＯ」の場合には、一連の処理を終了する。
一方、この判定結果が「ＹＥＳ」の場合には、ステップＳ０５に進む。
そして、ステップＳ０５においては、視線ベクトル（視線方向）ｆ（ａ）と、予め各操作内容に応じて設定された所定の方向Ｇとの差異（｜Ｇ−ｆ（ａ）｜）に応じて、例えば上記数式（１）に基づき、視線検出部２１の検出結果（例えば、視線方向ｆ（ａ））を較正し、一連の処理を終了する。
【００２３】
上述したように、本実施の形態による視線検出装置１０によれば、運転者による一連の運転操作に応じて容易に、かつ効率良く、精度の良い較正を行うことができ、運転者が煩わしさを感じてしまうことを防止することができる。さらに、較正の処理に対する信頼性を向上させることができる。
【図面の簡単な説明】
【００２４】
【図１】本発明の実施の形態に係る視線検出装置の構成図である。
【図２】図１に示す車載機器の一例を示す図である。
【図３】本発明の実施の形態に係る視線検出装置の動作を示すフローチャートである。
【符号の説明】
【００２５】
１０  視線検出装置
１１  眼球センサ（視線検出手段）
１２  車載機器
２１  視線検出部（視線検出手段）
２２  操作検知部（操作検出手段）
２３  較正処理部（較正手段）
【図１】
2007259931.tif 000004
【図２】
2007259931.tif 000005
【図３】
2007259931.tif 000006