(57)【要約】【課題】視認した対象物に関する情報を車両の乗員に提供することができる情報提供装置等を提供すること。【解決手段】本発明の情報提供装置は、車両の乗員の視線を検出する視線検出手段３８と、前記検出された視線に基づいて、前記車両の乗員が視認している視認対象物を特定する視認物特定手段４０と、前記視認対象物に関する情報を取得し、前記乗員からの要求に応じて、前記視認対象物に関する情報を音声または表示によって前記乗員に提供する情報提供手段４０とを備えている。【選択図】　　　図１
2004061259.tif 000002
【特許請求の範囲】
【請求項１】
車両の乗員の視線を検出する視線検出手段と、
前記検出された視線に基づいて、前記車両の乗員が視認している視認対象物を特定する視認物特定手段と、
前記視認対象物に関する情報を取得し、前記乗員からの要求に応じて、前記視認対象物に関する情報を音声または表示によって前記乗員に提供する情報提供手段と、
を備えていることを特徴とする情報提供装置。
【請求項２】
前記乗員からの要求を受け付ける視認対象物特定スイッチを、備えている、
請求項１に記載の情報提供装置。
【請求項３】
前記視認対象物特定スイッチが音声により作動させられる、
請求項２に記載の情報提供装置。
【請求項４】
前記情報提供手段が、前記車両が所定状態で、前記情報の提供を行う、
請求項１ないし３のいずれか１項に記載の情報提供装置。
【請求項５】
前記情報提供手段が、前記車両の直進時または停車時にのみ、前記情報の提供を行う、
請求項１ないし３のいずれか１項に記載の情報提供装置。
【請求項６】
前記視認対象物が標識であると特定されたときには、前記情報提供手段は、該標識に関する情報を拡大表示によって提供する、
請求項１ないし５のいずれか１項に記載の情報提供装置。
【請求項７】
前記視認対象物が信号であると特定されたときには、前記情報提供手段は、該信号に関する情報を拡大表示によって提供する、
請求項１ないし６のいずれか１項に記載の情報提供装置。
【請求項８】
前記視認対象物が車両に取付けられたミラーであると特定されたときには、前記情報提供手段は、前記車両の後方の画像を提供する、
請求項１ないし７のいずれか１項に記載の情報提供装置。
【請求項９】
前記視認対象物に関する情報の表示が、通常の表示に優先して実行される、
請求項１ないし８のいずれか１項に記載の情報提供装置。
【請求項１０】
前記視認対象物が車載機器であるときには、前記情報提供手段は、該機器の操作を音声入力モードに切り替える、
請求項１ないし９のいずれか１項に記載の情報提供装置。
【請求項１１】
車両の乗員の視線を検出し、
前記検出された視線に基づいて、前記車両の乗員が視認している視認対象物を特定し、
前記視認対象物に関する情報を取得して、前記乗員からの要求に応じて、前記視認対象物に関する情報を音声または表示によって提供する、
ことを特徴とする情報提供方法。
【請求項１２】
車両の乗員の視線を検出し、
前記検出された視線に基づいて、前記車両の乗員が視認している視認対象物を特定し、
前記視認対象物に関する情報を取得して、前記乗員からの要求に応じて、前記視認対象物に関する情報を音声または表示によって提供するようにコンピュータを作動させる、
ことを特徴とする情報提供用プログラム。
【発明の詳細な説明】
【０００１】
【発明の属する技術分野】
本発明は、情報提供装置、情報提供方法、及び、情報提供用プログラムに関し、詳細には、乗員の視線に基づいて情報提供が行われる情報提供装置、情報提供方法、及び、情報提供用プログラムに関する。
【０００２】
【従来の技術】
走行中の車両の乗員は、車外に見える標識等からの情報を、視認によって得ていた。
【０００３】
一方、従来から、車両の運転席前方に取り付けられたカメラ（アイカメラ）を用いて運転者の視線を検出し、この検出された視線を用いてエアコンのスイッチ類を操作したり（特開平６−２６１８６３号公報）、運転者の視認行動に応じて前照灯の照射方向やメータディスプレイの明るさを調整したり（特開平９−７６８１５号公報）、運転者の視線方向によりドライバの運転操作に対する集中度合いを推定する（特開２０００−２１１５４３号公報）装置が提案されている。
【０００４】
【発明が解決しようとする課題】
しかしながら、上述したような視認による情報の取得は肉眼に依存するため、対象物が遠方にある場合等には、情報を得ることが困難な場合がある。さらに、通常は、走行中の車両から対象物を視認することになるため、情報を確実に取得することが困難な場合がある。従って、車外の対象物に関する情報を車両の乗員に確実に提供することができる情報提供装置が求められていた。
【０００５】
本発明者らは、このような要望を満たすような情報提供装置を開発するために、上述した運転者の視線方向や視認行動を検出する技術を適用することを試みた。
【０００６】
このように、本発明は、上述した課題を解決するためになされたものであり、視認した対象物に関する情報を車両の乗員に提供することができる情報提供装置、情報提供方法及び情報提供用プログラムを提供することを目的としている。
【０００７】
【課題を解決するための手段】
本発明によれば、車両の乗員の視線を検出する視線検出手段と、前記検出された視線に基づいて、前記車両の乗員が視認している視認対象物を特定する視認物特定手段と、前記視認対象物に関する情報を取得し、前記乗員からの要求に応じて、前記視認対象物に関する情報を音声または表示によって前記乗員に提供する情報提供手段と、を備えていることを特徴とする情報提供装置が提供される。
【０００８】
このような構成を備えた本発明によれば、乗員からの要求に応じて、乗員が視認した対象物に関する情報が提供されるので、乗員は視認では確実に取得することができない対象物に関する情報を得ることができる。
【０００９】
本発明の好ましい態様によれば、前記乗員からの要求を受け付ける視認対象物特定スイッチを、備えている。本発明の他の好ましい態様によれば、前記視認対象物特定スイッチが音声により作動させられる。
【００１０】
本発明の他の好ましい態様によれば、前記情報提供手段が、前記車両が所定状態で、前記情報の提供を行う。このような構成によれば、例えば、情報提供に適していない運転状況下では、情報の提供を停止させることができる。
【００１１】
本発明の他の好ましい態様によれば、前記情報提供手段が、前記車両の直進時または停車時にのみ、前記情報の提供を行う。
【００１２】
本発明の別の好ましい態様によれば、前記視認対象物が標識であると特定されたときには、前記情報提供手段は、該標識に関する情報を拡大表示によって提供する。このような構成によれば、標識自体または標識の表示内容を拡大表示することにより、標識の内容が確実に乗員に伝達される。
【００１３】
本発明の別の好ましい態様によれば、前記視認対象物が信号であると特定されたときには、前記情報提供手段は、該信号に関する情報を拡大表示によって提供する。このような構成によれば、信号自体等を拡大表示することにより、信号による表示内容が確実に乗員に伝達される。
【００１４】
本発明の別の好ましい態様によれば、前記視認対象物が車両に取付けられたミラーであると特定されたときには、前記情報提供手段は、前記車両の後方の画像を提供する。このような構成によれば、乗員がルームミラー等によって車両の後方の情報を得ようとしているときに、車載カメラ等による車両後方の画像が提供されるので、車両運行の安全性が向上する。
【００１５】
本発明の別の好ましい態様によれば、前記視認対象物に関する情報の表示が、通常の表示に優先して実行される。本発明の他の好ましい態様によれば、前記視認対象物が車載機器であるときには、前記情報提供手段は、該機器の操作を音声入力モードに切り替える。
【００１６】
本発明の別の態様によれば、車両の乗員の視線を検出し、前記検出された視線に基づいて、前記車両の乗員が視認している視認対象物を特定し、前記視認対象物に関する情報を取得して、前記乗員からの要求に応じて、前記視認対象物に関する情報を音声または表示によって提供することを特徴とする情報提供方法が提供される。
【００１７】
本発明の更に別の態様によれば、車両の乗員に情報を提供する情報提供用プログラムであって、車両の乗員の視線を検出し、前記検出された視線に基づいて、前記車両の乗員が視認している視認対象物を特定し、　前記視認対象物に関する情報を取得して、前記乗員からの要求に応じて、前記視認対象物に関する情報を音声または表示によって提供するようにコンピュータを作動させる、ことを特徴とする情報提供用プログラムが提供される。
【００１８】
【発明の実施の形態】
以下、本発明の実施形態を添付図面を参照して説明する。図１は本発明の情報提供装置の一実施形態である経緯路誘導装置を示す基本構成図である。
【００１９】
図１において、符号１は、車両用の経路誘導装置（ナビゲーション装置）を示している。車両の外部に、情報センタ２が設けられており、この情報センタ２は、ホストコンピュータ４と、地図情報等を格納する地図情報等データベース６と、各種コンテンツが格納された各種コンテンツデータベース８とを備えている。地図情報には、道路に関する道路データ、道路上の道路標識等の表示内容などに関する標識データ、道路周辺の建物などに関する建物データ等が含まれている。
【００２０】
経路誘導装置１は、各地域に設置された通信局１０を経由して、インターネット１２に接続可能であり、地図情報を含む種々の情報を情報センタ２から受信できるように構成されている。
【００２１】
なお、経路誘導装置１は、経路誘導のための地図情報を格納したＤＶＤ−ＲＯＭを備えているため、情報センタ２から地図情報を受信しない場合でも、経路誘導や建物に関する情報提供を行なうことができる。情報センタ２から地図情報を受信した場合には、最新の地図情報に基づいて、より正確な経路誘導等が可能となる。
【００２２】
経路誘導装置１は、入力されたデータや乗員の操作に基づき、車両を目的地まで経路案内（経路誘導）するためのＣＰＵ１４と、地図情報等の各種の情報を情報センタ２からインターネット１２及び通信局１０を経由して受信し、且つ、情報を車両側から情報センタ２に送信するための送受信装置１６を備えている。この送受信装置１６は、例えば、自動車電話や携帯電話である。
【００２３】
経路誘導装置１は、更に、情報センタ２から受信した地図情報等を記憶するＨＤＤ記憶装置１８と、地図情報等の種々の情報を表示するディスプレイ２０と、情報センタ２からの地図情報とは別に車両側で独自に準備した地図情報を格納するＤＶＤ−ＲＯＭ２２、乗員が目的地の設定や情報センタ２に地図情報等をリクエストするための操作スイッチ２４と、情報センタ２から情報が受信できないときにその旨を警告する警報装置２６を備えている。
【００２４】
経路誘導装置１は、車両の現在位置を検出するＧＰＳ受信機２８、車速センサ３０及びジャイロセンサ３２を備えている。ＧＰＳ受信機２８は、衛星から電波を受信して車両の現在位置を検出し、車速センサ３０は移動距離を求めるために車両の速度を検出し、ジャイロセンサ３２は車両の移動方向を検出する。経路誘導装置１は、これらの各センサ２８、３０、３２の検出結果から、常時、車両の現在の位置および向きを正確に算出するように構成されている。
【００２５】
また、経路誘導装置１は、情報センタ２、又は、他の交通情報センタ（図示せず）から渋滞情報等を入手するためのＶＩＣＳ受信機３４を備えている。
【００２６】
本実施形態の経路誘導装置１は、運転者の視線を検出し、必要に応じて視線を所定の方向に誘導する視線誘導を行いながら、経路誘導を行うナビゲーション装置である。さらに、経路誘導装置１は、運転者から要求に応じて、運転者の視線が向けられている信号、標識、建物などの対象物を特定（推定）し、これら視認対象物に関する情報を、音声あるいはディスプレイへの表示によって、運転者に提供する機能を有する。
【００２７】
このような機能を実行するため、経路誘導装置１は、ＣＣＤカメラ３６、アイカメラ３８、及び、視認情報提供装置４０を備えている。
【００２８】
ＣＣＤカメラ３６は、車両の上部に取付けられ、車両の周囲方向３６０度を撮影することができるように構成されている。また、ＣＣＤカメラ３６は、ズーム機能を有し、所定の対象物の拡大画像を撮影することもできる。ＣＣＤカメラは、車両の左前および右後、または、右前および左後の対角線上に取付けられた一対のＣＣＤカメラによって構成されても良い。
【００２９】
アイカメラ３８は、キャビン内の上部位置に取付けられ、運転者の瞳孔等を撮影することにより、運転者の視線の方向、及び、注視対象物までの距離を検出することができるように構成されている。ここで、アイカメラには、例えば、ＥＯＧ法、光電素子式ＥＯＧ（Ｐ−ＥＯＧ）法、角膜反射法、第１・第４プルキンエ像検出法、コンタクトレンズ法、サーチコイル法、赤外線眼底カメラ法等の種々の技術が適用される。
【００３０】
視認情報提供装置４０は、コンピュータを備え、アイカメラ３８の検出結果を基準に、運転者の視線（視線の方向及び／又は注視対象物までの距離）を検出し、車両の現在の位置および向きと運転者の視線とを、地図データと照合させ、運転者が何を視認しているかを特定（推定）し、この視認対象物に関する情報を、記憶装置に記憶されている地図データ又はＣＣＤカメラ３６の画像から取得し、これら対象物に関する情報を、音声あるいはディスプレイ２０への表示によって、運転者に提供するように構成されている。
【００３１】
図２は、本実施形態の経路誘導装置１が搭載された車両の運転席周囲を示す図面である。
【００３２】
運転席の近傍のＡピラーには、スピーカ４２が取付けられており、このスピーカ４２により、運転者への音声ガイダンス、通知等が行われる。さらに、フロントガラス４４上には、ＯＨＤ装置により、ディスプレイ２０の表示内容と同じ内容が補助表示２０ａとして表示される。更に、ステアリングホイール４６には、視線確認スイッチ４８とが取付けられている。視線確認スイッチ４８は、運転者が、視認対象物を視認情報提供装置４０に認知させる、即ち、視認している対象物に関する情報を欲するときに押すスイッチである。尚、本実施形態の経路誘導装置１は、マイク（図示せず）への、例えば「あれ何。」という音声入力により、視線確認スイッチ４８を押したときと同じ処理が行われるように構成されている。また、本実施形態の車両には、音声入力モードに切り換え可能な、ＡＶ機器および空調装置が備えられている。
【００３３】
次に、視認情報提供装置４０による視認対象物に関する情報提供の際に実行される処理の内容を図３のフローチャートに沿って説明する。この視認情報の提供は、通常の経路誘導に付加して行われる
まず、ステップＳ１で、視線確認スイッチ４８が押されているか否かが判定される。ステップＳ１でＮＯのときには、ステップＳ２でマイクに、「あれ何。」という、視認対象物の情報を求める運転者からの音声入力が行われているか否かが判定される。
【００３４】
ステップＳ１またはステップＳ２でＹＥＳのときには、ステップＳ３に進み、運転者が何を視認しているかが推定される。即ち、まず、アイカメラ３８の撮影結果から検出された運転者の視線（方向と注視対象物までの距離）と、車両の現在の位置及び方向とを、地図情報とを照合させて、運転者が視認している対象物を特定する。
【００３５】
次いで、ステップＳ４で、視認対象物が信号または標識であるか否かが判定される。ステップＳ４でＹＥＳのときにはステップＳ５に進み、視認対象物の信号または標識をＣＣＤカメラ３６で撮影させ、その画像情報を取得する。このとき、ＣＣＤカメラ３６のズーム機能で拡大した画像を得るのが好ましい。
【００３６】
ステップＳ４でＮＯのときにはステップＳ６に進み、視認対象物がルームミラーまたはドアミラーであるか否かが判定される。ステップＳ６でＹＥＳのときには、運転者が車両後方の情報を必要としている考えられるので、ステップＳ７に進み、車両の後方の画像をＣＣＤカメラ３６で撮影させ、その画像情報を取得する。
【００３７】
ステップＳ６でＮＯのときにはステップＳ８に進み、視認対象物が建物であるか否かが判定される。ステップＳ８でＹＥＳのときには、視認されている建物に関する情報（名前等）を記憶装置に記憶されている地図情報から読み出して、その情報を取得する。
【００３８】
ステップＳ５、ステップＳ７またはステップＳ９の処理画が終了すると、ステップＳ１０に進み、車両が駐停車状態または直進状態にあるか否かが判定される。ステップＳ１０でＹＥＳのときには、ステップＳ１１に進み、取得されている情報を運転者に提供する。情報の提供は、ディスプレイ２０上の通常の経路表示画面を、信号の画像、標識の画像、後方画像または建物名を拡大表示する画面に切り換えることによって実行される。また、このような画面表示と同時に、又は、これに代えて信号、標識の内容または建物名を音声ガイダンスとして、運転者に通知する構成でも良い。ステップＳ１０でＮＯのときには、車両が停車または直進状態になるまで、取得された情報を保留する。
【００３９】
ステップＳ８でＮＯのときには、ステップＳ１３に進み、運転者が車載のＡＶ機器を視認したか否かが判定される。ステップＳ１３でＹＥＳのときには、ステップＳ１４に進み、車載のＡＶ機器を音声入力モードに切り換える。
【００４０】
ステップＳ１３でＮＯのときには、ステップＳ１５に進み、運転者が車載の空調機器操作部を視認したか否かが判定される。ステップＳ１５でＹＥＳのときには、ステップＳ１６に進み、車載の空調機器を音声入力モードに切り換える。
【００４１】
更に、ステップＳ１５でＮＯのときには、ステップＳ１７で、視認対象物を特定できなかったので、再度、目的物を視認せよとの警告を、ディスプレイ上でまたは音声ガイダンスで実行する。
【００４２】
本発明は上記実施形態に限定されることなく、特許請求の範囲に記載された技術事項の範囲内で種々の変更又は変形が可能である。
【００４３】
上記実施形態では、情報提供は、標識に関する情報をＣＣＤカメラから得る構成であったが、標識に関する情報を記憶装置に記憶されている地図情報から取得する構成でもよい。
【００４４】
また、上記実施形態では、情報提供を、視線確認スイッチ視認４８および音声入力の何れからでも実行する構成であったが、いずれか一方からのみで情報提供が行われる構成でも良い。
【００４５】
さらに、上記実施形態では、運転者の視線のみを対象としたが、他の乗員の視線も検出し、これらに基づいて情報提供を行う構成でも良い。
【００４６】
さらに、上記実施形態は、本発明の情報提供装置を経路誘導装置に組み込んだ例であったが、本発明はこれに限定されるものではない。
【００４７】
【発明の効果】
このように、本発明によれば、視認した対象物に関する情報を車両の乗員に提供することができる情報提供装置等が提供される。
【図面の簡単な説明】
【図１】本発明の経路誘導装置の一実施形態を示す基本構成図である。
【図２】本発明の一実施形態の経路誘導装置が搭載された車両の運転席周囲を示す図面である。
【図３】本発明の一実施形態の経路誘導装置で行われる視認対象物の情報提供の際に実行される処理の内容を示すフローチャートである。
【符号の説明】
１：経路誘導装置（ナビゲーション装置）
１８：ＨＤＤ記憶装置
２２：ＤＶＤ−ＲＯＭ
３８：アイカメラ
４０：視認情報提供装置
４８：視線確認スイッチ
【図１】
2004061259.tif 000003
【図２】
2004061259.tif 000004
【図３】
2004061259.tif 000005