(57)【要約】【課題】視線だけでなく他の情報も用いて、入力操作を介さずに表示内容の制御を行う表示内容制御装置を提供する。【解決手段】表示内容制御装置は、利用者の顔を撮影した画像データを取得し、当該画像データを解析し、表示内容制御装置への注視状態を判断し、さらに、上記画像データ等を用いて利用者と表示装置との距離を測定し、注視状態と距離とに基づいて表示内容を決定して表示するように表示制御を行う。このように、表示内容制御装置は、注視状態だけでなく、利用者の顔と表示内容制御装置との距離にも着目して、表示内容の制御を行っているので、注視しているか否かのみで表示制御する場合に比して、より多様な表示制御を自動で行うことができる。【選択図】図３
2009223187.tif 000002
【特許請求の範囲】
【請求項１】
表示内容を制御する表示内容制御装置であって、
利用者の顔を含む画像データを取得する画像データ取得手段と、
前記画像データから顔を認識する顔部分認識手段と、
前記顔における目に基づいて視線の方向を判断する視線方向判断手段と、
前記視線方向の判断結果に基づいて注視状態を判断する注視状態判断手段と、
前記表示内容制御装置と利用者との距離を測定する距離測定手段と、
前記注視状態と前記距離とに基づいて表示内容を決定して表示する表示内容制御手段を備えることを特徴とする表示内容制御装置。
【請求項２】
運転状況を判定する運転状況判定手段をさらに備え、
前記表示内容制御手段は、前記運転状況に基づいて表示内容を決定して表示する請求項１に記載の表示内容制御装置。
【請求項３】
前記表示内容制御手段は、前記距離測定手段が特定した距離が、以前に比して短くなっている場合、表示中の内容を詳細化した表示内容を表示することを特徴とする請求項１又は２に記載の表示内容制御装置。
【請求項４】
前記表示内容は、地図情報に関する情報であることを特徴とする請求項１乃至３のいずれか一項に記載の表示内容制御装置。
【請求項５】
前記表示内容は、再生中の音声情報に関する情報であることを特徴とする請求項１乃至３のいずれか一項に記載の表示内容制御装置。
【請求項６】
前記距離測定手段は、予め保持している利用者の顔を含む画像データを基準に距離を測定することを特徴とする請求項１乃至５のいずれか一項に記載の表示内容制御装置。
【請求項７】
表示内容を制御する表示内容制御方法であって、
利用者の顔を含む画像データを取得する画像データ取得工程と、
前記画像データから顔を認識する顔部分認識工程と、
前記顔における目に基づいて視線の方向を判断する視線方向判断工程と、
前記視線方向の判断結果に基づいて注視状態を判断する注視状態判断工程と、
表示内容制御装置と利用者との距離を測定する距離測定工程と、
前記注視状態と前記距離とに基づいて表示内容を決定して表示する表示内容制御工程を備えることを特徴とする表示内容制御方法。
【請求項８】
コンピュータを備える、表示内容を制御する表示内容制御装置によって実行される表示内容制御プログラムであって、
利用者の顔を含む画像データを取得する画像データ取得手段と、
前記画像データから顔を認識する顔部分認識手段と、
前記顔における目に基づいて視線の方向を判断する視線方向判断手段と、
前記視線方向の判断結果に基づいて注視状態を判断する注視状態判断手段と、
前記表示内容制御装置と利用者との距離を測定する距離測定手段と、
前記注視状態と前記距離とに基づいて表示内容を決定して表示する表示内容制御手段、として前記コンピュータを機能させることを特徴とする表示内容制御プログラム。
【請求項９】
請求項８に記載の表示内容制御プログラムを記録したことを特徴とする記録媒体。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、利用者の注視状態、及び利用者と装置との距離に基づいて表示内容を変更する技術に関する。
【背景技術】
【０００２】
車載のナビゲーション装置の画面の切替について、リモートコントローラやタッチパネルを介して操作することが一般的であるが、運転手が操作するには煩雑な面がある。
【０００３】
また、車両の走行状態と運転者の視線とを検出し、検出した情報に基づいて画面の表示内容を制御する画面制御装置がある（例えば、特許文献１参照）。
【０００４】
上記の画面制御装置では、運転者が表示画面に視線を向けるだけで自動的に動画からナビゲーション情報に切り換えるので、運転手がリモートコントローラ等の操作を行う必要がない。
【０００５】
【特許文献１】特開２００３−２４０５６０号公報
【発明の開示】
【発明が解決しようとする課題】
【０００６】
上述の画面制御装置は、運転手が見ているか否かによって、画面を制御しているが、さらに他の情報を用いて、入力操作を介さずに画面表示制御をした方が望ましい。
【０００７】
本発明が解決しようとする課題としては、上記のものが例として挙げられる。本発明の目的は、視線だけでなく他の情報も用いて、入力操作を介さずに表示内容の制御を行う表示内容制御装置を提供することにある。
【課題を解決するための手段】
【０００８】
請求項１に記載の発明は、表示内容を制御する表示内容制御装置であって、利用者の顔を含む画像データを取得する画像データ取得手段と、前記画像データから顔を認識する顔部分認識手段と、前記顔における目に基づいて視線の方向を判断する視線方向判断手段と、前記視線方向の判断結果に基づいて注視状態を判別する注視状態判断手段と、前記表示内容制御装置と利用者との距離を特定する距離測定手段と、前記注視状態と前記距離とに基づいて表示内容を決定して表示する表示内容制御手段を備えることを特徴とする。
【０００９】
請求項７に記載の発明は、表示内容を制御する表示内容制御方法であって、利用者の顔を含む画像データを取得する画像データ取得工程と、前記画像データから顔を認識する顔部分認識工程と、前記顔における目に基づいて視線の方向を判断する視線方向判断工程と、前記視線方向の判断結果に基づいて注視状態を判別する注視状態判断工程と、表示内容制御装置と利用者との距離を測定する距離測定工程と、前記注視状態と前記距離とに基づいて表示内容を決定して表示する表示内容制御工程を備えることを特徴とする。
【００１０】
請求項８に記載の発明は、コンピュータを備える、表示内容を制御する表示内容制御装置によって実行される表示内容制御プログラムであって、利用者の顔を含む画像データを取得する画像データ取得手段と、前記画像データから顔を認識する顔部分認識手段と、前記顔における目に基づいて視線の方向を判断する視線方向判断手段と、前記視線方向の判断結果に基づいて注視状態を判断する注視状態判断手段と、前記表示内容制御装置と利用者との距離を特定する距離測定手段と、前記注視状態と前記距離とに基づいて表示内容を決定して表示する表示内容制御手段、として前記コンピュータを機能させることを特徴とする。
【発明を実施するための最良の形態】
【００１１】
本発明の好適な実施形態では、表示内容を制御する表示内容制御装置であって、利用者の顔を含む画像データを取得する画像データ取得手段と、前記画像データから顔を認識する顔部分認識手段と、前記顔における目に基づいて視線の方向を判断する視線方向判断手段と、前記視線方向の判断結果に基づいて注視状態を判断する注視状態判断手段と、前記表示内容制御装置と利用者との距離を測定する距離測定手段と、前記注視状態と前記距離とに基づいて表示内容を決定して表示する表示内容制御手段と、を備える。
【００１２】
上記の表示内容制御装置は、具体的には、ナビゲーション装置等に適用できる。そして、表示内容制御装置では、画像データ取得手段が利用者の顔を含む画像データを取得し、顔部分認識手段が画像データから顔を認識し、視線方向判断手段が、画像データの顔部分における目の部分を参照し、視線の方向を判断する。
【００１３】
そして、注視状態判断手段は、視線方向判断手段による視線方向の判断結果に基づいて、表示内容制御装置への注視状態（例えば、３秒以上じっと見ている状態）であるか否かの判断を行う。また、距離測定手段は、表示内容制御装置と利用者との距離を計測する。距離を計測する方法には、画像データ内における顔部分が占める割合に基づいて計測する方法や、超音波センサを用いて計測する方法等がある。
【００１４】
表示内容制御手段は、上記注視状態と、距離測定手段が測定した距離とに基づいて表示内容を制御する。このように、表示内容制御装置は、注視状態だけでなく、利用者の顔と表示内容制御装置との距離にも着目して、表示内容の制御を行っているので、注視しているか否かのみで表示制御する場合に比して、より多様な表示制御を自動で行うことができる。
【００１５】
上記の表示内容制御装置の一態様では、運転状況を判定する運転状況判定手段をさらに備え、前記表示内容制御手段は、前記運転状況に基づいて表示内容を決定して表示する。この場合、表示内容制御装置は、上記の注視状態と、距離測定手段が測定した距離だけでなく、運転状況にも基づいて表示内容の制御を行うので、より細かい表示制御を実現することができる。
【００１６】
上記の表示内容制御装置の他の一態様では、前記表示内容制御手段は、前記距離測定手段が特定した距離が、以前に比して短くなっている場合、表示中の内容を詳細化した表示内容を表示する。このように、表示内容制御装置は、利用者が表示内容制御装置へ近づいている場合に、表示中の内容に興味を示していると判断し、表示中の内容の詳細情報を表示する。従って、表示内容制御装置は、利用者の興味の度合いに連動して、表示内容を自動で切り換えることができる。
【００１７】
上記の表示内容制御装置の他の一態様では、前記表示内容は、地図情報に関する情報である。この場合、表示内容制御装置は、地図情報に関する表示内容について表示制御を行うことができる。
【００１８】
上記の表示内容制御装置の他の一態様では、前記表示内容は、再生中の音声情報に関する情報である。この場合、表示内容制御装置は、音楽情報に関する表示内容について表示制御を行うことができる。
【００１９】
前記距離測定手段は、予め保持している利用者の顔を含む画像データを基準に距離を測定する。この場合、予め保持している基準用の画像データの顔と、画像データ取得手段が取得した画像データの顔とを比較結果を用いて、表示内容制御装置と利用者との距離を測定するので、より正確に、表示内容制御装置と利用者との距離を測定することができる。
【００２０】
本発明の他の観点では、表示内容を制御する表示内容制御方法であって、利用者の顔を含む画像データを取得する画像データ取得工程と、前記画像データから顔を認識する顔部分認識工程と、前記顔における目に基づいて視線の方向を判断する視線方向判断工程と、前記視線方向の判断結果に基づいて注視状態を判断する注視状態判断工程と、表示内容制御装置と利用者との距離を測定する距離測定工程と、前記注視状態と前記距離とに基づいて表示内容を決定して表示する表示内容制御工程を備える。
【００２１】
このような表示内容制御方法によっても、注視状態だけでなく、利用者と表示制御装置との距離についても着目して、表示内容の制御を行っているので、単に注視状態だけに基づいて表示制御する場合に比して、より多様な表示内容の切り換えを行うことができる。
【００２２】
本発明の他の観点では、コンピュータを備える、表示内容を制御する表示内容制御装置によって実行される表示内容制御プログラムであって、利用者の顔を含む画像データを取得する画像データ取得手段と、前記画像データから顔を認識する顔部分認識手段と、前記顔における目に基づいて視線の方向を判断する視線方向判断手段と、前記視線方向の判断結果に基づいて注視状態を判断する注視状態判断手段と、前記表示内容制御装置と利用者との距離を測定する距離測定手段と、前記注視状態と前記距離とに基づいて表示内容を決定して表示する表示内容制御手段、として前記コンピュータを機能させる。このような表示内容制御プログラムを、各種装置上で実行することにより、本発明の表示内容制御装置を実現することができる。なお、上記表示内容制御プログラムは記録媒体に記録した状態で好適に取り扱うことができる。
【実施例】
【００２３】
以下、図面を参照して本発明の好適な実施例について説明する。
【００２４】
図１に示す車両１は、車内撮影用カメラである撮像装置７０を含むナビゲーション装置２００を備えている。
【００２５】
そして、ナビゲーション装置２００は、所定間隔で撮像装置７０を介して運転手を撮影した画像データを取得すると共に、運転状況（例えば、運転中又は停止中等）を判断する。
【００２６】
そして、ナビゲーション装置２００は、上記画像データについて画像解析処理をした結果に基づいて運転手がナビゲーション装置２００の画面を見ているか否かについてや、運転手が画面に近づいて見ているか否かについて判断する。
【００２７】
そして、ナビゲーション装置２００は、運転状況、画面注視状態、及び画面と運転手との距離に基づいて表示内容を切り換える。
【００２８】
このように、本実施例におけるナビゲーション装置２００は、画面と運転手との距離について測定し、運転状況、画面注視状態、及び画面と運転手との距離に基づいて画面表示内容を切り換えているので、運転状況及び画面注視状態で表示内容を切り換えている場合に比して、より多様な画面表示制御を実現することができる。
【００２９】
［ナビゲーション装置］
図２に、本発明の実施例に係るナビゲーション装置２００の構成を示す。図２に示すように、ナビゲーション装置２００は、自立測位装置１０、ＧＰＳ受信機１８、システムコントローラ２０、ディスクドライブ３１、データ記憶ユニット３６、通信用インタフェース３７、通信装置３８、表示ユニット４０、音声出力ユニット５０、入力装置６０、及び撮像装置７０を備える。
【００３０】
自立測位装置１０は、加速度センサ１１、角速度センサ１２及び距離センサ１３を備える。加速度センサ１１は、例えば圧電素子からなり、車両の加速度を検出し、加速度データを出力する。角速度センサ１２は、例えば振動ジャイロからなり、車両の方向変換時における車両の角速度を検出し、角速度データ及び相対方位データを出力する。距離センサ１３は、車両の車輪の回転に伴って発生されているパルス信号からなる車速パルスを計測する。
【００３１】
ＧＰＳ受信機１８は、複数のＧＰＳ衛星から、測位用データを含む下り回線データを搬送する電波１９を受信する。測位用データは、緯度及び経度情報等から車両の絶対的な位置を検出するために用いられる。
【００３２】
システムコントローラ２０は、インタフェース２１、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）２２、ＲＯＭ（Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ）２３及びＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）２４を含んでおり、ナビゲーション装置２００全体の制御を行う。
【００３３】
インタフェース２１は、加速度センサ１１、角速度センサ１２及び距離センサ１３並びにＧＰＳ受信機１８とのインタフェース動作を行う。そして、これらから、車速パルス、加速度データ、相対方位データ、角速度データ、ＧＰＳ測位データ、絶対方位データ等をシステムコントローラ２０に入力する。ＣＰＵ２２は、システムコントローラ２０全体を制御する。ＲＯＭ２３は、システムコントローラ２０を制御する制御プログラム等が格納された図示しない不揮発性メモリ等を有する。ＲＡＭ２４は、入力装置６０を介して利用者により予め設定された経路データ等の各種データを読み出し可能に格納したり、ＣＰＵ２２に対してワーキングエリアを提供したりする。
【００３４】
システムコントローラ２０、ＣＤ−ＲＯＭドライブ又はＤＶＤ−ＲＯＭドライブなどのディスクドライブ３１、データ記憶ユニット３６、通信用インタフェース３７、表示ユニット４０、音声出力ユニット５０及び入力装置６０は、バスライン３０を介して相互に接続されている。
【００３５】
ディスクドライブ３１は、システムコントローラ２０の制御の下、ＣＤ又はＤＶＤといったディスク３３から、音楽データ、映像データなどのコンテンツデータを読み出し、出力する。なお、ディスクドライブ３１は、ＣＤ−ＲＯＭドライブ又はＤＶＤ−ＲＯＭドライブのうち、いずれか一方としても良いし、ＣＤ及びＤＶＤコンパチブルのドライブとしても良く、また、テレビチューナを内蔵したハードディスクレコーダでも良い。
【００３６】
データ記憶ユニット３６は、例えば、ＨＤＤなどにより構成され、地図データや施設データなどのナビゲーション処理に用いられる各種データを記憶する。
【００３７】
通信装置３８は、例えば、ＦＭチューナやビーコンレシーバ、携帯電話や専用の通信カードなどにより構成され、通信用インタフェース３７を介して、ＶＩＣＳ（Ｖｅｈｉｃｌｅ  Ｉｎｆｏｒｍａｔｉｏｎ  Ｃｏｍｍｕｎｉｃａｔｉｏｎ  Ｓｙｓｔｅｍ）センタから配信される渋滞や交通情報などの道路交通情報を受信したり、所定のサーバからの種々の情報（例えば、天気情報等）を受信したりする。
【００３８】
表示ユニット４０は、システムコントローラ２０の制御の下、各種表示データをディスプレイなどの表示装置に表示する。具体的には、システムコントローラ２０は、データ記憶ユニット３６から地図データを読み出す。表示ユニット４０は、システムコントローラ２０によってデータ記憶ユニット３６から読み出された地図データを、ディスプレイなどの表示画面上に表示する。表示ユニット４０は、バスライン３０を介してＣＰＵ２２から送られる制御データに基づいて表示ユニット４０全体の制御を行うグラフィックコントローラ４１と、ＶＲＡＭ（Ｖｉｄｅｏ  ＲＡＭ）等のメモリからなり即時表示可能な画像情報を一時的に記憶するバッファメモリ４２と、グラフィックコントローラ４１から出力される画像データに基づいて、液晶、ＣＲＴ（Ｃａｔｈｏｄｅ  Ｒａｙ  Ｔｕｂｅ）等のディスプレイ４４を表示制御する表示制御部４３と、ディスプレイ４４とを備える。ディスプレイ４４は、例えば対角５〜１０インチ程度の液晶表示装置等からなり、車内のフロントパネル付近に装着される。
【００３９】
音声出力ユニット５０は、システムコントローラ２０の制御の下、ディスクドライブ３１、又はＲＡＭ２４等からバスライン３０を介して送られる音声デジタルデータのＤ／Ａ（Ｄｉｇｉｔａｌ  ｔｏ  Ａｎａｌｏｇ）変換を行うＤ／Ａコンバータ５１と、Ｄ／Ａコンバータ５１から出力される音声アナログ信号を増幅する増幅器（ＡＭＰ）５２と、増幅された音声アナログ信号を音声に変換して車内に出力するスピーカ５３とを備えて構成されている。
【００４０】
入力装置６０は、各種コマンドやデータを入力するための、キー、スイッチ、ボタン、リモコン、音声入力装置等から構成されている。入力装置６０は、車内に搭載された当該車載用電子システムの本体のフロントパネルやディスプレイ４４の周囲に配置される。また、ディスプレイ４４がタッチパネル方式である場合には、ディスプレイ４４の表示画面上に設けられたタッチパネルも入力装置６０として機能する。
【００４１】
撮像装置７０は、車両内に取り付けられ、システムコントローラ２０の制御に応じて、運転手の撮影を行う。
【００４２】
［表示内容制御装置］
図３に表示内容制御装置３００の機能構成を示す。表示内容制御装置３００は、実体的には、ナビゲーション装置２００の構成要素により構成される。表示内容制御装置３００は、図示のように、自立測位装置１０と、ＧＰＳ受信機１８と、システムコントローラ２０と、データ記憶ユニット３６と、表示装置４０と、入力装置６０と、撮像装置７０とを備える。データ記憶ユニット３６は、地図情報ＤＢ１２０や音楽情報ＤＢ１３０等、各種情報を記憶する。システムコントローラ２０は、画像データ取得部１０１と、顔部分認識部１０２と、視線方向判断部１０３と、注視状態判断部１０４と、距離測定部１０５と、運転状況判定部１０６と、表示内容制御部１０７と、誘導部１０８とを備える。即ち、システムコントローラ２０が所定のプログラムを実行することにより、画像データ取得部１０１と、顔部分認識部１０２と、視線方向判断部１０３と、注視状態判断部１０４と、距離測定部１０５と、運転状況判定部１０６と、表示内容制御部１０７と、誘導部１０８とを実現する。地図情報ＤＢ１２０は、地図情報を保持するデータベースであり、広告の概要情報や広告の詳細情報を含む。音楽情報ＤＢ１３０は、アーティスト毎の曲目やアルバム情報を保持するデータベースである。
【００４３】
画像データ取得部１０１は、撮像装置７０を介して画像データを取得する。顔部分認識部１０２は、画像データ取得部１０１が取得した画像データに対して、画像解析処理を施し、顔の部分を抽出する。画像データから顔の部分を抽出する方法については、周知技術であるので省略する。
【００４４】
視線方向判断部１０３は、顔部分認識部１０２が認識した顔部分の内、目の部分を参照し、視線がナビゲーション装置２００の表示装置４０に向けられているか否かを判断する。
【００４５】
注視状態判断部１０４は、視線方向判断部１０３の結果を参照し、所定時間（例えば、３秒間）連続で、表示装置４０を運転手が見ている場合、運転手が表示装置４０を注視していると判断する。
【００４６】
距離測定部１０５は、画像データ取得部１０１が取得した画像データに占める顔の割合に基づいてナビゲーション装置２００の表示装置４０と運転手との距離を測定する。
【００４７】
運転状況判定部１０６は、自立測位装置１０やＧＰＳ受信機１８から車両の速度等に基づいて運転状況を判定する。なお、ここでいう運転状況とは、運転中であるか否かをいう。
【００４８】
表示内容制御部１０７は、運転状況判定部１０６が判定した運転状況、注視状態判断部１０４が判断した注視状態、及び距離測定部１０５が測定した運転手と表示装置４０との距離に基づいて表示内容を決定し、決定した表示内容を表示装置４０へ表示する。詳細については、後述する。
【００４９】
誘導部１０８は、ＧＰＳ受信機１８から取得した情報（緯度経度情報）、地図情報ＤＢ１２０内の地図情報、及び予め設定されているルート情報に基づいて、運転中画面用の情報を生成し、当該運転中用の画面を表示装置４０へ表示する。
【００５０】
［表示内容制御方法］
次に、本実施例による表示内容制御方法について説明する。本実施例における表示内容制御方法とは、運転状況、運転手の表示装置４０への注視状態、及び運転手と表示装置４０との距離に基づいて表示内容を決定し、決定した表示内容を表示装置４０に表示する方法をいう。
【００５１】
誘導部１０８は、ＧＰＳ受信機１８から取得した情報（緯度経度情報）、地図情報、及び予め設定されているルート情報に基づいて、運転中画面用の情報を生成し、当該運転中用の画面（以下、誘導画面とも呼ぶ）を表示装置４０へ表示する。図４（ａ）に誘導画面の表示例を示す。
【００５２】
そして、運転状況判定部１０６は、自立測位装置１０やＧＰＳ装置１８等を用いて、車両１が、運転中であるか否かについて判断する。
【００５３】
そして、画像データ取得部１０１は、所定の間隔で運転手の顔を含む画像データを取得する。そして、顔部分認識部１０２は、上記画像データから顔部分を抽出する。そして、視線方向判断部１０３は、上記画像データ中の顔部分に基づいて視線の方向を判断する。
【００５４】
そして、注視状態判断部１０４は、上記視線方向判断部１０３による視線方向判断を参照し、３秒間連続して視線を表示装置４０に向けていたと判断した場合、注視していると判断し、視線を表示装置４０に向けていた期間が３秒未満である場合、注視していないと判断する。
【００５５】
そして、距離測定部１０５は、画像データ取得部１０１が取得した画像データに占める顔の割合に基づいてナビゲーション装置２００の表示装置４０と運転手との距離を測定する。
【００５６】
そして、表示内容制御部１０７は、運転状況、注視状態、及び運転手と表示装置４０との距離に基づいて表示内容を決定し、決定した表示内容を表示装置４０へ表示する。具体例を以下に記載する。
【００５７】
（運転していない状況の場合）
表示内容制御部１０７は、運転手が表示装置４０を注視していて、運転手と表示装置４０との距離が遠い場合、運転中の画面上の地図内の広告の概要情報について地図情報ＤＢ１２０を検索し、検索した広告の概要情報を含めた内容を表示装置４０へ表示する。広告の概要情報の表示例を図４（ｂ）に示す。
【００５８】
そして、表示内容制御部１０７は、運転手が表示装置４０を注視していて、さらに運転手と表示装置４０との距離が近い場合、上記表示中の広告の詳細情報について地図情報ＤＢ１２０を検索し、検索した広告の詳細情報を含めた内容を表示装置４０へ表示する。広告の詳細情報の表示例を図４（ｃ）に示す。
【００５９】
なお、表示内容制御部１０７は、運転手が表示装置４０を注視していなかった場合、誘導画面を表示する。
【００６０】
（運転している状況の場合）
表示内容制御部１０７は、運転手が表示装置４０を注視していなかった場合は、誘導画面を継続して表示する。
【００６１】
そして、表示内容制御部１０７は、運転手が表示装置４０を注視していた場合、警告画面を表示する。警告画面の例を図４（ｄ）に示す。
【００６２】
上述のように、表示内容制御装置３００では、表示内容制御部１０７が、上記注視状態と、距離測定手段が測定した距離とに基づいて表示内容を制御する。このように、表示内容制御装置３００は、注視しているか否かのみで表示制御する場合に比して、より多様な表示制御を自動で行うことができる。
【００６３】
そして、表示内容制御装置３００は、上記の注視状態と、距離測定部１０６が測定した距離だけでなく、運転状況にも基づいて表示内容の制御を行っているので、より細かい表示制御を実現することができる。
【００６４】
また、表示内容制御装置３００は、利用者が表示内容制御装置３００へ近づいている場合に、表示中の内容に興味を示していると判断し、広告の概要情報から、広告の詳細情報へ表示切り換えている。このように、表示内容制御装置３００は、利用者の興味の度合いに連動して、表示内容を自動で切り換えることができる。
【００６５】
［表示内容制御処理］
以下に、表示内容制御処理の手順について図５に示すフローチャートを用いて説明する。この処理は、表示内容制御装置３００のシステムコントローラ２０が、予め用意されたプログラムを実行することにより実現される。
【００６６】
まず、画像データ取得部１０１は、撮像装置７０を介して運転手の顔を含む画像データを取得する（ステップＳ１）。
【００６７】
そして、顔部分認識部１０２は、画像データ取得部１０１が取得した画像データに対して画像解析処理を施し、顔部分を認識する（ステップＳ２）。
【００６８】
そして、視線方向判断部１０３は、顔部分認識部１０２が認識した顔部分における目を参照し、運転手の視線が表示内容制御装置３００に向けられているか否かを判断する（ステップＳ３）。
【００６９】
そして、注視状態判断部１０４は、上記視線方向判断部１０３の判断内容に基づいて、注視状態を判断する（ステップＳ４）。具体的には、注視状態判断部１０４は、運転手が３秒間継続して表示内容制御装置３００に視線を向けていた場合に、注視状態であると判断する。
【００７０】
そして、運転状況判定部１０６は、自立測位装置１０やＧＰＳ受信機１８を用いて、運転状況を判定する（ステップＳ５）。
【００７１】
そして、距離測定部１０５は、画像データ取得部１０１が取得した画像データ内における運転手の顔部分が占める割合に基づいて、運転手の顔と表示内容制御装置３００との距離を測定する（ステップＳ６）。
【００７２】
そして、表示内容制御部１０７は、運転状況が運転中であり（ステップＳ７；Ｎｏ）、注視している場合（ステップＳ８；Ｙｅｓ）、警告画面を表示し（ステップＳ９）、表示内容制御処理を終了する。この場合、運転手が運転中であるにも関わらず、表示内容制御装置３００の表示装置４０を見ていることになるので、表示内容制御装置３００は、警告画面を表示することにより、運転手に対して注意を促している。
【００７３】
そして、表示内容制御部１０７は、運転状況が運転中であり（ステップＳ７；Ｎｏ）、注視していない場合（ステップＳ８；Ｎｏ）、誘導画面を継続して表示し（ステップＳ１０）、表示内容制御処理を終了する。
【００７４】
そして、表示内容制御部１０７は、運転状況が運転中ではなく（ステップＳ７；Ｙｅｓ）、注視していない場合（ステップＳ１１；Ｎｏ）、誘導画面を継続して表示し（ステップＳ１２）、表示内容制御処理を終了する。
【００７５】
そして、表示内容制御部１０７は、運転状況が運転中ではなく（ステップＳ７；Ｙｅｓ）、注視していて（ステップＳ１１；Ｙｅｓ）、顔との距離が近くない場合（ステップＳ１２；Ｎｏ）、広告概要画面を表示し（ステップＳ１４）、表示内容制御処理を終了する。
【００７６】
そして、表示内容制御部１０７は、運転状況が運転中ではなく（ステップＳ７；Ｙｅｓ）、注視していて（ステップＳ１１；Ｙｅｓ）、顔との距離が近い場合（ステップＳ１３；Ｙｅｓ）、広告詳細画面を表示し（ステップＳ１５）、表示内容制御処理を終了する。
【００７７】
以上述べたように、表示内容を制御する表示内容制御装置３００は、利用者の顔を含む画像データを取得する画像データ取得手段と、画像データから顔を認識する顔部分認識手段と、顔における目に基づいて視線の方向を判断する視線方向判断手段と、視線方向の判断結果に基づいて注視状態を判別する注視状態判断手段と、表示内容制御装置と利用者との距離を特定する距離測定手段と、注視状態と距離とに基づいて表示内容を決定して表示する表示内容制御手段を備える。
【００７８】
このように、表示内容制御装置３００は、注視状態だけでなく、利用者の顔と表示内容制御装置との距離にも着目して、表示内容の制御を行っているので、注視しているか否かのみで表示制御する場合に比して、より多様な表示制御を自動で行うことができる。
【００７９】
［他の実施例］
上述の実施例では、表示内容制御装置３００をナビゲーション装置に適用する場合について述べたが、本発明は、これに限られず、他の種々の装置に適用することができる。例えば、液晶ディスプレイ搭載看板に適用し、利用者が近づくと広告情報の詳細情報を表示するようにしても良い。
【００８０】
上述の実施例では、表示内容制御装置３００における距離測定部１０５では、画像データにおける運転手の顔の割合に基づいて、運転手の顔と表示内容制御装置３００との距離を測定する場合について述べたが、本発明は、これに限られず、超音波センサを用いて、運転手の顔と表示内容制御装置３００との距離を測定するようにしても良い。
【００８１】
上述の実施例では、表示内容制御装置３００の距離測定部１０５では、画像データにおける運転手の顔の割合に基づいて、運転手の顔と表示内容制御装置３００との距離を測定する場合について述べたが、本発明は、これに限られず、予め運転中の運転手の画像データを保持しておき、保持している画像データの顔の部分と、画像データ取得部１０１が取得した画像データの顔の部分とを比較し、運転手の顔と表示内容制御装置３００との距離を測定するようにしても良い。
【００８２】
この場合、表示内容制御装置３００は、予め保持している基準用の画像データの顔と、画像データ取得手段が取得した画像データの顔とを比較結果を用いて、表示内容制御装置と利用者との距離を測定するので、より正確に、表示内容制御装置と利用者との距離を測定することができる。
【００８３】
上述の実施例では、表示内容制御装置３００における表示内容制御部１０７は、距離測定部１０５が測定した距離に応じて地図情報中の広告の概要情報や、広告の詳細情報を表示する場合について述べたが、本発明はこれに限られず、距離測定部１０５が測定した距離に応じて、再生中の音楽に関する情報を表示制御するようにしても良い。
【００８４】
例えば、運転中ではない状況下で、運転手が表示内容制御装置３００を注視している際に、表示内容制御部１０７は、運転手の顔と表示内容制御装置３００との距離が遠い場合、再生中の楽曲に関する概要情報（例えば、再生中の楽曲のアーティスト情報等）を表示し、運転手の顔と表示内容制御装置３００との距離が近い場合、再生中の楽曲に関する詳細情報（例えば、再生中の楽曲のアーティストがリリースしているアルバム情報等）を表示する。なお、表示内容制御部１０７が音楽情報ＤＢ１３０を検索することにより、上記の再生中の楽曲に関する概要情報や詳細情報を取得することができる。
【００８５】
上述の実施例では、表示内容制御装置３００における表示内容制御部１０７は、距離測定部１０５が測定した距離に応じて地図情報中の広告の概要情報や、広告の詳細情報を表示する場合について述べたが、本発明はこれに限られず、表示内容制御部１０７がバックカメラやフロントカメラの映像を表示装置４０に表示している際に、運転手が表示内容制御装置３００に近づいた際に、ズーム表示するようにしても良い。
【００８６】
上述の実施例では、表示対象の情報を、保持している地図情報ＤＢ１２０から取得する場合について述べたが、本発明は、これに限られず、ナビゲーション装置の２００の通信装置３８を介して他のサーバ装置等から取得するようにしても良い。
【図面の簡単な説明】
【００８７】
【図１】車両内のナビゲーション装置の配置例を示す図である。
【図２】ナビゲーション装置の概略構成を示すブロック図である。
【図３】表示内容制御装置の機能構成図である。
【図４】表示画面例を示す図である。
【図５】表示内容制御処理のフローチャートである。
【符号の説明】
【００８８】
１８  ＧＰＳ受信機
２０  システムコントローラ
３６  データ記憶ユニット
４０  表示装置
６０  入力装置
１０１  画像データ取得部
１０２  顔部分認識部
１０３  視線方向判断部
１０４  注視状態判断部
１０５  距離測定部
１０６  運転状況判定部
１０７  表示内容制御部
１０８  誘導部
１２０  地図情報ＤＢ
１３０  音楽情報ＤＢ
２００  ナビゲーション装置
３００  表示内容制御装置
【図１】
2009223187.tif 000003
【図２】
2009223187.tif 000004
【図３】
2009223187.tif 000005
【図４】
2009223187.tif 000006
【図５】
2009223187.tif 000007