(57)【要約】【課題】車載モニタ装置によって表示された経路案内情報を適切に認識し、ヘッドアップディスプレイに表示することができる車両用表示装置を提供すること。【解決手段】車載モニタ装置２０によって表示された地図情報及び経路案内情報を含む画像を取り込む画像取込部３１と、画像取込部３１によって取り込まれた画像から、所定の経路案内情報を示す矢印画像Ｙを検出する情報画像検出部３２と、この矢印画像Ｙが示す経路案内情報を認識する情報認識部３３と、情報認識部３３によって認識された経路案内情報をヘッドアップディスプレイ３４ｂに表示する情報表示部３４と、を備える構成とした。【選択図】図３
2017072520.tif 000002
【特許請求の範囲】
【請求項１】
画像表示機器によって表示された地図情報及び経路案内情報を含む画像を取り込む画像取込部と、
前記画像取込部によって取り込まれた画像から、所定の経路案内情報を示す情報表示画像を検出する情報画像検出部と、
前記情報画像検出部によって検出された情報表示画像が示す経路案内情報を認識する情報認識部と、
前記情報認識部によって認識された経路案内情報を車載表示器に表示する情報表示部と、
を備えたことを特徴とする車両用表示装置。
【請求項２】
請求項１に記載された車両用表示装置において、
前記情報画像検出部は、前記情報表示画像の探索を、前記画像の中から識別した所定形状の画像領域ごとに行う
ことを特徴とする車両用表示装置。
【請求項３】
請求項１又は請求項２に記載された車両用表示装置において、
前記情報画像検出部は、前記情報表示画像の探索をあらかじめ設定した探索方向に沿って行い、前記情報表示画像を検出したら前記情報表示画像の探索を中止する
ことを特徴とする車両用表示装置。
【請求項４】
請求項１から請求項３のいずれか一項に記載された車両用表示装置において、
前記情報画像検出部は、前記画像に表示された矢印画像及び距離画像を検出し、
前記情報認識部は、前記矢印画像によって示された方向を道路分岐地点での進行方向を示す経路案内情報として認識し、前記距離画像によって示された距離を前記道路分岐地点までの距離を示す経路案内情報として認識し、
前記情報表示部は、前記道路分岐地点での進行方向と前記道路分岐地点までの距離を、前記車載表示器に表示する
ことを特徴とする車両用表示装置。
【請求項５】
請求項１から請求項４のいずれか一項に記載された車両用表示装置において、
前記車載表示器を、ドライバーの前方に投影された投影光を反射性部材で反射させ、ドライバーの前方に虚像を結像させるヘッドアップディスプレイとする
ことを特徴とする車両用表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、自動車等の車両に搭載され、経路案内情報を表示する車両用表示装置に関するものである。
【背景技術】
【０００２】
従来、経路案内情報に関する画像を作成して表示するアプリケーションを備えた携帯端末に通信可能に接続され、携帯端末によって作成された画像を車載表示器に表示する車両用表示装置が知られている（例えば、特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１５-１４１０７２
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、経路案内情報に関する画像を作成、表示するアプリケーションは複数存在し、アプリケーションごとに経路案内情報のデータ様式が異なっている。そのため、携帯端末から必要な経路案内情報をピックアップして車載表示器に表示しようとしても、アプリケーションが異なると経路案内情報を適切に認識できず、必要な経路案内情報を表示できないという問題が生じる。
【０００５】
そこで、この発明は、画像表示機器によって表示された経路案内情報を適切に認識し、車載表示器に表示することができる車両用表示装置を提供することを目的としている。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明に係る車両用表示装置は、
画像表示機器によって表示された地図情報及び経路案内情報を含む画像を取り込む画像取込部と、
前記画像取込部によって取り込まれた画像から、所定の経路案内情報を示す情報表示画像を検出する情報画像検出部と、
前記情報画像検出部によって検出された情報表示画像が示す経路案内情報を認識する情報認識部と、
前記情報認識部によって認識された経路案内情報を車載表示器に表示する情報表示部と、
を備えている。
【発明の効果】
【０００７】
この発明によれば、画像表示機器によって表示された画像を取り込んで情報表示画像を検出し、検出した情報表示画像によって示されている経路案内情報を認識する。そして、この認識した経路案内情報が車載表示器に表示される。
すなわち、車載表示器に表示される経路案内情報は、画像表示機器によって表示された画像を画像処理することで認識される。そのため、画像表示機器に搭載されたアプリケーションの違いによって経路案内情報のデータ形式が異なっていても、必要な経路案内情報を認識することができる。
この結果、画像表示機器によって表示された経路案内情報を適切に認識し、車載表示器に表示することができる。
【図面の簡単な説明】
【０００８】
【図１】実施例１の車両用表示装置を用いた情報表示システムを示すブロック図である。
【図２】実施例１のヘッドアップディスプレイを示す構成図である。
【図３】実施例１の車両用表示装置にて実行される情報表示処理を示すフローチャートである。
【図４Ａ】実施例１の車両用表示装置において、取り込まれたナビ画像を示す説明図である。
【図４Ｂ】実施例１の車両用表示装置において、ナビ画像から検出した四角形領域を示す説明図である。
【図４Ｃ】実施例１の車両用表示装置において、ナビ画像から選択した四角形領域と、矢印画像及び距離画像を示す説明図である。
【図４Ｄ】実施例１の車両用表示装置において、記憶した四角形領域を一つ削除した後のメモリに記憶された四角形領域を示す説明図である。
【図５】実施例１の車両用表示装置において、ヘッドアップディスプレイに示された経路案内情報を示す説明図である。
【図６】実施例１の車両用表示装置を用いた情報表示システムの他の第１例を示すブロック図である。
【図７】実施例１の車両用表示装置を用いた情報表示システムの他の第２例を示すブロック図である。
【図８】実施例１の車両用表示装置を用いた情報表示システムの他の第３例を示すブロック図である。
【発明を実施するための形態】
【０００９】
以下、本発明の車両用表示装置を実施するための形態を、図面に示す実施例１に基づいて説明する。
【００１０】
（実施例１）
まず、構成を説明する。
実施例１の車両用表示装置は、画像を作成・表示可能な携帯端末と、この携帯端末から送信された画像を表示するナビゲーション装置と、を備えた情報表示システムに適用したものである。以下、実施例１における車両用表示装置の構成を、「全体システム構成」、「情報表示処理構成」に分けて説明する。
【００１１】
［全体システム構成］
図１は、実施例１の車両用表示装置を用いた情報表示システムを示すブロック図である。以下、図１に基づき、実施例１の全体システム構成を説明する。
【００１２】
実施例１の情報表示システムは、自動車等の車両に搭載されてドライバーが必要とする情報を表示する。この情報表示システムでは、図１に示すように、携帯端末１０と、車両固定の車載モニタ装置２０と、車両用表示装置３０と、を備えている。
【００１３】
前記携帯端末１０は、多様な機能を有する高性能携帯電話（スマートフォン）であり、ＧＰＳ受信部１１と、端末制御部１２と、端末メモリ１３と、端末ディスプレイ１４と、画像出力部１５と、を有している。
【００１４】
前記ＧＰＳ受信部１１は、ＧＰＳアンテナ１１ａを有し、図示しないＧＰＳ衛星からの送信データ（電波）を受信して、自車両の現在位置を示す位置情報を生成する受信機である。このＧＰＳ受信部１１によって生成された位置情報は、端末制御部１２に出力される。
【００１５】
前記端末制御部１２は、例えばマイクロコンピュータからなり、各種処理を行うＣＰＵと、ＣＰＵのメインメモリとして機能するＲＡＭと、ＣＰＵに各種処理を実行させるための各種アプリケーションを記憶したＲＯＭと、を有している。この端末制御部１２では、ＲＯＭに記憶された各アプリケーションを実行することで、通話機能、メール機能、音楽データ再生機能、静止画データ再生機能、動画データ再生機能、ウェブブラウジング機能等の多様な機能を実現する。さらに、ナビアプリケーションを実行した場合では、ＧＰＳ受信部１１から入力された位置情報と、端末メモリ１３から入力された地図情報、図示しない操作部により設定された目的地情報等に基づき、自車両の現在位置から目的地までの経路案内を行うナビゲーション機能を実現し、地図情報及び経路案内情報を含む画像（以下、「ナビ画像」という）を端末ディスプレイ１４に表示する。
なお、端末ディスプレイ１４は、携帯端末１０の本体に設けられた液晶ディスプレイである。この端末ディスプレイ１４は、タッチパネルを有しており、画像表示を行うと共に、アプリケーションを行うための操作部としての機能を備える。
【００１６】
前記画像出力部１５は、車載モニタ装置２０と無線接続するためのインターフェースである。携帯端末１０は、この画像出力部１５を介して、端末ディスプレイ１４に表示された画像を、車載モニタ装置２０に送信する。
【００１７】
前記車載モニタ装置２０（画像表示機器）は、携帯端末１０の端末制御部１２によって作成され、端末ディスプレイ１４に表示された画像を表示するものであり、画像入力部２１と、モニタ制御部２２と、車載ディスプレイ２３と、を備えている。
【００１８】
前記画像入力部２１は、携帯端末１０と無線接続するためのインターフェースである。車載モニタ装置２０は、この画像入力部２１を介して、携帯端末１０の端末ディスプレイ１４に表示された画像を受信する。
【００１９】
前記モニタ制御部２２は、画像入力部２１によって受信した画像の選別を行い、選択した画像の画像データを車載ディスプレイ２３に送信する。なお、画像の選別は、運転に支障があるか否かを基準に行い、例えばナビ画像や車両周辺の施設情報画像等の画像データは車載ディスプレイ２３に送信する。一方、ゲーム画像やウェブ画像等の画像データは車載ディスプレイ２３に送信しない。
【００２０】
前記車載ディスプレイ２３は、車室前部のインストルメントパネルに固定された液晶ディプレイであり、モニタ制御部２２によって選択された画像をそのまま表示する。
すなわち、この車載ディスプレイ２３には、携帯端末１０によって作成され、端末ディスプレイ１４に表示されたナビ画像と同じ内容のナビ画像が表示される。
【００２１】
前記車両用表示装置３０は、車載モニタ装置２０の車載ディスプレイ２３に表示された画像（ナビ画像）から、必要な情報を認識して表示するものであり、画像取込部３１と、情報画像検出部３２と、情報認識部３３と、情報表示部３４と、を有している。
【００２２】
前記画像取込部３１は、車載モニタ装置２０によって表示された地図情報及び経路案内情報を含むナビ画像を取り込む機能を有し、車載ディスプレイ２３の画面を撮影するカメラ３１ａと、このカメラ３１ａによって撮影された画像（静止画）を記憶する画像格納部３１ｂと、を有している。
ここで、カメラ３１ａは、いわゆるＣＣＤカメラであり、車載ディスプレイ２３を撮影可能な車室内の任意の位置に取り付けられている。
【００２３】
前記情報画像検出部３２は、画像取込部３１によって取り込まれたナビ画像から、所定の経路案内情報を示す情報表示画像を検出する機能を有し、検出した情報表示画像を情報認識部３３に出力する。この情報画像検出部３２は、ここでは、情報表示画像として、ナビ画像に表示された矢印画像及び距離画像を検出する。
また、この情報画像検出部３２では、情報表示画像の検出を、ナビ画像の中から識別した所定形状の画像領域である四角形画像領域ごとに行う。つまり、まずナビ画像内に存在する四角形領域を識別する。次に、四角形画像を一つ選択し、この選択した四角形領域内に矢印画像が存在するか否かを判断する。そして、矢印画像等が存在すると判断したら、矢印画像を検出して情報認識部３３に出力する。また、矢印画像が存在しなければ、残りの四角形領域内を探索する。
さらに、この情報画像検出部３２では、情報表示画像の検出を予め設定された探索方向に沿って行う。ここでは、ナビ画像の左上から右側に向かって水平方向に探索し、徐々にナビ画像の下部に向かって探索していく。なお、ナビ画像の全域を探索する前に情報表示画像を検出したら、この情報表示画像の探索を中止し、ナビ画像の全域を探索しない。また、この情報画像検出部３２は、メモリ３２ａを有しており、適宜必要な情報を記憶する。
【００２４】
前記情報認識部３３は、情報画像検出部３２によって検出された情報表示画像が示す経路案内情報を認識する機能を有し、認識した経路案内情報を情報表示部３４に出力する。この情報認識部３３は、ここでは、矢印画像によって示された進行方向情報を、道路分岐地点での進行方向を示す経路案内情報として認識し、距離画像によって示された距離情報を、現在の自車両位置から道路分岐地点までの距離を示す経路案内情報として認識する。
【００２５】
前記情報表示部３４は、情報認識部３３によって認識された経路案内情報を表示する機能を有し、情報出力部３４ａと、ヘッドアップディスプレイ３４ｂ（車載表示器）と、を有している。
前記情報出力部３４ａは、ヘッドアップディスプレイ３４ｂのコントローラであり、情報認識部３３からの情報を受信し、ヘッドアップディスプレイ３４ｂに送信する。
前記ヘッドアップディスプレイ３４ｂは、図２に示すように、ＨＵＤユニット３５ａ（表示部）と、反射性部材であるフロントガラス３５ｂと、を有しており、ＨＵＤユニット３５ａからドライバーＤの前方に投影された投影光をフロントガラス３５ｂで反射させ、ドライバーＤの前方に虚像３６を結像させる機能を有する。
すなわち、このヘッドアップディスプレイ３４ｂは、インストルメントパネル内に設けられた光源３５ｃからＨＵＤユニット３５ａに光を投光し、ＨＵＤユニット３５ａに表示した表示像を反射鏡３５ｄでフロントガラス３５ｂに反射させることにより、虚像３６をドライバーＤの視界に重畳して表示する。
なお、ここでは、ヘッドアップディスプレイ３４ｂに、道路分岐地点での進行方向と道路分岐地点までの距離を表示する。
【００２６】
［情報表示処理構成］
図３は、実施例１の車両用表示装置にて実行される情報表示処理を示すフローチャートである。以下、情報表示処理構成の一例を示す図３の各ステップについて説明する。なお、この情報表示処理はイグニッションスイッチがONされてからOFFされるまでの間繰り返される。
【００２７】
ステップＳ１では、車載モニタ装置２０の車載ディスプレイ２３に、携帯端末１０から送信されたナビ画像が表示されているか否かを判断する。YES（ナビ画像の表示あり）の場合には、ステップＳ２へ進む。NO（ナビ画像の表示なし）の場合には、ステップＳ１を繰り返す。
ここで、ナビ画像の表示の有無は、モニタ制御部２２からの制御信号に基づいて判断する。
【００２８】
ステップＳ２では、ステップＳ１でのナビ画像の表示ありとの判断に続き、車載ディスプレイ２３に表示されたナビ画像を取り込み、ステップＳ３へ進む。
ここで、ナビ画像の取り込みは、カメラ３１ａによって車載ディスプレイ２３を撮影し、撮影した静止画像を画像格納部３１ｂに格納することで行う。なお、図４Ａに、取り込んだナビ画像のイメージを示す。
【００２９】
ステップＳ３では、ステップＳ２でのナビ画像の取り込みに続き、取り込んだナビ画像内に表示された四角形領域を探索し、四角形領域を検出したらメモリ３２ａに記憶して、ステップＳ４へ進む。
ここで、「四角形領域」とは、四本の直線状の境界線を有し、四つの角部の内角が等しい領域であり、図４Ｂにおいて「Ｓ」で示す領域である。なお、角部の内角が直角でなく、Ｒ形状であっても「四角形領域」とする（図４Ｂにおいて「ＳＡ」で示す）。また、隣接する辺が直交方向に伸びていない平行四辺形形状やひし形形状の領域（図４Ｂにおいて「ＳＢ」で示す）は、上記「四角形領域」からは除外する。
【００３０】
ステップＳ４では、ステップＳ３での四角形形状の探索に続き、四角形形状の探索エラーが発生しなかったか否かを判断する。YES（探索エラーなし）の場合には、ステップＳ５へ進む。NO（探索エラーあり）の場合には、四角形形状の検出が適切に行われなかったとしてステップＳ１へ戻ってナビ画像の取り込みを再度行う。
ここで、探索エラーは、取り込んだ画像が不鮮明等の理由により、四角形形状の検出開始から一定時間内に四角形形状の検出ができない場合に生じる。
【００３１】
ステップＳ５では、ステップＳ４での四角形領域の探索エラーなしとの判断に続き、ステップＳ２にて取り込んだナビ画像の全域において四角形領域の探索が完了したか否かを判断する。YES（ナビ画像の全域を探索）の場合には、ステップＳ６へ進む。NO（ナビ画像の全域を未探索）の場合には、ステップＳ３へ戻って四角形形状の探索を継続する。
【００３２】
ステップＳ６では、ステップＳ５での四角形領域の探索完了との判断に続き、メモリ３２ａに記憶した四角形領域の中から、ナビ画像内で最左側であって最上部に位置する四角形領域を選択し、ステップＳ７に進む。
なお、図４Ｃに示すナビ画像の場合では、第１回目の選択時にはＳ１が選択され、第２回目の選択時にはＳ２が選択される。つまり、四角形領域は、ナビ画像の左上から右に向かって水平方向に沿って順に選択され、徐々に下部に位置するものが選択される。
【００３３】
ステップＳ７では、ステップＳ６での四角形領域の選択に続き、この選択した四角形領域の中に矢印画像が一つだけ存在するか否かを判断する。YES（矢印画像が一つ存在）の場合には、ステップＳ８へ進む。NO（矢印画像なし又は複数存在）の場合には、ステップＳ10へ進む。
ここで、「矢印画像」とは、一端に表示された矢型形状と、この矢型形状から伸びる線分形状とによって表示された画像とする。つまり、図４Ｃにおいて「Ｙ」で示す。
【００３４】
ステップＳ８では、ステップＳ７での矢印画像が一つ存在するとの判断に続き、この存在を検出した矢印画像から最も近い位置に表示された距離画像を検出し、ステップＳ９へ進む。
ここで、「距離画像」とは、例えばｍ（メートル）、ｋｍ（キロメートル）、ft（フィート）、mi（マイル）といった距離単位と、その左側或いは上側に存在する数字とが一定の範囲内に併記表示された画像とする。つまり、図４Ｃにおいて「Ｋ」で示す。
なお、矢印画像の検出と距離画像の検出は、既知の画像認識プログラムを用いて行う。また、距離画像を検出の際、メモリ３２ａに記憶されていた四角形領域の情報をすべて削除する。
【００３５】
ステップＳ９では、ステップＳ８での距離画像の検出に続き、距離画像の検出エラーが発生しなかったか否かを判断する。YES（検出エラーなし）の場合には、ステップＳ12へ進む。NO（検出エラーあり）の場合には、距離画像の検出が適切に行われなかったとしてステップＳ１へ戻る。
ここで、検出エラーは、矢印画像からの距離がほぼ等しい複数の距離画像が検出された場合や、取り込んだ画像が不鮮明で距離画像の検出開始から一定時間内に距離画像の検出ができない場合等に生じる。
【００３６】
ステップＳ10では、ステップＳ７での矢印画像未検出又は複数検出との判断に続き、ステップＳ６にて選択した四角形領域の情報をメモリ３２ａから削除し、ステップＳ11へと進む。これにより、メモリ３２ａに記憶された四角形領域は、一つ減る。
つまり、ステップＳ６にて図４Ｃに示す四角形領域Ｓ１を選択した場合には、ステップＳ７にて矢印画像未検出と判断され、このステップＳ10において四角形領域Ｓ１は、メモリ３２ａから削除されることとなる。
【００３７】
ステップＳ11では、ステップＳ10での四角形領域の削除に続き、メモリ３２ａ内に四角形領域が記憶されていないか否かを判断する。YES（四角形領域の記憶なし）の場合には、矢印画像の検出が適切に行われなかったとしてステップＳ１に戻る。NO（四角形領域の記憶あり）の場合には、ステップＳ６へ戻って矢印画像の検出を継続する。
【００３８】
ステップＳ12では、ステップＳ９での距離画像の検出エラーなしとの判断に続き、ステップＳ７にて検出した矢印画像によって示された進行方向情報を、道路分岐地点での進行方向を示す経路案内情報として認識し、ステップＳ13へ進む。
ここで、進行方向情報は、矢印画像の先端の向きに基づいて認識する。
【００３９】
ステップＳ13では、ステップＳ12での進行方向情報の認識に続き、ステップＳ８にて検出した距離画像によって示された距離情報を、現在の自車両位置から道路分岐地点までの距離を示す経路案内情報として認識し、ステップＳ14へ進む。
ここで、距離情報は、距離画像内の数字表示及び距離単位表示に基づいて認識する。
【００４０】
ステップＳ14は、ステップＳ13での距離情報の認識に続き、ステップＳ12にて認識した進行方向情報と、ステップＳ13にて認識した距離情報とを、ヘッドアップディスプレイ３４ｂに表示し、リターンへ進む。
ここで、ヘッドアップディスプレイ３４ｂへの表示形式は、予め設定された仕様に基づいて設定される。つまり、ヘッドアップディスプレイ３４ｂに設定された表示様式にて表示される。
【００４１】
次に、作用を説明する。
まず、「比較例の車両用表示装置の構成と課題」を説明し、続いて、実施例１の車両用表示装置における「情報表示作用」を説明する。
【００４２】
［比較例の車両用表示装置の構成と課題］
近年、携帯端末の機能は高度に発達し、電話をかける、メールをする、音楽やウェブブラウジングを楽しむ等の機能に加え、ＧＰＳを用いたナビゲーション機能を備えるものも普及している。一方、携帯端末でこれらの機能を実現するためには、アプリケーションと呼ばれるソフトウエアが不可欠であり、ナビゲーション機能を実現するためにはいわゆるナビアプリケーションが必要である。
【００４３】
ここで、ナビアプリケーションには様々な種類が存在し、「ＧＰＳを用いたナビゲーション機能を実現する」という目的は同じであるものの、アプリケーションごとに端末ディスプレイにおける表示形式や、表示される情報の種類（内容）が異なっている。さらに、同じ概念を示す情報データ（例えば「交差点を右折」という概念を示す情報データ）であっても、アプリケーションごとにデータ形式が異なっている。
【００４４】
これに対し、携帯端末によって作成した画像、つまり端末ディスプレイに表示されている画像を、そのまま画像データとして送信して車載表示器に表示する車両用表示装置が考えられている。この比較例の車両用表示装置では、ナビアプリケーションが異なっていて、情報データのデータ形式が違う場合であっても、画像データを送信することで、車載表示器においても端末ディスプレイと同じ画像を表示することができる。
【００４５】
しかしながら、車両用表示装置の車載表示器が、ヘッドアップディスプレイのようなドライバーの視界内に表示画面が設定されるものでは、表示される情報が多すぎると、ドライバーの視界の邪魔になったり、ドライバーが情報を把握する間の前方視認性が低下したりする問題がある。そのため、端末ディスプレイに表示されている情報の中から、必要な情報だけを抽出して車載表示器に表示させたいというニーズがある。
【００４６】
しかし、上述のように、同じ概念を示す情報データであっても、アプリケーションごとにデータ形式が異なっているため、車載表示器側で各アプリケーションに対応したデータベース（情報データと当該情報データが示す概念とを関係付けたデータベース）を持っていなければ、携帯端末側から情報データを受信しても、情報データが示す概念を認識することができず、車載表示器で適切な表示を行うことができなかった。
すなわち、比較例の車両用表示装置では、携帯端末側のアプリケーションが異なると、情報データを認識できず、必要な情報を車載表示器で表示することができないという問題があった。
【００４７】
［情報表示作用］
携帯端末１０の端末ディスプレイ１４に表示されたナビ画像から必要な情報を抽出し、ヘッドアップディスプレイ３４ｂに表示させる実施例１の車両用表示装置３０における情報表示作用を説明する。
【００４８】
まず、図３に示すフローチャートにおいて、ステップＳ１→ステップＳ２へと進み、ナビ画像を取り込む。ここでは、端末ディスプレイ１４に表示されたナビ画像は、車載モニタ装置２０の車載ディスプレイ２３に送信され、この車載ディスプレイ２３にも表示されている。そのため、この車載ディスプレイ２３に表示されたナビ画像をカメラ３１ａによって撮影する。そして、撮影した画像を、画像格納部３１ｂに格納することで、ナビ画像を取り込む（図４Ａ参照）。
【００４９】
次に、ステップＳ３へと進んで、取り込んだナビ画像から四角形領域を探索する。探索の結果検出された四角形領域の情報は、メモリ３２ａに記憶される。そして、ステップＳ４→ステップＳ５へと進み、探索エラーが発生しない限り、ナビ画像の全域を探索する。なお、このとき検出された四角形領域は、図４Ｂにおいて「Ｓ」又は「ＳＡ」で示す。
【００５０】
そして、ナビ画像の全域において四角形領域の探索が完了したら、ステップＳ６→ステップＳ７へと進み、メモリ３２ａに記憶した四角形領域のうち、ナビ画像内で最左側であって最上部に位置する四角形領域、すなわち、図４Ｃにおける四角形領域Ｓ１を選択する。そして、この選択した四角形領域である四角形領域Ｓ１内に矢印画像が一つだけ存在するか否かを判断する。
ここでは、この四角形領域Ｓ１には矢印画像が存在しないため、ステップＳ10と進み、メモリ３２ａから四角形領域Ｓ１を削除する。これにより、メモリ３２ａ内に記憶された四角形領域は、図４Ｄに示す状態となる。そして、ステップＳ11へと進んで、メモリ３２ａ内に四角形領域の記憶がないか否かを判断する。この場合では、図４Ｃに示すように、四角形領域は記憶されているので、ステップＳ６へと進んで再びナビ画像内で最左側であって最上部に位置する四角形領域、すなわち、図４Ｃにおける四角形領域Ｓ２を選択する。
【００５１】
そして、ステップＳ７へと進んで、この選択した四角形領域である四角形領域Ｓ２内に矢印画像が一つだけ存在するか否かを判断する。
ここで、この四角形領域Ｓ２には矢印画像が一つだけ存在するので、ステップＳ８へと進み、存在を検出した矢印画像Ｙ（図４Ｃ参照）から最も近い位置に表示された距離画像（図４Ｃにおいて「Ｋ」で示す）を検出する。
【００５２】
矢印画像Ｙと距離画像Ｋを検出したら、ステップＳ９→ステップＳ12→ステップＳ13と進み、矢印画像Ｙによって示された方向情報（ここでは「右折」）を、道路分岐地点での進行方向を示す経路案内情報として認識する。また、距離画像Ｋによって示された距離情報（ここでは「１９０メートル」）を、現在の自車両位置から道路分岐地点までの距離を示す経路案内情報として認識する。最後に、ステップＳ14へと進んで、この認識した経路案内情報（「右折」「１９０メートル」）をヘッドアップディスプレイ３４ｂに表示する。なお、このときのヘッドアップディスプレイ３４ｂによって表示される虚像を図５に示す。
【００５３】
このように、実施例１の車両用表示装置３０では、携帯端末１０によって作成され、車載モニタ装置２０の車載ディスプレイ２３に表示されたナビ画像を取り込み、取り込んだナビ画像を画像処理することによって、このナビ画像に表示されている経路案内情報を認識する。そして、必要な情報をヘッドアップディスプレイ３４ｂに表示させる。つまり、実施例１の車両用表示装置３０では、携帯端末１０や車載モニタ装置２０から、データとして経路案内情報を受信するわけではなく、表示されたナビ画像から必要な情報を把握する。
これにより、携帯端末１０に搭載されたナビアプリケーションが異なり、同じ概念を示す経路案内情報のデータ形式が異なっていても、車載ディスプレイ２３に表示されている経路案内情報を適切に認識して、ヘッドアップディスプレイ３４ｂに表示させることができる。
【００５４】
また、この実施例１では、まずナビ画像（図４Ａ参照）から所定形状の画像領域である四角形領域Ｓ,ＳＡ（図４Ｂ参照）を検出する。そして、この四角形領域Ｓ,ＳＡごとにナビ画像内に表示された矢印画像Ｙ（図４Ｃ参照）の探索を行う。そのため、矢印画像Ｙの探索範囲を限定することができて、矢印画像Ｙの誤検出を防止することができる。また、ナビ画像の全域を一度に探索することがないため、探索負荷の軽減を図ることができる。
【００５５】
なお、実施例１では、画像領域の形状を、四本の直線状の境界線を有し、四つの角部の内角が等しい四角形領域Ｓ,ＳＡとし、隣接する辺が直交方向に伸びていない平行四辺形形状やひし形形状の領域ＳＢ（図４Ｂ参照）を除外している。これにより、矢印画像Ｙの誤検出をさらに抑制することができる。
【００５６】
さらに、実施例１では、ナビ画像から検出した四角形領域Ｓ,ＳＡを、予め設定した探索方向、つまりナビ画像の左上側から水平方向に沿って順に選択する。これにより、矢印画像Ｙの探索が、上記探索方向に沿って行われることになり、矢印画像Ｙの探索を効率的に行うことができる。
そして、矢印画像Ｙを検出したら、メモリ３２ａに四角形領域Ｓ,ＳＡが記憶されていても、すなわち、矢印画像Ｙを未探索の四角形領域Ｓ,ＳＡが残っていても距離画像Ｋの検出を行う。そのため、矢印画像Ｙの探索負荷を軽減し、画像処理速度の向上を図ることができる。
【００５７】
そして、この実施例１では、ナビ画像に表示された矢印画像Ｙと距離画像Ｋを検出し、矢印画像Ｙによって示された方向を、道路分岐地点での進行方向を示す経路案内情報として認識する。また、距離画像Ｋによって示された距離情報を、現在の自車両位置から道路分岐地点までの距離を示す経路案内情報として認識する。そして、この道路分岐地点での進行方向と、道路分岐地点までの距離を、ヘッドアップディスプレイ３４ｂに表示する。
これにより、ターンバイターンに必要な情報だけをナビ画像から抽出してヘッドアップディスプレイ３４ｂに表示することができ、ドライバーに必要な情報を簡潔に伝達することができる。
【００５８】
しかも、この実施例１では、ナビ画像を画像処理することによって認識した上記経路案内情報（道路分岐地点での進行方向と、道路分岐地点までの距離）を、ドライバーの前方に投影された投影光をフロントガラス３５ｂで反射させ、ドライバーの前方に虚像を結像させるヘッドアップディスプレイ３４ｂに表示する。
これにより、運転中のドライバーの視線移動を抑制しつつ、ドライバーに必要な経路案内情報を認識させることができる。
【００５９】
また、ヘッドアップディスプレイ３４ｂに上記経路案内情報を表示する際、このヘッドアップディスプレイ３４ｂに設定された表示様式によって表示する（図５参照）。このため、携帯端末１０に搭載されたナビアプリケーションが違うために、ナビ画面が異なっていても、ヘッドアップディスプレイ３４ｂに表示される表示様式は統一される。これにより、ドライバーが経路案内情報を認識しやすくなる。
【００６０】
次に、効果を説明する。
実施例１の車両用表示装置３０にあっては、下記に列挙する効果を得ることができる。
【００６１】
(1) 画像表示機器（車載モニタ装置２０）によって表示された地図情報及び経路案内情報を含む画像（ナビ画像）を取り込む画像取込部３１と、
前記画像取込部３１によって取り込まれた画像（ナビ画像）から、所定の経路案内情報を示す情報表示画像（矢印画像Ｙ、距離画像Ｋ）を検出する情報画像検出部３２と、
前記情報画像検出部３２によって検出された情報表示画像（矢印画像Ｙ、距離画像Ｋ）が示す経路案内情報（道路分岐地点での進行方向、道路分岐地点までの距離）を認識する情報認識部３３と、
前記情報認識部３３によって認識された経路案内情報（道路分岐地点での進行方向、道路分岐地点までの距離）を車載表示器（ヘッドアップディスプレイ３４ｂ）に表示する情報表示部３４と、
を備える構成とした。
これにより、画像表示機器（車載モニタ装置２０）によって表示された経路案内情報を適切に認識し、車載表示器（ヘッドアップディスプレイ３４ｂ）に表示することができる。
【００６２】
(2) 前記情報画像検出部３２は、前記情報表示画像（矢印画像Ｙ）の探索を、前記画像（ナビ画像）の中から識別した所定形状の画像領域（四角形領域Ｓ,ＳＡ）ごとに行う構成とした。
これにより、情報表示画像（矢印画像Ｙ）の誤検出を防止すると共に、探索負荷を抑制することができる。
【００６３】
(3) 前記情報画像検出部３２は、前記情報表示画像（矢印画像Ｙ）の探索をあらかじめ設定した探索方向に沿って行い、前記情報表示画像（矢印画像Ｙ）を検出したら前記情報表示画像（矢印画像Ｙ）の探索を中止する構成とした。
これにより、情報表示画像（矢印画像Ｙ）を効率的に探索することができると共に、探索負荷の軽減を図ることができる。
【００６４】
(4) 前記情報画像検出部３２は、前記画像（ナビ画像）に表示された矢印画像Ｙ及び距離画像Ｋを検出し、
前記情報認識部３３は、前記矢印画像Ｙによって示された方向を道路分岐地点での進行方向を示す経路案内情報として認識し、前記距離画像Ｋによって示された距離を前記道路分岐地点までの距離を示す経路案内情報として認識し、
前記情報表示部３４は、前記道路分岐地点での進行方向と前記道路分岐地点までの距離を、前記車載表示器（ヘッドアップディスプレイ３４ｂ）に表示する構成とした。
これにより、ターンバイターンに必要な情報を抽出して車載表示器（ヘッドアップディスプレイ３４ｂ）に表示させることができる。
【００６５】
(5) 前記車載表示器を、ドライバーの前方に投影された投影光を反射性部材（フロントガラス３５ｂ）で反射させ、ドライバーの前方に虚像を結像させるヘッドアップディスプレイ３４ｂとする構成とした。
これにより、運転中のドライバーの視線移動を抑制しつつ、ドライバーに必要な経路案内情報を認識させることができる。
【００６６】
以上、本発明の車両用表示装置を実施例１に基づき説明してきたが、具体的な構成については、この実施例に限られるものではなく、特許請求の範囲の各請求項に係る発明の要旨を逸脱しない限り、設計の変更や追加等は許容される。
【００６７】
実施例１の車両用表示装置３０では、携帯端末１０で作成したナビ画像を端末ディスプレイ１４に表示すると共に、車載モニタ装置２０の車載ディスプレイ２３にも表示する。そして、この車載ディスプレイ２３に表示されたナビ画像を、カメラ３１ａによって撮影することで、ナビ画像を取り込んでいる。しかしながら、これに限らず、例えば、図６に示すように、携帯端末１０の端末ディスプレイ１４に表示されたナビ画像を、車両用表示装置３０のカメラ３１ａによって撮影することで、このナビ画像を取り込んでもよい。
【００６８】
また、図７に示すように、車両用表示装置３０の画像取込部３１が、カメラ３１ａに替えてビデオキャプチャーボード３１ｃを有しており、車載モニタ装置２０のモニタ制御部２２と、このビデオキャプチャーボード３１ｃとを通信線Ｘによって接続する。そして、モニタ制御部２２から出力された画像データを、ビデオキャプチャーボード３１ｃによって取り込み、画像格納部３１ｂに格納することで、ナビ画像を取り込んでもよい。
【００６９】
さらに、実施例１の車両用表示装置３０は、携帯端末１０によって作成されたナビ画像を画像処理することで、必要な経路案内情報を認識しているが、これに限らない。例えば、図８に示すように、車両に搭載されたカーナビゲーション装置４０によって作成され、車載ディスプレイ４４に表示されたナビ画像を取り込んでもよい。
この場合では、まず、カーナビゲーション装置４０のカーナビ制御部４２によって、ＧＰＳ受信部４１から入力された位置情報と、カーナビメモリ４３から入力された地図情報、図示しない操作部により設定された目的地情報等に基づき、自車両の現在位置から目的地までの案内経路を示す地図情報及び経路案内情報を含む画像（ナビ画像）を作成する。このナビ画像は、画像出力部４５から通信線Ｘを介して車載ディスプレイ４４に入力され、この車載ディスプレイ４４に表示される。一方、通信線Ｘには、車両用表示装置３０のビデオキャプチャーボード３１ｃが接続されている。そのため、画像出力部４５から送信された画像データはビデオキャプチャーボード３１ｃにも入力され、ナビ画像は画像格納部３１ｂへと格納される。
【００７０】
そして、実施例１では、情報表示画像として矢印画像Ｙ及び距離画像Ｋを検出し、矢印画像Ｙによって示された方向を、道路分岐地点での進行方向を示す経路案内情報として認識し、距離画像Ｋによって示された距離情報を、現在の自車両位置から道路分岐地点までの距離を示す経路案内情報として認識する例を示したが、これに限らない。
例えば、情報表示画像として、目的地到着予想時刻を示す画像や、目的地までの残距離を示す画像、自車両の周囲地点名称を示す画像を取り込み、到着予想時刻情報や残距離情報、地点名称情報を、経路案内情報として認識してもよい。また、矢印画像Ｙのみを検出し、道路分岐地点での進行方向を示す経路案内情報のみを表示するものであってもよい。
すなわち、認識する経路案内情報としては、任意に設定することができる。
【００７１】
また、実施例１では、経路案内情報をヘッドアップディスプレイ３４ｂに表示させる例を示したが、これに限らない。例えば、携帯端末１０によって作成され、端末ディスプレイ１４に表示されたナビ画像を取り込み、画像処理によって必要な経路案内情報を認識したら、車載モニタ装置２０の車載ディスプレイ２３に必要な情報だけを表示するようにしてもよい。この場合、「画像表示機器」が携帯端末１０となり、「車載表示器」が車載ディスプレイ２３となる。
【符号の説明】
【００７２】
１０  携帯端末
２０  車載モニタ装置（画像表示機器）
２３  車載ディスプレイ
３０  車両用表示装置
３１  画像取込部
３１ａ  カメラ
３１ｂ  画像格納部
３２  情報画像検出部
３３  情報認識部
３４  情報表示部
３４ａ  情報出力部
３４ｂ  ヘッドアップディスプレイ（車載表示器）
【図１】
2017072520.tif 000003
【図２】
2017072520.tif 000004
【図３】
2017072520.tif 000005
【図４Ａ】
2017072520.tif 000006
【図４Ｂ】
2017072520.tif 000007
【図４Ｃ】
2017072520.tif 000008
【図４Ｄ】
2017072520.tif 000009
【図５】
2017072520.tif 000010
【図６】
2017072520.tif 000011
【図７】
2017072520.tif 000012
【図８】
2017072520.tif 000013