(57)【要約】  本発明の運転支援画像生成装置は、道路又は道路周辺に掲示された掲示物の掲示内容を示す画像の文字を認識する文字認識部と、文字認識部により認識された文字とこの文字に関連する運転支援情報とに基づいて、掲示物の画像を運転支援情報に対応する画像に変更した運転支援画像を生成する画像処理部とを備える。
2015071923.tif 000002
【特許請求の範囲】
【請求項１】
道路又は道路周辺に掲示された掲示物の掲示内容を示す画像の文字を認識する文字認識部と、
前記文字認識部により認識された文字とこの文字に関連する運転支援情報とに基づいて、前記掲示物の画像を前記運転支援情報に対応する画像に変更した運転支援画像を生成する画像処理部と
を備える運転支援画像生成装置。
【請求項２】
前記掲示物の掲示内容を示す画像として、撮像装置により撮像された画像を用いることを特徴とする請求項１に記載の運転支援画像生成装置。
【請求項３】
前記運転支援情報は、車両の目的地又は経由地であって、
前記画像処理部は、前記文字認識部により認識された文字のうち前記車両の目的地又は経由地に該当する文字を強調した運転支援画像を生成することを特徴とする請求項１に記載の運転支援画像生成装置。
【請求項４】
前記運転支援情報は、車両の位置情報であって、
前記位置情報を用いて前記掲示物の掲示位置に対する車両の移動距離を算出する距離算出部を備え、
前記画像処理部は、
前記文字認識部により認識された文字が距離を示す文字である場合に、前記車両の移動距離に応じて前記距離を示す文字を変更した運転支援画像を生成することを特徴とする請求項１に記載の運転支援画像生成装置。
【請求項５】
前記運転支援情報は、車両に関する情報を示す車両情報であって、
前記文字認識部により認識された文字が前記車両情報に該当するかを判定する車両情報判定部を備え、
前記画像処理部は、
前記車両情報判定部により前記車両情報に該当すると判定された文字を強調した運転支援画像を生成することを特徴とする請求項１に記載の運転支援画像生成装置。
【請求項６】
前記運転支援情報は、現在時刻を示す時刻情報であって、
前記文字認識部により認識された文字が時間帯を示す文字である場合に、前記時間帯に前記現在時刻が含まれるかを判定する時間判定部を備え、
前記画像処理部は、
前記時間判定部により前記現在時刻が含まれると判定された文字を強調した運転支援画像を生成することを特徴とする請求項１に記載の運転支援画像生成装置。
【請求項７】
前記画像処理部により生成された運転支援画像の画質を判定する画質判定部を備え、
前記画像処理部は、
前記運転支援画像の画質が前記画質判定部に設定された閾値よりも低いと判定された場合に、前記文字認識部により認識された文字を強調した運転支援画像を生成することを特徴とする請求項２に記載の運転支援画像生成装置。
【請求項８】
道路又は道路周辺に掲示された掲示物の掲示内容を示す画像の文字と、この文字に関連する運転支援情報とに基づいて、前記掲示物の画像を前記運転支援情報に対応する画像に変更した運転支援画像を表示する表示部を備える運転支援画像表示装置。
【請求項９】
前記表示部は、
前記掲示物の掲示内容を示す画像として、撮像装置により撮像された画像を用いることを特徴とする請求項８に記載の運転支援画像表示装置。
【請求項１０】
前記運転支援情報は、車両の目的地又は経由地であって、
前記表示部は、前記掲示物の画像の文字のうち前記車両の目的地又は経由地に該当する文字を強調した運転支援画像を表示することを特徴とする請求項８に記載の運転支援画像表示装置。
【請求項１１】
前記運転支援情報は、車両に関する情報を示す車両情報であって、
前記表示部は、
前記掲示物の画像の文字が前記車両情報に該当する文字である場合に、
前記掲示物の画像の文字を強調した運転支援画像を表示することを特徴とする請求項１に記載の運転支援画像表示装置。
【請求項１２】
前記運転支援情報は、車両の位置情報であって、
前記表示部は、
前記掲示物の画像の文字が距離を示す文字である場合に、
前記掲示物の掲示位置に対する前記車両の移動距離に応じて前記距離を示す文字を変更した運転支援画像を表示することを特徴とする請求項８に記載の運転支援画像表示装置。
【請求項１３】
前記運転支援情報は、現在時刻を示す時刻情報であって、
前記表示部は、
前記掲示物の画像の文字が時間帯を示す文字であって、
前記時間帯に前記現在時刻が含まれる場合に前記掲示物の画像の文字を強調した運転支援画像を表示することを特徴とする請求項８に記載の運転支援画像表示装置。
【請求項１４】
前記表示部は、
前記撮像装置により撮像された画像の画質が設定された閾値よりも低い場合に、前記撮像装置により撮像された画像の文字を強調した運転支援画像を表示することを特徴とする請求項９に記載の運転支援画像表示装置。
【請求項１５】
前記表示部は、
搭乗者が前記掲示物を認識していない場合に、前記運転支援画像を表示することを特徴とする請求項８に記載の運転支援画像表示装置。
【請求項１６】
道路又は道路周辺に掲示された掲示物を撮像する撮像装置と、
前記撮像装置により撮像された前記掲示物の掲示内容を示す画像の文字を認識する文字認識部、及び前記文字認識部により認識された文字とこの文字に関連する運転支援情報とに基づいて前記掲示物の画像を前記運転支援情報に対応する画像に変更した運転支援画像を生成する画像処理部を備える運転支援画像生成装置と、
前記運転支援画像生成装置によって生成された運転支援画像を表示する表示部と
を備えることを特徴とする運転支援画像表示システム。
【請求項１７】
道路又は道路周辺に掲示された掲示物の掲示内容を示す画像の文字を認識する文字認識処理と、
前記文字認識処理により認識された文字とこの文字に関連する運転支援情報とに基づいて、前記掲示物の画像を前記運転支援情報に対応する画像に変更した運転支援画像を生成する画像処理とをコンピュータに実行させる運転支援画像生成プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、道路上又は道路周辺の掲示物を車内の表示部に表示することで運転を支援する運転支援画像生成装置、運転支援画像表示装置、運転支援画像表示システム、及び運転支援画像生成プログラムに関するものである。
【背景技術】
【０００２】
道路には、制限速度や駐車禁止等の情報を示す交通標識が掲示されている。この交通標識を車両の搭乗者は目視によって認識するが、視線を交通標識に移す必要があり、搭乗者は交通標識を見逃すことがしばしばある。搭乗者がこのような交通標識を見落とした場合に見落とした交通標識を確認できるように、車両に設置されたカメラによって道路の前方風景の画像を取得し、取得した画像から交通標識を認識して表示部に表示する技術が考案されている（例えば、特許文献１）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特公平４−５２３９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１に記載された技術は、カメラによって撮像した交通標識の画像を表示部に表示するのみである。したがって、搭乗者にとって不必要な情報までも表示することとなり、車両の状況に合った画像表示がされず、快適な運転を阻害してしまうという課題があった。【０００５】
本発明は、上記のような課題を解決するため、交通標識等の掲示物を表示する際に、車両の状況に合った画像を提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の運転支援画像生成装置は、道路又は道路周辺に掲示された掲示物の掲示内容を示す画像の文字を認識する文字認識部と、前記文字認識部により認識された文字とこの文字に関連する運転支援情報とに基づいて、前記掲示物の画像に関する表示を前記運転支援情報に対応する表示に変更した運転支援画像を生成する画像処理部とを備えることを特徴とする。【０００７】
本発明の運転支援画像表示装置は、道路又は道路周辺に掲示された掲示物の掲示内容を示す画像の文字と、この文字に関連する運転支援情報とに基づいて、前記掲示物の画像を前記運転支援情報に対応する画像に変更した運転支援画像を表示する表示部を備えることを特徴とする。【０００８】
本発明の運転支援画像表示システムは、道路又は道路周辺に掲示された掲示物を撮像する撮像装置と、前記撮像装置により撮像された前記掲示物の掲示内容を示す画像の文字を認識する文字認識部、及び前記文字認識部により認識された文字とこの文字に関連する運転支援情報とに基づいて前記掲示物の画像を前記運転支援情報に対応する画像に変更した運転支援画像を生成する画像処理部を備える運転支援画像生成装置と、前記運転支援画像生成装置によって生成された運転支援画像を表示する表示部とを備えることを特徴とする。【０００９】
本発明の運転支援画像生成プログラムは、道路又は道路周辺に掲示された掲示物の掲示内容を示す画像の文字を認識する文字認識処理と、前記文字認識処理により認識された文字とこの文字に関連する運転支援情報とに基づいて、前記掲示物の画像を前記運転支援情報に対応する画像に変更した運転支援画像を生成する画像処理とをコンピュータに実行させることを特徴とする。
【発明の効果】
【００１０】
本発明に係る運転支援画像生成装置、運転支援画像表示装置、運転支援画像表示システム、及び運転支援画像生成プログラムは、掲示物の文字に関連する運転支援情報に基づいて表示する画像中の掲示物の内容を変更するので、車両の状況に合った運転支援画像を提供することができ、掲示物の内容についての搭乗者の認識を助けることができる。
【図面の簡単な説明】
【００１１】
【図１】実施の形態１に係る運転支援画像表示システムの構成図である。
【図２】実施の形態１に係る運転支援画像表示システムの構成図であり、運転支援画像生成装置の構成を詳細に示す図である。
【図３】実施の形態１に係る掲示物認識処理部のパターンマッチングを説明する図である。
【図４】実施の形態１に係る運転支援画像表示システムの動作フローチャートである。
【図５】実施の形態１に係る撮像装置が撮像する撮像画像の例である。
【図６】実施の形態１に係る掲示物認識処理部が切り出した切り出し画像の例である。
【図７】実施の形態１に係る画像処理部によって文字を強調する変更がなされた切り出し画像の例である。
【図８】実施の形態１に係る表示部に表示される運転支援画像選択画面の例である。
【図９】実施の形態２に係る運転支援画像表示システムの構成図であり、運転支援画像生成装置の構成を詳細に示す図である。
【図１０】実施の形態２に係る運転支援画像表示システムの動作フローチャートである。
【図１１】実施の形態２に係る運転支援画像表示システムにおける車両移動距離と生成する運転支援画像との関係を説明する図である。
【図１２】実施の形態２に係る運転支援画像表示システムが動作する前提条件を説明する図である。
【図１３】実施の形態３に係る運転支援画像表示システムが掲示物に表記された距離を示す文字を書き換える例である。
【図１４】実施の形態３に係る運転支援画像表示システムの動作フローチャートである。
【図１５】実施の形態３に係る運転支援画像表示システムにおいて、分岐点までの距離と分岐点から掲示物に表記された地域までの距離とが表記された掲示物を撮像した場合の例である。
【図１６】実施の形態４に係る運転支援画像表示システムが撮像する掲示物と表示する掲示物との関係を示す図である。
【図１７】実施の形態４に係る運転支援画像表示システムの構成図であり、運転支援画像生成装置の構成を詳細に示す図である。
【図１８】実施の形態４に係る運転支援画像表示システムの動作フローチャートである。
【図１９】実施の形態５に係る運転支援画像表示システムの構成図であり、運転支援画像生成装置の構成を詳細に示す図である。
【図２０】実施の形態５に係る運転支援画像表示システムの動作フローチャートである。
【図２１】実施の形態５に係る運転支援画像表示システムによる変更前後の運転支援画像を示す図である。
【図２２】実施の形態６に係る運転支援画像表示システムの構成図であり、運転支援画像生成装置の構成を詳細に示す図である。
【発明を実施するための形態】
【００１２】
実施の形態１．
以下、図１を用いて、本発明の実施の形態１に係る運転支援画像表示システムの構成について説明する。
【００１３】
実施の形態１に係る運転支援画像表示システムは、撮像装置１、ナビゲーション装置２、表示部３、運転支援画像生成装置４を備える。撮像装置１とナビゲーション装置２と表示部３と運転支援画像生成装置４とは、車載ＬＡＮ５によって有線又は無線で接続される。なお、表示部３と運転支援画像生成装置４とで運転支援画像表示装置が構成される。
【００１４】
撮像装置１は、車両の前方外部に取り付けられたカメラであり、道路上又は道路周辺の掲示物を含む風景画像を撮像し、画像として取得する。ここで、掲示物とは、車両が走行する道路上又は道路周辺に設置された交通標識、店の看板、又は道路上にペイントされた文字等であって、少なくとも文字が表記されたものをいう。撮像装置１は、道路に掲示された掲示物を予め決められた時間間隔で撮像し、撮像した画像に関する情報を運転支援画像生成装置４に出力する。なお、撮像装置１は、予め決められた時間間隔で掲示物を含む風景画像を撮像するものに限られず、掲示物が撮像装置１の撮像範囲に現れた場合に撮像するように構成してもよい。また、撮像装置１の取り付け位置は、図１のように車両の前方外部としたが、道路上及び道路周辺の掲示物を撮像できる位置であればよく、車両内部から車両外部を撮像するように設けられていてもよい。以下の説明において、撮像装置１によって取得した掲示物を含む風景の画像を撮像画像とする。
【００１５】
ナビゲーション装置２は、ＧＰＳ（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｎｇ  ｓｙｓｔｅｍ）等により車両の位置を特定する位置特定手段（図示せず）と、設定された目的地又は経由地まで車両を案内する案内手段（図示せず）を備え、搭乗者によって目的地及び経由地が設定されることで、車両を目的地及び経由地まで案内する。後述する運転支援画像生成装置４は、ナビゲーション装置２から目的地、経由地、車両の位置に関する情報を取得することができる。
【００１６】
表示部３は、車両のスピードメーター、タコメーター、燃料計など、車両の走行に必要な情報を示す計器類が配置されるインストルメントパネルであり、後述する運転支援画像生成装置４から画像の情報を受けて、対応する画像を表示する。インストルメントパネルは、これまで機械式のメータが主流であったが、近年、液晶表示装置等の低価格化、大画面化により、機械式から非機械式のディスプレイへの置き換えが進んでいる。これにより、インストルメントパネルは、表示する内容の自由度が増し、後述する運転支援画像を表示することが可能となり、特に利便性が高まっている。なお、表示部３は、インストルメントパネルに限られず、画像を表示できるものであればよい。例えば、表示部３は、ナビゲーション装置２の案内表示を表示するモニターでもよいし、車両のフロントガラス手前に設置されるヘッドアップディスプレイでもよい。
【００１７】
運転支援画像生成装置４は、撮像装置１で取得した撮像画像から掲示物を切り出し、切り出した掲示物の画像を運転支援情報に対応した画像に変更し、表示部３に表示させる。なお、運転支援情報とは、車両の走行を支援するための情報であり、掲示物に表記された変更の対象となる文字に関連する情報である。例えば、運転支援情報は、ナビゲーション装置２に設定された目的地又は経由地、車両の位置、時刻、自車の車両タイプ等の車両情報に関する情報である。本実施の形態においては、掲示物に表記された建物、地名、又は地域等を示す文字に関連する情報としてナビゲーション装置２に設定された目的地又は経由地を運転支援情報とする。
【００１８】
車載ＬＡＮ５は、撮像装置１、ナビゲーション装置２、表示部３、運転支援画像生成装置４とを有線又は無線で接続する。撮像装置１、ナビゲーション装置２、表示部３、運転支援画像生成装置４は車載ＬＡＮ５を介して情報のやりとりを行う。
【００１９】
ここで、図２を用いて運転支援画像生成装置４の構成について詳細に説明する。図２は、実施の形態１に係る運転支援画像表示システムの構成図であり、運転支援画像生成装置４を詳細に示すものである。
【００２０】
運転支援画像生成装置４は、掲示物認識処理部４１、切り出し画像記憶部４２、文字認識部４３、文字判定部４４、画像処理部４５、運転支援画像記憶部４６を備える。なお、図２に示す掲示物認識処理部４１、文字認識部４３、文字判定部４４、及び画像処理部４５は、ハードウェアによって構成されても良いし、コンピュータに所定のプログラムを実行させることによっても実現できる。
【００２１】
掲示物認識処理部４１は、撮像装置１で取得した撮像画像から掲示物を認識し、この掲示物に該当する領域を切り出す。掲示物の認識には、パターンマッチング等の方法を用いる。具体的には、掲示物認識処理部４１は、予め掲示物に関する情報が登録され、撮像装置１から取得した撮像画像と登録された掲示物の形状及び色を照合することによって、掲示物を認識する。例えば、図３に示すような青色で長方形の掲示物を含む撮像画像が撮像装置１により撮像された場合、掲示物認識処理部４１は、予め登録した掲示物のパターンから青色かつ長方形のものを検索する。掲示物認識処理部４１は、検索の結果、青色かつ長方形に該当するパターンが抽出された場合に、撮像画像の青色で長方形のものを掲示物と認識する。掲示物を認識した場合、掲示物認識処理部４１は、掲示物と認識した図形の領域を切り出す。なお、以下の説明において、掲示物認識処理部４１が撮像画像から切り出した画像を切り出し画像とする。
【００２２】
切り出し画像記憶部４２は、掲示物認識処理部４１で切り出した切り出し画像の情報を記憶する。なお、掲示物認識処理部４１は、識別子と切り出し画像の情報とを対応づけて記憶する。識別子は、記憶した画像を識別する情報であり、例えば、撮像時の時刻、撮像時の車両の位置、撮像した順番を示す番号等でもよい。以降、運転支援画像表示システムの処理において、切り出し画像の情報のやりとりを行う場合、この識別子で切り出し画像を識別できるものとする。
【００２３】
文字認識部４３は、切り出し画像記憶部４２から切り出し画像の情報を読み出して、切り出し画像の文字を認識する。文字の認識には、例えば、予め記憶された文字のパターンとの照合により文字を特定するＯＣＲ（Ｏｐｔｉｃａｌ  ｃｈａｒａｃｔｅｒ  ｒｅｃｏｇｎｉｔｉｏｎ）等の技術を用いる。文字認識部４３は、認識した文字の文字情報を文字判定部４４に出力する。ここで、文字情報とは、文字認識部４３によって認識された文字の情報であって、切り出し画像に表記された文字、切り出し画像上で文字が存在する位置、切り出し画像の識別子が含まれる。したがって、運転支援画像表示システムの各構成は、文字情報により、文字、文字の位置、及びこの文字が表記された切り出し画像を特定することができる。
【００２４】
なお、文字認識部４３が切り出し画像記憶部４２から切り出し画像を読み出すタイミングは、後述する操作入力装置６を搭乗者が操作したタイミングでもよいし、掲示物認識処理部４１により切り出し画像記憶部４２に切り出し画像が記憶されたタイミングでもよい。また、切り出し画像記憶部４２に複数の切り出し画像が記憶されている場合、文字認識部４３は、最新の切り出し画像を読み出してもよいし、操作入力装置６により搭乗者が時間又は場所を指定することにより、この時間や場所を示す識別子が対応づけられた切り出し画像を読み出すように構成してもよい。
【００２５】
文字判定部４４は、文字認識部４３で認識した文字の内容がナビゲーション装置２に設定された目的地又は経由地に該当するか否かを判定する。文字判定部４４は、文字認識部４３で認識した文字がナビゲーション装置２に設定された目的地又は経由地に該当する場合には、画像処理部４５に該当した文字の文字情報を出力する。
【００２６】
文字認識部４３で認識した文字が目的地又は経由地に該当するか否かの判定方法は、例えば、ナビゲーション装置２に設定された文字に文字認識部４３で認識した文字が含まれるか否かで判定する。なお、判定方法はこれに限られず、該当するか否かを判定できればよい。例えば、文字認識部４３で認識した文字と、設定された目的地又は経由地の文字とが所定の割合で一致する場合に該当すると判定してもよい。
【００２７】
画像処理部４５は、文字判定部４４から文字情報を受けて、切り出し画像の内容を変更する。ここでいう変更とは、文字の強調、強調表示の付加、文字の書き換え、切り出し画像の画質の変更、色の変更等、撮像した掲示物の画像の内容を変更することをいう。また、文字の強調とは、文字サイズの拡大、文字の輝度の変更、文字色の変更、文字の点滅等を含む。また、画像処理部４５は変更した切り出し画像の情報を運転支援画像記憶部４６に記憶する。なお、以下の説明において、画像処理部４５によって変更された切り出し画像を運転支援画像とする。
【００２８】
また、運転支援画像記憶部４６に記憶される運転支援画像の情報は、変更前の切り出し画像の情報と同じ識別子を対応づけて記憶することにより識別され、どの切り出し画像から変更された運転支援画像かを識別できるように運転支援画像記憶部４６に記憶される。
【００２９】
操作入力装置６は、搭乗者によって操作されることにより運転支援画像記憶部４６に記憶された運転支援画像を表示部３へ表示させる。操作入力装置６は、図１に示す車両内に設けられ、図２に示す運転支援画像生成装置４に有線又は無線で接続される。また、操作入力装置６は、例えば、操作ボタン、インストルメントパネル又はナビゲーション装置２のディスプレイ等のタッチパネルでもよく、搭乗者の操作によって運転支援画像の表示を指示できるものであればよい。
【００３０】
以下、図４から図８を用いて実施の形態１に係る運転支援画像表示システムの動作（ＳＴ２以降における実施の形態１に係るプログラムの処理手順）を説明する。図４は実施の形態１に係る運転支援画像表示システムの動作フローチャートである。図５は実施の形態１に係る撮像装置が撮像する撮像画像の例である。図６は実施の形態１に係る掲示物認識処理部が切り出した切り出し画像の例である。図７は実施の形態１に係る画像処理部によって文字を強調する変更がなされた切り出し画像の例である。図８は実施の形態１に係る表示部に表示される運転支援画像選択画面の例である。なお、以下の説明において、車両の搭乗者はナビゲーション装置２に目的地として「東京駅」を設定し、東京駅に向かっているものとする。
【００３１】
図４のＳＴ１において、撮像装置１は道路又は道路周辺に掲示された掲示物を撮像する。本実施の形態に係る運転支援画像表示システムの動作の説明において、撮像装置１は、掲示物を撮像し、図５に例示する撮像画像を得たものとする。なお、図５の斜線部は、掲示物の領域以外の背景である。また、図５の破線部内は、掲示物を示す。なお、この例の場合、掲示物は車両の搭乗者に対して建物、地名、又は地域の方向を示す案内標識である。撮像装置１は撮像した撮像画像の情報を運転支援画像生成装置４へ出力する。
【００３２】
ＳＴ２において、掲示物認識処理部４１は、撮像装置１から撮像画像の情報を取得し、掲示物をパターンマッチングにより認識する。また、掲示物認識処理部４１は、パターンマッチングにより掲示物と認識した掲示物の領域（図５の破線部内）を切り出し、切り出し画像（図６）を得る。
【００３３】
ＳＴ３において、掲示物認識処理部４１は、切り出し画像の情報を切り出し画像記憶部４２に記憶する。
【００３４】
ＳＴ４において、文字認識部４３は、切り出し画像記憶部４２から切り出し画像の情報を読み出す。また、文字認識部４３は切り出し画像の文字を認識し、文字情報を得る。具体的には、文字認識部４３は、図５に示す切り出し画像の文字「東京」、「品川」を認識するとともに、認識した文字の切り出し画像上の位置情報を得る。文字認識部４３は、認識した文字と文字の位置情報を含む文字情報を文字判定部４４に出力する。
【００３５】
ＳＴ５において、文字判定部４４は、ナビゲーション装置２に設定した目的地「東京駅」に関する文字の情報をナビゲーション装置２から受ける。また、文字判定部４４は、ナビゲーション装置２に設定した目的地「東京駅」と、文字認識部４３から受けた文字情報で示される文字「東京」、「品川」とを比較する。文字認識部４３から受けた文字情報で示される文字「東京」は、ナビゲーション装置２に設定した目的地「東京駅」に含まれるので、文字判定部４４は、車両の目的地が掲示物に表記された文字に該当すると判定し、文字「東京」の画像中の位置情報が含まれる文字情報を画像処理部４５へ出力する。続いて、運転支援画像表示システムは後述するＳＴ６の処理を実行する。なお、運転支援画像表示システムは、文字認識部４３で認識した文字にナビゲーション装置２に設定した目的地又は経由地が含まれない場合、ＳＴ７の処理を実行する。
【００３６】
ＳＴ６において、画像処理部４５は、文字判定部４４から文字「東京」に関する文字情報を受けて、切り出し画像記憶部４２から切り出し画像の情報を読み出す。また、画像処理部４５は、読み出した切り出し画像を変更する。例えば、画像処理部４５は、図７に示すように、切り出し画像の「東京」の文字を枠で囲むことによって強調する。このように、切り出し画像の一部を変更する場合には、変更した箇所が際立つため、素早く搭乗者に強調すべき箇所を認識させることができる。なお、画像処理部４５は、文字情報に含まれる文字の位置情報によって、切り出し画像のどこに変更対象の文字があるかを認識することができる。
【００３７】
ＳＴ７において、画像処理部４５は、変更した切り出し画像の情報を運転支援画像の情報として運転支援画像記憶部４６に記憶する。また、ＳＴ５において文字判定部４４で認識した文字にナビゲーション装置２で設定した目的地又は経由地が含まれないと判定された場合、画像処理部４５は、切り出し画像を変更せずにそのまま運転支援画像として運転支援画像記憶部４６に記憶する。
【００３８】
ＳＴ８において、搭乗者によって操作入力装置６が操作された場合、運転支援画像生成装置４は、運転支援画像記憶部４６から運転支援画像の情報を読み出し、表示部３へ出力する。表示部３は運転支援画像生成装置４から運転支援画像の情報を受けて、運転支援画像を表示する。
【００３９】
なお、実施の形態１に係る運転支援画像表示システムは、ＳＴ１からＳＴ７までの動作を繰り返し実行し、運転支援画像記憶部４６に複数の運転支援画像の情報を記憶することができる。運転支援画像の情報が複数記憶された場合、運転支援画像表示システムは、図８に示すように、複数の運転支援画像を表示する。搭乗者は、表示された複数の運転支援画像から表示することを希望する運転支援画像を選択する。さらに、表示部３は、選択された運転支援画像を表示する。したがって、搭乗者は、表示部３に表示された運転支援画像選択画面において、必要な運転支援画像の情報を選択し、表示部３に表示させることができる。これは以下の実施の形態に関しても同様である。
【００４０】
また、本実施の形態に係る運転支援画像表示システムがＳＴ１からＳＴ７までの動作を繰り返し実行し、運転支援画像記憶部４６に複数の運転支援画像の情報を記憶した場合の終了動作は、搭乗者によって運転支援画像表示システムが停止された場合、又は車両が目的地に到着した場合等、運転支援画像表示システムの設計者によって設定可能である。
【００４１】
なお、本実施の形態に係る運転支援画像表示システムの説明において、掲示物は案内標識である例を示したが、これに限られず、ナビゲーション装置２に設定されるような地域、地名又は建物名等が示される文字が表記されている掲示物であればよい。例えば、掲示物は店の店名が表記された看板等でもよい。この場合、運転支援画像表示システムは、ナビゲーション装置２に設定された店の名前に該当する掲示物の文字を強調した運転支援画像を表示する。
【００４２】
また、実施の形態１に係る運転支援画像表示システムは、操作入力装置６を搭乗者が操作することによって運転支援画像記憶部４６に記憶された運転支援画像を表示部３に表示させるものとしたが、これに限られず、一定の時間間隔で自動で表示させるようにしてもよい。以下の実施の形態についても同様である。
【００４３】
以上のように、実施の形態１に係る運転支援画像表示システムは、掲示物に表記された文字のうち自車の目的地又は経由地に該当する文字を強調して表示することにより、自車の状況に合った運転支援画像を提供することができるとともに、目的地又は経由地を素早く搭乗者に認識させることができる。
【００４４】
実施の形態２．
実施の形態２に係る運転支援画像表示システムは、撮像した掲示物に表記されている距離を示す文字を車両の走行した移動距離に基づいて変更することを特徴とする。本実施の形態においては、掲示物に表記された距離を示す文字に関連する情報として車両の位置を運転支援情報とする。
【００４５】
以下、図９から図１２を用いて、実施の形態２に係る運転支援画像表示システムについて説明する。図９は実施の形態２に係る運転支援画像表示システムの構成図であり、運転支援画像生成装置の構成を詳細に示す図である。図１０は実施の形態２に係る運転支援画像表示システムの動作フローチャートである。図１１は実施の形態２に係る運転支援画像表示システムにおける車両移動距離と生成する運転支援画像との関係を説明する図である。図１２は実施の形態２に係る運転支援画像表示システムが動作する前提条件を説明する図である。
【００４６】
以下、図９を用いて、実施の形態２に係る運転支援画像表示システムの構成について説明する。なお、図９の説明において、実施の形態１の運転支援画像表示システムの構成に相当する部分には図１及び図２と同一符号を付してその説明を省略する。
【００４７】
実施の形態２に係る運転支援画像生成装置４は、距離算出部４７を備える。なお、図９に示す距離算出部４７は、ハードウェアによって構成されても良いし、コンピュータに所定のプログラムを実行させることによっても実現できる。
【００４８】
距離算出部４７は、文字認識部４３により認識された文字に距離を示す文字が存在する場合に、ナビゲーション装置２から取得する撮像時位置情報と生成時位置情報とに基づいて、車両移動距離を算出する。撮像時位置情報とは、撮像画像の撮像時における車両の位置を示す情報である。すなわち、撮像時位置は、掲示物が掲示された位置とほぼ同じである。また、生成時位置情報とは、撮像した掲示物に関する運転支援画像生成時における車両の位置を示す情報である。さらに、車両移動距離とは、撮像時位置情報で示される位置から生成時位置情報で示される位置までの距離であって、車両が移動した距離を示す。また、距離算出部４７は、文字認識部４３によって認識した文字のうち、距離を示す文字の数値から、車両移動距離を差し引くことで、運転支援画像生成時における車両の位置から掲示物に表記された特定の場所までの残りの距離（以下、残距離とする）を算出する。ここで、特定の場所とは、掲示物の距離を示す文字に併記された案内標識の地名や、店の看板に表記された駐車場等、掲示物に表記された距離を走行した際にたどり着く場所である。以下の説明において、撮像時位置情報と生成時位置情報とをまとめて車両の位置情報とする。
【００４９】
以下、図１０、図１１を用いて、実施の形態２に係る運転支援画像表示システムの動作（ＳＴ２以降における実施の形態２に係るプログラムの処理手順）について説明する。なお、図１０の説明において、実施の形態１に係る運転支援画像表示システムの動作に相当するステップには、図４と同一符号を付してその説明を省略する。また、ＳＴ１、ＳＴ２において、運転支援画像表示システムは、図１１（Ａ−１）に示す掲示物を位置Ａにおいて撮像し、図１１（Ａ−２）に示す切り出し画像を生成したものとする。なお、掲示物（Ａ−１）は、地名等で示される場所までの距離を示す案内標識である。また、切り出し画像（Ａ−２）は、掲示物（Ａ−１）を撮像して切り出した切り出し画像である。
【００５０】
ＳＴ３１において、切り出し画像記憶部４２は、ナビゲーション装置２から撮像時位置情報を得て、切り出し画像の情報と撮像時位置情報とを対応づけて切り出し画像記憶部４２に記憶する。
【００５１】
ＳＴ４１において、文字認識部４３は、切り出し画像記憶部４２から切り出し画像の情報を取得する。また、文字認識部４３は、切り出し画像から文字「東京」、「２７ｋｍ」、「上野」、「２４ｋｍ」、「草加」、「１１ｋｍ」を認識する。さらに、文字認識部４３は、切り出し画像の情報に対応づけられた撮像時位置情報を取得する。
【００５２】
ＳＴ５１において、距離算出部４７は、掲示物に距離を示す文字が表記されているかを判定する。具体的には、距離算出部４７は、文字認識部４３から文字「東京」、「２７ｋｍ」、「上野」、「２４ｋｍ」、「草加」、「１１ｋｍ」の文字情報を受けて、数字又は距離の単位を示す文字が存在するかを判定する。この例の場合、距離算出部４７は、文字認識部４３から文字「２７ｋｍ」、「２４ｋｍ」、「１１ｋｍ」に関する文字情報を受けているので、距離を示す文字が掲示物に表記されていると判定してＳＴ５２の処理を実行する。一方、距離算出部４７により切り出し画像に距離を示す文字が存在しないと判定された場合、運転支援画像生成装置４は、ＳＴ７の処理を実行する。
【００５３】
ＳＴ５２において、距離算出部４７は、自車位置が変化したかを判定する。具体的には、距離算出部４７は、ナビゲーション装置２から生成時位置情報を受ける。また、距離算出部４７は、文字認識部４３から受けた撮像時位置情報とナビゲーション装置２から受けた生成時位置情報とを比較して変化があるかを確認し、変化がある場合には自車位置が変化したと判定する。距離算出部４７は、自車位置が変化したと判定した場合、ＳＴ５３の処理を実行する。一方、距離算出部４７によって自車位置に変化が無いと判定された場合には、運転支援画像生成装置４は、ＳＴ７の処理を実行する。なお、距離算出部４７は、生成時位置情報をナビゲーション装置２から所定の時間間隔で受ける。この所定の時間間隔とは、予め距離算出部４７に設定された時間間隔であって、本実施の形態の運転支援画像表示システムの設計者によって任意に設定可能な値である。以下の説明において、図１１に示すように、距離算出部４７は、位置Ｂおいてナビゲーション装置２から生成時位置情報を受けたものとする。
【００５４】
ＳＴ５３において、距離算出部４７は、撮像時位置情報と生成時位置情報とを用いて、撮像時位置情報で示される位置（位置Ａ）から生成時位置情報で示される位置（位置Ｂ）までの車両移動距離「１ｋｍ」を算出する。なお、車両移動距離は、一般的な２点間の移動距離の算出方法を用いればよい。
【００５５】
また、距離算出部４７は、文字認識部４３により認識された文字「２７ｋｍ」、「２４ｋｍ」、「１１ｋｍ」から車両移動距離「１ｋｍ」を差し引いて、残距離「２６ｋｍ」、「２３ｋｍ」、「１０ｋｍ」を算出する。さらに、算出した残距離に関する情報を画像処理部４５へ出力する。なお、残距離に関する情報には、文字「２７ｋｍ」、「２４ｋｍ」、「１１ｋｍ」の切り出し画像上での位置情報を含むものとする。
【００５６】
ＳＴ６１ａにおいて、画像処理部４５は、距離算出部４７から残距離に関する情報と識別子として機能する撮像時位置情報とを受けて、撮像時位置情報で識別される切り出し画像の情報を切り出し画像記憶部４２から読み出して変更する。具体的には、画像処理部４５は、切り出し画像の文字「２７ｋｍ」、「２４ｋｍ」、「１１ｋｍ」をそれぞれ残距離「２６ｋｍ」、「２３ｋｍ」、「１０ｋｍ」に書き換える。図１１（Ｂ）は、画像処理部４５によって書き換えられた後の運転支援画像である。
【００５７】
なお、ＳＴ５３及びＳＴ６１ａの説明において、運転支援画像表示装置４は、距離算出部４７により残距離を算出し、画像処理部４５により残距離に基づいて切り出し画像の距離を示す文字を書き換えることとしたが、画像処理部４５が距離算出部４７により算出された車両移動距離に基づいて残距離を算出し、距離を示す文字を書き換えてもよい。
【００５８】
ＳＴ７、ＳＴ８においては、図４で説明した処理と同様、画像処理部４５は作成した運転支援画像の情報を運転支援画像記憶部４６に記憶する。また、表示部３は、搭乗者によって操作入力装置６が操作された場合に運転支援画像記憶部４６から運転支援画像の情報を読み出して表示する。
【００５９】
なお、実施の形態２に係る運転支援画像表示システムは、ＳＴ７が終了した後、運転支援画像記憶部４６に記憶した運転支援画像を読み出し、再度ＳＴ５１からＳＴ７と同様の動作を運転支援画像に対して繰り返し実行し、運転支援画像に表記された距離を示す文字を車両移動距離に応じて書き換えるように構成してもよい。すなわち、運転支援画像表示システムは、車両の移動に合わせて随時運転支援画像記憶部４６から運転支援画像を読み出し、ＳＴ５２で運転支援画像を生成する際に得た生成時位置情報と、この位置からさらに車両が移動した際の生成時位置情報とに基づいて車両移動距離を算出し、この運転支援画像の文字を書き換えてもよい。実施の形態２に係る運転支援画像表示システムは、以上の処理を予め決められた回数だけ繰り返した場合に終了するように構成してもよいし、撮像装置１により新たな撮像画像が取得された場合、すなわち、最新の掲示物が撮像された場合に処理を終了するように構成してもよい。
【００６０】
また、運転支援画像記憶部４６から運転支援画像を読み出してさらに書き換える場合、車両の走行距離を別の計測手段から取得して書き換えるように構成してもよい。
【００６１】
また、ＳＴ５２の説明において、距離算出部４７は、ナビゲーション装置２から所定の時間間隔で生成時位置情報を受けるものとしたが、これに限られず、文字認識部４３から文字情報を受けた際にナビゲーション装置２にアクセスし、生成時位置情報を取得するように構成してもよい。また、距離算出部４７は、操作入力装置６が操作された際に生成時位置情報を取得するようにしてもよい。
【００６２】
さらに、実施の形態２に係る運転支援画像表示システムの説明において、案内標識を撮像する例を用いたが、案内標識に限られず、特定の場所までの距離が示される掲示物であればよい。
【００６３】
ところで、実施の形態２に係る運転支援画像表示システムは、少なくとも、掲示物を撮像した際に車両が走行している道路と、運転支援画像を生成する際に車両が走行している道路が同じ道路であることが前提となる。例えば、図１２（Ａ）に示すように、運転支援画像生成装置４は、車両が掲示物を撮像した際に走行していた道路に沿って走行し、運転支援画像の生成時においても掲示物が掲示された道路を走行している場合には、運転支援画像を生成することができる。また、（Ｂ）に示すように、運転支援画像表示システムは、車両が掲示物を撮像した際に走行している道路を外れた場合であっても、運転支援画像を生成する際に掲示物が掲示された道路に戻ってきた場合においても、運転支援画像を生成することができる。
【００６４】
以上のように、実施の形態２に係る運転支援画像表示システムは、距離を示す文字が表記された掲示物の画像を表示する場合に、車両の移動距離に応じて、表記された距離を変更した掲示物の画像を運転支援画像として表示する。そのため、搭乗者は、特定の場所までの距離が表記された掲示物を搭乗者が見逃し、車両がしばらく先に進んだ後で掲示物の画像を見直す場合に、現在の位置から特定の場所までの距離を認識することができる。
【００６５】
実施の形態３．
実施の形態３に係る運転支援画像表示システムは、交差点や曲がり角等、道路の分岐点までの距離を示す掲示物を撮像し、分岐点の通過に応じて距離を示す文字を書き換えた運転支援画像を生成することを特徴とする。なお、本実施の形態においても、距離を示す文字に関連する情報として、車両の位置を運転支援情報とする。
【００６６】
以下、図１３から図１５を用いて、実施の形態３に係る運転支援画像表示システムについて説明する。図１３は実施の形態３に係る運転支援画像表示システムが掲示物に表記された距離を示す文字を書き換える例である。図１４は実施の形態３に係る運転支援画像表示システムの動作フローチャートである。図１５は実施の形態３に係る運転支援画像表示システムにおいて、分岐点までの距離と分岐点から掲示物に表記された地域までの距離とが表記された掲示物を撮像した場合の例である。
【００６７】
なお、以下の説明において、実施の形態１及び実施の形態２に係る運転支援画像表示システムの構成に相当する部分には図１、図２、図９と同一符号を付してその説明を省略する。また、実施の形態３に係る運転支援画像生成装置４においても、図９に示す距離算出部４７は、ハードウェアによって構成されても良いし、コンピュータに所定のプログラムを実行させることによっても実現できる。実施の形態３に係る運転支援画像生成装置４の構成は実施の形態２に係る運転支援画像表示装置４と同様の構成であるため、詳細な説明を省略する。
【００６８】
また、図１４の説明において、実施の形態１及び実施の形態２に係る運転支援画像表示システムの動作に相当するステップには図４及び図１０と同一符号を付してその説明を省略する。
【００６９】
なお、以下の説明において、ＳＴ１からＳＴ３において、撮像装置１は、図１３に示す位置Ｃにおいて、掲示物（Ｃ−１）に示す掲示物を撮像し、撮像した画像に基づいて切り出し画像（Ｃ−２）を作成し、切り出し画像記憶部４２に記憶したものとする。また、ＳＴ４１からＳＴ５３において、距離算出部４７は、切り出し画像記憶部４２から切り出し画像（Ｃ−２）を読み出し、文字認識部４３によって認識された文字「東京」、「品川」、「５００ｍ」の文字情報を受けて、掲示物に距離を示す文字が存在すると判定したものとする。さらに、運転支援画像生成装置４を備える車両は、運転支援画像生成時に、位置Ｄへ移動したものとする。以下、実施の形態３に係る運転支援画像表示システムの動作（ＳＴ２以降における実施の形態３に係るプログラムの処理手順）について、ＳＴ５３から説明する。
【００７０】
ＳＴ５３において、距離算出部４７は、撮像時位置情報で示される位置Ｃから生成時位置情報で示される位置Ｄまでの車両移動距離を算出する。この例の場合、車両移動距離は１０００ｍである。
【００７１】
ＳＴ５４において、距離算出部４７は、車両が分岐点を通過したか否かを判定する。具体的には、距離算出部４７は、分岐点までの距離を示す文字「５００ｍ」から車両移動距離「１０００ｍ」を減じる。このとき、差分は負の値「−５００ｍ」となる。このように、掲示物に表記された距離を示す文字から車両移動距離を差し引いた値が負の値となるような場合に、距離算出部４７は、車両が分岐点を通過したものと判定する。運転支援画像生成部４は、距離算出部４７により車両が分岐点を通過したと判定した場合に、ＳＴ６１ｂの処理を実行する。一方、運転支援画像生成部４は、距離算出部４７により車両が分岐点を通過していないと判断した場合、ＳＴ６１ａの処理を実行する。
【００７２】
ＳＴ６１ｂにおいて、画像処理部４５は、距離算出部４７から残距離に関する情報と識別子として機能する撮像時位置情報とを受けて、撮像時位置情報で識別される切り出し画像の情報を切り出し画像記憶部４２から読み出す。また、距離算出部４７は、分岐点の通過を考慮して切り出し画像の文字を変更する。すなわち、位置Ｄにおいて、車両は分岐点を通過してから５００ｍの位置に存在するため、画像処理部４５は掲示物に表記された文字「５００ｍ」を「５００ｍ手前」に書き換えた運転支援画像を生成する。画像処理部４５は運転支援画像を生成した後、ＳＴ７の処理を実行する。
【００７３】
ＳＴ７、ＳＴ８において、図４及び図１０で説明した処理と同様に、画像処理部４５は作成した運転支援画像の情報を運転支援画像記憶部４６に記憶する。また、表示部３は、搭乗者によって操作入力装置６が操作された場合に運転支援画像記憶部４６から運転支援画像の情報を読み出して表示する。以上で実施の形態３に係る運転支援画像表示システムは、動作を終了する。
【００７４】
なお、以上の説明において、掲示物に表記された分岐点までの距離から車両移動距離を減じた結果、負の値となった場合を示した。一方で、車両が分岐点上（図１３の位置Ｅ）に存在する場合、すなわち、掲示物に表記された分岐点までの距離と車両移動距離とが同じ場合又は微差である場合に、画像処理部４５は、掲示物に表記された文字を「現在位置」又は「０ｍ」等に書き換えてもよい。
【００７５】
以上のように、実施の形態３に係る運転支援画像表示システムは、距離算出部４７によって分岐点を通過したか否かを判定し、分岐点の経過に応じて切り出し画像の距離を示す文字を書き換えるので、道路の分岐点までの距離を示す掲示物に関しても、車両の移動に応じた運転支援画像を搭乗者に提供することが可能となる。
【００７６】
また、実施の形態３に係る運転支援画像表示システムは、図１５の（Ｆ−１）に示すように、分岐点までの距離と、この分岐点から特定の場所までの距離とを示す掲示物に関しても、運転支援画像を生成することが可能である。
【００７７】
例えば、車両が位置Ｆを走行している際に、運転支援画像生成装置４は、撮像装置１により掲示物（Ｆ−１）を撮像し、掲示物認識処理部４１により切り出し画像（Ｆ−２）を生成したとする。この場合、車両が位置Ｇへ移動した際に運転支援画像生成装置４は運転支援画像（Ｇ）を生成する。
【００７８】
運転支援画像（Ｇ）の分岐点までの距離「５ｋｍ手前」の算出方法は、図１４のＳＴ１からＳＴ６１ｂまでの処理と同様である。一方、運転支援画像（Ｇ）の分岐点から特定の場所までの距離「７５ｋｍ」は、距離算出部４７によって位置Ｆから位置Ｇまでの車両移動距離「５．３ｋｍ」から位置Ｆから分岐点までの距離「３００ｍ」を減じることで算出される。また、車両が分岐点を通過していない位置Ｈを走行している際、すなわち、位置Ｆから分岐点までの間における一地点を走行している際に運転支援画像を生成する場合には、運転支援画像生成装置４は、運転支援画像（Ｈ−１）に示すように、分岐点から特定の場所「東京」までの距離「８０ｋｍ」を書き換えないようにすればよい。なお、運転支援画像生成装置４は、図１４のＳＴ５４で説明したように、距離算出部４７によって分岐点を通過したか否かを判断することができる。
【００７９】
このように、実施の形態３に係る運転支援画像表示システムは、分岐点までの距離とこの分岐点から掲示物に表記された地域までの距離を示す掲示物に関しても、車両の状況に合った運転支援画像を生成することが可能であり、搭乗者は掲示物の内容を現状に合わせて認識することができる。
【００８０】
実施の形態４．
以下、図１６から図１８を用いて、実施の形態４に係る運転支援画像表示システムについて説明する。図１６は実施の形態４に係る運転支援画像表示システムが撮像する掲示物と表示する掲示物との関係を示す図である。図１７は実施の形態４に係る運転支援画像表示システムの構成図であり、運転支援画像生成装置の構成を詳細に示す図である。図１８は実施の形態４に係る運転支援画像表示システムの動作フローチャートである。本実施の形態においては、掲示物に表記された後述する指定車両情報又は指定時間帯情報に関連する情報として自車の車両タイプ等の車両情報又は現在時刻を運転支援情報とする。
【００８１】
実施の形態４に係る運転支援画像表示システムは、規制標識等の掲示物と共に設けられる指定車両情報や指定時間帯情報を判別し、自車の情報に該当するかを判定し、判定結果に応じて撮像した掲示物の切り出し画像の文字を強調した運転支援画像を生成することを特徴とする。ここで、指定車両情報とは、掲示物に示された内容が適用される車両を指定する情報であって、例えば、車両タイプ、車両の高さ、最大積載容量等がこれに該当する。車両タイプとは、軽車両、中型車、大型車等の車両の種類である。また、指定時間帯情報とは、掲示物に示された内容が適用される時間帯を示す情報である。例えば、図１６（Ａ）は、指定方向以外に進行することを禁止する掲示物である。また、掲示物の下方には、指定時間帯情報と指定車両情報が表記されている。掲示物（Ａ）が掲示された道路において、軽車両は「７：３０−８：００」までの間、矢印で指定された方向にのみ進むことができる。
【００８２】
以下、図１７を用いて、実施の形態４に係る運転支援画像表示システムの構成について説明する。なお、図１７の説明において、実施の形態１から実施の形態３の運転支援画像表示システムの構成に相当する部分には図１、図２、図９と同一符号を付してその説明を省略する。
【００８３】
運転支援画像生成装置４は、車両情報記憶部４８、車両情報判定部４９、時刻計測部４１０、時間判定部４１１を備える。なお、図１７に示す車両情報判定部４９、時刻計測部４１０、及び時間判定部４１１は、ハードウェアによって構成されても良いし、コンピュータに所定のプログラムを実行させることによっても実現できる。
【００８４】
車両情報記憶部４８は、自車の車両情報を予め記憶する。車両情報とは、自車両に関する情報であり、例えば、車両の高さ、最大積載容量、車両タイプ等である。
【００８５】
車両情報判定部４９は、文字認識部４３で認識した指定車両情報に自車が該当するか否かを判定する。車両情報判定部４９は、文字認識部４３で認識した文字情報を受けて、車両情報記憶部４８に記憶された車両情報を読み出す。また、車両情報判定部４９は、読み出した車両情報が指定車両情報で示される内容に該当すると判定した場合、画像処理部４５に文字認識部４３から受けた文字情報を出力する。
【００８６】
時刻計測部４１０は、時刻を計測する。時刻計測部４１０は現在時刻を示す時刻情報を時間判定部４１１へ出力する。
【００８７】
時間判定部４１１は、文字認識部４３で認識した指定時間帯情報に時刻計測部４１０から受けた時刻情報が含まれるか否かを判定する。指定時間帯情報に時刻情報が含まれる場合には、時間判定部４１１は、画像処理部４５に文字情報を出力する。
【００８８】
以下、図１８を用いて、実施の形態４に係る運転支援画像表示システムの動作（ＳＴ２以降における実施の形態４に係るプログラムの処理手順）について説明する。なお、図１８の説明において、実施の形態１から実施の形態３に係る運転支援画像表示システムの動作に相当するステップには図４、図１０、図１４と同一符号を付してその説明を省略する。また、以下の説明において、ＳＴ１からＳＴ３において、運転支援画像表示システムは、撮像装置１によって図１６（Ａ）に示す掲示物を撮像し、掲示物認識処理部４１によって掲示物を認識して切り出し画像を生成して切り出し画像記憶部４２に記憶したものとする。さらに、運転支援画像表示装置４が運転支援画像を生成する際の時刻は「７：４５」であり、自車両の車両タイプは軽車両であるものとする。
【００８９】
ＳＴ４１１において、文字認識部４３は、切り出し画像記憶部４２から切り出し画像の情報を読み出し、切り出し画像から文字を認識して文字「軽車両」の文字情報を車両情報判定部４９へ、文字「７：３０−８：００」の文字情報を時間判定部４１１へ出力する。
【００９０】
ＳＴ５１１において、車両情報判定部４９は、文字「軽車両」の文字情報を受ける。また、車両情報判定部４９は、車両情報記憶部４８に記憶された車両タイプを参照し、文字認識部４３から受けた文字「軽車両」の文字情報と比較して、車両タイプに該当するか判定する。この例の場合、車両情報判定部４９は、車両タイプが「軽車両」であるため、指定車両情報が自車の車両タイプに該当すると判定し、文字「軽車両」の文字情報を画像処理部４５へ出力する。
【００９１】
一方、時間判定部４１１は、文字「７：３０−８：００」の文字情報を受ける。また、時間判定部４１１は、時刻計測部４１０から時刻情報「７：４５」を受けて、文字認識部４３から受けた文字「７：３０−８：００」の文字情報と比較して、指定時間帯情報で示される時間帯に運転支援画像を生成する際の時刻「７：４５」が含まれるか判定する。この例の場合、指定時間帯情報は「７：３０−８：００」であり、現在時刻が「７：４５」なので、指定時間帯情報に該当すると判定し、文字情報を画像処理部４５へ出力する。
【００９２】
なお、運転支援画像生成装置４は、指定車両情報に車両情報が該当しない場合かつ指定時間帯に時刻情報で示される現在時刻が含まれない場合には、ＳＴ７の処理を実行する。
【００９３】
ＳＴ６１１において、画像処理部４５は、車両情報判定部４９から文字「軽車両」に関する文字情報を、時間判定部４１１から文字「７：３０−８：００」に関する文字情報とを受けて、切り出し画像記憶部４２に記憶された切り出し画像の情報を読み出して変更する。具体的には、切り出し画像中の文字「軽車両」と文字「７：３０−８：００」とを強調する変更を実行する。例えば、画像処理部４５は、図１６（Ｂ）に示すように、指定時間帯情報及び指定車両情報が表記された箇所に「該当」の文字を付する。画像処理部４５は、変更した切り出し画像の情報を運転支援画像の情報として運転支援画像記憶部４６に記憶する。なお、強調する変更は、「該当」の文字を付することに限らず、文字の点滅、文字の拡大、文字を枠で囲む等でもよい。
【００９４】
なお、実施の形態４に係る運転支援画像表示システムの説明において、指定車両情報は「軽車両」等の車両タイプを示すものであるとしたが、これに限られず、車両の情報を示すものであればよい。例えば、指定車両情報は、車両の高さ、車両の幅、車両の最大積載容量等でもよい。このような場合、車両情報記憶部４８は、車両の高さ、車両の幅、車両の最大積載容量等に関する情報を予め記憶する。
【００９５】
また、本実施の形態に係る運転支援画像表示システムの説明において、指定車両情報の示す文字が「軽車両」である例を示した。一方で、掲示物には「軽車両を除く」という指定車両情報が表記されている場合も考えられる。このような場合、ＳＴ５１１で説明したように、車両情報判定部４９は、車両情報記憶部４８に記憶された車両タイプを参照した結果、車両タイプが「軽車両」であっても、文字認識部４３から受けた文字情報に「除く」という文字があれば、自車の車両タイプが指定車両情報に該当しないと判定し、画像処理部４５へ文字情報を送らないようにし、画像処理装置４５に切り出し画像の変更を実行させないようにしてもよい。一方、車両情報判定部４９は、掲示物に「軽車両を除く」という指定車両情報が表示されている場合であって、自車の車両タイプが「大型車」である場合には、自車の車両タイプが指定車両情報に該当すると判定し、画像処理装置４５に切り出し画像の変更を実行させるようにしてもよい。したがって、車両判定部４９は、指定車両情報に自車が該当するか否かを判定する場合、指定車両情報の文字と車両情報記憶部４８に記憶されている車両タイプとの一致、不一致のみで決定するわけではなく、「除く」等の文字があるかを考慮して指定車両情報の文字が車両タイプに該当するかを総合的に判定する。
【００９６】
さらに、本実施の形態に係る運転支援画像生成装置４は、時間判定部４１１と車両情報判定部４９とを備える構成としたが、これに限られず、時間判定部４２又は車両情報判定部４９のうち一方のみを使用するようにしてもよい。また、車両情報記憶部４８と時刻計測部４１０は、運転支援画像生成装置４の構成として備える必要はない。運転支援画像生成装置４は、外部から車両情報と時刻情報を入力してもよい。
【００９７】
また、本実施の形態に係る運転支援画像表示システムの説明においては、掲示物として規制標識を撮像する例を示したが、これに限られず、時間帯又は車両情報が表記された掲示物であれば適用可能である。例えば、道路に設けられ、指定された時間帯に利用可能なパーキングメーター等に対しても本実施の形態に係る運転支援画像表示システムを適用することができる。
【００９８】
本実施の形態に係る運転支援画像表示システムは、指定時間帯情報、又は指定車両情報を含む掲示物の内容を車両情報又は時刻情報に応じて変更して表示するので、車両の状況に合った運転支援画像を提供することができ、搭乗者は、掲示物で示される内容が自車両に該当するか否かを容易に認識可能となる。
【００９９】
実施の形態５．
以下、図１９から図２１を用いて、実施の形態５に係る運転支援画像表示システムについて説明する。図１９は実施の形態５に係る運転支援画像表示システムの構成図であり、運転支援画像生成装置の構成を詳細に示す図である。図２０は実施の形態５に係る運転支援画像表示システムの動作フローチャートである。図２１は実施の形態５に係る運転支援画像表示システムによる変更前後の運転支援画像を示す図である。なお、図１９に示す画質判定部４１３は、ハードウェアによって構成されても良いし、コンピュータに所定のプログラムを実行させることによっても実現できる。
【０１００】
実施の形態５に係る運転支援画像表示システムは、運転支援情報に基づいて生成された運転支援画像の画質を判定する画質判定部４１３を備え、この画質判定部４１３の判定結果に応じて、画像処理部４５によって運転支援画像の内容を変更することを特徴とする。
【０１０１】
以下、図１９を用いて、実施の形態５に係る運転支援画像表示システムの構成について説明する。なお、図１９の説明において、実施の形態１から実施の形態４の運転支援画像表示システムの構成に相当する部分には図１、図２、図９、図１７と同一符号を付してその説明を省略する。
【０１０２】
画質判定部４１３は、運転支援画像記憶部４６に記憶した画像の画質を判定する。ここで、画質とは、掲示物に含まれる文字のサイズやコントラスト等をいう。画質判定部４１３は、運転支援画像の文字サイズが小さい場合や、コントラストが低い場合等、文字が認識しにくい状態のときに、運転支援画像の画質が悪いと判定し、画像処理部４５に文字サイズの拡大、コントラストの調整等を実行させる。
【０１０３】
画質判定部４１３には、画質に関する閾値が予め設定されており、運転支援画像の画質が閾値以下である場合には、画質が悪いと判断する。例えば、画質判定部４１３には文字サイズの閾値やコントラストの閾値が予め設定されており、運転支援画像の文字のサイズが閾値以下である場合、又は運転支援画像のコントラストが閾値以下の場合には、画質が悪いと判定する。また、画質判定部４１３は、コントラストの判定において、運転支援画像の文字領域部分の輝度の平均値と、運転支援画像の文字領域以外の輝度の平均値との差をとり、差分値が閾値以下である場合には画質が悪いと判定する。
【０１０４】
以下、図２０を用いて、実施の形態５に係る運転支援画像表示システムの動作（ＳＴ２以降における実施の形態５に係るプログラムの処理手順）について説明する。なお、図２０の説明において、実施の形態１から実施の形態４の運転支援画像表示システムの動作に相当するステップには図４、図１０、図１４、図１８と同一符号を付してその説明を省略する。また、ＳＴ１からＳＴ７において、運転支援画像表示システムは、掲示物を撮像し、撮像した掲示物に基づいて、文字を強調した画像を運転支援画像として運転支援画像記憶部４６に記憶しているものとする。このとき、運転支援画像記憶部４６に記憶されている運転支援画像は、図２１（Ａ）に示すものとする。さらに、図２１（Ａ）に表記された「東京」の文字は画質判定部４１３に予め設定された文字サイズの閾値以下であるものとする。
【０１０５】
ＳＴ４１１１において、文字認識部４３は、運転支援画像記憶部４６から運転支援画像（Ａ）の情報を読み出し、ＳＴ６で変更した文字「東京」の文字情報を画質判定部４１３に出力する。さらに、読み出した運転支援画像の情報を画質判定部４１３へ出力する。
【０１０６】
ＳＴ５１１１において、画質判定部４１３は、文字認識部４３から運転支援画像の情報と、文字「東京」の文字情報を受ける。また、画質判定部４１３は、文字情報から文字サイズを検出し、文字サイズが閾値以下である場合は画質が悪いと判定する。この例においては、文字「東京」が画質判定部４１３に設定された閾値よりも小さいので、画質判定部４１３は、運転支援画像の画質が悪いと判定する。また、画質判定部４１３は、画像処理部４５に文字「東京」の文字情報を出力する。また、画質判定部４１３は、変更情報を画像処理部４５に出力する。変更情報は、画像処理部４５が運転支援画像を変更するための情報である。例えば、運転支援画像の文字が小さい場合には、画質判定部４１３は、文字が小さいことを示す変更情報を画像処理部４５に出力する。続いて、画像処理部４５はＳＴ６１１１の処理を実行する。なお、文字サイズが設定された閾値以下となるものがない場合、運転支援画像生成装置４はＳＴ７１１１を実行する。
【０１０７】
ＳＴ６１１１において、画像処理部４５は、運転支援画像記憶部４６から切り出し画像の情報を読み出し、文字「東京」の文字情報及び変更情報に基づいて、文字「東京」を拡大した運転支援画像（図２１（Ｂ））を生成する。なお、ＳＴ５１１１において、画像処理部４５は、運転支援画像の文字を拡大するものとしたが、文字の拡大に限らず、文字色の変更、コントラストの調整等を行い、文字を見やすくすればよい。
【０１０８】
ＳＴ７１１１において、画像処理部４５は、生成した運転支援画像を運転支援画像記憶部４６に記憶する。さらに、ＳＴ８では、搭乗者の操作入力装置６の操作によって、表示部３に運転支援画像を表示させる。
【０１０９】
なお、図１９の説明において、図２の構成に画質判定部４１３を追加した例を示したが、図９、図１７の構成に画質判定部４１３を追加してもよい。また、図２０の説明において、図４のＳＴ７以降にＳＴ４１１１からＳＴ７１１１までのステップを追加したものとしたが、これに限られず、図１０、図１４、図１８のＳＴ７以降にＳＴ４１１１からＳＴ７１１１までのステップを追加としてもよい。
【０１１０】
以上のように、実施の形態５に係る運転支援画像表示システムは、運転支援画像の画質を判定し、画質が悪いと判定した場合に運転支援画像の文字を強調する変更を行うので、
運転支援画像の画質が悪く文字が見にくい場合にも、搭乗者が文字を容易に認識できる運転支援画像を提供することができる。
【０１１１】
実施の形態６．
以下、図２２を用いて、実施の形態６に係る運転支援画像表示システムについて説明する。図２２は実施の形態６に係る運転支援画像表示システムの構成図であり、運転支援画像生成装置の構成を詳細に示す図である。なお、図２２の説明において、実施の形態１から実施の形態５の運転支援画像表示システムの構成に相当する部分には図１、図２、図９、図１７、図１９と同一符号を付してその説明を省略する
【０１１２】
実施の形態６に係る運転支援画像表示システムは、搭乗者の視線を検出して掲示物を認識したか否かを判定する視線検出判定装置７を備えることを特徴とする。
【０１１３】
以下、図２２を用いて、実施の形態６に係る運転支援画像表示システムの構成及び動作について説明する。
【０１１４】
視線検出判定装置７は、車両の内部に設置され、搭乗者の視線の方向を示す視線情報を検出するカメラを備える。また、視線検出判定装置７は、視線情報を常に監視し、搭乗者が掲示物を認識したか否かを判定する。なお、視線検出判定装置７は、図１に示した撮像装置１、ナビゲーション装置２、表示部３、運転支援画像生成装置４と車載ＬＡＮ５を介して有線又は無線で接続される。
【０１１５】
視線検出判定装置７は、予め決められた時間が設定されており、搭乗者の視線が決められた時間、掲示物の位置する方向に向けられている場合に、搭乗者が掲示物を認識したと判定する。
【０１１６】
視線検出判定装置７は、搭乗者が掲示物を認識していないと判定した場合には、表示指示を運転支援画像生成装置４へ出力する。運転支援画像生成装置４は表示指示を受けて、運転支援画像記憶部４６に記憶された運転支援画像を表示部３に表示させる。
【０１１７】
なお、実施の形態６に係る運転支援画像表示システムは、視線検出判定装置７によって搭乗者が掲示物を認識していないと判定された場合に、運転支援画像記憶部４６に記憶された運転支援画像を表示したが、これに限られず、搭乗者が掲示物を認識したと判定された場合に、運転支援画像記憶部４６に記憶された運転支援画像の情報を削除してもよい。このように構成することで、運転支援画像記憶部４６に不要な運転支援画像の情報が蓄積することを防止することができ、記憶容量を効率よく利用することができる。
【０１１８】
また、本実施の形態に係る運転支援画像表示システムは、搭乗者が掲示物を認識していないと判定した場合に、撮像装置１によって掲示物を撮像し、運転支援画像を生成するように構成してもよい。このように構成することで、搭乗者が掲示物を認識している場合には、運転支援画像の情報を生成することがないので、不要な処理負荷を削減することができる。
【０１１９】
さらに、本実施の形態に係る視線検出判定装置７は、実施の形態１から実施の形態５に係る運転支援画像表示システムに適用可能である。
【０１２０】
以上のように、実施の形態６に係る運転支援画像表示システムは、搭乗者の視線を検出して搭乗者が掲示物を認識したかを判定する視線検出判定装置７を備え、視線検出判定装置７によって搭乗者が掲示物を認識したと判定された場合に、表示部３によって表示する構成とした。したがって、搭乗者は、掲示物を見逃す度に操作入力装置６を操作することなく、運転支援画像を確認することができる。
【０１２１】
なお、実施の形態１から実施の形態６に係る運転支援画像表示システムにおいて、運転支援画像生成装置４は、撮像した撮像画像から切り出し画像を生成し、さらにこの切り出し画像に基づいて運転支援画像を生成するものとしたが、これに限られず、既に過去に撮像した切り出し画像を用いて運転支援画像を生成してもよい。例えば、運転支援画像生成装置４は、車両が過去に通過した地点において、撮像した掲示物の切り出し画像の情報を車両の位置情報と対応づけて切り出し画像記憶部４２に記憶する。また、運転支援画像生成装置４は、車両が再度同じ地点を通過した場合に、車両の位置情報によって特定される切り出し画像を切り出し画像記憶部４２から読み出して内容を変更し、運転支援画像を生成する。このように構成することで、撮像装置１によって掲示物を撮像する動作を省略することができ、装置の負担を軽減することができる。
【０１２２】
また、実施の形態１から実施の形態６に係る運転支援画像表示システムは、運転支援画像を生成する際に過去に撮像した切り出し画像を使用する場合、自車両の切り出し画像記憶部４２から切り出し画像の情報を読み出すことに代えて、他の車両が撮像した切り出し画像の情報を受信してもよい。例えば、実施の形態１から実施の形態６に係る運転支援画像表示システムを備える他の車両が過去に撮像して切り出した切り出し画像の情報を外部サーバに送信して記憶することで、運転支援画像生成装置４は、道路に設置された路側器等を介してサーバにアクセスし、切り出し画像の情報を取得することができる。
【０１２３】
さらに、実施の形態１から実施の形態６に係る運転支援画像生成装置４の説明においては、画像処理部４５は、撮像した切り出し画像自体を変更して運転支援画像を得るものとしたが、これに限られず、撮像した掲示物の内容が変更されていればよく、例えば、切り出し画像に対応するＣＧ（Ｃｏｍｐｕｔｅｒ  Ｇｒａｐｈｉｃｓ）によって運転支援画像を一から作成してもよい。ＣＧによって運転支援画像を作成する場合、運転支援画像生成装置４は、予め掲示物に対応するＣＧ画像又は掲示物の一部に対応するＣＧ画像のパーツを記憶する記憶部（図示せず）を備え、撮像装置１によって撮像した掲示物に対応する掲示物のＣＧ画像を生成する。運転支援画像をＣＧにより作成する場合、掲示物認識処理部４１は撮像装置１により撮像された撮像画像から掲示物を認識すればよく、必ずしも切り出し画像として切り出し画像記憶部４２に記憶する必要はない。
【０１２４】
また、実施の形態１から実施の形態６に係る運転支援画像表示システムは、撮像画像に基づいて運転支援画像を生成するのではなく、予め地図データと共に記憶されている掲示物の内容を示す画像の情報を用いても良い。例えば、この場合、車両移動情報は、掲示物の掲示位置と運転支援情報である車両の現在の位置とから算出すればよい。このような場合であっても、予め記憶されている画像中の文字を車両の状況に応じて変更して運転支援画像として表示することにより、実施の形態１から実施の形態６と同様の効果が得られる。
【０１２５】
なお、撮像画像を用いれば、実際の掲示物の内容が変更された場合又は新たな掲示物が掲示された場合にも、最新の正確な情報を運転支援画像として表示することができる。例えば、道路上又は道路周辺に掲示された掲示物は、道路の新設に合わせて新たに掲示されるが、新たに掲示された掲示物を撮像した画像を用いれば、予め地図データと共に記憶されている掲示物の内容を示す画像の情報が無い場合にも、最新の運転支援画像を得ることができる。
【０１２６】
なお、実施の形態１から実施の形態６に係る運転支援画像生成装置４は、車両に備えられるものとしたが、これに限られず、車両外の特定の場所に設けられたサーバ等に備えられていてもよい。例えば、車両に備えられた表示部３は、無線通信によりサーバへ運転支援情報を送信し、サーバ側に備えられた運転支援画像生成装置４により生成された運転支援画像を受信するようにしてもよい。また、表示部３は、スマートフォン等の通信手段と有線又は無線で接続され、このスマートフォンを介してサーバと通信するように構成されてもよい。
【０１２７】
また、実施の形態１から実施の形態６に係る運転支援画像表示システムの特徴とする構成は、１つの同じ運転支援画像表示システムに搭載することが可能である。
【符号の説明】
【０１２８】
１  撮像装置、２  ナビゲーション装置、３  表示部、４  運転支援画像生成装置、５  車載ＬＡＮ、６  操作入力装置、７  視線検出判定装置、４１  掲示物認識処理部、４２  切り出し画像記憶部、４３  文字認識部、４４  文字判定部、４５  画像処理部、４６  運転支援画像記憶部、４７  距離算出部、４８  車両情報記憶部、４９  車両情報判定部、４１０  時刻計測部、４１１  時間判定部
【図１】
2015071923.tif 000003
【図２】
2015071923.tif 000004
【図３】
2015071923.tif 000005
【図４】
2015071923.tif 000006
【図５】
2015071923.tif 000007
【図６】
2015071923.tif 000008
【図７】
2015071923.tif 000009
【図８】
2015071923.tif 000010
【図９】
2015071923.tif 000011
【図１０】
2015071923.tif 000012
【図１１】
2015071923.tif 000013
【図１２】
2015071923.tif 000014
【図１３】
2015071923.tif 000015
【図１４】
2015071923.tif 000016
【図１５】
2015071923.tif 000017
【図１６】
2015071923.tif 000018
【図１７】
2015071923.tif 000019
【図１８】
2015071923.tif 000020
【図１９】
2015071923.tif 000021
【図２０】
2015071923.tif 000022
【図２１】
2015071923.tif 000023
【図２２】
2015071923.tif 000024
【手続補正書】
【提出日】平成27年12月28日(2015.12.28)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【０００６】
本発明の運転支援画像生成装置は、道路又は道路周辺に掲示された掲示物の掲示内容を示す画像の文字を認識する文字認識部と、文字認識部により認識された文字が自車の車両に関する情報に該当するかを判定する車両情報判定部と、車両情報判定部により自車の車両に関する情報に該当すると判定された文字を強調した運転支援画像を生成する画像処理部とを備えることを特徴とする。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
本発明の運転支援画像表示装置は、道路又は道路周辺に掲示された掲示物の掲示内容を示す画像の文字が自車の車両に関する情報に該当する文字である場合に、当該掲示物の掲示内容を示す画像の文字を強調した運転支援画像を表示する表示部を備えることを特徴とする。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
本発明の運転支援画像表示システムは、道路又は道路周辺に掲示された掲示物を撮像する撮像装置と、撮像装置により撮像された掲示物の掲示内容を示す画像の文字を認識する文字認識部と、文字認識部により認識された文字が自車の車両に関する情報に該当するかを判定する車両情報判定部と、車両情報判定部により自車の車両に関する情報に該当すると判定された文字を強調した運転支援画像を生成する画像処理部とを備える運転支援画像生成装置と、運転支援画像生成装置によって生成された運転支援画像を表示する表示部とを備えることを特徴とする。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
本発明の運転支援画像生成プログラムは、道路又は道路周辺に掲示された掲示物の掲示内容を示す画像の文字を認識する文字認識処理と、文字認識処理により認識された文字が自車の車両に関する情報に該当するかを判定する車両情報判定処理と、車両情報判定処理により自車の車両に関する情報に該当すると判定された文字を強調した運転支援画像を生成する画像処理とをコンピュータに実行させることを特徴とする。
【手続補正５】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
道路又は道路周辺に掲示された掲示物の掲示内容を示す画像の文字を認識する文字認識部と、
前記文字認識部により認識された文字が自車の車両に関する情報に該当するかを判定する車両情報判定部と、
前記車両情報判定部により自車の車両に関する情報に該当すると判定された文字を強調した運転支援画像を生成する画像処理部
とを備える運転支援画像生成装置。
【請求項２】
前記掲示物の掲示内容を示す画像として、撮像装置により撮像された画像を用いることを特徴とする請求項１に記載の運転支援画像生成装置。
【請求項３】
前記画像処理部により生成された運転支援画像の画質を判定する画質判定部を備え、
前記画像処理部は、
前記運転支援画像の画質が前記画質判定部に設定された閾値よりも低いと判定された場合に、前記文字認識部により認識された文字を強調した運転支援画像を生成することを特徴とする請求項２に記載の運転支援画像生成装置。
【請求項４】
道路又は道路周辺に掲示された掲示物の掲示内容を示す画像の文字が自車の車両に関する情報に該当する文字である場合に、当該掲示物の掲示内容を示す画像の文字を強調した運転支援画像を表示する表示部を備える運転支援画像表示装置。
【請求項５】
前記表示部は、
前記掲示物の掲示内容を示す画像として、撮像装置により撮像された画像を用いることを特徴とする請求項４に記載の運転支援画像表示装置。
【請求項６】
前記表示部は、
前記撮像装置により撮像された画像の画質が設定された閾値よりも低い場合に、前記撮像装置により撮像された画像の文字を強調した運転支援画像を表示することを特徴とする請求項５に記載の運転支援画像表示装置。
【請求項７】
前記表示部は、
搭乗者が前記掲示物を認識していない場合に、前記運転支援画像を表示することを特徴とする請求項４に記載の運転支援画像表示装置。
【請求項８】
道路又は道路周辺に掲示された掲示物を撮像する撮像装置と、
前記撮像装置により撮像された前記掲示物の掲示内容を示す画像の文字を認識する文字認識部と、前記文字認識部により認識された文字が自車の車両に関する情報に該当するかを判定する車両情報判定部と、前記車両情報判定部により自車の車両に関する情報に該当すると判定された文字を強調した運転支援画像を生成する画像処理部とを備える運転支援画像生成装置と、
前記運転支援画像生成装置によって生成された運転支援画像を表示する表示部と
を備えることを特徴とする運転支援画像表示システム。
【請求項９】
道路又は道路周辺に掲示された掲示物の掲示内容を示す画像の文字を認識する文字認識処理と、
前記文字認識処理により認識された文字が自車の車両に関する情報に該当するかを判定する車両情報判定処理と、
前記車両情報判定処理により自車の車両に関する情報に該当すると判定された文字を強調した運転支援画像を生成する画像処理
とをコンピュータに実行させる運転支援画像生成プログラム。
【手続補正書】
【提出日】平成28年12月2日(2016.12.2)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
道路又は道路周辺に掲示された掲示物の掲示内容を示す画像の文字を認識する文字認識部と、
前記文字認識部により認識された文字が自車の車両に関する情報に該当するかを判定する車両情報判定部と、
前記車両情報判定部により自車の車両に関する情報に該当すると判定された文字を強調した運転支援画像を生成する画像処理部
とを備える運転支援画像生成装置。
【請求項２】
前記掲示物の掲示内容を示す画像として、撮像装置により撮像された画像を用いることを特徴とする請求項１に記載の運転支援画像生成装置。
【請求項３】
前記画像処理部により生成された運転支援画像の画質を判定する画質判定部を備え、
前記画像処理部は、
前記運転支援画像の画質が前記画質判定部に設定された閾値よりも低いと判定された場合に、前記文字認識部により認識された文字を強調した運転支援画像を生成することを特徴とする請求項２に記載の運転支援画像生成装置。
【請求項４】
道路又は道路周辺に掲示された掲示物の掲示内容を示す画像の文字が自車の車両に関する情報に該当する文字である場合に、当該掲示物の掲示内容を示す画像の文字を強調した運転支援画像を表示する表示部を備える運転支援画像表示装置。
【請求項５】
前記自車の車両に関する情報は、
指定車両情報または指定時間帯情報であることを特徴とする請求項４に記載の運転支援画像表示装置。
【請求項６】
前記表示部は、
前記掲示物の掲示内容を示す画像として、撮像装置により撮像された画像を用いることを特徴とする請求項４に記載の運転支援画像表示装置。
【請求項７】
前記表示部は、
前記撮像装置により撮像された画像の画質が設定された閾値よりも低い場合に、前記撮像装置により撮像された画像の文字を強調した運転支援画像を表示することを特徴とする請求項６に記載の運転支援画像表示装置。
【請求項８】
前記表示部は、
搭乗者が前記掲示物を認識していない場合に、前記運転支援画像を表示することを特徴とする請求項４に記載の運転支援画像表示装置。
【請求項９】
道路又は道路周辺に掲示された掲示物を撮像する撮像装置と、
前記撮像装置により撮像された前記掲示物の掲示内容を示す画像の文字を認識する文字認識部と、前記文字認識部により認識された文字が自車の車両に関する情報に該当するかを判定する車両情報判定部と、前記車両情報判定部により自車の車両に関する情報に該当すると判定された文字を強調した運転支援画像を生成する画像処理部とを備える運転支援画像生成装置と、
前記運転支援画像生成装置によって生成された運転支援画像を表示する表示部と
を備えることを特徴とする運転支援画像表示システム。
【請求項１０】
道路又は道路周辺に掲示された掲示物の掲示内容を示す画像の文字を認識する文字認識処理と、
前記文字認識処理により認識された文字が自車の車両に関する情報に該当するかを判定する車両情報判定処理と、
前記車両情報判定処理により自車の車両に関する情報に該当すると判定された文字を強調した運転支援画像を生成する画像処理
とをコンピュータに実行させる運転支援画像生成プログラム。
【国際調査報告】
2015071923.tif 000025
2015071923.tif 000026
2015071923.tif 000027
2015071923.tif 000028