(57)【要約】  本発明の運転支援画像生成装置は、道路又は道路周辺に掲示された掲示物の掲示内容を示す複数の運転支援画像を記憶する運転支援画像記憶部と、運転支援画像記憶部に記憶された運転支援画像から予め設定された優先順序に基づき１つ又は複数の運転支援画像を選択し、選択した運転支援画像を用いて車両内の表示部に表示させる画像を生成する画像生成部と、を備える。
2015071924.tif 000002
【特許請求の範囲】
【請求項１】
道路又は道路周辺に掲示された掲示物の掲示内容を示す複数の運転支援画像を記憶する運転支援画像記憶部と、
前記運転支援画像記憶部に記憶された運転支援画像から予め設定された優先順序に基づき１つ又は複数の運転支援画像を選択し、選択した前記運転支援画像を用いて車両内の表示部に表示させる画像を生成する画像生成部と、
を備える運転支援画像生成装置。
【請求項２】
前記運転支援画像記憶部は、前記運転支援画像と車両の位置に関する情報とを対応づけて記憶し、
前記画像生成部は、前記車両の位置に関する情報に基づいて、前記運転支援画像記憶部に記憶された前記複数の運転支援画像のうち、前記画像の生成に用いる運転支援画像を選択することを特徴とする請求項１に記載の運転支援画像生成装置。
【請求項３】
前記掲示物の内容を判定する掲示物内容判定部を備え、
前記運転支援画像記憶部は、前記運転支援画像と前記掲示物内容判定部により判定された掲示物の内容を示す情報とを対応づけて記憶し、
前記画像生成部は、前記掲示物の内容に基づいて、前記運転支援画像記憶部に記憶された前記複数の運転支援画像のうち、前記画像の生成に用いる運転支援画像を選択すること  を特徴とする請求項１に記載の運転支援画像生成装置。
【請求項４】
前記画像生成部は、前記運転支援画像記憶部に記憶された前記複数の運転支援画像のうち、異なる種類の内容を有する掲示物の運転支援画像を複数選択し、選択した複数の運転支援画像に基づいて、前記種類毎に前記画像を生成することを特徴とする請求項３に記載の運転支援画像生成装置。
【請求項５】
車両の搭乗者が前記掲示物を認識したか否かを判定する視線検出判定装置を備え、
前記運転支援画像記憶部は、前記視線検出判定装置により掲示物が前記車両の搭乗者に認識されていないことを示す情報とを対応づけて記憶し、
前記画像生成部は、前記運転支援画像記憶部に記憶された運転支援画像のうち、前記掲示物が認識されていないことを示す情報が対応づけられた前記運転支援画像を優先して選択することを特徴とする請求項１に記載の運転支援画像生成装置。
【請求項６】
前記画像生成部は、選択した前記運転支援画像又は前記運転支援画像に対応する識別情報を用いて、表示する運転支援画像を搭乗者が選択するための選択表示を生成することを特徴とする請求項１に記載の運転支援画像生成装置。
【請求項７】
前記画像生成部は、前記運転支援画像記憶部に記憶された運転支援画像を複数選択し、選択した複数の運転支援画像を同時に表示する画像を生成することを特徴とする請求項１に記載の運転支援画像生成装置。
【請求項８】
道路又は道路周辺に掲示された掲示物の掲示内容を示す運転支援画像を表示する表示部を備える運転支援画像表示装置であって、
前記表示部は、
車両が通過した道路又は道路周辺に掲示された複数の掲示物のうち、予め設定された優先順序に基づいて選択された１つ又は複数の掲示物の内容を示す運転支援画像を含む画像を表示することを特徴とする運転支援画像表示装置。
【請求項９】
前記表示部は、車両の位置に応じて設定される優先順序に基づいて画像を表示することを特徴とする請求項８に記載の運転支援画像表示装置。
【請求項１０】
前記表示部は、前記掲示物の内容に応じて設定される優先順序に基づいて画像を表示することを特徴とする請求項８に記載の運転支援画像表示装置。
【請求項１１】
前記表示部は、異なる種類の内容を有する掲示物の運転支援画像を前記種類毎に前記画像として表示することを特徴とする請求項１０に記載の運転支援画像表示装置。
【請求項１２】
前記表示部は、
車両の搭乗者が前記掲示物を認識していない場合に、
前記優先順序に基づき選択された１つ又は複数の掲示物の内容を示す運転支援画像を含む画像を表示することを特徴とする請求項８に記載の運転支援画像表示装置。
【請求項１３】
前記表示部は、表示する運転支援画像を搭乗者が選択するための選択画面を表示することを特徴とする請求項８に記載の運転支援画像表示装置。
【請求項１４】
前記表示部は、複数の運転支援画像を同時に表示することを特徴とする請求項８に記載の運転支援画像表示装置。
【請求項１５】
道路又は道路周辺に掲示された掲示物を撮像する撮像装置と、
前記撮像装置により撮像された掲示物の掲示内容を示す複数の運転支援画像を記憶する運転支援画像記憶部、前記運転支援画像記憶部に記憶された運転支援画像から予め設定された優先順序に基づき１つ又は複数の運転支援画像を選択し、選択した前記運転支援画像に基づいて表示させる画像を生成する画像生成部、前記画像生成部で生成された画像を表示する車両内の表示部を備える運転支援画像表示装置と、
を備えることを特徴とする運転支援画像表示システム。
【請求項１６】
道路又は道路周辺に掲示された掲示物の掲示内容を示す複数の運転支援画像を記憶する運転支援画像記憶部に前記運転支援画像を記憶させる処理と、
前記運転支援画像記憶部に記憶された運転支援画像から予め設定された優先順序に基づき１つ又は複数の運転支援画像を選択し、選択した前記運転支援画像を用いて車両内の表示部に表示させる画像を生成する画像生成処理と、
をコンピュータに実行させる運転支援画像生成プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、道路上又は道路周辺の掲示物を車内の表示部に表示することで運転を支援する運転支援画像生成装置、運転支援画像表示装置、運転支援画像表示システム、及び運転支援画像生成プログラムに関するものである。
【背景技術】
【０００２】
道路には、制限速度や駐車禁止等の情報を示す交通標識が掲示されている。この交通標識を車両の搭乗者は目視によって認識するが、視線を交通標識に移す必要があり、搭乗者は交通標識を見逃すことがしばしばある。搭乗者がこのような交通標識を見落とした場合に見落とした交通標識を確認できるように、車両に設置されたカメラによって道路の前方風景の画像を取得し、取得した画像から交通標識を認識して表示部に表示する技術が考案されている（例えば、特許文献１）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特公平４−５２３９号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
しかしながら、特許文献１に記載された技術は、カメラによって撮像した直近の交通標識の画像を表示部に表示するのみである。したがって、特許文献１に記載された技術では、複数の交通標識の画像を過去に遡って確認することはできず、不便なものとなっていた。特に、車両の走行中に複数の標識が連続して掲示されていた場合、連続して交通標識が表示されるため、表示される交通標識を確認する前に次の交通標識が表示されることとなり、再度確認する必要性もあった。【０００５】
本発明は、上記のような課題を解決するため、交通標識等の掲示物を過去に遡って確認することが可能な運転支援画像生成装置、運転支援画表示装置、運転支援画像表示システム及び運転支援画像生成プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明の運転支援画像生成装置は、道路又は道路周辺に掲示された掲示物の掲示内容を示す複数の運転支援画像を記憶する運転支援画像記憶部と、前記運転支援画像記憶部に記憶された運転支援画像から予め設定された優先順序に基づき１つ又は複数の運転支援画像を選択し、選択した前記運転支援画像を用いて車両内の表示部に表示させる画像を生成する画像生成部と、を備えることを特徴とする。【０００７】
本発明の運転支援画像表示装置は、道路又は道路周辺に掲示された掲示物の掲示内容を示す運転支援画像を表示する表示部を備える運転支援画像表示装置であって、前記表示部は、前記車両が通過した道路又は道路周辺に掲示された複数の掲示物のうち、予め設定された優先順序に基づいて選択された１つ又は複数の掲示物の内容を示す運転支援画像を含む画像を表示することを特徴とする。【０００８】
本発明の運転支援画像表示システムは、道路又は道路周辺に掲示された掲示物を撮像する撮像装置と、前記撮像装置により撮像された掲示物の掲示内容を示す複数の運転支援画像を記憶する運転支援画像記憶部、前記運転支援画像記憶部に記憶された運転支援画像から予め設定された優先順序に基づき１つ又は複数の運転支援画像を選択し、選択した前記運転支援画像に基づいて表示させる画像を生成する画像生成部、前記画像生成部で生成された画像を表示する車両内の表示部を備える運転支援画像表示装置と、を備えることを特徴とする。【０００９】
本発明の運転支援画像生成プログラムは、道路又は道路周辺に掲示された掲示物の掲示内容を示す複数の運転支援画像を記憶する運転支援画像記憶部に前記運転支援画像を記憶させる処理と、前記運転支援画像記憶部に記憶された運転支援画像から予め設定された優先順序に基づき１つ又は複数の運転支援画像を選択し、選択した前記運転支援画像を用いて車両内の表示部に表示させる画像を生成する画像生成処理と、をコンピュータに実行させることを特徴とする。
【発明の効果】
【００１０】
本発明に係る運転支援画像生成装置、運転支援画像表示装置、運転支援画像表示システム、及び運転支援画像生成プログラムは、掲示物の内容を示す運転支援画像を複数表示可能とするので、搭乗者は運転支援画像を過去に遡って確認することができる。
【図面の簡単な説明】
【００１１】
【図１】実施の形態１に係る運転支援画像表示システムの構成図である。
【図２】実施の形態１に係る運転支援画像表示システムの構成図であり、運転支援画像生成部の構成を詳細に示す図である。
【図３】実施の形態１に係る掲示物認識処理部のパターンマッチングを説明する図である。
【図４】実施の形態１に係る選択画面の例である。
【図５】実施の形態１に係る選択画面に時刻を表示する例である。
【図６】実施の形態１に係る運転支援画像表示システムの動作フローチャートである。
【図７】実施の形態１に係る撮像装置が撮像する撮像画像の例である。
【図８】実施の形態１に係る掲示物認識処理部が切り出した運転支援画像の例である。
【図９】実施の形態３に係る運転支援画像表示システムの構成図であり、運転支援画像生成部の構成を詳細に示す図である。
【図１０】実施の形態３に係る運転支援画像表示システムの動作フローチャートである。
【図１１】実施の形態３に係る掲示物内容判定部４４が有する識別情報と掲示物の内容とを対応づけたテーブルの例である。
【図１２】実施の形態３に係る選択画面の例である。
【図１３】実施の形態３に係る画像生成部が生成する選択画面の例であって、選択表示を強調する例である。
【図１４】実施の形態３に係る画像生成部が生成する選択画面の例であって、法規制に違反した掲示物を優先して表示する図である。
【図１５】実施の形態４に係る運転支援画像表示システムの構成図であり、運転支援画像生成部の構成を詳細に示す図である。
【図１６】実施の形態４に係る運転支援画像表示システムの動作フローチャートである。
【図１７】実施の形態５に係る運転支援画像表示システムの動作フローチャートである。
【図１８】図１８は実施の形態６係る画像生成部が生成する選択画面の例である。
【図１９】実施の形態６に係る画像生成部が生成する選択画面の他の例である。
【発明を実施するための形態】
【００１２】
実施の形態１．
以下、図１を用いて、本発明の実施の形態１に係る運転支援画像表示システムの構成について説明する。
【００１３】
実施の形態１に係る運転支援画像表示システムは、撮像装置１、ナビゲーション装置２、表示部３、運転支援画像生成部４、操作入力部５を備える。撮像装置１とナビゲーション装置２と表示部３と運転支援画像生成部４と操作入力部５とは、車載ＬＡＮ６によって有線又は無線で接続される。なお、表示部３と運転支援画像生成部４とで運転支援画像表示装置が構成される。
【００１４】
撮像装置１は、車両の前方外部に取り付けられたカメラであり、道路上又は道路周辺の掲示物を含む風景画像を撮像し、画像として取得する。ここで、掲示物とは、車両が走行する道路上又は道路周辺に設置された交通標識、店の看板、又は道路上にペイントされた文字等の情報を表示するものである。例えば、掲示物は、道路に掲示され、交通渋滞やチェーン規制等の情報を搭乗者に表示する電光掲示板でもよい。撮像装置１は、掲示物を予め決められた時間間隔で撮像し、撮像した画像に関する情報を後述する運転支援画像生成部４に出力する。なお、撮像装置１は、予め決められた時間間隔で掲示物を含む風景画像を撮像するものに限られず、掲示物が撮像装置１の撮像範囲に現れた場合に撮像するように構成してもよい。また、撮像装置１の取り付け位置は、図１のように車両の前方外部としたが、掲示物を撮像できる位置であればよく、車両内部から車両外部を撮像するように設けられていてもよい。以下の説明において、撮像装置１によって取得した掲示物を含む風景の画像を撮像画像とする。
【００１５】
ナビゲーション装置２は、ＧＰＳ（Ｇｌｏｂａｌ  Ｐｏｓｉｔｉｏｎｉｎｇ  ｓｙｓｔｅｍ）等により車両の位置を特定する位置特定手段（図示せず）と、設定された目的地又は経由地まで車両を案内する案内手段（図示せず）を備え、搭乗者によって目的地及び経由地が設定されることで、車両を目的地及び経由地まで案内する。後述する運転支援画像生成部４は、ナビゲーション装置２から目的地、経由地、車両の位置に関する情報を取得することができる。
【００１６】
表示部３は、車両のスピードメーター、タコメーター、燃料計など、車両の走行に必要な情報を示す計器類が配置されるインストルメントパネルであり、後述する運転支援画像生成部４から画像の情報を受けて、対応する画像を表示する。インストルメントパネルは、これまで機械式のメータが主流であったが、近年、液晶表示装置等の低価格化、大画面化により、機械式から非機械式のディスプレイへの置き換えが進んでいる。これにより、インストルメントパネルは、表示する内容の自由度が増し、後述する運転支援画像及び選択画面を表示することが可能となり、特に利便性が高まっている。なお、表示部３は、インストルメントパネルに限られず、画像を表示できるものであればよい。例えば、表示部３は、ナビゲーション装置２の案内表示を表示するモニター、車両のフロントガラス手前に設置されるヘッドアップディスプレイ、及びスマートフォン等の携帯端末でもよい。
【００１７】
運転支援画像生成部４は、撮像装置１で取得した撮像画像から掲示物を切り出し、表示部３に表示する掲示物の画像（以下、運転支援画像とする）を生成する。また、表示部３に表示する運転支援画像を搭乗者が選択するための画面（以下、選択画面とする）を生成する。
【００１８】
操作入力部５は、運転支援画像生成部４で生成された選択画面及び運転支援画像を表示部３へ表示させるために搭乗者が操作する入力部である。操作入力部５は、例えば、選択ボタン、インストルメントパネル又はナビゲーション装置２のディスプレイ等のタッチパネルでもよく、搭乗者の操作によって選択画面及び運転支援画像の表示を指示できるものであればよい。
【００１９】
車載ＬＡＮ６は、撮像装置１、ナビゲーション装置２、表示部３、運転支援画像生成部４、操作入力部５とを有線又は無線で接続する。撮像装置１、ナビゲーション装置２、表示部３、運転支援画像生成部４、操作入力部５は車載ＬＡＮ６を介して情報のやりとりを行う。
【００２０】
ここで、図２を用いて運転支援画像生成部４の構成について詳細に説明する。図２は実施の形態１に係る運転支援画像表示システムの構成図であり、運転支援画像生成部の構成を詳細に示す図である。
【００２１】
運転支援画像生成部４は、掲示物認識処理部４１、運転支援画像記憶部４２、画像生成部４３を備える。なお、図２に示す掲示物認識処理部４１、画像生成部４３は、ハードウェアによって構成されても良いし、コンピュータに所定のプログラムを実行させることによっても実現できる。
【００２２】
掲示物認識処理部４１は、撮像装置１で取得した撮像画像から掲示物を認識し、この掲示物と認識した領域を切り出す。掲示物の認識には、パターンマッチング等の方法を用いる。具体的には、掲示物認識処理部４１は、予め掲示物に関する情報が登録され、撮像装置１から取得した撮像画像と登録された掲示物の形状及び色を照合することによって、掲示物を認識する。例えば、図３に示すような青色で長方形の掲示物を含む撮像画像が撮像装置１により撮像された場合、掲示物認識処理部４１は、予め登録した掲示物のパターンから青色かつ長方形のものを検索する。掲示物認識処理部４１は、検索の結果、青色かつ長方形に該当するパターンが抽出された場合に、撮像画像の青色で長方形のものを掲示物と認識する。掲示物を認識した場合、掲示物認識処理部４１は、掲示物と認識した領域を切り出す。
【００２３】
運転支援画像記憶部４２は、掲示物認識処理部４１で切り出した運転支援画像の情報と識別情報とを対応づけて運転支援画像記憶部４２に記憶する。識別情報は、記憶した運転支援画像を識別する情報であり、例えば、ナビゲーション装置２から得られる車両の位置情報である。また、識別情報は、車両の位置情報に限られず、撮像時の時刻、撮像した掲示物の内容、撮像した掲示物の画質、搭乗者が掲示物を認識したか否かの情報等でもよい。以降、運転支援画像表示システムの処理において、運転支援画像の情報のやりとりを行う場合、この識別情報で運転支援画像を識別できるものとする。本実施の形態においては、識別情報を車両の位置情報とする。
【００２４】
画像生成部４３は、予め設定された表示モードに基づいて選択画面を生成し、表示部３に表示させる。表示モードとは、予め画像生成部４３にプログラムされた動作手順であり、運転支援画像記憶部４２に複数記憶された運転支援画像のうち選択画面に表示させる画像の優先順序を決定するものである。搭乗者は、操作入力部５を操作することにより画像生成部４３の表示モードを変更することができる。
【００２５】
例えば、搭乗者により「掲示物を撮像した位置が現在地に近い順」に表示する表示モードが選択された場合、画像生成部４３は、掲示物を撮像した位置が現在地に近い順に運転支援画像を表示するための選択画面を生成する。選択画面には、運転支援画像そのものが表示されても良いし、時刻等の運転支援画像の識別情報が表示されても良い。識別情報が表示される場合、搭乗者は表示したい運転支援画像に対応する識別情報を選択する。
【００２６】
図４は、表示モードに基づいて選択画面に運転支援画像が表示される例を示す。表示モードが「掲示物を撮像した位置が現在地に近い順」であれば、最初に表示される画像は、掲示物を撮像した位置が現在地に一番近い運転支援画像Ａである。搭乗者が選択ボタン３１ａ、３１ｂを操作することにより、表示する運転支援画像を入れ替えることができる。例えば、選択ボタン３１ｂが操作されることにより、次に現在地に近い運転支援画像Ｂを表示することができる。続いて、選択ボタン３１ｂの操作により、運転支援画像Ｃ、Ｄを順次表示することが可能である。選択ボタン３１ａを操作すれば、前の運転支援画像に戻る。なお、操作入力部５が車両のハンドル等に設けられた機械式のボタンである場合、表示部３の選択画面に表示されるカーソルなどを操作入力部５により操作して選択ボタン３１を操作する。一方、操作入力部５が表示部３に設けられたタッチパネルである場合、直接表示部３の選択ボタン３１を搭乗者が指で押すことで運転支援画像を入れ替えることができる。
【００２７】
図５は、表示モードに基づいて運転支援画像に対応づけられた識別情報である時刻が選択画面に表示される例を示す。表示モードが「掲示物を撮像した位置が現在地に近い順」であれば、最初に表示される画像は、現在地に一番近い掲示物を撮像した時刻である。この場合にも、搭乗者は選択ボタン３１ａ、３１ｂを操作することにより、表示させたい運転支援画像に対応する時刻を選択することができる。例えば、搭乗者が３０分前に通過した地点における運転支援画像を表示させたいと考えた場合、現在時刻から３０分前の時刻を選択することによって、３０分前に撮像された掲示物の運転支援画像を表示させることができる。図４の運転支援画像、図５の時刻のように、表示モードに従って表示される選択可能な表示を選択表示という。すなわち、選択表示は、搭乗者が表示部３に表示する運転支援画像を選択するためのアイコン又は画像であって、選択画面上に表示されるものである。搭乗者が選択表示を選択することによって、運転支援画像生成部４は対応する運転支援画像を表示部３に表示させる。選択表示は、例えば、運転支援画像そのもの、識別情報そのもの、識別情報に対応する文字等であり、搭乗者が所望の運転支援画像を識別することが可能なものであればよい。
【００２８】
選択表示としては、運転支援画像に対応づけられた識別情報が車両の位置情報である場合、例えば、交差点の名称等を用いてもよい。この場合、ナビゲーション装置２から車両の位置情報として交差点の名称に関する情報を受けて、識別情報として対応づけて運転支援画像記憶部４２に記憶しておけばよい。交差点名を選択表示とすれば、車両がＡ駅を目的地として走行しており、Ａ駅を通り過ぎたような場合においても、交差点の名称等「Ａ駅前」等が選択表示として表示されるので、搭乗者は間違えた道を容易に確認することができる。
【００２９】
以下、図６から図８を用いて実施の形態１に係る運転支援画像表示システムの動作（ＳＴ２以降については実施の形態１に係るプログラムの処理手順）を説明する。図６は実施の形態１に係る運転支援画像表示システムの動作フローチャートである。図７は実施の形態１に係る撮像装置が撮像する撮像画像の例である。図８は実施の形態１に係る掲示物認識処理部が切り出した運転支援画像の例である。以下の説明において、搭乗者により画像生成部４３に設定された表示モードは、掲示物を撮像した位置が現在地に近い順であるものとする。また、選択画面に表示される選択表示は、運転支援画像そのものである例を用いて説明する。
【００３０】
図６のＳＴ１において、撮像装置１は道路又は道路周辺に掲示された掲示物を撮像する。本実施の形態に係る運転支援画像表示システムの動作の説明において、撮像装置１は、掲示物を撮像し、図７に例示する撮像画像を得たものとする。図７の斜線部は、掲示物の領域以外の背景である。また、図７の破線部内は、掲示物を示す。撮像装置１は撮像した撮像画像の情報を運転支援画像生成部４へ出力する。
【００３１】
ＳＴ２において、掲示物認識処理部４１は、撮像装置１から撮像画像の情報を取得し、掲示物をパターンマッチングにより認識する。また、掲示物認識処理部４１は、パターンマッチングにより掲示物と認識した掲示物の領域（図７の破線部内）を切り出し、運転支援画像（図８）を得る。また、掲示物認識処理部４１は、撮像画像の情報を取得するとともに、ナビゲーション装置２から掲示物を撮像した際の車両の位置に関する情報（以下、撮像時位置情報とする）を受ける。
【００３２】
ＳＴ３において、掲示物認識処理部４１は、切り出して得られた運転支援画像の情報を撮像時位置情報と対応づけて運転支援画像記憶部４２に記憶する。
【００３３】
ＳＴ４において、画像生成部４３は、操作入力部５から選択画面の表示指示があるか確認する。選択画面の表示指示があった場合、ＳＴ５に進み選択画面の生成を開始する。また、表示指示がない場合、再度ＳＴ１からＳＴ３までを繰り返し実行する。以降の説明において、運転支援画像生成部４は、ＳＴ１からＳＴ３を複数回繰り返し、運転支援画像記憶部４２に運転支援画像を複数記憶しているものとする。
【００３４】
ＳＴ５において、画像生成部４３は、選択画面を生成する際の車両の位置情報（以下、生成時位置情報とする）をナビゲーション装置２から取得し、選択画面の作成を開始する。
【００３５】
また、画像生成部４３は、設定された表示モードに基づいて、運転支援画像を順次読み出し、選択画面を生成する。この例の場合、表示モードは、「掲示物を撮像した位置が現在地に近い順」である。したがって、画像生成部４３は、生成時位置情報と撮像時位置情報を示す識別情報とを比較し、生成時位置情報に１番近い運転支援画像を読み出し、図４に示すような選択表示を生成し、この選択表示を配置した選択画面を生成する。
【００３６】
ＳＴ６において、画像生成部４３は、生成した選択画面を表示部３に表示する。このとき、搭乗者は、選択ボタン３１ａ、選択ボタン３１ｂの操作より選択画面に表示される運転支援画像を入れ替えることができる。例えば、搭乗者が図４に示す選択ボタン３１ｂを１回操作した場合、画像生成部４３は、生成時位置情報に対して２番目に近い識別情報が対応づけられた運転支援画像を選択し、再度、選択画面を生成する。なお、選択ボタン３１の操作は、操作入力部５により行う。搭乗者の選択ボタン３１の操作毎にＳＴ５、６は繰り返し実行される。
【００３７】
ＳＴ７において、搭乗者により選択画面の選択表示が選択された場合、画像生成部４３は、運転支援画像の表示指示を受けて、運転支援画像記憶部４２から選択表示に対応する運転支援画像を選択して読み出し、表示部３に表示させる。
【００３８】
以上のように、実施の形態１に係る運転支援画像表示システムは、掲示物を示す運転支援画像を複数記憶し、表示モードに基づいて運転支援画像を選択し、選択画面を生成するので、搭乗者が見逃した掲示物を過去に遡って確認することができるとともに、搭乗者に必要な運転支援画像を容易に検索させることができる。
【００３９】
実施の形態２
以下、実施の形態２について、図２、図６を用いて説明する。実施の形態２に係る運転支援画像表示システムは、車両の位置情報としてナビゲーション装置２に設定された目的地又は経由地の位置情報を用いて選択画面を生成することを特徴とする。なお、実施の形態２に係る運転支援画像の構成は、図１及び図２に示した構成と同様のものとして、説明を省略する。
【００４０】
画像生成部４３は、図６のＳＴ５において、生成時位置情報に代えてナビゲーション装置２に設定された目的地又は経由地の位置情報を取得する。
【００４１】
また、画像生成部４３は、取得した目的地又は経由地に近い撮像時位置情報が識別情報として対応づけられた運転支援画像を運転支援画像記憶部４２から優先して取得し、選択画面を生成する。
【００４２】
以上のように実施の形態２に係る運転支援画像表示システムは、車両が目的地を通り過ぎてしまったような場合に、本来曲がるべきであった交差点等を示す運転支援画像を搭乗者に容易に検索させることができる。
【００４３】
実施の形態３．
以下、図９から図１４を用いて、本発明の実施の形態２に係る運転支援画像表示システムの構成について説明する。なお、図９の説明において、実施の形態１の運転支援画像表示システムの構成に相当する部分には図１及び図２と同一符号を付してその説明を省略する。
【００４４】
実施の形態３に係る運転支援画像表示システムは、掲示物の内容に基づいて、選択画面を生成することを特徴とする。
【００４５】
以下、図９を用いて実施の形態３に係る運転支援画像表示システムの構成について説明する。図９は実施の形態３に係る運転支援画像表示システムの構成図であり、運転支援画像生成部の構成を詳細に示す図である。
【００４６】
本実施の形態において、運転支援画像生成部４は掲示物内容判定部４４を備える。なお、図９に示す掲示物内容判定部４４は、ハードウェアによって構成されても良いし、コンピュータに所定のプログラムを実行させることによっても実現できる。
【００４７】
掲示物内容判定部４４は、掲示物認識処理部４１で撮像画像から切り出された運転支援画像の内容を判定し、判定した掲示物の内容に対応した識別情報と運転支援画像とを対応づけて運転支援画像記憶部４２に記憶する。本実施の形態において、識別情報は、掲示物の内容に基づいて予め決められた識別番号を示すものである。例えば、掲示物の内容は、交通標識、店の看板等の分類である。また、掲示物の内容はさらに細かく分類したものでもよく、例えば、安全に関する内容を示す交通標識、速度規制を示す交通標識、特定の地域の道筋を示す交通標識、渋滞情報を示す交通標識、チェーン規制を示す交通標識等に分類されるものでもよい。
【００４８】
ここで、掲示物内容判定部４４が掲示物の内容を判定する判定方法について説明する。掲示物内容判定部４４は、文字認識手段（図示せず）を有し、掲示物の文字を認識して内容を分類する。文字の認識には、例えば、予め記憶された文字のパターンとの照合により文字を特定するＯＣＲ（Ｏｐｔｉｃａｌ  ｃｈａｒａｃｔｅｒ  ｒｅｃｏｇｎｉｔｉｏｎ）等の技術を用いる。
【００４９】
なお、掲示物内容判定部４４は、掲示物の内容の判定方法として文字を認識するものとして説明したが、これに限られず、掲示物の内容を判定することが可能な方法を用いればよい。例えば、予め掲示物に関する情報を登録しておき、運転支援画像と登録された掲示物の形状及び色を照合することによって、掲示物を特定するパターンマッチングを用いてもよい。
【００５０】
画像生成部４３は、掲示物内容判定部４４で判定された掲示物の内容に基づいて、選択画面を生成する。
【００５１】
次に、図１０から図１４を用いて、実施の形態３に係る運転支援画像表示システムの動作（ＳＴ２以降については実施の形態３に係るプログラムの処理手順）について説明する。図１０は実施の形態３に係る運転支援画像表示システムの動作フローチャートである。図１１は、実施の形態３に係る掲示物内容判定部４４が有する識別情報と掲示物の内容とを対応づけたテーブルの例である。図１２は実施の形態３に係る選択画面の例である。図１３は実施の形態３に係る画像生成部が生成する選択画面の例であって、選択表示を強調する例である。図１４は実施の形態３に係る画像生成部が生成する選択画面の例であって、法規制に違反した掲示物を優先して表示する図である。以下、図１０の説明において、実施の形態１に係る運転支援画像表示システムの動作に相当するステップには、図６と同一符号を付してその説明を省略する。また、画像生成部４３には、表示モードとして「安全に関する掲示物を優先して表示」するように設定されているものとする。
【００５２】
ＳＴ３１において、掲示物内容判定部４４は、ＳＴ１、ＳＴ２にて生成された運転支援画像を掲示物認識処理部４１から取得する。また、掲示物内容判定部４４は、取得した運転支援画像の内容を文字の認識又はパターンマッチング等を用いて判定する。
【００５３】
ＳＴ３２において、掲示物内容判定部４４は、ＳＴ３１で内容を認識した運転支援画像に、この運転支援画像（掲示物）の内容に対応した識別情報を対応づけて運転支援画像記憶部４２に記憶する。例えば、掲示物内容判定部４４は、予め掲示物の内容を分類し、同じ種類の内容、すなわち同じカテゴリーの掲示物に同じ識別情報を対応づけたテーブルを記憶しており、このテーブルに基づいて、識別情報を決定する。例えば、図１１において、識別情報「１」の行には、安全に関わる掲示物の内容が対応づけられている。掲示物内容判定部４４は、運転支援画像の内容を判定し、「チェーン規制」を意味する掲示物であると判定した場合には、運転支援画像を識別情報「１」と対応づけて運転支援画像記憶部４２に記憶する。また、図１１の識別情報「２」の行には規制情報に関わる掲示物の内容が対応づけられている。仮に、ＳＴ３１において、掲示物内容判定部４４により運転支援画像が「右折禁止」を意味すると判定された場合、ＳＴ３２では掲示物認識処理部４４によって運転支援画像を識別情報「２」と対応づけて、運転支援画像記憶部４２に記憶する。
【００５４】
ＳＴ５１において、ＳＴ４で運転支援画像の表示指示があった場合、画像生成部４３は、選択画面を生成する。この例において、画像生成部４３は、表示モードが「安全に関する掲示物を優先して表示」であるため、安全に関する掲示物を示す識別情報「１」が対応づけられた運転支援画像を運転支援画像記憶部４２から検索する。画像生成部４３は、検索により得られた運転支援画像を用いて選択画面を生成する。
【００５５】
ＳＴ６、７において運転支援画像表示システムは、選択画面を表示し、この選択画面において搭乗者が選択ボタン３１を操作することによって、所望の運転支援画像を表示する。例えば、図１２Ａに示すように、選択画面は優先的に安全に関する運転支援画像を表示することができる。図１２Ａは滑りやすいことを示す掲示物の運転支援画像である。
【００５６】
なお、本実施の形態に係る運転支援画像記憶部４２に記憶された運転支援画像の中に、安全に関する運転支援画像が複数ある場合、画像生成部４３は、複数の安全に関する運転支援画像のうち、車両の現在位置に一番近いものから表示するように構成することも可能である。すなわち、実施の形態１に係る運転支援画像表示システムと組み合わせて実施することが可能である。
【００５７】
また、本実施の形態に係る運転支援画像表示システムは、選択画面に安全に関する選択画面のみ表示し、その他を表示しないように構成してもよい。
【００５８】
さらに、本実施の形態に係る運転支援画像表示システムにおいて、画像生成部４３は、優先的に表示する選択表示を表示モードに基づいて選択画面に表示することとしたが、順序を変えることに加えて、設定された表示モードに基づいて運転支援画像の強調表示を行った選択画面を生成するように構成してもよい。例えば、図１３に示すように、選択画面のうち安全に関する運転支援画像を強調する枠を合成してもよい。また、強調表示は、枠をつけることに限られず、運転支援画像の点滅、コントラストの変更、拡大、「危険」等の文字の添付等、運転支援画像を強調できるものであればよい。
【００５９】
また、本実施の形態に係る運転支援画像表示システムにおいて、画像生成部４３は、法規制に関する運転支援画像を優先する表示モードが選択された場合、スピードメーター等の車載機器（図示せず）から自車の速度等に関する情報を取得し、速度規制に違反するものに関して優先的に表示するようにしてもよい。例えば、規制速度が５０ｋｍを示す掲示物が掲示された道路において、自車が８０ｋｍで走っていたとする。この場合に、掲示物内容判定部４４は、掲示物の内容と、スピードメーター等の車載機器からの情報を比較し、違反している場合に違反を示す識別情報を規制速度５０ｋｍを示す運転支援画像に対応づける。画像生成部４３は違反していると判断された運転支援画像を識別情報に基づいて検索し、図１４に示すように、選択画面の左上上方に規制速度５０ｋｍを示す運転支援画像に対応する選択表示を強調して表示する。
【００６０】
さらに、本実施の形態に係る運転支援画像表示システムにおいて、掲示物の内容は画質でもよい。例えば、掲示物内容判定部４４は、運転支援画像の画質が一定の閾値以下である場合に画質が悪いと判定する画質判定手段（図示せず）を備え、画質が悪いと判定された場合に、画質が悪い運転支援画像であることを示す識別情報を対応づける。画像生成部４３は、画質の良い運転支援画像の選択表示を優先的に表示させることが可能である。このように構成することで、画質が良い運転支援画像の選択表示を優先的に表示することができ、搭乗者自身で画質を判別する必要が無くなる。
【００６１】
また、本実施の形態に係る運転支援画像表示システムは、選択画面に運転支援画像を示す選択表示を表示するものとしたが、これに限られず、運転支援画像の内容を示す選択表示を表示するようにしてもよい。例えば、「案内標識」、「規制標識」等の掲示物の種類を表示してもよいし、「落石注意」、「徐行」等掲示物の内容を直接示すものでもよい。
【００６２】
以上のように、実施の形態３に係る運転支援画像表示システムは、掲示物の内容に基づいて選択画面を生成するため、過去に遡って掲示物を確認する際に搭乗者に必要な運転支援画像表示を優先的に表示することができ、搭乗者の検索負担を軽減することができる。
【００６３】
実施の形態４．
以下、図１５、図１６を用いて、実施の形態４に係る運転支援画像表示システムについて説明する。図１５は実施の形態４に係る運転支援画像表示システムの構成図であり、運転支援画像生成部の構成を詳細に示す図である。図１６は実施の形態４に係る運転支援画像表示システムの動作フローチャートである。
【００６４】
実施の形態４に係る運転支援画像表示システムは、搭乗者の視線を検出して掲示物を認識したか否かを判定する視線検出判定装置７を備えることを特徴とする。
【００６５】
以下、図１５を用いて、実施の形態４に係る運転支援画像表示システムの構成について説明する。なお、図１５の説明において、実施の形態１から実施の形態３の運転支援画像表示システムの構成に相当する部分には図２、図９、と同一符号を付してその説明を省略する。
【００６６】
視線検出判定装置７は、車両の内部に設置され、搭乗者の視線の方向を示す視線情報を検出するカメラを備える。また、視線検出判定装置７は、視線情報を常に監視し、搭乗者が掲示物を認識したか否かを判定する。視線検出判定装置７は、図１に示した撮像装置１、ナビゲーション装置２、表示部３、運転支援画像生成部４と車載ＬＡＮ６を介して有線又は無線で接続される。
【００６７】
視線検出判定装置７は、予め決められた時間が設定されており、搭乗者の視線がこの決められた時間、掲示物の位置する方向に向けられている場合に、搭乗者が掲示物を認識したと判定する。視線検出判定装置７は、搭乗者が掲示物を認識していないと判定した場合には、搭乗者が掲示物を認識していないことを示す認識判定情報を掲示物認識処理部４１に出力する。
【００６８】
次に、図１６を用いて、運転支援画像表示システムの動作（ＳＴ２以降については実施の形態４に係るプログラムの処理手順）について説明する。図１６の説明において、実施の形態１から実施の形態３に係る運転支援画像表示システムの動作に相当するステップには、図６、図１０と同一符号を付してその説明を省略する。
【００６９】
ＳＴ２１１において、視線検出判定装置７は、ＳＴ１で撮像された掲示物を搭乗者が認識したか否かの判定を行う。なお、ＳＴ１及びＳＴ２において、視線検出判定部７は搭乗者の視線情報を検出しているものとする。また、視線検出判定装置７は、撮像装置１により撮像された掲示物を搭乗者が認識していないと判定した場合、認識判定情報を掲示物認識処理部４１に出力する。
【００７０】
ＳＴ３１１において、掲示物認識処理部４１は視線検出判定装置７から認識判定情報を受けた場合、搭乗者が掲示物を認識していないことを示す識別情報と運転支援画像とを対応づけて運転支援画像記憶部４２に記憶する。
【００７１】
運転支援画像生成部４は、ＳＴ４で操作入力部５から選択画面を表示する操作を受けた場合に、ＳＴ５１１の処理を実行する。
【００７２】
ＳＴ５１１において、画像生成部４３は、運転支援画像記憶部４２から搭乗者が掲示物を認識していないことを示す識別情報が対応づけられた運転支援画像を優先的に取得し、選択画面を生成する。
【００７３】
上記の説明においては、視線検出判定装置７は、搭乗者が撮像された掲示物を認識していないと判定した場合、認識判定情報を掲示物認識処理部４１に出力するものとしたが、視線検出判定装置７が画像生成部４３に認識判定情報を出力し、画像生成部４３が認識判定情報を受けた場合に、選択画面を生成するように構成してもよい。このように構成することで、搭乗者が掲示物を見逃した場合に搭乗者の操作によらず運転支援画像を自動で表示させることができる。
【００７４】
以上のように、実施の形態４に係る運転支援画像表示システムは、搭乗者が認識していない掲示物を優先的に選択画面に表示するので、搭乗者が過去に遡って掲示物を確認する際に、見逃した掲示物を容易に確認することができる。
【００７５】
実施の形態５．
実施の形態５に係る運転支援画像表示システムは、選択画面を生成することなく、最優先の１つ又は複数の運転支援画像を表示することを特徴とする。
【００７６】
以下、図１７を用いて実施の形態５に係る運転支援画像表示システムの動作（ＳＴ２以降については実施の形態５に係るプログラムの処理手順）について説明する。図１７は実施の形態５に係る運転支援画像表示システムの動作フローチャートである。図１７の説明において、実施の形態１の運転支援画像表示システムの動作に相当する部分には図６、図１０、及び図１６と同一符号を付してその説明を省略する。また、実施の形態５の運転支援画像表示システムの構成については、図１、図２、図９、図１５と同様のものとして説明を省略する。
【００７７】
ＳＴ４１１１において、画像生成部４３は、操作入力部５から運転支援画像の表示指示があるか確認する。運転支援画像の表示指示があった場合、ＳＴ７に進み設定された表示モードに従い運転支援画像を読み出して、表示部３に表示する。運転支援画像を表示する動作において、画像生成部４３は、表示モードに従った順序で表示指示毎に運転支援画像を読み出して表示してもよいし、予め運転支援画像をまとめて読み出し、表示指示毎に順次表示させるようにしてもよい。
【００７８】
また、画像生成部４３は、ＳＴ４１１１の表示指示によらず、自動で運転支援画像を表示するように構成してもよい。例えば、規制情報に違反している場合に、その規制情報に関わる掲示物の画像を運転支援画像として表示する。
【００７９】
以上のように、実施の形態５に係る運転支援画像表示システムは、選択画面を表示することなく、表示モードに従って最優先の運転支援画像を表示するので、搭乗者が選択画面を操作する手間を省くことができる。
【００８０】
実施の形態６．
実施の形態６では、実施の形態１から実施の形態５に係る運転支援画像表示システムの表示態様について、図１８、図１９を用いて説明する。図１８は実施の形態６係る画像生成部が生成する選択画面の例である。図１９は実施の形態６に係る画像生成部が生成する選択画面の他の例である。
【００８１】
実施の形態１から実施の形態５に係る運転支援画像表示システムの説明では、表示部３に１つの選択表示又は運転支援画像を表示するものとしたが、複数の選択表示又は運転支援画像を同時に表示するように構成することも可能である。
【００８２】
例えば、画像生成部４３は、図１８に示すように、複数の選択表示を同時に表示した選択画面を生成してもよい。この場合にも、画像生成部４３は、表示モードに基づいた順序で選択表示を生成する。例えば、表示モードが掲示物を撮像した順序である場合、図１８の左上、右上、右中央、左中央、左下、右下の順で表示される。なお、順序はこれに限られず、右上、左上、右中央、左中央、右下、左下の順に表示するなど、適宜変更可能である。
【００８３】
また、図１８の説明において、画像生成部４３は、１つのカテゴリーの掲示物を表示させるものとしたが、複数のカテゴリーの掲示物を同時に表示させるようにしてもよい。例えば、画像生成部４３は、表示部３に表示させるカテゴリーとして「交差点に関する掲示物」と「安全及び規制に関する掲示物」を表示させてもよい。具体的には、図１９に示すように、選択画面の左半分に「交差点に関する掲示物」を表示し、選択画面の右半分に「安全及び規制に関する掲示物」を表示する。また、表示させる掲示物のカテゴリーを選択するための表示（例えば「交差点」「安全及び規制」）を設け、選択されたカテゴリーの掲示物のみを表示部３に表示するようにしてもよい。例えば、搭乗者が見逃した安全及び規制に関する掲示物を確認したいときに、「安全及び規制」を選択することによって、安全及び規制に関する掲示物のみを優先的に表示することができる。
【００８４】
このように、異なるカテゴリーの掲示物を同時に表示する場合、表示部３を複数設けて、異なるカテゴリーの掲示物ごとに選択画面を同時に表示してもよい。例えば、画像生成部４３は、一方の表示部３に、「交差点に関する掲示物」に運転支援画像を表示させ、もう一方の表示部３には、「安全及び規制に関する掲示物」して表示させることもできる。
【００８５】
また、本実施の形態に係る画像生成部４３は、選択画面を表示せずに最優先の運転支援画像を表示する実施の形態５に係る運転支援画像表示システムにも、適用可能である。
【００８６】
なお、実施の形態１から実施の形態６に係る運転支援画像表示システムにおいて、搭乗者が表示する運転支援画像の優先順序を決める表示モードを、操作入力部５を用いて選択するようにしたが、搭乗者の声で選択するようにしてもよい。また、周期的に自動で表示を切り替えるようにしてもよい。
【００８７】
なお、実施の形態１から実施の形態６に係る運転支援画像表示システムにおいて、撮像装置１により撮像毎に運転支援画像を運転支援画像記憶部４２に記憶するものとしたが、必ずしも撮像毎に運転支援画像記憶部４２に運転支援画像を記憶する必要はない。例えば、過去に一度通過した地点における運転支援画像が既に運転支援画像記憶部４２に記憶されていることも考えられる。この場合、運転支援画像生成システムは、車両が再度同じ地点を通過した場合に、ナビゲーション装置２から受ける車両の位置情報に基づいて運転支援画像を読み出し、選択画面又は運転支援画像を表示するように構成してもよい。このように構成することで、撮像装置１によって掲示物を撮像する動作を省略することができ、装置の負担を軽減することができる。
【００８８】
また、実施の形態１から実施の形態６に係る運転支援画像表示システムは、自車両の運転支援画像を読み出すことに代えて、他の車両が撮像した運転支援画像の情報を受信してもよい。例えば、実施の形態１から実施の形態６に係る運転支援画像表示システムを備える他の車両が過去に撮像して切り出した運転支援画像の情報を外部サーバに送信して記憶することで、運転支援画像生成部４は、道路に設置された路側器等を介してサーバにアクセスし、運転支援画像の情報を取得することができる。
【００８９】
さらに、実施の形態１から実施の形態６に係る運転支援画像生成部４の説明においては、掲示物認識処理部４１は、撮像画像をそのまま切り出した運転支援画像を得るものとしたが、これに限られず、撮像した掲示物に対応するＣＧ（Ｃｏｍｐｕｔｅｒ  Ｇｒａｐｈｉｃｓ）によって運転支援画像を一から作成してもよい。ＣＧによって運転支援画像を作成する場合、運転支援画像生成部４は、予め掲示物に対応するＣＧ画像又は掲示物の一部に対応するＣＧ画像のパーツを記憶する記憶部（図示せず）を備え、撮像装置１によって撮像した掲示物に対応する掲示物のＣＧ画像を生成する。運転支援画像をＣＧにより作成する場合、掲示物認識処理部４１は撮像装置１により撮像された撮像画像から掲示物を認識し、認識した掲示物に対応するＣＧ画像を運転支援画像記憶部４２に記憶しておけばよい。
【００９０】
また、実施の形態１から実施の形態６に係る運転支援画像表示システムは、撮像画像に基づいて運転支援画像を生成するのではなく、予め地図データと共に記憶されている掲示物の内容を示す画像の情報を用いても良い。
【００９１】
なお、撮像画像を用いれば、実際の掲示物の内容が変更された場合又は新たな掲示物が掲示された場合にも、最新の正確な情報を運転支援画像として表示することができる。例えば、道路上又は道路周辺に掲示された掲示物は、道路の新設に合わせて新たに掲示されるが、新たに掲示された掲示物を撮像した画像を用いれば、予め地図データと共に記憶されている掲示物の内容を示す画像の情報が無い場合にも、最新の運転支援画像を得ることができる。
【００９２】
なお、実施の形態１から実施の形態６に係る運転支援画像生成部４は、車両に備えられるものとしたが、これに限られず、車両外の特定の場所に設けられたサーバ等に備えられていてもよい。例えば、車両に備えられた表示部３は、サーバ側に備えられた運転支援画像生成部４により生成された運転支援画像を無線通信により受信するようにしてもよい。また、表示部３は、スマートフォン等の通信手段と有線又は無線で接続され、このスマートフォンを介してサーバと通信するように構成されてもよい。
【００９３】
また、実施の形態１から実施の形態６に係る運転支援画像表示システムの特徴とする構成は、１つの同じ運転支援画像表示システムに搭載することが可能である。
【符号の説明】
【００９４】
１  撮像装置、２  ナビゲーション装置、３  表示部、４  運転支援画像生成部、５  操作入力部、６  車載ＬＡＮ、７  視線検出判定装置、４１  掲示物認識処理部、４２  運転支援画像記憶部、４３  画像生成部、４４  掲示物内容判定部
【図１】
2015071924.tif 000003
【図２】
2015071924.tif 000004
【図３】
2015071924.tif 000005
【図４】
2015071924.tif 000006
【図５】
2015071924.tif 000007
【図６】
2015071924.tif 000008
【図７】
2015071924.tif 000009
【図８】
2015071924.tif 000010
【図９】
2015071924.tif 000011
【図１０】
2015071924.tif 000012
【図１１】
2015071924.tif 000013
【図１２】
2015071924.tif 000014
【図１３】
2015071924.tif 000015
【図１４】
2015071924.tif 000016
【図１５】
2015071924.tif 000017
【図１６】
2015071924.tif 000018
【図１７】
2015071924.tif 000019
【図１８】
2015071924.tif 000020
【図１９】
2015071924.tif 000021
【手続補正書】
【提出日】平成27年12月7日(2015.12.7)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【０００６】
本発明の運転支援画像生成装置は、道路又は道路周辺に掲示された掲示物の掲示内容を示す複数の運転支援画像を記憶する運転支援画像記憶部と、前記運転支援画像記憶部に記憶された運転支援画像から予め設定された優先順序に基づき、車両が目的地に向かって走行する際に、現在地までに通過した道路又は道路周辺に掲示された掲示物の掲示内容を示す１つ又は複数の運転支援画像を選択し、選択した前記運転支援画像を用いて前記車両内の表示部に表示させる画像を生成する画像生成部と、を備えることを特徴とする。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
本発明の運転支援画像表示装置は、道路又は道路周辺に掲示された掲示物の掲示内容を示す運転支援画像を表示する表示部を備える運転支援画像表示装置であって、前記表示部は、車両が通過した道路又は道路周辺に掲示された複数の掲示物のうち、前記車両が目的地に向かって走行する際に現在地までに通過した道路又は道路周辺に掲示され、かつ、予め設定された優先順序に基づいて選択された１つ又は複数の掲示物の内容を示す運転支援画像を含む画像を表示することを特徴とする。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
本発明の運転支援画像表示システムは、道路又は道路周辺に掲示された掲示物を撮像する撮像装置と、前記撮像装置により撮像された掲示物の掲示内容を示す複数の運転支援画像を記憶する運転支援画像記憶部、前記運転支援画像記憶部に記憶された運転支援画像から予め設定された優先順序に基づき、車両が目的地に向かって走行する際に、現在地までに通過した道路又は道路周辺に掲示された掲示物の掲示内容を示す１つ又は複数の運転支援画像を選択し、選択した前記運転支援画像に基づいて表示させる画像を生成する画像生成部、前記画像生成部で生成された画像を表示する前記車両内の表示部を備える運転支援画像表示装置と、を備えることを特徴とする。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
本発明の運転支援画像生成プログラムは、道路又は道路周辺に掲示された掲示物の掲示内容を示す複数の運転支援画像を記憶する運転支援画像記憶部に前記運転支援画像を記憶させる処理と、前記運転支援画像記憶部に記憶された運転支援画像から予め設定された優先順序に基づき、車両が目的地に向かって走行する際に、現在地までに通過した道路又は道路周辺に掲示された掲示物の掲示内容を示す１つ又は複数の運転支援画像を選択し、選択した前記運転支援画像を用いて前記車両内の表示部に表示させる画像を生成する画像生成処理と、をコンピュータに実行させることを特徴とする。
【手続補正５】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
道路又は道路周辺に掲示された掲示物の掲示内容を示す複数の運転支援画像を記憶する運転支援画像記憶部と、
前記運転支援画像記憶部に記憶された運転支援画像から予め設定された優先順序に基づき、車両が目的地に向かって走行する際に、現在地までに通過した道路又は道路周辺に掲示された掲示物の掲示内容を示す１つ又は複数の運転支援画像を選択し、選択した前記運転支援画像を用いて前記車両内の表示部に表示させる画像を生成する画像生成部と、
を備える運転支援画像生成装置。
【請求項２】
前記運転支援画像記憶部は、前記運転支援画像と車両の位置に関する情報とを対応づけて記憶し、
前記画像生成部は、前記車両の位置に関する情報に基づいて、前記運転支援画像記憶部に記憶された前記複数の運転支援画像のうち、前記画像の生成に用いる運転支援画像を選択することを特徴とする請求項１に記載の運転支援画像生成装置。
【請求項３】
前記掲示物の内容を判定する掲示物内容判定部を備え、
前記運転支援画像記憶部は、前記運転支援画像と前記掲示物内容判定部により判定された掲示物の内容を示す情報とを対応づけて記憶し、
前記画像生成部は、前記掲示物の内容に基づいて、前記運転支援画像記憶部に記憶された前記複数の運転支援画像のうち、前記画像の生成に用いる運転支援画像を選択すること  を特徴とする請求項１に記載の運転支援画像生成装置。
【請求項４】
前記画像生成部は、前記運転支援画像記憶部に記憶された前記複数の運転支援画像のうち、異なる種類の内容を有する掲示物の運転支援画像を複数選択し、選択した複数の運転支援画像に基づいて、前記種類毎に前記画像を生成することを特徴とする請求項３に記載の運転支援画像生成装置。
【請求項５】
車両の搭乗者が前記掲示物を認識したか否かを判定する視線検出判定装置を備え、
前記運転支援画像記憶部は、前記視線検出判定装置により掲示物が前記車両の搭乗者に認識されていないことを示す情報とを対応づけて記憶し、
前記画像生成部は、前記運転支援画像記憶部に記憶された運転支援画像のうち、前記掲示物が認識されていないことを示す情報が対応づけられた前記運転支援画像を優先して選択することを特徴とする請求項１に記載の運転支援画像生成装置。
【請求項６】
前記画像生成部は、選択した前記運転支援画像又は前記運転支援画像に対応する識別情報を用いて、表示する運転支援画像を搭乗者が選択するための選択表示を生成することを特徴とする請求項１に記載の運転支援画像生成装置。
【請求項７】
前記画像生成部は、前記運転支援画像記憶部に記憶された運転支援画像を複数選択し、選択した複数の運転支援画像を同時に表示する画像を生成することを特徴とする請求項１に記載の運転支援画像生成装置。
【請求項８】
道路又は道路周辺に掲示された掲示物の掲示内容を示す運転支援画像を表示する表示部を備える運転支援画像表示装置であって、
前記表示部は、
車両が通過した道路又は道路周辺に掲示された複数の掲示物のうち、前記車両が目的地に向かって走行する際に現在地までに通過した道路又は道路周辺に掲示され、かつ、予め設定された優先順序に基づいて選択された１つ又は複数の掲示物の内容を示す運転支援画像を含む画像を表示することを特徴とする運転支援画像表示装置。
【請求項９】
前記表示部は、車両の位置に応じて設定される優先順序に基づいて画像を表示することを特徴とする請求項８に記載の運転支援画像表示装置。
【請求項１０】
前記表示部は、前記掲示物の内容に応じて設定される優先順序に基づいて画像を表示することを特徴とする請求項８に記載の運転支援画像表示装置。
【請求項１１】
前記表示部は、異なる種類の内容を有する掲示物の運転支援画像を前記種類毎に前記画像として表示することを特徴とする請求項１０に記載の運転支援画像表示装置。
【請求項１２】
前記表示部は、
車両の搭乗者が前記掲示物を認識していない場合に、
前記優先順序に基づき選択された１つ又は複数の掲示物の内容を示す運転支援画像を含む画像を表示することを特徴とする請求項８に記載の運転支援画像表示装置。
【請求項１３】
前記表示部は、表示する運転支援画像を搭乗者が選択するための選択画面を表示することを特徴とする請求項８に記載の運転支援画像表示装置。
【請求項１４】
前記表示部は、複数の運転支援画像を同時に表示することを特徴とする請求項８に記載の運転支援画像表示装置。
【請求項１５】
道路又は道路周辺に掲示された掲示物を撮像する撮像装置と、
前記撮像装置により撮像された掲示物の掲示内容を示す複数の運転支援画像を記憶する運転支援画像記憶部、前記運転支援画像記憶部に記憶された運転支援画像から予め設定された優先順序に基づき、車両が目的地に向かって走行する際に、現在地までに通過した道路又は道路周辺に掲示された掲示物の掲示内容を示す１つ又は複数の運転支援画像を選択し、選択した前記運転支援画像に基づいて表示させる画像を生成する画像生成部、前記画像生成部で生成された画像を表示する前記車両内の表示部を備える運転支援画像表示装置と、
を備えることを特徴とする運転支援画像表示システム。
【請求項１６】
道路又は道路周辺に掲示された掲示物の掲示内容を示す複数の運転支援画像を記憶する運転支援画像記憶部に前記運転支援画像を記憶させる処理と、
前記運転支援画像記憶部に記憶された運転支援画像から予め設定された優先順序に基づき、車両が目的地に向かって走行する際に、現在地までに通過した道路又は道路周辺に掲示された掲示物の掲示内容を示す１つ又は複数の運転支援画像を選択し、選択した前記運転支援画像を用いて前記車両内の表示部に表示させる画像を生成する画像生成処理と、
をコンピュータに実行させる運転支援画像生成プログラム。
【手続補正書】
【提出日】平成28年12月1日(2016.12.1)
【手続補正１】
【補正対象書類名】明細書
【補正対象項目名】０００６
【補正方法】変更
【補正の内容】
【０００６】
本発明の運転支援画像生成装置は、道路又は道路周辺に掲示された掲示物の掲示内容を示す複数の運転支援画像を記憶する運転支援画像記憶部と、車両が目的地に向かって走行する際に、現在地までに通過した道路又は道路周辺に掲示された掲示物の掲示内容を示す１つ又は複数の運転支援画像を、予め設定された優先順序に基づき、前記運転支援画像記憶部に記憶された運転支援画像から選択し、選択した前記運転支援画像を用いて前記車両内の表示部に表示させる画像を生成する画像生成部と、を備えることを特徴とする。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】０００７
【補正方法】変更
【補正の内容】
【０００７】
本発明の運転支援画像表示装置は、道路又は道路周辺に掲示された掲示物の掲示内容を示す運転支援画像を表示する表示部を備える運転支援画像表示装置であって、前記表示部は、車両が通過した道路又は道路周辺に掲示された複数の掲示物のうち、前記車両が目的地に向かって走行する際に、現在地までに通過した道路又は道路周辺に掲示された掲示物の掲示内容を示す１つ又は複数の運転支援画像であって、予め設定された優先順序に基づき選択された運転支援画像を含む画像を表示することを特徴とする。
【手続補正３】
【補正対象書類名】明細書
【補正対象項目名】０００８
【補正方法】変更
【補正の内容】
【０００８】
本発明の運転支援画像表示システムは、道路又は道路周辺に掲示された掲示物を撮像する撮像装置と、前記撮像装置により撮像された掲示物の掲示内容を示す複数の運転支援画像を記憶する運転支援画像記憶部、車両が目的地に向かって走行する際に、現在地までに通過した道路又は道路周辺に掲示された掲示物の掲示内容を示す１つ又は複数の運転支援画像を、予め設定された優先順序に基づき、前記運転支援画像記憶部に記憶された運転支援画像から選択し、選択した前記運転支援画像を用いて前記車両内の表示部に表示させる画像を生成する画像生成部、前記画像生成部で生成された画像を表示する前記車両内の表示部を備える運転支援画像表示装置と、を備えることを特徴とする。
【手続補正４】
【補正対象書類名】明細書
【補正対象項目名】０００９
【補正方法】変更
【補正の内容】
【０００９】
本発明の運転支援画像生成プログラムは、道路又は道路周辺に掲示された掲示物の掲示内容を示す複数の運転支援画像を記憶する運転支援画像記憶部に前記運転支援画像を記憶させる処理と、車両が目的地に向かって走行する際に、現在地までに通過した道路又は道路周辺に掲示された掲示物の掲示内容を示す１つ又は複数の運転支援画像を、予め設定された優先順序に基づき、前記運転支援画像記憶部に記憶された運転支援画像から選択し、選択した前記運転支援画像を用いて前記車両内の表示部に表示させる画像を生成する画像生成処理と、をコンピュータに実行させることを特徴とする。
【手続補正５】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
道路又は道路周辺に掲示された掲示物の掲示内容を示す複数の運転支援画像を記憶する運転支援画像記憶部と、
車両が目的地に向かって走行する際に、現在地までに通過した道路又は道路周辺に掲示された掲示物の掲示内容を示す１つ又は複数の運転支援画像を、予め設定された優先順序に基づき、前記運転支援画像記憶部に記憶された運転支援画像から選択し、選択した前記運転支援画像を用いて前記車両内の表示部に表示させる画像を生成する画像生成部と、
を備える運転支援画像生成装置。
【請求項２】
前記画像生成部は前記運転支援画像記憶部に記憶された運転支援画像から車両が走行した経路を遡る順序に基づき、現在地までに通過した道路又は道路周辺に掲示された掲示物の掲示内容を示す１つ又は複数の運転支援画像を選択し、選択した前記運転支援画像を用いて前記車両内の表示部に表示させる画像を生成することを特徴とする請求項１記載の運転支援画像生成装置。
【請求項３】
前記運転支援画像記憶部は、前記運転支援画像と車両の位置に関する情報とを対応づけて記憶し、
前記画像生成部は、前記車両の位置に関する情報に基づいて、前記運転支援画像記憶部に記憶された前記複数の運転支援画像のうち、前記画像の生成に用いる運転支援画像を選択することを特徴とする請求項１または請求項２記載の運転支援画像生成装置。
【請求項４】
前記掲示物の内容を判定する掲示物内容判定部を備え、
前記運転支援画像記憶部は、前記運転支援画像と前記掲示物内容判定部により判定された掲示物の内容を示す情報とを対応づけて記憶し、
前記画像生成部は、前記掲示物の内容に基づいて、前記運転支援画像記憶部に記憶された前記複数の運転支援画像のうち、前記画像の生成に用いる運転支援画像を選択すること  を特徴とする請求項１または請求項２記載の運転支援画像生成装置。
【請求項５】
前記画像生成部は、前記運転支援画像記憶部に記憶された前記複数の運転支援画像のうち、異なる種類の内容を有する掲示物の運転支援画像を複数選択し、選択した複数の運転支援画像に基づいて、前記種類毎に前記画像を生成することを特徴とする請求項４記載の運転支援画像生成装置。
【請求項６】
車両の搭乗者が前記掲示物を認識したか否かを判定する視線検出判定装置を備え、
前記運転支援画像記憶部は、前記視線検出判定装置により掲示物が前記車両の搭乗者に認識されていないことを示す情報とを対応づけて記憶し、
前記画像生成部は、前記運転支援画像記憶部に記憶された運転支援画像のうち、前記掲示物が認識されていないことを示す情報が対応づけられた前記運転支援画像を優先して選択することを特徴とする請求項１または請求項２記載の運転支援画像生成装置。
【請求項７】
前記画像生成部は、選択した前記運転支援画像又は前記運転支援画像に対応する識別情報を用いて、表示する運転支援画像を搭乗者が選択するための選択表示を生成することを特徴とする請求項または請求項２記載の運転支援画像生成装置。
【請求項８】
前記画像生成部は、前記運転支援画像記憶部に記憶された運転支援画像を複数選択し、選択した複数の運転支援画像を同時に表示する画像を生成することを特徴とする請求項１または請求項２記載の運転支援画像生成装置。
【請求項９】
道路又は道路周辺に掲示された掲示物の掲示内容を示す運転支援画像を表示する表示部を備える運転支援画像表示装置であって、
前記表示部は、
車両が通過した道路又は道路周辺に掲示された複数の掲示物のうち、前記車両が目的地に向かって走行する際に、現在地までに通過した道路又は道路周辺に掲示された掲示物の掲示内容を示す１つ又は複数の運転支援画像であって、予め設定された優先順序に基づき選択された運転支援画像を含む画像を表示することを特徴とする運転支援画像表示装置。
【請求項１０】
前記表示部は、車両の位置に応じて設定される優先順序に基づいて画像を表示することを特徴とする請求項９記載の運転支援画像表示装置。
【請求項１１】
前記表示部は、前記掲示物の内容に応じて設定される優先順序に基づいて画像を表示することを特徴とする請求項９記載の運転支援画像表示装置。
【請求項１２】
前記表示部は、異なる種類の内容を有する掲示物の運転支援画像を前記種類毎に前記画像として表示することを特徴とする請求項１１記載の運転支援画像表示装置。
【請求項１３】
前記表示部は、
車両の搭乗者が前記掲示物を認識していない場合に、
前記優先順序に基づき選択された１つ又は複数の掲示物の内容を示す運転支援画像を含む画像を表示することを特徴とする請求項９記載の運転支援画像表示装置。
【請求項１４】
前記表示部は、表示する運転支援画像を搭乗者が選択するための選択画面を表示することを特徴とする請求項９記載の運転支援画像表示装置。
【請求項１５】
前記表示部は、複数の運転支援画像を同時に表示することを特徴とする請求項９記載の運転支援画像表示装置。
【請求項１６】
道路又は道路周辺に掲示された掲示物を撮像する撮像装置と、
前記撮像装置により撮像された掲示物の掲示内容を示す複数の運転支援画像を記憶する運転支援画像記憶部、車両が目的地に向かって走行する際に、現在地までに通過した道路又は道路周辺に掲示された掲示物の掲示内容を示す１つ又は複数の運転支援画像を、予め設定された優先順序に基づき、前記運転支援画像記憶部に記憶された運転支援画像から選択し、選択した前記運転支援画像を用いて前記車両内の表示部に表示させる画像を生成する画像生成部、前記画像生成部で生成された画像を表示する前記車両内の表示部を備える運転支援画像表示装置と、
を備えることを特徴とする運転支援画像表示システム。
【請求項１７】
道路又は道路周辺に掲示された掲示物の掲示内容を示す複数の運転支援画像を記憶する運転支援画像記憶部に前記運転支援画像を記憶させる処理と、
車両が目的地に向かって走行する際に、現在地までに通過した道路又は道路周辺に掲示された掲示物の掲示内容を示す１つ又は複数の運転支援画像を、予め設定された優先順序に基づき、前記運転支援画像記憶部に記憶された運転支援画像から選択し、選択した前記運転支援画像を用いて前記車両内の表示部に表示させる画像を生成する画像生成処理と、
をコンピュータに実行させる運転支援画像生成プログラム。
【国際調査報告】
2015071924.tif 000022
2015071924.tif 000023
2015071924.tif 000024
2015071924.tif 000025