(57)【要約】【課題】運転者が必要とする情報を表示でき、短時間に多くの情報を伝えることができるヘッドアップディスプレイ装置を提供する。【解決手段】ＨＵＤ装置１は、車両情報Ｖを表す表示光を出射する表示器１０を備え、表示器１０からの表示光をフロントガラスに照射することにより車両情報Ｖに対応する虚像を表示するＨＵＤ装置１において、車両３の外の風景を撮影した撮像データＤを取得する撮像データ取得部２０と、取得した撮像データＤに含まれる対象物Ａに関する対象物情報Ｂを取得する情報取得部３０と、実際の風景に含まれる対象物Ａ１に重畳させて対象物情報Ｂを動画にて表示する表示処理部４０と、を備えて構成される。【選択図】図１
2020083103.tif 000002
【特許請求の範囲】
【請求項１】
車両情報を表す表示光を出射する表示器を備え、前記表示器からの前記表示光をフロントガラスに照射することにより前記車両情報に対応する虚像を表示するヘッドアップディスプレイ装置であって、
車外の風景を撮影した撮像データを取得する撮像データ取得部と、
取得した前記撮像データに含まれる対象物に関する対象物情報を取得する情報取得部と、
実際の風景に含まれる前記対象物に重畳させて前記対象物情報を動画にて表示する表示処理部と、を備える、
ことを特徴とするヘッドアップディスプレイ装置。
【請求項２】
ユーザが前記対象物を選択したことを検出する選択検出部を備え、
前記表示処理部は、前記選択検出部によりユーザが選択したことが検出された前記対象物に関する前記対象物情報を動画にて表示する、
ことを特徴とする請求項１に記載のヘッドアップディスプレイ装置。
【請求項３】
前記対象物は施設であり、
前記対象物情報は、前記施設の内部状況を示す状況情報を含み、
前記表示処理部は、前記状況情報に基づき前記施設の内部状況を示す動画を表示する、
ことを特徴とする請求項１又は２に記載のヘッドアップディスプレイ装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ヘッドアップディスプレイ装置に関する。
【背景技術】
【０００２】
車両情報を表示する装置としてヘッドアップディスプレイ装置が知られている。特許文献１として開示されたヘッドアップディスプレイ装置は、画像を表す表示光を出射する表示器を有し、表示器からの表示光を、平面鏡や凹面鏡等の光学系を介して、車両のフロントガラス等に投射させ、フロントガラスの前方に表示光に対応する一以上の画像を虚像として実景とともに運転者に視認させるものである。ヘッドアップディスプレイ装置を用いて実景に重畳させて車両の周辺情報を表示しようとする場合、対象物の脇や対象物を示す矢印と共にアイコンや説明文を表示することが考えられる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１７−１４９３５４号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
車両の周辺の対象物の情報をアイコンや説明文で表示する場合には、表示できる情報量に限界があり、必要な情報を運転者に伝えることができないという問題がある。
【０００５】
本発明は、上記問題点に鑑みてなされたものであり、運転者が必要とする情報を表示でき、短時間に多くの情報を伝えることができるヘッドアップディスプレイ装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
上記目的を達成するため、本発明に係るヘッドアップディスプレイ装置は、
車両情報を表す表示光を出射する表示器を備え、前記表示器からの前記表示光をフロントガラスに照射することにより前記車両情報に対応する虚像を表示するヘッドアップディスプレイ装置であって、
車外の風景を撮影した撮像データを取得する撮像データ取得部と、
取得した前記撮像データに含まれる対象物に関する対象物情報を取得する情報取得部と、
実際の風景に含まれる前記対象物に重畳させて前記対象物情報を動画にて表示する表示処理部と、を備える、
ことを特徴とする。
【発明の効果】
【０００７】
本発明のヘッドアップディスプレイ装置によれば、運転者が必要とする情報を表示でき、短時間に多くの情報を伝えることができる。
【図面の簡単な説明】
【０００８】
【図１】本発明のヘッドアップディスプレイ装置の一実施形態に係るブロック図である。
【図２】一実施形態に係るヘッドアップディスプレイ装置の概略構成図である。
【図３】一実施形態に係る対象物情報の表示処理のフローチャートである。
【図４】一実施形態に係る運転席から見た風景の画像である。
【図５】一実施形態に係る対象部の選択画像である。
【図６】一実施形態に係る状況情報の選択画像である。
【図７】一実施形態に係るレストラン繁忙時の状況を示す動画である。
【図８】一実施形態に係るレストラン通常時の状況を示す動画である。
【図９】一実施形態に係るレストラン定休日の状況を示す動画である。
【発明を実施するための形態】
【０００９】
以下、本発明に係るヘッドアップディスプレイ装置（以下、「ＨＵＤ装置」とする。）の一実施の形態について図１〜図３を参照して説明する。
ＨＵＤ装置１は、図１、図２に示すように、車両情報Ｖを表す表示光Ｌを出射する表示器１０を備え、表示器１０からの表示光Ｌをフロントガラス２に照射することにより車両情報Ｖに対応する虚像を表示するＨＵＤ装置１において、車両３の外の風景４を撮影した撮像データＤを取得する撮像データ取得部２０と、取得した撮像データＤに含まれる対象物Ａに関する対象物情報Ｂを取得する情報取得部３０と、実際の風景に含まれる対象物Ａ１に重畳させて対象物情報Ｂを動画にて表示する表示処理部４０と、を備えて構成される。
かかる構成により、撮像データ取得部２０で取得した車両３の外の風景４の撮像データＤに含まれる対象物（映像上）Ａに対し、対象物Ａの対象物情報Ｂを情報取得部３０から取得し、実際の風景の含まれる対象物（映像上と同一の実物）Ａ１に重畳させて、表示処理部４０により対象物情報Ｂを動画で表示するようにしており、運転者Ｕが必要とする対象物Ａの対象物情報Ｂを動画で表示し、短時間に多くの対象物情報Ｂを車両情報Ｖとして運転者Ｕに伝えるようにするものである。
【００１０】
本実施形態のＨＵＤ装置１は、図１に示すように、表示器１０と、撮像データ取得部２０と、情報取得部３０と、表示処理部４０と、選択検出部５０と、記憶部６０と、制御部７０と、を備えて構成される。
【００１１】
車両情報Ｖを表す表示器１０は、ＨＵＤ装置１に備えられる。ＨＵＤ装置１は、表示器１０と、制御部７０となる表示処理部４０と、などを備える。ＨＵＤ装置１は、図２に示すように、車両３のダッシュボード５内に搭載される。ＨＵＤ装置１では、表示器１０が液晶パネルやＤＭＤ（Digital Micro Mirror Device）素子などで構成され、制御部７０となる表示処理部４０による制御のもと表示器１０の表示素子を制御することで、表示器１０から出射される表示光Ｌを車両３のフロントガラス２に向けて照射することにより車両情報Ｖとしての対象物情報Ｂを、フロントガラス２を通して見える実景上の対象物Ａ１に重畳して虚像として表示する。
【００１２】
撮像データ取得部２０は、図１、図２に示すように、車両３の外（前方）の風景４を撮影した撮像データＤを取得する。撮像データ取得部２０は、ステレオカメラや単眼カメラから構成される撮像部２００を備える。撮像部２００により、車両３の前方の運転者Ｕが運転席から見た風景を撮影した撮像データＤを取得し、ＨＵＤ装置１の制御部７０となる表示処理部４０に出力する。表示処理部４０に出力された撮像データＤは、記憶部６０に記憶される。撮像データ取得部２０が取得する撮像データＤには、運転者（ユーザーを含む）Ｕが情報を必要とする対象物Ａ（例えば、ビル内のレストランなどの施設）が含まれる。なお、図４は、運転席から見た風景（実景）である。
【００１３】
情報取得部３０は、取得した撮像データＤに含まれる対象物Ａに関する対象物情報Ｂを取得する。情報取得部３０は、運転者Ｕが知りたい情報、例えば運転者Ｕの前方の風景４中に含まれる対象物Ａ、例えばビル内のレストランなどの施設の情報であり、施設の内部の状況情報Ｂ１を対象物情報Ｂとしてクラウド３００上から取得する。
情報取得部３０は、例えば、インターネットを介してクラウド３００との間で通信を行い、クラウド３００から対象物情報Ｂを含む情報信号を受信し、その受信した情報信号を情報取得部３０に出力する。情報取得部３０は、情報信号に含まれる対象物情報Ｂを取得し、取得した対象物情報Ｂを、記憶部６０を構成するＲＯＭ及びＲＡＭ等に記憶させる。
対象物情報Ｂは、例えば対象物Ａをレストランとする場合には、施設内部の状況情報（映像）Ｂ１と、曜日および時間帯による状況情報Ｂ１などを取得する。具体的な対象物情報Ｂの状況情報Ｂ１として、例えば、金曜日の夜は混雑し、客数が席数を超える画像情報（図７参照）、月曜日の昼は、通常で客数と席数が略等しく席数にわずかな余裕がある画像情報（図８参照）、水曜日は定休日である画像情報（図９参照）、等が取得される。
対象物情報Ｂからは、制御部７０となる表示処理部４０による制御のもと、図７〜図９に示すように、表示処理部４０の画像生成部４００で対象物情報Ｂの状況情報Ｂ１を表す動画が作成される。
【００１４】
表示処理部４０は、実際の風景４に含まれる対象物Ａ１に重畳させて対象物情報Ｂの状況情報Ｂ１を動画にて表示する。表示処理部４０は、制御部７０に備えられる。制御部７０は、図示しない制御プログラムが記憶されたメモリと、メモリに記憶された制御プログラムを実行することで後述するフローチャートに係る表示処理等を実行するＣＰＵ（Central Processing Unit）と、画像を生成するＧＤＣ（Graphics Display Controller）で構成される画像生成部４００と、を備える。
表示処理部４０は、制御部７０としての機能による制御のもと、撮像データＤに基づき対象物Ａを含む画像（動画）を生成するとともに、情報取得部３０の情報信号に含まれる対象物情報Ｂの状況情報Ｂ１に基づき対象物情報Ｂを含む画像（動画）を生成する。
表示処理部４０は、表示器１０の表示素子を制御することで、画像（動画）を生成し、対象物Ａの画像は、車両３の前方の画像としてＨＵＤ装置１に車両情報Ｖの虚像として表示する。また、対象物情報Ｂの画像は、対象物Ａ１とともに、選択された対象物Ａの詳細な状況情報Ｂ１としてＨＵＤ装置１に動画（虚像）として表示する。
【００１５】
選択検出部５０は、運転者（ユーザを含む）Ｕが詳細な状況情報Ｂ１を知りたい対象物Ａを選択したことを検出する。選択検出部５０は、音声入力やジェスチャースイッチやロータリスイッチなどの入力部５００を備える。音声による入力部５００を用いる場合には、図示しない音声認識部により音声情報が入力されると、表示処理部４０は、例えば、表示器１０により表示画像をいくつかのブロックに分けた画像を表示する。選択検出部５０は音声情報に連携し、図５に示すように、表示画像のブロック上を移動する丸で囲んだ画像と指矢印の画像とからなる選択用画像Ｃ１を表示する。運転者Ｕが選択用画像Ｃ１により対象物Ａの位置するブロックを選択したことを音声情報により検出し、その選択情報を選択検出部５０が取得することで、対象物Ａを特定し、その結果を表示処理部４０に出力する。
【００１６】
ジェスチャースイッチを入力部５００として用いる場合には、運転者Ｕのジェスチャーを認識するジェスチャー認識部を構成するカメラなどの選択用画像Ｃ１によりジェスチャー情報が選択検出部５０に入力される。ジェスチャー情報が入力されると、表示処理部４０は、表示器１０により表示画像をいくつかのブロックに分けた画像を表示する。選択検出部５０はジェスチャー情報に連携し、表示画像のブロック上を移動する丸で囲む画像と指矢印の画像との選択用画像Ｃ１を表示する。運転者Ｕが選択用画像Ｃ１により対象物Ａの位置するブロックを選択したことをジェスチャー情報により検出し、その選択情報を選択検出部５０が取得することで、対象物Ａを特定し、その結果を表示処理部４０に出力する。
【００１７】
ロータリスイッチを入力部５００として用いる場合には、運転者Ｕのロータリスイッチの操作位置を認識するスイッチ情報が選択検出部５０に入力される。スイッチ情報が入力されると、表示処理部４０は、表示器１０により表示画像をいくつかのブロックに分けた画像を表示する。選択検出部５０はスイッチ情報に連携し、表示画像のブロック上を移動する丸で囲む画像と指矢印の画像との選択用画像Ｃ１を表示する。運転者Ｕが選択用画像Ｃ１から対象物Ａの位置するブロックを選択したことをスイッチ情報により検出し、その選択情報を選択検出部５０が取得することで、対象物Ａを特定し、その結果を表示処理部４０に出力する。
選択検出部５０は、対象物Ａを選択するのに加え、運転者Ｕが、必要とする状況情報Ｂ１を選択する。例えば、図６に示すように、レストランを対象物Ａとする場合の必要な状況情報Ｂ１として、詳細選択用画像Ｃ２から曜日および時間帯を選択する。曜日や時間帯の情報は、選択検出部５０による対象物Ａの選択がなされた後、表示処理部４０により曜日として月曜日から日曜日までの文字による詳細選択用画像Ｃ２として、時間帯として夜、昼などの文字による詳細選択用画像Ｃ２が表示画像として表示される。
【００１８】
表示処理部４０は、選択検出部５０により運転者（ユーザを含む）Ｕが選択した対象物Ａの選択情報および対象物Ａに関して選択された知りたい状況情報Ｂ１に基づき対象物情報Ｂに含まれる知りたい対象物情報Ｂの状況情報Ｂ１を選択する。表示処理部４０は、選択された対象物Ａおよび対象物Ａに合う知りたい対象物情報Ｂに基づき、表示器１０の表示素子を制御することで、選択された対象物Ａに合致する対象物情報Ｂの状況情報Ｂ１の動画を作成する。作成された対象物情報Ｂの状況情報Ｂ１の動画は、運転者Ｕが実際の風景上の対象物Ａ１に重畳させて虚像として表示する。
【００１９】
次に、ＨＵＤ装置１による対象物情報Ｂの表示処理について、図３に示すフローチャートにしたがって説明する。
表示処理部４０などで構成される制御部７０は、車両３のＨＵＤ装置１の電源がオンとされているとき、対象物情報Ｂを表示する表示処理に係るフローチャートを繰り返し実行する。
まず、撮像データ取得部２０から撮像データＤを取得する（ステップＳ１０１）。
撮像データ取得部２０は、カメラなどの撮像部２００から運転席の前方の対象物Ａを含む撮像データＤを取得する。撮像データ取得部２０は、取得された撮像データＤをＨＵＤ装置１の制御部７０となる表示処理部４０に出力する。
【００２０】
次に、選択検出部５０により表示された画像に含まれる対象物Ａを選択する（ステップＳ１０２）。選択検出部５０は、音声入力やジェスチャースイッチやロータリスイッチなどの入力部５００を備える。音声による入力部５００を用いる場合には、音声認識部により音声情報が入力されると、表示処理部４０は、例えば、表示器１０により表示画像をいくつかのブロックに分けた画像を表示する。選択検出部５０は、図５に示すように、音声情報に連携し、表示画像のブロック上を移動する丸で囲む画像と指矢印の画像との選択用画像Ｃ１を表示する。運転者Ｕが選択用画像Ｃ１により対象物Ａの位置するブロックを選択したことを音声情報により検出し、その選択情報を選択検出部５０が取得することで、例えば、対象物Ａを施設内のレストランと特定し、その結果を表示処理部４０に出力する。
【００２１】
次いで、運転者Ｕは、選択した対象物Ａのレストランの知りたい状況情報Ｂ１を選択する（ステップＳ１０３）。選択検出部５０は、対象物Ａを選択するのに加え、運転者Ｕが知りたい詳細な状況情報Ｂ１を選択する。例えば、図６に示すように、レストランを対象物Ａとする場合の必要な状況情報Ｂ１として、曜日および時間帯を選択する。選択検出部５０による対象物Ａの選択がなされた後、表示処理部４０は、詳細選択用画像Ｃ２として曜日として月曜日から日曜日までの文字による画像情報と、時間帯として夜、昼などの文字による画像情報とを表示する。選択検出部５０は、表示画像により曜日や時間帯の選択された結果の詳細な状況情報Ｂ１を表示処理部４０に出力する。
【００２２】
情報取得部３０は、選択された対象物Ａの対象物情報Ｂを取得する（ステップＳ１０４）。
情報取得部３０は、選択された対象物Ａの選択情報および対象物Ａに関して選択された知りたい詳細な状況情報Ｂ１に基づきクラウド３００上の情報を取得し、対象物情報Ｂとして表示処理部４０に出力する。
【００２３】
表示処理部４０は、選択された対象物Ａおよび対象物Ａに合う知りたい対象物情報Ｂの状況情報Ｂ１に基づき、表示器１０の表示素子を制御することで、選択された対象物Ａに合致する対象物情報Ｂの状況情報Ｂ１の動画を作成する（ステップＳ１０５）。
対象物情報Ｂとして表示処理部４０が作成する動画は、例えば対象物Ａをレストランとする場合には、具体的な対象物情報Ｂとして、図７に示すように、金曜日の夜の混雑し、客数が席数を超える繁忙時の映像、図８に示すように、月曜日の昼の通常の客数と席数が略等しく席数にわずかな余裕がある通常時の映像、図９に示すように、水曜日の席が全て空席である定休日の画像等が作成される。
【００２４】
作成された対象物情報Ｂの状況情報Ｂ１の動画は図７〜図９に示すように、運転者Ｕの前方の実際の風景上の対象物Ａ１に重畳させて虚像として表示する（ステップＳ１０６）。
対象物情報Ｂの状況情報Ｂ１を表示した後は、対象物情報Ｂの状況情報Ｂ１の表示処理に戻り、撮像データＤの取得（ステップＳ１０１）から繰り返す。
【００２５】
ＨＵＤ装置１では、このように対象物Ａの対象物情報Ｂの詳細な状況情報Ｂ１を表示処理部４０により表示器１０に動画として表示する。これにより、従来のアイコンや説明文だけの表示に比べ、多くの情報を対象物Ａ１の実像に重ねて表示することができ、動画によって短時間に確実に（直感的に）運転者Ｕに必要な情報を提供することができる。
【００２６】
なお、上記の実施の形態では、対象物Ａ，Ａ１をレストランとし、対象物情報Ｂをレストランの内部の状況情報Ｂ１の動画とする場合を例に説明したが、対象物Ａは、運転席前方の風景４に表すことができる施設などに広く適用することができる。また、対象物情報Ｂや状況情報Ｂ１は、施設などの対象物の種々の情報であっても良く、クラウド３００上から取得できるものであれば良い。また、対象物情報Ｂや状況情報Ｂ１は、予め記憶部６０に記憶させた情報など取得するようにしても良い。
【００２７】
以上、実施の形態とともに、詳細に説明したように本発明のＨＵＤ装置１によれば、車両情報Ｖを表す表示光Ｌを出射する表示器１０を備え、表示器１０からの表示光Ｌをフロントガラス２に照射することにより車両情報Ｖに対応する虚像を表示するＨＵＤ装置１において、車両３の外の風景４を撮影した撮像データＤを取得する撮像データ取得部２０と、取得した撮像データＤに含まれる対象物Ａに関する対象物情報Ｂを取得する情報取得部３０と、実際の風景に含まれる対象物Ａ１に重畳させて対象物情報Ｂを動画にて表示する表示処理部４０と、を備えて構成される。
かかる構成によれば、撮像データ取得部２０で取得した車両３の外の風景４の撮像データＤに含まれる対象物（映像上）Ａに対し、対象物Ａの対象物情報Ｂを情報取得部３０から取得し、実際の風景４の含まれる対象物（映像上と同一の実物）Ａ１に重畳させて、表示処理部４０により対象物情報Ｂを動画で表示することで、これまでのアイコンや説明文で表示する場合に比較し、運転者Ｕが必要とする対象物Ａの対象物情報Ｂを動画で表示し、短時間に多くの対象物情報Ｂを車両情報Ｖとして運転者Ｕに伝えることができる。
【００２８】
本発明のＨＵＤ装置１は、運転者（ユーザを含む）Ｕが対象物Ａを選択したことを検出する選択検出部５０を備え、表示処理部４０は、選択検出部５０により運転者Ｕが選択したことが検出された対象物Ａに関する対象物情報Ｂを動画にて表示する。
かかる構成によれば、運転者Ｕが選択検出部５０により対象物Ａを選択することができ、選択した対象物Ａの知りたい対象物情報Ｂを確実に動画から知ることができる。これにより、運転者Ｕが必要とする対象物Ａの対象物情報Ｂを動画により短時間に多くの対象物情報Ｂを車両情報Ｖとして運転者Ｕに伝えることができる。
【００２９】
本発明のＨＵＤ装置１は、対象物Ａは施設であり、対象物情報Ｂは、施設の内部状況を示す状況情報Ｂ１を含み、表示処理部４０は、状況情報Ｂ１に基づき施設の内部状況を示す動画を表示する。
かかる構成よれば、対象物Ａである施設の内部状況を状況情報Ｂ１として動画で見ることができ、運転者Ｕが必要とする対象物Ａの対象物情報Ｂを動画により短時間に多くの対象物情報Ｂを車両情報Ｖとして運転者Ｕに伝えることができる。
【符号の説明】
【００３０】
１        ヘッドアップディスプレイ装置（ＨＵＤ装置）
２        フロントガラス
３        車両
４        風景（運転席前方）
５        ダッシュボード
１０      表示器
２０      撮像データ取得部
２００    撮像部
３０      情報取得部
３００    クラウド
４０      表示処理部
４００    画像生成部
５０      選択検出部
５００    入力部
６０      記憶部
７０      制御部
Ａ        対象物（映像上）
Ａ１      対象物（実物）
Ｂ        対象物情報
Ｂ１      状況情報
Ｃ１      選択用画像
Ｃ２      詳細選択用画像
Ｄ        撮像データ
Ｌ        表示光    
Ｕ        運転者
Ｖ        車両情報
【図１】
2020083103.tif 000003
【図２】
2020083103.tif 000004
【図３】
2020083103.tif 000005
【図４】
2020083103.tif 000006
【図５】
2020083103.tif 000007
【図６】
2020083103.tif 000008
【図７】
2020083103.tif 000009
【図８】
2020083103.tif 000010
【図９】
2020083103.tif 000011