(57)【要約】【課題】  ＨＵＤ表示システムの表示位置に表示させる画像データを少ない演算量で生成することができる画像処理装置を提供する。【解決手段】  表示装置５０の表示画面上の画素から出た光線が投影面に当たり反射した光線が所定の視点を通過することで画像を生成するヘッドアップディスプレイに用いられる画像処理装置において、静止画関連データ記憶部４１は、当該画像の画像データおよび配置座標データに対し、表示画面から投影面を経て当該視点までの経路で生じる歪を各画素毎に補正する補正処理を施すことにより得られた補正適用画像データおよび補正適用配置座標データを記憶している。読出制御部４２は、センサの出力信号に応じて、画像素材の補正適用画像データおよび補正適用配置座標データを静止画関連データ記憶部４１から読み出す。描画部４６は、この補正適用画像データおよび補正適用配置座標データを用いた描画処理を実行する。【選択図】図１
2015041922.tif 000002
【特許請求の範囲】
【請求項１】
表示装置の表示画面上の画素から出た光線が投影面に当たり反射した光線が所定の視点を通過することで画像を生成するヘッドアップディスプレイに用いられる画像処理装置であって、
表示画面から投影面を経て当該視点までの経路で生じる歪を各画素毎に補正する補正処理を画像データに施すことにより得られた補正適用画像データを記憶する記憶手段と、
前記記憶手段から所望の補正適用画像データを読み出す読出制御手段と、
前記読出制御手段が読み出した補正適用画像データを前記表示画面に表示させる描画手段と
を具備することを特徴とする画像処理装置。
【請求項２】
前記記憶手段は、前記補正適用画像データの前記表示画面内での表示位置を指定する補正適用配置座標データをさらに記憶しており、
前記読出制御手段は、所望の補正適用画像データおよび補正適用配置座標データを読み出し、
前記描画手段は、当該補正適用画像データを前記表示装置の表示画面内の当該補正適用配置座標データが示す位置に表示させることを特徴とする請求項１に記載の画像処理装置。
【請求項３】
前記読出制御手段は、同一表示位置に表示可能な複数の補正適用画像データの中から１つの補正適用画像データを外部信号に応じて選択して前記記憶手段から読み出すことを特徴とする請求項１または２に記載の画像処理装置。
【請求項４】
表示装置の表示画面上の画素から出た光線が投影面に当たり反射した光線が所定の視点を通過することで画像を生成するヘッドアップディスプレイに用いられる画像補正装置であって、
表示画面から投影面を経て当該視点までの経路で生じる歪を各画素毎に補正する補正処理を画像データに施すことにより、補正適用画像データを生成することを特徴とする画像補正装置。
【請求項５】
前記反射した光線が前記視点を通過することで生成される画像の画面内での位置を示す配置座標データに前記補正処理を施すことにより前記補正適用画像データの前記表示装置の表示画面内の位置を示す補正適用配置座標データを生成することを特徴とする請求項４に記載の画像補正装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、ヘッドアップディスプレイを利用した車載用の表示システム等、表示装置から投影面に投射した画像をユーザに提供する表示システムに好適な画像処理装置および画像補正装置に関する。
【背景技術】
【０００２】
周知の通り、ヘッドアップディスプレイ（Ｈｅａｄ  Ｕｐ  Ｄｉｓｐｌａｙ；以下、ＨＵＤと略す）表示システムでは、例えば車のダッシュボード上の表示装置の表示画面から車のフロントガラスに投射した画像をドライバに見せる。ここで、フロントガラスの表面は、曲面になっている。従って、ＨＵＤシステムにおいて、ドライバによって視認される画像は、表示装置の表示画面に表示される画像を鏡像反転し、さらに歪ませた画像となる。このようにＨＵＤシステムにおいて、ドライバに視認される画像は、表示装置に表示される画像に対して、一種の変換処理を施した画像となる。そこで、従来の技術では、表示装置に接続された画像処理装置が、この変換処理の逆変換処理に相当する歪補正処理を画像データに施し、表示装置に表示させていた（例えば特許文献１参照）。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２００８−１０２５１８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ところで、上述の表示装置の表示画面（以下、画面Ａとする）の各画素に着目すると、１つの画素から発した光線は、フロントガラスによる反射を経てドライバの視覚に届き、ドライバによって視認される画面（以下、画面Ｂとする）内のある位置の画素となる。そして、ＨＵＤシステムでは、同一画素の画面Ａ内での位置と画面Ｂ内での位置との間に変化が生じる。典型例を示すと、画面Ａにおける左上端の画素は、画面Ｂでは右上端の位置を占める。また、同一画素の画面Ａ内での位置と画面Ｂ内での位置との間の差分は、当該画素の画面Ａ内での位置または画面Ｂ内での位置に依存する。例えば、先の例のように、画面Ａの左上端の画素は、画面Ｂでは右上端の位置を占めるので、この場合の当該画素の画面Ａ内での位置と画面Ｂ内での位置との間の差分は大きな値となる。しかし、画面Ａの中央の画素は、画面Ｂでもほぼ中央の位置を占めるので、この場合の当該画素の画面Ａ内での位置と画面Ｂ内での位置との間の差分は小さな値となる。そこで、従来のＨＵＤ表示システムでは、次のようにして上述の歪補正処理を実行していた。まず、画面Ｂ内の各画素について、それらが画面Ａ内において占めていた位置を求め、当該画素の画面Ｂ内での位置と画面Ａ内での位置との差分を示す補正データをメモリに記憶させる。そして、上述の歪補正処理では、ドライバに視認させたい画像（すなわち、画面Ｂの画像）の各画素の位置をメモリ内の当該画素に対応した補正データに従って移動させ、表示装置に表示させる画面Ａの画像データを生成するのである。この歪補正処理は、画素単位での処理となるため、演算量が多い。従来の画像処理装置は、描画処理においてこの歪補正処理を実行していたため、描画処理の演算量が多くなるという問題があった。また、このような演算量の多い歪補正処理を含む描画処理を画像処理装置に実行させるとなると、演算処理能力の高いプロセッサを画像処理装置に搭載する必要があり、画像処理装置が高価になるという問題があった。
【０００５】
本発明は、このような課題に鑑みてなされたものであり、少ない演算量でＨＵＤ表示システム等の表示装置に表示させる画像データを生成することができる画像処理装置を提供することを目的とする。
【課題を解決するための手段】
【０００６】
この発明は、表示装置の表示画面上の画素から出た光線が投影面に当たり反射した光線が所定の視点を通過することで画像を生成するヘッドアップディスプレイに用いられる画像処理装置であって、表示画面から投影面を経て当該視点までの経路で生じる歪を各画素毎に補正する補正処理を画像データに施すことにより得られた補正適用画像データを記憶する記憶手段と、前記記憶手段から所望の補正適用画像データを読み出す読出制御手段と、前記読出制御手段が読み出した補正適用画像データを前記表示画面に表示させる描画手段とを具備することを特徴とする画像処理装置を提供する。
【０００７】
かかる発明によれば、画像処理装置は少ない演算量で表示画面に表示させる補正適用画像データを生成することができる。
【図面の簡単な説明】
【０００８】
【図１】この発明の一実施形態であるＨＵＤ表示システムの構成を示すブロック図である。
【図２】同実施形態におけるＨＵＤ表示の原理を示す図である。
【図３】同実施形態においてドライバに視認させる画像と表示装置に表示される画像との関係を示す図である。
【図４】この発明の他の実施形態における補正データの作成方法を示す図である。
【図５】この発明の他の実施形態における画像データの補正方法を示す図である。
【発明を実施するための形態】
【０００９】
以下、図面を参照し、この発明の実施の形態を説明する。
図１はこの発明の一実施形態であるＨＵＤ表示システムの構成を示すブロック図である。また、図２は同ＨＵＤ表示システムにおけるＨＵＤ表示の原理を示す図である。図２に示すように、本実施形態における表示装置５０は、表示画面を車両内のフロントガラス６０に対向させた姿勢で同車両内のダッシュボード（図示略）に固定される。ＨＵＤ表示システムでは、表示装置５０の表示画面から照射された画像がフロントガラス６０によって反射され、ドライバの視点７０に到達する。ここで、表示装置５０の表示画面に表示された画像は、同表示画面からドライバの視点７０まで伝達される過程において、ある種の変換処理を受け、その結果、元の画像に対して歪んだ画像となってドライバの視点に届く。以下では、便宜上、この変換処理を歪変換処理という。本実施形態によるＨＵＤ表示システムは、ドライバに視認させるべき画像データに対し、上記歪変換処理の逆変換に相当する歪補正処理を施し、この歪補正処理後の画像データを表示装置５０に表示させることにより、画像データを低歪の状態でドライバに視認させるシステムである。
【００１０】
図１に示すように、本実施形態によるＨＵＤ表示システムは、画面レイアウト装置１０と、画像補正装置２０と、補正データ生成装置３０と、画像処理装置４０と、表示装置５０とを有する。
【００１１】
画面レイアウト装置１０は、図示しない操作部の操作に応じて、ドライバに視認させる画面を構成する画像素材の画像データと、同画像素材の画面内での位置を示す配置座標データを生成する装置である。図３（Ａ）はドライバに視認させる画面の例を示す図である。図示の例では、車両の速度１０９ｋｍ／ｈが画面に表示されている。この速度表示を例に説明すると、画面レイアウト装置１０は、図示しない操作部の操作に基づき、速度の各桁を表す０〜９までの各数値（画像素材）の画像データを生成するとともに、画面内における速度の百の位の数値の表示位置、十の位の数値の表示位置、一の位の数値の表示位置を示す配置座標データを生成する。図３（Ｂ）は、この画面レイアウト装置１０により生成される画像素材「９」の画像データを例示するものである。
【００１２】
画像補正装置２０は、画面レイアウト装置１０が出力した画像素材の画像データおよび配置座標データに対して歪補正処理およびフィルタ処理を施し、補正適用画像データおよび補正適用配置座標データとして出力する装置である。歪補正処理は、表示装置５０の表示画面内の各画素の位置と、ドライバが視認する画面内における各々対応する各画素の位置との間の位置ずれを示す補正データに基づき、ドライバが視認する画像の歪を低減する処理である。フィルタ処理は、表示装置５０の表示画面に表示される画像の画素密度とこの画像がドライバに視認される場合の同画像の画素密度との差に起因した画像の品質の劣化を防止するための処理である。
【００１３】
画像補正装置２０が実行する歪補正処理およびフィルタ処理は、上述した歪変換処理の逆変換処理を構成する。ここで、表示装置５０の表示画面から照射された画像に対して施される歪変換処理の内容は、表示装置５０と、フロントガラス６０と、ドライバの視点７０との位置関係、フロントガラス６０の形状等に依存する。また、表示装置５０の表示画面から照射された各画像に対して施される歪変換処理の内容は、各画像の画面内での位置により異なったものとなる。そこで、本実施形態では、補正データ生成装置３０が設けられるとともに、画像補正装置２０内に補正データ記憶部２１が設けられている。
【００１４】
補正データ生成装置３０は、表示装置５０と、フロントガラス６０と、ドライバの視点７０との位置関係、フロントガラス６０の形状等を示す実機配置情報をユーザから受け取り、この実機配置情報に基づいて、ドライバに視認させる画面内の各画素位置毎に補正データを生成するとともに、フィルタ係数を生成する装置である。
【００１５】
さらに詳述すると、補正データ生成装置３０は、実機配置情報に基づいて、レイトレーシング法によるシミュレーションを実行し、表示装置５０の表示画面の各画素の放つ光線がフロントガラス６０による反射を経てドライバの視点７０に到達するまでの経路を求める。そして、補正データ生成装置３０は、表示装置５０の表示画面の画素毎に求めた光線の経路に基づき、補正データを生成する。すなわち、レイトレーシング法によるシミュレーションの結果、表示装置５０の表示画面内の例えば図２の位置ＶＱ’にある画素の放つ光線がフロントガラスによる反射を経てドライバの視点７０に到達し、ドライバが視認する画面内の例えば位置ＶＱの画素となった場合、位置ＶＱと位置ＶＱ’との差分を示すベクトルデータをドライバに視認させる画面内の位置ＶＱに対応した補正データとするのである。また、補正データ生成装置３０は、レイトレーシング法によるシミュレーションの結果に基づき、上述したフィルタ処理のためのフィルタ係数を生成する。なお、補正データは必ずしもレイトレーシング法を用いて生成する必要はない。実機配置情報に基づいて、表示画面の各画素位置に対する上記ベクトルデータをレイトレーシング法を用いずに算出してもよい。あるいは、その算出結果を予め記憶しておき、入力した実機配置情報に応じて記憶した補正データを適宜使用する方法でもよい。
【００１６】
画像補正装置２０内の補正データ記憶部２１は、補正データ生成装置３０が生成した補正データおよびフィルタ係数を記憶する。画像補正装置２０は、補正データ記憶部２１内の補正データおよびフィルタ係数を参照して、画面レイアウト装置１０が出力した画像素材の画像データおよび配置座標データに対して歪補正処理およびフィルタ処理を施し、補正適用画像データおよび補正適用配置座標データを生成する。例えば画面レイアウト装置１０が図３（Ａ）に示す数値「９」の画像データおよび配置座標データを出力した場合、当該配置座標データが示す画素位置に対応付けられた補正データおよびフィルタ係数を補正データ記憶部２１から読み出す。そして、読み出した補正データを用いた歪補正処理を数値「９」の画像データおよび配置座標データに施す。この結果、配置座標データから補正適用配置座標データが得られる。また、画像補正装置２０は、読み出したフィルタ係数を用いたフィルタ処理を歪補正処理後の数値「９」の画像データに施す。この結果、数値「９」についての補正適用画像データが得られる。そして、画像補正装置２０は、このようにして得られた補正適用画像データおよび補正適用配置座標データを出力するのである。
【００１７】
図３（Ｄ）は、この場合の数値「９」の補正適用画像データの内容を例示するものである。また、図３（Ｃ）は数値「９」の補正適用画像データを表示装置５０の表示画面の補正適用配置座標データが示す位置に表示させた場合の表示例を示すものである。図３（Ａ）および図３（Ｃ）間を跨いで引いた矢印は、ドライバに視認させる画面（図３（Ａ）参照）内において数値「９」の位置に対応付けられた補正データを表している。
【００１８】
図１において、画像処理装置４０は、表示装置５０に静止画および動画を表示させるための画像処理を行う装置である。図１に示すように、画像処理装置４０は、静止画関連データ記憶部４１と、読出制御部４２と、補正データ記憶部４３と、動画補正部４４と、描画部４６と、表示バッファ４７とを有する。好ましい態様において、静止画関連データ記憶部４１および補正データ記憶部４３は、ＥＥＲＯＭ（Ｅｌｅｃｔｒｏｎｉｃ  Ｅｒａｓａｂｌｅ  Ｐｒｏｇｒａｍａｂｌｅ  Ｒｅａｄ  Ｏｎｌｙ  Ｍｅｍｏｒｙ；電気的消去が可能な読出専用メモリ）等の不揮発性メモリにより構成されている。ただし、静止画関連データ記憶部４１および補正データ記憶部４３は、ＤＲＡＭ等の揮発性メモリでも構成が可能である。
【００１９】
静止画関連データ記憶部４１は、画像補正装置２０が出力した補正適用画像データおよび補正適用配置座標データを記憶する手段である。読出制御部４２は、表示装置５０の垂直走査周期に同期して、静止画関連データ記憶部４１から表示対象となる全ての画像素材の補正適用画像データおよび補正適用配置座標データを読み出し、描画部４６に供給する手段である。
【００２０】
補正データ記憶部４３は、画像補正装置２０内の補正データ記憶部２１と同様、補正データ生成装置３０によって生成された補正データとフィルタ係数を記憶する手段である。動画補正部４４は、動画関連データ記憶部４５を有している。この動画関連データ記憶部４５は、表示位置が時々刻々と変化する動画の画像素材の画像データと配置座標データとを表示装置５０の垂直走査周期に同期してホストコンピュータから受け取って記憶する手段である。動画補正部４４は、表示装置５０の垂直走査周期に同期し、動画関連データ記憶部４５内の画像素材の配置座標データに対応付けられた補正データおよびフィルタ係数を補正データ記憶部４３から読み出す。そして、読み出した補正データおよびフィルタ係数を利用して、動画関連データ記憶部４５内の画像素材の画像データおよび配置座標データに対して歪補正処理およびフィルタ処理を施し、補正適用画像データおよび補正適用配置座標データを生成し、描画部４６に供給する。
【００２１】
表示バッファ４７は、表示装置５０に表示させる画像データを記憶するバッファである。この表示バッファ４７は、表示装置５０の一画面分の画像データを記憶するフレームバッファであってもよく、１ライン分の画像データを記憶するラインバッファであってもよい。
【００２２】
描画部４６は、読出制御部４２および動画補正部４４から供給される画像素材の補正適用画像データおよび補正適用配置座標データを受け取り、補正適用画像データを補正適用配置座標データにより定まる表示バッファ４７内のエリアに書き込む描画処理を実行する。
以上が本実施形態によるＨＵＤ表示システムの構成の詳細である。
【００２３】
このＨＵＤ表示システムにおいて、画像処理装置４０と表示装置５０は車両内に搭載される。画面レイアウト装置１０と、画像補正装置２０と、補正データ生成装置３０は、多数の画像処理装置に書き込むためのデータを生成するための装置であり、車両毎に設ける必要はない。
【００２４】
好ましい態様では、画像処理装置４０が表示装置５０に表示させる各種の画像素材の画像データおよび配置座標データを画面レイアウト装置１０が生成して画像補正装置２０に与える。また、補正データ生成装置３０は、画像処理装置４０および表示装置５０が搭載される車両内での表示装置５０と、フロントガラス６０と、ドライバの視点７０との位置関係、フロントガラス６０の形状等を示す実機配置情報に基づいて、補正データおよびフィルタ係数を生成する。また、画像補正装置２０は、画面レイアウト装置１０から供給された画像素材の画像データおよび配置座標データに対し、補正データ生成装置によって生成された補正データを用いた歪補正処理およびフィルタ処理を施して補正適用画像データおよび補正適用配置座標データを生成する。そして、画像補正装置２０は、画像処理装置４０の静止画関連データ記憶部４１に補正適用画像データおよび補正適用配置座標データを書き込み、補正データ生成装置３０は、画像処理装置４０の補正データ記憶部４３に補正データおよびフィルタ係数を書き込む。このようにして静止画関連データ記憶部４１に補正適用画像データおよび補正適用配置座標データが書き込まれ、補正データ記憶部４３に補正データおよびフィルタ係数が書き込まれた画像処理装置４０が例えば車両のメーカーに出荷され、表示装置５０とともに車両に搭載される。
【００２５】
他の好ましい態様では、画像補正装置２０により生成された各種の画像素材についての補正適用画像データおよび補正適用配置座標データがＣＤ−ＲＯＭ、半導体メモリ等の記憶媒体に書き込まれ、この記憶媒体から画像処理装置４０の静止画関連データ記憶部４１に転送される。また、補正データ生成装置３０によって生成された補正データおよびフィルタ係数も、何等かの記憶媒体に書き込まれ、この記憶媒体から画像処理装置４０の補正データ記憶部４３に転送される。
【００２６】
さらに他の好ましい態様では、画像処理装置４０がインターネットを介して画像補正装置２０から各種の画像素材についての補正適用画像データおよび補正適用配置座標データをダウンロードするとともに、補正データ生成装置３０から補正データおよびフィルタ係数をダウンロードし、静止画関連データ記憶部４１および補正データ記憶部４３に格納する。
【００２７】
画像処理装置４０では次のような動作が行われる。まず、画像処理装置４０の読出制御部４２には、車速センサによって測定された車速値等、表示装置５０の表示画面内の定位置に表示すべき情報を示す外部信号が供給される。読出制御部４２は、このようにして供給される外部信号に応じて表示対象とする画像素材を選択し、その画像素材の補正適用画像データおよび補正適用配置座標データを静止画関連データ記憶部４１から読み出して描画部４６に供給する処理を垂直走査周期に同期して繰り返す。
【００２８】
図３（Ｃ）に示す例では、車速センサから車速値１０９ｋｍを示す外部信号が読出制御部４２に供給された。そこで、読出制御部４２は、表示装置５０の表示画面内において車速値の１００の位の数値表示エリアを示す補正適用配置座標データとこれに対応付けられた数値「１」の補正適用画像データと、１０の位の数値表示エリアを示す補正適用配置座標データとこれに対応付けられた数値「０」の補正適用画像データと、１の位の数値表示エリアを示す補正適用配置座標データとこれに対応付けられた数値「９」の補正適用画像データとを静止画関連データ記憶部４１から読み出して描画部４６に供給する。
【００２９】
描画部４６は、このようにして供給される補正適用画像データを補正適用配置座標データにより定まる表示バッファ４７内のエリアに書き込む描画処理を実行する。この結果、図３（Ｃ）に示すように、鏡像反転され、かつ、歪んだ車速値「１０９」の画像が表示装置５０の表示画面に表示される。そして、この車速値「１０９」の画像がフロントガラスによる反射を経てドライバの視点に到達する。この結果、図３（Ａ）に示すように、歪補正の施された車速値「１０９」がドライバによって視認される。
【００３０】
車速センサによって測定される車速値は時々刻々と変化する。その場合の動作も以上と同様であり、読出制御部４２は、車速値の各桁の数値表示エリアを示す補正適用配置座標データと、車速値の各桁の数値の補正適用画像データとを静止画関連データ記憶部４１から読み出して描画部４６に供給する。そして、描画部４６は、このようにして供給される補正適用画像データを補正適用配置座標データにより定まる表示バッファ４７内のエリアに書き込む描画処理を実行する。
【００３１】
このように本実施形態において、描画部４６は、読出制御部４２によって静止画関連データ記憶部４１から読み出された画像素材の補正適用画像データおよび補正適用配置座標データを用いて静止画の描画処理を行う。この静止画の描画処理では、歪補正処理は行わない。従って、描画部４６は、少ない演算量で静止画の描画処理を行うことができる。
【００３２】
また、本実施形態において、動画に関しては、動画補正部４４の動画関連データ記憶部４５に書き込まれる動画の画像素材の画像データおよび配置座標データに対し、補正データ記憶部４３に記憶された補正データを用いた歪補正処理およびフィルタ係数を用いたフィルタ処理が施され、この結果得られる補正適用画像データと補正適用配置座標データが描画部４６に与えられ、描画処理に用いられる。従って、動画に関しては、描画部４６の演算量に加えて動画補正部４４の演算量が発生する。しかし、静止画および動画のうち前者の画面全体に占める割合が大きい場合には、画像処理装置４０の全体としての演算量を少なく抑えることができる。従って、少ない演算量で静止画と動画の両方について歪補正のなされたＨＵＤ表示を実現することができる。
【００３３】
＜他の実施形態＞
以上、この発明の実施形態について説明したが、この発明には他にも実施形態が考えられる。例えば次の通りである。
【００３４】
（１）上記実施形態では、表示装置５０に動画を表示させるために補正データ記憶部４３および動画補正部４４を設けたが、表示装置５０に静止画のみを表示させる場合には補正データ記憶部４３および動画補正部４４は不要である。
【００３５】
（２）上記実施形態では、静止画関連データ記憶部４１に画像素材の補正適用画像データと補正適用配置座標データの両方を記憶させたが、補正適用画像データのみを記憶させてもよい。例えば画像素材の表示位置が標準化されており、表示位置の変わることが稀であるような場合、その表示位置についての補正適用配置座標データを描画部４６が実行する描画プログラムに固定データとして組み込んでおく、といった態様が考えられる。
【００３６】
（３）上記実施形態では、表示画面内の各所に表示させる各画像素材について補正適用画像データおよび補正適用配置座標データを生成し、静止画関連データ記憶部４１に記憶させた。しかし、このような画像素材単位で補正適用画像データおよび補正適用配置座標データを生成するのではなく、表示画面に表示させる一画面分の画像について補正適用画像データを生成し、静止画関連データ記憶部４１に記憶させてもよい。この場合、補正適用配置座標データは不要である。
【００３７】
（４）上記実施形態では、レイトレーシング法に基づくシミュレーションを実行することにより補正データを作成したが、次のようにして補正データを作成してもよい。実車両にて表示装置５０が実際に配置される位置おいて、図４に示すように、表示装置５０の任意の画素位置にレーザ照射装置５１を置き、表示装置５０の照射方向に合わせてレーザを照射する。また、ドライバの目の位置にはカメラ７０Ａを配置する。レーザ照射装置５１からのレーザ光は、フロントガラス６０に反射してカメラ７０Ａにより撮像される。このときカメラ７０Ａの撮像画面（ＵＶ座標系）の所望の画素位置にレーザ光の像が現れるように表示装置５０の表示画像（ＸＹ座標系）におけるレーザ照射装置５１の位置を調整し、調整後のレーザ照射装置５１の位置（ＸＹ座標値）をカメラ７０Ａの撮像画面（ＵＶ座標系）上の画素位置（ＵＶ座標値）に対応付けて記録する。この場合、レーザ光の像の位置（ＵＶ座標値）からレーザ照射装置５１の位置（ＸＹ座標値）への変換データが補正データである。この作業を表示装置５０上のすべての画素について行うことで、ＵＶ座標系の全画素位置についての補正データが得られる。この方法は、レイトレーシング法を用いないで現物合せ的に補正データを作成する方法であり、フロントガラスの曲率等様々なデータは不要であり、複雑な演算処理も不要である。
【００３８】
（５）図５（ａ）〜（ｃ）は画像データの補正の例を示す図である。図５（ｂ）は図５（ａ）の画像データの補正処理に用いる補正テーブルを示している。この補正テーブルは、Ｙ座標値を行番号、Ｘ座標値を列番号とする補正テーブルである。この補正テーブルにおいて、あるＸ座標値（列番号）およびＹ座標値（行番号）に対応した行列要素は、表示装置５０の表示画面のＸＹ座標値に対応した位置の像がカメラ７０Ａの撮像画面（ＵＶ座標系）において占める位置（ＵＶ座標値）を示す。例えばＸＹ座標値（Ｘ、Ｙ）＝（３、１）に対応した行列要素は（１、１）であり、ＵＶ座標値は（Ｕ、Ｖ）＝（１、１）となる。このような補正テーブルを利用し、次の手順により画像データの補正を行うことが可能である。
ａ．図５（ａ）に示すように、配置座標データに従ってドライバに視認させたい画像データをＵＶ座標系に配置する。
ｂ．図５（ｂ）に示す補正テーブルを参照することにより、表示装置５０のＸＹ座標系の各画素位置に対応付けられたＵＶ座標系の画素のＵＶ座標値を取得し、そのＵＶ座標値に対応した画素値をＵＶ座標系（図５（ａ））から取得する。
ｃ．ＵＶ座標系から取得した各画素値を補正適用画像データとして、元のＸＹ座標系の各画素位置に配置する。この処理は、画像データから補正適用画像データへの変換と配置座標データから補正適用配置座標データへの変換を合わせて行うものである。
例えば図５（ａ）のＵＶ座標（Ｕ、Ｖ）＝（５、１）は、図５（ｂ）のＸＹ座標（Ｘ、Ｙ）＝（７、０）に対応する。従って、図５（ｂ）のＵＶ座標（Ｕ、Ｖ）＝（５、１）は図５（ｃ）のＸＹ座標（Ｘ、Ｙ）＝（７、０）上に画素を持つ。
このようにしてＸＹ座標系に配置された補正適用画像データ（図５（ｃ））は、フロントガラスによる反射を経てドライバの視点に到達し、歪のない画像データ（図５（ａ））としてドライバに視認される。
この態様は画像データおよび配置座標データの補正を簡単な演算処理により実行することができる利点がある。
なお、ドライバに動画を視認させる場合には、上記ａ．〜ｃ．の処理を繰り返せばよい。
【００３９】
（６）上記（４）の態様では、ＵＶ座標系の各ＵＶ座標値について補正データを求めたが、ＸＹ座標系の各ＸＹ座標値に対応したＵＶ座標系のＵＶ座標値を求めて、画像データの補正に用いてもよい。
【符号の説明】
【００４０】
１０……画面レイアウト装置、２０……画像補正装置、３０……補正データ生成装置、４０……画像処理装置、５０……表示装置、６０……フロントガラス、７０……視点、７０Ａ……カメラ、２１，４３……補正データ記憶部、４１……静止画関連データ記憶部、４２……読出制御部、４４……動画補正部、４５……動画関連データ記憶部、４６……描画部、４７……表示バッファ。
【図１】
2015041922.tif 000003
【図２】
2015041922.tif 000004
【図３】
2015041922.tif 000005
【図４】
2015041922.tif 000006
【図５】
2015041922.tif 000007