(57)【特許請求の範囲】
【請求項１】
車両構造物により運転者の視界が遮られることによって生じる死角領域の映像を表示する車両用死角映像表示装置において、
前記車両構造物に設置された映像表示手段と、
少なくとも前記死角領域を含む車両周囲の領域の映像を撮影する撮影手段と、
運転者の視点が存在すると推定される基準位置の空間座標と、前記映像表示手段の表示画面を構成する各画素の空間座標とに基づいて、前記撮影手段により撮影された映像を変換して、前記映像表示手段に表示させる出力映像を作成する映像変換手段とを備え、
前記映像変換手段は、前記死角領域を含む車両周囲の領域の所定位置に、前記基準位置を中心とする球体の外周面として定義される球面状基準面に加えて、地面と一致する平面として定義される平面状基準面を設定し、前記基準位置を始点として前記映像表示手段の表示画面を構成する各画素を通る各半直線と前記球面状基準面または平面状基準面との交点をそれぞれ求めて、これら各交点に対応する前記撮影手段の撮影映像における各画素を前記撮影手段のパラメータに基づいて特定し、特定した撮影映像における各画素のデータを用いて、前記映像表示手段に表示させる出力映像を作成することを特徴とする車両用死角映像表示装置。
【請求項２】
車両周囲に存在する障害物を検知して、車両から当該障害物までの距離を計測する障害物検知手段をさらに備え、
前記映像変換手段は、前記障害物検知手段によって計測された障害物までの距離を基準として、前記基準位置を中心とする球体の半径を決定することを特徴とする請求項１に記載の車両用死角映像表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、車両構造物により運転者の視界が遮られることによって生じる死角領域の映像を表示する車両用死角映像表示装置に関する。
【背景技術】
【０００２】
従来、車両構造物により運転者の視界が遮られることによって生じる死角領域の映像をカメラで撮影し、このカメラで撮影した死角領域の映像を車室内に設置された液晶ディスプレイなどのモニタに表示することで、運転者による車両の運転操作を支援する車両用死角映像表示装置が提案されている（例えば、特許文献１参照。）。特許文献１に記載の死角映像表示装置では、車両の前方ピラーにより発生する運転死角の視界を確保するために、前方ピラーの外側に設置されたカメラで死角領域の映像を撮影し、このカメラで撮影した死角領域の映像を、前方ピラーの車室内側に設置されたモニタに表示させるようにしている。
【特許文献１】特開２００４−３４９５７号公報
【発明の開示】
【発明が解決しようとする課題】
【０００３】
ところで、上述したような車両用死角映像表示装置において、カメラで撮影してモニタに表示させた死角領域の映像の内容を運転者に直感的に把握させるためには、この死角領域の映像を、運転者が直接確認できるモニタ外の実際の風景とある程度連続した映像として表示させる必要がある。しかしながら、上述した特許文献１に記載されている死角映像表示装置をはじめとする従来の死角映像表示装置では、このような映像の連続性については考慮されておらず、モニタに表示させる映像に実際の風景との間で連続性を持たせるためには、カメラやモニタの物理的な位置や設定等を運転者に応じて細かく調整する必要があり、煩雑な作業が求められるという問題があった。
【０００４】
本発明は、以上のような従来の実情に鑑みて創案されたものであって、煩雑な調整作業を行うことなく、死角領域の映像を実際の風景とある程度連続した映像として表示して、運転者が映像の内容を直感的に把握できるようにした車両用死角映像表示装置を提供することを目的としている。
【課題を解決するための手段】
【０００５】
本発明に係る車両用死角映像表示装置は、車両構造物により運転者の視界が遮られることによって生じる死角領域の映像を表示するものであり、映像表示手段と、撮影手段と、映像変換手段とを備える。映像表示手段は、車両構造物に設置され、映像変換手段によって作成された出力映像を表示する。撮影手段は、少なくとも死角領域を含む車両周囲の領域の映像を撮影する。映像変換手段は、運転者の視点が存在すると推定される基準位置の空間座標と、映像表示手段の表示画面を構成する各画素の空間座標とに基づいて、撮影手段により撮影された映像を変換して、映像表示手段に表示させる出力映像を作成する。そして、特に本発明に係る車両用死角映像表示装置では、映像変換手段が、死角領域を含む車両周囲の領域の所定位置に、基準位置を中心とする球体の外周面として定義される球面状基準面に加えて、地面と一致する平面として定義される平面状基準面を設定し、基準位置を始点として映像表示手段の表示画面を構成する各画素を通る各半直線と球面状基準面または平面状基準面との交点をそれぞれ求めて、これら各交点に対応する撮影手段の撮影映像における各画素を撮影手段のパラメータに基づいて特定し、特定した撮影映像における各画素のデータを用いて、映像表示手段に表示させる出力映像を作成するようにしている。
【発明の効果】
【０００６】
本発明に係る車両用死角映像表示装置によれば、撮影手段により撮影された死角領域の映像が、運転者の視点が存在すると推定される基準位置の空間座標と、車両構造物に設置された映像表示手段の表示画面を構成する各画素の空間座標とに基づいて変換されて映像表示手段に表示されるので、撮影手段や映像表示手段に対して煩雑な調整作業を行うことなく、死角領域の映像を、運転者の視点から見た実際の風景とある程度連続したかたちで映像表示手段に表示させることができ、死角領域の映像の内容を運転者に直感的に把握させることができる。また、特に本発明に係る車両用死角映像表示装置によれば、映像変換手段が車両周囲の領域の所定位置に球面状基準面を設定し、この球面状基準面を用いた演算により映像表示手段に表示させる出力映像を作成するようにしているので、演算負荷を過大なものとすることなく、実際の風景とある程度連続した死角領域の映像を映像表示手段に適切に表示させることができる。
【発明を実施するための最良の形態】
【０００７】
以下、本発明に係る車両用死角映像表示装置の具体的な実施形態について、図面を参照しながら詳細に説明する。
【０００８】
［装置構成］
図１は、本実施形態の車両用死角映像表示装置の構成を示す図である。本実施形態の車両用死角映像表示装置は、Ａピラーと呼ばれる車両の前方ピラーにより運転者の視界が遮られることによって生じる死角領域の映像を表示するものであり、モニタ（映像表示手段）１と、カメラ（撮影手段）２と、画像処理装置（映像変換手段）３とを備えて構成される。
【０００９】
モニタ１は、死角領域の映像を表示するものであり、図２及び図３に示すように、車両１００における前方ピラー１０１の車室内側に取り付けられている。なお、図２及び図３に示す例では、モニタ１は車両１００の左側の前方ピラー１０１に取り付けられているが、右側の前方ピラーに取り付けるようにしてもよいし、左右両方の前方ピラーに取り付けるようにしてもよい。このモニタ１が取り付けられた前方ピラー１０１が車両１００の運転者の視界に入ると、運転者の視界がこの前方ピラー１０１によって遮られて、死角領域が発生する。モニタ１は、この死角領域の映像を表示することで、前方ピラー１０１によって発生する死角領域の様子を車両１００の運転者が認識できるようにしている。
【００１０】
カメラ２は、少なくとも死角領域を含む車両周囲の映像を撮影するものであり、図２に示すように、モニタ１が取り付けられた前方ピラー１０１の近傍、具体的には、例えば車両１００のドアミラー１０２などに取り付けられている。このカメラ２は、前方ピラー１０１によって発生する死角領域を十分に撮影可能な画角を有し、前方ピラー１０１の横幅よりもモニタ１の横幅の方が大きい場合には、モニタ１によって発生する死角領域を十分に撮影可能な画角を有する。なお、カメラ２は、必要な範囲が撮影可能であれば、前方ピラー１０１の付け根やルーフ、車室内ウィンドウ近辺など、車両１００のどこに取り付けられていてもよい。また、複数のカメラで、必要範囲を撮影するようにしてもよい。このカメラ２によって撮影された映像は画像処理装置３に送られ、画像処理装置３において変換処理が行われた後、モニタ１に表示される。
【００１１】
画像処理装置３は、カメラ２によって撮影された死角領域の映像を変換して出力映像を作成し、モニタ１に出力映像（変換後の死角領域の映像）を表示させるものであり、例えばコンピュータを用いて所定のプログラムを実行することによって実現される。本実施形態の車両用死角映像表示装置では、特に、この画像処理装置３による映像の変換処理に大きな特徴を有している。すなわち、本実施形態の車両用死角映像表示装置では、モニタ１に表示させる死角領域の映像を、運転者の視点から見た実際の風景とある程度連続した映像とするために、画像処理装置３が、運転者の視点が存在すると推定される基準位置の空間座標と、モニタ１の表示画面を構成する各画素の空間座標とに基づいて、カメラ２により撮影された映像を変換して、モニタ１に表示させる出力映像を作成するようにしている。なお、この画像処理装置３による映像の変換処理については、詳細を後述する。
【００１２】
［動作］
以上のように構成される本実施形態の車両用死角映像表示装置では、まず、カメラ２が、死角領域を含む車両周囲の映像を撮影して、その撮影映像のデータをＮＴＳＣなどのビデオ映像信号伝送線を用いて画像処理装置３に出力する。画像処理装置３は、カメラ２から撮影映像のデータが送られてくると、これを画素ごとのデータに分割して内部の入力用フレームバッファにストアする。
【００１３】
次に、画像処理装置３は、入力用フレームバッファ上の画素のデータを、変換処理の内容にしたがって、出力用フレームバッファ上にコピーしていく。変換処理の内容には、入力用フレームバッファ上の各画素のデータを出力用フレームバッファ上のどこにコピーするかが分かるように、それぞれのアドレスが記述されている。すなわち、変換処理の内容には、出力用フレームバッファ上の各画素と入力用フレームバッファ上の各画素との対応関係が記述されている。画像処理装置３は、この変換処理の内容として記述されている各画素ごとの対応関係をもとに、入力用フレームバッファ上の画素のデータを出力用フレームバッファ上にコピーして、モニタ１に表示させる出力映像を完成させる。
【００１４】
次に、画像処理装置３は、出力用フレームバッファの内容、すなわち出力映像のデータを、ＮＴＳＣなどのビデオ映像信号伝送線を用いてモニタ１に出力する。そして、モニタ１が、この画像処理装置３から送られた出力映像のデータに基づいて表示処理を行うことで、前方ピラーによって発生する死角領域の映像がモニタ１に表示されることになる。本実施形態の車両用死角映像表示装置では、以上の一連の処理をカメラ２による撮影映像のフレームごとに繰り返し行うことで、死角領域の映像を動画としてモニタ１に表示させることができる。なお、以上の一連の処理のなかで、本実施形態の車両用死角映像表示装置に特徴的な部分である画像処理装置３による変換処理以外の部分は、コンピュータを用いた画像処理の分野で公知の技術である。
【００１５】
［変換処理の内容］
ここで、本実施形態の車両用死角映像表示装置に特徴的な部分である画像処理装置３による変換処理の内容について具体的に説明する。なお、以下の説明では、図４に示すように、車両の左右方向をＸ軸、車両の前後方向をＹ軸、車両の高さ方向をＺ軸とした座標系を用いる。この座標系ではＸＹ平面が地面となる。
【００１６】
本実施形態の車両用死角映像表示装置において、画像処理装置３での変換処理を行う際には、まず、図５に示すように、基準位置となる運転者の視点位置ＥＰの空間座標ＥＰ（ｘ，ｙ，ｚ）を求める。運転者の視点位置ＥＰは、既存の視点位置計測手段を用いて実測により求めることができる。この視点位置計測手段としては、例えば、車室内に設置されたカメラで運転者の顔画像を撮影し、この運転者の顔画像を解析して視点位置ＥＰを求めるものや、車両のルームミラーやドアミラーの角度から運転者の視点位置ＥＰを求めるものなどが考えられる。また、運転者が着座する車両のシート位置をシート位置センサで検出して、検出したシート位置から運転者の視点位置ＥＰを推定するようにしてもよい。また、運転者による入力操作などにより運転者の身長や座高などの身体情報を取得して、この運転者の身体情報に基づいて視点位置ＥＰを推定するようにしてもよい。
【００１７】
次に、モニタ１を空間上に存在する表示画素の集合体として考えて、モニタ１の表示画面を構成する各画素Ｌ＿ｐの空間座標Ｌ＿ｐ（ｘ，ｙ，ｚ）を求める。モニタ１を空間上に存在する表示画素の集合体として考えることで、液晶ディスプレイなどのように表示画面が平面状のモニタを用いる場合でも、旧式のＣＲＴのように表示画面が湾曲したモニタを用いる場合でも、同様の処理が可能となる。また、モニタ１としてプロジェクタを用いる場合には、投影面上の画素の空間座標を用いることで、同様の処理が可能となる。
【００１８】
さらに、死角領域を含む車両周囲の領域の所定位置に基準面を設定する。ここで、基準面は、基準位置である運転者の視点位置ＥＰを中心とした半径Ｒの球体の外周面として定義される球面状の基準面である。なお、図５においては、便宜上、球面状の基準面の一部を切り出して図示しているが、実際には、運転者の視点位置ＥＰを中心とした半径Ｒの球体の外周面全域が基準面として設定される。
【００１９】
そして、図５に示すように、基準位置となる運転者の視点位置ＥＰを始点としてモニタ１の表示画面を構成する各画素Ｌ＿ｐを通る半直線と基準面との交点Ｌ＿ｃをそれぞれ求める。具体的には、運転者の視点位置ＥＰの空間座標ＥＰ（ｘ，ｙ，ｚ）と、モニタ１の表示画面を構成する各画素Ｌ＿ｐの空間座標Ｌ＿ｐ（ｘ，ｙ，ｚ）とから、運転者の視点位置ＥＰとモニタ１の表示画素Ｌ＿ｐとの間の距離Ｄが求められる。そして、基準面が、運転者の視点位置ＥＰを中心とした半径Ｒの球体の外周面として定められているので、運転者の視点位置ＥＰを始点としてモニタ１の表示画素Ｌ＿ｐを通る半直線と基準面との交点Ｌ＿ｃは、下記式（１）で求めることができる。なお、この式（１）は、Ｒ＞Ｄであれば、運転者の視点位置ＥＰとモニタ１の表示画素Ｌ＿ｐとの位置関係によらず常に成立するものであり、この式（１）を用いて、モニタ１の表示画面を構成する各画素Ｌ＿ｐに対応した基準面上の全ての交点Ｌ＿ｃを求めることができる。
【００２０】
Ｌ＿ｃ＝（Ｌ＿ｐ−ＥＰ）×（Ｒ／Ｄ）＋ＥＰ    ・・・（１）
以上のようにして、運転者の視点位置ＥＰを始点としてモニタ１の表示画面を構成する各画素Ｌ＿ｐを通る半直線と球面状の基準面との交点Ｌ＿ｃをそれぞれ求めると、運転者の視点から見たモニタ１の表示画面の基準面上における投影領域Ａが求まる。この投影領域Ａは、運転者の視点位置ＥＰを基準とした死角領域を球面形状の基準面上の領域として特定したものであり、カメラ２は、この投影領域Ａの映像を撮影できるように設定されている。
【００２１】
次に、カメラ２の取付け位置や向き、レンズ収差などといった各種のカメラパラメータを用いて、球面形状の基準面上における投影領域Ａ内の各交点Ｌ＿ｃに対応した、カメラ２の撮影映像における各画素（Ｘ＿ｃ，Ｙ＿ｃ）を特定する。これにより、カメラ２の撮影映像における各画素（Ｘ＿ｃ，Ｙ＿ｃ）とモニタ１の表示画面を構成する各画素Ｌ＿ｐとの対応関係、すなわち、入力用フレームバッファ上にストアしたカメラ２の撮影映像における各画素のデータを出力用フレームバッファ上のどこにコピーすればよいかを求めることができ、その対応関係が画像処理装置３による変換処理の内容となる。
【００２２】
本実施形態の車両用死角映像表示装置では、画像処理装置３が、以上のようにして求めた変換処理の内容にしたがって、入力用フレームバッファ上の各画素のデータを出力用フレームバッファ上にコピーしていくことで出力映像が作成される。そして、この出力映像がモニタ１に表示されることになる。このモニタ１に表示される出力映像の映像範囲は、車両の運転者の視点から見たときにモニタ１によって遮蔽される範囲と一致するので、モニタ１に表示される出力映像は、フロントウィンドウやサイドウィンドウを通してみる実際の風景と連続した映像となり、車両の運転者はこの映像の内容を直感的に把握することが可能となる。また、モニタ１は車両の前方ピラーの車室内側に取り付けられているので、車両の運転者は、モニタ１に表示されている出力映像を参照することで、前方ピラーによって発生する死角領域の様子を認識することができる。
【００２３】
なお、以上のような変換処理の内容は、出力映像を作成するたびにリアルタイムで計算するようにしてもよいが、車両の運転者の視点位置ＥＰとモニタ１の表示画面を構成する各画素Ｌ＿ｐとの位置関係が変わらなければ、変換処理の内容も変化しないので、一度計算した結果を変換テーブルとして画像処理装置３内部のメモリなどに記憶させておき、以降の変換処理では、この変換テーブルに基づいてカメラ２による撮影画像を変換して出力画像を作成するようにしてもよい。また、上述した視点位置計測手段により運転者の視点位置ＥＰが変化したことを検出したときに、以上のような変換処理の内容を新たに計算して、変換テーブルを更新するようにしてもよい。また、複数の視点位置ＥＰに対応した変換テーブルを予め作成しておいて、視点位置計測手段による計測結果に応じてこれらの変換テーブルを使い分けるようにしてもよい。
【００２４】
ところで、画像処理装置３が上述した球面状の基準面を用いた演算によって変換処理を行う場合、運転者の視点位置ＥＰとモニタ１の表示画素Ｌ＿ｐとの位置関係によっては、球面状の基準面上における交点Ｌ＿ｃのＺ座標の値がマイナスになることがある。しかしながら、実際には、ＸＹ平面は地面であり、Ｚ座標の値がマイナスとなる位置、すなわち地面よりも低い位置に被写体が存在するケースは殆どない。このような場合、交点Ｌ＿ｃのＺ座標の値がマイナスのまま処理しても、モニタ１に表示される出力映像が多少ゆがむ程度で実用上問題となることは少ないが、歪みを最小限に抑えたい場合には、運転者の視点位置ＥＰから球面状の基準面上におけるＺ座標の値がマイナスの交点Ｌ＿ｃに向かう半直線上に必ず存在する地面上の点（Ｚ座標の値が０の点）Ｌ＿ｃ’を求める処理を追加すればよい。
【００２５】
具体的には、画像処理装置３は、例えば図６に示すように、死角領域を含む車両周囲の領域の所定位置に、上述した球面状の基準面に加えて、地面と一致する平面（Ｚ＝０の平面）として定義される平面状の基準面を設定する。そして、運転者の視点位置ＥＰを始点としてモニタ１の表示画面を構成する各画素Ｌ＿ｐを通る半直線と球面状の基準面との交点Ｌ＿ｃを求めたときに、求めた交点Ｌ＿ｃのＺ座標の値がマイナスとなる場合には、当該半直線と平面状の基準面との交点Ｌ＿ｃ’を求め、これをＬ＿ｃに置き換える。なお、交点Ｌ＿ｃ’の空間座標は、交点Ｌ＿ｃの空間座標をＬ＿ｃ（ｘ＿ｃ，ｙ＿ｃ，ｚ＿ｃ）とし、運転者の視点位置ＥＰの空間座標をＥＰ（ｘ＿ｅ，ｙ＿ｅ，ｚ＿ｅ）、モニタ１の表示画素Ｌ＿ｐの空間座標をＬ＿ｐ（ｘ＿ｐ，ｙ＿ｐ，ｚ＿ｐ）とすると、Ｌｃ’（ｃｘ×（ｚ＿ｅ／（ｚ＿ｅ−ｚ＿ｃ）），ｃｙ×（ｚ＿ｅ／（ｚ＿ｅ−ｚ＿ｃ）），０）として表される。そして、運転者の視点位置ＥＰを始点としてモニタ１の表示画面を構成する各画素Ｌ＿ｐを通る半直線と球面状基準面、または平面状基準面のとの交点をそれぞれ求めた後に、上述した例と同様の処理を行う。これにより、歪みの少ない出力映像をモニタ１に表示させることができる。
【００２６】
以上の変換処理により作成された出力映像においては、基準面の近くにある物体については歪みなく表示されるが、それ以外の場所にある物体は多少ゆがんで表示されることがある。この問題による影響を最小限にするために、変換処理の演算に用いる基準面として球面状の基準面に加えて平面状の基準面を設定することは、非常に有効な対策である。
【００２７】
また、モニタ１に表示される出力映像において、運転者にとって特に重要となるのは死角領域に存在する障害物の映像である。そして、この死角領域に存在する障害物を歪みの少ない映像として表示させるには、当該障害物の近くに基準面を設定することも非常に有効である。このような観点から、本実施形態の車両用死角映像表示装置では、車両周囲に存在する障害物を検知して車両から当該障害物までの距離を計測する障害物検知装置を用い、例えば図７に示すように、この障害物検知装置によって計測された車両から障害物までの距離Ｌを基準として、運転者の視点位置ＥＰから球面状の基準面までの距離、すなわち、球面状の基準面を定義するための球体の半径Ｒを決定するようにしてもよい。
【００２８】
すなわち、車両に対する運転者の視点位置ＥＰはほぼ一定と考えられるので、車両から障害物までの距離Ｌが分かれば、運転者の視点位置ＥＰから障害物までの距離が求められる。そして、この運転者の視点位置ＥＰから障害物までの距離を、運転者の視点位置ＥＰから球面状の基準面までの距離、すなわち、球面状の基準面を定義するための球体の半径Ｒとすることで、障害物の近傍に球面状の基準面を設定することができ、このように設定した球面状の基準面を用いて上述した変換処理を行うことで、死角領域に存在する障害物を歪みの少ない映像としてモニタ１に表示させることができる。なお、車両から当該障害物までの距離を計測する障害物検知装置としては、例えばミリ波レーダやレーザレーダなど、車両用の障害物検知装置として公知のものが何れも利用可能である。
【００２９】
［実施形態の効果］
以上、具体的な例を挙げながら詳細に説明したように、本実施形態の車両用死角映像表示装置によれば、画像処理装置３が、運転者の視点が存在すると推定される基準位置の空間座標と、モニタ１の表示画面を構成する各画素の空間座標とに基づいて、カメラ２により撮影された映像を変換して、モニタ１に表示させる出力映像を作成するようにしているので、カメラ２やモニタ１の煩雑な調整作業を行うことなく、車両の前方ピラーにより運転者の視界が遮られることによって生じる死角領域の映像を、運転者の視点からフロントウィンドウやサイドウィンドウを通して見た実際の風景とある程度連続したかたちでモニタ１に表示させることができ、死角領域の映像の内容を運転者に直感的に把握させることができる。
【００３０】
また、本実施形態の車両用死角映像表示装置では、画像処理装置３が、車両周囲の領域の所定位置に球面状の基準面を設定し、この球面状の基準面を用いた演算によりモニタ１に表示させる出力映像を作成するようにしているので、演算負荷を過大なものとすることなく、実際の風景とある程度連続した死角領域の映像をモニタ１に適切に表示させることができる。すなわち、画像処理装置３での変換処理の手法としては、車両周囲に複数の平面状の基準面を設定して、これら複数の平面状の基準面を用いて上述した手法と同様の処理を行なうことも考えられるが、このように複数の平面状の基準面を用いて変換処理を行う場合には、運転者の視点が存在すると推定される基準位置を始点としてモニタ１の各表示画像を通過する半直線と各平面状の基準面との交点をそれぞれ求めて、比較演算を行なう必要があり、計算量が膨大なものとなることが懸念される。これに対して、本実施形態の車両用死角映像表示装置では、運転者の視点位置が存在すると推定される基準位置を中心とする球体の外周面として定義される球面状の基準面を設定し、この球面状の基準面を用いて変換処理を行うようにしているので、交点を求める演算が簡略化され、かつ比較演算を行う必要がない。したがって、画像処理装置３での演算負荷を過大なものとすることなく、実際の風景とある程度連続した死角領域の映像をモニタ１に適切に表示させることができ、画像処理装置３をより単純なハードウェアで実現することも可能となる。
【００３１】
なお、以上説明した車両用死角映像表示装置は本発明の一適用例であり、本発明が以上の例に限定されるものではなく、本発明に係る技術的思想を逸脱しない範囲であれば、具体的な装置構成や変換処理の細部などにおいて、種々の変更が可能であることは勿論である。例えば、上述した車両用死角映像表示装置では、モニタ１を車両の前方ピラーの車室内側に設置して、前方ピラーにより運転者の視界が遮られることによって生じる死角領域の映像をモニタ１に表示させるようにしているが、モニタ１を他の車両構造物に設置して、その車両構造物により運転者の視界が遮られることによって生じる視界領域の映像をモニタ１に表示させるようにしてもよい。
【００３２】
また、上述した車両用死角映像表示装置では、モニタ１に死角領域の映像を常に表示させることを前提としているが、死角領域の映像の表示／非表示を車両周囲の状況に応じて切り替えられるようにしてもよい。すなわち、死角領域の映像を表示することが特に求められるのは、この死角領域に人や他車両などが存在する場合であるので、例えば、近接センサで車両周囲の状況を検出したり、周囲のインフラとの通信により車両周囲の状況を示す情報を取得したりして、その結果に応じて、モニタ１への死角領域の映像の表示／非表示を切り替えるようにしてもよい。勿論、運転者のスイッチ操作などによって、モニタ１への死角領域の映像の表示／非表示を切り替えるようにしてもよい。このように、死角領域の映像の表示／非表示を車両周囲の状況に応じて切り替えるようにした場合には、消費電力の低減といった効果が期待できる。
【００３３】
また、上述した車両用死角映像表示装置では、画像処理装置３での変換処理に用いる基準位置を点（運転者の視点位置ＥＰ）として考えて、画像処理装置３が、運転者の視点位置の空間座標とモニタ１の表示画面を構成する各画素の空間座標とに基づいてカメラ２により撮影された映像を変換して、モニタ１に表示させる出力映像を作成するようにしているが、運転者の右目位置と左目位置とを含む空間領域を基準位置として考えて、画像処理装置３が、この空間領域内に存在する運転者の右目位置の空間座標および左目位置の空間座標とモニタ１の表示画面を構成する各画素の空間座標とに基づいてカメラ２により撮影された映像を変換して、モニタ１に表示させる出力映像を作成するようにしてもよい。この場合には、運転者の視覚が右目と左目のどちらが支配的となっているかに拘らず、死角領域の映像を、運転者の視点からフロントウィンドウやサイドウィンドウを通して見た実際の風景とある程度連続したかたちでモニタ１に表示させることができる。
【００３４】
また、運転中における運転者の頭部の動きに応じて運転者の視点が移動する範囲と推定される空間領域を基準位置として考えて、画像処理装置３が、この空間領域内に存在する複数の点の空間位置座標とモニタ１の表示画面を構成する各画素の空間座標とに基づいてカメラ２により撮影された映像を変換して、モニタ１に表示させる出力映像を作成するようにしてもよい。この場合には、頭部の移動により運転者の視点位置がずれたときでも、死角領域の映像を、運転者の視点からフロントウィンドウやサイドウィンドウを通して見た実際の風景とある程度連続したかたちでモニタ１に表示させることができる。
【図面の簡単な説明】
【００３５】
【図１】本発明を適用した車両用死角映像表示装置の構成を示す図である。
【図２】本発明を適用した車両用死角映像表示装置におけるモニタやカメラの具体的な取付け位置を説明する図である。
【図３】前方ピラーの車室内側にモニタが取り付けられた状態を運転者の視点から見た様子を示す図である。
【図４】本発明を適用した車両用死角映像表示装置における画像処理装置での変換処理に用いるＸＹＺ座標系を説明する図である。
【図５】画像処理装置での変換処理の内容を説明する図である。
【図６】球面状の基準面に加えて平面状の基準面を設定した場合の変換処理の内容を説明する図である。
【図７】車両から障害物までの距離に基づいて運転者の視点位置から球面状の基準面までの距離を決定する例を説明する図である。
【符号の説明】
【００３６】
１  モニタ
２  カメラ
３  画像処理装置
１００  車両
１０１  前方ピラー
【図１】
0004810953.tif 000002
【図２】
0004810953.tif 000003
【図３】
0004810953.tif 000004
【図４】
0004810953.tif 000005
【図５】
0004810953.tif 000006
【図６】
0004810953.tif 000007
【図７】
0004810953.tif 000008