(57)【特許請求の範囲】
【請求項１】
自車両周辺の画像を取得するための画像取得手段と、
前記画像取得手段で取得した前記画像中の前記自車両以外の物体の速度を検出する速度検出手段と、
前記画像取得手段で取得した前記画像中における線の粗密及び色のうち少なくともいずれか一方の変化量を示す画像エネルギを算出する画像エネルギ算出手段と、
前記画像エネルギ算出手段で算出した前記画像中の画像エネルギが所定の値より低い領域を抽出して削除することにより前記画像を縮小する画像縮小手段と、
を備え、
前記画像エネルギ算出手段は、
前記速度検出手段で検出した前記物体の速度に基づき、前記画像中で速度を有する前記物体の占める画像領域の画像エネルギの値を変化させることを特徴とする車載用画像処理装置。
【請求項２】
請求項１に記載の車載用画像処理装置において、
前記速度検出手段は、前記自車両に対する前記画像中の物体の相対速度を検出可能に構成され、
前記画像エネルギ算出手段は、
前記速度検出手段で検出した前記画像中の物体の前記自車両に対する相対速度から前記物体と前記自車両とが接近しているか否かを判定し、前記物体と前記自車両とが接近していると判定した場合には、前記物体の占める画像領域の画像エネルギを前記物体の占める画像領域以外の領域の画像エネルギよりも高く設定することを特徴とする車載用画像処理装置。
【請求項３】
請求項１又は請求項２に記載の車載用画像処理装置において、
前記速度検出手段は、前記画像中の物体の絶対速度を検出可能に構成され
前記画像エネルギ算出手段は、
前記速度検出手段で検出した前記画像中の物体の絶対速度が所定の値よりも大きい場合に、前記物体の占める画像領域の画像エネルギを前記物体の占める画像領域以外の領域の画像エネルギよりも高く設定することを特徴とする車載用画像処理装置。
【請求項４】
請求項２又は請求項３に記載の車載用画像処理装置において、
前記速度検出手段は、車載レーダであることを特徴とする車載要画像処理装置。
【請求項５】
請求項２又は請求項３に記載の車載用画像処理装置において、
前記速度検出手段は、
前記画像取得手段により取得した前記画像を画像処理することにより前記物体の速度を検出することを特徴とする車載用画像処理装置。
【請求項６】
車載用の表示手段と、
請求項１〜請求項５の何れかに記載の車載用画像処理装置と、
前記車載用画像処理装置で縮小した画像を前記表示手段で表示させる表示制御手段と、
を備えたことを特徴とする車載用画像表示装置。
【請求項７】
請求項６に記載の車載用画像表示装置において、
前記表示手段は、
前記自車両の後方視認用ミラー部分に、運転者が表示画面を視認可能となるように取り付けられていることを特徴とする車載用画像表示装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、車両周辺の重要部分を見やすさを保った状態で画像を縮小して表示するための車載用画像処理装置及び車載用画像表示装置に関する。
【背景技術】
【０００２】
従来、車載カメラを用い、車両の側後方の画像を取得し、オプティカルフローなどで検出した相対速度を持つ物を強調表示して、運転者がより理解しやすい画像を生成することで車両運転時の安全向上を狙っている技術がある（例えば、特許文献１参照）。
【０００３】
一方で、画像の重要度を解析して重要度の高い箇所を切り貼りすることで重要箇所を残したまま画像を縮小する技術もある（例えば、特許文献２参照）。さらに、これを改良し、重要度を示す画像エネルギ画像をまず算出し、それに対してＳｅａｍと呼ばれる重要度が低い箇所を通って画像エネルギ画像を縦断するラインを算出し、その箇所を削除していく方法が提案されている（例えば、非特許文献１参照）。
【０００４】
これらの縮小画像生成技術により、小さなモニタに効率よく周辺状況を表示することができる。これを車載カメラに適用した場合、例えば側後方カメラにおいては、追越し車両がより拡大強調されることになり、一目で車線変更の可否が分かりやすい。
【特許文献１】特開２００３−２７４３９３
【特許文献２】ＵＳ２００７／００２５６３７
【非特許文献１】”Seam Carving for Content-Aware Image Resizing”, S.Avidan (Mitsubishi Electric Research Labs), SIGGRAPH’07
【発明の開示】
【発明が解決しようとする課題】
【０００５】
しかし、非特許文献１に記載されている手法では、画像エネルギ画像の算出方法によっては、重要物体が十分に強調されなかったり、縮小画像がひずんだりするという問題がある。例えば、一般的な手法として、画像エネルギ画像にエッジ画像を用いた場合、路側構造物は強いエッジを持つ場合が多く、車線変更の可否を判定するには余り重要でないにもかかわらず重要度が高くなる。したがって、真に重要な周辺車両の重要度が相対的に低くなり、十分車両が強調されない。また、車両の凹凸が少ない、いわゆるのっぺりした形状の車両も同様に画像エネルギが相対的に低くなり、車両の形状がひずむ。
【０００６】
さらに、車両が非常に多い状況や路面に模様がある状況などの画像全体が複雑すぎる場合も、削除にふさわしい箇所がないにも拘わらず削除処理がされてしまうので、車両がひずんでしまう。
【０００７】
本発明は、こうした問題に鑑みなされたもので、画像中の重要な物体を縮小画像中で強調し、かつ、ひずみの少ない縮小画像を得ることができる車載用画像処理装置及びその画像を表示する車載用画像表示装置を提供することを目的とする。
【課題を解決するための手段】
【０００８】
かかる問題を解決するためになされた請求項１に記載の車載用画像処理装置（５：この欄においては、発明に対する理解を容易にするため、必要に応じて「発明を実施するための最良の形態」欄において用いた符号を付すが、この符号によって請求の範囲を限定することを意味するものではない。）は、画像取得手段（１０）、速度検出手段（２０）、画像エネルギ算出手段（３０）及び画像縮小手段（３０）を備えている。
【０００９】
画像取得手段（１０）は、自車両周辺の画像を取得するためのものであり、速度検出手段（２０）は、画像中の自車両以外の物体を抽出し、抽出した物体の速度を検出する。また、画像エネルギ算出手段（３０）は、画像取得手段（１０）で取得した画像中における線の粗密及び色のうち少なくともいずれか一方の変化量を示す画像エネルギを算出する。
【００１０】
画像縮小手段（３０）は、画像エネルギ算出手段（３０）で算出した画像中の画像エネルギが所定の値より低い領域を抽出して削除することにより画像を縮小する。さらに、画像エネルギ算出手段（３０）は、速度検出手段（２０）で検出した物体の速度に基づき、画像中で速度を有する物体の占める画像領域の画像エネルギを変化させる。
【００１１】
以上のような車載用画像処理装置（５）は、車両走行中に、画像中の重要な物体を縮小画像中で強調し、かつ、ひずみの少ない縮小画像を得ることができる画像処理装置となる。以下説明する。
【００１２】
まず、「画像中の画像エネルギ」について説明する。これは、画像中の重要な箇所がどこかを示す指標で、画像中の各位置ごとに算出され、画像全体のエネルギ分布を作成した物をエネルギ画像と呼ぶ。
【００１３】
この算出方法、すなわちエネルギの定義の方法はさまざまな方法が考えられ、例えばエッジ画像、すなわち線の粗密が色の変化が大きい箇所と考えることが出来る。例えば、晴天の空など重要でないと思われる箇所では、線の粗密や画面の色の変化がほとんどできない。一方、都市の道路を撮影した画像で重要と思われる箇所は、道路面に車線などのペイントが施されていたり、道路上には車両が多数存在していたり、道路脇に建物が立ち並んでいたり、また、道路脇や建物には広告用の看板などが立ち並んでいたりするので、線の粗密や色の変化が大きい。
【００１４】
このように、エッジ抽出処理を画像中の画像エネルギとした場合、エッジが強い部分が「画像中の画像エネルギが高い」となる一方で、模様が無い重要なもの、例えばのっぺりとしたデザインの車両は重要でないとされてしまうことになる。このため、車両が削除されたり、車両内部ののっぺりした箇所が削除され車両の見た目がひずんだりする。そのため、この画像エネルギの算出方法は非常に重要である。
【００１５】
このように定義した「画像中の画像エネルギ」によれば、請求項１に記載の車載用画像処理装置（５）では、画像エネルギ算出手段（３０）で画像中における線の粗密及び色のうち少なくともいずれか一方の変化量を示す画像エネルギが算出され、算出された画像エネルギが所定の値より低い部分が削除されて画像が縮小される。
【００１６】
その際、速度検出手段（２０）で画像中の自車両以外の物体の速度を検出し、検出した物体の速度に基づき、画像中で速度を有する物体の占める画像領域の画像エネルギの値を変化させるようになっている。したがって、画像中で速度を有する物体、例えば、他車両や自転車あるいは人などについては、その部分の画像エネルギの値を高くして画像中から削除されないようにしたり、縮小画像中で強調したりするようなことができる。
【００１７】
つまり、請求項１に記載の車両用画像装置（５）によれば、画像中の重要な物体を縮小画像中で強調し、かつ、ひずみの少ない縮小画像を得ることができるのである。
ここで、画像中で速度を有する物体は、他車両や自転車あるいは人のように、運転者が自車両を運転する際に危険性があると認識すべきものであるので、画像縮小の際、それらが削除されないで画像中に残っていたり、縮小画像中で強調されたりすれば、運転者は、それらを画像中から容易に認識することができるので運転時の安全性を向上することができる。
【００１８】
ところで、静止画像の縮小とは異なり、車載用画像処理装置（５）においては、自車両に対し衝突などの危険性のあるものは、縮小画像中で強調した状態で画像の縮小を行うことが重要である。
【００１９】
そこで、請求項２に記載のように、速度検出手段（２０）を自車両に対する画像中の物体の相対速度を検出可能に構成し、画像エネルギ算出手段（３０）は、速度検出手段（２０）で検出した画像中の物体の自車両に対する相対速度から物体と自車両とが接近しているか否かを判定し、物体と自車両とが接近していると判定した場合には、物体の占める画像領域の画像エネルギを物体の占める画像領域以外の領域の画像エネルギよりも高く設定するようにするとよい。
【００２０】
このようにすると、自車両に接近してくる物体の占める画像領域の画像エネルギが高く設定されるので、他の部分が縮小されても、接近してくる物体は縮小されることがない。つまり、自車両に接近してくる物体は縮小画像中で強調されて表示されることになる。換言すれば、自車両に衝突する危険性のある物体が縮小画像中で強調されることになるので、運転時の安全性を向上させることができる。
【００２１】
また、物体と自車両の相対速度が大きくなくとも、物体の絶対速度が速い場合には、その物体は自車両にとって危険である可能性が高い。例えば、物体が他車両であり、他車両と自車両とが高速で併走しているような場合である。
【００２２】
そこで、請求項３に記載のように、速度検出手段（２０，４０）を画像中の物体の絶対速度を検出可能に構成し、画像エネルギ算出手段（３０）は、速度検出手段（２０，４０）で検出した画像中の物体の絶対速度が所定の値よりも大きい場合に、物体の占める画像領域の画像エネルギを物体の占める画像領域以外の領域の画像エネルギよりも高く設定するようにするとよい。
【００２３】
このようにすると、速度検出手段（２０，４０）で検出した画像中の物体の絶対速度が所定の値よりも大きい場合には、物体の占める画像領域の画像エネルギが高く設定されるので、他の部分が縮小されても、絶対速度が大きい物体は縮小されることがない。
【００２４】
つまり、絶対速度が高い物体は縮小画像中で強調されて表示されることになる。換言すれば、自車両に危険を及ぼすおそれがある物体が縮小画像中で強調されることになるので、運転時の安全性を向上させることができる。
【００２５】
ところで、速度検出手段（２０）には種々のものが考えられるが、請求項４に記載のように、速度検出手段（２０）は、車載レーダ（２０）であるとよい。つまり、レーダでは、物体の距離及び方位が計測でき、また、物体の距離及び方位の変化率あるいはドップラシフトから物体の自車両に対する相対速度が計測できる。したがって、物体の方位に相当する画像の箇所の画像エネルギをその相対速度に応じて変化させることができる。
【００２６】
また、請求項５に記載のように、速度検出手段（２０）は、画像取得手段（１０）により取得した画像を画像処理することにより物体の速度を検出するようにしてもよい。
このようにすると、画像取得手段（１０）として、例えば、ステレオカメラ、単眼などを用い、それらによる移動ステレオ視、オプティカルフロー、画像の拡大率計算、物体トラッキングなど、カメラで取得した画像から画像処理により物体を抽出し、抽出した物体の位置の変化率から物体の速度を検出することができる。
【００２７】
請求項６に記載の画像表示装置（１）は、車載用の表示手段（５０）と、請求項１〜請求項５の何れかに記載の車載用画像処理装置（５）と、車載用画像処理装置（５）で縮小した画像を表示手段（５０）で表示する表示制御手段（３０）を備えたことを特徴とする。
【００２８】
このような車載用画像表示装置（１）によれば、請求項１〜請求項５の何れかに記載の車載用画像処理装置の特徴を有する縮小画像を表示することができる車載用画像表示装置（１）とすることができる。
【００２９】
ところで、表示手段（５０）を自車両に装着する際、装着する位置や表示の方向には種々の方法が考えられる。例えば、車室内の前部に装着されているカーナビゲーション装置の表示画面を表示手段（５０）として用い、車両内に対して表示を行うようにしてもよいが、請求項７に記載のように、自車両の後方視認用ミラー部分に、運転者が表示画面を視認可能となるように取り付けられるようにしてもよい。
【００３０】
このようにすると、運転者は、後方確認用ミラーを介しての自車両後方確認動作と同じ動作によって、縮小画像中で強調表示された物体を視認することができるので、物体の存在を確認しやすく、ひいては運転時の安全性を向上させることができる。
【発明を実施するための最良の形態】
【００３１】
以下、本発明が適用された実施形態について図面を用いて説明する。なお、本発明の実施の形態は、下記の実施形態に何ら限定されることはなく、本発明の技術的範囲に属する限り種々の形態を採りうる。
［第１実施形態］
図１は、本発明が適用された車載用画像表示装置１の概略の構成を示すブロック図である。車載用画像表示装置１は、図１に示すように、車載用画像処理装置５及び表示装置５０を備えている。
【００３２】
車載用画像処理装置５は、側後方カメラ１０、ミリ波レーダ２０、車速センサ４０及び画像処理部３０を備えている。
側後方カメラ１０は、図示しない自車両周辺の画像を取得するための可視光画像を取得可能な小型広角ＣＣＤカメラであり、車両の側後方の画像を取得できるように自車両のバックミラーなどに取り付けられている。
【００３３】
ミリ波レーダ２０は、画像中の物体（本実施形態では他車両）の相対速度を検出するためのものであり、ミリ波電波を自車両の側後方に送信できるように自車両に取り付けられている。ミリ波レーダ２０は、ミリ波電波を送信し、送信した電波の反射波を受信し、受信した反射波の受信強度、受信方位及び反射波のドップラシフトから車両側後方の他車両のまでの距離と方位及び相対速度を検出する。
【００３４】
車速センサ４０は、自車両の速度を検出するものであり、車軸の回転数から速度を検出するものであってもよいし、ＧＰＳ車載機で自車両の現在位置を検出し、その変化量から速度を検出するものであってもよい。
【００３５】
画像処理部３０は、図示しないＣＰＵ、ＲＯＭ、ＲＡＭ及びＩ／Ｏなどから構成されており、以下の（ア）〜（オ）の処理を実行する。
（ア）側後方カメラ１０で取得した画像中の画像エネルギを算出する。
【００３６】
（イ）ミリ波レーダ２０で検出した画像中の他車両の自車両に対する相対速度から他車両と自車両とが接近しているか否かを判定する。そして、他車両と自車両とが接近していると判定した場合には、他車両の占める画像領域の画像エネルギを他車両の占める画像領域以外の領域の画像エネルギよりも高く設定する。
【００３７】
（ウ）ミリ波レーダ２０で検出した画像中の他車両の自車両に対する相対速度と車速センサ４０で検出した自車両の速度から他車両の絶対速度を算出する。
（エ）他車両の絶対速度が所定の値よりも大きい場合に、他車両の占める画像領域の画像エネルギを他車両の占める画像領域の画像エネルギよりも高く設定する。
【００３８】
（オ）（ア）〜（エ）の処理で得られた画像エネルギが所定の値より低い領域を抽出して削除することにより画像を縮小する。
（カ）（オ）の処理で縮小した画像を表示装置５０で表示させる。
【００３９】
表示装置５０は、車載用画像処理装置５で縮小した画像を表示するものであり、液晶ディスプレイや有機ＥＬディスプレイを有している。表示装置５０は、自車両のバックミラー部分のミラーの代わりに、運転者が表示画面を視認可能となるように取り付けられている。
【００４０】
（画像処理部３０における処理）
次に図２〜図４に基づき画像処理部３０で実行される処理について説明する。図２は、画像処理部３０で実行される画像処理のメインルーチンの処理の流れを示すフローチャートであり、図３は、サブルーチンである画像エネルギ画像生成処理のフローチャートであり、図４は、サブルーチンである低画像エネルギ箇所削除処理のフローチャートである。
【００４１】
画像処理では、図２に示すように、Ｓ１００において側後方カメラ１０から自車両の側後方の画像が取得され、続くＳ１０５においてミリ波レーダ２０から他車両の位置、方位及び自車両に対する相対速度が取得され、続くＳ１１０において車速センサ４０から自車両の速度が取得される。
【００４２】
続くＳ１１５では、Ｓ１００において取得された画像の画像エネルギ画像が生成される。画像エネルギ画像生成処理の詳細については後述する。
続くＳ１２０では、Ｓ１１５において生成された画像エネルギ画像に対して、低画像エネルギ箇所が削除され、縮小画像が得られる。低画像エネルギ箇所削除処理については後述する。
【００４３】
Ｓ１２５では、Ｓ１２０において得られた縮小画像が表示装置５０に表示され、処理がＳ１００に戻されて、画像処理が繰り返される。
（画像エネルギ画像生成処理）
次に、図３に基づき、画像エネルギ画像生成処理について説明する。画像エネルギ画像生成処理では、Ｓ２００においてベース画像エネルギパターン画像が生成される。例えば全領域で一律一定値の値を持つ画像や、格子模様などの一定パターンなど、エネルギ画像のベースとなる基本画像（ベース画像エネルギパターン画像）が生成される。
【００４４】
Ｓ２０５では、Ｓ２００において生成されたベース画像エネルギパターン画像に対しエッジ画像が作成される。つまり、画像中の角や縁の部分が抽出され画像（エッジ画像）が生成される。原画像の例を図５（ａ）及びエッジ画像の例を図５（ｂ）に示す。
【００４５】
Ｓ２１０では、Ｓ２０５において生成されたエッジ画像がＳ２００において生成されたベース画像エネルギパターン画像に加算される。つまり、ベース画像エネルギパターン画像にエッジ画像が重畳される。
【００４６】
Ｓ２１５では、Ｓ１０５（図２参照）でミリ波レーダ２０から得られた、他車両の自車両に対する相対速度から他車両が自車両に接近しているか否かが判定される。そして、他車両に自車両が接近していると判定された場合（Ｓ２１５：Ｙｅｓ）、処理がＳ２３５へ移行され、他車両に自車両が接近していないと判定された場合（Ｓ２１５：Ｎｏ）、処理がＳ２２０へ移行される。
【００４７】
Ｓ２２０では、Ｓ１０５(図２参照）においてミリ波レーダ２０から取得された自車両に対する他車両の相対速度に、Ｓ１１０（図２参照）において車速センサ４０から取得された自車両の速度が加算され、他車両の絶対速度が算出される。
【００４８】
Ｓ２２５では、Ｓ２２０において算出された他車両の絶対速度が所定の値以上であるか否かが判定される。そして、所定の値以上であると判定された場合（Ｓ２２５：Ｙｅｓ）、処理がＳ２３５へ移行され、所定の値以上でないと判定された場合（Ｓ２２５：Ｎｏ）、処理がＳ２３０へ移行される。
【００４９】
Ｓ２３０では、他車両部分の画像エネルギが低く設定され、処理がＳ２４０へ移行される。また、Ｓ２３５では、他車両部分の画像エネルギが高く設定され、処理がＳ２４０へ移行される。
【００５０】
Ｓ２４０では、Ｓ２３０又はＳ２３５において他車両部分の画像エネルギが設定されたものがＳ２１０で得られた画像エネルギ画像へ加算され、処理が終了される。
（低画像エネルギ箇所削除処理）
次に、図４に基づき、低画像エネルギ箇所削除処理について説明する。低画像エネルギ箇所削除処理では、Ｓ１１５（図２参照）の画像エネルギ画像生成処理で得られた画像エネルギ画像に対してまず、削減すべきライン（以下、このラインを「Ｓｅａｍ」と呼ぶ。）の本数が算出される。
【００５１】
具体的には、Ｓ１００（図２参照）で取得された画像の大きさと縮小画像との縦横の長さの比率及びＳｅａｍ１本を画面から削除した場合に画面から削除されるＳｅａｍの幅から削除すべきＳｅａｍの本数が算出される。
【００５２】
続くＳ３０５では、Ｓｅａｍが算出される。Ｓｅａｍは画像上端から下端まで最小のエネルギで通過できる筋のことであり、最短経路問題を解くことにより求められる。具体的にはＳｅａｍの算出は、Ｓ２４０（図３参照）において得られた画像エネルギ画像と同サイズの経路合計値を保存するメモリ空間（以下経路画像と呼ぶ）を確保し、元画像上辺の２行目から下の行に向かって以下のように全ピクセルに対して計算する。
【００５３】
ある画像中の１点のピクセルに対し、その上３ピクセルの経路画像エネルギ値のうち最も小さい値と、元画像の自身のピクセル位置のエネルギ値の合算値を、経路画像に保存する。これにより、経路画像には画像上端からそのピクセルへの最短経路値が保存され、経路画像の最下辺の値のうち最小の物が、求めるＳｅａｍの合計エネルギ値、その箇所から逆に経路画像を上端に向かってさかのぼることで、Ｓｅａｍの形状が得られる。Ｓｅａｍの例を図６（ａ）に示す。図６（ａ）中で、画像の上辺から下辺へ描かれている多数の線がＳｅａｍである。
【００５４】
続く、Ｓ３１０では、Ｓ３０５で算出されたＳｅａｍの画像エネルギ値から、削除したＳｅａｍの画像エネルギの合計値が所定の値以上であるか否かが判定される。そして、削除したＳｅａｍの画像エネルギの合計値が所定の値以上の場合（Ｓ３１０：Ｙｅｓ）、処理が終了される。また、削除したＳｅａｍの画像エネルギの合計値が所定の値よりも小さい場合（Ｓ３１０：Ｎｏ）、処理がＳ３１５へ移行される。
【００５５】
Ｓ３１５では、Ｓ３０５において算出されたＳｅａｍ部分が画像エネルギ画像から削除され、続くＳ３２０では、Ｓ３１５において削除されたＳｅａｍの総本数がＳ３００において算出された削除すべきＳｅａｍの本数以下か否かが判定される。
【００５６】
そして、削除されたＳｅａｍの総本数が削除すべきＳｅａｍの本数以下の場合（Ｓ３２０：Ｙｅｓ）、処理がＳ３０５へ移行され処理が繰り返される。また、削除されたＳｅａｍの総本数が削除すべきＳｅａｍの本数よりも多い場合（Ｓ３２０：Ｎｏ）、処理が終了される。本低画像エネルギ箇所削除処理がなされた画像の例を図６（ｂ）に示す。
【００５７】
（車載用画像表示装置１の特徴）
以上のような車載用画像表示装置１では、側後方カメラ１０で取得された自車両後方の画像中の画像エネルギが算出され、算出された画像エネルギが所定の値より低い部分が削除されて画像が縮小される。
【００５８】
その際、ミリ波レーダ２０で画像中の他車両の速度を検出し、検出した他車両の速度に応じて他車両の占める画像領域の画像エネルギを変化させるようになっている。つまり、自車両に対する他車両の相対速度から他車両と自車両とが接近しているか否かを判定している。
【００５９】
そして、他車両と自車両とが接近していると判定した場合には、他車両の占める画像領域の画像エネルギを他車両の占める画像領域の画像エネルギよりも高く設定し、他車両と自車両とが離間していると判定した場合には、他車両の占める画像領域の画像エネルギを他車両の占める画像領域の画像エネルギよりも低く設定している。
【００６０】
したがって、自車両に接近してくる他車両の占める画像領域の画像エネルギが高く設定されるので、他の部分が縮小されても、接近してくる他車両は縮小されることがない。つまり、自車両に接近してくる他車両は縮小画像中で強調されて表示されることになる。換言すれば、自車両に衝突する危険性のある他車両が縮小画像中で強調されることになるので、運転時の安全性を向上させることができる。
【００６１】
また、他車両の代わりに自転車あるいは人などについては、その部分の画像エネルギを高くして画像中から削除されないようにしたり、縮小画像中で強調したりするようなこともできる。
【００６２】
ところで、他車両と自車両の相対速度が大きくなくとも、他車両の速度が速い場合には、その他車両は自車両にとって危険である可能性が高い。ところが、車載用画像表示装置１では、ミリ波レーダ２０で検出した画像中の他車両と車速センサ４０で検出した自車両の速度から他車両の絶対速度を算出し、他車両の絶対速度が所定の値よりも大きい場合に、他車両の占める画像領域の画像エネルギを他車両の占める以外の画像領域の画像エネルギよりも高く設定している。
【００６３】
このようにしているので、算出した絶対速度が所定の値よりも大きい場合には、他車両の占める画像領域の画像エネルギが高く設定される。したがって、他の部分が縮小されても、絶対速度が大きい他車両は縮小されることがない。
【００６４】
つまり、絶対速度が高い他車両は縮小画像中で強調されて表示されることになる。換言すれば、自車両に危険を及ぼすおそれがある他車両が縮小画像中で強調されることになるので、運転時の安全性を向上させることができる。
【００６５】
また、表示装置５０を自車両の後方視認用ミラーの代わりに、運転者が表示画面を視認可能となるように取り付けられている。したがって、運転者は、後方確認用ミラーを介しての自車両後方確認動作と同じ動作によって、縮小画像中で強調表示された他車両を視認することができるので、他車両の存在を確認しやすく、ひいては運転時の安全性を向上させることができる。
［他の実施形態］
以上、本発明の実施形態について説明したが、本発明は、本実施形態に限定されるものではなく、種々の態様を採ることができる。
【００６６】
（１）上記実施形態では、ミリ波レーダ２０を用いて他車両の相対速度を検出していたが、ミリ波レーダ２０の代わりに、側後方カメラ１０で取得した画像から公知の画像処理方法により他車両の位置を抽出し、抽出した他車両の位置の変化率から他車両の相対速度を検出するようにしてもよい。
【００６７】
このようにすると、ミリ波レーダ２０によらずに他車両の速度を検出できるので、車載用画像表示装置１を簡易に構成することができる。
（２）上記実施形態では、表示装置５０は、自車両のバックミラー部分に、運転者が表示画面を視認可能となるように取り付けられているが、自車両の車室内の前部に装着されているカーナビゲーション装置の表示画面を用い、車両内に対して表示を行うようにしてもよい。
（３）上記実施形態では、画像エネルギ画像を生成するためにエッジ画像を生成していた（図３のＳ２０５参照）が、エッジに代わりに、縮小対象画像の特定にあわせて、他の関数を用いてもよい。具体的には、エッジ２乗関数、顕著性関数、ハリスコーナ関数、視線認識結果関数、顔認識結果関数、エントロピ関数、セグメンテーション関数あるいはＨｏＧ（Histogram of Gradientsの略）関数などの関数を用いてもよい。
（４）また側後方カメラ１０は、可視光カメラの代わりに赤外線カメラであってもよい。赤外線カメラであれば、夜間など自車両の周囲が暗いときに人や自転車などを縮小画像中で強調表示する場合に有効である。
（５）上記実施形態では、画像の左右幅を縮小するよう、Ｓｅａｍ方向は上下を想定したが、上下幅を縮小する場合は、Ｓｅａｍ方向を左右に置き換えて適用できる。
【図面の簡単な説明】
【００６８】
【図１】車載用画像表示装置１の概略の構成を示すブロック図である。
【図２】画像処理のメインルーチンの処理の流れを示すフローチャートである。
【図３】サブルーチンである画像エネルギ画像生成処理のフローチャートである。
【図４】サブルーチンである低画像エネルギ箇所削除処理のフローチャートである。
【図５】画像エネルギ画像生成処理中で生成されるエッジ画像の例を示す図である。
【図６】低画像エネルギ箇所削除処理がなされた画像の例を示す図である。
【符号の説明】
【００６９】
１…車載用画像表示装置、５…車載用画像処理装置、１０…側後方カメラ、２０…ミリ波レーダ、３０…画像処理部、４０…車速センサ、５０…表示装置。
【図１】
0005115171.tif 000002
【図２】
0005115171.tif 000003
【図３】
0005115171.tif 000004
【図４】
0005115171.tif 000005
【図５】
0005115171.tif 000006
【図６】
0005115171.tif 000007