(57)【要約】【課題】車両の周辺をカメラで撮像し、車内の表示手段にカメラが撮像した画像を適切なタイミングで自動的に切り替えて表示することができる車両周辺監視装置を提供する。【解決手段】車両１に搭載したカメラ５０により周辺の撮像を行い、異なる時点で撮像した２つの画像に生じた変化を検出し、検出結果に応じて車内の液晶ディスプレイに表示する画像を切り替える。変化の検出は画像の全体を対象として行うのではなく、車両１の前進方向及び後退方向について車両１から所定の範囲内に制限した検出範囲１０１内でのみ行う。検出範囲１０１は、車両１のハンドルの舵角に応じて調整し、更に各画素の輝度が上限及び下限の間に収まらない範囲を除外する。また、ワイパーの動作中及びランプの点灯中には切替処理を行わない。また、カメラ５０が撮像を行ったときの撮像条件を取得し、２つの画像の撮像条件の差異に応じて画像の補正を行った後に検出処理を行う。【選択図】図７
2008098858.tif 000002
【特許請求の範囲】
【請求項１】
車両に搭載され、該車両の外界を撮像して画像を取得する撮像手段と、該撮像手段が撮像して取得した画像を表示する表示手段とを備える車両周辺監視装置において、
前記撮像手段が異なる時点で撮像して取得した複数の画像を基に、画像の変化を検出する検出手段と、
該検出手段が検出を行う画像の範囲を制限する制限手段と、
前記検出手段の検出結果に応じて、前記撮像手段が撮像した画像を前記表示手段に表示させる処理を行う表示処理手段と
を備え、
前記制限手段は、前記車両の前進方向又は後退方向について前記車両から所定の範囲内に、検出を行う画像の範囲を制限するようにしてあること
を特徴とする車両周辺監視装置。
【請求項２】
前記撮像手段は、前記車両の前方及び後方を撮像することが可能にしてあり、
前記制限手段は、前記車両の前進方向及び後退方向の両方向について前記車両から所定の距離範囲内に、検出を行う画像の範囲を制限するようにしてある請求項１に記載の車両周辺監視装置。
【請求項３】
前記車両のハンドルの舵角を検知する検知手段を備え、
前記制限手段は、前記検知手段の検知結果に応じて、制限する画像の範囲を調整するようにしてある請求項１又は請求項２に記載の車両周辺監視装置。
【請求項４】
前記撮像手段が撮像して取得する画像は複数の画素からなり、
前記制限手段は、各画素の輝度が所定輝度内に収まる範囲に、制限する画像の範囲を調整するようにしてある請求項１乃至請求項３のいずれか１つに記載の車両周辺監視装置。
【請求項５】
前記車両の周囲の環境が雨天であるか否かを検知する検知手段を備え、
前記表示処理手段は、前記車両の周囲の環境が雨天である場合に、前記検出手段の検出結果に応じた前記表示手段による画像の表示を行わせないようにしてある請求項１乃至請求項４のいずれか１つに記載の車両周辺監視装置。
【請求項６】
前記車両の周囲の環境が夜間であるか否かを検知する検知手段を備え、
前記表示処理手段は、前記車両の周囲の環境が夜間である場合に、前記検出手段の検出結果に応じた前記表示手段による画像の表示を行わせないようにしてある請求項１乃至請求項５のいずれか１つに記載の車両周辺監視装置。
【請求項７】
前記表示処理手段が前記検出手段の検出結果に応じた前記表示手段による画像の表示を行わせないことを報知する報知手段を備える請求項５又は請求項６に記載の車両周辺監視装置。
【請求項８】
前記撮像手段が撮像して画像を取得したときの撮像条件を取得する取得手段と、
前記検出手段が変化を検出する複数の画像について、前記取得手段が取得したそれぞれの撮像条件が同じであるか否かを判定する判定手段と、
前記複数の画像の撮像条件が同じでない場合に、撮像条件の差異に応じて画像の補正を行う補正手段と
を備える請求項１乃至請求項７のいずれか１つに記載の車両周辺監視装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、車両に搭載したカメラで車両の周辺を撮像し、車内に設けられたディスプレイに撮像した画像を表示することができる車両周辺監視装置に関する。
【背景技術】
【０００２】
従来、車両の前側、後側又は左右側にカメラを搭載して車両の外界を撮像し、撮像により取得した画像を車内に設けられたディスプレイに表示することによって、運転者へ種々の情報を提供する車両周辺監視装置が実用化されている。例えば、車両の運転席から死角となる部分を撮像するカメラを搭載することによって、運転者が直接に目視できない部分をディスプレイに表示することができるため、事故を未然に防ぐことが可能となる。
【０００３】
特許文献１においては、車両の後方を撮像するカメラを搭載し、カメラにより撮像して取得した画像を基に、車両を後退させる前に後退進路上の障害物を発見して運転者に報知することによって、車両後退時の後方安全確認を支援する後退支援装置が提案されている。この後退支援装置では、車速センサにより停車を認識しているときにシフトレバーが「Ｐ」又は「Ｎ」に入れられたことを検知すると、カメラにより車両後方の基準画像を撮像する。その後、運転席のドアの開閉を検知する毎に基準画像を更新する。シフトレバーが「Ｒ」に入れられた場合、カメラにより比較画像を逐次撮像し、基準画像と比較画像とを比較する画像処理を行って車両後方の障害物を検出する。障害物を検出した場合には、モニタの画像中に障害物を囲む矩形を表示すると共に、スピーカから音声警告を発するようにしてある。
【０００４】
車内に設けられたディスプレイは、上述のように車両の周辺を撮像して取得した画像を表示するだけでなく、例えばカーナビゲーション装置が現在位置を通知するための地図を表示する場合に用いられ、また、車両に搭載されたチューナにより受信したテレビ番組を表示する場合に用いられるなど、多種の目的に利用されることが多い。よって、ディスプレイに表示する画像を切り替える必要があるが、従来の場合には、運転者がスイッチ又はボタン等を操作して直接的に画像を切り替えるか、又は車速及びシフトレバーの状態等の車両情報を基に自動的に画像を切り替えるかしていた。
【特許文献１】特開２０００−１７７５１３号公報
【発明の開示】
【発明が解決しようとする課題】
【０００５】
ディスプレイに表示する画像の切り替えを運転者の操作により行う場合、切り替えの操作が運転者にとって煩わしいため、車両の周辺に歩行者又は障害物等が存在するなど画像の表示が必要なときに、必ずしも運転者が操作を行って車両周辺の画像を表示させるとは限らず、車両周辺の歩行者又は障害物等を見落とす虞がある。また、画像の切り替えを車両情報を基に行う場合、例えばシフトレバーが「Ｒ」のときには後方の画像を表示し、シフトレバーが「Ｄ」であり且つ車速が低速のときには前方の画像を表示するなどの場合、車速などの車両情報は検知精度が高くないため誤切替が発生する可能性があると共に、車両周辺に歩行者又は障害物等が存在せず画像の表示が必要ないときであっても画像がディスプレイに表示され、カーナビゲーション装置の地図表示又はテレビ番組の表示等を妨げる虞がある。
【０００６】
この問題を解決するために、車両の周辺をカメラで撮像して取得した画像を基に、車両の周辺に歩行者又は障害物等が存在するか否かを判定する画像処理を行い、この結果に応じてディスプレイに表示する画像の切り替えを行う。このときの画像処理は、例えば、ある時刻ｔ１の画像とその後の時刻ｔ２の画像とを比較し、画像に変化が生じている場合には車両の周辺に歩行者又は障害物等が存在すると判定するなどの処理である。これにより、カーナビゲーション装置の地図表示又はテレビ番組の表示等を妨げることなく、必要なときにのみディスプレイに車両周辺の画像を表示することができる。
【０００７】
しかしながら、車両に搭載されるカメラは魚眼レンズ又は広角レンズ等のレンズを用いて撮像を行う場合が多く、車両の周辺を広範囲に亘って撮像できるようにしてあるが、特に撮像して取得した画像の端部分では像が歪んだ低解像度の画像となるため、上述のような画像処理を行って表示する画像の切り替えを行う場合に、精度のよい画像処理を行うことができない可能性がある。また、異なる時刻で取得した２つの画像を比較する場合に、例えば周囲の明るさが大きく変化するなど、周囲の環境の変化によって、２つの画像が全体的に異なる画像となる可能性があり、画像処理を正確に行うことができない虞がある。
【０００８】
本発明は、斯かる事情に鑑みてなされたものであって、その目的とするところは、車両に搭載したカメラなどの撮像手段が異なる時点で撮像した複数の画像を基に画像の変化を検出し、検出結果に応じてディスプレイなどの表示手段に撮像した画像を表示させる場合に、検出を行う画像の範囲を車両の前進方向又は後退方向について車両から所定の範囲までに制限する構成とすることにより、魚眼レンズ又は広角レンズ等のレンズを用いて撮像を行う場合であっても、検出を高精度に行うことができる車両周辺監視装置を提供することにある。
【０００９】
また本発明の他の目的とするところは、車両の前方及び後方を撮像することを可能とし、複数の画像を基に変化の検出を行う場合に、検出を行う画像の範囲を車両の前進方向及び後退方向の両方向について車両から所定の距離範囲までに制限する構成とすることにより、車両の駐車又は車庫入れ等を行うために車両の前進及び後退を繰り返し行うときに、車両の前後に存在する歩行者又は障害物等を画像の変化から高精度に検出することができる車両周辺監視装置を提供することにある。
【００１０】
また本発明の他の目的とするところは、車両のハンドルの舵角を検知し、ハンドルの舵角に応じて制限する画像の範囲を調整する構成とすることにより、車両が進行する可能性が高い範囲に存在する歩行者又は障害物等を画像の変化から高精度に検出することができる車両周辺監視装置を提供することにある。
【００１１】
また本発明の他の目的とするところは、各画素の輝度が所定輝度内に収まる範囲に、制限する画像の範囲を調整する構成とすることにより、輝度が高すぎて又は低すぎて検出を精度よく行うことができない部分を検出の範囲外とすることができる車両周辺監視装置を提供することにある。
【００１２】
また本発明の他の目的とするところは、車両の周囲の環境が雨天であるか否かを検知し、雨天の場合には、撮像手段により撮像された画像を基に変化を検出して表示手段に画像を表示させる処理を停止する構成とすることにより、変化の検出を行うことが難しい雨天時に、誤検出による画像の誤表示を行うことを防止できる車両周辺監視装置を提供することにある。
【００１３】
また本発明の他の目的とするところは、車両の周囲の環境が夜間であるか否かを検知し、夜間の場合には、撮像手段により撮像された画像を基に変化を検出して表示手段に画像を表示させる処理を停止する構成とすることにより、変化の検出を行うことが難しい夜間に、誤検出による画像の誤表示を行うことを防止できる車両周辺監視装置を提供することにある。
【００１４】
また本発明の他の目的とするところは、撮像手段により撮像された画像を基に変化を検出して表示手段に画像を表示させる処理を停止している旨を運転者に報知する構成とすることにより、処理を停止していることを運転者に確実に認識させることができる車両周辺監視装置を提供することにある。
【００１５】
また本発明の他の目的とするところは、撮像手段が撮像を行って画像を取得したときの撮像条件を取得し、変化を検出する複数の画像の撮像条件が同じであるか否かを判定し、同じでない場合には撮像条件の差異に応じて画像の補正を行う構成とすることにより、周囲の環境の変化によって撮像手段の撮像条件が変更された場合であっても、検出を高精度に行うことができる車両周辺監視装置を提供することにある。
【課題を解決するための手段】
【００１６】
第１発明に係る車両周辺監視装置は、車両に搭載され、該車両の外界を撮像して画像を取得する撮像手段と、該撮像手段が撮像して取得した画像を表示する表示手段とを備える車両周辺監視装置において、前記撮像手段が異なる時点で撮像して取得した複数の画像を基に、画像の変化を検出する検出手段と、該検出手段が検出を行う画像の範囲を制限する制限手段と、前記検出手段の検出結果に応じて、前記撮像手段が撮像した画像を前記表示手段に表示させる処理を行う表示処理手段とを備え、前記制限手段は、前記車両の前進方向又は後退方向について前記車両から所定の範囲内に、検出を行う画像の範囲を制限するようにしてあることを特徴とする。
【００１７】
本発明においては、撮像手段により車両の周辺の外界を撮像し、異なる時点で撮像して取得した複数の画像に生じた変化を検出し、検出結果に応じて表示手段による画像の表示を行う。変化の検出は、取得した画像の全体を対象として行うのではなく、車両の前進方向又は後退方向について車両から所定の範囲までに制限した範囲で行う。これにより、撮像手段が魚眼レンズ又は広角レンズ等のレンズを用いて撮像を行い、画像の端部分が低解像度となる場合であっても、この低解像度となる部分を検出の範囲外とすることができ、検出の精度低下を防止できる。なお、画像の端部分の低解像度となる部分は、車両から遠方の領域であるため、歩行者又は障害物等が存在する場合であっても、車両の走行に対する危険度は低いため、検出の範囲外として問題ない。
【００１８】
また、第２発明に係る車両周辺監視装置は、前記撮像手段が、前記車両の前方及び後方を撮像することが可能にしてあり、前記制限手段は、前記車両の前進方向及び後退方向の両方向について前記車両から所定の距離範囲内に、検出を行う画像の範囲を制限するようにしてあることを特徴とする。
【００１９】
本発明においては、例えば車両の前部及び後部にカメラを搭載するなどして、車両の前方及び後方の撮像を可能とする。変化の検出は、車両の前進方向及び後退方向の両方向について車両から所定の距離範囲までに制限した範囲で行う。例えば、車両の駐車又は車庫入れ等を行う場合には、車両の前進及び後退を短い時間で繰り返して行うことが多いが、運転者は車両の前後両方を繰り返して目視する必要があり、また、車両の操作が繁雑であるため、車両周辺の歩行者又は障害物等を見落とす虞がある。よって、車両の前進方向及び後退方向の両方向を検出の範囲とすることで、駐車又は車庫入れ等の運転を補助することができる。
【００２０】
また、第３発明に係る車両周辺監視装置は、前記車両のハンドルの舵角を検知する検知手段を備え、前記制限手段は、前記検知手段の検知結果に応じて、制限する画像の範囲を調整するようにしてあることを特徴とする。
【００２１】
本発明においては、車両のハンドルの舵角を検知し、ハンドルの舵角に応じて制限する画像の範囲を調整する。運転者がハンドルを操作することにより、車両の前進方向又は後退方向が変化するため、これに応じて検出を行う範囲を調整することによって、車両が前進又は後退した場合の経路上に存在する歩行者又は障害物等を検出することができる。
【００２２】
また、第４発明に係る車両周辺監視装置は、前記撮像手段が撮像して取得する画像は複数の画素からなり、前記制限手段は、各画素の輝度が所定輝度内に収まる範囲に、制限する画像の範囲を調整するようにしてあることを特徴とする。
【００２３】
本発明においては、検出を行う画像の範囲を制限するときに、各画素の輝度が所定輝度内に収まる範囲に制限する画像の範囲を調整する。画像中の輝度が極端に高い部分、所謂白飛びの部分及び輝度が極端に低い部分、所謂黒つぶれの部分等では、画像中に生じた変化を精度よく検出することができないため、この部分を検出の範囲外とすることにより、検出精度の低下及び誤検出等を防止できる。
【００２４】
また、第５発明に係る車両周辺監視装置は、前記車両の周囲の環境が雨天であるか否かを検知する検知手段を備え、前記表示処理手段は、前記車両の周囲の環境が雨天である場合に、前記検出手段の検出結果に応じた前記表示手段による画像の表示を行わせないようにしてあることを特徴とする。
【００２５】
本発明においては、車両の周囲の環境が雨天であるか否かを、例えばワイパーが動作しているか否か、又は雨滴を検知するセンサ等により検知する。雨天の場合には、撮像手段が撮像した複数の画像から変化を検出することが難しいため、変化の検出及び検出結果に応じた画像の表示等の処理を停止する。これにより、誤検出により画像が表示手段に誤表示されることを防止できる。
【００２６】
また、第６発明に係る車両周辺監視装置は、前記車両の周囲の環境が夜間であるか否かを検知する検知手段を備え、前記表示処理手段は、前記車両の周囲の環境が夜間である場合に、前記検出手段の検出結果に応じた前記表示手段による画像の表示を行わせないようにしてあることを特徴とする。
【００２７】
本発明においては、車両の周囲の環境が夜間であるか否かを、例えば車両のヘッドランプ又はテールランプ等のランプが点灯しているか否か、又は明るさを検知する照度センサ等により検知する。夜間の場合には、撮像手段が撮像した複数の画像から変化を検出することが難しいため、変化の検出及び検出結果に応じた画像の表示等の処理を停止する。これにより、誤検出により画像が表示手段に誤表示されることを防止できる。
【００２８】
また、第７発明に係る車両周辺監視装置は、前記表示処理手段が前記検出手段の検出結果に応じた前記表示手段による画像の表示を行わせないことを報知する報知手段を備えることを特徴とする。
【００２９】
本発明においては、車両のワイパー又はランプ等の動作状況に応じて変化の検出及び検出結果に応じた画像の表示等の処理を停止した場合には、処理を停止している旨を運転者に報知する。これらの処理を停止しているときに、表示手段に画像を表示させないことで運転者が車両の周辺に歩行者又は障害物等が存在しないと誤認識する虞があるため、処理を停止していることを運転者に確実に認識させて誤認識を防止する。
【００３０】
また、第８発明に係る車両周辺監視装置は、前記撮像手段が撮像して画像を取得したときの撮像条件を取得する取得手段と、前記検出手段が変化を検出する複数の画像について、前記取得手段が取得したそれぞれの撮像条件が同じであるか否かを判定する判定手段と、前記複数の画像の撮像条件が同じでない場合に、撮像条件の差異に応じて画像の補正を行う補正手段とを備えることを特徴とする。
【００３１】
本発明においては、撮像手段が撮像を行って画像を取得したときの露光時間、ゲイン又はホワイトバランス等の撮像条件を取得する。これらの撮像条件は、カメラなどの撮像手段に搭載された撮像素子又はＤＳＰ等により、明るさなどの周囲の環境の変化に応じて自動的に調整される場合が多い。例えば、太陽が雲に隠れるなどして周囲の明るさが低下した場合、ゲインを高めるなどの調整が行われる。よって、時刻ｔ１の画像と時刻ｔ２の画像との輝度を比較して変化を検出するときに、時刻ｔ１から時刻ｔ２の間に周囲の環境が変化し、撮像条件が変化した場合には、画像全体に変化が検出される虞がある。よって、変化の検出を行う前に、撮像条件の差異に応じて画像を補正することで、検出の精度を高めることができる。
【発明の効果】
【００３２】
第１発明による場合は、車両に搭載した撮像手段が異なる時点で撮像した複数の画像を基に画像の変化を検出し、検出結果に応じてディスプレイなどの表示手段に撮像した画像を表示させる場合に、検出を行う画像の範囲を車両の前進方向又は後退方向について車両から所定の範囲までに制限する構成とすることにより、撮像手段が魚眼レンズ又は広角レンズ等のレンズを用いて撮像を行い、画像の端部分が低解像度となる場合であっても、この低解像度となる部分を検出の範囲外とすることができ、検出を高精度に行うことができる。よって、車両の周辺の画像を表示する必要がある場合にのみ表示手段に表示を行なわせることができ、カーナビゲーション装置の地図表示又はテレビ番組の表示等を妨げることがないため、車両周辺監視装置の利便性を向上することができる。
【００３３】
また、第２発明による場合は、車両の前方及び後方を撮像することを可能とし、複数の画像を基に変化の検出を行う場合に、検出を行う画像の範囲を車両の前進方向及び後退方向の両方向について車両から所定の距離範囲までに制限する構成とすることにより、例えば車両の駐車又は車庫入れ等を行うために車両の前進及び後退を短い時間で繰り返して行うときに、車両の前後に存在する歩行者又は障害物等を画像の変化から高精度に検出することができるため、車両の走行により接触するなどの危険性が高い歩行者又は障害物等を確実に表示手段に表示させることができ、車両の走行の安全性を高めることができる。
【００３４】
また、第３発明による場合は、車両のハンドルの舵角を検知し、ハンドルの舵角に応じて制限する画像の範囲を調整する構成とすることにより、車両が前進又は後退した場合の経路上に存在する歩行者又は障害物等を画像の変化を基に検出することができるため、車両の走行により接触するなどの危険性が高い歩行者又は障害物等を確実に表示手段に表示させることができ、車両の走行の安全性を高めることができる。
【００３５】
また、第４発明による場合は、検出を行う画像の範囲を制限するときに、各画素の輝度が所定輝度内に収まる範囲に、制限する画像の範囲を調整する構成とすることにより、画像中の輝度が極端に高い部分及び輝度が極端に低い部分等の変化を精度よく検出することができない部分を検出の範囲外とすることができるため、検出の精度を高めることができ、誤検出の発生を防止できる。よって、車両周辺監視装置の利便性をより向上することができる。
【００３６】
また、第５発明による場合は、車両の周囲の環境が雨天であるか否かを検知し、雨天の場合には、撮像手段により撮像された画像を基に変化を検出して表示手段に画像を表示させる処理を停止する構成とすることにより、変化の検出を行うことが難しい雨天時に、誤検出により画像の誤表示を行うことを防止することができるため、車両周辺監視装置の利便性をより向上することができる。
【００３７】
また、第６発明による場合は、車両の周囲の環境が夜間であるか否かを検知し、夜間の場合には、撮像手段により撮像された画像を基に変化を検出して表示手段に画像を表示させる処理を停止する構成とすることにより、変化の検出を行うことが難しい夜間に、誤検出により画像の誤表示を行うことを防止することができるため、車両周辺監視装置の利便性をより向上することができる。
【００３８】
また、第７発明による場合は、車両のワイパー又はランプ等の動作状況に応じて変化の検出及び検出結果に応じた画像の表示等の処理を停止した場合には、処理を停止している旨を運転者に報知する構成とすることにより、処理を停止していることを運転者に確実に認識させることができ、運転者が誤認識することを防止できるため、車両の走行の安全性をより高めることができる。
【００３９】
また、第８発明による場合は、撮像手段が撮像を行って画像を取得したときの撮像条件を取得し、変化を検出する複数の画像の撮像条件が同じであるか否かを判定し、同じでない場合には撮像条件の差異に応じて画像の補正を行う構成とすることにより、周囲の環境の変化によって撮像手段の撮像条件が変更された場合であっても、検出を高精度に行うことができるため、車両の周辺の画像を表示する必要がある場合にのみ表示手段に表示を行なわせることができ、カーナビゲーション装置の地図表示又はテレビ番組の表示等を妨げることないため、車両周辺監視装置の利便性を向上することができる。
【発明を実施するための最良の形態】
【００４０】
以下、本発明をその実施の形態を示す図面に基づき具体的に説明する。図１は、本発明に係る車両周辺監視装置の構成を示す模式図である。図において１は車両であり、車両１の前部には車両１の前方を撮像するカメラ５０が搭載されており、車両１の後部には車両１の後方を撮像するカメラ５０が搭載されている。車両１の運転席近傍、例えばダッシュボードなどには液晶ディスプレイ２０が配設してある。カメラ５０、５０が撮像して取得した画像は車両１内部に搭載されたＥＣＵ（Ｅｌｅｃｔｒｏｎｉｃ  Ｃｏｎｔｒｏｌ  Ｕｎｉｔ）１０に与えられ、ＥＣＵ１０にて液晶ディスプレイ２０に適したデータ形式に変換された後に液晶ディスプレイ２０に与えられて、液晶ディスプレイ２０にて表示されるようにしてある。
【００４１】
また、車両１に図示しないカーナビゲーション装置又はテレビ番組を受信するチューナ等が搭載されている場合には、車両１の現在位置を示す地図画像又はテレビ番組等を液晶ディスプレイ２０に表示することができるようにしてある。このとき、本発明に係る車両周辺監視装置では、車両１の前部に搭載されたカメラ５０による車両前方の画像と、車両１の後部に搭載されたカメラ５０による車両後方の画像と、カーナビゲーション装置の地図画像又はチューナが受信したテレビ番組等とのいずれを表示するかをＥＣＵ１０が選択し、自動的に画像を切り替えて液晶ディスプレイ２０に表示するようにしてある。
【００４２】
図２は、本発明に係る車両周辺監視装置の構成を示すブロック図である。上述のように、車両１に搭載される車両周辺監視装置は、車両１の前方及び後方を撮像する２つのカメラ５０、５０を有する撮像部２と、カメラ５０、５０により撮像された画像、カーナビゲーション装置の地図画像又はチューナが受信したテレビ番組等の表示を行う液晶ディスプレイ２０と、液晶ディスプレイ２０に表示する画像を自動的に切り替える処理を主として行うＥＣＵ１０とを備えている。撮像部２のカメラ５０、５０及びＥＣＵ１０と、ＥＣＵ１０及び液晶ディスプレイ２０とは、それぞれ接続ケーブル又はネットワークケーブル等により接続してある。
【００４３】
詳細は後述するが、撮像部２のカメラ５０、５０は、ＣＣＤ又はＣＭＯＳ等の撮像素子と、この撮像素子へ光を集光する一又は複数のレンズとをそれぞれ有しており、レンズが集光した光を撮像素子が検知することによって、１秒間に３０回程度の頻度で撮像を行う装置である。カメラ５０、５０のレンズには、広角レンズ又は魚眼レンズ等の画角が広いレンズが用いられる。カメラ５０、５０は車両１の前方及び後方をそれぞれ撮像して画像を取得し、取得した画像をＥＣＵ１０へそれぞれ与えるようにしてある。
【００４４】
ＥＣＵ１０は、撮像部２のカメラ５０、５０からの画像が与えられ、与えられた画像に対して種々の画像処理を行う画像処理部１１を備えている。また、画像処理部１１には、カメラ５０、５０から与えられた画像及び画像処理後の画像等の種々の画像を一時的に蓄積するための画像メモリ１２と、カメラ５０、５０から与えられた画像の補正又は視点変換等を行うためのテーブルが記憶されたテーブル用メモリ１３とが接続してある。画像メモリ１２は、ＳＲＡＭ又はＤＲＡＭ等の書き換え可能なメモリ素子により構成してあり、テーブル用メモリ１３は、マスクＲＯＭ又はＥＥＰＲＯＭ等の不揮発性のメモリ素子により構成してある。また、画像処理部１１には液晶ディスプレイ２０が接続してあり、カメラ５０、５０から与えられた画像に画像処理を施して、液晶ディスプレイ２０へ表示することができるようにしてある。
【００４５】
カメラ５０、５０は広角レンズ又は魚眼レンズ等のレンズにより撮像を行うため、得られる画像は中央から端部へ向けて徐々に湾曲度合いが大きくなる。よって、画像処理部１１では、カメラ５０、５０から与えられた画像の湾曲部分を補正し、補正後の画像を液晶ディスプレイ２０へ表示することができるようにしてある。湾曲部分の補正は、テーブル用メモリ１３に予め記憶してある補正テーブルを用いて行うようにしてある。画像処理部１１は、カメラ５０、５０から与えられた画像の各画素を補正テーブルにて定められた位置に移動させることによって、画像の湾曲部分を補正するようにしてあり、補正テーブルには各画素の移動先が記憶してある。
【００４６】
また、画像処理部１１は、カメラ５０、５０が撮像して取得した画像を俯瞰方向の画像に変換するＴｏｐｖｉｅｗ変換を行って、車両１が走行する路面を上から見た画像を液晶ディスプレイ２０に表示することができるようにしてある。Ｔｏｐｖｉｅｗ変換は、テーブル用メモリ１３に予め記憶してある変換テーブルを用いて行うようにしてある。画像処理部１１は、カメラ５０、５０から与えられた画像の各画素を変換テーブルにて定められた位置に移動させることによって、正面から撮像した画像を俯瞰方向の画像に変換するようにしてあり、変換テーブルには各画素の移動先が記憶してある。
【００４７】
また、ＥＣＵ１０には、車両１の走行に係る情報を取得する車両情報取得部３０から、車両１の走行に係る情報が与えられている。車両情報取得部３０では、車両１のハンドルの舵角を検知する舵角センサ３１から舵角情報を取得し、車両１のワイパー３２が動作しているか否かに係る情報を取得し、車両１のヘッドランプ又はテールランプ等のランプ３３が点灯しているか否かに係る情報を取得するようにしてある。更に、図示は省略するが、車速センサから車両１の車速情報を取得し、加速度センサから車両１の加速度情報を取得し、シフトレバーの状態情報を取得し、サイドレバーの状態情報を取得するなど、種々の情報を取得するようにしてある。
【００４８】
ＥＣＵ１０は、車両情報取得部３０から与えられた情報を基に、車両１に搭載された電子機器及び画像処理部１１等の制御を行うＣＰＵ１５を備えており、ＣＰＵ１５にはＲＯＭ１４及びＲＡＭ１６が接続してある。ＲＯＭ１４は、ＣＰＵ１５にて実行される種々の制御プログラムを予め記憶しており、マスクＲＯＭ、ＥＥＰＲＯＭ又はフラッシュメモリ等の不揮発性のメモリ素子により構成してある。ＲＡＭ１６は、ＣＰＵ１５が制御処理又は演算処理等を行う際に生じる一時的なデータを記憶するものであり、ＳＲＡＭ、ＤＲＡＭ又はフラッシュメモリ等の書き換え可能なメモリ素子により構成してある。ＣＰＵ１５は、ＲＯＭ１４から制御プログラムを読み出して実行することにより、例えばＡＢＳ（Ａｎｔｉｒｏｃｋ  Ｂｒａｋｅ  Ｓｙｓｔｅｍ）又はＴＣＳ（Ｔｒａｃｔｉｏｎ  Ｃｏｎｔｒｏｌ  Ｓｙｓｔｅｍ）等の車両１の電気的な制御を行うようにしてある。また、車両１の運転席近傍には、警告音及び音声メッセージ等の音声出力を行うスピーカ２５を備えており、ＣＰＵ１５からの出力指示に応じて音声出力を行うことができるようにしてある。
【００４９】
図３は、本発明に係る車両周辺監視装置のカメラ５０の構成を示すブロック図であり、車両１に搭載された２つのカメラ５０、５０のうちの一方のカメラ５０について図示してあるが、他方のカメラ５０についても同様の構成である。また、図３においては、カメラ５０が撮像して取得した画像に係るデータの流れを実線の矢印で示し、制御信号又はその他のデータの流れを破線の矢印で示してある。
【００５０】
カメラ５０は、図示しない一又は複数のレンズにより集光される光に応じてアナログの電気信号を出力するＣＣＤ又はＣＭＯＳ等の撮像素子５１を有している。撮像素子５１が出力するアナログの電気信号は利得制御部５２へ与えられ、利得制御部５２は、後述のＤＳＰ５４が有する測光計算部５６から与えられる情報に基づいて、撮像素子５１から与えられた電気信号を増幅して出力するようにしてある。利得制御部５２により増幅された電気信号は、Ａ／Ｄ変換部５３へ与えられるようにしてあり、Ａ／Ｄ変換部５３は与えられたアナログの電気信号をデジタルの電気信号に変換して出力するようにしてある。
【００５１】
Ａ／Ｄ変換部５３が出力したデジタルの電気信号は、ＤＳＰ５４へ与えられるようにしてある。ＤＳＰ５４はデジタル信号処理部５５及び測光計算部５６等を有している。デジタル信号処理部５５は、与えられたデジタルの電気信号に対して画素補間、ホワイトバランス調整、彩度調整及びノイズ除去等の種々の信号処理を行うものである。測光計算部５６は、デジタル信号処理部５５により信号処理された電気信号を基に、撮像素子５１により撮像された画像の所定領域、例えば画像の中心領域などの輝度と、画像全体の輝度とを計算し、撮像素子５１により撮像される画像が予め定められた輝度となるように利得制御部５２及び露光制御部５７へ制御情報を与えるようにしてある。露光制御部５７は、測光計算部５６から与えられる情報に基づいて、撮像素子５１の露光時間を制御するようにしてある。なお、ＤＳＰ５４は、デジタル信号処理部５５が行ったホワイトバランス調整又は彩度調整等の処理条件、並びに測光計算部５６が利得制御部５２及び露光制御部５７へ与えた制御情報に係る制御条件等の種々の条件を撮像条件としてＥＣＵ１０の画像処理部１１へ与えるようにしてある。
【００５２】
エンコーダ５８は、ＤＳＰ５４のデジタル信号処理部５５から与えられたデジタルの電気信号を、ＮＴＳＣ（Ｎａｔｉｏｎａｌ  Ｔｅｌｅｖｉｓｉｏｎ  Ｓｔａｎｄａｒｄｓ  Ｃｏｍｍｉｔｔｅｅ）方式の信号に符号化して出力するものである。なお、ＮＴＳＣ方式とは、テレビジョン装置に出力するための映像信号に係る方式である。エンコーダ５８により符号化されたデジタルの電気信号はＥＣＵ１０の画像処理部１１へ与えられるようにしてある。ＥＣＵ１０の画像処理部１１は、カメラ５０が撮像した画像及びカメラ５０が撮像を行ったときの撮像条件をカメラ５０から与えられ、これらを対応付けて画像メモリ１２に蓄積すると共に、与えられた画像に種々の画像処理を行って液晶ディスプレイ２０に表示するようにしてある。
【００５３】
また、本発明に係る車両周辺監視装置の画像処理部１１は、車両１の前部及び後部に搭載された２つのカメラ５０、５０がそれぞれ撮像して取得した２つの画像のうち、いずれの画像を液晶ディスプレイ２０に表示するかを選択し、自動的に液晶ディスプレイ２０に表示する画像を切り替える処理を行うようにしてある。更に、画像処理部１１は、カーナビゲーション装置又はテレビ番組を受信するチューナ等の装置（図示せず）が車両１に搭載されている場合には、これらの装置が出力する画像又はカメラ５０、５０が撮像した画像のうちのいずれかの画像を選択して液晶ディスプレイ２０に表示するようにしてある。
【００５４】
このような場合、常時において画像処理部１１は、カーナビゲーション装置の案内用の地図画像又はチューナが受信したテレビ番組のいずれかを運転者の選択に従って液晶ディスプレイ２０に表示するようにしてある。ただし、バックグラウンド処理により、カメラ５０、５０が撮像する車両１の周囲の画像に歩行者又は他車両等が写されたか否かを判定し、画像に歩行者又は他車両等が写されたと判定した場合には、カーナビゲーション装置の案内用の地図画像又はチューナが受信したテレビ番組等の表示を停止し、歩行者又は他車両等が写された画像を選択して液晶ディスプレイ２０に表示するようにしてある。
【００５５】
なお、カメラ５０、５０が撮像する画像に歩行者又は他車両等が写されたか否かの判定は、車両１が走行していない場合にカメラ５０、５０が時刻ｔ１に撮像した画像と、所定時間Ｔ後の時刻ｔ２（＝ｔ１＋Ｔ）に撮像した画像とを画像メモリ１２から読み出し、例えば２つの画像の輝度値の差分を算出して、２つの画像の変化を検出することによって行うことができる。即ち、車両１が走行しておらず、異なる時刻に撮像された２つの画像に変化が検出された場合には、この変化が生じた部分に歩行者又は他車両等が写されたと判定することができる。この処理を画像処理部１１では１秒間に数回〜十数回程度繰り返して行い、画像に変化が生じた場合には歩行者又は他車両等が画像に写された、即ち車両１の周囲に歩行者又は他車両等が存在すると判定して、この画像を液晶ディスプレイ２０に表示し、運転者へ注意を促すようにしてある。
【００５６】
また、本発明に係る車両周辺監視装置の画像処理部１１は、時刻ｔ１に撮像した画像及び時刻ｔ２に撮像した画像を比較して変化の検出を行う場合に、画像の全領域について比較を行うのではなく、制限された検出範囲内でのみ比較を行って変化を検出するようにしてある。図４は、検出範囲の制限例を示す模式図であり、（ａ）は車両１の前部に搭載されたカメラ５０が撮像した画像の一例であり、（ｂ）はこの画像に検出範囲を重ねて図示したものである。
【００５７】
カメラ５０は、魚眼レンズ又は広角レンズ等のレンズで撮像を行うカメラであり、１８０°又はそれ以上の画角を有しているため、撮像により取得する画像は端部分が湾曲した画像となる。例えば、図４に示す画像は車両１が交差点に進入したときの画像であり、本来は直線の道路が湾曲して写されているが、カメラ５０の画角が広いため左右方向の道路の遠方まで撮像されている。このような画角の広いカメラ５０を車両１に搭載することで、運転者は車内から広範囲に亘って車両１周辺の様子を視認することが可能となる。
【００５８】
しかし、上述のように異なる時刻に撮像した２つの画像を比較して変化を検出し、歩行者又は他車両等の検出を行う場合には、接触又は衝突等の虞がある車両１近傍の歩行者又は他車両等のみを検出すればよく、車両１から十分に離れた位置に存在する歩行者又は他車両等を検出する必要性は少ない。よって、本発明に係る車両周辺監視装置では、図４（ｂ）に示す検出範囲１０１内でのみ、画像の比較を行って変化を検出するようにしてある。例えば、検出範囲１０１は、略矩形をなす画像の下辺の略中央の８０％を占める下底と、画像中の水平線の位置より下側に設けられ、下底より若干短い上底とを有する略台形の範囲とすることができる。
【００５９】
図５乃至図７は、車両１の周辺と検出範囲１０１との対応を示す模式図であり、（ａ）に車両１及びその周辺を図示し、（ｂ）に車両１の前部のカメラ５０が撮像した画像中の検出範囲１０１を図示し、（ｃ）に車両１の後部のカメラ５０が撮像した画像中の検出範囲１０１を図示してある。カメラ５０、５０により撮像された画像中の検出範囲１０１は画像の下側から略中央までを占める略台形の範囲であるが（図５（ｂ）及び（ｃ）参照）、これは車両１の前進方向及び後退方向に対して車両１から数ｍ程度の略矩形の範囲（図５（ｃ）参照）、即ち車両１が走行する可能性がある経路上の数ｍ程度の範囲に相当する。
【００６０】
このように、検出範囲１０１を車両１の走行経路上の所定の距離範囲に制限することによって、車両１の走行により接触又は衝突等が発生する虞のある歩行者又は他車両等のみを検出することができる。また、カメラ５０、５０は上述のように画角の広いカメラであり、車両１の周辺を広範囲に亘って撮像することができるが、車両１から遠方の部分は画像中では小さく写されるため、変化の検出を行う場合に精度が低く、誤検出が発生する虞がある。よって、検出範囲１０１を車両１の近い部分に制限することで検出の精度の低下を防止できる。また、画像の全範囲について検出を行う場合と比較して計算量を低減できるため、処理を高速に行うことができる。
【００６１】
更に、本発明に係る車両周辺監視装置は、車両１のハンドルの舵角を車両情報取得部３０の舵角センサ３１から取得し、舵角に応じて検出範囲１０１を調整するようにしてある。例えば、ハンドルを右に回転させた場合、検出範囲１０１は、下底は変化せず、上底が画像の右辺に寄った略台形となる。これは、車両１の前部に搭載されたカメラ５０が撮像した画像（図６（ｂ）参照）の場合も、後部に搭載されたカメラ５０が撮像した画像（図６（ｃ）参照）の場合も同様である。この検出範囲１０１は、車両１の周辺では、ハンドルの舵角に応じた角度だけ右側に傾いた略平行四辺形の範囲に相当する（図６（ａ）参照）。このように、ハンドルの舵角に応じて検出範囲１０１を調整することによって、車両１の走行経路上の歩行者又は他車両等をより精度よく検出できる。
【００６２】
更に、本発明に係る車両周辺監視装置は、カメラ５０、５０が撮像して取得した画像の各画素の輝度値に応じて、検出範囲１０１を調整するようにしてある。例えば車両１の周辺に光量の多い発光体が存在する場合に、カメラ５０、５０が撮像した画像中の発光体及びこの近傍が写された部分が全て略白色に写される所謂白飛びが発生する虞がある。また、光が照射されにくく他より暗い部分が車両１の周辺に存在する場合、この部分が全て略黒色に写される所謂黒つぶれが発生する虞がある。車両１の周辺に光量が多く他より明るい部分及び光量が少なく他より暗い部分が存在し（図７（ａ）参照）、画像中に白飛び又は黒つぶれが発生した場合、この部分では上述のような検出を精度よく行うことができないため、この部分を検出範囲１０１から除外する。
【００６３】
よって、カメラ５０、５０により撮像された画像の各画素の輝度をＬｉとした場合、ＥＣＵ１０の画像処理部１１は、上述の検出を行う前に検出範囲１０１中の各画素の輝度Ｌｉが予め定められた上限値Ａ及び下限値Ｂの間に収まるか否か、即ちＡ＜Ｌｉ＜Ｂが成立するか否かを判定し、これが成立しない範囲を検出範囲１０１から除外するようにしてある（図７（ｂ）及び（ｃ）参照）。
【００６４】
更に、本発明に係る車両周辺監視装置は、車両１のワイパー３２の動作状態及びランプ３３の点灯状態に係る情報を車両情報取得部３０から取得し、取得した情報に応じて、カメラ５０、５０が撮像した画像を基に行う歩行者又は他車両等の検出、及びこの検出結果に基づいて液晶ディスプレイ２０に表示する画像を自動的に切り替える処理を停止するようにしてある。
【００６５】
車両１のワイパー３２が動作している場合、車両１の周辺環境は雨天である可能性が高い。雨天時にカメラ５０、５０が撮像する画像には雨が写されるため、異なる時刻の２つの画像を比較した場合に画像の全範囲にわたって変化が検出され、歩行者又は他車両等による変化を精度よく検出できない虞がある。また、車両１のランプ３３が点灯している場合、車両１の周辺環境は夜間である可能性が高い。夜間にカメラ５０、５０が撮像する画像は上述のような白飛び及び黒つぶれが生じる部分が多く、歩行者又は他車両等による変化を精度よく検出できない虞がある。
【００６６】
よって、ワイパー３２が動作している場合及びランプ３３が点灯している場合には、検出した画像の変化に応じてカメラ５０、５０が撮像した画像を液晶ディスプレイ２０に自動的に切り替えて表示する処理を停止することにより、誤検出が発生する虞がある状況で画像の誤表示を行うことを防止する。また、処理を停止していることを運転者に認識させるため、処理を停止している場合には液晶ディスプレイ２０に「画像の自動切換え処理を停止しています」などのメッセージを、カーナビゲーション装置の地図画像又はチューナが受信したテレビ番組等に重ねて表示するようにしてある。
【００６７】
更に、本発明に係る車両周辺監視装置は、異なる時刻に撮像された２つの画像を比較して変化を検出する処理の精度を高めるために、カメラ５０、５０が撮像して取得した画像を撮像条件に応じて補正する処理を行うようにしてある。カメラ５０、５０では、周辺の環境の変化に応じて自動的に利得制御部５２及び露光制御部５７にて利得及び露光時間の制御が行われ、また、デジタル信号処理部５５にてホワイトバランス調整及び彩度調整等が行われる。よって、時刻ｔ１及び時刻ｔ２の２つの時刻で撮像した画像を比較して変化の検出を行うときに、例えば時刻ｔ１と時刻ｔ２との間で車両１の周辺の光量が変化した場合、カメラ５０、５０による撮像条件が自動的に変更され、２つの画像の全体に亘って変化が検出される虞がある。
【００６８】
よって、ＥＣＵ１０の画像処理部１１は、カメラ５０、５０のＤＳＰ５４から与えられた撮像条件を基に、２つの画像の撮像条件の差異を打ち消すようにいずれか一方又は両方の画像を補正するようにしてある。これにより、撮像条件の変化によって画像の全体に亘って変化が検出されることを防止でき、歩行者又は他車両等による画像の変化のみを精度よく検出することができる。
【００６９】
図８は、本発明に係る車両周辺監視装置が行う画像表示処理の手順を示すフローチャートである。液晶ディスプレイ２０に画像の表示を行う場合、まず、車両１のワイパー３２の動作状態を車両情報取得部３０から取得し（ステップＳ１）、取得した情報からワイパー３２が動作しているか否かを調べる（ステップＳ２）。ワイパー３２が動作していない場合（Ｓ２：ＮＯ）、更に、車両１のランプ３３の点灯状態を車両情報取得部３０から取得し（ステップＳ３）、ランプ３３が点灯しているか否かを調べる（ステップＳ４）。
【００７０】
ステップＳ２にてワイパー３２が動作している場合（Ｓ２：ＹＥＳ）、又はステップＳ４にてランプ３３が点灯している場合（Ｓ４：ＹＥＳ）、カメラ５０、５０が撮像した画像を自動的に切り替えて液晶ディスプレイ２０に表示する処理を行わず、切替処理を停止した旨を運転者に報知するメッセージを液晶ディスプレイ２０に表示すると共に（ステップＳ１１）、カーナビゲーション装置又はチューナ等の他の装置から与えられた画像を液晶ディスプレイ２０に表示する（ステップＳ１２）。
【００７１】
ステップＳ４にてランプが点灯していない場合（Ｓ４：ＮＯ）、車両１の前部に搭載されたカメラ５０により撮像された２つの画像を基に、画像中に生じた変化を検出する変化検出処理を行う（ステップＳ５）。この変化検出処理は上述の方法により行われるものであり、処理手順については後述する。変化検出処理により変化が検出されたか否かを調べ（ステップＳ６）、変化が検出された場合には（Ｓ６：ＹＥＳ）、車両１の前部に搭載されたカメラ５０が撮像した画像を液晶ディスプレイ２０に表示する（ステップＳ７）。
【００７２】
車両１の前部のカメラ５０について行った変化検出処理にて変化が検出されなかった場合（Ｓ６：ＮＯ）、更に車両１の後部に搭載されたカメラ５０により撮像された２つの画像を基に、画像中に生じた変化を検出する変化検出処理を行う（ステップＳ８）。変化検出処理により変化が検出されたか否かを調べ（ステップＳ９）、変化が検出された場合には、（Ｓ９：ＹＥＳ）、車両１の後部に搭載されたカメラ５０が撮像した画像を液晶ディスプレイ２０に表示する（ステップＳ１０）。変化検出処理により変化が検出されなかった場合（Ｓ９：ＮＯ）、カーナビゲーション装置又はチューナ等の他の装置から与えられた画像を液晶ディスプレイ２０に表示する（ステップＳ１２）。本発明に係る車両周辺監視装置では以上の画像表示処理を１秒間に数回程度の頻度で繰り返し行っており、車両１の前部に搭載されたカメラ５０が撮像した画像、後部に搭載されたカメラ５０が撮像した画像、又は他の装置から与えられた画像を自動的に切り替えて表示するようにしてある。
【００７３】
図９は、本発明に係る車両周辺監視装置が行う変化検出処理の手順を示すフローチャートであり、図８のステップＳ５及びＳ８にて行われるサブルーチンである。車両周辺監視装置ではカメラ５０、５０が撮像して取得した画像はＥＣＵ１０の画像メモリ１２に蓄積されており、変化検出処理では、まず、画像メモリ１２から最新の画像（時刻ｔ２の画像）を読み出すと共に（ステップＳ３１）、この画像をカメラ５０、５０が撮像したときの撮像条件を読み出す（ステップＳ３２）。更に所定時間Ｔ前の画像（時刻ｔ１の画像）を画像メモリ１２から読み出すと共に（ステップＳ３３）、この画像をカメラ５０、５０が撮像したときの撮像条件を読み出す（ステップＳ３４）。
【００７４】
次いで、２つの画像の撮像条件を比較して、撮像条件が同じであるか否かを調べ（ステップＳ３５）、撮像条件が異なる場合には（Ｓ３５：ＮＯ）、撮像条件の差異を打ち消すように、いずれか一方又は両方の画像の補正を行う（ステップＳ３６）。撮像条件が同じ場合（Ｓ３５：ＹＥＳ）、又は画像の補正を終了した後、車両情報取得部３０の舵角センサ３１から車両１のハンドルの舵角を取得して（ステップＳ３７）、図６に示すように舵角に応じて検出範囲１０１を決定する（ステップＳ３８）。
【００７５】
次いで、２つの画像の各画素の輝度値を調べて、各画素の輝度値が輝度上限Ａより大きい範囲を検出範囲１０１から除外すると共に（ステップＳ３９）、輝度下限Ｂより小さい範囲を検出範囲１０１から除外する（ステップＳ４０）。これにより、検出範囲１０１が確定するため、この検出範囲１０１内で２つの画像の比較を行い（ステップＳ４１）、２つの画像に変化があるか否かを調べる（ステップＳ４２）。変化がある場合には（Ｓ４２：ＹＥＳ）、変化検出判定をこのサブルーチンの呼び出し元へ返し（ステップＳ４３）、変化がない場合には（Ｓ４２：ＮＯ）、変化非検出判定を返して（ステップＳ４４）、変化検出処理を終了する。
【００７６】
以上の構成の車両周辺監視装置においては、異なる時刻に撮像された２つの画像を比較して変化を検出する場合に、図４及び図５に示すように検出を行う範囲を制限することによって、車両１の走行経路上に存在する歩行者又は他車両等のみを精度よく検出して、液晶ディスプレイ２０に表示する画像の切り替えを精度よく行うことができる。また、舵角センサ３１により車両１のハンドルの舵角を取得し、検出範囲１０１を舵角に応じて調整することにより、車両１の走行経路上に存在する歩行者又は他車両等のみをより確実に検出することができる。また、カメラ５０、５０が撮像した画像の各画素の輝度が輝度上限Ａより大きい範囲及び輝度下限Ｂより小さい範囲を検出範囲１０１から除外する調整を行うことにより、画像中に生じた白飛び及び黒つぶれによる検出精度の低下を防止できる。
【００７７】
また、車両１のワイパー３２の動作中及びランプ３３の点灯中にはカメラ５０、５０が撮像した画像を自動的に切り替えて液晶ディスプレイ２０に表示する処理を停止することで、雨天又は夜間に誤検出により画像が切り替えられて表示されることを防止でき、また、処理を停止した場合には液晶ディスプレイ２０にメッセージを表示して報知を行うことで、処理を停止していることを運転者に確実に認識させることができる。また、カメラ５０、５０が撮像を行ったときの撮像条件を画像と共に画像メモリ１２に記憶しておき、２つの画像の比較を行うときに撮像条件の差異を打ち消すように補正を行うことにより、２つの画像を比較して変化を検出する精度を高めることができる。
【００７８】
なお、本実施の形態においては、車両１の前部及び後部にカメラ５０、５０を搭載する構成としたが、これに限るものではなく、車両の側部、上部又は下部等の他の場所にカメラ５０を搭載する構成としてもよい。また、車両１に２つのカメラ５０、５０を搭載する構成としたが、これに限るものではなく、１つ又は３つ以上のカメラを搭載する構成としてもよい。また、図４〜図７にて検出範囲１０１の形状を略台形としたが、これに限るものではなく、その他の形状であってもよい。また、検出範囲１０１を舵角センサ３１が検出するハンドルの舵角に応じて調整する構成としたが、調整を行わない構成としてもよい。また、カメラ５０、５０が撮像して取得した画像の各画素の輝度が輝度上限Ａ及び輝度下限Ｂに収まらない範囲を検出範囲１０１から除外する構成としたが、これを行わない構成としてもよい。
【００７９】
車両１のワイパー３２が動作しているか否かに応じて雨天であるか否かを検知し、これに応じて画像の切替表示の処理を行うか否かを決定する構成としたが、これに限るものではなく、例えば車両１に雨滴を検知する雨滴センサを搭載して雨天であるか否かを検知する構成としてもよく、車両１の周囲の気圧を検知するセンサを搭載して気圧に応じて雨天であるか否かを検知する構成としてもよく、他のセンサにより雨天であるか否かを検知する構成としてもよい。また、車両１のランプ３３が転倒しているか否かに応じて夜間であるか否かを検知し、これに応じて画像の切替表示の処理を行うか否かを決定する構成としたが、これに限るものではなく、例えば車両１に明るさを検知する照度センサを搭載して夜間であるか否かを検知する構成としてもよく、車両１に搭載された時計による現在時刻に応じて夜間であるか否かを検知する構成としてもよく、他のセンサにより夜間であるか否かを検知する構成としてもよい。
【００８０】
また、車両１のワイパー３２の動作中及びランプ３３の点灯中には変化の検出及び画像の切替表示の処理を行わない構成としたが、行う構成としてもよい。また、変化の検出及び画像の切替表示の処理を行わない場合に、液晶ディスプレイ２０にメッセージを表示して報知を行う構成としたが、これに限るものではなく、音声出力又はランプの点灯等の他の方法により報知を行う構成としてもよく、報知を行わない構成としてもよい。また、カメラ５０、５０が撮像を行ったときの撮像条件を取得して画像の補正を行う構成としたが、補正を行わない構成としてもよい。
【００８１】
また、図８に示す画像表示処理では、前部のカメラ５０が撮像した画像に変化が生じた場合に、優先して前部のカメラ５０が撮像した画像を液晶ディスプレイ２０に表示するフローとしてあるが、これに限るものではなく、後部のカメラ５０を優先する構成としてもよく、また、例えば車両１のシフトレバーの状態を取得して、シフトレバーが「Ｄ」のときには前部のカメラ５０を優先し、「Ｒ」のときには後部のカメラ５０を優先する構成としてもよい。
【図面の簡単な説明】
【００８２】
【図１】本発明に係る車両周辺監視装置の構成を示す模式図である。
【図２】本発明に係る車両周辺監視装置の構成を示すブロック図である。
【図３】本発明に係る車両周辺監視装置のカメラの構成を示すブロック図である。
【図４】検出範囲の制限例を示す模式図である。
【図５】車両の周辺と検出範囲との対応を示す模式図である。
【図６】車両の周辺と検出範囲との対応を示す模式図である。
【図７】車両の周辺と検出範囲との対応を示す模式図である。
【図８】本発明に係る車両周辺監視装置が行う画像表示処理の手順を示すフローチャートである。
【図９】本発明に係る車両周辺監視装置が行う変化検出処理の手順を示すフローチャートである。
【符号の説明】
【００８３】
１  車両
２  撮像部（撮像手段）
１０  ＥＣＵ（検出手段、制限手段、表示処理手段、報知手段、判定手段、補正手段）
１１  画像処理部
１２  画像メモリ
１３  テーブル用メモリ
１４  ＲＯＭ
１５  ＣＰＵ
１６  ＲＡＭ
２０  液晶ディスプレイ（表示手段）
２５  スピーカ
３０  車両情報取得部（検知手段）
３１  舵角センサ
３２  ワイパー
３３  ランプ
５０  カメラ（撮像手段）
５１  撮像素子
５２  利得制御部
５３  Ａ／Ｄ変換部
５４  ＤＳＰ（取得手段）
５５  デジタル信号処理部
５６  測光計算部
５７  露光制御部
５８  エンコーダ
１０１  検出範囲
【図１】
2008098858.tif 000003
【図２】
2008098858.tif 000004
【図３】
2008098858.tif 000005
【図４】
2008098858.tif 000006
【図５】
2008098858.tif 000007
【図６】
2008098858.tif 000008
【図７】
2008098858.tif 000009
【図８】
2008098858.tif 000010
【図９】
2008098858.tif 000011