【手続補正書】
【提出日】平成20年9月3日(2008.9.3)
【手続補正１】
【補正対象書類名】特許請求の範囲
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【特許請求の範囲】
【請求項１】
車両の周辺を監視するシステムであって、
車載の撮像装置により取り込まれた映像に基づいて前記車両の周辺にある複数の物体の位置を時系列的に測定し、各物体の時系列的な測定位置に基づいて前記各物体の１次状態を予測する第１処理部と、
前記第１処理部により予測された各物体の前記１次状態の相関関係に基づいて前記複数の物体のうち一部または全部の２次状態を予測し、前記物体の前記２次状態に基づいて前記車両と前記物体との接触する可能性の高低を判定し、当該判定結果（以下、適宜「２次判定結果」という。）に応じて車載機器の動作を制御する第２処理部とを備えていることを特徴とする車両周辺監視システム。
【請求項２】
請求項１記載の車両周辺監視システムにおいて、
前記第１処理部が前記各物体について予測した前記１次状態に基づいて前記車両と前記各物体との接触する可能性の高低を判定し、当該判定結果（以下、適宜「１次判定結果」という。）に応じて前記車載機器の動作を制御することを特徴とする車両周辺監視システム。
【請求項３】
請求項２記載の車両周辺監視システムにおいて、
前記第２処理部が前記第１処理部による前記１次判定結果に基づく前記車載機器の動作の制御形態と異なる形態で、前記２次判定結果に基づいて同一の車載機器の動作を制御する、あるいは前記第１処理部により動作が制御される前記車載機器と異なる車載機器の動作を２次判定結果に基づいて制御することを特徴とする車両周辺監視システム。
【請求項４】
請求項１記載の車両周辺監視システムにおいて、
前記第２処理部が前記物体の前記２次状態に基づいて前記車両と前記物体とが接触する可能性が高いと判定した場合、前記物体の存在を強調する第２情報を車載の情報出力装置に出力させることを特徴とする車両周辺監視システム。
【請求項５】
請求項２記載の車両周辺監視システムにおいて、
前記第１処理部が前記物体の前記１次状態に基づいて前記車両と前記物体とが接触する可能性が高いと判定した場合、前記物体の存在を強調する第１情報を車載の情報出力装置に出力させることを特徴とする車両周辺監視システム。
【請求項６】
請求項５記載の車両周辺監視システムにおいて、
前記第２処理部が前記物体の前記２次状態に基づいて前記車両と前記物体とが接触する可能性が高いと判定した場合、前記物体の存在を強調する第２情報を前記第１処理部による前記第１情報の出力形態とは異なる形態で車載の情報出力装置に出力させることを特徴とする車両周辺監視システム。
【請求項７】
請求項１記載の車両周辺監視システムにおいて、
前記第２処理部が前記２次判定結果に基づいて前記車両の挙動を制御することを特徴とする車両周辺監視システム。
【請求項８】
請求項２記載の車両周辺監視システムにおいて、
前記第１処理部が前記１次判定結果に基づいて前記車両の挙動を制御することを特徴とする車両周辺監視システム。
【請求項９】
請求項８記載の車両周辺監視システムにおいて、
前記第２処理部が前記第１処理部による前記１次判定結果に基づく前記車両の挙動の制御形態とは異なる形態で、前記２次判定結果に基づいて前記車両の挙動を制御することを特徴とする請求項１１記載の車両周辺監視システム。
【請求項１０】
請求項１記載の車両周辺監視システムにおいて、
前記第２処理部が、前記第１処理部により予測された前記各物体の前記１次状態の相関関係に加え、前記車両と前記各物体との距離または物体同士の距離に基づき、前記各物体の前記２次状態を予測することを特徴とする車両周辺監視システム。
【請求項１１】
請求項１記載の車両周辺監視システムにおいて、
第ｋ処理部（ｋ＝２，３，‥）により予測された前記各物体のｋ次状態の相関関係に基づいて当該複数の物体のうち一部または全部のｋ＋１次状態を予測し、前記物体の前記ｋ＋１次状態に基づいて前記車両と前記物体との接触する可能性の高低を判定し、当該判定結果に応じて前記車載機器の動作を制御する第ｋ＋１処理部をさらに備えていることを特徴とする車両周辺監視システム。
【請求項１２】
請求項１記載の車両周辺監視システムにおいて、
前記第２処理部が第１物体による第２物体との接触を回避するための針路変更または追い越しの有無を前記第１物体の前記２次状態として予測し、前記第１物体の前記２次状態として前記第２物体との接触を回避するための針路変更または追い越しを予測した場合、前記車両と前記第１物体とが接触する可能性が高いと判定することを特徴とする車両周辺監視システム。
【請求項１３】
請求項１２記載の車両周辺監視システムにおいて、
前記第２処理部が前記第１物体および前記第２物体のそれぞれの前記１次状態の相関関係に加え、前記車両と前記第１物体もしくは前記第２物体との距離または前記第１物体と前記第２物体との距離に基づき、前記第１物体による針路変更または前記第２物体の追い越しの有無を前記第１物体の前記２次状態として予測することを特徴とする車両周辺監視システム。
【手続補正２】
【補正対象書類名】明細書
【補正対象項目名】全文
【補正方法】変更
【補正の内容】
【発明の詳細な説明】
【発明の名称】車両周辺監視システム
【技術分野】
【０００１】
本発明は、車両の周辺を監視するシステムに関する。
【背景技術】
【０００２】
車両と歩行者や二輪車等の物体と接触することを回避するため、車載カメラにより取り込まれた映像に基づき、この車両と接触する可能性が高い物体の存在を運転者に知らせる技術が提案されている（たとえば、特許文献１参照）。また、物体との接触可能性が高いとの判定結果に応じて、この物体との接触を回避しうるように車両の挙動を制御する技術が知られている。
【特許文献１】特開２００１−００６０９６号公報  第００１７段落〜第００５３段落、図３
【発明の開示】
【発明が解決しようとする課題】
【０００３】
しかし、車両周辺の複数の物体のうち、車両と接触する可能性が低いと判定されていた物体が、他の物体との接触を回避する等のためにその状態を急に変化させる場合がある。この場合、当該物体は車両と接触する可能性が高いと判定され、その存在が運転者に急に報知され、または車両挙動が急激に変化することになり、運転者の心身にストレスを与えるおそれがある。
【０００４】
そこで、本発明は、車両周辺に複数の物体がある場合、物体同士の相関関係等を考慮に入れて車両と接触する可能性がある物体の存在を早期に判定した上で適当な対応措置をとりうるように車両の周辺を監視するシステムを提供することを解決課題とする。
【課題を解決するための手段】
【０００５】
第１発明の車両周辺監視システムは、車両の周辺を監視するシステムであって、車載の撮像装置により取り込まれた映像に基づいて前記車両の周辺にある複数の物体の位置を時系列的に測定し、各物体の時系列的な測定位置に基づいて前記各物体の１次状態を予測する第１処理部と、前記第１処理部により予測された各物体の前記１次状態の相関関係に基づいて前記複数の物体のうち一部または全部の２次状態を予測し、前記物体の前記２次状態に基づいて前記車両と前記物体との接触する可能性の高低を判定し、当該判定結果（以下、適宜「２次判定結果」という。）に応じて車載機器の動作を制御する第２処理部とを備えていることを特徴とする。
【０００６】
第１発明の車両周辺監視システムによれば、車載の撮像装置により取り込まれた映像に基づいて各物体の１次状態が予測される。物体の「状態」はその「位置」や「速度（車両に対する相対速度も含まれる（速度は大きさおよび向きを含む。）。）」等により特定される。さらに、各物体の１次状態の相関関係に基づいて当該複数の物体のうち一部または全部の２次状態が予測される。また、物体の２次状態に基づいて車両と当該物体との接触可能性の高低が判定され、当該判定結果（２次判定結果）に応じて車載機器の動作が制御される。これにより、車両周辺に複数の物体がある場合、未来における物体の１次状態の相関関係が考慮されて判定された、車両と当該物体との接触可能性の高低に応じて早期に車載機器の動作が制御されうる。たとえば現段階では車両との接触可能性が低いものの、未来における他の物体との相関関係に鑑みて、車両との接触可能性が高くなると予想される物体がある場合、この物体との接触回避等の観点から、車載機器の動作が適当に制御されうる。したがって、車載機器の急激な動作変化が抑制され、運転者に余計なストレスが与えられる事態が回避されうる。
【０００７】
第２発明の車両周辺監視システムは、第１発明の車両周辺監視システムにおいて、前記第１処理部が前記各物体について予測した前記１次状態に基づいて前記車両と前記各物体との接触する可能性の高低を判定し、当該判定結果（以下、適宜「１次判定結果」という。）に応じて前記車載機器の動作を制御することを特徴とする。
【０００８】
第２発明の車両周辺監視システムによれば、１次状態に基づいて車両と各物体との接触可能性の高低が判定される。また、前記のように２次判定結果に応じて車載機器の動作が制御されるのみならず、当該判定結果（１次判定結果）に応じて車載機器の動作が制御されうる。
【０００９】
第３発明の車両周辺監視システムは、第２発明の車両周辺監視システムにおいて、前記第２処理部が前記第１処理部による前記１次判定結果に基づく前記車載機器の動作の制御形態と異なる形態で、前記２次判定結果に基づいて同一の車載機器の動作を制御する、あるいは前記第１処理部により動作が制御される前記車載機器と異なる車載機器の動作を２次判定結果に基づいて制御することを特徴とする。
【００１０】
各物体の時系列的な測定位置に基づいて予測された１次状態に基づく１次判定結果の信頼度は、１次状態に基づいてさらに予測（または推測）された２次状態に基づく２次判定結果の信頼度よりも一般的に高いことが多い。このため、第３発明の車両周辺監視システムによれば、車両と物体との接触可能性の高低に関する判定結果の信頼度の高低に応じて車載機器の動作が制御されうる。
【００１１】
第４発明の車両周辺監視システムは、第１発明の車両周辺監視システムにおいて、前記第２処理部が前記物体の前記２次状態に基づいて前記車両と前記物体とが接触する可能性が高いと判定した場合、前記物体の存在を強調する第２情報を車載の情報出力装置に出力させることを特徴とする。
【００１２】
第４発明の車両周辺監視システムによれば、車両周辺に複数の物体がある場合、未来における物体の１次状態の相関関係が考慮されて、車両と当該物体との接触可能性が高いと判定された物体の存在を、情報出力装置（車載機器）から出力される「第２情報」を通じて運転者に早期に認識させることができる。たとえば現段階では車両との接触可能性が低いものの、未来における他の物体との相関関係に鑑みて、車両との接触可能性が高くなると判定（または予想）された物体がある場合、この物体の存在を運転者に早期に認識させうる。したがって、車両と接触可能性が高い物体の存在が唐突に報知され、運転者に余計なストレスが与えられる事態が回避されうる。
【００１３】
第５発明の車両周辺監視システムは、第２発明の車両周辺監視システムにおいて、前記第１処理部が前記物体の前記１次状態に基づいて前記車両と前記物体とが接触する可能性が高いと判定した場合、前記物体の存在を強調する第１情報を車載の情報出力装置に出力させることを特徴とする。
【００１４】
第５発明の車両周辺監視システムによれば、１次状態に基づき、車両と各物体との接触可能性が高いと判定された物体の存在を、情報出力装置（車載機器）から出力される「第１情報」を通じて運転者に認識させることができる。
【００１５】
第６発明の車両周辺監視システムは、第５発明の車両周辺監視システムにおいて、前記第２処理部が前記物体の前記２次状態に基づいて前記車両と前記物体とが接触する可能性が高いと判定した場合、前記物体の存在を強調する第２情報を前記第１処理部による前記第１情報の出力形態とは異なる形態で車載の情報出力装置に出力させることを特徴とする。
第６発明の車両周辺監視システムによれば、前記のように１次判定結果の信頼度が２次判定結果の信頼度よりも一般的に高いことが多いことに鑑みて１次および２次判定結果のそれぞれに応じた第１および第２情報の出力形態が差別化される。これにより、第１および第２情報により存在が強調された物体と車両とが接触する可能性に関する判定結果がどの程度信頼に足りるものであるかを運転者に認識させることができる。
【００１６】
第７発明の車両周辺監視システムは、第１発明の車両周辺監視システムにおいて、前記第２処理部が前記２次判定結果に基づいて前記車両の挙動を制御することを特徴とする。
第７発明の車両周辺監視システムによれば、車両周辺に複数の物体がある場合、未来における物体の１次状態の相関関係が考慮された、車両と当該物体との接触可能性の高低に関する判定結果に応じて、車載機器に車両の動作を早期に制御させることができる。たとえば現段階では車両との接触可能性が低いものの、未来における他の物体との相関関係に鑑みて、車両との接触可能性が高くなると判定（または予想）された物体がある場合、この物体との接触を回避しうるように車両の動作が早期に制御されうる。したがって、車両と接触可能性が高い物体の存在に応じて唐突に車両動作が変化し、運転者に余計なストレスが与えられる事態が回避されうる。
【００１７】
第８発明の車両周辺監視システムは、第２発明の車両周辺監視システムにおいて、前記第１処理部が前記１次判定結果に基づいて前記車両の挙動を制御することを特徴とする。
第８発明の車両周辺監視システムによれば、１次判定結果に応じて車両の動作を車載機器に制御させうる。
【００１８】
第９発明の車両周辺監視システムは、第８発明の車両周辺監視システムにおいて、前記第２処理部が前記第１処理部による前記１次判定結果に基づく前記車両の挙動の制御形態とは異なる形態で、前記２次判定結果に基づいて前記車両の挙動を制御することを特徴とする。
【００１９】
第９発明の車両周辺監視システムによれば、前記のように１次判定結果の信頼度が２次判定結果の信頼度よりも一般的に高いことが多いことに鑑みて１次および２次判定結果のそれぞれに応じた車両の動作制御形態が差別化される。これにより、車両と物体とが接触する可能性に関する１次および２次判定結果の信頼度の高低に応じて、当該物体との接触を回避しうるように適当に車両の動作を車載機器に制御させることができる。
【００２０】
第１０発明の車両周辺監視システムは、第１発明の車両周辺監視システムにおいて、前記第２処理部が、前記第１処理部により予測された前記各物体の前記１次状態の相関関係に加え、前記車両と前記各物体との距離または物体同士の距離に基づき、前記各物体の前記２次状態を予測することを特徴とする。
【００２１】
第１０発明の車両周辺監視システムによればこの点に鑑みて、各物体の１次状態の相関関係のみならず、各物体と車両との距離または物体同士の距離に基づき、各物体の状態が予測される。これは、物体はその周囲に空間的余裕がある場合に当該余裕のある方向に針路を変更する等、その状態を急激に変化させる可能性が高い点に鑑みたためである。これにより、未来における物体同士の相関関係に加え、物体同士または物体と車両との位置関係が考慮された、車両と物体とが接触する可能性の高低に応じて車載機器が適当に制御されうる。
【００２２】
第１１発明の車両周辺監視システムは、第１発明の車両周辺監視システムにおいて、第ｋ処理部（ｋ＝２，３，‥）により予測された前記各物体のｋ次状態の相関関係に基づいて当該複数の物体のうち一部または全部のｋ＋１次状態を予測し、前記物体の前記ｋ＋１次状態に基づいて前記車両と前記物体との接触する可能性の高低を判定し、当該判定結果に応じて前記車載機器の動作を制御する第ｋ＋１処理部をさらに備えていることを特徴とする。
【００２３】
第１１発明の車両周辺監視システムによれば、２次よりもさらに高次の物体の予測状態に基づいて、車両と当該物体との接触可能性の高低が評価される。これにより、比較的遠い未来における物体同士の状態の相関関係等をも考慮に入れた、車両と物体とが接触する可能性の高低に応じて車載機器が適当に制御されうる。
【００２４】
第１２発明の車両周辺監視システムは、第１発明の車両周辺監視システムにおいて、前記第２処理部が第１物体による第２物体との接触を回避するための針路変更または追い越しの有無を前記第１物体の前記２次状態として予測し、前記第１物体の前記２次状態として前記第２物体との接触を回避するための針路変更または追い越しを予測した場合、前記車両と前記第１物体とが接触する可能性が高いと判定することを特徴とする。
【００２５】
第１物体が第２物体との接触を回避するため、または第２物体を追い越すため、車両の前方にその針路を変更する可能性が高い。第１２発明の車両周辺監視システムによればこの点に鑑みて、第１物体が第２物体を追い越すこと等が判定（または予測）され、この判定結果に応じて車載機器が適当に制御されうる。
【００２６】
第１３発明の車両周辺監視システムは、第１２発明の車両周辺監視システムにおいて、前記第２処理部が前記第１物体および前記第２物体のそれぞれの前記１次状態の相関関係に加え、前記車両と前記第１物体もしくは前記第２物体との距離または前記第１物体と前記第２物体との距離に基づき、前記第１物体による針路変更または前記第２物体の追い越しの有無を前記第１物体の前記２次状態として予測することを特徴とする。
【００２７】
物体が周囲に空間的余裕がある場合、他の物体を追い越す等のために当該余裕のある方向に針路を変更する可能性が高い等、周辺の空間的余裕に応じて物体が追い越し等をする可能性が異なる。第１３発明の車両周辺監視システムによればこの点に鑑みて、第１および第２物体の１次予測状態のみならず、第１もしくは第２物体と車両との距離、または物体同士の距離に基づき、第１物体が第２物体を追い越す等のために針路変更するか否かが判定（または予測）される。これにより、第１および第２物体同士の未来の相関関係等が考慮された、車両と物体とが接触する可能性の高低に関する判定結果に応じて車載機器が適当に制御されうる。
【発明を実施するための最良の形態】
【００２８】
本発明の車両周辺監視システムの実施形態について図面を用いて説明する。図１に示されているように車両１には、車両周辺監視システム１０と、ナビゲーションシステム（以下「ナビシステム」という。）２０とが搭載されている。車両１の前部には、車幅方向中心部に対してほぼ対称に左右一対の赤外線カメラ１０２が配置されている。２つの赤外線カメラ１０２の光軸は路面からの高さが等しく、かつ、相互に平行となるように調節されている。車両１のフロントウィンドウにはＨＵＤ（Ｈｅａｄ  Ｕｐ  Ｄｉｓｐｌａｙ）１２２が、運転者の視界を妨げないように配置されている。ＨＵＤ１２２には、赤外線カメラ１０２を通じて取得された車両１の前方の映像（画像）が表示される。また、図２に示されているように車両１には、そのヨーレートに応じた信号を出力するヨーレートセンサ１０４と、その速度に応じた信号を出力する速度センサ１０６と、方向指示器の出力に応じた信号を出力する方向指示器センサ１０８等、種々のセンサが搭載されている。
ナビシステム２０はＣＰＵ、ＲＯＭ、ＲＡＭ等のメモリ、信号入力回路、信号出力回路等により構成されている。ナビシステム２０はユーザにより設定された目的地までのルートを設定し、車両１のコンソールに配置されたナビディスプレイ２０２に、このルートを表示させる。また、ナビシステム２０は、ナビディスプレイ２０２に、ＧＰＳにより測定された車両１の現在位置およびヨーレートセンサ１０４の出力に応じた車両１の進行方向を表すアイコン等を表示させる。
【００２９】
車両周辺監視システム１０は、車両１に搭載されたコンピュータ（ＣＰＵ、ＲＯＭ、ＲＡＭ、信号入力回路、信号出力回路等により構成されている。）と、メモリ等に格納され、当該コンピュータに諸機能を付与する本発明の「車両周辺監視プログラム」とにより構成されている。車両周辺監視プログラムは最初から車載コンピュータのメモリに格納されていてもよいが、その一部または全部が運転手または車載コンピュータからのリクエストがあったとき等、任意のタイミングで所定のサーバからダウンロードされてもよい。また、図２に示されているように車両周辺監視システム１０は、第１処理部１１と、第２処理部１２とを備えている。
【００３０】
第１処理部１１は赤外線カメラ１０２により取り込まれた映像に基づいて車両１の周辺の複数の物体の位置を逐次測定する。また、第１処理部１１は各物体の時系列的な測定位置に基づいて各物体の「１次状態」を予測する。さらに、第１処理部１１はこの１次状態に基づいて各物体の車両１と接触する可能性の高低を判定する。そして、第１処理部１１は１次状態に鑑みて車両１と接触する可能性が高い物体の存在を示す第１情報をＨＵＤ１２２に表示させる。
【００３１】
第２処理部１２は、第１処理部１１により予測された各物体の１次状態の相関関係に基づいて各物体の「２次状態」を予測する。また、第２処理部１２はこの２次状態に基づいて各物体の車両と接触する可能性の高低を判定する。そして、第２処理部１２は２次状態に鑑みて車両と接触する可能性が高い物体の存在を示す第２情報をＨＵＤ１２２に表示させる。
【００３２】
各物体の時系列的な測定位置、予測された各物体の１次状態および２次状態、車両と各物体との接触可能性の高低についての判定結果等は、第１処理部１１または第２処理部１２によってメモリ（図示略）に適宜保存（格納）され、かつ、当該メモリから読み取られる。
【００３３】
前記構成の車両周辺監視システム１０の機能について図３〜図６を用いて説明する。
まず、第１処理部１１が「第１処理」を実行する（図３／Ｓ１１）。
【００３４】
第１処理部１１は一対の赤外線カメラ１０２により取り込まれた映像に基づき、この映像に含まれる物体の実空間位置を測定する（図３／Ｓ１１１）。実空間位置とは、図１に示されているように一対のカメラ１０２の取り付け位置の中点を原点Ｏとし、水平方向、鉛直方向および前後方向をそれぞれＸ、ＹおよびＺ軸とする座標系における位置を意味する。
【００３５】
また、第１処理部１１はメモリに保存されている各物体の時系列的な測定位置に基づき、車両１に対する各物体の相対速度ベクトルを算出する（図３／Ｓ１１２）。さらに、第１処理部１１は算出した物体の相対速度ベクトルがそのまま維持される状態を当該物体の「１次状態」として予測する（図３／Ｓ１１３）。また、第１処理部１１は各物体の１次状態に基づいて車両１と各物体との接触可能性の高低を判定する（図３／Ｓ１１４）。そして、第１処理部１１は車両１と物体とが接触する可能性が高いと判定した場合（図３／Ｓ１１４‥ＹＥＳ）、この物体を示す第１情報として、図６（ｃ）に示されているように当該物体を囲む橙色の第１フレームｆ1をＨＵＤ１２２に表示させる（図３／Ｓ１１５）。なお、第１情報として「ピッピッピッ」等の音声がスピーカ（図示略）から出力されてもよい。さらに、第１情報としてナビディスプレイ２０２に当該物体の位置を示すアイコンが、車両１の針路および位置を表すアイコンとともに表示されてもよい。
物体の実空間位置の測定方法、各物体の同一性判断方法、物体の相対速度ベクトルの算出方法および１次状態に鑑みた車両１と物体との接触可能性の高低の判定方法等は、前記特許文献１（特開２００１−６０９６号公報）、特開２００３−１５７４９８号公報等に詳細な説明が記載されている。そこで、ここではこれらの詳細な説明を省略し、接触可能性の判定方法についてのみ簡単に説明する。
【００３６】
図４に示されているように、赤外線カメラ１０２により監視可能な三角形領域Ａ0よりも、車両１に対する二輪車等の物体ｑの相対速度ｖsと余裕時間Ｔとの積（ｖs×Ｔ）だけ低い三角形領域（警報判定領域）が定義される。また、当該三角形領域のうち、Ｚ軸を中心とするＸ方向の幅がα＋２β（α：車幅、β：余裕幅）の第１領域（接近判定領域）Ａ1と、第１領域Ａ1の左右の第２領域（侵入判定領域）Ａ2LおよびＡ2Rとが定義される。そして、物体ｑが第１領域Ａ1にある場合や、物体ｑが左右の第２領域Ａ2にあって、その相対速度ベクトルｖsに鑑みて第１Ａ1領域に侵入してくることが予測される場合、この物体ｑと車両１とが接触する可能性が高いと判定される。
【００３７】
続いて、第２処理部１２が「第２処理」を実行する（図３／Ｓ１２）。
【００３８】
第２処理部１２は、第１処理部１１により予測され、メモリに保存されている各物体の１次状態の相関関係に基づいて各物体の「２次状態」を予測する（図３／Ｓ１２１）。たとえば、車両１、第１物体ｑ1および第２物体ｑ2がＺ方向にそれぞれ速度ｖ0，ｖ1，ｖ2で走行している状況を考える。この状況で次の要件１〜５が満たされる場合、第１物体ｑ1が第２物体ｑ2を追い越すために針路変更することが第１物体ｑ1の「第２状態」として予測される。なお、当該要件１〜５が満たされる場合、第２物体ｑ2が第１物体ｑ1による追突を回避するために針路変更することが第２物体ｑ2の「第２状態」として予測されてもよい。
（要件１）
Ｚ方向について車両の速度が、第１物体ｑ1および第２物体ｑ2のそれぞれの速度よりもある程度以上高いこと。
（要件２）
第１物体ｑ1および第２物体ｑ2のうち、後側の物体の速度が前側の物体の速度よりもある程度以上高いこと。
（要件３）
第１物体ｑ1および第２物体ｑ2がともに車両１の前方であって、ＸおよびＺ方向についてある程度近くにあること。たとえば、第１物体ｑ1および第２物体ｑ2がともに第２領域Ａ2（図４参照）に位置していること。
（要件４）
第１物体ｑ1および第２物体ｑ2のＸ方向の間隔が、両物体のＺ座標を同一にした場合に両物体が接触する可能性がある程度近い範囲内にあること。たとえば、第１物体ｑ1および第２物体ｑ2がともに左右同じ側の第２領域Ａ2に位置していること。
（要件５）
第１物体ｑ1および第２物体ｑ2のうち後側の物体と車両１とがＺ方向についてある程度で離れていること。なお、この要件充足性の判定基準は、車両１と当該後側の物体との相対速度に応じて可変に設定されうる。
【００３９】
また、第２処理部１２は各物体の２次状態に基づいて車両１と各物体とが接触する可能性の高低を判定する（図３／Ｓ１２２）。たとえば第１物体ｑ1が第２物体ｑ2を追い越すために針路変更することが第１物体ｑ1の「第２状態」として予測された場合、車両１と第１物体ｑ1との接触可能性ｑ1が高いと判定される。また、第２物体ｑ2が第１物体ｑ1による追突を回避するために針路変更することが第２物体ｑ2の「第２状態」として予測された場合、車両１と第２物体ｑ2との接触可能性ｑ1が高いと判定される。
【００４０】
そして、第２処理部１２は２次状態に鑑みて車両と物体とが接触する可能性が高いと判定した場合（図３／Ｓ１２２‥ＹＥＳ）、物体の存在を示す第２情報として、当該物体を囲う黄色の第２フレームｆ2をＨＵＤ１２２に表示させる（図３／Ｓ１２３）。なお、第２情報として第１情報よりも短い「ピッ」等の音声がスピーカから出力されてもよい。また、第２情報としてナビディスプレイ２０２に当該物体の位置を示すアイコンが、車両１の針路および位置を表すアイコンとともに表示されてもよい。
【００４１】
例として図５に示されているようにＺ方向に速度ｖ0で走行している車両１の前方左側において第１物体ｑ1が速度ｖ1（＜ｖ0）で走行し、第１物体ｑ1より前で第２物体ｑ2が速度ｖ2（＜ｖ1）で走行している状況を考える。この状況では、第１物体ｑ1が第２物体ｑ2を追い越すため、図５に破線で示されているように針路変更する可能性がある。
【００４２】
この状況で第１物体ｑ1および第２物体ｑ2がともに、１次および２次状態に鑑みて車両１との接触可能性が低いと判定された場合（図３／Ｓ１１４‥ＮＯ，Ｓ１２２‥ＮＯ）、ＨＵＤ１２２には図６（ａ）に示されているように単に第１物体ｑ1および第２物体ｑ2が表示される。これに対して第１物体ｑ1が１次状態に鑑みて車両１との接触可能性が低いと判定された一方（図３／Ｓ１１４‥ＮＯ）、２次状態に鑑みて車両１との接触可能性が低いと判定された場合（Ｓ１２２‥ＹＥＳ）、ＨＵＤ１２２には図６（ｂ）に示されているように第１物体ｑ1を囲うことでその存在を強調する黄色の第２フレーム（図中白枠）ｆ2が「第２情報」として表示される。そして、第１物体ｑ1が図５に破線で示されているように実際に左側に針路変更したことで、第１物体ｑ1が１次状態に鑑みて車両１との接触可能性が高いと判定された場合（図３／Ｓ１１４‥ＹＥＳ）、ＨＵＤ１２２には図６（ｃ）に示されているように第１物体ｑ1を囲うことでその存在を強調する橙色の第１フレーム（図中黒枠）ｆ1が「第１情報」として表示される。
【００４３】
前記機能を発揮する本発明の車両周辺監視システム１０によれば、物体の１次状態に鑑みて車両１との接触可能性が低い一方、物体の２次状態に鑑みて車両１との接触可能性が高い場合、ＨＵＤ１２２には第１フレームｆ1（第１情報）は表示されないものの、第２フレームｆ2（第２情報）は出力される（図６（ｂ）参照）。すなわち、現段階では車両１との接触可能性が低いものの、未来における第２物体ｑ2との１次状態（要件１，２）の相関関係に鑑みて、車両１との接触可能性が高くなると予想される第１物体ｑ1の存在が運転者に知らされうる。
【００４４】
したがって、車両１の周辺に複数の物体がある場合、未来における物体同士の相関関係等を考慮に入れて車両１と接触する可能性が高い物体の存在を早期に運転者に知らせることができる。ＨＵＤ１２２に図６（ｂ）に示されているような画像が表示され、その後で図６（ｃ）に示されているような画像が表示された場合、ＨＵＤ１２２に図６（ｃ）に示されているような画像が唐突に表示された場合と比較して、早期に当該物体の存在を運転者に認識させることができ、これによって運転者が受けるストレスが著しく軽減される。
また、各物体の１次状態の相関関係（要件１，２）のみならず、各物体と車両との距離（要件３）および物体同士の距離（要件４，５）に基づき、各物体の状態が予測される。これは、物体がその周囲に空間的余裕がある場合に当該余裕のある方向に針路を変更する等、その状態を急激に変化させる可能性が高い点に鑑みたためである。これにより、未来における物体同士の相関関係に加え、物体同士または物体と車両との位置関係が考慮された形で車両１と接触する可能性が高い物体の存在を早期に運転者に知らせることができる（図６（ｂ）参照）。
【００４５】
さらに、ＨＵＤ１２２に表示される第１フレームｆ1（図６（ｃ）参照）および第２フレームｆ2（図６（ｂ）参照）の色彩が差別化されている。各物体の時系列的な測定位置に基づいて予測された１次状態に基づく第１フレームｆ1により存在が示された物体と車両１とが接触する可能性は、１次状態に基づいてさらに予測された２次状態に基づく第２フレームｆ2により存在が示された物体と車両１とが接触する可能性よりも一般的に高いことが多い。このため、フレームによって存在が示された物体と車両１とが接触する可能性がどの程度高いかを運転者に識別させ、その物体への適度な注意を運転者に促すことができる。
【００４６】
なお、前記実施形態では物体の１次状態に基づく車両１と当該物体とが接触する可能性が高いという１次判定結果に応じて、第１情報が出力されたが（図３／Ｓ１１４‥ＹＥＳ，Ｓ１１５、図６（ｃ））、他の実施形態として１次判定結果に応じてこの物体との接触を回避しうるように車両１の挙動が車両挙動を制御するＥＣＵ、ブレーキ機構やステアリング機構等の車載機器によって制御されてもよい。また、前記実施形態では物体の２次状態に基づく車両１と当該物体とが接触する可能性が高いという２次判定結果に応じて、第２情報が出力されたが（図３／Ｓ１２２‥ＹＥＳ，Ｓ１２３、図６（ｂ））、他の実施形態として２次判定結果に応じて、この物体との接触を回避しうるように車両１の挙動が車両挙動を制御するＥＣＵ、ブレーキ機構やステアリング機構等の車載機器によって制御されてもよい。さらに、１次判定結果に応じた車両１の挙動制御の形態と、２次判定結果に応じた車両１の挙動制御の形態とが差別化されていてもよい。
【００４７】
また、１次および２次判定結果のそれぞれに応じて、車載ライトの方向が物体の存在する領域に向けられる（ライトのスイブル制御）等、あらゆる車載機器の動作が制御されてもよい。さらに、１次判定結果に応じたライトの明度等により表される照明の形態と、２次判定結果に応じたライトによる照明形態とが差別化されていてもよい。
【００４８】
また、撮像装置として、遠赤外線を感知する赤外線カメラ１０２に代えて、可視光および近赤外線を感知するＣＣＤカメラ等が採用されてもよい。
【００４９】
さらに、車両周辺監視システム１０が、第２処理部１２により予測された各物体の２次状態の相関関係に基づいて各物体の３次状態を予測し、各物体について３次状態に基づいて車両１と接触する可能性の高低を判定し、３次状態に鑑みて車両１と接触する可能性が高い物体の存在を示す第３情報をＨＵＤ１２２等に表示させる第３処理部をさらに備えていてもよい。同様に、車両周辺監視システム１０が、さらに高次の物体の状態を予測等するさらなる処理部（第４処理部、第５処理部等）を備えていてもよい。
【００５０】
これにより、２次よりもさらに高次の物体の予測状態に基づいて、車両１と当該物体との接触可能性の高低が評価される。これにより、比較的遠い未来における物体同士の状態の相関関係等をも考慮に入れて車両１と接触する可能性がある物体の存在を早期に運転者に知らせることができる。
【図面の簡単な説明】
【００５１】
【図１】本発明の車両周辺監視システムの構成例示図
【図２】本発明の車両周辺監視システムの構成例示図
【図３】本発明の車両周辺監視システムの機能例示図
【図４】本発明の車両周辺監視システムの機能例示図
【図５】本発明の車両周辺監視システムの機能例示図
【図６】本発明の車両周辺監視システムの機能例示図
【符号の説明】
【００５２】
１‥車両、１０‥車両周辺監視システム、１０２‥赤外線カメラ（撮像装置）、１０４‥ヨーレートセンサ、１０６‥速度センサ、１０８‥方向指示器センサ、１１‥第１処理部、１１１‥第１記憶部、１１２‥第２記憶部、１２‥第２処理部、１２２‥ＨＵＤ（情報出力装置）、２０‥ナビシステム、２０２‥ナビディスプレイ（情報出力装置）