(57)【特許請求の範囲】
【請求項１】
自車両周囲の画像を取得する画像取得部と、
上記画像取得部が取得した画像から認識制御対象車両の種別を認識する種別認識部と、
自動運転情報を取得する自動運転情報取得部と、
上記種別認識部で認識した種別および上記自動運転情報取得部で取得した自動運転情報に基づいて、報知情報を生成する報知情報生成部と、
上記報知情報生成部により生成された報知情報を報知する報知部と、
を備え、
上記自動運転は、複数の自動運転レベルに分類され、
上記報知情報生成部は、上記自車両が、上記複数の自動運転レベルのうちの予め定められた自動運転レベルの自動運転である場合に、上記報知情報を上記報知部で報知させるための制御信号を上記報知部に出力する、
ことを特徴とする認識制御対象車両報知装置。
【請求項２】
請求項１に記載の認識制御対象車両報知装置において、
上記報知情報生成部が生成する報知情報は、上記種別認識部により認識された認識制御対象車両の色であることを特徴とする認識制御対象車両報知装置。
【請求項３】
請求項１に記載の認識制御対象車両報知装置において、
上記報知情報生成部が生成する報知用情報は、上記種別認識部により認識された認識制御対象車両の形状であることを特徴とする認識制御対象車両報知装置。
【請求項４】
請求項１に記載の認識制御対象車両報知装置において、
上記報知情報生成部が生成する報知情報は、上記種別認識部により認識された認識制御対象車両の種別を説明する音声であることを特徴とする認識制御対象車両報知装置。
【請求項５】
請求項１に記載の認識制御対象車両報知装置において、
上記種別認識部は、上記画像取得部が取得した画像から認識制御対象車両の形状及び色を認識し、上記報知情報生成部が生成する報知情報は、上記種別認識部により認識された認識制御対象車両の形状及び色であることを特徴とする認識制御対象車両報知装置。
【請求項６】
請求項１に記載の認識制御対象車両報知装置において、
上記種別認識部は、上記画像取得部が取得した画像から認識制御対象車両の形状及び色を認識し、上記報知情報生成部が生成する報知情報は、上記種別認識部により認識された認識制御対象車両の形状、色及び上記認識制御対象車両の種別を説明する音声であることを特徴とする認識制御対象車両報知装置。
【請求項７】
請求項１に記載の認識制御対象車両報知装置において、
上記報知情報生成部は、上記自動運転情報取得部が自車両の自動運転が行われていることを示す場合にのみ、報知情報を生成することを特徴とする認識制御対象車両報知装置。
【請求項８】
請求項１に記載の認識制御対象車両報知装置において、
上記報知情報生成部は、上記自動運転情報取得部が自車両の自動運転が行われていないことを示す場合は、上記種別認識部は、認識制御対象車両及び認識制御対象車両以外に認識した車両の形状及び色のうちの何れかを生成して、上記報知部に報知し、上記自動運転情報取得部が自車両の自動運転が行われていることを示す場合には、上記種別認識部は、認識制御対象車両及び認識制御対象車両以外に認識した車両の形状及び色を生成して、上記報知部に報知することを特徴とする認識制御対象車両報知装置。
【請求項９】
請求項１に記載の認識制御対象車両報知装置において、
上記報知情報生成部は、上記自動運転情報取得部が自車両の自動運転が行われていないことを示す場合は、上記種別認識部は、認識制御対象車両及び認識制御対象車両以外に認識した車両の形状及び色のうちの何れかを生成して、上記報知部に報知し、上記自動運転情報取得部が自車両の自動運転が行われていることを示す場合には、上記種別認識部は、認識制御対象車両については形状及び色を生成し、認識制御対象車両以外に認識した車両については、形状及び色のうちの何れかを生成して、上記報知部に報知することを特徴とする認識制御対象車両報知装置。
【請求項１０】
請求項１に記載の認識制御対象車両報知装置において、
上記予め定められた自動運転レベルの自動運転は、上記自車両を自動的に制動する自動緊急ブレーキ機能を含むことを特徴とする認識制御対象車両報知装置。
【請求項１１】
請求項１に記載の認識制御対象車両報知装置において、
上記予め定められた自動運転レベルの自動運転は、上記自車両の自動的な加減速、操舵、制動のうちのいずれかを含むことを特徴とする認識制御対象車両報知装置。
【請求項１２】
請求項１に記載の認識制御対象車両報知装置において、
上記予め定められた自動運転レベルの自動運転は、上記自車両の自動的な加減速、操舵、制動のすべてを含み、緊急時のみ上記自車両のドライバーが対応することを特徴とする認識制御対象車両報知装置。
【請求項１３】
請求項１に記載の認識制御対象車両報知装置において、
上記予め定められた自動運転レベルの自動運転は、上記自車両の自動的な加減速、操舵、制動のすべてを含むことを特徴とする認識制御対象車両報知装置。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、自車両の周辺における車両を認識し報知する認識制御対象車両報知装置に関する。
【背景技術】
【０００２】
近年、交通事故の増大傾向に対して車の安全性の飛躍的向上、即ち最初から危険な状態に陷らないように予防安全を図るため、またドライバーの運転負荷を軽減するため、自動緊急ブレーキシステム、緊急回避システム、オートクルーズコントロールシステム、レーンキープ（車線維持）システム、自動駐車システムなど、車両に搭載されたカメラやレーダから得られる情報を利用して車両の運転操作の一部もしくは全部をシステムが自動で行う様々な自動運転技術（ドライバーの寄与度や関与度に応じて様々な自動運転レベルが存在する）が開発されている。【０００３】
上述したシステムは、車両に搭載した前方監視カメラの画像信号により障害物等を認識して、その画像データにより車両の車線逸脱、追突、障害物との接触等の可能性を予測するだけでなく、これら技術を利用し前方の車両追従し走行したり、車線情報に追従し走行したり機能も有している。【０００４】
また、上記した追従走行を有する車両において追従走行時と非追従走行時とで表示形態を異ならせる事項が開示されている。【０００５】
具体的には、追従するべき先行車両を検出した場合、追従走行の状況を示す画面にて、先行車両表示、自車表示等を表示することにより、前方車両を認識していることをドライバーが認識出来るという効果が得られる技術が特許文献１に記載されている。【０００６】
また、前方監視カメラの画像信号から制御対象物の領域を切り出して、そのまま表示させることにより、前方車両を認識していることをドライバーが認識出来るという技術が特許文献２に記載されている。【０００７】
また、認識された立体物の向き、姿勢に合わせた代替画像を用いて、同一視認性を高める技術が特許文献３に記載されている。【０００８】
また、動的歩行者と静的歩行者とを判別し、動的歩行者のみをアラート信号に変換する技術が特許文献４に記載されている。
【先行技術文献】
【特許文献】
【０００９】
【特許文献１】特開２０１５−９７７７号公報
【特許文献２】特表２０１５−５０１４５５号公報
【特許文献３】特許第５５１６９９８号公報
【特許文献４】特開２０１２−１４２８３２号公報
【発明の概要】
【発明が解決しようとする課題】
【００１０】
しかしながら、上記した特許文献１に開示された発明では、クルーズコントロールに限定し、オンオフ状態をドライバーに知らせ、先行車の存在を決まった形で知らせるだけであり昨今の多様化された車両制御機構に十分対応しているとは言い難い。【００１１】
具体的には、特許文献１に記載のクルーズコントロールを一例にとった場合、先行車の存在を通知するだけであり、その先行車が具体的に何を対象としたのかは通知していないためオートクルーズコントロールシステムのような自動追従機能にて追従している対象が使用者の認識と合致しているかわからない問題があった。【００１２】
また、特許文献２に開示された発明では切り出した画像を用い、先行車の認識情報を使用者に通知する面では特許文献１の問題を解決しているが、カメラで取得した原画像そのものを切り出して転送し表示させるため転送する情報量が多くなり、転送時間が長くなる。また、小領域内に原画像を表示させるため、取得したシーンによっては視認性が悪くなる可能性もある。【００１３】
また、特許文献３に開示された発明では、自車両の前方に複数の車種が異なる車両が存在する場合、それらの姿勢は、ほとんど同一であるから、対象とする車両をドライバーが特定することは困難である。【００１４】
また、特許文献４に開示された発明では、前方走行中の車両は、全て動的車両であるから、全てがアラート信号に変換さることになり、ドライバーが対象とする車両を特定することは困難である。【００１５】
本発明は、上述した問題に鑑みてなされたものであり、その目的は、自車両の周辺における制御対象車両を、ドライバーが的確に認識可能な認識制御対象車両報知装置を実現することである。
【課題を解決するための手段】
【００１６】
上記課題を解決するために、本発明は次のように構成される。【００１７】
認識制御対象車両報知装置において、自車両周囲の画像を取得する画像取得部と、上記画像取得部が取得した画像から認識制御対象車両の種別を認識する種別認識部と、自動運転情報を取得する自動運転情報取得部と、上記種別認識部で認識した種別および上記自動運転情報取得部で取得した自動運転情報に基づいて、報知情報を生成する報知情報生成部と、上記報知情報生成部により生成された報知情報を報知する報知部と、を備え、上記自動運転は、複数の自動運転レベルに分類され、上記報知情報生成部は、上記自車両が、上記複数の自動運転レベルのうちの予め定められた自動運転レベルの自動運転である場合に、上報知させるための制御信号を上記報知部に出力する。
【発明の効果】
【００１８】
本発明によれば、自車両の周辺における制御対象車両を、ドライバーが的確に認識可能な認識制御対象車両報知装置を実現することができる。
【図面の簡単な説明】
【００１９】
【図１】本発明に係る認識制御対象車両報知装置が搭載された車両のシステム構成の概略構成図である。
【図２】本発明の実施例における自動運転の動作フローである。
【図３】自動運転中に動作する実用例において車両を認識した場合の報知動作の一例を説明した図である。
【図４】自動運転であるかないかかわらず動作する実用例において車両を認識している状態にて自動運転中に遷移した場合の報知動作の一例を説明した図である。
【図５】報知する色や形状をデータして取り扱う際のテーブル管理の一例を説明した図である。
【図６】自動運転レベルの概要を説明した説明図である。
【発明を実施するための形態】
【００２０】
以下、本発明に係る実施形態について図面を参照して説明する。
【実施例】
【００２１】
図１は、本発明に係る認識制御対象車両報知装置が搭載された車両のシステム構成の概略構成図である。【００２２】
図１において、車両（自動車等）１には、主に、車両１の周辺の情報を取得し、その取得した情報を報知する認識制御対象報知システム２と、車両１を自動的に運転する自動運転システム３とが搭載されている。なお、自動運転システム３による自動運転については、後述する。【００２３】
認識制御対象報知システム２は、 主に、車両１が自動運転システム３による自動運転中か否かに関する自動運転情報を自動運転システム３から取得する自動運転情報取得部１３と、取得（認識）した画像から認識制御対象車両を認識する対象認識部１１と、認識した対象車両の種別（形状、色など）を認識する種別認識部１２と、種別認識部で認識した認識制御対象車両の種別に基づいて、報知用内容を生成する報知内容生成部（報知情報生成部）１４と、生成された報知用内容を報知（表示、音声出力など）する報知部１５と、カメラ等の外界画像（自車両周囲画像）を取得する外界画像取得部１０とを有しており、報知内容生成部（報知情報生成部）１４は、外界画像取得部１０から得られる情報と自動運転情報取得部１３から得られる自動運転情報とに基づいて制御信号を生成し、出力するように構成されている。【００２４】
図２は、本発明の実施例における自動運転の動作フローである。【００２５】
図２において、ステップＳ２０１において、外界画像認識取得部１０は、カメラ状態が正常化か否かを判断する。正常でないと判断した場合は、ステップＳ２０９に進み、報知部１５等により異常通知を行い、スタートに戻る。【００２６】
ステップＳ２０１において、カメラ状態が正常であると判断すると、ステップＳ２０２に進み、外界画像認識部１０が車両の周辺画像を取得する。次に、ステップＳ２０３において、制御対象認識システム２の各部が初期設定を行う。そして、ステップＳ２０４において、対象認識部１１は、道路の白線を検知し、ステップＳ２０５で道路上の立体物を検知する。そして、ステップＳ２０６において、先行車両のうちの制御対象車両を選定し、ステップＳ２０７に進む。【００２７】
ステップＳ２０７は、制御対象車両をドライバーが容易に特定可能な報知とするための処理ステップであり、図２の右側に示したステップＳ２１１からＳ２１５からなる。【００２８】
ステップＳ２１１において、外界画像取得部１０は自車両周辺情報取得し、自動運転情報取得部１３は、車両１が自動運転システム３による自動運転中か否かに関する自動運転情報を取得し、自車両周辺画像情報と自動運転情報とが対象認識部１１へ送信される。【００２９】
なお、外界画像取得部１０による画像情報の取得や自動運転情報取得部１３による自動運転情報の取得は、定期的に行ってもよいし、予め定めたタイミングで行ってもよい。また、外界画像取得部１０による画像情報の取得タイミングと自動運転情報取得部１３による自動運転情報の取得タイミングとは異なっていてもよいことは勿論である。【００３０】
次いで、認識制御対象報知システム２の対象認識部１１は送信された車両の周辺情報に基づいて、車両の周辺情報に存在する物体を認識し画像として切り出しし種別認識部１２に画像を送信する（ステップＳ２１２）。【００３１】
種別認識部１２は、対象認識部１１から送信された切り出した画像に基づいて、物体の形状を判定する（ステップＳ２１３）。【００３２】
種別認識部１２は、物体の形状を判定した場合、さらに対象認識部１１から送信された切り出した画像に基づいて、物体の色を判定する（ステップＳ２１４）。【００３３】
なお、外界画像取得部１０による周辺情報の取得に伴い形状の判定と色の判定タイミングは、異なっていてもよいことは勿論である。【００３４】
種別認識部１２は、物体の切り出し後、物体の形状、色を判定した場合、その物体情報や判定結果を報知内容生成部１４に送信する（ステップＳ２１５）。【００３５】
種別認識部１２から判定結果を受信した報知内容生成部１４は、送信された形状、色情報に従い報知内容を生成する（ステップＳ２１６）。【００３６】
報知内容生成部１４から判断結果を受信した報知部１５は、車両１のドライバーに対して物体の切り出し画像や物体の形状、色を含んだアイコンを制御信号として報知する（ステップＳ２０８）。【００３７】
なお、この報知部１５としては、例えば、メーターや液晶画面、表示（ＬＥＤ）ランプ、音声（ブザーを含む）発生装置、振動発生装置などが挙げられ、報知部１５による報知方法としては、メーターや液晶画面などの表示変更、ＬＥＤランプなどの光、音声などの音、振動などの発生などが考えられる。【００３８】
上述のような処理を繰り返すことにより、車両１に設けられた報知部１５に対して認識対象物を適切に報知することができる。【００３９】
なお、上記した実施形態では、報知部１５が、車両１のドライバーに対して表示や音声にて認識対象の物体の切り出し画像や物体の形状、色を含んだアイコンとして報知するとしたが、表示もしくは音声のどちらか一方のみの制御信号を生成して報知するようにしてもよいし、表示及び音声にて認識対象を報知してもよい。音声の一例としては、対象車両の形状と色を説明するものである。【００４０】
また、表示については、認識対象の形状のみ又は色のみを表示してもよく、音声についても、認識対象の形状のみ又は色のみを報知してもよい。【００４１】
また、認識対象物に対して報知を行うことを説明したが、報知対象物は２つに区分けすることができる。一つは、外界画像取得部１０にて画像を取得し、対象認識部１１にて対象物を判断する際にその対象物の情報を保持しておくだけの対象とする認識対象物である。他の一つは、認識対象物の情報を保持し、かつ自車両１の制御を行う対象とする制御対象物である。【００４２】
上記認識対象物と制御対象物との両方に対して報知するとしてもよいし、片方だけを報知するようにしてもよい。また、両方報知する際に、それぞれ、その報知内容を変えてもよい。【００４３】
また、報知内容生成部１４にて報知内容を生成する際の条件として自動運転情報取得部１３から得た情報を使ってもよい。【００４４】
例えば、自動運転システム３による自動運転中であると自動運転情報取得部１３が判断した場合のみに報知内容生成を行い、報知部１５に報知内容を送信するようにしてもよい。また、自動運転システム３による自動運転中でないと自動運転情報取得部１３が判断した場合と、自動運転中であると判断した場合とで生成する報知内容を変えて、報知部１５に報知内容を送信するようにしてもよい。【００４５】
なお、自動運転情報取得部１３から得た情報を使う場合は、車両１は自動運転システム３による自動運転を行う前の準備状態（すなわち、ドライバーによる手動運転の状態）から自動運転システム３による自動運転に切り替えられた否かを判断することになるが、自動運転への切り替えは、自車両１のドライバーによるスイッチ操作などにより手動で行われてもよいし、システムにより自動で行われてもよい。【００４６】
ところで、上記した自動運転システム３は、交通事故の低減、交通渋滞の緩和、環境負荷の低減、高齢者等の移動支援、運転の快適性の向上などを目的として、様々な自動運転機能により実現されており、それらの各自動運転機能から得られる情報に基づいて、自動運転中か否かを判断するための自動運転情報を得ることができる。また、それらの各自動運転機能は、一般に、ドライバーの寄与度や関与度などに応じて複数の自動運転レベル（例えば、レベル０〜４までの５段階レベル）に分類されている（図６参照）。【００４７】
ここで、本明細書において、自動運転とは、システムが車両の運転操作の全部もしくは一部を行う運転を意味し、例えば、図６で示す例では自動運転レベル１〜４が該当し、手動運転とは、基本的にドライバーが車両の運転操作を行う運転を意味し、例えば図６で示す例では自動運転レベル０が該当する。【００４８】
なお、図６に示す自動運転レベルや自動運転機能、それらの分類等は一例であり、本発明がこれに限定されないことは勿論である。【００４９】
上記のように、自動運転システム３による自動運転のなかでも、様々な自動運転レベルの自動運転が存在し、ドライバーが依然として制御対象報知を必要とする自動運転と、ドライバーが制御対象報知を必要としない自動運転とがあると考えられる。【００５０】
例えば、自動運転システム３による自動運転のうち、自動運転レベル１のＡＥＢ（自動緊急ブレーキ）作動時では、車両１周辺の物体との接触を回避するため、認識対象物、制御対象物について報知を行ってもよいと考えられる。【００５１】
ここで、自動運転レベル０とは、加速、操舵、制動をドライバーが行い、自動運転機能としては、アラウンドビュー、バックビュー、死角ビュー、ＬＤＷ（車線逸脱警報）、ふらつき警報、ＦＣＷ（前方衝突警報）がある。【００５２】
また、自動運転レベル１とは、加速（減速）、操舵、制動のいずれかを自動車が行う状態であり、安全運転支援システムである。自動運転機能としては、ＡＥＢ、緊急回避システム、自動駐車システム、ＡＣＣ（オートクルーズ）、ＬＫＳ（車線維持システム）、ＬＤＰ（車線逸脱防止支援システム）がある。【００５３】
また、自動運転レベル２とは、加速（減速）、操舵、制動のうち、複数の操作を同時に自動車が行い、ドライバーは常に動きを中止する必要がある状態であり、準自動運転システムである。自動運転機能としては、自動運転レベル０と自動運転レベル１との複合型である。【００５４】
また、自動運転レベル３とは、加速（減速）、操舵、制動の全てを自動車が行い、緊急時にのみ、ドライバーが対応する状態であり、準自動運転システムである。自動運転機能としては、半自動である。ただし、一部状況下では、自動運転レベル０と自動運転レベル１との機能の複合型である。【００５５】
また、自動運転レベル４とは、加速（減速）、操舵、制動を全てドラーバー以外が行い、ドライバーは全く関与しない状態であり、完全自動運転システムである。自動運転機能は、全自動である。【００５６】
なお、自動運転レベル２〜４において、ＡＥＢ作動時に警報のみが作動している場合でも自動運転レベル１と同様、認識対象物、制御対象物に対して報知したほうがよいと考えられる。【００５７】
また、自動運転レベル１の他の機能（自動駐車機能等）が作動している場合、ハンドルやアクセル制御がシステム任せ（システム責任）である場合には認識対象物、制御対象物について報知を行ってもよいと考えられるが、ハンドルやアクセル制御がドライバー任せ（ドライバー責任）である場合には認識対象物、制御対象物に対して何もしなくてもよいと考えられる。【００５８】
また、自動運転レベル２や自動運転レベル３では、例えば、ＡＣＣ（オートクルーズコントロール）やＬＤＰ（車線逸脱防止支援システム）は単体では一時的なハンドルやアクセル制御（例えば車両１を車線内に戻す）だけであるので、ハンドルやアクセル制御の全てをシステムに任せられる可能性のあるＬＫＳ（車線維持システム）との組み合わせである場合には、認識対象物、制御対象物について報知を行ってよいと考えられる。【００５９】
また、自動運転レベル４では、車両１の運転操作の全てをシステムが行う（完全な自動運転）ので、認識対象物、制御対象物について報知を行ってもよいと考えられる。【００６０】
上記のように、自動運転システム３による自動運転のなかでも、ドライバーが依然として認識対象物、制御対象物について報知を必要とする自動運転と、ドライバーが制御対象報知を必要としない自動運転とがある。このため、報知内容生成部１４は、自動運転情報取得部１３から送信された自動運転情報に基づいて、それらの自動運転レベルもしくは自動運転システム３により作動している自動運転機能を判断し、その自動運転レベルもしくは自動運転機能が予め定められた自動運転レベルもしくは自動運転機能である（すなわち、車両１が予め定められた自動運転レベルもしくは自動運転機能の自動運転に切り替わった）と判断した場合に、制御対象報知を行うための制御信号を出力するようにしてもよい。【００６１】
図３〜図５は報知動作を具体的に説明した図であり、図３は、自動運転中に動作する実用例において車両を認識した場合の報知動作の一例を説明した図であり、図４は自動運転であるかないかかわらず動作する実用例において車両を認識している状態にて自動運転中に遷移した場合の報知動作の一例を説明した図である。また、図５は、報知する形状や色をデータして取り扱う際のテーブル管理の一例を説明した図である。【００６２】
図３に示すように、自動運転中でのみ動作する実用例において前方車両を認識した場合、自動運転を開始する前は、報知部１５には、周辺の情報として何も表示していない（報知部１５の表示内容Ｓ３０１）。【００６３】
ある地点でドライバーもしくは制御対象報知システム２にて、自動運転システムが作動されて車両１が手動運転から自動運転モードに切り替えられ、自動運転情報取得部１３が自動運転に切り替えられた情報を取得すると、外界画像取得部１０により得た周辺情報１６を元に、対象認識部１１は取得していた周辺情報から前方に存在した車両を認識する。
そして、認識した車両のうち、認識制御対象車両の車両映像を切り出し画像１７として切り出しする。【００６４】
その後、その切り出し画像１７を元に、種別認識部１２が形状情報１８から形状を判断し、色情報１９から色を判断する。そして、報知内容生成部１４は、種別認識部１２の判断情報を元に、報知内容を生成し（図３には、報知内容は、例として複数の報知内容を示すが、生成する報知内容は、図示した例のうちの一つである）、報知部１５に報知内容を通知する。報知部１５は表示内容Ｓ３０２に示すように、色彩が施された車種形状画像１５Ａが表示される。なお、報知部１５の表示内容Ｓ３０２には、自車位置を示すマーク１５Ｂが示されているが、これは、必ずしも必要ではない。また、報知部１５は、音声にて、例えば、「前方の黄色い乗用車を追従対象としました」と報知する。【００６５】
上述した例は、自動運転モード中において、報知部１５に追従対象を報知する例であるが、自動運転モードではない状態においても前方車両を報知部１５に表示することもできる。【００６６】
図４は、車両を認識している状態にて自動運転中に遷移した場合の報知動作の一例を説明した図であり、自動運転モードではない状態においても前方車両を報知部１５に表示する例の説明図である。【００６７】
図４において、自動運転を開始する前にも周辺の認識した対象車両情報（認識制御対象車両以外に認識した車両の情報）が表示されている（報知部１５の表示内容Ｓ４０１)。【００６８】
ただし、表示内容Ｓ４０１の場合は、前方車両を認識しているが、どの色であるかまでは報知していない。【００６９】
ある地点でドライバーもしくは制御対象報知システム２にて手動運転から自動運転モードに切り替えられると、自動運転情報取得部１３が自動運転に切り替えられた情報を取得し、外界画像取得部１０により得た周辺情報を元に、対象認識部１１は取得していた周辺情報１６から、前方、側方に存在した車両を認識しその車両映像を画像１７として切り出しする。【００７０】
その切り出し画像１７を元に、種別認識部１２は、形状、色を判断し、報知内容生成部１４はこれらの情報を元に報知する内容を生成し、報知部１５に報知内容を通知する。【００７１】
報知部１５への報知内容は、認識した車両のすべてに対し、形状と色を通知する形にしてもよいし（表示内容Ｓ４０２（認識制御対象車両以外に認識した他の車両の情報も表示））、認識のみをした対象の形状のみを通知し色を通知せず、制御対象車両のみを形状および色を通知する形にしてもよい（表示内容Ｓ４０３（認識制御対象車両については形状及び色を生成し、認識制御対象車両以外に認識した車両については、形状及び色のうちの何れかを生成して報知））。【００７２】
なお、図３及び図４に示す例では、報知の方法として、図３は制御に必要な物体情報のみを報知するケースとして示し、図４は、制御に必要な物体と、認識している物体の両方を報知するケースを示した。【００７３】
また、図３は自動運転動作に移った際に報知動作するケースとし、図４は自動運転前においても報知動作をするケースを示した。図３、図４のどちらのようなケースにしてもよい。【００７４】
次に、図５を参照して、制御対象車両について色や形状のデータテーブル管理を説明する。【００７５】
図５に示すように、報知部１５における報知内容の生成を行う際に、色や形状の送信用データを取り扱うことになる。その際に、色情報を生成する場合、テーブルに、色とその色を示す数値とを対として持たせてもよいし（例１）、ＲＧＢなどの色を個々に持たせてもよい（例２）。【００７６】
形状情報についても同様に、形状と数値を対として持たせてもよい（例３）。また、色と形状情報とを対として、数値を持たせてもよい（例４）。【００７７】
以上のように、本発明の実施例によれば、自車両の周辺における認識制御対象車両を、ドライバーが的確に認識可能な認識制御対象車両報知装置を実現することができる。【００７８】
つまり、本発明の一実施例の認識制御対象報知システム２によれば、外界画像取得部１０にて得た画像情報を元に、対象認識部１１にて対象物を認識し、画像として切り出し、切り出した画像から種別認識部１２が対象物の色と形状を判断し、報知内容生成部１４が、対象物の形状と色とからなる報知内容を生成し、報知部１５を制御する制御信号を出力して、報知部１５に上記対象物の形状と色とからなる報知内容を報知することにより、使用者が車両制御における対象物の状態を的確に認知することができる。【００７９】
また、報知内容生成部１４は、自動運転システム３による自動運転中か否かに関する自動運転情報を取得し、自動運転情報に基づいて、報知する内容を変更することにより、使用者が認識対象および車両制御における対象の状態を的確に認知することができる。【００８０】
なお、本発明は上記した実施形態に限定されるものではなく、様々な変形が含まれる。
例えば、上記した実施形態は本発明を分かりやすく説明するために詳細に説明したものであり、必ずしも説明した全ての構成を備えるものに限定されるものではない。【００８１】
また、ある実施形態の構成の一部を他の実施形態の構成に置き換えることが可能であり、また、ある実施形態の構成に他の実施形態の構成を加えることも可能である。また、実施形態の構成の一部について、他の構成の追加・削除・置換をすることが可能である。【００８２】
また、制御線や情報線は説明上必要と考えられるものを示しており、製品上必ずしも全ての制御線や情報線を示しているとは限らない。実際には殆ど全ての構成が相互に接続されていると考えてもよい。
【符号の説明】
【００８３】
１・・・車両、２・・・制御対象報知システム、３・・・自動運転システム、１０・・・外界画像情報取得部、１１・・・対象認識部、１２・・・種別認識部、１３・・・自動運転情報取得部、１４・・・報知内容生成部（報知情報生成部）、１５・・・報知部、１６・・・周辺情報、１７・・・切り出し画像、１８・・・形状情報、１９・・・報知内容
【図１】
0006619521.tif 000002
【図２】
0006619521.tif 000003
【図３】
0006619521.tif 000004
【図４】
0006619521.tif 000005
【図５】
0006619521.tif 000006
【図６】
0006619521.tif 000007