(57)【要約】【課題】検出した他車両から人物が降車する可能性を見極めて、迅速に当該人物を検出することができる認識処理装置、認識処理方法及び認識処理プログラムを提供する。【解決手段】認識処理装置１０は、遠赤外線カメラ２０が自車両の周囲を撮影した第１撮影データを取得する映像取得部１１と、自車両の周囲で駐停車している他車両を検出する他車両検出部１２と、第１撮影データの他車両に対応する領域の熱分布から、他車両の動作に基づく放熱を検出する熱検出部１３と、放熱を検出したときに、他車両近傍に対して優先的に人物認識を実行して人物を検出する人物検出部１４とを備える。【選択図】図１
2020027380.tif 000002
【特許請求の範囲】
【請求項１】
遠赤外線カメラが自車両の周囲を撮影した第１撮影データを取得する映像取得部と、
自車両の周囲で駐停車している他車両を検出する他車両検出部と、
前記第１撮影データの前記他車両に対応する領域の熱分布から、前記他車両の動作に基づく放熱を検出する熱検出部と、
前記放熱を検出したときに、前記他車両近傍に対して優先的に人物認識を実行して人物を検出する人物検出部と
を備える認識処理装置。
【請求項２】
前記他車両検出部は、前記第１撮影データから前記他車両を検出し、
前記人物検出部は、前記第１撮影データから前記人物を検出する
請求項１記載の認識処理装置。
【請求項３】
前記映像取得部は、可視光カメラが自車両の周囲を撮影した第２撮影データを更に取得し、
前記他車両検出部は、前記第１撮影データから前記他車両を検出し、
前記人物検出部は、前記第２撮影データから前記人物を検出する
請求項１記載の認識処理装置。
【請求項４】
前記映像取得部は、可視光カメラが自車両の周囲を撮影した第２撮影データを更に取得し、
前記他車両検出部は、前記第２撮影データから前記他車両を検出し、
前記人物検出部は、前記第１撮影データから前記人物を検出する
請求項１記載の認識処理装置。
【請求項５】
前記映像取得部は、可視光カメラが自車両の周囲を撮影した第２撮影データを更に取得し、
前記他車両検出部は、前記第２撮影データから前記他車両を検出し、
前記人物検出部は、前記第２撮影データから前記人物を検出する
請求項１記載の認識処理装置。
【請求項６】
前記人物検出部は、前記放熱を検出したときに、前記他車両近傍の範囲に対し、乗降者認識辞書を用いた人物認識を優先的に実行して人物を検出する、
請求項１乃至請求項５のいずれか１項記載の認識処理装置。
【請求項７】
前記熱検出部は、前記第１撮影データの前記他車両の動作によって発熱する領域の熱分布から、前記他車両の動作に基づく放熱を検出する、
請求項１乃至請求項６のいずれか１項記載の認識処理装置。
【請求項８】
前記人物検出部が前記人物を検出したときに、自車両の運転者に前記人物を検出したことを通知する通知制御部を更に備える
請求項１乃至請求項７のいずれか１項記載の認識処理装置。
【請求項９】
遠赤外線カメラが自車両の周囲を撮影した第１撮影データを取得するステップと、
自車両の周囲で駐停車している他車両を検出するステップと、
前記第１撮影データの前記他車両に対応する領域の熱分布から、前記他車両の動作に基づく放熱を検出するステップと、
前記放熱を検出したときに、前記他車両近傍に対して優先的に人物認識を実行して人物を検出するステップと
を有する認識処理方法。
【請求項１０】
コンピュータに、
遠赤外線カメラが自車両の周囲を撮影した第１撮影データを取得する手順と、
自車両の周囲で駐停車している他車両を検出する手順と、
前記第１撮影データの前記他車両に対応する領域の熱分布から、前記他車両の動作に基づく放熱を検出する手順と、
前記放熱を検出したときに、前記他車両近傍に対して優先的に人物認識を実行して人物を検出する手順と
を実行させるための認識処理プログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、認識処理装置、認識処理方法及び認識処理プログラムに関する。
【背景技術】
【０００２】
自車両の周囲を撮影した映像から他車両、人物等を検出し、運転者に通知する技術が知られている。例えば、特許文献１には、駐停車車両の背後などから飛び出す可能性のある歩行者を迅速に検出する技術が開示されている。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１７−１６７６０８号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
自車両の進行方向に駐停車している（特に、路上に駐停車している）他車両の多くは、一時的な停止である停車をしていることが多く、停車した他車両から人が降りてくる可能性がある。しかしながら、特許文献１記載の技術では、検出した他車両から人物が降車する可能性を見極めて、迅速に当該人物を検出することが困難であった。
【０００５】
本発明は、このような問題を解決するためになされたものであり、検出した他車両から人物が降車する可能性を見極めて、迅速に当該人物を検出することができる認識処理装置、認識処理方法及び認識処理プログラムを提供することを目的とする。
【課題を解決するための手段】
【０００６】
本発明は、遠赤外線カメラが自車両の周囲を撮影した第１撮影データを取得する映像取得部と、自車両の周囲で駐停車している他車両を検出する他車両検出部と、第１撮影データの当該他車両に対応する領域の熱分布から、当該他車両の動作に基づく放熱を検出する熱検出部と、当該放熱を検出したときに、当該他車両近傍に対して優先的に人物認識を実行して人物を検出する人物検出部とを備える認識処理装置を提供する。
【０００７】
また、本発明は、遠赤外線カメラが自車両の周囲を撮影した第１撮影データを取得するステップと、自車両の周囲で駐停車している他車両を検出するステップと、第１撮影データの当該他車両に対応する領域の熱分布から、当該他車両の動作に基づく放熱を検出するステップと、当該放熱を検出したときに、当該他車両近傍に対して優先的に人物認識を実行して人物を検出するステップとを有する認識処理方法を提供する。
【０００８】
また、本発明は、コンピュータに、遠赤外線カメラが自車両の周囲を撮影した第１撮影データを取得する手順と、自車両の周囲で駐停車している他車両を検出する手順と、第１撮影データの当該他車両に対応する領域の熱分布から、当該他車両の動作に基づく放熱を検出する手順と、当該放熱を検出したときに、当該他車両近傍に対して優先的に人物認識を実行して人物を検出する手順とを実行させるための認識処理プログラムを提供する。
【発明の効果】
【０００９】
本発明により、検出した他車両から人物が降車する可能性を見極めて、迅速に当該人物を検出する認識処理装置、認識処理方法及び認識処理プログラムを提供することができる。
【図面の簡単な説明】
【００１０】
【図１】実施の形態に係る認識システム１の概略構成を示すブロック図である。
【図２】実施の形態に係る認識処理方法の処理手順を示すフローチャートである。
【図３】実施の形態に係る遠赤外線画像の熱分布を説明するための図である。
【図４】実施の形態に係る遠赤外線画像の熱分布を説明するための図である。
【発明を実施するための形態】
【００１１】
以下、図面を参照して本実施の形態に係る認識処理装置及び認識処理方法について説明する。
まずは、本実施の形態に係る認識処理装置を備えた認識システムの構成について説明する。
【００１２】
図１は、本実施の形態に係る認識システム１の概略構成を示すブロック図である。
認識システム１は、車両において用いられるシステムであり、認識処理装置１０、遠赤外線カメラ２０、可視光カメラ３０、辞書データ記憶装置４０、表示装置５０などを備える。
【００１３】
認識処理装置（制御装置）１０は、遠赤外線カメラ２０又は可視光カメラ３０が撮影した映像から認識システム１を搭載した自車両の周辺で駐停車している他車両を検出し、当該他車両の動作に基づく放熱（発熱）を検出する。なお、車両の動作に基づく放熱とは、例えば、車両前部のボンネットやフロントグリルからの放熱、車両後部の排気筒（排気口）からの放熱、タイヤ及びその周辺からの放熱などを指す。また、夜間であれば、ヘッドライト、テールランプからの放熱も含まれる。
【００１４】
また、認識処理装置１０は、動作に基づく放熱をしている他車両の近傍において人物を検出し、必要に応じて映像又は音声により自車両の運転者に通知をする。また、認識処理装置１０は、認識システム１全体の動作の制御を行う。
【００１５】
遠赤外線カメラ２０、可視光カメラ３０は、例えば、自車両のフロントグリル又はその周辺部分に設けられ、自車両の周囲、特に、自車両の進行方向の遠赤外線映像（第１撮影データ）、可視光映像（第２撮影データ）を撮影して認識処理装置１０に出力する。
なお、本実施の形態に係る認識システム１では、遠赤外線映像、可視光映像の両方を用いて他車両及び人物を検出するときは、事前にキャリブレーションなどによりこれらの映像における被写体位置の対応関係を明確にしておくことが望ましい。
【００１６】
また、本実施の形態に係る認識システム１では、遠赤外線カメラ２０、可視光カメラ３０の２台のカメラを用いる代わりに、遠赤外線カメラ及び可視光カメラの機能を兼ね備えた１台のカメラを用いて、赤外線映像及び可視光映像をそれぞれ撮影するようにしても良いし、可視領域及び遠赤外領域を含む映像を撮影することができる１台のカメラを用いて、撮影後に当該映像から可視光映像及び遠赤外線映像を分離するようにしても良い。
【００１７】
辞書データ記憶装置４０は、車両検出辞書（車両認識辞書）、人物検出辞書（人物認識辞書）、乗降者検出辞書（乗降者認識辞書）などの様々な検出辞書を記憶する。これらの辞書は車両、歩行者などの人物、車両の乗降者が写った映像（画像）などを機械学習して作成したもので、認識処理装置１０が、遠赤外線映像又は可視光映像から他車両、歩行者、他車両の乗降者を検出するときに用いられる。
【００１８】
例えば、乗降者検出辞書は、人物が車両から降りるときのシートに座っている状態から車両の外に立つ状態までの姿勢変化の映像及び人物が車両に乗るときの車両の外に立っている状態からシートに座る状態までの姿勢変化の映像を当該車両の前方又は後方から撮影し、それらの映像を機械学習して作成したものである。
表示装置５０は、認識処理装置１０の制御に従い、映像を表示して自車両の運転者に通知する。
【００１９】
なお、認識処理装置１０は、上記動作を行うために、映像取得部１１、他車両検出部１２、熱検出部１３、人物検出部１４、通知制御部１５、表示制御部１６、バスライン１７などを備える。
【００２０】
映像取得部１１は、遠赤外線カメラ２０、可視光カメラ３０から遠赤外線映像、可視光映像を入力し、これらの映像に各種の画像処理を施す。
他車両検出部１２は、辞書データ記憶装置４０から読み出した車両検出辞書を用いて、遠赤外線映像又は可視光映像から自車両周辺の他車両を検出する。
熱検出部１３は、自車両周辺で駐停車している他車両の遠赤外線映像、すなわち、熱画像における熱分布から、当該他車両の動作に基づく放熱を検出する。
【００２１】
人物検出部１４は、自車両周辺で駐停車している他車両から動作に基づく放熱を検出したときに、人物検出辞書又は乗降者検出辞書を用いて、遠赤外線映像又は可視光映像の当該他車両近傍領域から、当該他車両から降車した人物、降車しようとしている人物又は当該他車両に乗車しようとしている人物を検出する。他車両近傍領域とは、例えば、当該他車両の周囲２〜３ｍまでに対応する領域である。この領域の大きさはもちろん変更可能である。
【００２２】
また、人物検出部１４は、自車両周辺の駐停車している他車両から動作に基づく放熱を検出しなかったときに、人物検出辞書を用いて、遠赤外線映像又は可視光映像のフレーム全体又はその一部から歩行者などの人物を検出する。
通知制御部１５は、検出した人物に関する情報を音声により自車両の運転者に通知するための制御を行う。音声は認識処理装置１０から出力されても良いし、表示装置５０など認識システム１内外の装置から出力されても良い。
【００２３】
表示制御部１６は、検出した人物に関する情報を映像又は画像により自車両の運転者に通知するための制御を行う。当該映像等は表示装置５０に表示される。
なお、認識処理装置１０の一部の構成については、通信手段を介して接続される認識システム１外の装置など（図示せず）を代用しても良い。例えば、他車両検出部１２、人物検出部１４については、通信手段を介して接続される認識システム１外の認識サーバを代用しても良い。
【００２４】
また、認識処理装置１０が実現する各構成要素は、例えば、コンピュータである認識処理装置１０が備える演算装置（図示せず）の制御によって、プログラムを実行することによって実現できる。より具体的には、認識処理装置１０は、記憶部（図示せず）に格納したプログラムを主記憶装置（図示せず）にロードし、演算装置の制御によってプログラムを実行して実現する。
【００２５】
また、各構成要素は、プログラムによるソフトウェアで実現することに限ることなく、ハードウェア、ファームウェア及びソフトウェアのうちのいずれかの組み合わせなどにより実現しても良い。
上述したプログラムは、様々なタイプの非一時的なコンピュータ可読媒体（non-transitory computer readable medium）を用いて格納され、認識処理装置１０に供給することができる。非一時的なコンピュータ可読媒体は、様々なタイプの実体のある記録媒体（tangible storage medium）を含む。
【００２６】
非一時的なコンピュータ可読媒体の例は、磁気記録媒体（例えば、フレキシブルディスク、磁気テープ、ハードディスクドライブ）、光磁気記録媒体（例えば、光磁気ディスク）、ＣＤ−ＲＯＭ（Read Only Memory）、ＣＤ−Ｒ、ＣＤ−Ｒ／Ｗ、半導体メモリ（例えば、マスクＲＯＭ、ＰＲＯＭ（Programmable ROM）、ＥＰＲＯＭ（Erasable PROM）、フラッシュＲＯＭ、ＲＡＭ（random access memory））を含む。
【００２７】
また、プログラムは、様々なタイプの一時的なコンピュータ可読媒体（transitory computer readable medium）によって認識処理装置１０に供給されても良い。一時的なコンピュータ可読媒体の例は、電気信号、光信号及び電磁波を含む。一時的なコンピュータ可読媒体は、電線及び光ファイバなどの有線通信路、又は、無線通信路を介して、プログラムを認識処理装置１０に供給できる。
【００２８】
次に、本実施の形態に係る認識システム１の動作、すなわち、認識処理方法について説明する。
図２は、本実施の形態に係る認識処理方法の処理手順を示すフローチャートである。
認識システム１が動作を開始すると、遠赤外線カメラ２０、可視光カメラ３０が自車両の進行方向、例えば、自車両の前方の遠赤外線映像、可視光映像を撮影し、映像取得部１１がこれらの映像を取得する（ステップＳ１０）。なお、遠赤外線映像、可視光映像の撮影は、自車両が走行しているとき、駐停車しているときのいずれにおいても可能である。
【００２９】
次に、他車両検出部１２が、車両検出辞書を用いて遠赤外線映像又は可視光映像から他車両を検出する（ステップＳ２０）。他車両の検出には通常の画像認識処理を用いれば良い。
そして、他車両を検出したかを判定し（ステップＳ３０）、他車両を検出したとき（ステップＳ３０のＹｅｓ）には、当該他車両が駐停車しているかを判定する（ステップＳ４０）。
【００３０】
他車両が駐停車しているかを判定するときは、具体的には、当該他車両が停止しているか、また、当該他車両の位置、状態がどのようになっているかを判定基準とする。
例えば、検出した他車両とその周囲の物体（路面、建造物など）との位置関係が一定であるときは、当該他車両は停止していると判定する。
【００３１】
また、停止している他車両が、自車両の走行車線よりも左側にあるとき、車道外側線を跨いでいるとき、ハザードランプを点灯しているとき、ブレーキランプが点灯していないときに、当該他車両は駐停車していると判定する。
なお、検出した他車両が対向車である場合、特に、車道中央線がないような道路環境における対向車についても、同様に判定をすることができる。
【００３２】
検出した他車両が駐停車していると判定したとき（ステップＳ４０のＹｅｓ）は、熱検出部１３が遠赤外線画像の当該他車両の領域の熱分布に基づいて、当該他車両からの放熱を検出する（ステップＳ５０）。
図３、４は、本実施の形態に係る遠赤外線画像の熱分布を説明するための図である。図３、４では、図面を分りやすくするために、輝度の高い領域、すなわち、温度の高い領域にハッチングを付している。
【００３３】
図３は、他車両２００が自車両と同じ方向を向いているときの図であり、排気筒（排気口）、タイヤなどの部分が当該他車両の動作に基づく放熱により温度が高くなっている。図４は、他車両３００が自車両と逆方向を向いているときの図である。ボンネット、フロントグリル、タイヤなどの部分が同様に温度が高くなっている。なお、夜間であれば、テールランプ、ヘッドライトなどの部分の温度が高くなっていることもある。
【００３４】
次に、当該他車両が動作に基づく放熱をしているか判定する（ステップＳ６０）。ここでは、図３、４でハッチングを付した部分がその周辺部分や路面の温度などよりも所定値以上温度が高い、例えば、５℃以上温度が高ければ動作に基づく放熱をしていると判定する。言い換えると、他車両において、動作することで発熱する箇所が他の部分に比べて相対的に温度が高い場合に、動作に基づく放熱をしていると判定する。
【００３５】
そして、当該他車両が動作に基づく放熱をしていると判定したとき（ステップＳ６０のＹｅｓ）は、人物検出部１４が遠赤外線映像又は可視光映像の当該他車両の近傍領域を優先的に検出対象領域にして、辞書データ記憶装置４０から読み出した人物検出辞書又は乗降者検出辞書を用いて、当該他車両の乗降者を検出する（ステップＳ７０）。乗降者の検出にも通常の画像認識処理を用いれば良い。乗降者検出辞書を用いれば、乗降者をより精度良く検出することができる。
【００３６】
また、乗降者は歩行者よりも姿勢の変化が大きいので、複数フレームの人物の姿勢の変化に基づいて乗降者を検出しても良い。検出した人物の画像における高さに基づいて、当該人物を乗降者又は歩行者と判別しても良い。
また、人物検出部１４は、当該他車両の近傍領域を優先的に検出対象領域にして、当該他車両の乗降者を検出した後に（又は、検出しなかった後に）、遠赤外線映像又は可視光映像のフレーム全体又はその一部を検出対象領域にして、歩行者などを検出しても良い。
【００３７】
また、当該他車両が動作に基づく放熱をしていないと判定したとき（ステップＳ６０のＮｏ）は、人物検出部１４が遠赤外線映像又は可視光映像のフレーム全体又はその一部を検出対象領域にして、辞書データ記憶装置４０から読み出した人物検出辞書を用いて、歩行者などを検出する（ステップＳ８０）。歩行者の検出にも通常の画像認識処理を用いれば良い。ステップＳ８０では、映像（画像）において、人間の存在する可能性がある範囲を、例えば、エッジ検出処理などによって特定しても良い。
【００３８】
次に、ステップＳ７０又はステップＳ８０において、他車両の乗降者、歩行者などを検出したかを判定する（ステップＳ９０）。
乗降者、歩行者などを検出したと判定したとき（ステップＳ９０のＹｅｓ）は、通知制御部１５が音声などにより、自車両の運転者に乗降者などを検出したことを通知し、又は、表示制御部１６が表示装置５０に乗降者などを検出した旨を表示する（ステップＳ１００）。
【００３９】
そして、認識処理方法を終了するかを判定し（ステップＳ１１０）、終了すると判定したとき（ステップＳ１１０のＹｅｓ）は処理を終了し、終了しないと判定したとき（ステップＳ１１０のＮｏ）は、例えば、次の映像を取得する（ステップＳ１０）ようにする。
【００４０】
なお、他車両検出部１２が他車両を検出しなかったとき（ステップＳ３０のＮｏ）、検出した他車両が駐停車していないと判定したとき（ステップＳ４０のＮｏ）も、人物検出部１４が遠赤外線映像又は可視光映像の各フレームの全体又は一部を検出対象領域にして歩行者などを検出する（ステップＳ８０）。
【００４１】
また、乗降者、歩行者などを検出しないと判定したとき（ステップＳ９０のＮｏ）は、認識処理方法を終了するかを判定する（ステップＳ１１０）。
このように、本実施の形態に係る認識システム１又は認識処理方法は、映像から検出した他車両からの放熱の有無に基づいて、当該他車両から人物が降車する可能性を見極めて、迅速に当該人物を検出することができる。
【００４２】
なお、本実施の形態に係る認識システム１又は認識方法では、いろいろな追加、修正又は変更が可能である。
【００４３】
上述したように、他車両検出部１２及び人物検出部１４はそれぞれ遠赤外線映像及び可視光映像を用いて他車両及び人物（乗降者、歩行者など）を検出することができるが、遠赤外線映像又は可視光映像の一方だけを用いて他車両及び人物を検出することもできる。例えば、遠赤外線映像を用いて他車両を検出し、可視光映像を用いて人物を検出するようなこともできる。
【００４４】
また、他車両検出部１２及び人物検出部１４は遠赤外線映像だけを用いて他車両及び人物を検出することもできる。このときは、可視光映像は不要となり、更には、可視光カメラ３０も不要となる。すなわち、認識システム１は、可視光カメラ３０を備えないような構成であっても良い。
【００４５】
また、検出した他車両が動作に基づく放熱をしているかを判定するとき（ステップＳ６０）に、他車両のどの部分が放熱しているかに応じて、その後の人物検出部１４の処理（ステップＳ７０、ステップＳ８０）を選択しても良い。
【００４６】
例えば、排気筒付近で放熱しているときは、エンジンが動作中であるか、エンジン停止後に時間が経過していないとして、乗降者の検出（ステップ７０）を優先して行い、排気筒付近で放熱していないときは、エンジン停止から時間が経過しているとして歩行者の検出（ステップＳ８０）を行っても良い。
【００４７】
また、排気筒付近、タイヤ付近でともに放熱しているときは、エンジンが動作中であるか、エンジン停止から時間が経過しておらず、更に、走行停止から時間が経過していないとして、乗降者の検出（ステップ７０）を優先して行い、排気筒付近で放熱しているが、タイヤ付近で放熱していないときは、エンジンが動作中であるか、エンジン停止から時間が経過しておらず、しかしながら、走行停止から時間が経過しているとして歩行者の検出（ステップＳ８０）を行っても良い。
【００４８】
また、タイヤ付近で放熱しているときは、走行停止から時間が経過していないとして、乗降者の検出（ステップ７０）を優先して行い、タイヤ付近で放熱していないときは、走行停止から時間が経過しているとして歩行者の検出（ステップＳ８０）を行っても良い。
【００４９】
また、検出した他車両が動作に基づく放熱をしているか判定する（ステップＳ６０）ときに、排気筒、タイヤなどの部分と、周辺部分、路面の温度などとの比較に基づいて判定する代わりに、排気筒、タイヤなどの部分の検出温度に基づいて判定しても良い。例えば、排気筒の検出温度が所定値（例えば、４０℃）以上であるときに、検出した他車両が動作に基づく放熱をしていると判定しても良い。
また、検出した他車両が動作に基づく放熱をしているか判定する（ステップＳ６０）ときに、当該他車両の温度が高い部分の範囲に基づいて判定しても良い。
【００５０】
また、認識システム１の構成は、上記に限られるものではなく、複数の装置、例えば、認識処理装置１０及び辞書データ記憶装置４０を一体化して、辞書データ記憶部を備えた認識処理装置としても良い。また、認識システム１の全ての構成を一体化して、遠赤外線カメラ、可視光カメラ、辞書データ記憶部、表示部を備えた認識処理装置としても良い。
また、自車両における利用も、自車両に一部又は全部が搭載されている形態に加えて運搬可能又は後付け可能に自車両に搭載されている形態であっても良い。
【００５１】
また、他車両検出部１２、人物検出部１４は、車両、人物などの画像を機械学習して作成した辞書を用いる画像認識に代えて、又は、機械学習して作成した辞書を用いる画像認識に加えて、例えば、他車両、人物などのテンプレートを用いたパターンマッチングなどの別の画像認識を行うようにしても良い。
【００５２】
以上、説明したように、本実施の形態に係る認識処理装置１０は、遠赤外線カメラ２０が自車両の周囲を撮影した第１撮影データを取得する映像取得部１１と、自車両の周囲で駐停車している他車両を検出する他車両検出部１２と、第１撮影データの当該他車両に対応する領域の熱分布から、他車両の動作に基づく放熱を検出する熱検出部１３と、当該放熱を検出したときに、他車両近傍に対して優先的に人物認識を実行して人物を検出する人物検出部１４とを備えるものである。
【００５３】
また、本実施の形態に係る認識処理装置１０は、他車両検出部１２が第１撮影データから他車両を検出し、人物検出部１４が第１撮影データから人物を検出することも可能である。
また、本実施の形態に係る認識処理装置１０は、映像取得部１１は可視光カメラ３０が自車両の周囲を撮影した第２撮影データを更に取得し、他車両検出部１２が第１撮影データから他車両を検出し、人物検出部１４が第２撮影データから人物を検出することも可能である。
【００５４】
また、本実施の形態に係る認識処理装置１０は、映像取得部１１は可視光カメラ３０が自車両の周囲を撮影した第２撮影データを更に取得し、他車両検出部１２が第２撮影データから他車両を検出し、人物検出部１４が第１撮影データから人物を検出することも可能である。
また、本実施の形態に係る認識処理装置１０は、映像取得部１１は可視光カメラ３０が自車両の周囲を撮影した第２撮影データを更に取得し、他車両検出部１２が第２撮影データから他車両を検出し、人物検出部１４が第２撮影データから人物を検出することも可能である。
【００５５】
また、本実施の形態に係る認識処理装置１０は、人物検出部１４は、熱検出部１３が当該放熱を検出したときに、他車両近傍の範囲に対し、乗降者認識辞書を用いた人物認識を優先的に実行して人物を検出することも可能である。
また、本実施の形態に係る認識処理装置１０は、熱検出部１３が、第１撮影データの他車両に対応する領域の熱分布の範囲から、当該他車両の動作に基づく放熱を検出することも可能である。
【００５６】
また、本実施の形態に係る認識処理装置１０は、人物検出部１４が人物を検出したときに、自車両の運転者に人物を検出したことを通知する通知制御部１５を更に備えることも可能である。
【００５７】
また、本実施の形態に係る認識処理方法は、遠赤外線カメラ２０が自車両の周囲を撮影した第１撮影データを取得するステップＳ１０と、自車両の周囲で駐停車している他車両を検出するステップＳ２０と、第１撮影データの当該他車両に対応する領域の熱分布から、他車両の動作に基づく放熱を検出するステップＳ５０と、放熱を検出したときに、他車両近傍に対して優先的に人物認識を実行して人物を検出するステップＳ７０とを有するものである。
【符号の説明】
【００５８】
１    認識システム
１０    認識処理装置（制御装置）
１１    映像取得部
１２    他車両検出部
１３    熱検出部
１４    人物検出部
１５    通知制御部
１６    表示制御部
２０    遠赤外線カメラ
３０    可視光カメラ
４０    辞書データ記憶装置
５０    表示装置
２００、３００    他車両
【図１】
2020027380.tif 000003
【図２】
2020027380.tif 000004
【図３】
2020027380.tif 000005
【図４】
2020027380.tif 000006