(57)【要約】【課題】複数のカメラそれぞれの映像データに基づいて各処理に適した画像データを統合する。【解決手段】所定の被写体が撮影された、第１の連続する複数の画像フレームを取得し、第１の選択条件に基づいて前記第１の連続する複数の画像フレームから一つの第１の画像フレームを選択し、当該第１の画像フレームを用いて前記所定の被写体の画像データを含んだ第１の画像データを生成し、前記所定の被写体の所定の部分領域が撮影された、前記第１の連続する複数の画像フレームに対応した第２の連続する複数の画像フレームを取得し、前記第１の選択条件とは異なる第２の選択条件に基づいて前記第２の連続する複数の画像フレームから一つの第２の画像フレームを選択し、当該第２の画像フレームを用いて前記部分領域の情報を含んだ第２の画像データを生成し、前記第１の画像データと前記第２の画像データとを統合した記録画像データを生成する。【選択図】図１
2020135406.tif 000002
【特許請求の範囲】
【請求項１】
所定の被写体が撮影された、第１の連続する複数の画像フレームを第１の撮影部から取得する第１の画像フレーム取得部と、
第１の選択条件に基づいて前記第１の連続する複数の画像フレームから一つの第１の画像フレームを選択し、当該第１の画像フレームを用いて前記所定の被写体の画像データを含んだ第１の画像データを生成する第１の画像データ生成部と、
前記所定の被写体の所定の部分領域が撮影された、前記第１の連続する複数の画像フレームに対応した第２の連続する複数の画像フレームを第２の撮影部から取得する第２の画像フレーム取得部と、
前記第１の選択条件とは異なる第２の選択条件に基づいて前記第２の連続する複数の画像フレームから一つの第２の画像フレームを選択し、当該第２の画像フレームを用いて前記部分領域の情報を含んだ第２の画像データを生成する第２の画像データ生成部と、
前記第１の画像データと前記第２の画像データとを統合した記録画像データを生成する記録画像データ生成部と、
と備える、記録画像データ生成装置。
【請求項２】
前記所定の被写体は、車両であり、
前記部分領域は、ナンバープレートであり、
前記第２の画像データ生成部は、
前記第２の画像フレームを用いて識別したナンバープレート情報を前記部分領域の情報として得るナンバープレート情報識別部を備える、
請求項１に記載の記録画像データ生成装置。
【請求項３】
前記所定の被写体は、車両であり、
前記部分領域は、前記車両の運転者の顔であり、
前記第２の画像データ生成部は、
前記第２の画像フレームを用いて識別した運転者の顔情報を前記部分領域の情報として得る顔情報識別部を備える、
請求項１に記載の記録画像データ生成装置。
【請求項４】
前記第１の連続する複数の画像フレームは、カラー画像フレームであり、
前記第２の連続する複数の画像フレームは、モノクロ画像フレームである、
請求項１に記載の記録画像データ生成装置。
【請求項５】
前記第１の選択条件は、車両検出開始時刻から車両検出終了時刻までの所定のタイミングに撮影されたという条件である、
請求項１に記載の記録画像データ生成装置。
【請求項６】
前記第１の選択条件は、ナンバープレート位置が所定の位置に到達したという条件である、
請求項１に記載の記録画像データ生成装置。
【請求項７】
前記第１の選択条件は、ナンバープレートサイズが所定のサイズに到達したという条件である、
請求項１に記載の記録画像データ生成装置。
【請求項８】
前記第２の選択条件は、ナンバープレート情報の識別精度が閾値を超えるという条件である、
請求項１に記載の記録画像データ生成装置。
【請求項９】
所定の被写体が撮影された、第１の連続する複数の画像フレームを第１の撮影部から取得することと、
第１の選択条件に基づいて前記第１の連続する複数の画像フレームから一つの第１の画像フレームを選択し、当該第１の画像フレームを用いて前記所定の被写体の画像データを含んだ第１の画像データを生成することと、
前記所定の被写体の所定の部分領域が撮影された、前記第１の連続する複数の画像フレームに対応した第２の連続する複数の画像フレームを第２の撮影部から取得することと、
前記第１の選択条件とは異なる第２の選択条件に基づいて前記第２の連続する複数の画像フレームから一つの第２の画像フレームを選択し、当該第２の画像フレームを用いて前記部分領域の情報を含んだ第２の画像データを生成する第２の画像データ生成部と、
前記第１の画像データと前記第２の画像データとを統合した記録画像データを生成することと、
と含む、記録画像データ生成方法。
【請求項１０】
コンピュータを、
所定の被写体が撮影された、第１の連続する複数の画像フレームを第１の撮影部から取得する第１の画像フレーム取得部と、
第１の選択条件に基づいて前記第１の連続する複数の画像フレームから一つの第１の画像フレームを選択し、当該第１の画像フレームを用いて前記所定の被写体の画像データを含んだ第１の画像データを生成する第１の画像データ生成部と、
前記所定の被写体の所定の部分領域が撮影された、前記第１の連続する複数の画像フレームに対応した第２の連続する複数の画像フレームを第２の撮影部から取得する第２の画像フレーム取得部と、
前記第１の選択条件とは異なる第２の選択条件に基づいて前記第２の連続する複数の画像フレームから一つの第２の画像フレームを選択し、当該第２の画像フレームを用いて前記部分領域の情報を含んだ第２の画像データを生成する第２の画像データ生成部と、
前記第１の画像データと前記第２の画像データとを統合した記録画像データを生成する記録画像データ生成部と、
と備える記録画像データ生成装置として機能させるためのプログラム。
【発明の詳細な説明】
【技術分野】
【０００１】
本発明は、記録画像データ生成装置、記録画像データ生成方法およびプログラムに関する。
【背景技術】
【０００２】
従来、被写体を撮影して得られる映像データを記録する技術が知られている。例えば、同一の被写体をカラーカメラおよびモノクロカメラによって時系列に沿って撮影し、撮影によって得られたカラー映像データおよびモノクロ映像データを一つの映像データとして統合する技術が開示されている（例えば、特許文献１参照。）。これによって、同期した２種類の性質の異なる映像データを出力することが可能となる。
【先行技術文献】
【特許文献】
【０００３】
【特許文献１】特開２０１７−６８４９１号公報
【発明の概要】
【発明が解決しようとする課題】
【０００４】
ここで、カラー映像データのうち所定の第１の処理に必要なカラー画像フレームの撮影タイミングと、モノクロ映像データのうち所定の第２の処理に必要なモノクロ画像フレームの撮影タイミングとが一致するとは限らない。例えば、目視による確認に利用されるカラー画像フレームは、運転者および車両全体の様子を確認しやすい画像フレームであるのが望ましい。一方、ナンバープレート情報の識別に利用されるモノクロ画像フレームは、ナンバープレートの文字が鮮明に写っている画像フレームであるのが望ましい。
【０００５】
しかし、カラー映像データおよびモノクロ映像データを一つの映像データとして統合する技術では、カラー画像フレームとモノクロ画像フレームとが常時統合される。したがって、カラー映像データおよびモノクロ映像データを一つの映像データとして統合する技術では、処理に必要のないカラー画像フレームおよびモノクロ画像フレームも統合されてしまうため、演算コストに無駄が生じてしまう。
【０００６】
例えば、モノクロ画像データが走行車両の判別に利用される場合、車両が写っていないモノクロ画像フレームは走行車両の判別に不要であるため、カラー画像フレームに統合される必要がない。さらに言うと、同一車両が写っている複数のモノクロ画像フレームの少なくとも１枚が記録されれば、当該１枚のモノクロ画像フレームから車種判別が行われ得る。すなわち、同一車両が写っている複数のモノクロ画像フレームのすべてがカラー画像フレームに統合される必要はない。
【０００７】
そこで、本発明は、上記問題に鑑みてなされたものであり、本発明の目的とするところは、複数のカメラそれぞれの映像データに基づいて各処理に適した画像データを統合することが可能な技術を提供することにある。
【課題を解決するための手段】
【０００８】
上記問題を解決するために、本発明のある観点によれば、所定の被写体が撮影された、第１の連続する複数の画像フレームを第１の撮影部から取得する第１の画像フレーム取得部と、第１の選択条件に基づいて前記第１の連続する複数の画像フレームから一つの第１の画像フレームを選択し、当該第１の画像フレームを用いて前記所定の被写体の画像データを含んだ第１の画像データを生成する第１の画像データ生成部と、前記所定の被写体の所定の部分領域が撮影された、前記第１の連続する複数の画像フレームに対応した第２の連続する複数の画像フレームを第２の撮影部から取得する第２の画像フレーム取得部と、前記第１の選択条件とは異なる第２の選択条件に基づいて前記第２の連続する複数の画像フレームから一つの第２の画像フレームを選択し、当該第２の画像フレームを用いて前記部分領域の情報を含んだ第２の画像データを生成する第２の画像データ生成部と、前記第１の画像データと前記第２の画像データとを統合した記録画像データを生成する記録画像データ生成部と、と備える、記録画像データ生成装置が提供される。
【０００９】
前記所定の被写体は、車両であり、前記部分領域は、ナンバープレートであり、前記第２の画像データ生成部は、前記第２の画像フレームを用いて識別したナンバープレート情報を前記部分領域の情報として得るナンバープレート情報識別部を備えてもよい。
【００１０】
前記所定の被写体は、車両であり、前記部分領域は、前記車両の運転者の顔であり、前記第２の画像データ生成部は、前記第２の画像フレームを用いて識別した運転者の顔情報を前記部分領域の情報として得る顔情報識別部を備えてもよい。
【００１１】
前記第１の連続する複数の画像フレームは、カラー画像フレームであり、前記第２の連続する複数の画像フレームは、モノクロ画像フレームであってもよい。
【００１２】
前記第１の選択条件は、車両検出開始時刻から車両検出終了時刻までの所定のタイミングに撮影されたという条件であってもよい。
【００１３】
前記第１の選択条件は、ナンバープレート位置が所定の位置に到達したという条件であってもよい。
【００１４】
前記第１の選択条件は、ナンバープレートサイズが所定のサイズに到達したという条件であってもよい。
【００１５】
前記第２の選択条件は、ナンバープレート情報の識別精度が閾値を超えるという条件であってもよい。
【００１６】
また、本発明の別の観点によれば、所定の被写体が撮影された、第１の連続する複数の画像フレームを第１の撮影部から取得することと、第１の選択条件に基づいて前記第１の連続する複数の画像フレームから一つの第１の画像フレームを選択し、当該第１の画像フレームを用いて前記所定の被写体の画像データを含んだ第１の画像データを生成することと、前記所定の被写体の所定の部分領域が撮影された、前記第１の連続する複数の画像フレームに対応した第２の連続する複数の画像フレームを第２の撮影部から取得することと、前記第１の選択条件とは異なる第２の選択条件に基づいて前記第２の連続する複数の画像フレームから一つの第２の画像フレームを選択し、当該第２の画像フレームを用いて前記部分領域の情報を含んだ第２の画像データを生成する第２の画像データ生成部と、前記第１の画像データと前記第２の画像データとを統合した記録画像データを生成することと、と含む、記録画像データ生成方法が提供される。
【００１７】
また、本発明の別の観点によれば、コンピュータを、所定の被写体が撮影された、第１の連続する複数の画像フレームを第１の撮影部から取得する第１の画像フレーム取得部と、第１の選択条件に基づいて前記第１の連続する複数の画像フレームから一つの第１の画像フレームを選択し、当該第１の画像フレームを用いて前記所定の被写体の画像データを含んだ第１の画像データを生成する第１の画像データ生成部と、前記所定の被写体の所定の部分領域が撮影された、前記第１の連続する複数の画像フレームに対応した第２の連続する複数の画像フレームを第２の撮影部から取得する第２の画像フレーム取得部と、前記第１の選択条件とは異なる第２の選択条件に基づいて前記第２の連続する複数の画像フレームから一つの第２の画像フレームを選択し、当該第２の画像フレームを用いて前記部分領域の情報を含んだ第２の画像データを生成する第２の画像データ生成部と、前記第１の画像データと前記第２の画像データとを統合した記録画像データを生成する記録画像データ生成部と、と備える記録画像データ生成装置として機能させるためのプログラムが提供される。
【発明の効果】
【００１８】
以上説明したように本発明によれば、複数のカメラそれぞれの映像データに基づいて各処理に適した画像データを統合することが可能な技術が提供される。
【図面の簡単な説明】
【００１９】
【図１】第１の実施形態に係る記録画像データ生成システムの概要を説明するための図である。
【図２】同実施形態に係る記録画像データ生成装置の機能構成を示すブロック図である。
【図３】カラー画像選択条件の第１の例について説明するための図である。
【図４】カラー画像選択条件の第２の例について説明するための図である。
【図５】カラー画像選択条件の第３の例について説明するための図である。
【図６】モノクロ画像選択条件の例について説明するための図である。
【図７】選択カラー画像フレームと選択モノクロ画像フレームに写るナンバープレート領域との統合の例を示す図である。
【図８】第２の実施形態に係る記録画像データ生成装置の機能構成を示すブロック図である。
【図９】選択カラー画像フレームと選択モノクロ画像フレームに写る顔領域を含んだ領域との統合の例を示す図である。
【図１０】第２の実施形態に係る記録画像データ生成システムの概要を説明するための図である。
【図１１】第３の実施形態に係る記録画像データ生成装置の機能構成を示すブロック図である。
【図１２】選択カラー画像フレームと前面側ナンバープレート領域と背面側ナンバープレート領域との統合の例を示す図である。
【発明を実施するための形態】
【００２０】
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
【００２１】
また、本明細書および図面において、実質的に同一の機能構成を有する複数の構成要素を、同一の符号の後に異なる数字を付して区別する。また、異なる実施形態の類似する構成要素については、同一の符号の後に異なるアルファベットを付して区別する。ただし、実質的に同一の機能構成を有する複数の構成要素等の各々を特に区別する必要がない場合、同一符号のみを付する。
【００２２】
＜０．概要＞
本実施形態に係る記録画像データ生成システムは、記録画像データ生成装置と、所定の被写体の第１の連続する複数の画像フレームを撮影する第１の撮影部と、所定の被写体の所定の部分領域が撮影された、第１の連続する複数の画像フレームに対応した第２の連続する複数の画像フレームを撮影する第２の撮影部と、を有する。以下では、被写体の例として車両を主に用いて説明する。しかし、本実施形態に適用され得る被写体は、車両に限定されない。例えば、被写体は、船舶であってもよいし、電車であってもよいし、他の被写体であってもよい。
【００２３】
また、以下では、第１の連続する複数の画像フレームが、時系列に沿って連続して撮影された複数のカラー画像フレームである場合を想定する。すなわち、第１の撮影部がカラーカメラである場合を想定する。しかし、第１の撮影部はカラーカメラに限定されない。以下では、時系列に沿って連続して撮影された複数のカラー画像フレームを単に「カラー映像データ」とも言う。
【００２４】
また、以下では、第２の連続する複数の画像フレームが、時系列に沿って連続して撮影された複数のモノクロ画像フレームである場合を想定する。すなわち、第２の撮影部がモノクロカメラである場合を想定する。しかし、第２の撮影部はモノクロカメラに限定されない。以下では、時系列に沿って連続して撮影された複数のモノクロ画像フレームを単に「モノクロ映像データ」とも言う。
【００２５】
＜１．第１の実施形態＞
まず、第１の実施形態について説明する。
【００２６】
［１−１．システムの概要］
第１の実施形態に係る記録画像データ生成システムの概要について説明する。図１は、第１の実施形態に係る記録画像データ生成システムの概要を説明するための図である。図１に示したように、第１の実施形態に係る記録画像データ生成システム１Ａは、記録画像データ生成装置１０Ａと、カラーカメラ３０と、モノクロカメラ４０とを有する。カラーカメラ３０およびモノクロカメラ４０は、それぞれ記録画像データ生成装置１０Ａに接続されている。図１を参照すると、車線を走行する車両５０が示されている。車両５０の前面には、前面側ナンバープレート５１が設けられている。一方、車両５０の背面には、背面側ナンバープレート５２が設けられている。
【００２７】
一般に、モノクロ画像フレームは、カラー画像フレームよりも環境の影響を受けにくい。したがって、以下では、モノクロカメラ４０によって撮影されたモノクロ画像フレームに対して所定の識別処理および車両検出処理が行われる場合を想定する。しかし、識別処理および車両検出処理が行われる画像フレームは、モノクロ画像フレームに限定されない。例えば、識別処理および車両検出処理の少なくともいずれか一方は、カラー画像フレームに対して行われてもよい。一方、カラー画像フレームは、目視による確認に利用される。
【００２８】
第１の実施形態では、識別処理の例として、ナンバープレート情報の識別が行われる場合を想定する。しかし、識別処理は、ナンバープレート情報の識別に限定されない。以下では、ナンバープレート情報がモノクロ画像フレームに写るナンバープレート領域である場合を主に想定する。しかし、ナンバープレート情報は、ナンバープレート領域に限定されない。例えば、ナンバープレート情報は、ナンバープレートに記された文字を示す情報であってもよいし、ナンバープレート位置であってもよいし、ナンバープレートサイズであってもよい。あるいは、ナンバープレート情報は、ナンバープレートに記された文字の認識過程で得られる中間データ（例えば、ナンバープレート領域の特徴量など）であってもよいし、ナンバープレートの撮影条件（例えば、露光量など）であってもよい。
【００２９】
さらに、車両の前方から撮影されたモノクロ画像フレームからのほうが車両の後方から撮影されたモノクロ画像フレームからよりも識別処理が高精度に行われる可能性が高い。例えば、前面側ナンバープレート５１からのほうが、背面側ナンバープレート５２からよりも高精度にナンバープレート情報が識別される可能性が高い。そこで、第１の実施形態では、モノクロ映像データが車両の前方から撮影される場合を主に想定する。しかし、モノクロ映像データは、車両の後方から撮影されてもよい。
【００３０】
また、車両の前方から撮影されたカラー画像フレームのほうが車両の後方から撮影されたカラー画像フレームよりも目視によって確認すべき情報が多く含まれ得る。例えば、車両の前方から撮影されたカラー画像フレームには、車両の後方から撮影されたカラー画像フレームよりも、運転者の顔が写っている可能性が高い。そこで、第１の実施形態では、カラー映像データも、車両の前方から撮影される場合を主に想定する。しかし、カラー映像データは、車両の後方から撮影されてもよい。
【００３１】
カラーカメラ３０は、車線の上方に設けられており、時系列に沿って連続する複数のカラー画像フレーム（カラー映像データ）を撮影する。カラーカメラ３０は、車線を奥側から手前側に向かって走行する車両５０が撮影領域（以下、「カラーカメラ撮影領域」とも言う。）に進入したときに、車両５０の前面側ナンバープレート５１を斜め上方から見下ろすような角度で撮影することが可能である。しかし、カラーカメラ３０の設置位置は限定されない。例えば、カラーカメラ３０は道路脇に設置されていてもよい。カラーカメラ３０によって撮影されたカラー映像データは、記録画像データ生成装置１０Ａに提供される。
【００３２】
モノクロカメラ４０は、車線の上方に設けられており、車線を通過する車両５０のモノクロ映像データを撮影する。モノクロカメラ４０は、車線を奥側から手前側に向かって走行する車両５０が撮影領域（以下、「モノクロカメラ撮影領域」とも言う。）に進入したときに、車両５０の前面側ナンバープレート５１を斜め上方から見下ろすような角度で撮影することが可能である。カラーカメラ撮影領域とモノクロカメラ撮影領域とは、互いに重複する領域を有している（略一致しているのが望ましい）。カラーカメラ３０と同様にモノクロカメラ４０の設置位置は限定されない。
【００３３】
［１−２．記録画像データ生成装置の機能構成例］
続いて、本実施形態の詳細について説明する。まず、第１の実施形態に係る記録画像データ生成装置１０Ａの機能構成例について説明する。図２は、第１の実施形態に係る記録画像データ生成装置１０Ａの機能構成を示すブロック図である。図２に示すように、第１の実施形態に係る記録画像データ生成装置１０Ａは、第１の画像フレーム取得部１１０と、第２の画像フレーム取得部１２０と、第１の画像データ生成部１３０と、第２の画像データ生成部１４０と、記録画像データ生成部１５０と、記録画像データ蓄積部１６０とを備える。
【００３４】
第１の画像データ生成部１３０は、画像選択部１３１およびバッファ部１３２を備える。第２の画像データ生成部１４０は、車両検出部１４１、バッファ部１４２、ナンバープレート情報識別部１４３および画像選択部１４４を備える。ここで、バッファ部１３２、バッファ部１４２および記録画像データ蓄積部１６０は、メモリによって構成される。メモリの種類は限定されない。
【００３５】
第１の画像フレーム取得部１１０、第２の画像フレーム取得部１２０、画像選択部１３１、第２の画像データ生成部１４０、車両検出部１４１、ナンバープレート情報識別部１４３、画像選択部１４４および記録画像データ生成部１５０は、ＣＰＵ（Ｃｅｎｔｒａｌ  Ｐｒｏｃｅｓｓｉｎｇ  Ｕｎｉｔ）などを含み、不揮発性の記憶装置により記憶されているプログラムがＣＰＵによりＲＡＭ（Ｒａｎｄｏｍ  Ａｃｃｅｓｓ  Ｍｅｍｏｒｙ）に展開されて実行されることにより、その機能が実現され得る。このとき、当該プログラムを記録した、コンピュータに読み取り可能な記録媒体も提供され得る。
【００３６】
あるいは、第１の画像フレーム取得部１１０、第２の画像フレーム取得部１２０、画像選択部１３１、第２の画像データ生成部１４０、車両検出部１４１、ナンバープレート情報識別部１４３、画像選択部１４４および記録画像データ生成部１５０の少なくとも一部は、専用のハードウェアにより構成されていてもよいし、複数のハードウェアの組み合わせにより構成されてもよい。
【００３７】
なお、図２に示した例では、第１の画像データ生成部１３０が、記録画像データ生成装置１０Ａの内部に設けられている。しかし、第１の画像データ生成部１３０は、記録画像データ生成装置１０Ａの外部に備えられていてもよい。例えば、第１の画像データ生成部１３０は、カラーカメラ３０の内部に設けられていてもよい。また、図２に示した例では、第２の画像データ生成部１４０が、記録画像データ生成装置１０Ａの内部に設けられている。しかし、第２の画像データ生成部１４０は、記録画像データ生成装置１０Ａの外部に備えられていてもよい。例えば、第２の画像データ生成部１４０は、モノクロカメラ４０の内部に設けられていてもよい。
【００３８】
第１の画像フレーム取得部１１０は、車両が撮影されたカラー映像データをカラーカメラ３０から取得する。カラー映像データを構成する各カラー画像フレームには、撮影時刻が対応付けられている。一方、第２の画像フレーム取得部１２０は、車両の所定の部分領域が撮影されたモノクロ映像データをモノクロカメラ４０から取得する。モノクロ映像データを構成する各モノクロ画像フレームにも、撮影時刻が対応付けられている。したがって、カラー映像データとモノクロ映像データとの間においては、同一の撮影時刻に対応付けられたフレーム同士が対応する。
【００３９】
車両検出部１４１は、モノクロ映像データに基づいて各モノクロ画像フレームから車両が検出されるかを試みる。これによって、モノクロ映像データから車両が検出され始めた時刻、および、モノクロ映像データから当該車両（同一車両）が検出され終わった時刻が検出され得る。車両検出の手法は限定されない。さらに、車両検出部１４１は、車両が検出されたモノクロ画像フレームが存在した場合、当該モノクロ画像フレームに写る車両位置（車両座標）も検出する。
【００４０】
車両検出部１４１によって検出された車両検出開始時刻から車両検出終了時刻は、画像選択部１３１に通知される（画像選択部１３１と車両検出部１４１とは同期している）。そこで、画像選択部１３１は、車両検出開始時刻から車両検出終了時刻までの各カラー画像フレームをバッファ部１３２に一時的に記憶させる。一方、車両検出部１４１は、車両検出開始時刻から車両検出終了時刻までの各モノクロ画像フレームをバッファ部１３２に一時的に記憶させる。
【００４１】
ナンバープレート情報識別部１４３は、バッファ部１３２によって記憶されている車両検出開始時刻から車両検出終了時刻までの各モノクロ画像フレームに基づいてナンバープレート情報を識別する。具体的に、ナンバープレート情報識別部１４３は、上記したように、ナンバープレート情報の例としてモノクロ画像フレームに写るナンバープレート領域を識別する。
【００４２】
さらに、ナンバープレート情報識別部１４３は、モノクロ画像フレームに写るナンバープレートの位置（座標）またはナンバープレートサイズを識別してもよい。ここでは、ナンバープレートサイズがナンバープレートの横の長さである場合を主に想定する。しかし、ナンバープレートサイズは、ナンバープレートの横の長さに限定されず、ナンバープレートの縦の長さなどであってもよい。ナンバープレート情報識別部１４３によって、ナンバープレート位置またはナンバープレートサイズが識別された場合には、ナンバープレート位置またはナンバープレートサイズは、画像選択部１３１に通知されてよい。
【００４３】
画像選択部１３１は、第１の選択条件（以下、「カラー画像選択条件」とも言う。）に基づいてカラー映像データから一つのカラー画像フレーム（第１の画像フレームに該当する。以下、「選択カラー画像フレーム」とも言う。）を選択する。選択カラー画像フレームには、車両の全体が写る場合が想定されるが、必ずしも車両の全体が写っていなくてもよく、車両の一部のみが写っていてもよい（例えば、車両の一部が他の物体に遮蔽されていてもよい）。
【００４４】
ここで、カラー画像選択条件は、特定の条件に限定されない。例えば、カラー画像選択条件は、車両検出部１４１から通知された車両検出開始時刻から車両検出終了時刻までの所定のタイミングに撮影されたという条件（第１の例）であってよい。かかるタイミングであれば、選択カラー画像フレームに車両がある程度以上大きく鮮明に写っていることが想定されるからである。以下では、所定のタイミングが、車両検出開始時刻と車両検出終了時刻との中間時刻である場合を主に想定する。しかし、所定のタイミングは、特定のタイミングに限定されない。
【００４５】
図３は、カラー画像選択条件の第１の例について説明するための図である。図３を参照すると、車両検出開始時刻（Ｔ＝Ｔ１）におけるモノクロ画像フレーム７１が示されている。また、図３を参照すると、車両検出終了時刻（Ｔ＝Ｔ２）におけるモノクロ画像フレーム７３が示されている。また、図３を参照すると、車両検出開始時刻（Ｔ＝Ｔ１）と車両検出終了時刻（Ｔ＝Ｔ２）との中間時刻（Ｔ＝（Ｔ１＋Ｔ２）／２）におけるモノクロ画像フレーム７２が示されている。第１の例では、モノクロ画像フレーム７２に対応するカラー画像フレームが選択カラー画像フレームとして画像選択部１３１によって選択される。
【００４６】
カラー画像選択条件の第１の例について説明した。カラー画像選択条件は、モノクロ画像フレームから識別されるナンバープレート位置が所定の位置（以下、「基準位置」とも言う。）に到達したという条件（第２の例）であってもよい。かかるタイミングであれば、選択カラー画像フレームに車両がある程度以上大きく鮮明に写っていることが想定されるからである。以下では、ナンバープレート位置および基準位置が、モノクロ画像フレームにおける縦方向の位置である場合を想定する。しかし、ナンバープレート位置および基準位置は、モノクロ画像フレームにおける縦方向の位置に限定されない（モノクロカメラ４０の設置位置および設置方向に応じて変更され得る）。
【００４７】
図４は、カラー画像選択条件の第２の例について説明するための図である。図４を参照すると、車両検出開始時刻におけるモノクロ画像フレーム７１が示されている。また、モノクロ画像フレーム７１から識別されたナンバープレート位置Ｐとあらかじめ決められた基準位置Ｐ０とが示されている。モノクロ画像フレーム７１においては、ナンバープレート位置Ｐが基準位置Ｐ０よりも小さい（上である）。したがって、モノクロ画像フレーム７１においては、ナンバープレート位置Ｐが基準位置Ｐ０にまだ到達していない。
【００４８】
図４を参照すると、車両検出開始時刻から所定時間後に撮影されたモノクロ画像フレーム７２が示されている。モノクロ画像フレーム７２においては、ナンバープレート位置Ｐが基準位置Ｐ０よりも大きい（下である）。したがって、モノクロ画像フレーム７２においては、ナンバープレート位置Ｐが基準位置Ｐ０に既に到達している。したがって、第２の例では、モノクロ画像フレーム７２に対応するカラー画像フレームが選択カラー画像フレームとして画像選択部１３１によって選択される。
【００４９】
カラー画像選択条件の第２の例について説明した。カラー画像選択条件は、モノクロ画像フレームから識別されるナンバープレートサイズが所定のサイズ（以下、「基準サイズ」とも言う。）に到達したという条件（第３の例）であってもよい。かかるタイミングであれば、選択カラー画像フレームに車両がある程度以上大きく鮮明に写っていることが想定されるからである。
【００５０】
図５は、カラー画像選択条件の第３の例について説明するための図である。図５を参照すると、車両検出開始時刻におけるモノクロ画像フレーム７１が示されている。また、モノクロ画像フレーム７１から識別されたナンバープレートサイズＺ（車両５０の前面側ナンバープレート５１のサイズＺ）とあらかじめ決められた基準サイズＺ０とが示されている。モノクロ画像フレーム７１においては、ナンバープレートサイズＺが基準サイズＺ０よりも小さい。したがって、モノクロ画像フレーム７１においては、ナンバープレートサイズＺが基準サイズＺ０にまだ到達していない。
【００５１】
図５を参照すると、車両検出開始時刻から所定時間後に撮影されたモノクロ画像フレーム７２が示されている。モノクロ画像フレーム７２においては、ナンバープレートサイズＺが基準サイズＺ０よりも大きい。したがって、モノクロ画像フレーム７２においては、ナンバープレートサイズＺが基準サイズＺ０に既に到達している。したがって、第３の例では、モノクロ画像フレーム７２に対応するカラー画像フレームが選択カラー画像フレームとして画像選択部１３１によって選択される。
【００５２】
カラー画像選択条件の第３の例について説明した。図２に戻って説明を続ける。画像選択部１３１は、選択カラー画像フレームを用いて車両のカラー画像データを含んだ第１の画像データを生成する。以下では、第１の画像データの例として選択カラー画像フレームそのものが用いられる場合を想定する。しかし、第１の画像データは、選択カラー画像フレームそのものでなくてもよい。例えば、第１の画像データは、選択カラー画像データから得られる何らかの情報であってもよい。画像選択部１３１は、第１の画像データの例として選択カラー画像フレームを記録画像データ生成部１５０に出力する。
【００５３】
画像選択部１４４は、カラー画像選択条件とは異なる第２の選択条件（以下、「モノクロ画像選択条件」とも言う。）に基づいてモノクロ映像データから一つのモノクロ画像フレーム（第２の画像フレームに該当する。以下、「選択モノクロ画像フレーム」とも言う。）を選択する。そして、画像選択部１４４は、選択モノクロ画像フレームを用いて部分領域の情報を含んだモノクロ画像データ（第２の画像データ）を生成する。
【００５４】
第１の実施形態では、部分領域が車両のナンバープレート領域である場合を主に想定する。しかし、部分領域は車両のナンバープレート領域に限定されない。なお、部分領域は、車両の一部の領域であるが、必ずしもカラー映像データに写っている領域とは限らない。以下では、部分領域の情報が、選択モノクロ画像フレームに写るナンバープレート領域そのものである場合を想定する。しかし、部分領域の情報は、選択モノクロ画像フレームに写るナンバープレート領域に限定されない。例えば、部分領域の情報は、選択モノクロ画像フレームに写るナンバープレート領域から認識される文字を示す情報であってもよい。
【００５５】
ここで、モノクロ画像選択条件は、特定の条件に限定されない。例えば、モノクロ画像選択条件は、モノクロ画像フレームに対するナンバープレート情報の識別精度（以下、「認識スコア」とも言う。）が閾値を超えるという条件であってよい。かかる条件が満たされていれば、選択モノクロ画像フレームからナンバープレート情報がある程度以上高い精度で得られることが想定されるからである。以下では、モノクロ画像選択条件が、認識スコアが閾値を超えるという条件かつ認識スコアが最大となるという条件である場合を主に想定する。
【００５６】
図６は、モノクロ画像選択条件の例について説明するための図である。ナンバープレート情報識別部１４３は、モノクロ画像フレームから車両が検出され始めると、モノクロ画像フレームからナンバープレート情報を識別する。このとき、ナンバープレート情報識別部１４３は、認識スコアも算出する。画像選択部１４４は、認識スコアが閾値を超えるモノクロ画像フレームの検出を試みる。
【００５７】
図６を参照すると、認識スコア（Ｇ＝Ｇ２）が閾値（ＧＴｈ）を超えたモノクロ画像フレーム７１が示されている。画像選択部１４４は、認識スコアが閾値を超えたモノクロ画像フレーム７１が検出されると、モノクロ画像フレーム７１が撮影されてから所定時間後に撮影されたモノクロ画像フレーム７２の認識スコア（Ｇ＝Ｇ３）が閾値を超えるか否かを判定する。ここでは、モノクロ画像フレーム７２の認識スコア（Ｇ＝Ｇ３）も閾値（ＧＴｈ）を超えた場合を想定する。
【００５８】
かかる場合には、画像選択部１４４は、モノクロ画像フレーム７１が撮影されてから所定時間前に撮影されたモノクロ画像フレーム７１の認識スコア（Ｇ＝Ｇ１）が閾値（ＧＴｈ）を超えるか否かを判定する。ここでは、モノクロ画像フレーム７１の認識スコア（Ｇ＝Ｇ１）も閾値（ＧＴｈ）を超えた場合を想定する。このとき、画像選択部１４４は、認識スコアが閾値を超えたモノクロ画像フレーム７１〜７３から、認識スコアが最大のモノクロ画像フレームを選択モノクロ画像フレームとして選択すればよい。
【００５９】
なお、仮にモノクロ画像フレーム７１の認識スコアが閾値を超えていない場合には、モノクロ画像フレーム７１〜７２から、認識スコアが最大のモノクロ画像フレームを選択モノクロ画像フレームとして選択すればよい。あるいは、モノクロ画像フレームＧ７３の認識スコアが閾値を超えていない場合には、モノクロ画像フレーム７１を選択モノクロ画像フレームとして選択すればよい。また、図６に示した例では、最大３つのモノクロ画像フレームの中から認識スコアが最大のモノクロ画像フレームが選択される場合が示されているが、幾つのモノクロ画像フレームの中から認識スコアが最大のモノクロ画像フレームが選択されてもよい。
【００６０】
図２に戻って説明を続ける。記録画像データ生成部１５０は、選択カラー画像フレームと、選択モノクロ画像フレームに写るナンバープレート領域とを統合した記録画像データを生成する。選択カラー画像フレームと選択モノクロ画像フレームに写るナンバープレート領域との統合の例について説明する。
【００６１】
図７は、選択カラー画像フレームと選択モノクロ画像フレームに写るナンバープレート領域との統合の例を示す図である。図７を参照すると、選択カラー画像フレーム６２が示されている。また、選択モノクロ画像フレームに写るナンバープレート領域８１が示されている。一例として、記録画像データ生成部１５０は、選択カラー画像フレーム６２にナンバープレート領域８１を重畳させることによって、選択カラー画像フレーム６２とナンバープレート領域８１とを統合して、記録画像データ９１を生成する。しかし、選択カラー画像フレーム６２には、ナンバープレート領域８１に限らず、他のナンバープレート情報が統合されてもよい。
【００６２】
例えば、選択カラー画像フレーム６２と統合されるナンバープレート情報は、ナンバープレートに記された文字を示す情報であってもよいし、ナンバープレート位置であってもよいし、ナンバープレートサイズであってもよいし、ナンバープレートに記された文字の認識過程で得られる中間データ（例えば、ナンバープレート領域の特徴量など）であってもよいし、ナンバープレートの撮影条件（例えば、露光量など）であってもよい。
【００６３】
さらに、ナンバープレート情報は、選択カラー画像フレーム６２に対してどのように統合されてもよい。例えば、ナンバープレート情報は、選択カラー画像フレーム６２に対して上記のように視認可能に統合されてもよいし、選択カラー画像フレーム６２に対して視認できないように統合されてもよい。例えば、ナンバープレート情報は、選択カラー画像フレーム６２における複数のピクセルに埋め込まれてもよい。あるいは、記録画像データが記録されるファイルが複数チャネルから構成される場合、３つのチャネルにＲＧＢそれぞれのカラー選択画像フレームが記録され、１つのチャネルにナンバープレート情報が記録されてもよい。
【００６４】
記録画像データ生成部１５０は、生成した記録画像データを記録画像データ蓄積部１６０に蓄積させる。
【００６５】
［１−３．第１の実施形態の効果］
以上、第１の実施形態について説明した。上記したように、モノクロカメラ４０によって撮影されたモノクロ映像データからナンバープレート情報を識別しやすいモノクロ画像フレームを選択するための条件と、カラーカメラ３０によって撮影されたカラー映像データから目視確認のしやすいカラー画像フレームを選択するための条件とは異なる場合があり得る。第１の実施形態によれば、常時モノクロ画像フレームおよびカラー画像フレームが記録される場合と比較して、演算コストの無駄を低減しつつ、ナンバープレート情報を識別しやすいモノクロ画像フレームと目視確認のしやすいカラー画像フレームとが自動的に選択されて統合される。
【００６６】
＜２．第２の実施形態＞
続いて、第２の実施形態について説明する。
【００６７】
［２−１．システムの概要］
第２の実施形態に係る記録画像データ生成システムの概要について説明する。
【００６８】
第１の実施形態では、識別処理の例として、ナンバープレート情報の識別が行われる場合を想定した。第２の実施形態では、識別処理の例として、車両の運転者の顔情報の識別が行われる場合を想定する。以下では、顔情報がモノクロ画像フレームに写る運転者の顔領域である場合を主に想定する。しかし、顔情報は、運転者の顔領域に限定されない。例えば、顔情報は、運転者の顔領域から認識される運転者の属性（例えば、年齢、性別など）であってもよい。あるいは、顔情報は、運転者の属性の認識過程で得られる中間データ（例えば、顔領域の特徴量など）であってもよいし、顔の撮影条件（例えば、露光量など）であってもよい。
【００６９】
さらに、車両の前方から撮影されたモノクロ画像フレームからのほうが車両の後方から撮影されたモノクロ画像フレームからよりも識別処理が高精度に行われる可能性が高い。例えば、車両の前方から撮影されたモノクロ画像フレームからのほうが、車両の後方から撮影されたモノクロ画像フレームからよりも高精度に顔情報が識別される可能性が高い。そこで、第２の実施形態においても、モノクロ映像データが車両の前方から撮影される場合を主に想定する。しかし、モノクロ映像データは、車両の後方から撮影されてもよい。
【００７０】
カラー映像データは、第２の実施形態においても、第１の実施形態と同様に、車両の前方から撮影される場合を主に想定する。しかし、第２の実施形態においても、カラー映像データは、第１の実施形態と同様に、車両の後方から撮影されてもよい。
【００７１】
［２−２．記録画像データ生成装置の機能構成例］
続いて、第２の実施形態に係る記録画像データ生成装置１０Ｂの機能構成例について説明する。図８は、第２の実施形態に係る記録画像データ生成装置１０Ｂの機能構成を示すブロック図である。図８に示すように、第２の実施形態に係る記録画像データ生成装置１０Ｂは、ナンバープレート情報識別部１４３の代わりに顔情報識別部１４５を備える点において、第１の実施形態に係る記録画像データ生成装置１０Ａと異なる。したがって、第２の実施形態では、顔情報識別部１４５について主に説明し、他の構成についての詳細は適宜省略する。
【００７２】
顔情報識別部１４５は、バッファ部１３２によって記憶されている車両検出開始時刻から車両検出終了時刻までの各モノクロ画像フレームに基づいて顔情報を識別する。具体的に、顔情報識別部１４５は、上記したように、顔情報の例としてモノクロ画像フレームに写る運転者の顔領域を含んだ領域を識別する。画像選択部１３１による選択カラー画像フレームの選択、および、画像選択部１４４による選択モノクロ画像フレームの選択は、ナンバープレートの代わりに運転者の顔が用いられる他（かつ、ナンバープレートに記された文字の認識の代わりに、運転者の属性の認識が用いられる他）、第１の実施形態と同様に行われ得る。
【００７３】
記録画像データ生成部１５０は、選択カラー画像フレームと、選択モノクロ画像フレームに写る顔領域を含んだ領域とを統合した記録画像データを生成する。選択カラー画像フレームと選択モノクロ画像フレームに写る顔領域を含んだ領域との統合の例について説明する。
【００７４】
図９は、選択カラー画像フレームと選択モノクロ画像フレームに写る顔領域を含んだ領域との統合の例を示す図である。図９を参照すると、選択カラー画像フレーム６２が示されている。また、選択モノクロ画像フレームに写る運転者の顔領域を含んだ領域８２が示されている。一例として、記録画像データ生成部１５０は、選択カラー画像フレーム６２に顔領域を含んだ領域８２を重畳させることによって、選択カラー画像フレーム６２と顔領域を含んだ領域８２とを統合して、記録画像データ９２を生成する。しかし、選択カラー画像フレーム６２には、顔領域を含んだ領域８２に限らず、他の顔情報が統合されてもよい。
【００７５】
例えば、選択カラー画像フレーム６２と統合される顔情報は、運転者の属性であってもよいし、運転者の属性の認識過程で得られる中間データ（例えば、運転者の顔領域の特徴量など）であってもよいし、顔の撮影条件（例えば、露光量など）であってもよい。
【００７６】
さらに、運転者の顔情報は、選択カラー画像フレーム６２に対してどのように統合されてもよい。例えば、運転者の顔情報は、選択カラー画像フレーム６２に対して上記のように視認可能に統合されてもよいし、第１の実施形態と同様に、選択カラー画像フレーム６２に対して視認できないように統合されてもよい。記録画像データ生成部１５０は、生成した記録画像データを記録画像データ蓄積部１６０に蓄積させる。
【００７７】
［２−３．第２の実施形態の効果］
以上、第２の実施形態について説明した。上記したように、モノクロカメラ４０によって撮影されたモノクロ映像データから顔情報を識別しやすいモノクロ画像フレームを選択するための条件と、カラーカメラ３０によって撮影されたカラー映像データから目視確認のしやすいカラー画像フレームを選択するための条件とは異なる場合があり得る。第２の実施形態によれば、常時モノクロ画像フレームおよびカラー画像フレームが記録される場合と比較して、演算コストの無駄を低減しつつ、顔情報を識別しやすいモノクロ画像フレームと目視確認のしやすいカラー画像フレームとが自動的に選択されて統合される。
【００７８】
＜２．第３の実施形態＞
続いて、第３の実施形態について説明する。
【００７９】
［３−１．システムの概要］
まず、第３の実施形態に係る記録画像データ生成システムの概要について説明する。図１０は、第２の実施形態に係る記録画像データ生成システムの概要を説明するための図である。図１０に示したように、第２の実施形態に係る記録画像データ生成システム１Ｃは、記録画像データ生成装置１０Ｃ、カラーカメラ３０およびモノクロカメラ４０の他、モノクロカメラ４５を有する。モノクロカメラ４５も記録画像データ生成装置１０Ｃに接続されている。図１０を参照すると、車線を走行する車両５０が示されている。車両５０の前面には、前面側ナンバープレート５１が設けられている。一方、車両５０の背面には、背面側ナンバープレート５２が設けられている。
【００８０】
モノクロカメラ４０は、ある時刻（Ｔ＝Ｔ１０）において、車両５０を前方から撮影している。したがって、モノクロカメラ４０は、車両５０の前面（前面側ナンバープレート５１を含む）を撮影して前面側モノクロ画像フレームを得る。一方、モノクロカメラ４５は、所定時間経過後のある時刻（Ｔ＝２０）において、車両５０を後方から撮影している。したがって、カラーカメラ３０は、車両５０の背面（背面側ナンバープレート５２を含む）を撮影して背面側モノクロ画像フレームを得る。
【００８１】
第２の実施形態では、モノクロカメラ４０およびモノクロカメラ４５それぞれによって撮影されたモノクロ画像フレームに基づいて所定の識別処理が行われる場合を想定する。また、第３の実施形態では、第１の実施形態と同様に、識別処理の例として、ナンバープレート情報の識別が行われる場合を想定する。しかし、識別処理は、ナンバープレート情報の識別に限定されない。
【００８２】
モノクロカメラ４５は、車線の上方に設けられており、車線を通過する車両５０の背面側モノクロ映像データを撮影する。モノクロカメラ４５は、車線を手前側から奥側に向かって走行する車両５０が撮影領域に進入したときに、車両５０の背面側ナンバープレート５２を斜め上方から見下ろすような角度で撮影することが可能である。モノクロカメラ４５の設置位置も限定されない。
【００８３】
［３−２．記録画像データ生成装置の機能構成例］
続いて、第３の実施形態に係る記録画像データ生成装置１０Ｃの機能構成例について説明する。図１１は、第３の実施形態に係る記録画像データ生成装置１０Ｃの機能構成を示すブロック図である。図１１に示すように、第３の実施形態に係る記録画像データ生成装置１０Ｃは、画像選択部１４４の代わりに画像選択部１４６を備える点において、第１の実施形態に係る記録画像データ生成装置１０Ａと異なる。したがって、第３の実施形態では、画像選択部１４６について主に説明し、他の構成についての詳細は適宜省略する。
【００８４】
画像選択部１４６は、前面側モノクロ映像データおよび背面側モノクロ映像データに基づいて、選択モノクロ画像フレームを選択する。
【００８５】
一例として、画像選択部１４６は、モノクロ画像選択条件に基づいて、前面側モノクロ映像データから画像フレームを選択する。そして、画像選択部１４６は、前面側モノクロ映像データから選択された画像フレームの認識スコアが閾値よりも低かった場合に、モノクロ画像選択条件に基づいて、背面側モノクロ映像データからも画像フレームを選択する。そして、前面側モノクロ映像データおよび背面側モノクロ映像データそれぞれから選択された画像フレームを両方とも選択モノクロ画像フレームとして選択してもよい。
【００８６】
このとき、記録画像データ生成部１５０は、選択カラー画像フレームと、前面側モノクロ映像データから選択された画像フレームに写るナンバープレート領域（以下、「前面側ナンバープレート領域」とも言う。）と、背面側モノクロ映像データから選択された画像フレームに写るナンバープレート領域（以下、「背面側ナンバープレート領域」とも言う。）と、を統合した記録画像データを生成すればよい。
【００８７】
図１２は、選択カラー画像フレームと前面側ナンバープレート領域と背面側ナンバープレート領域との統合の例を示す図である。図１２を参照すると、選択カラー画像フレーム６２が示されている。また、前面側ナンバープレート領域８１および背面側ナンバープレート領域８３が示されている。一例として、記録画像データ生成部１５０は、選択カラー画像フレーム６２に前面側ナンバープレート領域８１および背面側ナンバープレート領域８３を重畳させることによって、選択カラー画像フレーム６２と前面側ナンバープレート領域８１および背面側ナンバープレート領域８３とを統合して、記録画像データ９３を生成する。
【００８８】
なお、上記では、モノクロ画像選択条件に基づいて、前面側モノクロ映像データから画像フレームを選択し、当該画像フレームの認識スコアが閾値よりも低い場合を想定した。一方、画像選択部１４６は、モノクロ画像選択条件に基づいて、前面側モノクロ映像データから画像フレームを選択し、当該画像フレームの認識スコアが閾値よりも高い場合には、前面側モノクロ映像データから識別された画像フレームだけを選択モノクロ画像フレームとして選択してもよい。
【００８９】
あるいは、画像選択部１４６は、モノクロ画像選択条件に基づいて、前面側モノクロ映像データおよび背面側モノクロ映像データそれぞれから画像フレームを選択し、前面側モノクロ映像データおよび背面側モノクロ映像データそれぞれから選択された画像フレームに写るナンバープレート領域をマージして選択モノクロ画像フレームを得てもよい。例えば、画像選択部１４６は、前面側モノクロ映像データから選択された画像フレームに写るナンバープレートの一部の文字列（例えば、前半文字列）と背面側モノクロ映像データから選択された画像フレームに写るナンバープレートの残りの文字列（例えば、後半文字列）とをマージして選択モノクロ画像フレームを得てもよい。
【００９０】
あるいは、画像選択部１４６は、モノクロ画像選択条件に基づいて、前面側モノクロ映像データおよび背面側モノクロ映像データそれぞれから画像フレームを選択し、前面側モノクロ映像データおよび背面側モノクロ映像データそれぞれから画像フレームのうち、より認識スコアが高い画像フレームを選択モノクロ画像フレームとして選択してもよい。
【００９１】
［３−３．第３の実施形態の効果］
以上、第３の実施形態について説明した。第３の実施形態によれば、ナンバープレート情報の識別にモノクロカメラが２台利用される。より詳細には、車両を前方から撮影するモノクロカメラ（すなわち、前面側ナンバープレートを撮影するモノクロカメラ）と、車両を後方から撮影するモノクロカメラ（すなわち、背面側ナンバープレートを撮影するモノクロカメラ）の２台が使用される。したがって、第３の実施形態によれば、より高精度なナンバープレート情報を得ることが可能となる。
【００９２】
＜４．変形例の説明＞
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
【００９３】
例えば、上記では、記録画像データ生成システムが、モノクロカメラおよびカラーカメラの少なくとも２台のカメラを有する場合を主に想定した。しかし、記録画像データ生成システムは、モノクロカメラおよびカラーカメラの２台のカメラを有していなくてもよい。例えば、記録画像データ生成システムは、１台のカメラを有してもよい（すなわち、第１の撮像部と第２の撮像部とは共通のカメラであってもよい）。かかる場合には、車両全体が写る画像フレームは、１台のカメラによって撮影された画像フレームの解像度を低下させてから蓄積されてよい。一方、ナンバープレート領域または顔領域は、１台のカメラによって撮影された画像フレームの解像度を変えずに蓄積されてよい。
【００９４】
また、上記では、運転者および車両全体の様子を確認しやすいカラー画像フレームが選択されて記録される場合を想定した。また、ナンバープレートの文字が鮮明に写っているモノクロ画像フレームが選択されて記録される場合を想定した。しかし、識別処理（例えば、ナンバープレート情報の識別など）に失敗した場合に、識別処理に失敗した原因を特定するための画像フレーム（モノクロ画像フレームおよびカラー画像フレームの少なくともいずれか一方）が画像選択部１３１によって選択され、記録画像データ蓄積部１６０に記録されてもよい。そうすれば、かかる画像フレームは、識別処理のアルゴリズム改善のために利用され得る。
【００９５】
例えば、車両の前方から撮影して得られたモノクロ画像フレームに基づく前面側ナンバープレート情報の識別に失敗した場合、車両の後方から撮影して得られた画像フレーム（モノクロ画像フレームおよびカラー画像フレームの少なくともいずれか一方）が記録されてもよい。あるいは、自動二輪車には、一般的に前面側ナンバープレートが付いておらず、背面側ナンバープレートが付いているため、自動二輪車の後方から撮影して得られたモノクロ画像フレームに基づく背面側ナンバープレート情報の識別に失敗した場合、自動二輪車の前方から撮影して得られた画像フレーム（モノクロ画像フレームおよびカラー画像フレームの少なくともいずれか一方）が記録されてもよい。
【符号の説明】
【００９６】
１Ａ、１Ｃ  記録画像データ生成システム
１０Ａ〜１０Ｃ  記録画像データ生成装置
３０    カラーカメラ
４０    モノクロカメラ
４５    モノクロカメラ
５０    車両
１１０  第１の画像フレーム取得部
１２０  第２の画像フレーム取得部
１３０  第１の画像データ生成部
１３１  画像選択部
１３２  バッファ部
１４０  第２の画像データ生成部
１４１  車両検出部
１４２  バッファ部
１４３  ナンバープレート情報識別部
１４４  画像選択部
１４５  顔情報識別部
１４６  画像選択部
１５０  記録画像データ生成部
１６０  記録画像データ蓄積部
【図１】
2020135406.tif 000003
【図２】
2020135406.tif 000004
【図３】
2020135406.tif 000005
【図４】
2020135406.tif 000006
【図５】
2020135406.tif 000007
【図６】
2020135406.tif 000008
【図７】
2020135406.tif 000009
【図８】
2020135406.tif 000010
【図９】
2020135406.tif 000011
【図１０】
2020135406.tif 000012
【図１１】
2020135406.tif 000013
【図１２】
2020135406.tif 000014